板上各為前輩好
小弟這邊有個JSON檔大概500MB左右 但一直無法順利讀入
import ijson
f = open('news_780796.json',mode='rb')
for url in ijson.items(f,'url'): #"url", "timestamp"
print(url)
會出現MemoryError
環境
Windows XP
Python 3.3
6GB RAM
想請問板上高手
1.如果完全不知道內部格式 想要只讀入前10筆資料怎麼個寫法呢?
2.如果想要全部讀入來處理的話 應該怎麼寫呢?
3.如果要處理這樣的檔案 系統的配置建議應該是怎麼樣呢?
感謝協助