Re: [問題] 如何讀取大量json檔

看板Python作者uranusjr (←這人是超級笨蛋)時間7年前 (2017/12/07 22:21)推噓1(1推 0噓 0→)

留言1則, 1人參與討論串2/2 (看更多)

※ 引述《a11780922 (蘿蔔特務)》之銘言： : 我的檔案裡面有很多json 像是這樣 : : [太長了, 略] : 好幾個獨立的json : 但是我要load時就會錯誤說有太多json : 請問我要怎麼這樣讀取json呢 : 我的目的是要先把裡面的/r/n換掉再轉成CSV檔 : 還請多多指教謝謝如果你不想用一些 hack 預處理資料可以試試看 json 模組裡比較底層的工具 https://docs.python.org/3/library/json.html#json.JSONDecoder.raw_decode Decode a JSON document from s (a str beginning with a JSON document) and return a 2-tuple of the Python representation and the index in s where the document ended. This can be used to decode a JSON document from a string that may have extraneous data at the end. 範例： import json data = '{"foo": 1} {"bar": 2} [null, "da", "ta"]' decoder = json.JSONDecoder() # JSON 解碼器, json.loads 的底層. objects = [] while data: o, i = decoder.raw_decode(data) # 解碼一個 top-level object. objects.append(o) data = data[i:].lstrip() # 繼續解碼剩下的資料, 直到結束. 注意每次處理資料時需要 lstrip() 雖然 raw_decode() 允許結尾有多餘資料, 但開頭就不行還是得把多的空白與換行清掉 -- ╱￣￣￣╲ ▏◢█◣ ▏ ︻█︻█ ▏ 成龍表示：是喔... ′/ ‵ ▏ ╰╯ █╱ ψQSWEET ◥︶█◤ -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 218.161.19.12 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1512656502.A.25A.html