本文目錄一覽:
Python爬蟲(七)數據處理方法之JSON
JSON 指的是 JavaScript 對象表示法(JavaScript Object Notation),是輕量級的文本數據交換格式,且具有自我描述性,更易理解。
JSON看起來像python類型(列表,字典)的字元串。
在之前的文章中,我們說到了怎麼用response的方法,獲取到網頁正確解碼後的字元串。如果還有不懂的,可以先閱讀 Python爬蟲(三)Requests庫 。接下來以有道翻譯為例子,說說怎麼通過網頁解碼後的字元串,提取到翻譯結果。
再結合上述有道翻譯的例子,得到字典類型的返回結果,並提取出來翻譯結果。
將上述例子的dict_json換成str字元串,再寫入文本中。
執行完上述的程序,會得到一個fanyi.txt的文件,其結果如下:{“type”: “ZH_CN2EN”, “errorCode”: 0, “elapsedTime”: 1, “translateResult”: [[{“src”: “\u4eba\u751f\u82e6\u77ed\uff0c\u6211\u7528python”, “tgt”: “Life is too short, I use python”}]]}。這樣子的一份文檔,中文部分顯示的是二進位,且格式非常不利於閱讀,這並不是我們想要的結果。好在json.dumps()為我們提供的兩個方法,以幫助我們更好閱讀文檔。
1.ensure_ascii,能夠讓中文顯示成中文;
2.indent,能夠讓下一行在第一行的基礎上空格。
其用法如下:
【Python】淺談python中的json
一 前言
最近一直在做開發相關的工作–基於Django的web 平台,其中需要從model層傳輸數據到view 層做數據展示或者做業務邏輯處理。我們採用通用的Json格式–Json(JavaScript Object Notation) 是一種輕量級的數據交換格式,易於閱讀和程序解析。
二 認識Json
2.1 Json 結構
常見的Json格式為 「名稱/值」對的集合,其中 值可以是對象,列表,字典,字元串等等。比如
backup_data = {“back_to_host”: “dbbk0”,
“ip_address”: “10.10.20.3”,
“host_name”: “rac4”,
“port”: 3306}
2.2 使用Json
Python的Json模塊序列化與反序列化的過程分別是 編碼和解碼。這兩個過程涉及到兩組不同的函數
編碼 把一個Python對象編碼轉換成Json字元串,json.dumps(data)/json.dump(data,file_handler)
解碼 把Json格式字元串解碼轉換成Python對象,json.loads(data)/json.load(file_handler)
在python中要使用Json模塊做相關操作,必須先導入:
import Json
2.3 主要函數
編碼函數主要有 json.dumps(data)/json.dump(data,file_handler)
json.dumps()的參數是將python對象轉換為字元串,如使用json.dumps序列化的對象json_dumps=json.dumps({‘a’:1, ‘b’:2}) ,json_dumps='{“b”: 2, “a”: 1}’
json.dump 是將內置類型序列化為json對象後寫入文件。
解碼函數主要由json.loads(data)/json.load(file_handler)
json.loads的參數是內存對象,把Json格式字元串解碼轉換成Python對象,json_loads=json.loads(d_json) #{ b”: 2, “a”: 1},使用load重新反序列化為dict
json.load()的參數針對文件句柄,比如本地有一個文件/tmp/test.json json_load=json.load(open(‘/tmp/test.json’))
具體案例參考如下:
In [3]: data={“back_to_host”: “rac1”,
…: “ip_address”: “10.215.20.3”,
…: “host_name”: “rac3”,
…: “port”: 3306}
In [7]: json_str=json.dumps(data)
In [8]: print json_str
{“ip_address”: “10.215.20.3”, “back_to_host”: “rac1”, “host_name”: “rac3”, “port”: 3306}
In [9]: json_loads=json.load(json_str)
—————————————————————————
AttributeError Traceback (most recent call last)
ipython-input-9-180506f16431 in module()
—- 1 json_loads=json.load(json_str)
/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/json/__init__.pyc in load(fp, encoding, cls, object_hook, parse_float, parse_int, parse_constant, object_pairs_hook, **kw)
284
285 “”
注意 從上面的報錯信息來看 json.loads 傳參是字元串類型,並不是文件句柄,沒有 read()屬性。
In [10]: json_loads=json.loads(json_str)
In [11]: print json_loads
{u’back_to_host’: u’rac1′, u’ip_address’: u’10.215.20.3′, u’host_name’: u’rac3′, u’port’: 3306}
In [12]: type(json_loads)
Out[12]: dict
In [13]: type(json_str)
Out[13]: str
利用dump 將數據寫入 dump.json
In [17]: with open(‘/tmp/dump.json’,’w’) as f:
…: json.dump(json_str,f)
…:
yangyiDBA:~ yangyi$ cat /tmp/dump.json
“{\”ip_address\”: \”10.10.20.3\”, \”back_to_host\”: \”rac1\”, \”host_name\”: \”rac3\”, \”port\”: 3306}”
yangyiDBA:~ yangyi$
利用json.load 將dump.sjon的數據讀出來並賦值給 data
In [18]: with open(‘/tmp/dump.json’,’r’) as f:
…: data=json.load(f)
…:
In [19]: print data
{“ip_address”: “10.10.20.3”, “back_to_host”: “rac1”, “host_name”: “rac3”, “port”: 3306}
三 小結
本文算是一篇學習筆記,主要對比了json.loads/json.load , json.dumps/ json.dump 的使用差異 ,方便以後更好的使用json 。
以上為本次分享內容,感謝觀看。
python之json格式轉化
import json
常用的方法
json.dumps(python_obj):把數據類型轉換成字元串
json.loads(json_string):把字元串轉換成json
json.dump():把數據類型轉換成字元串並存儲在文件中
json.load(file_stream):把文件打開,把裡面的字元串轉換成數據類型
運行結果:
原創文章,作者:RTQG,如若轉載,請註明出處:https://www.506064.com/zh-tw/n/134662.html