Python 讀取 JSON 數據的騷操作

  • 2020 年 2 月 24 日
  • 筆記

作者:廳長大人

來源:Python知識大全

讀寫 JSON 數據

問題

你想讀寫 JSON(JavaScript Object Notation) 編碼格式的數據。

解決方案

json 模組提供了一種很簡單的方式來編碼和解碼 JSON 數據。

其中兩個主要的函 數是 json.dumps() 和 json.loads()

下面演示如何將一個 Python 數據結構轉換為 JSON

import json  data = {  'name' : 'ACME',  'shares' : 100,  'price' : 542.23  }  json_str = json.dumps(data)

下面演示如何將一個 JSON 編碼的字元串轉換回一個 Python 數據結構:

data = json.loads(json_str)

如果你要處理的是文件而不是字元串,你可以使用 json.dump() 和 json.load()來編碼和解碼 JSON 數據。

例如:

# 寫入一個json數據  with open('data.json', 'w') as f:  json.dump(data, f)    with open('data.json', 'r') as f:  data = json.load(f)  

討論

JSON 編碼支援的基本數據類型為 None ,bool ,int ,float 和 str ,以及包含 這些類型數據的 lists,tuples 和 dictionaries。

對於 dictionaries,keys 需要是字元串類 型 (字典中任何非字元串類型的 key 在編碼時會先轉換為字元串)。

為了遵循 JSON 規 范,你應該只編碼 Python 的 lists 和 dictionaries。而且,在 web 應用程式中,頂層對 象被編碼為一個字典是一個標準做法。JSON 編碼的格式對於 Python 語法而已幾乎是完全一樣的,除了一些小的差異之 外。

比如,True 會被映射為 true,False 被映射為 false,而 None 會被映射為 null。

下 面是一個例子,演示了編碼後的字元串效果:

>>> json.dumps(False)  'false'  >>> d = {'a': True,  ... 'b': 'Hello',  ... 'c': None}  >>> json.dumps(d)  '{"b": "Hello", "c": null, "a": true}'  >>>

如果你試著去檢查 JSON 解碼後的數據,你通常很難通過簡單的列印來確定它 的結構,特別是當數據的嵌套結構層次很深或者包含大量的欄位時。

為了解決這個問 題,可以考慮使用 pprint 模組的 pprint() 函數來代替普通的 print() 函數。它會按 照 key 的字母順序並以一種更加美觀的方式輸出。

下面是一個演示如何漂亮的列印輸出 的例子:

>>> from urllib.request import urlopen  >>> import json  >>> u = urlopen('http://search.twitter.com/search.json?q=python&rpp=5')  >>> resp = json.loads(u.read().decode('utf-8'))  >>> from pprint import pprint  >>> pprint(resp)  {'completed_in': 0.074,  'max_id': 264043230692245504,  'max_id_str': '264043230692245504',  'next_page': '?page=2&max_id=264043230692245504&q=python&rpp=5',  'page': 1,  'query': 'python',  'refresh_url': '?since_id=264043230692245504&q=python',  'results': [{'created_at': 'Thu, 01 Nov 2012 16:36:26 +0000',  'from_user': ...  },  {'created_at': 'Thu, 01 Nov 2012 16:36:14 +0000',  'from_user': ...  },  {'created_at': 'Thu, 01 Nov 2012 16:36:13 +0000',  'from_user': ...  },  {'created_at': 'Thu, 01 Nov 2012 16:36:07 +0000',  'from_user': ...  }  {'created_at': 'Thu, 01 Nov 2012 16:36:04 +0000',  'from_user': ...  }],  'results_per_page': 5,  'since_id': 0,  'since_id_str': '0'}  >>>

一般來講,JSON 解碼會根據提供的數據創建 dicts 或 lists。

如果你想要創建其他 類型的對象,可以給 json.loads() 傳遞 object_pairs_hook 或 object_hook 參數。

例 如,下面是演示如何解碼 JSON 數據並在一個 OrderedDict 中保留其順序的例子

>>> s = '{"name": "ACME", "shares": 50, "price": 490.1}'  >>> from collections import OrderedDict  >>> data = json.loads(s, object_pairs_hook=OrderedDict)  >>> data  OrderedDict([('name', 'ACME'), ('shares', 50), ('price', 490.1)])  >>>  

下面是如何將一個 JSON 字典轉換為一個 Python 對象例子

>>> class JSONObject:  ... def __init__(self, d):  ... self.__dict__ = d  ...  >>>  >>> data = json.loads(s, object_hook=JSONObject)  >>> data.name  'ACME'  >>> data.shares  50  >>> data.price  490.1  >>>

最後一個例子中,JSON 解碼後的字典作為一個單個參數傳遞給 __init__() 。然 後,你就可以隨心所欲的使用它了,比如作為一個實例字典來直接使用它。

在編碼 JSON 的時候,還有一些選項很有用。如果你想獲得漂亮的格式化字元串 後輸出,可以使用 json.dumps() 的 indent 參數。它會使得輸出和 pprint() 函數效果 類似。

比如:

>>> print(json.dumps(data))  {"price": 542.23, "name": "ACME", "shares": 100}  >>> print(json.dumps(data, indent=4))  {  "price": 542.23,  "name": "ACME",  "shares": 100  }  >>>

對象實例通常並不是 JSON 可序列化的。例如:

>>> class Point:  ... def __init__(self, x, y):  ... self.x = x  ... self.y = y  ...  >>> p = Point(2, 3)  >>> json.dumps(p)  Traceback (most recent call last):  File "", line 1, inFile "/usr/local/lib/python3.3/json/__init__.py", line 226, in dumps  return _default_encoder.encode(obj)  File "/usr/local/lib/python3.3/json/encoder.py", line 187, in encode  chunks = self.iterencode(o, _one_shot=True)  File "/usr/local/lib/python3.3/json/encoder.py", line 245, in iterencode  return _iterencode(o, 0)  File "/usr/local/lib/python3.3/json/encoder.py", line 169, in default  raise TypeError(repr(o) + " is not JSON serializable")  TypeError: <__main__.Point object at 0x1006f2650> is not JSON serializable  >>>  如果你想序列化對象實例,你可以提供一個函數,它的輸入是一個實例,返回一個  可序列化的字典。例如:def serialize_instance(obj):  d = { '__classname__' : type(obj).__name__ }  d.update(vars(obj))  return d

如果你想反過來獲取這個實例,可以這樣做:

# Dictionary mapping names to known classes  classes = {  'Point' : Point  }  def unserialize_object(d):  clsname = d.pop('__classname__', None)  if clsname:  cls = classes[clsname]  obj = cls.__new__(cls) # Make instance without calling __init__  for key, value in d.items():  setattr(obj, key, value)  return obj  else:  return d

下面是如何使用這些函數的例子:

>>> p = Point(2,3)  >>> s = json.dumps(p, default=serialize_instance)  >>> s  '{"__classname__": "Point", "y": 3, "x": 2}'  >>> a = json.loads(s, object_hook=unserialize_object)  >>> a  <__main__.Point object at 0x1017577d0>  >>> a.x  2  >>> a.y  3  >>>  json

模組還有很多其他選項來控制更低級別的數字、特殊值如 NaN 等的解析。可 以參考官方文檔獲取更多細節。

End

◆ ◆ ◆  ◆ ◆    長按二維碼關注我們  數據森麟公眾號的交流群已經建立,許多小夥伴已經加入其中,感謝大家的支援。大家可以在群里交流關於數據分析&數據挖掘的相關內容,還沒有加入的小夥伴可以掃描下方管理員二維碼,進群前一定要關注公眾號奧,關注後讓管理員幫忙拉進群,期待大家的加入。    管理員二維碼:    猜你喜歡  ● 笑死人不償命的知乎沙雕問題排行榜● 用Python扒出B站那些「驚為天人」的阿婆主!● 互聯網大佬學歷&背景大揭秘,看看是你的老鄉還是校友● 上萬條數據撕開微博熱搜的真相!● 你相信逛B站也能學編程嗎?