Python 模擬Ajax/XMLHtt
- 2020 年 1 月 7 日
- 筆記
Ajax是目前流行的網頁載入模式,可以不刷新網頁頁面實現數據更新。 但是對我們需要抓取網頁內容來說,多了一層障礙,不過無敵的Python很容易抓取Ajax內容。 需要注意的是要添加一個Content-Type的Header,給的值是application/json。否則會發生錯誤!
import urllib import urllib2 import json if __name__ == "__main__": d = '{"pageIndex":0,"pageSize":30,"title":""}' request = urllib2.Request(ajax_url, d) request.add_header("Content-Type", "application/json; charset=utf-8") print request.headers f = urllib2.urlopen(request) #'{"pageIndex":0,"pageSize":15,"title":""}' content = f.read() content = rss_content.decode("gbk") content = json.loads(content)