利用Python把某網站的所有那啥妹子都爬了下來!

  • 2020 年 2 月 13 日
  • 筆記

這個網站名字叫女神網,裡面的女神都非常漂亮性感,所以今天用這個網站來做示例。

ok,我們直接上大家最需要的:

系統環境的話,Windows都可以

裝個Python和pycharm就好了,如果沒有軟體的話可以私信小編要,還有基礎學習影片等等~軟體安裝好之後,win+r在彈出的運行窗口輸入cmd按回車進入cmd管理介面,輸入:

pip install (加上下面這些庫,來一個個安裝)

requests、re、os、pymongo、Beatifulsoup、time

例如:pip install requests

安裝完後就可以開始了!

來看程式碼:

最重要的是分析網站:

獲得圖片鏈接後,只需要保存訪問圖片鏈接的response.content,即可實現圖片下載保存。通過os庫進行文件夾創建,分類保存。再設置格式,保存至MONGODB資料庫

大家趕緊去嘗試一下吧!