資訊內容
如何進行手機APP的數據爬取?
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
python爬蟲手機的步驟:Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
1. 下載fiddler抓包工具Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
2. 設置fiddlerGku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
這里有兩點需要說明一下。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
設置允許抓取HTTPS信息包Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
操作很簡單,打開下載好的fiddler,找到 Tools -> Options,然后再HTTPS的工具欄下勾選Decrpt HTTPS traffic,在新彈出的選項欄下勾選Ignore server certificate errors。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
設置允許外部設備發送HTTP/HTTPS到fiddlerGku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
相同的,在Connections選項欄下勾選Allow remote computers to connect,并記住上面的端口號8888,后面會使用到。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
好了,需要的fiddler設置就配置完成了。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
3. 設置手機端Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
設置手機端之前,我們需要記住一點:電腦和手機需要在同一個網絡下進行操作。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
可以使用wifi或者手機熱點等來完成。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
假如你已經讓電腦和手機處于同一個網絡下了,這時候我們需要知道此網絡的ip地址,可以在命令行輸入ipconfig簡單的獲得,如圖。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
好了,下面我們開始手機端的設置。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
手機APP的抓取操作對于Android和Apple系統都可用,博主使用的蘋果系統,在此以蘋果系統為例。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
進入到手機wifi的設置界面,選擇當前連接網絡的更多信息,在蘋果中是一個嘆號。然后在**下面你會看到HTTP代理的選項,點擊進入。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
進入后,填寫上面記住的ip地址和端口號,確定保存。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
4. 下載fiddler安全證書Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
在手機上打開瀏覽器輸入一個上面ip地址和端口號組成的url:http://192.168.43.38:8888,然后點擊FiddlerRoot certificate下載fiddler證書。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
以上就簡單完成了所有的操作,**后我們測試一下是否好用。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
5. 手機端測試Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
就以知乎APP為例,在手機上打開 知乎APP。下面是電腦上fiddler的抓包結果。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺
結果沒有問題,抓到信息包。然后就可以使用我們分析網頁的方法來進行后續的操作了。Gku少兒編程網-Scratch_Python_教程_免費兒童編程學習平臺

- 上一篇
python3安裝庫后不能用怎么解決?
簡介python3安裝庫后不能用的解決方法:執行importsys;print(sys.path)查看python搜索路徑,確保自己的模塊在python搜索路徑中。python的搜索路徑其實是一個列表,它是指導入模塊時,python會自動去找搜索這個列表當中的路徑,如果路徑中存在要導入的模塊文件則導入成
- 下一篇
2020了,你該會用seaborn了!
簡介提到python畫圖,我們第一個想到的庫一定是matplotlib,但是隨著大家眼光的提高,matplotlib畫出的圖漸漸“失寵”了,今天就讓我們來了解一下建立在matplotlib上的繪圖庫——seaborn。先來看一下對于seaborn的官方說明:-面向數據集的API,用于檢查多個變量之間的關