欧美一区二区三区老妇人-欧美做爰猛烈大尺度电-99久久夜色精品国产亚洲a-亚洲福利视频一区二区

Python爬取微信小程序通用方法代碼實(shí)例詳解-創(chuàng)新互聯(lián)

背景介紹

成都創(chuàng)新互聯(lián)專業(yè)提供服務(wù)器托管雅安服務(wù),為用戶提供五星數(shù)據(jù)中心、電信、雙線接入解決方案,用戶可自行在線購(gòu)買服務(wù)器托管雅安服務(wù),并享受7*24小時(shí)金牌售后服務(wù)。

最近遇到一個(gè)需求,大致就是要獲取某個(gè)小程序上的數(shù)據(jù)。心想小程序本質(zhì)上就是移動(dòng)端加殼的瀏覽器,所以想到用Python去獲取數(shù)據(jù)。在網(wǎng)上學(xué)習(xí)了一下如何實(shí)現(xiàn)后,記錄一下我的實(shí)現(xiàn)過(guò)程以及所踩過(guò)的小坑。本文關(guān)鍵詞:Python,小程序,Charles抓包

目標(biāo)小程序:

公眾號(hào)“同城商圈網(wǎng)”左下角“找商家”->汽車維修->小車維修->所有的商家信息,如下圖所示:

Python爬取微信小程序通用方法代碼實(shí)例詳解

環(huán)境

PC端:Windows 10

移動(dòng)端:iPhone

軟件:Charles

Charles抓包

雖說(shuō)網(wǎng)上大佬的教程很好很詳細(xì),但我想加入幾個(gè)坑點(diǎn)解釋,請(qǐng)點(diǎn)此查看Charles配置教程

Charles清空當(dāng)前獲取到的連接,防止干擾(學(xué)會(huì)使用這個(gè)黃色掃把!很有用)

Python爬取微信小程序通用方法代碼實(shí)例詳解

打開微信小程序進(jìn)入到指定界面,Charles中顯示如下

Python爬取微信小程序通用方法代碼實(shí)例詳解

進(jìn)入到某個(gè)具體商家后,最先請(qǐng)求的是這個(gè)

Python爬取微信小程序通用方法代碼實(shí)例詳解

于是我們猜測(cè),這個(gè)可能就是小程序相關(guān)的http請(qǐng)求,點(diǎn)進(jìn)去我們看一下

Python爬取微信小程序通用方法代碼實(shí)例詳解

此時(shí)手機(jī)的界面是這樣的

Python爬取微信小程序通用方法代碼實(shí)例詳解

誒,好像就是這個(gè)!(其實(shí)我也是一個(gè)一個(gè)試了好久,多試試就會(huì)找到啦,當(dāng)然如果你懂點(diǎn)英文,能看懂左側(cè)的英文就更好了!merchant就是商家的意思~),

但是我們想要獲取所有的商家信息怎么辦呢?那就先點(diǎn)擊Charles上的黃色小掃把~,再返回到商家列表看看

Python爬取微信小程序通用方法代碼實(shí)例詳解

手機(jī)界面如下:

Python爬取微信小程序通用方法代碼實(shí)例詳解

沒錯(cuò)就是這個(gè)請(qǐng)求了!

分析請(qǐng)求

選中左邊發(fā)送的請(qǐng)求,右邊點(diǎn)擊Overview選項(xiàng)卡,查看請(qǐng)求信息,我們不難發(fā)現(xiàn)這是個(gè)POST請(qǐng)求

Python爬取微信小程序通用方法代碼實(shí)例詳解

我們知道POST請(qǐng)求提交的是表單,那么表單數(shù)據(jù)在哪里呢?我們可以在右邊界面,鼠標(biāo)右擊,點(diǎn)擊Copy Request就能獲取表單數(shù)據(jù)了!

Python爬取微信小程序通用方法代碼實(shí)例詳解

復(fù)制到這里看看:

{"pageIndex":1,"pageSize":50,"regionId":"8","categoryId":"148","orderRule":0}

看到這里,我們就能猜出個(gè)大概了,pageIndex是頁(yè)碼,pageSize是每頁(yè)顯示數(shù)量,regionId是地區(qū)編號(hào),categoryId是貨品編號(hào),orderRule是排序規(guī)則,至此抓包結(jié)束,我們成功抓到了目標(biāo)包!

本節(jié)抓包方法理論上適合所有小程序,其他的你們可以自行嘗試哦~

編寫python代碼

這里我們就簡(jiǎn)單的寫個(gè)demo

import requests

url = "http://api.tc688.net/api/services/app/merchant/LoadCategoryMerchants"
header = {
  'Origin':'http://zazhi.tc688.net',
  'Host':'api.tc688.net',
  'User-Agent':'Mozilla/5.0 (iPhone; CPU iPhone OS 13_6_1 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Mobile/15E148 MicroMessenger/7.0.14(0x17000e2e) NetType/WIFI Language/zh_CN',
  'Referer':'http://zazhi.tc688.net/companylist?id=148',
}
data = {"pageIndex":1,"pageSize":50,"regionId":"8","categoryId":"148","orderRule":0}
r = requests.post(url=url,data=data,headers=header)
print(r.text)

當(dāng)前標(biāo)題:Python爬取微信小程序通用方法代碼實(shí)例詳解-創(chuàng)新互聯(lián)
文章鏈接:http://chinadenli.net/article46/gejeg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供響應(yīng)式網(wǎng)站網(wǎng)站導(dǎo)航移動(dòng)網(wǎng)站建設(shè)靜態(tài)網(wǎng)站動(dòng)態(tài)網(wǎng)站小程序開發(fā)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

商城網(wǎng)站建設(shè)