国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術文章
文章詳情頁

Python爬蟲:Request Payload和Form Data的簡單區別說明

瀏覽:12日期:2022-07-26 17:49:47

Request Payload 和 Form Data 請求頭上的參數差別在于:

Content-TypeForm Data

Post表單請求

代碼示例

headers = { 'Content-Type': 'application/x-www-form-urlencoded'}requests.post(url, data=data, headers=headers)Request Payload

傳遞json數據

headers = { 'Content-Type': 'application/json'}requests.post(url, data=json.dumps(data), headers=headers)

Scrapy 的FormRequest只支持 Form Data 表單提交,源碼固定為前者

補充知識:如何傳遞Request PayLoad(請求負載)中的數據?

在做爬蟲的時候,在分析請求的過程,遇到參數長這樣的:

原理不太清楚,等搞明白再來補充。這里只記錄如何應用這些數據。

用法:

根據上面的圖片,由于是post請求,參數一般是以key-value的json字符串傳遞,或者將參數放入map傳遞。我們可以看到很多name,這個name就是key,下面的數據就是value,我們可以提取所有的key及value,組成一個json字符串或者map傳遞即可。

比如上面的數據可以提取如下:

{'view:id1:txtSearch':'','$$viewid':'!f9fpyhcv2t!','$$xspsubmitid':'view:_id1:_id2:pager1_Group_lnk_2','$$xspexecid':'view:_id1:_id2:parent','$$xspsubmitvalue':'','$$xspsubmitscroll':'0|0','view:_id1':'view:_id1'}

或者:

Map<String,String> m = new HashMap<String,String>(); m.put('view:id1:txtSearch', ''); m.put('$$viewid', '!f9fpyhcv2t!'); m.put('$$xspsubmitid', 'view:_id1:_id2:pager1_Group_lnk_2'); m.put('$$xspexecid', 'view:_id1:_id2:parent'); m.put('$$xspsubmitvalue', ''); m.put('$$xspsubmitscroll', '0|0'); m.put('view:_id1', 'view:_id1');

由于我是用Jsoup來發請求的,所以我這樣傳參數即可:

Jsoup.connect('').data(m).cookies(null).method(Method.POST);

或者:

Connection conn = Jsoup.connect('');String requestJson = '{'view:id1:txtSearch':'','$$viewid':'!f9fpyhcv2t!','$$xspsubmitid':'view:_id1:_id2:pager1_Group_lnk_2','$$xspexecid':'view:_id1:_id2:parent','$$xspsubmitvalue':'','$$xspsubmitscroll':'0|0','view:_id1':'view:_id1'}';conn.requestBody(requestJson);conn.cookies(null).method(Method.POST);conn.execute();

具體參數具體情況填啦。

是不是超簡單。

注意一點,請求負載中的value值不一定是固定值,若每次請求都會發生變化,那么就需要分析這個變化的值從哪里來,動態獲取這個值,然后發送請求才能正確。

以上這篇Python爬蟲:Request Payload和Form Data的簡單區別說明就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持好吧啦網。

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 久久999视频 | 亚洲国产成人在线视频 | 五月色一区二区亚洲小说 | 欧美另类孕交免费观看 | 国产精品大全国产精品 | 成人免费大片a毛片 | 精品国产自在现线看久久 | 日本国产欧美色综合 | 久久国产国内精品对话对白 | 国内自拍视频一区二区三区 | 国产成人一区二区三区在线视频 | 精品久久久久久久久久香蕉 | 日韩在线观看中文字幕 | a网在线| 手机在线毛片 | 日本男人的天堂 | 美女视频黄.免费网址 | 香蕉tv亚洲专区在线观看 | 日本韩经典三级在线播放 | 国产亚洲欧美在线人成aaaa | 美女黄页网 | 日韩美女免费线视频 | 可以看的毛片网站 | 手机在线色| 国产欧美曰韩一区二区三区 | 97在线视频精品 | 久久91精品国产91久久户 | 伊人久色| 久久99亚洲精品久久久久99 | 日韩精品在线免费观看 | 亚洲 午夜在线一区 | 视频一二三区 | 99在线热视频只有精品免费 | 国产成人久久精品推最新 | 免费观看国产网址你懂的 | 俄罗斯黄色一级片 | 久草在线视频免费播放 | 亚洲天堂影院在线观看 | 久久精品视 | 国产视频高清在线观看 | 成年大片免费视频播放手机不卡 |