国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術文章
文章詳情頁

網頁爬蟲 - Python requests.get 爬蟲 設置代理 IP地址未改變

瀏覽:110日期:2022-06-29 13:02:16

問題描述

工作需要爬取亞馬遜上面的信息,但是亞馬遜反爬蟲太厲害,同一個IP地址會被封。Python版本:3.6, IDE:Pycharm 2017.1在網上查了很多資料,requests庫的手冊也讀過,但是都是同一個方法,代碼如下:

import requests’’’代理IP地址(高匿)’’’proxy = {’HTTPS’: ’117.85.105.170:808’}’’’head 信息’’’head = {’User-Agent’: ’Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36’, ’Connection’: ’keep-alive’}’’’http://icanhazip.com會返回當前的IP地址’’’p = requests.get(’http://icanhazip.com’, headers=head, proxies=proxy)print(p.text)

根據我看過的許多教程的理論,如果代理設置成功,最后顯示的IP應該是代理的IP地址,但是最終還是我真實的IP地址,這樣一來不就等于沒有設置代理么?

問題解答

回答1:

proxies在你訪問http時用http的設置,訪問https時用https的設置所以你的proxy需要同時包含http及https的配置,這樣才能生效

proxy = { ’http’: ’http://117.85.105.170:808’, ’https’: ’https://117.85.105.170:808’}

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 怡红院久久 | 国产三级在线观看 | 成人做爰视频www | 五月激激激综合网色播免费 | 亚洲国产品综合人成综合网站 | 91精品人成在线观看 | 成人午夜久久精品 | 亚洲国产精品第一区二区三区 | 日韩毛片欧美一级a网站 | 欧美另类老妇 | 国产日产久久高清欧美一区 | 在线综合亚洲欧美自拍 | 亚洲午夜网| 欧美亚洲在线观看 | 国产精品亚洲一区二区在线观看 | 九九精品视频一区在线 | 九九在线偷拍视频在线播放 | 欧美一级片在线免费观看 | 女在床上被男的插爽叫视频 | 久久精品国产99国产精品亚洲 | 国产成人精品免费视频 | www成人国产在线观看网站 | 久久久久综合国产 | 国产1000部成人免费视频 | 亚州一二区 | 亚洲视频免费在线 | 亚洲精品午夜久久久伊人 | 免费国产黄网站在线观看视频 | 一级aaa级毛片午夜在线播放 | 国产精品视_精品国产免费 国产精品视频久 | 国产成人免费高清激情视频 | 久草在线国产视频 | 国产精品制服 | 欧美在线成人午夜影视 | 成人影院在线免费观看 | 香蕉521av网站永久地址 | 亚洲人成综合在线播放 | 成年网站免费视频黄 | 久久久久久久久久久9精品视频 | 成人香蕉xxxxxxx | 国产三级视频在线播放 |