国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術(shù)文章
文章詳情頁

Python爬蟲的亂碼問題?

瀏覽:98日期:2022-07-30 16:40:27

問題描述

使用python實(shí)現(xiàn)模擬登陸并爬取返回頁面的時(shí)候出現(xiàn)了亂碼,目標(biāo)網(wǎng)頁的編碼使用utf-8Python爬蟲的亂碼問題?

相關(guān)代碼:

#coding=utf-8import urllibimport urllib2headers={ ’Accept’:’text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8’, ’Accept-Encoding’:’gzip, deflate’, ’Accept-Language’:’zh-CN,zh;q=0.8,en-US;q=0.5,en;q=0.3’, ’Connection’:’keep-alive’, ’User-Agent’:’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.73 Safari/537.36’}payload={ ’_eventId’:’submit’, ’lt’:’_cF2A0EB3F-D044-046C-6F4A-C828DE0ACE8E_k8B4BE5F5-4CAD-375D-0DDC-FB84A18445DF’, ’password’:’’, ’submit’:’登 錄’, ’username’:’’}payload=urllib.urlencode(payload)request = urllib2.Request(posturl, payload, headers)print requestresponse = urllib2.urlopen(request)text = response.read()print text

控制臺(tái)輸出信息:Python爬蟲的亂碼問題?

第一次遇見這種亂碼比較懵逼

問題解答

回答1:

urllib2沒有處理壓縮的問題,你要使用gzip解壓,比如這樣

from StringIO import StringIOimport gzipif response.info().get(’Content-Encoding’) == ’gzip’: buf = StringIO(text) f = gzip.GzipFile(fileobj=buf) data = f.read()

總結(jié)urllib2比較底層,建議使用requests

標(biāo)簽: Python 編程
相關(guān)文章:
主站蜘蛛池模板: 亚洲高清成人欧美动作片 | 久久精品毛片 | 精品一区二区在线观看 | 久久 精品 一区二区 | 亚洲人成在线播放网站 | 成年人午夜网站 | 91免费观看视频 | 亚洲国产欧美一区二区欧美 | 成人看免费一级毛片 | 日韩视频网 | 欧美在线一区二区三区精品 | 中国农村一级毛片 | 欧美成人精品不卡视频在线观看 | 67id人成国产在线 | 久草在线视频免费播放 | 久久最新视频 | 大学生一级一片第一次欧美 | 日韩亚洲欧美理论片 | 久久频这里精品99香蕉久网址 | 99精品视频在线免费观看 | 亚洲男人的天堂久久无 | 中文成人在线 | 精品自拍视频 | 久青草免费在线视频 | 国产成人精品永久免费视频 | 国产成人麻豆tv在线观看 | 欧美日韩中文字幕在线视频 | 国产成人av性色在线影院 | 多人伦精品一区二区三区视频 | 亚洲精品字幕一区二区三区 | 久热国产在线视频 | 国产午夜精品久久理论片小说 | 日本一区深夜影院深a | 色悠久久久久综合网伊人男男 | 国产一区二区三区日韩欧美 | 91久久精品视频 | 国产大臿蕉香蕉大视频 | 99精品热女视频专线 | 国产网曝手机视频在线观看 | 视频一区久久 | 中文国产成人精品久久一 |