python - 如何爬取豆瓣電影的詳細(xì)信息
問(wèn)題描述
我想爬取每個(gè)電影的制片國(guó)家地區(qū),但是它上面并不在一個(gè)標(biāo)簽里面應(yīng)該怎么辦我用的是request和BeautifulSoup
res2=requests.get(h2)res2.encoding=’utf-8’soup2=BeautifulSoup(res2.text)
這部分是已經(jīng)獲取該網(wǎng)頁(yè)
問(wèn)題解答
回答1:參考以下代碼:
#!/usr/bin/env python# -*- coding:utf-8 -*-import reimport requestsfrom bs4 import BeautifulSoupresult = requests.get(’https://movie.douban.com/subject/3541415/’)result.encoding = ’utf-8’soup = BeautifulSoup(result.text, ’html.parser’)try: info = soup.select(’#info’)[0] print re.findall(ur’(?<=制片國(guó)家/地區(qū): ).+?(?=n)’, info.text)[0]except Exception, e: print e回答2:
正則匹配</span>和<br>之間的內(nèi)容。
回答3:1、可以用正則
2、建議用soup.find_all看文檔
https://www.crummy.com/softwa...
soup.find_all('title')# [<title>The Dormouse’s story</title>]soup.find_all('p', 'title')# [<p class='title'><b>The Dormouse’s story</b></p>]soup.find_all('a')# [<a id='link1'>Elsie</a>,# <a id='link2'>Lacie</a>,# <a id='link3'>Tillie</a>]soup.find_all(id='link2')# [<a id='link2'>Lacie</a>]
黃哥Python 回答
相關(guān)文章:
1. php - 請(qǐng)問(wèn)大批量數(shù)據(jù)處理,如何分割?2. javascript - vue過(guò)渡效果 css過(guò)渡 類名的先后順序3. MySQL主鍵沖突時(shí)的更新操作和替換操作在功能上有什么差別(如圖)4. 數(shù)據(jù)庫(kù) - Mysql的存儲(chǔ)過(guò)程真的是個(gè)坑!求助下面的存儲(chǔ)過(guò)程哪里錯(cuò)啦,實(shí)在是找不到哪里的問(wèn)題了。5. html5和Flash對(duì)抗是什么情況?6. css右浮動(dòng)字的順序顛倒了7. ios - 類似微博首頁(yè),一張圖的時(shí)候是如何確定圖大小的?8. javascript - 我是做web前端的,公司最近有一個(gè)項(xiàng)目關(guān)于數(shù)據(jù)統(tǒng)計(jì)的!9. javascript - 如何使用loadash對(duì)[object,object,object]形式的數(shù)組進(jìn)行比較10. javascript - vuejs+elementui 購(gòu)物車價(jià)格計(jì)算,點(diǎn)擊加減號(hào)修改數(shù)量總價(jià)都不會(huì)改變,但是計(jì)算執(zhí)行了
