python - 如何爬取豆瓣電影的詳細(xì)信息
問題描述
我想爬取每個電影的制片國家地區(qū),但是它上面并不在一個標(biāo)簽里面應(yīng)該怎么辦我用的是request和BeautifulSoup
res2=requests.get(h2)res2.encoding=’utf-8’soup2=BeautifulSoup(res2.text)
這部分是已經(jīng)獲取該網(wǎng)頁
問題解答
回答1:參考以下代碼:
#!/usr/bin/env python# -*- coding:utf-8 -*-import reimport requestsfrom bs4 import BeautifulSoupresult = requests.get(’https://movie.douban.com/subject/3541415/’)result.encoding = ’utf-8’soup = BeautifulSoup(result.text, ’html.parser’)try: info = soup.select(’#info’)[0] print re.findall(ur’(?<=制片國家/地區(qū): ).+?(?=n)’, info.text)[0]except Exception, e: print e回答2:
正則匹配</span>和<br>之間的內(nèi)容。
回答3:1、可以用正則
2、建議用soup.find_all看文檔
https://www.crummy.com/softwa...
soup.find_all('title')# [<title>The Dormouse’s story</title>]soup.find_all('p', 'title')# [<p class='title'><b>The Dormouse’s story</b></p>]soup.find_all('a')# [<a id='link1'>Elsie</a>,# <a id='link2'>Lacie</a>,# <a id='link3'>Tillie</a>]soup.find_all(id='link2')# [<a id='link2'>Lacie</a>]
黃哥Python 回答
相關(guān)文章:
1. centos - apache配置django報錯:cannot be loaded as Python modules2. 微信端電子書翻頁效果3. node.js - 有沒有比較好的nodejs導(dǎo)出excel的插件?4. css3 - 微信前端頁面遇到的transition過渡動畫的bug5. mysql - SQL問個基礎(chǔ)例子,書上的,我怎么看都看不懂..誰幫我解釋一下第2個為什么和第1個一樣?6. javascript - 微信小程序里怎么把頁面轉(zhuǎn)成圖片分享7. mysql事務(wù)日志的一些問題8. mysql服務(wù)無法啟動1067錯誤,誰知道正確的解決方法?9. mysql - 我用SQL語句 更新 行的時候,發(fā)現(xiàn)全部 中文都被清空了,請問怎么解決?10. 數(shù)據(jù)庫 - mysql boolean型無法插入true
