python爬虫豆瓣电影一周口碑榜
打开pycharm,输入以下代码输入以下代码(共6行)
import requests
from lxml import html
url='https://movie.douban.com/' #需要爬数据的网址
page=requests.Session().get(url)
tree=html.fromstring(page.text)
result=tree.xpath('//td[@class="title"]//a/text()') #获取需要的数据
我们来看下获取的数据
print(result)
['tinder 诈骗王',
'逃亡',
'正发生',
'瀑布',
'沧海鱼生',
'慕尼黑:战争边缘',
'抱紧我',
'一切顺利',
'电影之神',
'空白']
爬虫到此结束~~~是不是有满满成就感!!!
以上代码爬取的是这个页面,红色框框里面的数据,也就是豆瓣电影本周口碑榜。
接下来我会给大家分享详细的python爬虫图文教程,文章持续更新!敬请关注!