qq:800819103
在线客服,实时响应
qq群
在线客服,实时响应
客服电话
13318873961代理IP如何帮助爬虫爬取猫眼电影影片?想要获取最近热映影片,当然是用爬虫来爬取。今天我们就来看下,爬虫是如何爬取猫眼电影热映影片信息的。首先我们先打开猫眼电影的热映榜单页面,右键检查分析页面,查找目标信息位置。
具体代码如下:
import requests
import re
url = 'http://maoyan.com/board'
headers = {'User-Agent': '具体agent信息'}
response = requests.get(url, headers=headers)
pattern = re.compile(r'
([\d\D]*?)
') # 只显示一个
dd_list = pattern.findall(response.text)
for dd in dd_list:
# 电影名字
title_pattern = re.compile(r'
name = title_pattern.findall(dd)
print(name[0].strip())
# 电影主演
people_pattern = re.compile(r'
([\d\D]*?)
')
people = people_pattern.findall(dd)
print(people[0].strip())
# 上映时间
time_pattern = re.compile(r'
([\d\D]*?)
')
time = time_pattern.findall(dd)
print(time[0])
# 评分
score_pattern1 = re.compile(r'([\d\D]*?)')
score_first = score_pattern1.findall(dd)[0]
score_pattern2 = re.compile(r'([\d\D]*?)')
score_last = score_pattern2.findall(dd)[0]
print(score_first + score_last)
通过上述代码,我们就可以获取到猫眼电影热映影片的电影名字、主演、上映时间和评分信息了。黑洞代理服务器爬虫代理,数据采集服务服务提供商,为您提供更快,更可靠的服务。
相关文章内容简介
1 代理IP如何帮助爬虫爬取猫眼电影影片?
代理IP如何帮助爬虫爬取猫眼电影影片?想要获取最近热映影片,当然是用爬虫来爬取。今天我们就来看下,爬虫是如何爬取猫眼电影热映影片信息的。首先我们先打开猫眼电影的热映榜单页面,右键检查分析页面,查找目标信息位置。 具体代码如下: import∵requests import∵re url∵=∵'http://maoyan.com/board' headers∵=∵{'User-Agent':âˆ... [阅读全文]
最新标签
推荐阅读
17
2019-04
浅析网站更换ip或使用CDN会不会影响SEO排名
最近张戈博客在阿里云和腾讯云服务器之间来回折腾了数次,别的收获没有,就悟出了一个问题:网站更换 IP 或使用 CDN 会不会影响 SEO 收录或排名?
26
2019-04
怎么才能选择到正确IP代理池
作为经常上网的老网民,你一定遇到过访问网站IP受限这种尴尬情况;作为从事网络推广工作的推广员,你一定遇到过注册发帖几次提示当日次数达到上限的尴尬情况,作为从事爬虫工作的工程
01
2019-03
HTTP VS HTTPS有什么不同?各自的特点有哪些?
为什么有些网站使用HTTP,而有些网站使用HTTPS?如果大家留意,还可以看到HTTP跳转为HTTPS,这是为什么呢?今天我们就来了解下关于HTTP VS HTTPS有什么不同。
20
2018-12
美国航天局服务器被黑客攻击,导致员工信息外泄
美国国家航空航天局(NASA)已确认旗下一台服务器在 10 月被黑客攻击,黑客从其中盗取了一些员工信息,包括社会安全号码等等。
热门文章