| 网站首页 | 业界新闻 | 小组 | 威客 | 人才 | 下载频道 | 博客 | 代码贴 | 在线编程 | 编程论坛
欢迎加入我们,一同切磋技术
用户名:   
 
密 码:  
共有 1162 人关注过本帖
标题:新人求助 自制的爬虫无法爬取目标网站的点赞数
只看楼主 加入收藏
杨大雁
Rank: 1
等 级:新手上路
帖 子:1
专家分:0
注 册:2020-3-2
收藏
 问题点数:0 回复次数:0 
新人求助 自制的爬虫无法爬取目标网站的点赞数
python3.8  bs4  用的是atom  win10系统 自制的爬虫无法爬取目标网站的点赞数

from urllib import request,parse,error
import re
from bs4 import BeautifulSoup
page='2.html'
url='http://xiaohua.'+str(page)
headers={
'User-Agent':'Mozilla/4.0(compatible;MSIE 5.5;Windows NT)',
'host':'xiaohua.'
}
try:
    req=request.Request(url=url,headers=headers,method='POST')
    response=request.urlopen(req)
    html=response.read().decode('gbk')
    bs=BeautifulSoup(html,'html.parser')
    for tag in bs.find_all('em',class_='good-btn'):
        article=tag.find('span',class_='text')
        print(article)

except error.URLError as e:
    if hasattr(e,'code'):
        print(e.code)
    if hasattr(e,'reason'):
        print(e.reason)
搜索更多相关主题的帖子: 目标 爬虫 网站 html request 
2020-03-02 02:17
快速回复:新人求助 自制的爬虫无法爬取目标网站的点赞数
数据加载中...
 
   



关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.023860 second(s), 8 queries.
Copyright©2004-2024, BCCN.NET, All Rights Reserved