| 网站首页 | 业界新闻 | 小组 | 威客 | 人才 | 下载频道 | 博客 | 代码贴 | 在线编程 | 编程论坛
欢迎加入我们,一同切磋技术
用户名:   
 
密 码:  
共有 1605 人关注过本帖
标题:为什么不能完整的爬下来,只能爬取一部分呢
只看楼主 加入收藏
余生未了
Rank: 1
等 级:新手上路
帖 子:1
专家分:0
注 册:2019-5-15
收藏
 问题点数:0 回复次数:0 
为什么不能完整的爬下来,只能爬取一部分呢
import requests
from lxml import etree
headers={

   'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/64.0.3282.140 Safari/537.36 Edge/17.17134',
   'Cookie':'UM_distinctid=1691e7566511b9-01c304f8d79384-3350467f-100200-1691e756652261; Hm_lvt_47c19b16e7362939c0067988e0da87cd=1550994210; Hm_lvt_76e3a1369ceacdb865467b1eb8cfa905=1557649931,1557880530,1557883011; Hm_lpvt_76e3a1369ceacdb865467b1eb8cfa905=1557884133'
}
url='http://v.'
resp=requests.get(url,headers=headers)
text=resp.content.decode('utf-8')
print(text)

[此贴子已经被作者于2019-5-15 11:15编辑过]

搜索更多相关主题的帖子: import url com list text 
2019-05-15 11:13
快速回复:为什么不能完整的爬下来,只能爬取一部分呢
数据加载中...
 
   



关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.025714 second(s), 8 queries.
Copyright©2004-2024, BCCN.NET, All Rights Reserved