| 网站首页 | 业界新闻 | 小组 | 威客 | 人才 | 下载频道 | 博客 | 代码贴 | 在线编程 | 编程论坛
欢迎加入我们,一同切磋技术
用户名:   
 
密 码:  
共有 2797 人关注过本帖
标题:python爬虫url参数加密问题???
只看楼主 加入收藏
guanyaohao
Rank: 2
等 级:论坛游民
威 望:1
帖 子:4
专家分:15
注 册:2019-1-2
收藏
 问题点数:0 回复次数:1 
python爬虫url参数加密问题???
各位大牛,我最近在写各大新闻平台的爬虫,例如  在凤凰新闻app搜索中,通过charles抓包抓到了请求接口,发现存在token,不知道加密规则,又找到js,看不懂;  新浪新闻中存在  urlSign和rand  两个参数   不知道生成规则;  网易新闻中sign不知道生成规则。
因为是要部署到服务器上定时爬取的,所以不能使用mitmdump+appnium这种方式,   请各位大哥留下墨宝,留下代理思路
搜索更多相关主题的帖子: url 参数 加密 新闻 规则 
2019-01-02 17:59
博智有味
Rank: 1
等 级:新手上路
帖 子:1
专家分:0
注 册:2019-12-24
收藏
得分:0 
解决了吗?
2019-12-25 15:13
快速回复:python爬虫url参数加密问题???
数据加载中...
 
   



关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.016733 second(s), 10 queries.
Copyright©2004-2024, BCCN.NET, All Rights Reserved