QQ登录

只需一步,快速开始

登录 | 立即注册 | 找回密码

主题

帖子

荣誉

新鱼友

Rank: 1

积分
11
查看: 204|回复: 7

来自一个小白的求教,python3如何爬取需要验证的网页

[复制链接]
最佳答案
0 

尚未签到

风吹发型就乱 发表于 2018-2-8 14:07:44 2047 | 显示全部楼层 |阅读模式

马上注册加入鱼C,享用更多服务吧^_^

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
求各位大神帮我瞅瞅,感谢。。提前祝各位新年快乐。。。

如下图谷歌浏览器所抓取的POST信息,没看到有form data选项,是否该把request payload当成form data呢?,如果不是的话,该怎么爬取这类网页呢?,最后一张图是我运行的结果。。。


POST信息

POST信息

2

2

3

3

401错误

401错误
楼层
跳转到指定楼层
最佳答案
0 

尚未签到

风吹发型就乱  楼主| 发表于 2018-2-12 08:34:39 | 显示全部楼层
是不是没戏了。。。
最佳答案
11 
累计签到:93 天
连续签到:1 天
枫树霜雪 发表于 2018-2-12 17:50:23 | 显示全部楼层
你把网址发出来,看看
最佳答案
0 

尚未签到

风吹发型就乱  楼主| 发表于 2018-2-13 11:46:29 | 显示全部楼层
枫树霜雪 发表于 2018-2-12 17:50
你把网址发出来,看看

是局域网的,,发出来也是连不上去的。
最佳答案
11 
累计签到:93 天
连续签到:1 天
枫树霜雪 发表于 2018-2-13 13:30:41 From FishC Mobile | 显示全部楼层
你尝试正常登陆一下,你看看哪个请求里面包含有你提交的账号和密码
最佳答案
0 

尚未签到

风吹发型就乱  楼主| 发表于 2018-2-14 09:28:58 | 显示全部楼层
枫树霜雪 发表于 2018-2-13 13:30
你尝试正常登陆一下,你看看哪个请求里面包含有你提交的账号和密码

你看上面第一张图,payload里面就是登录信息。
最佳答案
0 

尚未签到

风吹发型就乱  楼主| 发表于 2018-2-26 15:57:04 | 显示全部楼层
凉了凉了。。。
最佳答案
4 
累计签到:1 天
连续签到:1 天
月亮下的么么哒 发表于 2018-3-2 14:20:14 | 显示全部楼层
建议你用fiddle或者其他工具抓一下包吧,这个没有from_data感觉有点奇怪。。。

发表回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐 上一条 /1 下一条

    移动客户端下载(未启用)
    微信公众号

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备11014136号

Copyright 2018 鱼C论坛 版权所有 All Rights Reserved.

Powered by Discuz! X3.1 Copyright
© 2001-2018 Comsenz Inc.    All Rights Reserved.

小黑屋|手机版|Archiver|鱼C工作室 ( 粤公网安备 44051102000370号 | 粤ICP备11014136号

GMT+8, 2018-5-21 17:09

快速回复 返回顶部 返回列表