QQ登录

只需一步,快速开始

登录 | 立即注册 | 找回密码

主题

帖子

荣誉

新鱼友

Rank: 1

积分
96
查看: 90|回复: 4

[作品展示] 新手写的爬取天刀壁纸动态网页的两种方式

[复制链接]
最佳答案
3 
累计签到:49 天
连续签到:1 天
枫树霜雪 发表于 2018-1-11 17:18:04 904 | 显示全部楼层 |阅读模式

马上注册加入鱼C,享用更多服务吧^_^

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
第一个是使用selenium+Chromedriver,在浏览器加载数据后,获得渲染好的网页代码,使用正则匹配图片链接
第二个是使用Chrom的开发者工具,找到获得数据的网址,然后在数据里面找到需要的数据,然后下载
游客,如果您要查看本帖隐藏内容请回复
楼层
跳转到指定楼层
最佳答案
3 
累计签到:99 天
连续签到:1 天
来钓鱼 发表于 2018-1-11 22:34:53 | 显示全部楼层
最佳答案
0 
累计签到:49 天
连续签到:1 天
mintaka 发表于 2018-1-13 16:45:38 | 显示全部楼层
我又来了
最佳答案
0 
累计签到:49 天
连续签到:1 天
mintaka 发表于 2018-1-13 16:52:44 | 显示全部楼层
requests和selenium分别什么时候比较合适,第二个里面的网址是API 吗,你们都是怎么找到的(′д` )…彡…彡
最佳答案
3 
累计签到:49 天
连续签到:1 天
枫树霜雪  楼主| 发表于 2018-1-13 18:44:04 | 显示全部楼层
mintaka 发表于 2018-1-13 16:52
requests和selenium分别什么时候比较合适,第二个里面的网址是API 吗,你们都是怎么找到的(′д` )…彡… ...

selenium就是那种比较简单的方式,不需要分析,直接让程序帮你打开浏览器渲染好页面,就等同于你直接右键审查元素,就可以获得代码了,不过运行速度会比较慢;第二个网址不是api,只是用chrome浏览器,查看下面的加载内容,然后可以看出来是哪个地址给了你具体数据的

发表回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐 上一条 /2 下一条

    移动客户端下载(未启用)
    微信公众号

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备11014136号

Copyright 2018 鱼C论坛 版权所有 All Rights Reserved.

Powered by Discuz! X3.1 Copyright
© 2001-2018 Comsenz Inc.    All Rights Reserved.

小黑屋|手机版|Archiver|鱼C工作室 ( 粤公网安备 44051102000370号 | 粤ICP备11014136号

GMT+8, 2018-1-24 03:29

快速回复 返回顶部 返回列表