QQ登录

只需一步,快速开始

登录 | 立即注册 | 找回密码

主题

帖子

荣誉

VIP至尊会员

Rank: 15Rank: 15Rank: 15

积分
715
查看: 1503|回复: 130

[学习笔记] Python爬虫进阶scrapy框架安装

  [复制链接]
最佳答案
28 
累计签到:144 天
连续签到:1 天
MSK 发表于 2017-7-9 22:59:08 1503130 | 显示全部楼层 |阅读模式

马上注册加入鱼C,享用更多服务吧^_^

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
本帖最后由 MSK 于 2017-7-9 23:03 编辑

scrapy是一个流行的网络爬虫框架,有了它你可以对你的爬虫排兵布阵






更可喜的是:scrapy已经支持python3!!!



不过安装个scrapy可是让我弄得吐血,网上的方法也很多,然而几乎没什么卵用






为了节省鱼油们的时间,我把安装过程写入了一个批处理程序,你双击运行即可
程序会自动帮你下载scrapy所依赖的包和scrapy框架

环境:python3.6,.1





游客,如果您要查看本帖隐藏内容请回复


评分

参与人数 2荣誉 +8 鱼币 +8 贡献 +3 收起 理由
綉氣 + 5 + 5 + 3 非常感谢 找了好久终于弄好了
小甲鱼 + 3 + 3 热爱鱼C^_^

查看全部评分

本帖被以下淘专辑推荐:

楼层
跳转到指定楼层
最佳答案
0 

尚未签到

万火留名 发表于 6 天前 | 显示全部楼层
这里面的 Twisted 是AMD64的版本,指的就是电脑CPU是x64的才能装,不是指系统是64位,所以假如出现错误,可以试试去
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
里面选择win 32版本下载(cp后面是版本号),再把里面的本来的WHL文件用新下载的换掉 ,再把BAT里面原来WHL的名字改掉就OK了。

评分

参与人数 1荣誉 +2 鱼币 +3 收起 理由
MSK + 2 + 3 感谢补充~

查看全部评分

最佳答案
194 
累计签到:2315 天
连续签到:5 天
小甲鱼 发表于 2017-7-9 23:53:38 | 显示全部楼层
哈哈,相关课程我也应该更新一下才行~
最佳答案
28 
累计签到:144 天
连续签到:1 天
MSK  楼主| 发表于 2017-7-9 23:57:40 | 显示全部楼层
小甲鱼 发表于 2017-7-9 23:53
哈哈,相关课程我也应该更新一下才行~

期待期待
最佳答案
0 
累计签到:1 天
连续签到:1 天
橙橙诚 发表于 2017-7-27 15:38:27 | 显示全部楼层
666
最佳答案
3 
累计签到:100 天
连续签到:1 天
来钓鱼 发表于 2017-8-10 09:55:52 | 显示全部楼层
six six six
最佳答案
0 

尚未签到

小松松~ 发表于 2017-8-10 21:51:00 | 显示全部楼层
萌新...
最佳答案
0 
累计签到:1016 天
连续签到:1 天
兢兢 发表于 2017-8-11 15:12:42 | 显示全部楼层
这个背景是怎么弄上去
最佳答案
28 
累计签到:144 天
连续签到:1 天
MSK  楼主| 发表于 2017-8-11 17:13:53 | 显示全部楼层
兢兢 发表于 2017-8-11 15:12
这个背景是怎么弄上去

xx.PNG
最佳答案
0 
累计签到:1 天
连续签到:1 天
tuxiaoqing 发表于 2017-9-27 12:06:41 | 显示全部楼层
谢谢楼主分享
最佳答案
0 
累计签到:75 天
连续签到:1 天
银色的色 发表于 2017-10-26 17:00:17 | 显示全部楼层
楼主好厉害,中途出现过红字不知道什么意思,最后显示安装成功了,给楼主赞
最佳答案
0 

尚未签到

1160089666 发表于 2017-10-30 21:54:14 | 显示全部楼层
1
最佳答案
0 

尚未签到

xuqiuhao 发表于 2017-11-3 21:10:10 | 显示全部楼层
多谢!
最佳答案
0 

尚未签到

Luos 发表于 2017-11-9 10:39:03 | 显示全部楼层
11111
最佳答案
0 

尚未签到

流浪的大鱼 发表于 2017-11-10 09:04:22 | 显示全部楼层
1
最佳答案
0 
累计签到:43 天
连续签到:1 天
CatCat233 发表于 2017-11-14 23:53:19 | 显示全部楼层
感谢分享                  
最佳答案
0 

尚未签到

sideboyd 发表于 2017-11-15 17:26:08 | 显示全部楼层
1111111111111111111
最佳答案
0 

尚未签到

菜白白 发表于 2017-11-16 20:11:40 | 显示全部楼层
666
最佳答案
0 

尚未签到

SheldonVon 发表于 2017-11-16 21:56:42 | 显示全部楼层
谢谢楼主
最佳答案
0 
累计签到:10 天
连续签到:1 天
WeiJI 发表于 2017-11-17 16:02:57 | 显示全部楼层
看看,学习下
最佳答案
0 
累计签到:2 天
连续签到:2 天
1234567qwert 发表于 2017-11-18 10:07:47 | 显示全部楼层
谢谢楼主

发表回复

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

小甲鱼强烈推荐 上一条 /2 下一条

    移动客户端下载(未启用)
    微信公众号

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备11014136号

Copyright 2018 鱼C论坛 版权所有 All Rights Reserved.

Powered by Discuz! X3.1 Copyright
© 2001-2018 Comsenz Inc.    All Rights Reserved.

小黑屋|手机版|Archiver|鱼C工作室 ( 粤公网安备 44051102000370号 | 粤ICP备11014136号

GMT+8, 2018-2-18 03:33

快速回复 返回顶部 返回列表