请选择 进入手机版|继续访问电脑版
发新帖

爬虫练手项目推荐一个?

[复制链接]
5310 11

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
想学习爬虫,能不能推荐一个小项目并说一下思路?比如爬随便一家公司的财务报表?

举报 使用道具

回复

精彩评论11

prasanta  新手上路  发表于 2018-5-16 17:47:34 | 显示全部楼层
中国商标局网的所有商标数据

举报 使用道具

回复
nuliptr  新手上路  发表于 2018-5-16 17:48:07 | 显示全部楼层
所有主流直播网站的直播间(斗鱼熊猫虎牙战旗啥的)。。。然后搞出一个类似于导航网站的东西展示数据。。。

举报 使用道具

回复
colincat  新手上路  发表于 2018-5-16 17:48:51 | 显示全部楼层
@prasanta 直接让他进阶高级吗?

举报 使用道具

回复
colincat  新手上路  发表于 2018-5-16 18:39:17 | 显示全部楼层
LZ,推荐你新闻类网站吧,基本没什么难度,挺好

举报 使用道具

回复
chesterzzy  新手上路  发表于 2018-5-16 18:42:45 | 显示全部楼层
爬虫这个东西,只要是公开的、合法的数据,都可以爬来练手,当然,要注意节制

关键还是解析页面和存储数据

实在不行,爬图呗,相信许多大兄弟都是从这一步开始爬虫的(是的我也是)

举报 使用道具

回复
samding123  新手上路  发表于 2018-5-16 18:58:52 | 显示全部楼层
http://geeksai.com/2017/06/16/scrapy-part1/

举报 使用道具

回复
opengps  新手上路  发表于 2018-5-16 19:05:43 | 显示全部楼层
注意爬大站,别爬小站,小站本来资源有限,爬虫来了直接系统挂了,小心被站长发现揪出来吊打

举报 使用道具

回复
sjmcefc2  新手上路  发表于 2018-5-16 19:16:14 | 显示全部楼层
@colincat 觉得直接上有意义的比较好,当然难道可能比较大

举报 使用道具

回复
sjmcefc2  新手上路  发表于 2018-5-16 19:24:41 | 显示全部楼层
@chesterzzy 有没有国外的可以爬的?

举报 使用道具

回复
sjmcefc2  新手上路  发表于 2018-5-16 19:38:02 | 显示全部楼层
@nulIptr 现在比较苦恼怎么把知识变成

举报 使用道具

回复
colincat  新手上路  发表于 2018-5-16 19:57:47 | 显示全部楼层
@sjmcefc2 这样吧,给你出个题,抓知乎或者微信

举报 使用道具

回复
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表