最近正在学习 Go，想写一个爬虫来练练手，希望大家出个好点子

[www6688w]

最近正在学习 Go，想写一个爬虫来练练手。

但是不知道该爬些什么，大家有没有什么建议的目标站点或者好玩的点子，都可以提出来。

这个主要是练习和玩，写完之后代码会直接开源。

[meik2333]

https://github.com/tophubs/TopList 摸鱼神器

[upczww]

爬携程，美团，淘宝，这些都非常好爬

[ylsc633]

我曾入行时学习 php 的时候 用 php 的 cUrl 趴了 达盖尔 板块的图!

[Ritter]

@upczww 好爬+1

[siriussilen]

@Ritter 好爬+2

[TomStark]

@ylsc633 开，往城市边缘开

[www6688w]

@upczww 淘宝防爬不是很厉害麽，大兄弟 (⊙ˍ⊙)

[cxsz]

豆瓣 爬电影信息，评分，观影人数啥的

[Rorshach]

@www6688w 没有吧，我半年前爬的时候只要带上 cookies+代理就可以了

[roryzh]

jav

[default7]

为什么不是 py

[skiy]

我爬漫画 https://github.com/skiy/comic-fetch

[fivestrong]

爬 dmm 吧，整个电影库。

[XxxxD]

从自己兴趣出发啊

[misaka19000]

写啥爬虫啊，没什么技术含量

[rayhy]

写个 golang 版本的 rsshub 吧，能考验下自己怎么组织代码，怎么设计 API，怎么方便别人帮你写某个网站的爬虫。

[herozzm]

@siriussilen 好爬+3

[mumbler]

爬 youtube 所有带中文字幕的视频

[MMMMMMMMMMMMMMMM]

某 hub 视频

[omph]

微信、微博、豆瓣等资源大户

[ctro15547]

国内外各种大秀直播平台的流媒体地址抓取，做个整合，做成 api，外接个播放工具，或者动手写写安卓，就取名叫 XX 聚合直播吧，放墙外收费，到手的钱，写个监控各挖矿币种走势的爬虫，自动买币，一条龙

[snoopygao]

@herozzm 好爬+4

[sadfQED2]

https://github.com/Jinnrry/getAwayBSG 上次看见的，跟进一下？

[sadfQED2]

@snoopygao 好爬+5

[qq7790586]

顺便借楼问下,爬虫是 python 还是 go 好呢?

[ClericPy]

golang 实现其他语言的著名 爬虫框架, 主要是模仿 API 或者架构
或者最简单的模仿其他语言的好用的 http 请求库, 主要了解下设计和命名方式
或者实现 curlparse, 也就是 curl string 和 struct 互转

边看边学, 最简单的还是直接照抄 Github 已有项目, 很多时候自己摸索的进度完全不如直接看好代码, 刚入门多学学别人的设计和风格比自己瞎写有用得多

[mozutaba]

@upczww 还有公众号也非常适合入门

[tushile928]

爬可用 6 位数以内域名

[andy1ee11o2]

Fanza

[amwyyyy]

我之前刚玩的时候把某 h 网站的图片全下了

[encro]

网易考拉 趁倒闭前收集 SKU 分析分析

[laravel]

p 站(p**nh*b)视频中文留言

[None123]

@Rorshach 不会有假数据吗？

[www6688w]

@qq7790586 看个人习惯吧，，我比较喜欢 Go 这种类型的，不过 py 可能会简单一些

[qiuBiLiBiLima]

大神，求抖音视频批量去水印下载，GitHub 上之前有个大神做过，1000 多个 star，但是现在好像不维护了，求大神接力做下去

[qiuBiLiBiLima]

大神，求抖音视频批量去水印下载，GitHub 上之前有个大神做过，1000 多个 star，但是现在好像不维护了，求大神接力做下去 这个是地址 https://github.com/loadchange/amemv-crawler

[roryzh]

@amwyyyy 我给某 x 网全视频都下了