github_spiders

🎗️This is a github.com spider🕷️🕷️. use api.github.com and golang(colly) to complete.

---

This project is limited to people learning the golang language and trying to understand colly framework, please don't use it for anything else!

仅限于学习和研究 golang 以及 colly 框架的人使用，不要用作其他非法或违反社区规则的地方。

---

最初我是为了抓取一些 readme 页面存储起来对英文单词进行分析。于是乎，后来就诞生了该项目。

自己需求完成后，决定将其开源帮助有需要的人们。

需要你准备如下环境：

• Reids
• ElasticSearch 7.x
• 一些github账号的 token (创建token地址 https://github.com/settings/tokens)
• 最好有一些有效的 socks5 代理，可以考虑机场搭配小飞机做负载均衡，很稳

---

如果喜欢该项目，请动动你的小手，点一个星星吧~ Star