概述

爬虫: 爬取英文官方文档, 统计其中英语单词出现的频率, 并按降序排列, 用于英语学习

使用

下载:

$ git clone https://github.com/cnlzxin/spider.git

运行:

$ cd ./spider/
$ scrapy crawl docs	# 生成 docs.json 文件

数据处理:

$ python3 docs2dict.py	# 在同目录下生成 dict_.json 文件