This repository has been archived by the owner on Mar 14, 2020. It is now read-only.

关于网络爬虫

在绝大多数的网络环境下，网络的延迟或带宽是影响爬虫工作效率的主要因素。相比之下，在本地处理数据的数据要远快于从网络上获取数据的速度。

爬虫基本结构

数据获取 => 数据处理 => 数据存储