# scrapy_spider

**Repository Path**: pingluan/scrapy_spider

## Basic Information

- **Project Name**: scrapy_spider
- **Description**: scrapy分布式爬虫
- **Primary Language**: Python
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 1
- **Created**: 2017-05-22
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

#scrapy_spider

1. scrapy是基于twisted事件驱动引擎实现的框架 
2. 运行效率极高 
3. 在爬取大量数据时候优势明显 
4. 因此放弃beautifulsoup 转而使用scrapy框架