# DevilGrabberPlus

**Repository Path**: zhzxOpenSource/devil-grabber-plus

## Basic Information

- **Project Name**: DevilGrabberPlus
- **Description**: DevilGrabber 的可视化加强版
- **Primary Language**: Python
- **License**: GPL-3.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 1
- **Created**: 2022-04-03
- **Last Updated**: 2022-05-26

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# devil-grabber-plus

计划做一个支持多线程，可视化，支持页面自动扩展，易操作的爬虫

项目刚刚开始做，最近学校因为疫情放假了（宁波），可能会更新得快一点。

## Demo

* 2021.12.11（只做了一个页面）

![demo](http://zhuchengyang.gitee.io/image-bed/devil-grabber-plus/demo.png)

* 2021.12.14

![demo](http://zhuchengyang.gitee.io/image-bed/devil-grabber-plus/repeatGrabber.gif)

* 2021.12.15

![demo](http://zhuchengyang.gitee.io/image-bed/devil-grabber-plus/rep-2.gif)

各位看官可以考虑点个`Star`，几个月后来看估计就写好了。（您的`Star`是我不咕的动力！）

## 如何运行

### 克隆代码

```plain
git clone https://gitee.com/zhuchengyang/devil-grabber-plus.git
cd devil-grabber-plus
```

### 安装依赖

```plain
pip install -r requirements.txt
```

### 前端的热加载

```plain
cd frontend
npm run serve
```

### 后端和爬虫服务开启

```plain
python main.py
```

## service/ 目录下的依赖关系

![structure](http://zhuchengyang.gitee.io/image-bed/devil-grabber-plus/structure.png)

我尽力了……这个目录下真的太乱了，不过这个图可以大致看出分层的结构

## 后续开发

* [ ] DeepGrabber
* [ ] 实时流量监控
* [ ] 统计信息