├── anal.py -> 将数据解析至本地txt ├── main.py -> 爬虫主代码 └── todb.py -> 将本地txt数据入库 └── README.md - python 3.6.4
- requests
- pymysql
- 拉取本项目，进入项目目录。
- 开始抓取。抓取过程中会在当前目录下生成几个解析的txt，便于备份数据以及校验。
python3 main.py- 等待抓取完成后，确认生成了6个txt文件（分别对应6个数据表），即可开始执行入库脚本。
python3 todb.pyFTLIKON/deepdao-spider
Folders and files
| Name | Name | Last commit date | ||
|---|---|---|---|---|