Skip to content

Latest commit

 

History

History
24 lines (18 loc) · 576 Bytes

README.md

File metadata and controls

24 lines (18 loc) · 576 Bytes

获取各大热门网站热门头条的多线程爬虫,使用Flask聚合网站

知乎、V2EX、微博、贴吧、IT之家、豆瓣、虎扑、天涯、GitHub等网站排行榜

使用步骤:

数据库表结构见hotrows.sql
先修改spiders.pyconfig.py 的数据库配置

  1. 安装依赖
pip install -r requirements.txt
  1. 运行爬虫(建议设为定时任务)
python spiders.py
  1. 启动Flask
python app.py