Scrapy 系列:Scrapy 爬取 Weibo 数据简单 demo 试用
2015-10-01
概要
几个方面:
- 配置:SinaSpider
- 启动:SinaSpider,来抓取微博数据
SinaSpider
几个方面:
- 配置
- 使用
配置
具体操作:
# 下载源码
git clone git@github.com:LiuXingMing/SinaSpider.git
使用
2 个方面:
- 基础环境: Mongo、Redis
- 启动 SinaSpider
具体操作:
# 启动 Mongo
mongod
# 启动 Redis
src/redis-server
# 启动 SinaSpider
cd Sina_spider3
python launch.py
备注:
参考资料
原文地址:https://ningg.top/scrapy-series-application-of-sina-weibo/