新浪微博、拉钩网、大众点评各种爬虫
项目模块比较凌乱
所有爬虫都在 spiders包下
- baidurank
百度百科的明星排行
- dazongdianping
大众点评店铺信息
- dist_weibo_spider
pc端微博分布式爬虫，还未完成....
- mzi
妹子网
- pangxieyg
小众电商抢购爬虫
- wechat_sport
微信运动步数获取，目前只能获取自己的步数
移动端微博爬虫，多线程
所有爬虫的ORM用的是django自带的ORM
- usage
一些库的使用示例
CarolLeee/Jpider
Folders and files
| Name | Name | Last commit date | ||
|---|---|---|---|---|
Repository files navigation
Releases
No releases published
Languages
- Python 41.7%
- JavaScript 24.8%
- HTML 20.5%
- TeX 13.0%