GitPlanet
Projects
Users
Categories
Languages
About
All Categories
→
No Category
→ tmall-spider
Top 1 tmall-spider open source projects
DeadPool
该项目是一个使用celery作为主体框架的爬虫应用,能够灵活的添加爬虫任务,并且同时运行多站点的爬虫工作,所有组件都能够原生支持规模并发和分布式,加上celery原生的分布式调用,实现大规模并发。
✭ 38
python
Dockerfile
crawler
spider
celery
taobao
tmall
deadpool
taobao-spider
tmall-spider
1-1
of
1
tmall-spider projects