449 Open source projects that are alternatives of or similar to Subbranch-China

🧊 一个可爱且任性的 B 站视频下载器（bilili V2）

Crawling GitHub Trending Pages every day

🚀「Douyin_TikTok_Download_API」是一个开箱即用的高性能异步抖音|TikTok数据爬取工具，支持API调用，在线批量解析及下载。

Latinum is a framework for resource and currency calculations.

NScrapy is a .net core corss platform Distributed Spider Framework which provide an easy way to write your own Spider

裁判文书网爬虫

Golang module to detect bots and crawlers via the user agent

资讯爬虫App

一些脚本和工具

项目已经移动至：https://github.com/BaiduSpider/BaiduSpider ！！ 一个爬取百度搜索结果的爬虫，目前支持百度网页搜索，百度图片搜索，百度知道搜索，百度视频搜索，百度资讯搜索，百度文库搜索，百度经验搜索和百度百科搜索。

Generate an object for testing if a request is sent, request is Mikeal's request.

超高速异步协程Python爬虫

微博话题关键词,个人微博采集, 微博博文一键删除 selenium获取cookie,requests处理

A spider tapestry weaver

Grabs all of the audio files from all of the Blinkist books

零基础学习python爬虫

利昂图书馆预约系统自动预约&签到程序。支持包括中国人民大学、北京师范大学、济南大学、哈尔滨工业大学等在内的38所高校的图书馆系统

爬虫集合

bet365 bot: bet365的比赛实时比分数据、实时赔率

直接通过链家 API 抓取数据的极速爬虫，宇宙最快~~ 🚀

Thai QR PromptPay Generator

web spider built by puppeteer, support task-queue and task-scheduling by decorators，support nedb / mongodb, support data visualization; 基于puppeteer的web爬虫框架，提供灵活的任务队列管理调度方案，提供便捷的数据保存方案（nedb/mongodb），提供数据可视化和用户交互的实现方案

银行卡卡号分析（Yii2扩展）

微信公众号爬虫

带图形界面的哔哩哔哩漫画下载工具

admin ui for scrapy/open source scrapinghub

Unofficial client to access your Itaú bank data

dynamic crawler for web vulnerability scanner

新浪爬虫，基于Python+Selenium。模拟登陆后保存cookie，实现登录状态的保存。可以通过输入关键词来爬取到关键词相关的热门微博。

京东口罩库存监控爬虫(非selenium)，扫码登录、查价、加购、下单、秒杀

该项目是一个使用celery作为主体框架的爬虫应用，能够灵活的添加爬虫任务，并且同时运行多站点的爬虫工作，所有组件都能够原生支持规模并发和分布式，加上celery原生的分布式调用，实现大规模并发。

LSpider 一个为被动扫描器定制的前端爬虫

百度贴吧生日爬虫，可抓取贴吧内吧友生日，并且在对应日期自动发送祝福

BitTorrent DHT Protocol && DHT Spider.

Text-to-SQL in the Wild: A Naturally-Occurring Dataset Based on Stack Exchange Data

基于python语言开发的千万级别搜索引擎

研究学习各种拦截：反爬虫、拦截ad、防广告注入、斗黄牛等

一个功能全面的微信读书爬虫 wereader

A spider on Dcard. Strong and speedy.

JavaScript + BeautifulSoup = JSSoup

PTT 表特版爬蟲圖片下載器

多线程知乎用户爬虫，基于python3

🕷️ A simple crawler (spider) writen in php just for fun, with zero dependencies

portia-dashboard is a visual web crawler based on scrapinghub/portia

A web search engine built with Python which uses TF-IDF and PageRank to sort search results.

稳健高效的评分制-针对性- IP代理池 + API服务，可以自己插入采集器进行代理IP的爬取，针对你的爬虫的一个或多个目标网站分别生成有效的IP代理数据库，支持MongoDB 4.0 使用 Python3.7（Scored IP proxy pool ,customise proxy data crawler can be added anytime）

文章采集工具 Article collection tool

[Crawler/Scraper for Golang]🕷A lightweight distributed friendly Golang crawler framework.一个轻量的分布式友好的 Golang 爬虫框架。

No description or website provided.

抓取豆瓣，bilibili等中的电视剧、电影、动漫演员等信息

基于Electron爬虫程序

链家网和贝壳网房价爬虫，采集北京上海广州深圳等21个中国主要城市的房价数据（小区，二手房，出租房，新房），稳定可靠快速！支持csv,MySQL, MongoDB,Excel, json存储，支持Python2和3，图表展示数据，注释丰富 ，点星支持，仅供学习参考，请勿用于商业用途，后果自负。

FiveM Extended Banking Script

A spiders' program for weixin which made by Express & cheerio

This taobao spider has been archived

golang spider Crawler 爬虫 电影

Spider项目将会不断更新本人学习使用过的爬虫方法！！！

计算机基础知识，数据结构，设计模式，Tomcat中间件的实现

徒手实现定时爬取知乎，从中发掘有价值的信息，并可视化爬取的数据作网页展示。

客户端爬虫安卓端demo