575 Open source projects that are alternatives of or similar to Geetest

一个简单的分布式爬虫框架

geetest，滑动验证码

知乎模拟登录，支持提取验证码和保存 Cookies

整合第三方网站的视频和弹幕资源, 为白嫖党提供最佳看番追剧体验

Wget-AT is a modern Wget with Lua hooks, Zstandard (+dictionary) WARC compression and URL-agnostic deduplication.

Python爬虫代理IP池(proxy pool)

gathertool是golang脚本化开发库，目的是提高对应场景程序开发的效率；轻量级爬虫库，接口测试&压力测试库，DB操作库等。

🧊 一个可爱且任性的 B 站视频下载器（bilili V2）

🕷️用于爬取B站前top100的小视频

带图形界面的哔哩哔哩漫画下载工具

爬虫工程师常用的 Chrome 插件 | Chrome extensions used by crawler developer

小说精品屋-plus是一个多端（PC、WAP）阅读、功能完善的原创文学CMS系统，由前台门户系统、作家后台管理系统、平台后台管理系统、爬虫管理系统等多个子系统构成，支持多模版、会员充值、订阅模式、新闻发布和实时统计报表等功能，新书自动入库，老书自动更新。

INFO-SPIDER 是一个集众多数据源于一身的爬虫工具箱🧰，旨在安全快捷的帮助用户拿回自己的数据，工具代码开源，流程透明。支持数据源包括GitHub、QQ邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中国博客、简书。

破解JS反爬虫加密参数，已破解中国裁判文书网（2020-06-30更新），淘宝密码，天安保险登录，b站登录，房天下登录，WPS登录，微博登录，有道翻译，网易登录，微信公众号登录，空中网登录，今目标登录，学生信息管理系统登录，共赢金融登录，重庆科技资源共享平台登录，网易云音乐下载，一键解析视频链接，财联社登录。

APIs for loginning some websites by using requests.

B站用户爬虫 好耶~是爬虫

Bilibili.com视频批量下载工具包

🍻 bilibili video (including bangumi) and danmaku downloader | B站视频（含番剧）、弹幕下载器

Python爬虫实战 - 模拟登陆各大网站 包含但不限于：滑块验证、拼多多、美团、百度、bilibili、大众点评、淘宝，如果喜欢请start ❤️

B站3亿用户信息爬虫（mid号，昵称，性别，关注，粉丝，等级）

抓取豆瓣，bilibili等中的电视剧、电影、动漫演员等信息

A bash script to spider a site, follow links, and fetch urls (with built-in filtering) into a generated text file.

⚡ Light weight Golang spider framework | 轻量的 Golang 爬虫框架

📺 B 站全站视频信息爬虫

A Facebook crawler

哔哩哔哩的API调用模块

免费 IP 代理池。Scrapy 爬虫框架插件

The archivist's web crawler: WARC output, dashboard for all crawls, dynamic ignore patterns

[DEPRECATED] Simple, flexible, delightful web crawler/spider package

Simple, clear and fast Web Crawler framework build on python3.6+, powered by asyncio.

The Resources for "Natural Language to Logical Form" ; "自然语言转逻辑形式"研究资料收集。

爬取CSDN上的博客文章

some of my manim projects

简简单单spider

知乎爬虫程序，定时跟踪问题数据，定时推送热门话题

48工具，提供公演、口袋直播录源，公演、口袋录播下载，B站直播抓取，B站视频下载，A站直播抓取，A站视频下载，视频截取，视频导出gif，视频合并等功能。

A dungeon crawler

GUI of AlipayOrdersSupervisor, implemented in Java and Swing

又一个 java 内容（pa）获取（chong）工具

A web crawler (for bug hunting) that gathers more than you can imagine.

b站仿搜索引擎样式首页风格，支持几种不同显示效果

Geziyor, a fast web crawling & scraping framework for Go. Supports JS rendering.

Weekly Go Online Meetup via Bilibili｜Go 夜读｜通过 bilibili 在线直播的方式分享 Go 相关的技术话题，每天大家在微信/telegram/Slack 上及时沟通交流编程技术话题。

📺 可以摸鱼的 Bilibili Mini-Client # 支持Mac/Win

Bilibili live WebSocket/tcp API

微信小游戏辅助合集（加减大师、包你懂我、大家来找茬腾讯版、头脑王者、好友画我、悦动音符、我最在行、星途WeGoing、猜画小歌、知乎答题王、腾讯中国象棋、跳一跳、题多多黄金版）

BiliBili直播挂机脚本Python版本

Async Python 3.6+ web scraping micro-framework based on asyncio

A Xposed Module For BiliBili Android Player

a puppeteer walker 🕷 🕸

🤖 A spider and server for Luoo.qy

(Bilibili)B站直播礼物答谢、定时广告、关注感谢，自动回复工具，房管工具，自动打卡，Bilibili直播弹幕姬(使用websocket协议)，java版B站弹幕姬，基于springboot。

capture pictures from website like sina, lofter, huaban and so on

Unmaintained 🐳 ☕️ 🕷 Scala crawler(spider) framework, inspired by scrapy, created by @gaocegege

BaiduSpider，一个爬取百度搜索结果的爬虫，目前支持百度网页搜索，百度图片搜索，百度知道搜索，百度视频搜索，百度资讯搜索，百度文库搜索，百度经验搜索和百度百科搜索。

🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent

🍟 The live2d poster girl plugin of 33 for WordPress.

哔哩哔哩动画第三方客户端（UWP平台）

Some classic web crawler projects.一些经典的爬虫

抖音 SDK，数据采集，爬虫抓取不是梦