411 Open source projects that are alternatives of or similar to MusicSpider

JS逆向研究

QQZone mood spider and analysis. QQ空间多线程爬虫和数据挖掘。提供线上服务，扫码登陆即可自动爬取和分析数据，还有网易云年度报告风格的数据展示；使用docker-compose打包程序，方便部署；额外提供QQ空间抽奖小程序。

robots.txt file parsing and checking for R

📺 B 站全站视频信息爬虫

PHP Link Checker

OSINT Swiss Army Knife

🕷️ A simple crawler (spider) writen in php just for fun, with zero dependencies

扒网站工具，看好哪个网站，指定好URL，自动扒下来做成模版。所见网站，皆可为我所用！

一个java版本的分布式的通用爬虫，可以插拔各个组件（提供默认的）

✨ 使用Node监视支付宝订单，即时通知服务器以实现免签约支付接口

No description or website provided.

各种App、小程序、网站的请求签名或加密算法。 现已有：自如、小红书、蛋壳公寓、luckin coffee(瑞幸咖啡)、bangkokair(曼谷航空)

Python爬虫实战 - 模拟登陆各大网站 包含但不限于：滑块验证、拼多多、美团、百度、bilibili、大众点评、淘宝，如果喜欢请start ❤️

新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。

文章采集工具 Article collection tool

a reliable high-level web crawling & scraping framework for Node.js.

A lite distributed Java spider framework :-)

Fresh Onions is an open source TOR spider / hidden service onion crawler hosted at zlal32teyptf4tvi.onion

徒手实现定时爬取知乎，从中发掘有价值的信息，并可视化爬取的数据作网页展示。

今日头条机器人，支持用户登陆、关注、取消关注、获取关注粉丝、发文、发悟空问答、点赞、评论、采集各种类型新闻讯息等，使用今日头条网页版API实现

netease-music-spider is a sipder that you can find beautiful girlfriend or handsome boyfriend.

逆向app的sign等参数的思路和体验, 安卓逆向, 安卓破解, 逆向app,爬虫解密

This taobao spider has been archived

知乎模拟登录，支持提取验证码和保存 Cookies

一个浏览器端数据爬虫，做每个人的数据助手

An asynchronous enumeration & vulnerability scanner. Run all the tools on all the hosts.

免费 IP 代理池。Scrapy 爬虫框架插件

🎊 Design and implement of lightweight crawler framework.

中国大陆大学列表爬虫

Bittorrent dht network spider

A spiders' program for weixin which made by Express & cheerio

🕷 A lightning fast multithreaded network scanner framework with modules.

😱Full Automatic Amazon Distributed Spider | 亚马逊分布式四国际站采集选款产品|账号admin,密码adminadmin

geetest，滑动验证码

多线程爬取互联网行业常用招聘网站

Web Scan Lazy Tools - Python Package

爬虫所需要的IP代理，抓取九个网站的代理IP检测/清洗/入库/更新，添加调用接口

A golang utility to spider through a website searching for additional links.

⚡ Light weight Golang spider framework | 轻量的 Golang 爬虫框架

📰 A responsive interface of Hacker News with summaries and thumbnails.

MM131网站图片爬取 🚨

[WIP] GOPA, a spider written in Golang, for Elasticsearch. DEMO: http://index.elasticsearch.cn

A series of distributed components for Scrapy. Including RabbitMQ-based components, Kafka-based components, and RedisBloom-based components for Scrapy.

磁力網站U3C3介紹以及域名更新

一个完整的nodeJs 串行爬虫 抓取3万多个页面。

大众点评爬虫、API，可以进行单独城市、单独地区、单独商铺的爬取、搜索、多类型地区搜索、信息获取、提供MongoDB数据库存储支持，可以进行点评文本解密的爬取、存储

Iota is a web scraper which can find all of the images and links/suburls on a webpage

百度贴吧爬虫(基于scrapy和mysql)

all kinds of scrapy demo

蓝天采集器是一款免费的数据采集发布爬虫软件，采用php+mysql开发，可部署在云服务器，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预！是网页大数据采集软件中完全跨平台的云端爬虫系统

利昂图书馆预约系统自动预约&签到程序。支持包括中国人民大学、北京师范大学、济南大学、哈尔滨工业大学等在内的38所高校的图书馆系统

yspider -- 轻量级爬虫系统

jobSpider是一只scrapy爬虫，用于爬取职位信息

python爬虫小项目【持续更新】【笔趣阁小说下载、Tweet数据抓取、天气查询、网易云音乐逆向、天天基金网查询、微博数据抓取（生成cookie）、有道翻译逆向、企查查免登陆爬虫、大众点评svg加密破解、B站用户爬虫、拉钩免登录爬虫、自如租房字体加密、知乎问答

A web spider for shodan.io without using the Developer API.

10 photo website spiders, 10 个国外图库的 scrapy 爬虫代码

Spider项目将会不断更新本人学习使用过的爬虫方法！！！

python 爬虫(amazon, confluence ...)

多线程知乎用户爬虫，基于python3

爬取百度贴吧、TapTap、appstore、微博官方博主上的游戏评论(基于redis_scrapy)，过滤器采用了bloomfilter。