861 Open source projects that are alternatives of or similar to zhihu-crawler

Python爬虫实战 - 模拟登陆各大网站 包含但不限于：滑块验证、拼多多、美团、百度、bilibili、大众点评、淘宝，如果喜欢请start ❤️

千万级图片爬虫、视频爬虫 [开源版本] Image Spider

搜索你的知乎收藏：可以直观地浏览你的所有收藏夹的内容，并进行全文搜索

Python爬虫，返回一定格式的信息，下载，使用flask提供简易api。抖音无水印、皮皮虾、快手、网易云音乐、qq音乐、咪咕音乐、荔枝FM音频、知乎视频、最右语音、视频、微博......

NetDiscovery 是一款基于 Vert.x、RxJava 2 等框架实现的通用爬虫框架/中间件。

AlipaySpider on Scrapy(use chrome driver); 支付宝爬虫(基于Scrapy)

zhihu-crawler是一个基于Java的高性能、支持免费http代理池、支持横向扩展、分布式爬虫项目

基于 Selenium 的知乎关键词爬虫

微博话题关键词,个人微博采集, 微博博文一键删除 selenium获取cookie,requests处理

知乎模拟登录，支持提取验证码和保存 Cookies

🎯Python 3 网络爬虫实战、数据分析合集 | 当当 | 网易云音乐 | unsplash | 必胜客 | 猫眼 |

APIs for loginning some websites by using requests.

Python入门网络爬虫之精华版

知乎爬虫程序，定时跟踪问题数据，定时推送热门话题

豆瓣电影top250、斗鱼爬取json数据以及爬取美女图片、淘宝、有缘、CrawlSpider爬取红娘网相亲人的部分基本信息以及红娘网分布式爬取和存储redis、爬虫小demo、Selenium、爬取多点、django开发接口、爬取有缘网信息、模拟知乎登录、模拟github登录、模拟图虫网登录、爬取多点商城整站数据、爬取微信公众号历史文章、爬取微信群或者微信好友分享的文章、itchat监听指定微信公众号分享的文章

一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )

Word2vec 千人千面 个性化搜索 + Scrapy2.3.0(爬取数据) + ElasticSearch7.9.1(存储数据并提供对外Restful API) + Django3.1.1 搜索

Spider项目将会不断更新本人学习使用过的爬虫方法！！！

INFO-SPIDER 是一个集众多数据源于一身的爬虫工具箱🧰，旨在安全快捷的帮助用户拿回自己的数据，工具代码开源，流程透明。支持数据源包括GitHub、QQ邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail邮箱、Outlook邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ好友、QQ群、生成朋友圈相册、浏览器浏览历史、12306、博客园、CSDN博客、开源中国博客、简书。

拼多多爬虫，爬取所有商品、评论等信息

多线程知乎用户爬虫，基于python3

No description or website provided.

正方教务管理系统学生版的自动登录、选课、信息获取

Extension for SeleniumLibrary that provides manual and automatic waiting for asyncronous events like fetch, xhr, etc.

an example selenium test project

Web.whatsapp.com bot made with selenium

动漫之家漫画站电脑版原图爬虫

some small project and some articles

PTT 表特版爬蟲圖片下載器

Complete Python Appium framework in 360 degree

利用墨墨背单词的分享功能拿每日20个的单词上限奖励（多线程

Simon is a Python library that helps made easy the browser automation for WhatsApp Web service

A Python module to use the Tesla Motors Owner API

带图形界面的哔哩哔哩漫画下载工具

客户端爬虫安卓端demo

一些脚本和工具

Sample project which utilises frameworkium-core, a framework for writing maintainable Selenium and REST API tests and facilitates reporting and integration to JIRA.

travian kingdoms automation (www.kingdoms.com)

Using Selenium, Neha scraped data about 35 top selling sneakers of Nike and Adidas from stockx.com. She used this data to draw insights about sneaker resales.

爬虫管理系统，支持集群，弹性伸缩。支持运行feapder、scrapy、selenium、playwright等各种框架及脚本

Automate the process of sending referral request and cold mailing on LinkedIn

百度贴吧生日爬虫，可抓取贴吧内吧友生日，并且在对应日期自动发送祝福

Chrome扩展：知乎头像放大器

web scraping in parallel with Selenium Grid and Docker

The simplest demo of chrome automation by python and selenium in AWS Lambda

🚀「Douyin_TikTok_Download_API」是一个开箱即用的高性能异步抖音|TikTok数据爬取工具，支持API调用，在线批量解析及下载。

日常爬虫

🧊 一个可爱且任性的 B 站视频下载器（bilili V2）

A Selenium TDD framework that incorporates key features of Selenium and TestNG which can be used to create web-based automation scripts.

Python Program To Send Instagram Story Views

A bash script to spider a site, follow links, and fetch urls (with built-in filtering) into a generated text file.

知乎日报react版---react+redux+react-router

🙋 A Selenium based automated program that scrapes profiles data,stores in CSV,follows them and saves their profile in PDF.

Browser automation for Chameleon.

Carina automation framework: Web, Mobile, API, DB etc testing...

Showcase of Redis integration with Python FastAPI framework as API backend for RDKit: Open-Source Cheminformatics Software

Resolver implementation and toolset for generating and interacting with Pipfile and Pipfile.lock.

Scrape public FaceBook posts from any group or user into a .csv file without needing to register for any API access

Golang module to detect bots and crawlers via the user agent

PowerShell Web Automation module, made to make automating websites easier