All Projects → wuomzfx → Zhihu Spider

wuomzfx / Zhihu Spider

知乎爬虫程序,定时跟踪问题数据,定时推送热门话题

Programming Languages

javascript
184084 projects - #8 most used programming language

Projects that are alternatives of or similar to Zhihu Spider

zhihu-crawler
徒手实现定时爬取知乎,从中发掘有价值的信息,并可视化爬取的数据作网页展示。
Stars: ✭ 56 (-35.63%)
Mutual labels:  spider, zhihu
Decryptlogin
APIs for loginning some websites by using requests.
Stars: ✭ 1,861 (+2039.08%)
Mutual labels:  zhihu, spider
Zhihuspider
多线程知乎用户爬虫,基于python3
Stars: ✭ 201 (+131.03%)
Mutual labels:  zhihu, spider
zhihu
搜索你的知乎收藏:可以直观地浏览你的所有收藏夹的内容,并进行全文搜索
Stars: ✭ 39 (-55.17%)
Mutual labels:  spider, zhihu
Zhihu Login
知乎模拟登录,支持提取验证码和保存 Cookies
Stars: ✭ 340 (+290.8%)
Mutual labels:  zhihu, spider
Funpyspidersearchengine
Word2vec 千人千面 个性化搜索 + Scrapy2.3.0(爬取数据) + ElasticSearch7.9.1(存储数据并提供对外Restful API) + Django3.1.1 搜索
Stars: ✭ 782 (+798.85%)
Mutual labels:  zhihu, spider
Spiders
Python爬虫,返回一定格式的信息,下载,使用flask提供简易api。抖音无水印、皮皮虾、快手、网易云音乐、qq音乐、咪咕音乐、荔枝FM音频、知乎视频、最右语音、视频、微博......
Stars: ✭ 372 (+327.59%)
Mutual labels:  zhihu, spider
Zhihu Crawler
zhihu-crawler是一个基于Java的高性能、支持免费http代理池、支持横向扩展、分布式爬虫项目
Stars: ✭ 890 (+922.99%)
Mutual labels:  zhihu, spider
Novel Plus
小说精品屋-plus是一个多端(PC、WAP)阅读、功能完善的原创文学CMS系统,由前台门户系统、作家后台管理系统、平台后台管理系统、爬虫管理系统等多个子系统构成,支持多模版、会员充值、订阅模式、新闻发布和实时统计报表等功能,新书自动入库,老书自动更新。
Stars: ✭ 1,122 (+1189.66%)
Mutual labels:  spider
Spider
python crawler spider
Stars: ✭ 70 (-19.54%)
Mutual labels:  spider
Zhihu Daily Reader
🌀 Zhihu Daily Reader (Web).
Stars: ✭ 60 (-31.03%)
Mutual labels:  zhihu
Abotx
Cross Platform C# Web crawler framework, headless browser, parallel crawler. Please star this project! +1.
Stars: ✭ 63 (-27.59%)
Mutual labels:  spider
Image Downloader
Download images from Google, Bing, Baidu. 谷歌、百度、必应图片下载.
Stars: ✭ 1,173 (+1248.28%)
Mutual labels:  spider
T66y spider
Python多线程下载 草榴(t66y.com) 网站【新時代的我們】和【達蓋爾的旗幟】两个板块帖子内的图片
Stars: ✭ 62 (-28.74%)
Mutual labels:  spider
Puppeteer Walker
a puppeteer walker 🕷 🕸
Stars: ✭ 78 (-10.34%)
Mutual labels:  spider
Test demo
Testing Using Python Demo. 使用Python测试脚本demo。
Stars: ✭ 60 (-31.03%)
Mutual labels:  spider
Zhihu
仿知乎网站
Stars: ✭ 60 (-31.03%)
Mutual labels:  zhihu
Geziyor
Geziyor, a fast web crawling & scraping framework for Go. Supports JS rendering.
Stars: ✭ 1,246 (+1332.18%)
Mutual labels:  spider
Xinahn Socket
一个开源,高隐私,自架自用的聚合搜索引擎。 https://xinahn.com
Stars: ✭ 77 (-11.49%)
Mutual labels:  zhihu
Alipayspider Scrapy
AlipaySpider on Scrapy(use chrome driver); 支付宝爬虫(基于Scrapy)
Stars: ✭ 70 (-19.54%)
Mutual labels:  spider

答乎

爬取知乎题目,定时抓取评论数、回答数、阅读数,跟踪分析题目热度走势,并图表呈现。目前有如下功能:

  1. 知乎帐号登陆;
  2. 跟踪问题,定时爬取;
  3. 搜索问题;
  4. 发现问题。

如何使用

目前只支持自己搭建服务器使用

开发

  1. cd server && npm run dev
  2. cd client && npm run dev

线上

  1. /client/config/index.js 中设置好线上server地址
  2. cd server && npm start
  3. cd client && npm run build

注意与声明

此系统仅作学习与个人使用! 系统通过爬虫技术,使得可以通过知乎帐户登陆,但会在数据库存下用户的知乎cookie,请不要用此系统为非作歹。

Note that the project description data, including the texts, logos, images, and/or trademarks, for each open source project belongs to its rightful owner. If you wish to add or remove any projects, please contact us at [email protected].