All Projects → hymanme → Subbranch-China

hymanme / Subbranch-China

Licence: Apache-2.0 license
银行、支行名称。中国各地区各银行支行名称数据爬虫,数据来源微信商户平台,已经整理可直接导入的sql文件

Programming Languages

python
139335 projects - #7 most used programming language

Projects that are alternatives of or similar to Subbranch-China

bocfx
中国银行外汇牌价爬虫 / API (Bank of China - Foreign Exchange - Spider/ API)
Stars: ✭ 30 (-3.23%)
Mutual labels:  spider, bank
crawler
一个php爬虫
Stars: ✭ 13 (-58.06%)
Mutual labels:  spider
smart-cnab
A package for general manipulation of CNAB files, generation of remittances and parsing of returns using a normalized fields structure.
Stars: ✭ 11 (-64.52%)
Mutual labels:  bank
robotstxt
robots.txt file parsing and checking for R
Stars: ✭ 65 (+109.68%)
Mutual labels:  spider
job-spider
多线程爬取互联网行业常用招聘网站
Stars: ✭ 28 (-9.68%)
Mutual labels:  spider
ICP-Checker
ICP备案查询,可查询企业或域名的ICP备案信息,自动完成滑动验证,保存结果到Excel表格,适用于2022年新版的工信部备案管理系统网站,告别频繁拖动验证,以及某站*工具要开通VIP才可查看备案信息的坑
Stars: ✭ 119 (+283.87%)
Mutual labels:  spider
ZUCC ZhenFangHelper
正方教务管理系统学生版的自动登录、选课、信息获取
Stars: ✭ 36 (+16.13%)
Mutual labels:  spider
Sina Spider
新浪爬虫,基于Python+Selenium。模拟登陆后保存cookie,实现登录状态的保存。可以通过输入关键词来爬取到关键词相关的热门微博。
Stars: ✭ 25 (-19.35%)
Mutual labels:  spider
devsearch
A web search engine built with Python which uses TF-IDF and PageRank to sort search results.
Stars: ✭ 52 (+67.74%)
Mutual labels:  spider
js block
研究学习各种拦截:反爬虫、拦截ad、防广告注入、斗黄牛等
Stars: ✭ 59 (+90.32%)
Mutual labels:  spider
turkish banks
All Turkish Banks and Their Branches
Stars: ✭ 28 (-9.68%)
Mutual labels:  bank
yutto
🧊 一个可爱且任性的 B 站视频下载器(bilili V2)
Stars: ✭ 383 (+1135.48%)
Mutual labels:  spider
NScrapy
NScrapy is a .net core corss platform Distributed Spider Framework which provide an easy way to write your own Spider
Stars: ✭ 88 (+183.87%)
Mutual labels:  spider
scripter
一些脚本和工具
Stars: ✭ 20 (-35.48%)
Mutual labels:  spider
weibo topic
微博话题关键词,个人微博采集, 微博博文一键删除 selenium获取cookie,requests处理
Stars: ✭ 28 (-9.68%)
Mutual labels:  spider
get LibSeat
利昂图书馆预约系统自动预约&签到程序。支持包括中国人民大学、北京师范大学、济南大学、哈尔滨工业大学等在内的38所高校的图书馆系统
Stars: ✭ 39 (+25.81%)
Mutual labels:  spider
gb banking
FiveM Extended Banking Script
Stars: ✭ 14 (-54.84%)
Mutual labels:  bank
promptpay
Thai QR PromptPay Generator
Stars: ✭ 24 (-22.58%)
Mutual labels:  bank
go-movies
golang spider Crawler 爬虫 电影
Stars: ✭ 168 (+441.94%)
Mutual labels:  spider
Spider
Spider项目将会不断更新本人学习使用过的爬虫方法!!!
Stars: ✭ 16 (-48.39%)
Mutual labels:  spider

爬取微信商户平台全国各银行地方支行信息

通过 Python 爬取微信商户平台各个地区各个银行所有支行信息,算目前最全的全国支行信息。已经整理了可直接导入数据库的 sql 文件

需要先登录微信商户平台,主要是接口调用需要 Session 保持,登录拿到需要的 token 就可以获取所有需要的数据了。目前观察微信没有对接口访问速率和ip做限制,意味着随意请求。

使用步骤

  1. 需要有一个微信商户平台账号,没有注册
  2. 登录账号进入企业信息提交页面

hehe

  1. 打开浏览器调试信息,然后选择银行地区
  2. 查看 network hhh 现在已经可以看到返回的结果了,但是这只是单个地区单个银行的支行信息,接下来需要使用爬虫代替我们去查其他的支行信息。
  3. 查看请求头信息,记下下请求信息 data
  4. 那么这个银行省市编号怎么来的呢?

也是在此爬的,不过比较简单,我已经全部整理好了,详情见static_data.py

  1. 最后在 bank.py 脚本中替换你的 cookie 商户id 等参数之后直接运行,静等结果。

直接使用

我已经将省市支行信息全部整理好,在 data 目录下,包括原始返回的 json 数据,以及整理好的可直接导入的 sql 文件,自取。

数据来源于网络,侵删

💆

License

Copyright (C) 2018 Hymane

Licensed under the Apache License, Version 2.0 (the "License");
you may not use this file except in compliance with the License.
You may obtain a copy of the License at

   http://www.apache.org/licenses/LICENSE-2.0

Unless required by applicable law or agreed to in writing, software
distributed under the License is distributed on an "AS IS" BASIS,
WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
See the License for the specific language governing permissions and
limitations under the License.
Note that the project description data, including the texts, logos, images, and/or trademarks, for each open source project belongs to its rightful owner. If you wish to add or remove any projects, please contact us at [email protected].