GitPlanet

Cheap and reliable Node.js hosting starts at $3/month, and $1/month static HTML hosting

Created with love in Canada, visit hostnodejs.com today

Feel like to post an Ad? Learn Details
All Projects → WeBankBlockchain → Data-Stash

WeBankBlockchain / Data-Stash

Licence: Apache-2.0 license
Data-Stash是基于FISCO-BCOS的数据仓库组件，通过解析节点的binlog日志，生成该节点状态的全量备份，从而使节点能够实现冷热数据分离和数据裁剪。

Programming Languages

java
68154 projects - #9 most used programming language
shell
77523 projects

Labels

datablockchainconsortiumdata-governancedata-separationwebank-blockchain

Projects that are alternatives of or similar to Data-Stash

Data-Export
Data-Export支持将链上数据导出到MySQL、ES等便于进行大数据处理的存储介质中，解决区块链数据复杂查询、分析、可视化和处理的问题。
Stars: ✭ 37 (+37.04%)
Mutual labels:  consortium, data-governance, webank-blockchain
Data-Reconcile
Data-Reconcile是一款基于区块链的对账组件，提供基于区块链智能合约账本的通用化数据对账解决方案，并提供了一套可动态扩展的对账框架，支持定制化开发。
Stars: ✭ 24 (-11.11%)
Mutual labels:  consortium, data-governance, webank-blockchain
Governance-Account
基于智能合约开发，提供区块链用户账户注册、私钥重置、冻结、解冻等账户全生命周期管理，支持管理员、阈值投票、多签制等多种治理策略。
Stars: ✭ 17 (-37.04%)
Mutual labels:  webank-blockchain
SmartDev-Scaffold
应用开发脚手架，可基于智能合约文件，一键生成区块链应用的代码
Stars: ✭ 22 (-18.52%)
Mutual labels:  webank-blockchain
sqllineage
SQL Lineage Analysis Tool powered by Python
Stars: ✭ 348 (+1188.89%)
Mutual labels:  data-governance
datacatalog-tag-manager
Python package to manage Google Cloud Data Catalog tags, loading metadata from external sources -- currently supports the CSV file format
Stars: ✭ 17 (-37.04%)
Mutual labels:  data-governance
WeIdentity
基于区块链的符合W3C DID和Verifiable Credential规范的分布式身份解决方案
Stars: ✭ 1,063 (+3837.04%)
Mutual labels:  consortium
bigquery-data-lineage
Reference implementation for real-time Data Lineage tracking for BigQuery using Audit Logs, ZetaSQL and Dataflow.
Stars: ✭ 112 (+314.81%)
Mutual labels:  data-governance
FISCO-BCOS
FISCO BCOS是由微众牵头的金链盟主导研发、对外开源、安全可控的企业级金融区块链底层技术平台。 单链配置下，性能TPS可达万级。提供群组架构、并行计算、分布式存储、可插拔的共识机制、隐私保护算法、支持全链路国密算法等诸多特性。 经过多个机构、多个应用，长时间在生产环境中的实践检验，具备金融级的高性能、高可用性及高安全性。FISCO BCOS is a secure and reliable financial-grade open-source blockchain platform. The platform provides rich features including group architecture, cross-chain communication protoc…
Stars: ✭ 1,603 (+5837.04%)
Mutual labels:  consortium
auto-data-tokenize
Identify and tokenize sensitive data automatically using Cloud DLP and Dataflow
Stars: ✭ 21 (-22.22%)
Mutual labels:  data-governance
data-lineage
Generate and Visualize Data Lineage from query history
Stars: ✭ 166 (+514.81%)
Mutual labels:  data-governance
document-processing-pipeline-for-regulated-industries
A boilerplate solution for processing image and PDF documents for regulated industries, with lineage and pipeline operations metadata services.
Stars: ✭ 36 (+33.33%)
Mutual labels:  data-governance
datasphere-service
an open source dataworks platform
Stars: ✭ 20 (-25.93%)
Mutual labels:  data-governance

WeBankBlockchain-Data-Stash

License

WeBankBlockchain-Data-Stash 是一个基于FISCO-BCOS平台的数据治理工具，为区块链底层平台FISCO BCOS提供节点数据扩容、备份、裁剪及快速同步的能力。用户可基于binlog协议同步区块链底层节点全量数据，实现冷热数据分离，支持断点续传、数据可信验证，并提供快速同步机制，助力FISCO BCOS轻松应对节点海量数据的运维场景。

此版本只支持FISCO BCOS 2.6及以上。

关键特性

  • 节点账本全量备份

  • 多维度账本校验

  • 备份数据可信存储

  • 断点续传

  • 易于使用

环境要求

在使用本组件前，请确认系统环境已安装相关依赖软件，清单如下：

依赖软件 说明 备注
FISCO-BCOS >= 2.7.1 需要为节点开启binlog选项
MySQL >= mysql-community-server[5.7]
Nginx >= nginx[1.17.3]
Java JDK[1.8]
Git

文档

贡献代码

欢迎参与本项目的社区建设：

  • 如项目对您有帮助，欢迎点亮我们的小星星(点击项目上方Star按钮)。
  • 欢迎提交代码(Pull requests)。
  • 提问和提交BUG。
  • 如果发现代码存在安全漏洞，请在这里上报。

License

license

开源协议为Apache License 2.0. 详情参考LICENSE。

Note that the project description data, including the texts, logos, images, and/or trademarks, for each open source project belongs to its rightful owner. If you wish to add or remove any projects, please contact us at [email protected].