All Projects → sjqzhang → Go Fastdfs

sjqzhang / Go Fastdfs

Licence: unlicense
go-fastdfs 是一个简单的分布式文件系统(私有云存储),具有无中心、高性能,高可靠,免维护等优点,支持断点续传,分块上传,小文件合并,自动同步,自动修复。Go-fastdfs is a simple distributed file system (private cloud storage), with no center, high performance, high reliability, maintenance free and other advantages, support breakpoint continuation, block upload, small file merge, automatic synchronization, automatic r…

Programming Languages

go
31211 projects - #10 most used programming language
HTML
75241 projects
javascript
184084 projects - #8 most used programming language
CSS
56736 projects
shell
77523 projects
Dockerfile
14818 projects

Projects that are alternatives of or similar to Go Fastdfs

vue-fs
A Vue file management client, complete with a node/express/FS backend.
Stars: ✭ 40 (-98.63%)
Mutual labels:  filesystem, file-system, fileserver
fastdfs
FastDFS is an open source high performance distributed file system (DFS). It's major functions include: file storing, file syncing and file accessing, and design for high capacity and load balance. Wechat/Weixin public account (Chinese Language): fastdfs
Stars: ✭ 8,173 (+179.61%)
Mutual labels:  storage-servers, distributed-file-system, distributed-file-storage
Cloudexplorer
Cloud Explorer
Stars: ✭ 170 (-94.18%)
Mutual labels:  cloud-storage, sync, storage
Moosefs
MooseFS – Open Source, Petabyte, Fault-Tolerant, Highly Performing, Scalable Network Distributed File System (Software-Defined Storage)
Stars: ✭ 1,025 (-64.93%)
Mutual labels:  storage, filesystem, file-system
Cryfs
Cryptographic filesystem for the cloud
Stars: ✭ 1,560 (-46.63%)
Mutual labels:  cloud-storage, filesystem
Jesfs
Jo's Embedded Serial File System (for Standard Serial NOR-Flash)
Stars: ✭ 104 (-96.44%)
Mutual labels:  filesystem, file-system
Clsync
file live sync daemon based on inotify/kqueue/bsm (Linux, FreeBSD), written in GNU C
Stars: ✭ 115 (-96.07%)
Mutual labels:  sync, rsync
Mc
MinIO Client is a replacement for ls, cp, mkdir, diff and rsync commands for filesystems and object storage.
Stars: ✭ 1,962 (-32.88%)
Mutual labels:  storage, filesystem
Vault
Easy persistence of Contentful data for Android over SQLite.
Stars: ✭ 80 (-97.26%)
Mutual labels:  sync, storage
File Storage
File storage abstraction for Yii2
Stars: ✭ 116 (-96.03%)
Mutual labels:  storage, filesystem
Uptoc
A static file deployment tool that supports multiple platforms./ 一个支持多家云厂商的静态文件部署工具
Stars: ✭ 159 (-94.56%)
Mutual labels:  storage, oss
Laravel Storage
A simple filesystem abstraction package for Laravel 4.
Stars: ✭ 100 (-96.58%)
Mutual labels:  storage, filesystem
Hoarder
A simple, api-driven storage system for storing code builds and cached libraries for cloud-based deployment services.
Stars: ✭ 91 (-96.89%)
Mutual labels:  cloud-storage, storage
Electron Storage
Simply save/load json files to/from file system in electron applications
Stars: ✭ 109 (-96.27%)
Mutual labels:  storage, file-system
Go Storage
An application-oriented unified storage layer for Golang.
Stars: ✭ 87 (-97.02%)
Mutual labels:  cloud-storage, storage
Diskover Web
Web file manager, disk space usage, storage search engine and file system analytics for diskover
Stars: ✭ 121 (-95.86%)
Mutual labels:  storage, filesystem
Tus Ruby Server
Ruby server for tus resumable upload protocol
Stars: ✭ 172 (-94.12%)
Mutual labels:  storage, filesystem
Sftpgo
Fully featured and highly configurable SFTP server with optional HTTP, FTP/S and WebDAV support - S3, Google Cloud Storage, Azure Blob
Stars: ✭ 3,534 (+20.9%)
Mutual labels:  cloud-storage, rsync
Gotgt
Simple Golang SCSI Target framework
Stars: ✭ 185 (-93.67%)
Mutual labels:  cloud-storage, storage
Zbox
Zero-details, privacy-focused in-app file system.
Stars: ✭ 1,185 (-59.46%)
Mutual labels:  storage, filesystem

中文 English

愿景:为用户提供最简单、可靠、高效的分布式文件系统。

logo

go-fastdfs是一个基于http协议的分布式文件系统,它基于大道至简的设计理念,一切从简设计,使得它的运维及扩展变得更加简单,它具有高性能、高可靠、无中心、免维护等优点。

大家担心的是这么简单的文件系统,靠不靠谱,可不可以用于生产环境?答案是肯定的,正因为简单所以高效,因为简单所以稳定。如果你担心功能,那就跑单元测试,如果担心性能,那就跑压力测试,项目都自带了,跑一跑更放心^_^。

注意:使用前请认真阅读使用文档视频教程

  • 支持curl命令上传
  • 支持浏览器上传
  • 支持HTTP下载
  • 支持多机自动同步
  • 支持断点下载
  • 支持配置自动生成
  • 支持小文件自动合并(减少inode占用)
  • 支持秒传
  • 支持跨域访问
  • 支持一键迁移(搬迁)
  • 支持异地备份(特别是小文件1M以下)
  • 支持并行体验
  • 支持断点续传(tus)
  • 支持docker部署
  • 支持自监控告警
  • 支持图片缩放
  • 支持google认证码
  • 支持自定义认证
  • 支持集群文件信息查看
  • 使用通用HTTP协议
  • 无需专用客户端(支持wget,curl等工具)
  • 类fastdfs
  • 高性能 (使用leveldb作为kv库)
  • 高可靠(设计极其简单,使用成熟组件)
  • 无中心设计(所有节点都可以同时读写)

优点

  • 无依赖(单一文件)
  • 自动同步
  • 失败自动修复
  • 按天分目录方便维护
  • 支持不同的场景
  • 文件自动去重
  • 支持目录自定义
  • 支持保留原文件名
  • 支持自动生成唯一文件名
  • 支持浏览器上传
  • 支持查看集群文件信息
  • 支持集群监控邮件告警
  • 支持小文件自动合并(减少inode占用)
  • 支持秒传
  • 支持图片缩放
  • 支持google认证码
  • 支持自定义认证
  • 支持跨域访问
  • 极低资源开销
  • 支持断点续传(tus)
  • 支持docker部署
  • 支持一键迁移(从其他系统文件系统迁移过来)
  • 支持异地备份(特别是小文件)
  • 支持并行体验(与现有的文件系统并行体验,确认OK再一键迁移)
  • 支持token下载 token=md5(file_md5+timestamp)
  • 运维简单,只有一个角色(不像fastdfs有三个角色Tracker Server,Storage Server,Client),配置自动生成
  • 每个节点对等(简化运维)
  • 所有节点都可以同时读写

极速体验,只需一分钟

启动服务器(已编译,下载

./fileserver #注意:线上使用请使用项目的control文件进行管理,直接运行,关闭终端会退出。

命令上传

curl -F file=@http-index-fs http://10.1.xx.60:8080/group1/upload

WEB上传(浏览器打开)

http://yourserver ip:8080 注意:不要使用127.0.0.1上传

使用文档

最佳实践(必读)

视频教程

如果你觉得本项目不错,请点击项目顶部的 star 按钮关注本项目

QQ交流群:964274270(go-fastdfs技术交流群)已满

QQ交流群:709218487(go-fastdfs技术交流群)

同时要说明的是,该群是一个学习交流群,如果是程序相关问题,请直接提交issues,不接受邮件求助、微信求助和QQ私信求助

Note that the project description data, including the texts, logos, images, and/or trademarks, for each open source project belongs to its rightful owner. If you wish to add or remove any projects, please contact us at [email protected].