HustStore 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
HustStore 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
授权协议: GPLv3
开发语言: C/C++ 查看源码 »
操作系统: 跨平台
开发厂商: 360
收录时间: 2016-04-28

HustStore- 高性能分布式存储服务

huststore logo

huststore 是一个高性能的分布式存储服务,不但提供了 10w QPS 级别的 kv 存储的功能,还提供了 hash、set 等一系列数据结构的支持,并且支持 二进制 的 kv 存储,可以完全取代 Redis 的功能。此外,huststore 还结合特有的 HA 模块实现了分布式消息队列的功能,包括消息的流式推送,以及消息的 发布-订阅 等功能,可以完全取代 RabbitMQ 的功能。

特性

huststore 分为 hustdb 以及 HA 模块两大部分。hustdb (存储引擎)的底层设计采用了自主开发的 fastdb,通过一套独特的 md5 db 将QPS 提升至 10w 级别的水准(含网络层的开销)。HA 以 nginx 模块的方式开发。nginx 是工业级的 http server 标准,得益于此,huststore 具备以下特性:

  • 高吞吐量
    hustdb 的网络层采用了开源的 libevhtp 来实现,结合自主研发的高性能 fastdb 存储引擎,性能测试 QPS 在 10w 以上。

  • 高并发
    参考 nginx 的并发能力。

  • 高可用性
    huststore 整体架构支持 Replication (master-master),支持 load balance 。
    HA 的可用性由nginx 的 master-worker 架构所保证。当某一个 worker 意外挂掉时, master 会自动再启动一个 worker 进程,而且多个 worker 之间是相互独立的,从而保证了 HA 的高可用性。
    huststore 的高可用性由其整体架构特点保证。由于 hustdb 的存储节点采用了 master-master 的结构,当某一个存储节点挂掉时,HA 会自动将请求打到另外一台 master,同时 HA 会按照自动进行负载均衡,将数据分布存储在多个 hustdb节点上,因此存储引擎不存在单点限制。
    同时 HA 集群本身也是分布式的设计,而且每个 HA 节点都是独立的,当某一台 HA 挂掉时, LVS 会自动将请求打到其他可用的 HA 节点,从而解决了 HA 得单点限制。

  • 通用性的接口
    huststore 使用 http 作为通用协议,因此客户端的实现不限制于语言。

  • 支持二进制的 key-value

架构设计

运维架构

architect

存储引擎设计hustdb

依赖

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

HustStore 的相关资讯

还没有任何资讯

HustStore 的相关博客

中国开源项目哪家强?看看阿里,百度,腾讯,360等都开...

奇虎360 开源github地址:https://github.com/Qihoo360 1.MySQL中间层 Atlas Atlas是由 Qihoo 360, Web平台部基础架构团队开发...

大公司都有哪些开源项目~~~阿里,百度,腾讯,360,新浪,网易,小米等

大公司都有哪些开源项目~~~阿里,百度,腾讯,360,新浪,网易,小米等 一、总结 一句话总结:要善用开源项目,善用接口,善用...

2016年度开源中国最受欢迎开源软件参展合集

记录这些主要是方便后期阅读开源项目的时候方便查找:http://www.oschina.net/project/top_cn_2016 afinal Afinal简介 Afinal...

HustStore 的相关问答

还没有任何问答,马上提问

评论 (13)

加载中
360以前的人 好像弄过个ssdb 这个和那个有关系吗??
2017/12/06 12:35
回复
举报
华科么… #HustStore#
2016/04/29 08:30
回复
举报
跟pika什么关系? #HustStore#
2016/04/29 08:54
回复
举报
也没见比redis好多少……为啥总喜欢重复造各种轮子 #HustStore#
2016/04/29 09:21
回复
举报
和华科大是个啥关系 #HustStore#
2016/04/29 10:10
回复
举报
这名字。。。 #HustStore#
2016/04/29 10:20
回复
举报
和360有什么关系? #HustStore#
2016/04/29 15:24
回复
举报
还以为360要炸 #HustStore#
2016/04/29 20:18
回复
举报
貌似很牛逼的样子 #HustStore#
2016/04/29 23:51
回复
举报
看到可以完全取代XXX我也是醉了 #HustStore#
2016/05/06 12:13
回复
举报
更多评论
13 评论
286 收藏
分享
返回顶部
顶部