碧海分布式存储-系统架构

碧海分布式存储:数据时代的新型存储系统

霄云科技倾力打造的碧海分布式存储系统(BOSS:Blue Ocean Storage System,简称:碧海存储), 是面向数据时代设计的全新一代可扩展高性能存储系统,具备高扩展、高可靠、高性能、极简管理等特性,满足数据时代行业、企业不断变化的业务需求,助力行业、企业构建更加弹性、强大和敏捷的IT基础设施。

20200828112533_70617.jpg

碧海存储采用“无中心分布式存储、集中式管理”的系统架构,实现了大规模扩展与易管理性的统一。系统的软件架构由元数据管理服务器、数据存储服务器、客户端、协议网关等部分组成。这些软件组件既可以分离部署在不同的存储服务器上,也可以部署在相同存储服务器上。

碧海分布式存储-优势与特色

高可靠性

多副本与强一致性
• 碧海存储支持多副本与强一致性,数据的不同副本保存在不同存储节点与机架中,支持磁盘/节 点/机架级容错。
• 碧海存储使用专用的Cache管理算法,新修改的数据会立即写入磁盘,从而避免由于断电等故障 引起数据丢失。

多层次数据修复
• 在数据读写过程中,碧海存储会对每个副本进行检查,并及时修复损坏的副本。
• 碧海存储会周期性对每个磁盘进行可靠性检查,如果发现磁盘损坏,则将该磁盘隔离,并启动数据修复。
• 当磁盘损坏而进行数据重建时,该磁盘的数据会分散到存储池中的其它磁盘,以分布式方式进行数据修复,从而显著缩短修复时间,降低数据丢失风险。
• 碧海存储可定期对全系统、指定的存储池(pool)或卷进行一致性检查,并进行修复。
• 碧海存储可以根据系统I/O负载,自动调整修复速率,既能在系统工作时避免对正常业务产生干扰,又能在系统空闲时以大速率修复数据,降低数据丢失风险。
碧海分布式存储-优势与特色-高可靠性

高性能

存储系统的性能问题一直是海量数据、尤其是海量小文件存储面临的挑战之一。随着固态盘性能的快速发展和普遍使用,存储系统的性能瓶颈已从早期的硬件转移到存储软件本身。
碧海存储从通信协议设计、编解码方式、缓存管理算法、I/O调度算法、基于事件驱动的高并发编程模型、基于零拷贝的缓冲区管理等多个关键环节都进行了全栈优化设计,使得碧海存储可以挖掘存储硬件的性能,满足云计算数据中心数据库、虚拟机等业务对高IOPS和低延迟的性能要求。
经过第三方实际测试验证,碧海存储IOPS性能可以达到开源Ceph的3~10倍。
在存储系统规模为4个存储节点,每节点配置一块PCIE SSD存储卡和双端口绑定的万兆以太网卡时,碧海存储系统可以达到140万随 机IOPS。
碧海分布式存储-优势与特色-高性能

平滑扩展

大规模扩展
碧海存储采用无中心架构,彻底排除传统存储中元数据服务器所带来的可扩展性瓶颈,系统可轻松 扩展至上千个节点。
在碧海存储中,可以创建多个存储池(pool)。存储池提供了数据物理隔离的能力,一份数据的所有副本,都会保存在同一个存储池中。每个存储池的容量可以动态扩展。

平滑扩展
碧海存储的节点隔离和存储池隔离机制,使得系统在扩容时无需暂停业务系统,也无需对现有存储池进行备份,保障业务系统的连续性。
增加节点或磁盘后,系统自动均衡数据,确保数据重新均衡地分布,以确保数据读写性能随扩容而线性增长。
碧海分布式存储-优势与特色-平滑扩展

统一存储

碧海存储可同时支持块存储、文件存储、对象存储,可通过规划多个不同的存储池,来同时支持虚拟化及云平台、容器平台、数据库、云盘、邮件系统、电子票据、影像文件、大数据分析等多种应用场景,并可根据业务系统对数据可靠性、性能的不同要求配置不同的冗余策略的QoS策略,真正实现了一套存储系统对业务的支持。
碧海分布式存储-优势与特色-统一存储

极简运维

精简部署
碧海存储可以“一键部署”,并通过Web配置界面操作创建集群、导入License、创建存储池、添加节点和磁盘、启动存储池,简单几步即可完成存储的上线运行。

精简运维
• 系统监控
- 不仅可以对整个集群的全局信息进行浏览,还可以监控每个存储池、每个节点、每个磁盘的利用率和性能,实时掌握系统动态。
- 可以保持长达一年的历史性能记录,为业务负载分析、故障排错提供强有力的支持。
• 轻松扩容,存储新旧硬件轻松更替
- 扩容无需停机,备份数据。
- 存储硬件新旧更替,数据自动迁移,存储系统永不下线。

存储管理,从未如此简单!
碧海分布式存储-优势与特色-极简运维

百亿文件

碧海存储采用基于NoSQL技术的分布式元数据管理架构,目录访问性能优异,并能够支持基于标签的文件搜索。此外,碧海存储还针对海量小文件研发了专用的小文件合并技术,自动将多个小文件合并为聚合文件(大文件)进行存储,有效减少存储端的文件数量,元数据的数据量减少为原来的千分之一 。文件聚合操作对业务层透明。由此,碧海存储可管理文件数量可达100亿。
版权所有 © 2023 上海霄云信息科技有限公司
地址:上海市闵行区剑川路951号 零号湾科技园 1幢南楼8楼
全国统一服务电话:400-108-0268
Powered by MetInfo 7.9 ©2008-2025  mituo.cn