金融影像、双录、非常构化文件数据湖存储方案
需求分析
金融行业正经历高速发展阶段，随之而来的是银行、保险、消费金融等业务系统中各类信息的急剧增加，包括客户资料、财务报表、业务活动中产生的电子文档（如文档、PDF、网页、图片、视频）、部门间通讯文件（通知、计划、公告、公文、报表）及归档文件（制度、档案、合同、资料等）。这些文档数量呈几何级增长，对分类、保存、归档及高效查询、法规遵从提出了较高的要求。传统使用NAS存储数据。由于大数据、AI、自动化等新型技术，因此业务日志、应用日志、系统日志、服务跟踪等数据也同样需要保存，出现海量小文件的趋势。
文件数量十亿到几百亿级规模；
因数据再挖掘价值保存时间长、数据有生命周期特征；
平均数据大小不一，写入多，读取为批量或精准查询；
需要满足灾备机制；
需要多协议支撑满足不同业务的访问；
防篡改和数据流动、备份、保护等功能特性；
可靠性、稳定性和宜运维性。
解决方案
霄云碧海存储系统是一款自主研发的分布式存储软件，它兼容X86和信创软硬件，能够高效处理百亿级别的海量小文件且不降低性能。软件安装运维简便，提供块、CIFS、FTP、NFS、HDFS、S3、CSI等多种标准协议，并支持非结构化数据的多协议互访。该系统已在大型三甲医院的影像平台上稳定运行长达五年，具备副本和EC冗余功能，以及确保业务稳定性的自动故障恢复机制，同时支持双站点灾备复制。
百亿级文件性能不衰减；
支持S3、FTP、CIFS、NFS、NAS、HDFS协议，且所有协议实现互访；
满足双中心互为灾备和法规遵从；
具有高扩展性、高性能、高可用性、运维简单、成本更优特点。
