随着以文件为主要内容的数据量快速增长,如何经济高效的存储和管理这些海量数据是众多应用系统面临的主要挑战。基于应用对海量数据存储和扩展性的要求,中兴通讯推出了ZXCLOUD CSS2000云存储解决方案,可同时支持虚机、数据库、iSCSI直存等高性能块存储应用,以及视音频、图片、日志、话单等海量高性能文件存储应用,并为应用提供高性能、标准接口的文件并发访问服务。
该产品目前已在广电新媒体业务、IPTV、信令监测、视频监控等领域和业务得到了广泛应用。
产品特性
集群部署,弹性扩展
●支持在线Scale Out横向扩展,存储容量和系统吞吐率随着存储节点的增加而线性增长。
●支持纵向扩展,可在存储节点上下挂裸盘柜,提升单节点存储容量,满足要求更高性价比的场景。
●单存储域最大可支持72PB存储空间,全系统最大可支持EB级存储空间。
专利技术,提升效率
●独创特“小文件聚合”技术,多个小文件可共享数据块和元数据,避免传统的分布式文件系统出现的对于海量小文件的存储空间浪费、性能下降等问题。
●采用的全局单一命名空间保证了每个存储服务节点具有相同的数据存储能力和系统管理能力,全分布式架构提供系统海量的读写服务能力,云存储系统将数据均匀分布在不同的存储节点,实现数据在多个节点并发读写,最大限度的提高了系统的IO性能。
●将存储文件按策略(自动或者定制)进行分片,分布到各个存储节点中去,使读写操作可在各存储节点并发执行,大大提升性能。
●运用TOE(TCP Offload Engine)技术,显著降低服务器对网络数据的处理负担。
●支持文件和数据块级的数据重删和压缩技术,同时还支持同步、异步两种方式的重删和压缩,利用专有的重复数据检测、压缩算法,系统有效存储空间最大可至80%以上。
简化维护,方便运营
●提供统一的B/S架构操作维护系统,可实时监测系统运营状况,并支持短信、邮件、声光告警。系统还可自动识别新增处理节点和磁盘,存储容量扩展可在分钟级完成。
●提供多租户管理功能,可实现对用户账户的动态添加、更新、删除等管理。系统实现了对多用户的分权分域的管理,可对各用户或应用的数据进行隔离,多租户功能也为系统的运营打下了基础。
绿色节能,安全可靠
●采用完全的分布式架构,无单点故障,任意设备宕机不影响业务。
●系统提供副本和网络RAID(EC纠删码)等数据冗余备份策略,副本数量以及数据块的冗余策略均可灵活调配,可有效满足不同应用对数据安全性的要求。
●采用高密度存储服务器,机架资源占用低,无需特殊制冷,大大减少相关的电源、制冷、维护等开支。对于长期不活动的文件数据沉降到特定存储区域中,对该存储域的硬盘采用休眠轮休机制,降低能耗、提高硬盘寿命。
关键技术
文件并发读/写技术
●按照一定大小将文件切成不同的数据块,并存放在多个不同的存储节点上。文件的分块存放确保系统可对我提供对文件的并发读取服务,有效提升系统的处理能力;
小文件 存储优化技术
●特有的小文件聚合技术,多个小文件共享数据块和元数据,避免传统分布式文件系统出现的对于海量小文件的存储空间浪费、性能下降以及文件句柄数限制的问题;
动态分级存储技术
●基于文件访问频率、时间等策略在不同存储介质之间实现双向动态迁移,确保热点文件数据存放在高性能的存储介质上,数据迁移过程对应用透明,有效提升系统的吞吐能力;
多域技术
●一个命名空间支持1024个域,通过分域技术实现对应用的差别化存储服务;
数据镜像备份技术
●支持多副本技术,最多支持在系统内存放同一文件的4个副本,共5份数据;
●支持数据块级的网络RAID(EC纠删码)技术,提供N+M方式的冗余方式,即系统在保存N个有效数据块的同时保存M个冗余数据块,系统利用N+M个数据块中的任意N个数据块均可还原原始数据;
●支持快照技术,可根据快照策略定时对需要的数据进行备份;
数据重删及压缩技术
●支持文件级重删和数据块级别的重删,同时还支持在线(带内)方式、后处理(带外)方式。支持快速高效重复数据检测专有算法和技术方案,极大提升了系统处理性能;
●支持文件级压缩和数据块级别的压缩,同时还支持同步压缩、异步压缩方式。
技术规格
中兴通讯云存储产品优势
●中兴通讯积极参与国内&国际云存储各项标准和规范的制定,已经在国内外申请32项云存储专利。
●中兴通讯的云存储关键技术(一种分布式文件系统及其数据块一致性管理的方法)获得第十四届中国专利优秀奖。
●中国移动南方基地云存储项目入网测试,中兴通讯云存储产品参与率和通过率均为100%,测试结果远远领先其他厂商。
●中国移动北方信息港大数据项目入网测试,必选项我司全部通过,可选项的测试性能绝大多数指标均远远优于其他厂商。
●完全的去中心化架构设计(包括元数据和数据),多节点全Active集群技术,集群中所有节点可协同工作,实现对数据的并发访问,系统的可靠性和可扩展性更好。
●支持多副本技术,当副本数量在4个以上时,SLA可达到13个9以上。
●中兴通讯云存储产品2013年中标中国移动南方基地云存储项目,存储容量达13PB,成为中国移动海量存储设备的主要供应商。
●中兴通讯拥有ITU-T FG Cloud云计算焦点组副主席、ITU-T SG13 Q18云计算架构组报告人、DMTF Cloud Management sub-committee云计算管理子委员会副主席的重要席位,同时也是DMTF Leadership成员公司。
●除了参与传统重要标准组织ITU、IEEE、IETF、ETSI、OMA、ISO之外,中兴通讯还积极参加DMTF(Distributed Management Task Force,分布式管理任务组)、绿色网格标准组织(the Green Grid, TGG) 、通信管理论坛(TM Forum) 、SNIA(Storage Networking Industry Association, 存储网络工业协会)、OGF(Open Grid Forum, 开放网格论坛)、ONF(Open Network Foundation)开放网络基金会等新兴标准组织的活动。国内中兴通讯还踊跃参加CCSA、信标委SOA云计算工作组等云计算标准化工作。
案例分享
●2014年6月,为中国电信云公司监事Apple iCloud分布式键值数据库,为Apple提供可维护可运营的高可用、高性能的云存储解决方案,SLA达到13个9;并针对该项目快速定制集成Atmos的存储解决方案,提供业务封装和二次开发能力,满足云存储资源池向Paas、Saas业务演进和大型企业定制化服务的业务需求。
●2013年11月,中标中国移动北方信息港云存储项目,存储容量为2PB,用于海量非结构化数据存储,采用标准化的NFS\CIFS和POSIX等接口,为多用户提供数据共享访问服务。
●2013年4月,中兴通讯中标中国移动一级私有云资源池系统南方基地云存储项目,是到目前为止国内最大规模的云存储资源池,其容量达到13PB,以满足移动彩云、139邮箱等应用对存储资源的需求。
●2013年3月,中兴通讯中标CNTV全媒资云存储系统,满足央视媒资生产存储需求。未来将统一管理国家网络电视台累积至今的历史视频资产及今后产出的所有视频文件及其相关元数据,并支持存储数据安全、异地灾备迁移、热点数据分析、近线迁移等功能的应用需求。
●2012年8月,中兴通讯中标CNTV直播系统云存储系统,满足CNTV电视标清及高清直播视频文件的存储和分发,2013年1月项目进行了项目扩容建设,系统两次建设总容量为500T。
●2012年6月,中兴通讯为中国电信集团在上海、四川两地部署的7.69PB云存储系统成功上线。为用户提供高速、安全的存储服务,满足用户的日益增长的存储需求,为业务平台开展高安全性、高可靠性、高可用性、高兼容性和开放性的存储服务提供开发的云存储能力支持。
●2010年7月,2010年,中国移动WAP、彩信云存储系统:为中国移动广东、河北两省WAP网关和彩信中心建设私有云存储平台,用于彩信、WAP日志在线话单文件存储和备份,系统总容量超过1PB。是我国运营商建设商用的第一个云存储系统。