中兴通讯ZXCLOUD GoldenData大数据解决方案

随着云计算、移动互联网、大数据等新技术的出现和不断完善，大数据技术已经将它的数据分析的本领延伸到了各个领域。从电子商务、社交平台、基因分型、医疗健康、食品科学，到公共安全，大数据承担起了海量信息筛选及分析的重任。

中兴通讯大数据平台基于Hadoop分布式技术基础上开发，结合中兴通讯在大数据项目实践过程中总结出的丰富经验与改进，提供了完善的管理、监测、运维、调度工具及Web服务接口。具有NoSQL数据平台所共有的海量存储、线性扩展、高并发读写、低成本使用等优点，同时可以便捷地与Hadoop生态系统中其它组件交互数据。

1.中兴通讯大数据平台优势

自主研发的国产化大数据产品

• 中兴通讯GoldenData大数据产品，基于开源Hadoop为基础，自主研发，实现海量数据的采集、存储、管理、分析、查询、展现等与相关应用于一体的平台型、一站式解决方案，帮助客户有效管理海量数据，提升数据价值，同时确保系统代码、数据的安全可靠。

经过商用考验，产品性能稳定、成熟

• GoldenData大数据平台经过了中移日志详单大数据项目、南京市公安局道路监控云平台项目、中国联通手机应用商店更新改造工程等项目商用考验，产品功能、性能稳定成熟。

丰富的数据挖掘工具

• 提供ETL、数据挖掘、分析、MR作业编排等专业化处理分析工具，为大数据上层应用提供完善的支撑。

与现有IT系统的无缝集成

• 对上层应用，完全兼容标准SQL、WebService等接口，可与现有IT系统无缝集成，减少应用层的修改，降低对接IT系统的开发工作量，实现平滑过渡。

超大规模集群管理

• 具备集群管理工具，提供全自动系统安装程序，可自动计算参数配置；提供高效的运维管理，自动化和智能化程度高；维护设计方便，支持多版本混用和在线扩容功能，存储容量扩展配置可在分钟级完成，确保系统的快速上线、运维。

数据应用的开发支持

• 屏蔽Hadoop底层技术，提供标准API接口、降低上层应用的开发难度。

数据安全隔离

• 中兴通讯大数据平台提供增强的Kerberos安全机制，能够保证只有受信的用户才能访问使用数据和服务，同时在服务端进行了有效的数据隔离, 保证不同的用户对于数据使用的权限严格受限。

负载均衡及数据缓存机制

• 中兴通讯大数据平台提供的REST服务，通过内置的软件负载均衡服务，能将用户请求均匀地发送到多个REST服务。负载均衡服务能够提供有效的数据缓存机制，对于重复内容的请求能够利用缓存内容直接返回，而不需要多次向Hadoop集群提交相同的计算请求源。

灵活的横向伸缩，线性扩展

• 支持在线动态、横向扩容能力，增加存储容量和计算能力的同时不中断业务运行，避免传统扩容方式带来的风险，存储容量和系统性能近似线性增长。

高可用性和高可靠性

• 采用分布式架构，通过对等的处理节点（计算力冗余），对数据采用多副本存储的机制，在个别机器宕机时实现其功能由其他正常节点自动接管，不影响整个系统对外服务，具有高可用性和高可靠性。

2.中兴通讯大数据产品亮点

技术亮点

• 提供读写均衡高级算法，能够保证读写在节点性能及带宽上达到最大化的均衡
• 增加了磁盘热插拔功能，解决了在磁盘热插拔时需要重启数据节点的技术难点
• 采用异步模型对MapReduce框架的关键逻辑结构进行了重写，效率更高
• 提供各类数据的导入导出工具，导入导出性能提升50%以上
• HBase支持多列族，使整体的读取性能提高30%以上
• 完成HIVE和HBase的集成，HBase开发效率提升70%以上
• 引入R 大数据分析与建模工具，支持- RHadoop, rhbase, rmr, rhdfs, SparkR
• 引入扩展包bigmemory, ff, biglars, bigrf等，增强读取处理大数据能力
• 提供MR、HDFS、Hive、Hbase、Spark、Storm等子系统的性能统计及告警功能，可维护性大幅度提高，节省60%以上的维护人力

中兴通讯大数据产品有丰富的商用部署经验

• 2015年7月17日，中标中国农业银行大数据通用平台项目，规模为500个存储/计算节点，通过建立在大数据和新技术基础上的历史数据查询分析、支付方式、数据管理和财务管理的变革探索新的经营模式和盈利模式。
• 2014年3月，中标中信银行总行“数据银行”大数据项目。中信银行2013年提出“再造一个网络银行”的规划，启动互联网金融战略，通过建立在大数据和新技术基础上的支付方式、数据管理和财务管理的变革产生新的经营模式和盈利模式。
• 2013年12月中标中国移动北方信息港日志详单大数据项目，主要用于对中移日志详单类数据的存储及查询分析等应用场景，在非OLTP场景下逐步替代Oracle、Sybase等数据库服务。通过两类接口为应用系统提供非结构化、结构化数据存储和访问服务：数据存取接口，如针对非结构化数据的HDFS接口；数据查询分析接口，MR接口、标准JDBC/SQL接口等；
• 2012年9月，南京市公安局道路监控云平台项目，主要用于对南京市公安局道路图像监控数据汇聚和统一分析处理，是一套海量数据处理的高性能道路图像监控数据存储和分析计算平台，该平台将从现有的多个数据分中心获取和汇聚道路监控数据，并提供集中式的道路监控数据管理功能，为开展各种车辆监控数据分析应用提供海量数据存储管理和并行计算能力；
• 2011年12月，中国联通手机应用商店更新改造工程，在用户数据统一管理基础上利用大数据技术进行数据采集、用户行为特征建模、用户行为数据分析。以用户360度画像为基础，制定各种应用策略，针对不同的需求，推广对应的应用，实现用户数据的价值；
• 2011年9月，为江苏电信IPTV用户提供海量用户画像等服务，实现IPTV系统精准营销。