开启大数据3.0时代新纪元，中国电子云发布大数据产品Cealnsight

6月8日,以“山容海纳,云安未来”为主题的2022中国电子云创新产品发布会在线上召开。会上,中国电子云大数据产品总监张占峰发布了中国电子云大数据产品家族CeaInsight。

张占峰表示,截止到现在大数据产品经历三个阶段的演进历程:

从2000s年代起进入了第一个十年,1.0阶段是在不同分析业务场景下,用不同技术如基于Share-Nothing无共享模式并行计算的mpp技术和基于Hadoop体系的大数据技术,分别封装成不同产品,如数仓和大数据平台,完成TP级结构化数据和PB级非结构化数据的汇聚和分析。

从2010s年代,大数据进入了2.0时代——云时代,基于云基础设施Infrastructure,统一部署,但业务依然是分群的,给客户搭建的湖仓平台也依然是分离的架构。

从2020s年代开始,大数据进入了3.0时代,基于云原生技术,核心要素是容器化轻量化部署、存储和计算的分离、极致和可靠的按需弹性扩展,为政企数字化转型提供一站式数据平台解决方案。

中国电子云大数据产品家族CeaInsight原生于大数据3.0时代,基于云原生大数据的创新技术,全面兼容和适配全国产化基础设施,可帮助用户弹性构建出“计算可信、存储可靠、内生安全”的数字底座基础设施。产品包括可独立部署的、多版本交付的、企业级大数据平台软件及云服务。

中国电子云发布一揽子大数据产品

据张占峰介绍,中国电子云大数据产品家族CeaInsight涵盖一个大数据基础平台软件及五个大数据云服务套件。分别是基于Hadoop的企业级大数据平台管理软件的CDP和数据湖探索服务CDL;云搜索引擎服务CSE;日志分析服务CLS;数仓MPP服务以及数据分析服务CDA服务:

大数据基础平台Cloud Data Platform(CDP)面向行业客户,丰富、差异的业务场景,通过中国电子云的一云多芯能力兼容适配多种CPU架构,并灵活部署在虚拟机、物理机及容器等和各类基础设施资源之上。轻量化、灵活的大数据平台部署模式,可让用户应用放心、运维省心、操作方便、管理简单。整体上具备先进、安全、绿色的平台级核心优势。

数据湖探索服务 Cloud DataLake(CDL)是基于云原生技术架构,搭建的数据湖仓一体化平台,包括统一的数据湖级的存储,统一的元数据管理,及统一的数据湖计算。该产品具备元数据驱动、全生命周期管理、全域全链路数据安全等核心能力,拥有原生安全、湖仓一体、存算一体、多模计算、敏捷全栈等能力和核心特点

云搜索服务Cloud Search Engine(CSE)是面向有海量日志及文档数据的全文检索需求打造的服务,提供了基于Elasticsearch的低成本、场景化的企业级搜索引擎,具备快速部署、弹性伸缩和智能运维等核心能力;

日志服务Cloud Log Service(CLS)提供全量日志的批量采集、分级存储、高效检索,及可视化分析和实时告警等核心功能。通过日志服务可整体提高运维和运营效率,满足云平台及云产品运维人员的日志审计、运维分析等场景需求,具有多源异构采集、安全高密度存储、查询和分析、汇聚转换和加载、查询和分析等能力,为用户提供功能全面、快速接入、弹性扩展、安全可靠、性能强劲的端到端服务。

云数据仓库MPP服务,则是面向云上租户,提供的云数仓集群托管服务,基于容器化部署Share-Nothing架构集群的数据库实例,给各租户提供结构化数据的实时查询和分析服务。支持PG和MySQL等主流开源协议,因为是开放的平台服务,生态上中国电子云同时兼顾商业MPP厂商的实例托管,及产品许可、和统一的运维服务。

中国电子云数据分析服务Cloud Data Analytics(CDA),则是根据用户跨组件跨库的数据分析和商业洞察需求,基于云原生分布式查询技术,打造的服务能力。存储支持,对象、Hadoop文件、MPP、ES等多种异构数据资源。面向有数据模型和数据产品敏捷开发需求的高阶客户,提供在线的交互式分析服务能力。

在整体性能上,中国电子云CeaInsight面对100PB的超大规模数据集的过滤查询场景,在保证副本可靠的前提下,可提供百台高密度的存储集群、实现秒级响应的极致性能。而除了客户业务数据,在大数据中心平台侧的元数据集群,可以支持数十万的表规模及数十万的数据分区规模,保障客户数据业务的敏捷高效。

“此外,各类计算引擎分别提供特定业务场景下的极致性能,无论批流计算、还是湖仓构建,从ES全文检索库到K-V键值存储库,交互式分析能力将无处不在。自主创新的大数据技术,加上安全可靠的存储,共同造就了中国电子云大数据平台的极致性能。”张占峰介绍到。

深耕行业,为用户提供“定制化”行业解决方案

不仅如此,会上张占峰还发布了大数据产品整体解决方案,他表示:面向数字政府、数字经济、数字产业等全域现代数字城市业务场景,基于中国电子云大数据产品能力体系,我们将跟合作伙伴一起构建各个行业的大数据整体解决方案,通过中国电子云全面整合交付,构筑“可集成、可服务、可升级、可信任”的整体解决方案。

在最后,张占峰表示,未来大数据产品将会随着AI等技术的发展变得更加智能、安全以及绿色。未来,中国电子云将持续投入科技创新,与客户和伙伴,一起携手踏入大数据云技术的新天地、探索新山海、共筑安全数字底座。