随着大数据产品云原生化的推进,达梦技术在大数据技术的云化方向上日益创新,自主研发的达梦启云云原生大数据平台具备完善的大数据生态组件与兼容性。目前,产品已在政务、能源、交通运输等行业得到海量数据的处理能力验证并在项目应用中落地,平台实现了大数据场景下的稳定运行,计算资源在线扩容,数据存储集群水平扩展,技术需求敏捷交付,解决了多租户环境下的数据安全与资源隔离问题。
产品应用场景
1、技术中台
建立一个统一的公共技术服务平台,将各种技术能力与资源进行整合和共享,统筹管理,实现资源的高效利用和复用,能够在开发和运维过程中快速获取所需的技术能力和工具支持。
2、多元数据存储与计算平台
在弹性资源池基础上构建数据存储服务。
3、云应用治理平台
全流程容器化运行,多架构集成,国产化软硬件兼容适配,且代码侵入性低。
4、数据中台
数据分析和数据展示的一站式工具平台。
行业成功应用
政务行业
某省民政项目
基于云原生技术建设兼容传统技术场景的大数据底座,零改造支撑上层民政大数据业务系统平稳运行的同时,为平台带来了完善的弹性资源调度能力和运维管理能力。
东湖高新大数据能力平台项目
基于达梦云原生大数据平台,将各类技术能力与资源进行整合和共享,统筹管理,以建设大数据存储和计算为核心,为大数据采集、存储、治理、分析提供大数据基础能力支撑。
平台提供底层平台能力,包括分布式大数据平台、大规模并行仓库计算引擎、关系型数据库,为大数据能力平台提供高可用的数据存储及高性能计算能力。
能源行业
某油田非结构化文件管控平台项目
项目中达梦启云云原生大数据作为基座,对达梦全栈数据产品进行集约化部署、一键式交付、统一运维、弹性扩容,平台核心任务是提供对象存储服务,支撑其地质勘探资料的数据存储和共享服务。为其他软件系统提交数据库服务,如:MongoDB、DM8、MySQL 等。平台支持了结构化、半结构化、非结构化以及各类 IoT 数据的接入、存储与计算能力,促进油田企业数字化转型与智能化发展。
独特创新:针对能源勘探行业专有的 Seg-Y 数据进行优化,将超大非结构化数据进行解析,存入 ClickHouse 数据库并建立业务索引,实现非结构数据和结构化数据之间的双向转换和高效利用。针对 S3 优化上传性能,实现断点续传、秒传、数字摘要、分片上传动态合并等功能。
交通运输行业
某港口数据中台项目
以“数据支撑业务”为切入点,在省级政务云环境部署云原生大数据平台,以服务发放的方式提供上层应用的技术支撑,平台上部署了数据治理平台,有数据治理平台驱动数据采集、治理、开发与服务流程。
平台为数据治理提供数据存储、计算引擎、运维监控,以及云应用治理功能,并在此基础之上,进一步建设以数据治理、可视化分析和大屏展示为主的,面向具体业务场景的一体化数据中台解决方案,实现数据标准化与资产化,助力港口沉淀业务模型,降低重复建设,减少烟囱式协作的成本,提供高效数据服务。构建统一、融合、智能、高效的港口集团数据大脑。