达梦 DMDPC 分布式计算集群:架构、核心优势与落地场景
前言
DMDPC(Distributed Processing Cluster,分布式计算集群)是达梦推出的存算分离分布式数据库集群方案,基于 RAFT 一致性协议构建,原生同时支撑 OLTP 在线交易、OLAP 数据分析,一站式满足 HTAP 混合负载需求,是信创环境下海量数据、高并发业务分布式改造核心选型。
一、核心架构:三层存算分离体系
DMDPC 集群由SP、MP、BP三类节点协同组成,天然解耦计算、元数据、存储能力:
- SP(SQL Processor 计划计算节点)无状态接入网关,面向应用提供数据库连接;接收 SQL、解析优化、生成分布式执行计划、拆分任务调度至 BP,汇总结果返回客户端。支持横向无限扩容,任意 SP 均可接入,应用无感。
- MP(Metadata Processor 元数据节点)全局元数据管理中心,存储表结构、分区信息、分布式事务时钟;通常部署 3 副本构建 RAFT 组,保障元数据高可用,为 SP、BP 提供统一字典服务。
- BP(Backend Processor 数据存储节点)真实承载业务数据,执行 SP 下发的数据扫描、聚合、过滤等子任务;每个 BP 组通过 RAFT 协议配置多副本,实现数据强一致。支持 HASH/RANGE/LIST 多种分区策略,数据均衡分布。
执行简述:应用连接 SP → SP 向 MP 查询元数据 → 拆分分布式计划下发 BP 集群 → BP 并行执行并回传数据 → SP 汇总结果返回前端。
二、DMDPC 核心优势
1. 存算分离,弹性横向扩展
计算层 SP、存储层 BP 独立扩容。业务并发上涨可新增 SP 提升接入能力;数据量增长新增 BP 节点扩容存储,支持在线动态增删节点,扩容过程不中断业务。最高可扩展至上千节点,支撑 PB 级数据。
2. RAFT 多副本,金融级高可用
摒弃传统主备守护进程架构,MP、BP 依托 RAFT 协议自动选主、故障自动切换。副本故障秒级自愈,RPO=0,满足零丢失要求;支持本地多副本 + 异地影子副本,适配两地三中心、三地五中心容灾部署。
3. HTAP 混合负载一体化
一套集群同时承载交易业务与统计分析。读写请求分布式并行执行,复杂查询自动拆分多节点并行运算;无需拆分交易库与数仓,避免数据同步链路,降低运维复杂度。
4. 高度兼容,业务迁移透明
完全兼容达梦单机 SQL 语法、存储过程、函数、事务特性。原有单机业务少量改造即可迁移至 DPC,无需大规模重构代码,降低分布式改造门槛。
5. 分布式事务强一致性
内置全局事务机制,支持完整 ACID,保障跨 BP 节点分布式事务可靠,满足政企、金融等强一致性业务规范。
三、典型应用场景
- 政务与能源大型综合业务系统海量政务数据、电网业务一体化平台,并发业务 + 海量报表查询并存,需要一套数据库支撑交易与统计分析。
- 金融核心、交易类平台要求数据零丢失、故障快速自愈,业务持续可用,高并发交易同时支撑风控实时查询。
- 交通、铁路大型信息化系统客流、票务、调度相关海量时序与交易数据,数据持续增长,需要弹性扩容,兼顾在线业务与离线数据分析。
- 运营商海量计费、用户行为分析日均千万级交易流水,同时支撑用户画像、账单统计等大规模 OLAP 查询。
- 信创新建大型分布式项目不希望分别部署交易数据库、数据仓库,追求 HTAP 极简架构,统一运维一套数据库支撑混合业务。
四、选型小结
对比 DM 数据守护(DataWatch)、DMDSC 共享存储集群:
- DataWatch:主备架构,侧重本地高可用、读写分离,不支持分布式分片;
- DMDSC:共享存储集群,适合单库高并发,存储无法分布式扩展;
- DMDPC:分布式分片 + 存算分离,面向海量数据、混合负载、大规模横向扩展场景。
当业务存在数据持续膨胀、交易与分析并存、需要分布式横向扩容、异地多活容灾需求时,DMDPC 是达梦分布式架构最优选择。
达梦数据库 - 新一代大型通用关系型数据库 | 达梦在线服务平台
