数据中台集成方案:制造企业数据资产落地的完整路径
摘要: 制造企业在推进数字化时,最棘手的往往不是买设备,而是把分散在ERP、MES、SCADA中的数据真正打通。本文从集成架构、系统对接、数据建模、协议选型到实施节奏五个维度,拆解一套可落地的数据中台集成路径,并结合汽车零部件、化工、矿业等国内企业的真实数据,给出可复制的方法与避坑建议。
—
在长三角一家年产值40亿元的汽车零部件工厂里,信息部门做过一次盘点:全厂在用系统27套,其中MES三套(分属三个车间不同时期建设)、ERP两套、WMS一套、设备层还跑着西门子和欧姆龙的PLC。要出一份”单件产品全工序能耗”报表,需要人工从四个系统导Excel再手工比对,耗时两天,且口径经常对不上。
这类问题的本质不是缺系统,而是缺一套把系统连起来的机制。下面从架构设计开始,逐层展开。
数据中台集成方案集成架构

一套经得起生产环境检验的数据中台集成方案,通常采用五层解耦的架构:数据源层、接入层、存储计算层、资产服务层、应用消费层。解耦的意义在于,任何一层的技术替换都不会波及上下游。
数据源层覆盖OT与IT两侧。OT侧包括PLC、DCS、仪表、数控机床,IT侧包括ERP、MES、WMS、SRM、QMS以及各类Excel台账。接入层承担协议转换、边缘缓存与断点续传,工业场景里这一层尤为关键——车间网络抖动是常态,边缘节点至少要能缓存72小时数据。
存储计算层建议采用”湖仓一体”思路:原始明细进数据湖保留全量,清洗后的主题数据进数仓支撑分析。资产服务层负责元数据、主数据与数据服务的统一注册;应用消费层则面向看板、APS排产、能耗优化等具体场景。
| 层级 | 核心职责 | 典型组件 | 建设周期 |
|---|---|---|---|
| 数据源层 | 协议适配、点位注册 | OPC UA网关、边缘采集器 | 2-4周 |
| 接入层 | 缓冲、清洗、路由 | Kafka、MQTT Broker | 3-5周 |
| 存储计算层 | 分层建模、批流计算 | Spark/Flink、对象存储 | 6-10周 |
| 资产服务层 | 元数据、主数据、服务API | 数据资产目录 | 4-8周 |
| 应用消费层 | 看板、算法、反哺业务 | BI、APS、AI模型 | 持续迭代 |
在这套结构中,工业数据中台构建企业级数据资产中心的定位就落在资产服务层——它不只是把数据存下来,而是让每一张表、每一个点位都有明确的业务归属、责任人与质量等级。某特钢企业在完成资产盘点后,把原本散落在13个系统的4200张表收敛为186个主题域,报表开发周期从平均9天缩短到2.5天。
系统集成方案

架构定下来之后,真正的难点在系统对接。国内制造业普遍存在”三代同堂”的现象:老系统是C/S架构、数据库直连;中间一代是SOA架构、有WebService;新一代是云原生、有开放API。一套务实的集成策略必须同时容纳这三种形态。
对ERP、WMS这类核心业务系统,推荐以CDC(变更数据捕获)方式准实时同步,而不是定时全量抽取。某化工集团曾采用每天凌晨全量抽取SAP的订单表,单次耗时4小时,且频繁触发生产库性能告警;改为基于日志的增量捕获后,同步延迟从24小时降到90秒以内,对源库的影响几乎为零。
对MES这类车间系统,要优先争取厂家的标准接口。如果厂家只提供数据库视图,务必签订视图稳定性协议,避免版本升级时字段被悄悄改动。对没有接口的存量老系统,可考虑RPA或文件交换作为过渡手段,但要明确标注为”临时通道”,并在半年内排期替换。
| 系统类型 | 推荐对接方式 | 同步频率 | 注意事项 |
|---|---|---|---|
| ERP/SAP | CDC日志解析 | 秒级-分钟级 | 需评估生产库负载 |
| MES | 标准API或视图 | 分钟级 | 锁定字段契约 |
| SCADA/DCS | OPC UA订阅 | 亚秒级 | 只读,禁止回写 |
| WMS/SRM | 消息队列 | 分钟级 | 幂等设计 |
| 单机设备 | 边缘网关 | 秒级 | 断网续传 |
这里有一个容易被低估的工作量:主数据对齐。华东某矿业集团在集成时发现,同一个供应商在五个系统里有五种编码,光是建立映射就花了三周。建议把主数据治理前置到系统对接之前,否则后续的关联分析会全面失真。
数据集成设计

数据到了中台,不等于可以直接用。工业数据的特殊性在于:时序数据体量极大但结构简单,业务数据体量小但关系复杂,两者必须分开建模再在主题层汇聚。
分层设计建议采用ODS(贴源层)、DWD(明细层)、DWS(汇总层)、ADS(应用层)四层。ODS保留原始形态不做加工,便于溯源;DWD完成清洗、编码统一与维度退化;DWS按主题构建宽表;ADS面向具体报表或算法。
时序数据的压缩策略值得单独拿出来说。某水泥集团有8.6万个测点,1秒采样频率,原始写入压力约每秒8.6万条。经过三阶段处理——边缘侧做死值过滤(变化才上传)、平台侧做旋转门压缩、归档侧做降采样——实际落盘数据量降到原来的7.3%,年存储成本从预估的180万元降到13万元。
数据质量要设硬性卡点,而不是事后检查。常见的规则包括:非空校验、值域校验、波动率校验、跨系统一致性校验。某电力设备厂设置了”日产量与能耗相关系数低于0.6则告警”的规则,上线两个月内就发现了三个车间的计量表接线错误,避免了约200万元的成本误判。
批流一体是当前的主流选择。设备实时告警、工艺参数越限这类场景走流计算;成本核算、质量追溯这类需要关联多表、回溯历史的场景走批处理。两者共用同一套表结构定义,可以避免流批口径打架。
接口与协议
协议选型直接决定采集的稳定性和后期的运维成本。工业现场的事实是:没有一种协议能通吃所有场景。
OPC UA是目前设备层最值得优先争取的协议,它跨平台、支持安全加密、自带信息模型,能同时传数据和语义。老旧的Modbus RTU/TCP仍然大量存在,缺点是只有寄存器地址没有语义,点位配置全靠人工维护文档,一个中型车间往往要维护上千行点位表。
MQTT在跨厂区、低带宽场景优势明显,某矿业集团的七个矿井分布在300公里范围内,采用MQTT over TLS上报,单井月流量控制在4GB以内。HTTP/REST适合与云服务和第三方SaaS对接,但不适合高频点位采集。JDBC直连则只建议用于低频的业务数据,且必须只读、限流。
| 协议 | 典型场景 | 实时性 | 语义能力 | 运维成本 |
|---|---|---|---|---|
| OPC UA | 车间设备层 | 亚秒级 | 强 | 中 |
| Modbus | 老旧仪表 | 秒级 | 弱 | 高 |
| MQTT | 跨厂区遥测 | 亚秒级 | 中 | 低 |
| REST/HTTP | 云服务对接 | 秒级-分钟级 | 强 | 低 |
| Kafka | 平台内流转 | 毫秒级 | 中 | 中 |
安全方面不能妥协。OT网络与IT网络之间必须部署工业网闸或单向隔离装置,采集方向遵循”单向流出”原则。涉及两化融合管理体系贯标的企业,可参考GB/T 23001的要求建立数据资产管理制度;做智能制造能力成熟度评估的企业,三级以上对数据贯通有明确要求,中台的元数据完整度是评审重点之一。
接口治理上,建议把所有对外数据服务统一注册到API网关,带上版本号、限流策略与调用审计。某家电企业曾因为一个未登记的报表接口被下游系统高频调用,拖垮了整个查询集群,事后补了两个月才理清调用关系。
集成实施要点
再好的设计,落不了地也是空谈。从多个项目复盘来看,以下几点最影响成败。
先选场景再建平台。 不要一开始就想打通全厂。挑一个数据基础好、业务痛点明确、领导关注度高的场景做试点,比如”关键设备OEE提升”或”能耗成本归集到工单”,三个月内出可见成效,后续推广的阻力会小很多。
把数据owner落到人。 每一张核心表、每一个关键指标都要有明确的业务责任人,而不是全部压在IT部门。某轮胎厂的实践是设立”数据管家”角色,由各业务线的资深骨干兼任,每月做一次数据质量评分并纳入部门考核,半年后数据完整率从78%提升到96%。
预留治理预算。 很多项目把预算全投在平台软件和硬件上,忽略了持续治理的人力成本。经验比例是:平台建设与数据治理的投入比大约6:4,后期运营阶段每年还需要平台投入15%-20%的费用做迭代。
验收指标要可量化。 建议设定四类指标:接入覆盖度(关键系统接入比例)、数据时效(端到端延迟)、数据质量(完整率、准确率、一致率)、业务价值(报表开发效率、决策响应速度)。某汽车零部件企业把”报表需求平均交付周期”作为核心KPI,一年内从11天降到1.8天,这个数字比任何技术参数都更有说服力。
避免一次性大爆炸式上线。 分批接入、分批验证、分批切换,每个批次都保留回滚路径。工业现场对停机的容忍度极低,任何影响生产的变更都必须有窗口期和应急预案。
—
回到开头那家零部件工厂的问题:在完成这套数据中台集成方案系统建设后,”单件产品全工序能耗”报表变成了每天早上自动刷新的看板,人工对账工作归零,口径由中台统一定义,三个车间再没为数据打架。
对正在规划数据集成的制造企业来说,工业数据中台构建企业级数据资产中心不是一句口号,它意味着把散落各处的数据变成可查找、可理解、可信任、可复用的资产。而一套务实的数据中台集成方案,本质上是在回答三个问题:数据从哪里来、数据怎么变成资产、资产如何产生业务价值。把这三个问题回答清楚,剩下的就是按节奏执行。

推荐阅读: 物联网平台 | 工业AI中台 | EAM设备管理系统
声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:sales@idmakers.cn删除,任何个人或组织,需要转载可以自行与原作者联系。
