AI时代企业数据架构转型趋势一:分析数据集上移
引言
企业数据架构是一个系统性工程,涵盖数据分布架构、数据流转架构、数据集成架构、数据模型架构、数据治理架构(包括标准、质量、主数据管理)以及数据信息化架构等相关物理与逻辑架构多个维度。这些维度共同构成了企业数据从产生到消费、从存储到应用的整体框架。而在当前AI技术迅猛发展的背景下,各个维度都在经历深刻变革。
本文聚焦于数据分布架构这一维度中的一个关键趋势——分析数据集向交易侧的上移。这一看似局部的变化,实则牵动着整个数据架构的演进方向,甚至正在重塑企业业务系统的本质定位。
当企业还在津津乐道于“数据是新时代的石油”时,真正的先行者已经开始追问一个更本质的问题:为什么石油必须千里迢迢运到炼油厂,而不能在井口直接变成驱动力?
这正是当下企业数据架构面临的根本性挑战。IDC最新研究显示,有65.4%的企业认为大数据平台对促进数字创新至关重要,同时59%的企业希望在2025年投资基础设施自动化和基于AI的可观测性解决方案。然而,传统的数据架构中,分析数据集与交易系统之间横亘着一条难以逾越的鸿沟——数据必须经过ETL、清洗、建模,才能从业务发生的“交易侧”抵达用于决策的“分析侧”。这种“先交易、后分析”的串行模式,在追求实时智能的AI时代,正在成为制约企业响应速度的最大瓶颈。
而真正驱动这一架构变革的核心力量,正是AI本身——AI不仅对数据分析能力提出了更高要求,更重要的是,AI让“本体”从理论走向实用,让主动元数据成为可能,从而强力地拉近了分析数据集与业务系统的距离。
本文聚焦数据分布架构的转型趋势,提出一个核心观点:分析数据集正在向交易侧上移,甚至与交易系统走向融合,这一变革将成为企业从“记录历史”向“驱动未来”跃迁的关键拐点。而AI,正是推动这一拐点到来的核心引擎。
(注:文后附件会对分析数据集上移的具体物理形态进行说明)
一、趋势洞察:分析数据集向交易侧的靠近与融合
1.1 传统架构的“分析滞后”困境
在过去二十年的企业数据架构演进中,交易系统与分析系统始终处于“两地分居”状态。交易系统(如ERP、CRM、核心银行系统)负责记录每一次业务发生,追求的是高并发、低延迟和数据一致性;而分析系统(数据仓库、数据湖、BI平台)则负责从历史数据中挖掘洞察,追求的是复杂查询能力和数据整合广度。
这种“交易库+分析仓”的二元架构,本质上是将数据视为“事后诸葛亮”——业务先跑起来,数据先记录下来,等到月底、周末,或者运气好一点的“T+1”第二天,分析团队才能告诉业务部门:上周发生了什么。IDC将这种现象概括为“从数据存储到提供分析和决策价值之间的技术链路过长”。这不仅意味着延迟,更意味着决策逻辑与业务逻辑的割裂。
1.2 分析数据集上移的内涵
所谓“分析数据集上移”,指的是打破交易与分析之间的物理边界和逻辑边界,将分析能力、分析模型、甚至分析结果数据集,推送到更靠近业务发生的位置。这种上移不是简单的“把数仓搬到交易库隔壁”,而是通过技术架构的革新,让交易系统具备实时分析能力,让分析系统具备交易级的数据新鲜度,最终实现“业务即分析,分析即业务”。
这一趋势的背后,是企业对“实时决策”的渴求。当竞争对手能在用户点击后100毫秒内完成个性化推荐,当智能风控系统需要在交易发生的同时完成欺诈判断,传统的“先存后分析”模式已经难以为继。IDC预测,到2028年,60%的企业数据平台将搭建HTAP架构来统一事务处理和分析工作负载,从而为AI Agent提供支持,实现实时数据访问和持续智能。
1.3 AI:驱动架构变革的核心引擎
需要特别强调的是,分析数据集上移的趋势并非凭空产生,而是由AI的爆发式发展强力驱动。这种驱动体现在两个关键层面:
第一,AI让“本体”从理论走向实用。 本体论(Ontology)的概念存在已久,但在缺乏AI的时代,构建和维护本体模型需要大量人工介入,成本高昂,难以规模化。而大语言模型的到来彻底改变了这一局面——AI可以自动理解业务语义、识别数据关系、动态更新本体模型,让本体真正成为可落地的“业务大脑”。当AI能够“读懂”业务系统中的数据含义,分析数据集与业务系统的融合就有了坚实的语义基础。
第二,AI让“主动元数据”成为可能。 传统的数据治理依赖于人工打标、被动采集,元数据往往是“死”的。而AI赋能下的主动元数据,可以自动感知数据变化、智能推荐数据关系、实时监控数据质量,甚至主动触发数据治理动作。当分析数据集本身具备“主动”能力时,它就不再是被动等待查询的静态资产,而是能够与业务系统实时联动的动态能力。
正是AI在这两个层面的突破性进展,才让分析数据集上移从理论构想变成了可操作的实践路径。
二、支撑技术:从交易分析到本体融合的多维演进
分析数据集上移并非由单一技术推动,而是由一系列技术革新共同作用的结果。我们可以将这些技术归纳为三条相互交织的演进路径。
2.1 路径一:交易分析一体化技术的成熟
HTAP(Hybrid Transactional/Analytical Processing,混合事务/分析处理)是这一趋势中最具代表性的技术方向。HTAP的核心理念是让同一个系统既能处理高并发的短事务,又能运行复杂的分析查询,从而消除交易数据与分析数据之间的复制延迟。
以TiDB为代表的分布式数据库,在这一领域展现出显著优势。全球营销科技公司Rengage的案例极具说服力:该公司原本采用多套系统分别处理“热数据”(用户实时点击、打开、购买行为)和“冷数据”(聚合后的历史分析数据),结果面临查询延迟高、运维负担重、ETL链路不可靠三重困境。迁移到TiDB统一平台后,他们不仅解决了混合查询的性能瓶颈,更让AI Agent能够“访问完整、实时的用户视图”,真正实现了自主营销的愿景。
与此同时,云厂商也在加速这一方向的布局。Snowflake的Dynamic Table和Databricks的Lakehouse架构,本质上都在模糊交易与分析的边界。微软Fabric支持端到端数据工作流,将数据工程、数据工厂、数据科学、实时智能、数据仓库等集成在同一环境中,截至2025年11月客户数量已超2.8万,覆盖80%的《财富》世界500强企业。谷歌则在其BigQuery平台中深度整合机器学习和生成式AI能力,让非技术背景的用户也能直接利用先进模型完成数据分析。
2.2 路径二:Palantir本体论的“缝合”效应——AI让其从理论走向实践
如果说HTAP是从数据底座层面拉近交易与分析的距离,那么本体论(Ontology)则是从语义层面将二者“缝合”在一起。而AI的出现,让本体论真正释放出巨大能量。
本体论的核心思想,是将分散在不同业务系统中的数据,映射为真实世界中的“对象”——卡车、病人、合同、生产线,并定义这些对象之间的逻辑关系。这听起来抽象,但其业务价值极其具体:某化工企业收购德国同行后,发现德国用SAP,中国用用友,同一种原料在两个系统中有不同编码,库存预警在一个系统是字段,在另一个系统需要三表关联。传统数据中台的解决方案是“先汇总、再清洗”,结果花了2000万建成的中台最终还是沦为“数据沼泽”——数据汇总了,报表生成了,但业务依然不知道怎么决策。
Palantir Foundry的解决思路截然不同:它不是把数据搬到一个新地方再加工,而是在原有系统之上构建一个统一的“本体模型”。在这个模型中,无论数据来自哪个ERP、无论编码规则如何冲突,业务对象(比如“这批原料”)是唯一且可识别的。更重要的是,这个本体模型是“可操作”的——当业务发生时,AI可以直接在本体层进行决策并触发执行。
AI的到来让本体论的价值被指数级放大。在Palantir的实践中,AI不仅帮助自动构建和维护本体模型,更让本体成为业务人员与数据交互的自然语言接口。管理人员可以直接用自然语言询问“哪些车辆需要我的注意”,系统瞬间遍历所有数据,不仅列出维修中的卡车,还关联故障代码和过期许可证——这背后正是AI对本体的理解与应用。
Tampa General Hospital的应用案例令人震撼:通过Palantir的脓毒症预警算法,医院将脓毒症的48小时死亡率降低了68%,在短短7个月内额外挽救了700名患者的生命。这背后正是分析能力向临床一线的“上移”——预警算法不是在后台服务器慢慢跑批,而是实时接入患者的生命体征数据,在医生需要决策的那一刻给出判断。对于建筑业巨头Kavanagh Construction,Palantir让97%的员工成为日常用户。这不再是“事后报表”,而是“事中决策”。
2.3 路径三:Data Fabric与数据资产化——附着于本体,实现业务闭环
第三条路径,是将Data Fabric(数据编织)的数据虚拟化技术与数据资产化工程相结合,并附着于本体之上,从而拉近分析数据集与业务系统的距离。这一点至关重要——Data Fabric本身并不是第三条独立的道路,而是通过与本体融合,强化第二条路径的能力。
数据虚拟化技术的核心价值在于“逻辑融合”——在不移动数据的前提下,通过虚拟化层提供统一的数据访问入口。精诚资讯基于TIBCO Data Virtualization推出的Data Fabric数据中台,能够支持上百种主流数据库,通过元数据层建立数据虚拟模型,实现同质及异质数据的实时整合与组装。这种“逻辑上移”的方式,让分析查询可以直达交易源,无需经历传统的ETL复制。某国有能源企业面对多套数仓(Hana BW、国内大厂数仓、分公司数据湖)并存的数据孤岛困境,最终选择在所有数据源之上构建虚拟化逻辑层,实现了统一的数据查询入口和全集团的数据权限管控。
但Data Fabric的真正威力,在于与本体技术的深度融合。数据虚拟化提供了跨源访问的“管道”,而本体则赋予这些数据“业务含义”——数据不再是表格中的行列,而是业务人员熟悉的“客户”“订单”“设备”。当Data Fabric附着于本体之上,分析数据集就不仅仅是“可以被查询”,而是“能够被业务理解”。
不过需要清醒的是, DataFabric的理念虽然很诱人,也有不少成功实践,但技术现状的现实是它目前还是在一些有限的企业数据域范围起作用,因此,与此同时,数据资产化工程在这一融合中也需要扮演关键角色。数据资产化的核心,是将数据从“原始资源”转化为“可管理、可计量、可交易”的资产。而当数据资产化与本体结合时,资产本身就被赋予了业务语义——每一份数据资产都对应着本体中的业务对象,其质量、标准、血缘都围绕业务对象进行管理。更进一步,AI驱动的主动元数据让这些资产具备了“自我描述”和“主动响应”的能力:当业务系统中的数据发生变化,主动元数据可以自动感知并更新分析数据集;当分析模型需要特定数据,主动元数据可以智能推荐并自动接入。
这种“Data Fabric+本体+数据资产化”的融合,最终实现了从数据到业务的完整闭环:数据通过虚拟化层或资产化层被统一访问,通过本体层被业务理解,又通过资产化层被治理运营,再通过AI的主动元数据能力与业务系统实时联动——分析数据集就这样被“拉近”到了业务发生的现场。
三、范式跃迁:从“记录历史的账本”到“驱动未来的发动机”
当分析数据集完成向交易侧的上移,当AI与本体深度融合,企业业务系统的角色将发生根本性转变。
3.1 传统业务系统的“账本”本质
过去三十年,企业核心业务系统本质上扮演的是“电子账本”的角色。ERP记录发生了什么交易,CRM记录和谁打过交道,SCM记录货物去了哪里。这些系统是历史的忠实记录者,却不是未来的主动塑造者。即便引入了BI、引入了报表,决策仍然需要“人”来完成——人看报表、人做判断、人下达指令。数据在这条链路中是“被消费”的对象,而不是“主动驱动”的力量。
3.2 AI+本体:从“事后记录”到“事中决策”
当分析能力上移至交易侧,当本体成为业务与数据的共同语言,情况开始改变。以Rengage的自主营销平台为例,其AI Agent能够基于实时数据完成动态用户分群、智能旅程编排、个性化内容生成、实时效果评估、预算自动调配。整个营销流程不再需要人工介入——系统本身就是决策者。Walgreens提供了一个更具规模感的案例:要把几千家门店的库存、补货、人力排班、配送路线做到理论最优,每天需要3840亿次微观决策。这个量级决定了,除了让系统自主决策,别无他法。
IDC将这一趋势总结为“数据不再仅仅是AI的输入,而是企业智能的基石”。当数据具备实时性、上下文相关性、可治理性和可观测性,它就不再是被动的资源,而是主动的能力。
3.3 成就真正的数据驱动敏态业务
这种转变的终极形态,是业务系统本身成为“决策驱动的发动机”。在Johnson Controls的案例中,140岁的老牌企业通过Palantir将资深销售的经验编码进AI,让系统能够像老练的顾问一样,预测哪些客户需要升级设备、哪些客户可以接受打包方案。一线服务技师手持AI助手,能够实时告诉客户:“系统显示您的另一台设备也即将故障,建议一并处理”。这不再是“被动响应”,而是“主动关怀”。
IDC预测,到2026年,50%的中国500强企业将部署数据分析Agent来自动化日常任务,使人员能够参与创新和高级分析。这意味着,当分析数据集上移到业务发生的时刻和位置,当AI赋予本体以生命,当主动元数据让数据资产与业务系统实时联动——业务本身就被注入了智能。企业将不再需要在“跑业务”和“看数据”之间切换,因为在跑业务的同时,数据已经在驱动下一个决策。
结语
分析数据集向交易侧的上移,绝非简单的技术架构调整,而是企业运营哲学的深刻变革。它宣告了一个时代的结束——那个“业务产生数据、数据支持决策、决策指导业务”的串行链路,正在被“业务即决策、决策即业务”的并行闭环所取代。
而驱动这一变革的核心引擎,正是AI。AI让本体从理论走向实用,让分析数据集从静态走向主动,让数据治理从被动走向智能。 当HTAP从数据底座层面消弭交易与分析的物理鸿沟,当Palantir本体论从语义层面缝合业务与数据的逻辑割裂,当Data Fabric与数据资产化附着于本体实现业务闭环——这三条路径殊途同归,共同指向一个未来:数据不再需要在“交易库”和“分析仓”之间奔波,而是在业务发生的原地,就完成从记录到洞察再到决策的完整闭环。
当那一天真正到来,企业的业务系统将不再是记录历史的账本,而是驱动未来的发动机。而这,正是AI时代企业数据架构转型的第一道曙光。
附件:分析数据集上移的具体物理形态参考
- 传统企业数据分布架构状态参考

- 多年来一直在从T+N向T+0实时努力进步,包括Lambda结构、流批一体、一体化数据平台,以及避免ETL的数据编织等新技术,但从未改变分析数据集在架构与商业上处于业务下游与割裂的本质状态
- 本文暂不探讨非结构化数据对经典数据架构的影响
2. 分析数据集上移形态1

- 类Raft Learner在对TP业务无影响的前提下实现“一致性实时数据同步管道”,在业务系统分区交易一致性保证不受影响时,保证分析数据库副本的一致性与实时性
- DeltaTree相当程度上克服传统LSM Tree高频事务型一致性同步,特别是更新时的严重读写波动问题,支持列存的高频更新
- 智能路由与优化的数据访问引擎,使业务将业务数据集与分析数据集当成一个整体处理
- 不同于传统数据异步同步或者硬件复制策略的关键点在于:分析数据集直接、实时、一致性保证地建立在MPP列存的大规模分析处理引擎之上
- 如上以存算分离结构为例,还有存算一体的结构也可以实现上述能力,两者各有优势
3. 分析数据集上移形态2

- 上述实时数仓改进传统被动数据采集技术路线,形成实时一致的集成分析数据集,支持多业务综合分析
- 上述集成分析数据集在商业上也趋于脱离数据中心/技术域,成为业务群自身责任
4. 分析数据集上移形态3

- 分析数据集通过挂接到业务本体与业务系统/数据集缝合
- 分析驱动的决策,由智能体依托本体,自主自动执行行动Action,返回业务数据集更新,再实时一致性同步到分析数据集,形成闭环
- 通用智能体(指类OpenClaw,非COZE等低码平台)与业务本体、智能卡片、MCP/API共同构成AI平台
- 除了业务本体以外,MCP/API规范化智能化治理,与智能卡片生成与维护,这三者形成行业企业AI平台的核心护城河
本文认为形态3是AI时代需要重点关注与探索的企业数据分布架构在这一维度转型的方向与趋势
AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。
更多推荐

所有评论(0)