关键词：
作者 | 宋慧
出品 | CSDN云计算（ID：CSDNcloud）
关于数据中台的问题，CSDN 在一年前采访了 Gartner 研究总监孙鑫，采访中，孙鑫提到 数据分析将是改变“游戏规则”的技术、企业的中台需要可组装的架构 。经过一年的发展，Gartner 再次分享了数据中台的最新进展与其分析观点。
Gartner研究总监孙鑫
从 2019 年起，Gartner 开始关注与研究数据中台，到 2020 年首次发布中台市场的“技术成熟度曲线”，Gartner 认为数据中台在“技术成熟度曲线”的“炒作顶峰”。孙鑫看到，中国有众多的数据库、商业智能 BI、数据科学的厂商，但现在的数据仍是孤岛式，企业已有的数据投入，并没有产出理想的业务价值。而中国企业对数据整合的需求非常旺盛，做数据整合的厂商并不多。因此孙鑫提到，数据整合将成为数据中台最核心的解决方案，也是用户真实所需。
数据中台在技术成熟度曲线的炒作顶峰
数据与业务鸿沟下，Gartner 以分析模型分解数据中台
针对数据和业务问题存在价值鸿沟的痛点，孙鑫认为首先在数据中台的团队中，除 IT 人员，也需要业务端的人员加入，一同完成数据分析，确保企业级数据一致性，共享最佳实践。
另外，在以往数据中台的建设中，通常存在的问题是业务侧团队不了解数据在哪里，用户需要花费时间去寻找数据而不是分析数据，数据资产的定义并未在业务侧团队之间共享。Gartner 认为，需要针对这些问题，中台应实现自动发现元数据，通过元数据智能搜索，找到数据源，让各系统中的数据可以直观传递到用户（业务侧使用者）手中。另外，孙鑫提到，数据资产不应以 IT 团队维护单个项目的形式运行，而应由业务侧团队参与（或众筹的形式），去演进优化与共享数据资产。
Gartner 也建立了一个重要的分析模型——数据和分析基础设施模型DAIM，去分解数据中台建设中遇到的各类问题。模型将各类数据投入分为IT与业务两个维度，将数据分为“已知的数据”和“未知的数据”，业务问题分为“已知的问题”和“未知的问题”，依据模型对中台所需的基础产品进行剖析。
重要模型：数据和分析基础设施模型 DAIM
数据中台组件均可归类在模型中
数据中台的核心产品化组件，都可以归类到模型的四个象限中，其中，孙鑫提到，在中国市场中，数据虚拟化产品目前仍几乎是空白。
数据中台建设重点：数据编织、数据治理、平衡采集与连接
针对数据中台建设，Gartner 给出了三个重点关注的方向。首先是 Gartner 早先提出的数据编织。现在企业已有交易型数据库、数据仓库、数据湖、云端数据存储等众多数据源，Gartner 提出了数据编织，为企业“织”起一张虚拟的网，对企业所有数据虚拟化，在场景中利用知识图谱处理元数据。孙鑫提到，数据编织不是将数据收集于一处，而是对数据进行更优关联，以服务不同用户，帮助用户在合适的时间获得合适大小的数据。同时数据编织也涵盖数据消费的信息，将之定义为企业元数据。
Gartner 提出数据编织 Data Fabric
第二，数据中台应涵盖数据治理。随着《数据安全法》、《个人信息保护法》的颁布和实施，以及“上云”的安全性问题，Gartner 认为数据分析平台应处于企业数字化平台的中心位置，所以也应涵盖治理相关的工作。数据治理不仅由软性标准或治理委员会等执行，之后也将通过技术手段完成政策设置、执法和执行，如数据中台可对数据质量、安全性、隐私、道德的掌控，对数据的定义，以及数据留存条约、条款的制定等。
第三，数据收集与连接实现平衡。数据管理不应只注重数据的收集，导致数据分析和生产价值的延后。采用数据虚拟化，数据中台可依据元数据（数据消费行为）判断应采集还是连接，以及资产化的处理。
对于中台演进的技术，孙鑫也总结其中一些重要的方向。Gartner 看到，现在的数据语义层工具已经在用知识图谱对数据完成关联和建模，从用户自助式分析转变为组装式分析，以业务的视角做业务价值导向的分析，企业应该构建起可以复用的数据分析能力以让用户可以在价值流（Value Stream）上组装分析型应用。
数据分析应用的未来
数据中台未来技术方向：DataOps
未来，孙鑫认为，组装式的数据中台将发展成为“组装式的能力创新平台”，并将塑造数据分析应用的未来。已有的报表平台、分析工作站、自助式分析平台或数据科学平台等，将走向容器化和微服务化。另外，数据分析也将借助 DevOps 加速数据和分析应用上线，Gartner 称其为 DataOps，最终让数据管理与分析的用户从测试更快转入数据生产应用。
往期推荐
点分享
点收藏
点点赞
点在看
gartner：网络信息安全投入依然不在中国政企客户优先投入之列
2017年2月，Gartner发布的《2017年CIO议程》调查报告显示，中国政企客户对安全的投入优先级低于国际平均水平，不在其优先投入之列。这份报告访谈了全球93个国家2598名CIO，其中75人来自中国。3月22日，Gartner发布新闻称“中国CIO... 查看详情
关于dea（数据包络分析）问题的请教。dea里面涉及的投入、产出指标，这些指标有啥要求吗？
现实中，有的指标是越高越好，有的指标是越低越好。DEA对指标有要求吗？是都要求越高越好好的指标？因此可以计算投入产出的效率？DEA产出指标中，有些指标越高越好，比如GDP等指标，有些是越低越好，比如污染物排放量等... 查看详情
投入和产出应该是成正比
有时我们只是浪费了时间，做了很多无用功。 最近天气一直灰蒙蒙的，直到这几日天气突然好了，于是在微信群里和一群小伙伴约去爬山，说是枫叶正红，该去好好散个心了。 一起商讨约时间的时候，突然一个朋友... 查看详情
dea投入角度和产出角度效率差距
DEA投入角度和产出角度效率差距是指DEA投入角度和产出角度之间的差异。投入角度的效率是指给定的资源，单位的产出量有多大，即单位资源产出量有多大，而产出角度的效率则是指给定的输出，单位的输入量有多大，即单位产... 查看详情
数据包络分析的dea模型
您的浏览器不支持HTML5视频zymedia(\'video\')参考技术ADEA是一个线性规划模型，表示为产出对投入的比率。通过对一个特定单位的效率和一组提供相同服务的类似单位的绩效的比较，它试图使服务单位的效率最大化。在这个过程中，... 查看详情
数学建模之数据包络分析（评价投入产出比的模型）(代码片段)
...ff0c;孙兆亮主编的数学建模算法与应用（第二版）数据包络法是用于评价多指标输入和多指标输出的一种较为有效的方法。即对投入产出做出一个评价。数据包络分析模型如下：模型评价标准：在lingo中Objectivevalue... 查看详情
gartner：全行业投入人工智能，计算机视觉占比最高
编辑|宋慧供稿|GartnerGartner最近一项新调研发现，三分之一拥有人工智能（AI）技术计划的技术和服务提供商企业机构表示，他们在未来两年对人工智能技术的投资将达到100万美元以上。绝大多数将人工智能技术作... 查看详情
测试投入与产出
...种分工方式，在选择使用哪一种分工方式时，还需要考虑投入的人员数量，投入时间，与发现缺陷的数量。 投入时间与发现缺陷的关系： 在人员一定的情况下，投入的时间越多，发现的缺陷越多。但有一个规律，越到后... 查看详情
excelpowerquery：工序产出数据的整合与提取
参考技术A前文我们依次介绍了以下数据的整合与提取：1.工序工时2.料品工时3.人员投入在“工序工时”查询的基础上，通过建立合并查询，可以得到“工序产出”的数据。现在介绍“工序产出”数据的整合提取。1.通过引用创建... 查看详情
阿里云云数据库rds核心能力演进
...云服务。 过去7年的持续发展，2018年阿里云首次进入Gartner的数据库魔力象限，能够入选Gartner，这是中国数据库厂商的一次突破。阿里云入围Gartner充分说明，在新一波技术浪潮之上进行创新，才可能做出突破。云数据库已经... 查看详情
计量经济学投入产出方法（直接消耗系数完全消耗系数感应力系数影响力系数）
简介：分析特定经济系统内投入与产出间数量依存关系的原理和方法。亦称产业部门间分析。它由美国W.里昂惕夫于1936年最早提出。投入产出分析的理论基础是瓦尔拉的一般均衡理论。这种理论认为，资本主义经济通过供求关系... 查看详情
淘宝直通车roi（投资回报率）是啥意思
...去看视频学总之，ROI是淘宝直通车里面的一项非常重要的数据指标！ 参考技术BROI指投资回报率，大家也是称作为投入产出比，一般来说roi越高越好，因为投入产出比是衡量开车是否亏损的标准。那么直通车roi怎么计算？一起来... 查看详情
2018阿里云云数据库rds核心能力演进
...赖的云服务。过去7年的持续发展，2018年阿里云首次进入Gartner的数据库魔力象限，能够入选Gartner，这是中国数据库厂商的一次突破。阿里云入围Gartner充分说明，在新一波技术浪潮之上进行创新，才可能做出突破。云数据库已经... 查看详情
dea和模糊综合评价
DEA（包络分析）1.概念利用多项投入指标和产出指标，利用线性规划的方法，对具有可比性的同类型单位进行有效性评价的一种数量分析方法。以效率的概念作为加总模式，效率等于总产出除以总投入，并以效率最大化为目标。... 查看详情
gartner中国智能运维市场指南发布，擎创再次成为aiops代表供应商
近日，Gartner发布了《中国智能运维市场指南》（以下简称“《指南》”），擎创科技再次因为在智能运维领域产品的创新力及其成熟度，被Gartner提名为AIOps领域代表供应商。而在去年7月份，擎创就被Gartner评为中国AIOps领域重点... 查看详情
5年gtd自我管理经验，一块听听
...常要拖到汇报当天的凌晨才做完，有些事情拖延了一年也没有完成，甚至是还没有真正开始。 每年感觉好像都挺忙，但在年底时又感觉啥也没做。2010年的年底，我的个人博客上只有这样几行总结：又忙了一年离40又近了一年... 查看详情
数学建模数据包络分析(dea)lingo实现
model:sets:dmu/1..7/:lambda;!决策单元;inw/1..4/:s1;!投入变量集;outw/1..4/:s2;!产出变量集;inv(inw,dmu):x;!投入数据;outv(outw,dmu):y;!产出数据;endsetsdata:n=?;!所评价的决策单元;x=349.33130.631145.590916.309423.843520.5047237.8 查看详情
ai机器学习如何不被底层资源和数据“拉胯”，听听亚马逊云科技怎么说
...一个趋势即是数据相关，表示数据共享趋势将加速。Gartner发布2022年数据分析十二大趋势，将数据分析提升到企 查看详情