元数据管理框架如何制定,方法都在这!

author author     2023-05-01     459

关键词:

参考技术A 元数据管理计划实施数量将持续增长到2021年以后。根据DATAVERSITY®数据管理趋势报告,有84%的业务受访者已经实施了元数据管理计划或已经开始制定计划。一家公司在元数据管理方面的成功取决于实施前是否依托于一个有用的元数据管理框架。

处理好元数据对于公司而言,在于遵守数据法规,提高数据质量,探索机器学习以及更好地使用数据。但是元数据管理超越技术,而主要依赖支持它的人员和政策。

一、什么是元数据管理框架?

元数据管理框架描述了一种使数据和元数据资产更易于访问和用于实现业务目标的组织方法。它根据组织的需求,动员并扩展了作为元数据管理基础的现有资源。

元数据管理框架发生在公司基础架构级别和运营级别。在更高层次上,元数据管理框架是伊恩·罗兰兹(Ian Rowlands)DAMA芝加哥一章中的解释说,需要行政支持和 数据策略制定更高的业务远景。此外,元数据管理框架还指导人员和自动化算法在日常工作中捕获、集成、管理和发布元数据。

从战略和战术角度考虑,元数据管理框架必须涵盖项目内部或与项目内进行交互的任何人。因此,元数据管理框架需要得到数据治理程序。

数据治理将有关元数据的可用性,具有元数据的组织优先级以及何时以及如何交付元数据的信息通知元数据管理框架。作为反馈,元数据管理框架将有关数据合规性、数据可访问性和数据质量的信息告知企业数据治理。将元数据管理和数据治理基础视为串联工作并提供数据解释。

二、选择元数据管理框架之前要考虑的因素

在创建任何元数据管理框架之前,请考虑以下事项:

获得元数据管理框架基准:即使组织中不存在正式的元数据管理框架,隐性的也存在。技术文件映射数据架构,经验丰富的业务分析师之外的人可以理解报告数据,而数据输入过程则提供了有关组织数据及其元数据管理框架片段的上下文。

获得有关人员,流程和技术已经存在以及它们如何通知组织的元数据管理框架的基准是很有意义的。使用“合格且知识渊博的数据专业l(和其他熟练的人才)来管理和解释“数据就绪性评估”以及“数据成熟度”模型,则提供了良好的元数据管理框架起点。进而,公司可以得到改善元数据管理框架的具体建议。

清楚元数据管理框架将实现的目标:清楚为什么组织需要管理元数据和实现元数据管理框架。元数据管理有助于降低培训成本,在整个数据系统中更好地使用数据并简化通信,但并不能解决所有数据问题。

如果组织优先于客户体验或开发产品和服务而不是数据共享和数据发现,那么与其他选择相比,元数据管理框架可能不是最佳解决方案。鉴于任何有用的数据管理框架都倾向于具有昂贵的设置,因此组织首先需要认真研究为什么要实施元数据管理框架。

提高集体数据素养:使用元数据需要已同步组织定义者,生产者和用户之间的协作和可重复的动作。认识到这类人存在于不同的组织部门中,并且有各种各样的跨功能技能。有些人具有很高的技术和分析能力,而另一些人则具有较软的技能。

不同的公司子集团可能会从非常不同的角度考虑并应用任何元数据管理框架。一个人的定义可能与另一个人的定义不同。

集体数据素养通过了解如何解释,交流和使用元数据更好地掌握公司数据资产,帮助利益相关者理解元数据管理框架。通过元数据进行规划,以全面了解业务需求,指导人们为什么以及如何使用任何元数据来完成工作或实现目标。

利用已经存在的元数据管理框架片段:在花钱购买工具和资源以建立新的元数据管理框架之前,请使用组织中已经存在的元数据管理框架来快速获胜并展示其价值。让知道如何解释客户报告含义的人记录该知识。更新现有的技术架构图,以包含更健壮的元数据,例如数据字典。

另外,请考虑有关构建或改进元数据管理框架的现有标准和实践。例如,国际统计分类由世界卫生组织(WHO)批准的《疾病分类》为临床医生,研究人员和医疗帐单人员定义了疾病和健康问题。如果与业务相关,请利用现有的权威元数据源。

三、总结

元数据管理框架不仅仅是技术解决方案。它描述了管理元数据,动员人员,技术和实践的方法和愿景。而且,元数据管理框架与数据治理紧密地交织在一起。做好元数据管理需要在整个组织中建立牢固的元数据管理框架基础。

四、元数据管理工具介绍

亿信华辰元数据管理平台(EsPowerMeta)提供了完善的元模型和元数据维护功能,采用多种方式简化元数据维护的复杂性。系统支持元数据的自动获取和时间调度管理,支持手工创建和变更元数据,并配合版本管理,能完整存储元数据整个生命周期动态和变化,方便用户跟踪业务运作的历史数据。亿信华辰元数据管理平台应用案例:

佛山某区政务服务数据管理局元数据管理平台

建设内容:

政务服务数据管理局基于区内各政府部门的数据进行汇总和治理,面向各部门提供统一的数据服务和应用,实现“用数据决策、用数据监管、用数据创业”的数据统筹发展运行机制。本项目通过元数据管理平台,梳理各类数据来源,实现卫计委、工商局、流管局等各政府部门的元数据自动采集,理清现有的数据流转流程和数据架构,并基于其构建一套新的数据架构,同时提供数据血缘分析、影响分析等,最后形成全区的政务数据地图。

项目价值:

帮助数据管理局确定数据来源和数据架构,为后续数据标准建设,数据质量管理打下坚实的基础,并为政务资源目录、自主填报系统、教育无纸化等应用提供支撑。

如何使用照片框架在 iOS 9 中获取图像元数据

】如何使用照片框架在iOS9中获取图像元数据【英文标题】:HowtogetimagemetadatainiOS9usingPhotosFramework【发布时间】:2016-07-0308:16:46【问题描述】:我想在Swift中使用UIImagePickerController显示图像元数据。其中图像是从图库中选择的,并... 查看详情

使用 Swift (iOS) 和 Photos 框架保存自定义图像的元数据

】使用Swift(iOS)和Photos框架保存自定义图像的元数据【英文标题】:SavemetadataforcustomimagewithSwift(iOS)andPhotosframework【发布时间】:2016-02-2106:08:01【问题描述】:我正在尝试将元数据添加到我的综合生成中,并使用Photos框架将其保存... 查看详情

如何从方法装饰器访问类元数据

】如何从方法装饰器访问类元数据【英文标题】:Howtoaccessclassmetadatafrommethoddecorator【发布时间】:2018-06-2818:52:33【问题描述】:我有两个装饰器。一个类装饰器和一个方法装饰器。类装饰器定义了我想在方法装饰器中访问的元... 查看详情

如何修复 django rest 框架元类冲突

】如何修复djangorest框架元类冲突【英文标题】:HowcanIfixdjangorestframeworkmetaclassconflict【发布时间】:2019-11-2006:03:38【问题描述】:我是一个学习djangorest框架的初学者,我刚刚遇到这个错误,我似乎找不到解决方法。这是permissions.... 查看详情

惊!公司管理软件系统的优势都在这!

  工欲善其事,必先利其器。一款好用的公司管理软件系统,可以帮助企业轻松应对瞬息万变的市场环境和客户需求,节省很多时间和精力,大大提升企业效率和效益。而且,在当今唯快不破的智能时代,同时处理客户、... 查看详情

课程感-如何制定测试计划

总结:测试计划要结合项目,结合需求,尽早启动。1.测试计划不一定要尽善尽美,但一定要切合实际,要根据项目特点、公司实际情况来编制,不能脱离实际情况;2.测试计划一旦制定下来,并不就是一成不变的,世界万事... 查看详情

编写自己的jdbc框架

元数据介绍元数据指的是”数据库”、”表”、”列”的定义信息。DataBaseMetaData元数据Connection.getDatabaseMetaData()获得代表DatabaseMetaData元数据的DatabaseMetaData对象。DataBaseMetaData对象的常用方法:getURL():返回一个String类对象,代表... 查看详情

大白话六问数据中台!你想知道的都在这了!

...在2019年、数据中台可谓是最火的概念之一,很多大公司都在布局自己的数据中台。那么数据中台到底是什么?它和我们熟知的数据平台有啥区别?它为什么会这么火、能给企业带来什么价值呢?数据中台整体架构和全景图又是... 查看详情

95%的技术面试必考的jvm知识点都在这,另附加分思路!

...各个部分的内容如下:1>内存模型部分:程序计数器、方法区、堆、栈、本地方法栈的作用,保存哪些数据;2>类加载部分:双亲委派的加载机制以及常用类加载器分别加载哪种类型的类;3>GC部分:分代回收的思想和依 查看详情

自制方法装饰器擦除所有元数据,我该如何解决?

】自制方法装饰器擦除所有元数据,我该如何解决?【英文标题】:Selfmademethoddecoratorerasingallmetadata,howIcanresolveit?【发布时间】:2020-09-2523:05:48【问题描述】:我正在使用NestJS和nestjs/swagger模块来编写简单的api文档,但我遇到了... 查看详情

如何在 Python 中反转元组? [复制]

】如何在Python中反转元组?[复制]【英文标题】:HowtoreversetuplesinPython?[duplicate]【发布时间】:2012-04-2910:14:51【问题描述】:可能重复:TraversealistinreverseorderinPython这可能吗?不必就位,只需寻找一种反转元组的方法,以便我可以... 查看详情

别找了,最常(la)用(ji)的测试用例设计方法都在这!

对于一个web网站来说,主要从这么几个大的方面来进行测试:1、功能测试;2、界面测试;3、易用性测试;4、兼容性测试;5、链接测试;6、业务流程测试;7、安全性测试;测试用例是测试的... 查看详情

软件测试基础之手工测试,你能想到的都在这

手工测试是传统的测试方法,由测试人员手工编写测试用例、执行、观察结果。软件测试中发现问题最多的都是手工测试,占整个项目的百分之九十五左右,所以说手工测试是软件测试基础。但手工测试也有一定的缺点:测试工... 查看详情

还没搞懂jvm吗?95%的技术面试必问知识点都在这,还怕面不过?

...各个部分的内容如下:1>内存模型部分:程序计数器、方法区、堆、栈、本地方法栈的作用,保存哪些数据;2>类加载部分:双亲委派的加载机制以及常用类加载器分别加载哪种类型的类;3>GC部分:分代回收的思想和依 查看详情

过去这几十年,分布式系统的「数据一致性」精华都在这了!(代码片段)

阅读目录为什么需要事务事务的来源分布式系统中的事务问题分布式事务的解决方案结语 暂时还未涉及的园友们,可以收藏防身哦~   本文是本系列的第三篇。与前两篇《不知道是不是最通俗易懂的《数据一致性》剖... 查看详情

备份 ZFS 池元数据

...x系统(我现在在Ubuntu13.10上)上将有关池的元数据(它们如何使用-作为镜像、RAID等)存储在哪里?我希望能够在以下情况下从数据破坏中恢复:一切都在一个LinuxPC和一个存储池分区所在的NAS(被视为被动数据容器)上运行数据... 查看详情

hive元数据服务metastore(代码片段)

...Hive或者其他执行引擎在运行时可以使用这些数据来确定如何解析,授权以及有效执行用户的查询。MetaStore分为两个部分:服务和后台数据的存储。2.配置参数这里只会展示与MetaStore相关的配置参数,与MetaSote不相关的... 查看详情

(字符串列表字典元组集合)的常用内置方法(代码片段)

...符的个数print(res)lis=‘mynameismaple‘res=lis.split(‘‘)#按照制定的分隔字符,分隔开多个字符串,存放到一个列表中print(res)lis=‘mynameismaple‘res=lis.strip(‘‘)#将字符串左右2遍的制定字符删除掉,碰到不是制 查看详情