元网格(Meta Grid)是数据去中心化的第三次浪潮
我们也可以像分解操作和分析数据那样分解元数据单体微服务分散操作数据[1]。数据网格分散分析数据[2]。在这篇短文中,我主张需要第三次数据分散化浪潮——即元数据的分散,第三次数据分散化浪潮即为元网格[3]。
大公司中的元数据管理的实际状况在元数据层,元数据仓库描绘IT环境中的特定元素。[4]它们都提供基于元数据的具体且独特的功能。元数据仓库可以是各种形式,从电子表格到独立的精炼技术,再到大型平台的模块。
数据团队以及众多的数据领导者,如首席数据官、首席信息官、数据保护官、首席信息安全官、记录管理者和信息经理等,使用元数据仓库来执行他们的任务,通过描绘公司IT景观的某些方面。
然而,每个元数据仓库都创建了一个“单一视图”的元数据;一个“世界单一视图”的单一视图。[5]它的大小并不大,但它是孤立无援的,并且与使用不同方法的其他元数据仓库所描述的现实形成对立。
一个非常简短的Meta Grid介绍及其背后的原因元网格技术既与微服务架构差异显著,同时也有相似之处。
元数据网格小巧、简单且速度慢,与大型、复杂且快速的微服务和数据网状架构相比,它小巧、简单且速度慢:元数据总量通常远小于数据源或系统本身,不需要复杂的编程来交换元数据,实时数据交换也不重要。因此,它小巧、简单且速度慢。
然而,Meta Grid 和微服务以及数据网格实际上是一样的概念:它是一种将数据去中心化的技术,将大型单一系统拆分成最小且独立的组件。
微服务将运营数据的大块拆分,使公司的价值链更加灵活、活跃、适应性强和可扩展。数据网格释放公司的数据分析潜力,在克服与传统企业级数据仓库利益相关者之间的权力游戏后,提供了新的基于机器学习和人工智能的解决方案。
元数据网格(Meta Grid)是一个机会,通过它我们可以了解公司的IT环境,将其从服务于不同目的的多个孤立的仓库中解放出来。众多的元数据仓库包含应用程序列表、数据类型、敏感级别、保密级别、集成、接口、IT供应商、能力、流程、端点等大量信息。所有这些对操作、创新和监管目的至关重要的元数据,由遍布企业的多个团队管理和维护。
换句话说:虽然Meta Grid的技术解决方案架构本身很简单,但对Grid的理解起来却并不简单。这包括所有管理公司IT环境和架构的元数据仓库所利用的技术能力,从而涵盖了整个企业的方方面面。
[1] S. Newman; 《微服务构建》 (2021,) O'Reilly
[2] Z. 德赫甘尼,数据网 (2023),奥莱利
[3] O. Olesen-Bagneux; 元数据管理基础(2025年),O'Reilly 一书
[4] 数据管理手册(2024 ,技术出版社)
[5] M. Skelton、M. Pais; 团队拓扑学 (2019年), IT Revolution Press(IT革命出版社)
共同学习,写下你的评论
评论加载中...
作者其他优质文章