GaussDB数据库的元数据及其管理简介

2023-08-16 788

GaussDB是一种分布式的关系型数据库，元数据（表、列、视图、索引、存储过程等对象）是其重要的一部分。元数据是指描述数据的数据，包括数据的定义、结构、属性、关系等信息。本文以GaussDB物理数据库为主，结合元数据的概念简单介绍一下相关内容。

二、元数据简介

1、元数据定义

按照传统的定义，元数据（Metadata）是描述数据的数据。元数据主要记录数据库应用系统中模型的定义、各层级间的映射关系、监控数据库应用系统的数据状态及ETL的任务运行状态等。在数据库应用系统中，元数据可以帮助数据库管理员和开发人员非常方便地找到其所关心的数据，并用于指导其进行数据管理和开发工作，提高工作效率。

2、元数据分类

元数据可根据不同的维度进行分类，按用途的不同，可以分为两类：技术元数据（Technical Metadata)和业务元数据（Business Metadata）。

技术元数据是存储关于数据库应用系统技术细节的数据，是用于开发和管理数据库应用系统使用的数据。技术元数据即为技术资产，显示数据库、数据表、数据量的数量及其详情。
业务元数据从业务角度描述了数据库应用系统中的数据，它提供了介于使用者和实际系统之间的语义层，使得不懂计算机技术的业务人员也能够“读懂”数据库应用系统中的数据。业务元数据包含业务资产和指标资产，业务资产显示业务对象、逻辑实体、业务属性的数量及其详情，指标资产显示业务指标及其详情。

3、数据库元数据管理

元数据管理是对数据采集、存储、加工和展现等数据全生命周期的描述信息，帮助用户理解数据关系和相关属性。数据库的元数据指的是关于数据库对象(如表、列、索引、视图、存储过程等)的信息，这些信息描述了这些对象的结构和属性。并且最终目标是服务于数据库应用系统的高效实施（开发、管理、维护等）。

三、GaussDB数据库的元数据管理

1、GaussDB数据库的元数据管理

通过登录GaussDB提供的“数据管理服务(DAS)” 工具,进入“库管理（Schema列表/对象列表/元数据采集）”主页面，可进行相关元数据的基础管理（如下图）。

GaussDB数据库对象列表：

GaussDB数据库元数据采集（DAS工具内置功能）：

Tip：对象列表数据来自实时查询(最多显示10000条)，对数据库有一定的性能消耗，建议开启元数据自动采集。

2、通过“SQL + 系统表/系统视图/系统函数”的方式管理（采集）元数据

1）获取表、视图及表字段等信息

（1）PG_GET_TABLEDEF(tablename)系统信息函数，获取表定义信息。

SELECT * FROM PG_GET_TABLEDEF(‘test_1’);

返回类型：text。说明：pg_get_tabledef重构出表定义的CREATE语句，包含了表定义本身、索引信息、comments信息。对于表对象依赖的group、schema、tablespace、server等信息。

（2）ADM_TABLES视图存储关于数据库下的所有表信息。主要字段：表的所有者、表名、存储表的表空间名、表的估计行数、是否为临时表等

SELECT * FROM ADM_TABLES;

（3）DB_ALL_TABLES视图存储当前用户所能访问的表或视图。主要字段：表或视图的所有者、表或视图的名称、表或视图所在的表空间。

SELECT * FROM DB_ALL_TABLES;

（4）DB_TABLES视图存储当前用户可访问的所有表。主要字段：表的所有者、表名、存储表的表空间名、表的估计行数、是否为临时表等。

SELECT * FROM DB_TABLES;

（5）ADM_TAB_COLUMNS视图存储关于表和视图的字段信息。数据库里每个表或视图的每个字段都在ADM_TAB_COLUMNS里有一行。主要字段：表的所有者、表的名称、列名、列的数据类型、列的字节长度等。

SELECT * FROM ADM_TAB_COLUMNS;

（6）DB_TAB_COLUMNS视图存储了当前用户可访问的表和视图的列的描述信息。主要字段：表的所有者、表的名称、列名、列的数据类型、列的字节长度等。

SELECT * FROM DB_TAB_COLUMNS;

2）获取定时任务信息

MY_JOBS系统视图获取其定义信息。主要字段：作业创建者、作业执行者、作业对应的数据库名称、开始执行时间、结束时间、运行状态等。

--获取定时任务信息

SELECT * FROM MY_JOBS;

3）获取索引信息

PG_INDEXES系统视图获取表中的索引信息

-- 根据表名获取对应的索引信息

SELECT schemaname

,tablename

,indexname

,tablespace

,indexdef

FROM PG_INDEXES

WHERE TABLENAME = 'sell_info_full'

AND INDEXNAME IS NOT NULL;

4）获取存储过程、函数、触发器等信息

DB_SOURCE视图存储当前用户可访问的存储过程、函数、触发器的定义信息。该视图同时存在于PG_CATALOG和SYS schema下。主要字段：对象的所有者、对象名字、对象类型（function, procedure, trigger）、存储对象的文本来源等。

SELECT * FROM DB_SOURCE;

GaussDB数据库元数据的获取/采集主要是以系统表、视图、函数等方式获取，其元数据不止包含TABLES、VIEWS、COLUMNS、SOURCE、JOB，还包括USERS、COMMENTS等。具体可根据实际业务需要进行采集管理。

四、小结

元数据管理从技术角度，元数据管理着企业的数据源系统、数据平台、数据仓库、数据模型、数据库、表、字段以及字段间的数据关系等技术元数据。从业务角度，元数据管理着企业的业务术语表、业务规则、质量规则、安全策略以及表的加工策略、表的生命周期信息等业务元数据。从应用系统角度，元数据管理为数据提供了完整的加工处理全链路跟踪，方便数据的溯源和审计，这对于数据的合规使用越来越重要。通过数据血缘分析，追溯发生数据质量问题和其他错误的根本原因，并对更改后的元数据进行影响分析等。

GaussDB数据库的元数据管理是数据库系统管理工作的核心之一。它可以帮助用户更好地管理和维护数据库，提高数据的安全性和可靠性，减少数据丢失和损坏的风险。同时，元数据管理还可以帮助用户更好地理解和使用数据库，提高工作效率。

——结束

微信关注我们

原文链接：https://my.oschina.net/gaussdb/blog/10096690

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

一次网络不通“争吵”引发的思考

为啥争吵，吵什么？ "你到底在说什么啊，我K8s的ecs节点要访问clb的地址不通和本地网卡有什么关系..." 气愤语气都从电话那头传了过来，这时电话两端都沉默了。过了好一会传来地铁小姐姐甜美的播报声打断了刚刚的沉寂「乘坐地铁必须全程佩戴口罩，下一站西湖文化广场...」。 pod需要访问clb的443的监听，但是如果是集群内（集群内后面都指的K8s的节点或者POD）访问就会出现如下报错Connection refused：所以就捋了一下客户链路如下: 具体现象是什么无论是节点node还是pod里访问192.168.1.200:443都是不通的，但是访问192.168.1.200:80却是正常的。同时集群外的ECS192.168.3.100访问192.168.1.200:443和192.168.1.200:80都是正常的。进一步分析看看 CLB1的IP192.168.1.200被绑定到了K8s的node节点的kube-ipvs0网卡上，这个是一张dummy 网卡，参考dummy interface。由于 SVC1 是LoadBalancer类型的，同时复用了这个CLB1，关联en...

2023-08-16

324

低代码开发是一种可视化应用开发方法。通过低代码开发，不同经验水平的开发人员能够通过图形用户界面，使用拖放式组件和模型驱动逻辑来创建 Web 和移动应用。应用简览于2019年创立的Appsmith，是一款引人注目的开源低代码框架。其主要应用领域涵盖了管理面板、内部工具以及仪表板等，通过简化流程，允许用户轻松拖放UI组件以构建页面。借助与各类API、数据库或GraphQL源的连接，并结合JavaScript编程，用户能够以高效方式编写逻辑，从而在短时间内完成内部应用程序的开发。近年来，Appsmith以其迅猛的发展势头广受瞩目，在GitHub上脱颖而出，斩获28.7kStar，成为最受欢迎的低代码开发平台之一。当然，除了其令人瞩目的发展轨迹，Appsmith还以一系列引人入胜的特点而备受推崇。让我们深入探讨一下这些特点，突显其在低代码开发领域的独特价值。突出特色一、多数据库连接与便捷数据操作：Appsmith的无缝数据整合方案 Appsmith广泛支持多种数据库类型，包括SQL、NoSQL、OLTP，同时也提供对REST API和GraphQL的全面支持。无论数据存储...

2023-08-16

344

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。