元数据管理与数据质量监控

《元数据管理与数据质量监控》由会员分享，可在线阅读，更多相关《元数据管理与数据质量监控（36页珍藏版）》请在文档大全上搜索。

1、元数据管理 & 数据质量监控北京瑞斯泰得数据技术开发有限公司Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385项目背景数据 各种各样的数据 分散存在 影响不确定 数据由来不清楚ETL ETL之前无法获知数据概况 ETL过程中缺乏监控Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)382

2、40385功能概览元数据管理与数据质量监控平台元数据管理元数据管理数据库管理业务数据字典报表脚本数据质量监控数据质量监控质量点监控数据剖析数据检查数据对比数据指标数据库监控表监控表空间监控SQL脚本监控结果管理结果管理质量点监控数据剖析数据检查数据对比数据指标表空间监控SQL脚本监控任务调度管理任务调度管理任务中心日志中心系统管理系统管理元数据维护权限管理工作区工作区个人文件夹公共文件夹Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385

3、元数据管理 对对各各种元数据实施统一管理种元数据实施统一管理包括增、删、改、查、预览等操作。数据质量监控 基于元数据做各种分析和监控基于元数据做各种分析和监控数据：质量点监控、数据剖析，数据检查等数据库：表空间监控、数据库监控、表监控ETL：SQL脚本监控结果管理 展示数据质量管理中各种监控展示数据质量管理中各种监控和分析的和分析的行结果行结果Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385任务调度管理 展示各类监控或任务状态，可停止

4、、暂停、重启监控和任务 展示各种监控或任务执行的日志、结果信息系统管理 元数据添加、变化日志、类别、属性、属性类别的维护 权限管理：用户及其权限管理工作区 个人文件夹：存储个人关注的对象 公共文件夹：存储公共对象，达到资源共享Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385pServerpApplicationpftpptelnetp p指标p维度p纬表p字典基本表p字典数据表 p数据库p表p视图物化视图p存储过程p字段p pETLp

5、报表p数据接口p接口文件 元数据的类型Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理1.数据库元数据2.管理型元数据3.业务元数据4.数据字典元数据5.脚本元数据Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理-数据库元数据 基本操作 增、删、改、查 加

6、入到“个人文件夹” 加入到“公共文件夹” 表 存在性实时查询 字段备注查询 字段备注保存 表数据预览 影响分析 血统分析Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理-管理型元数据 基本操作 编辑、删除 加入到“个人

7、文件夹” 加入到“公共文件夹” 工作桌面支持 自动登录netterm 自动登录plsqlBeijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理-业务元数据 增加步骤 添加对象类别，例如：“统计周期” 添加对象属性类别，例如：

8、“字符型” 添加对象属性，例如：“描述” 新增一个具体的元数据，例如：“月”Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理-数据字典 基本操作 浏览 增加 编辑 删除Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385元数据管理-SQL脚本元数据 基本操作 编辑 删除

9、 工作桌面支持 用UltraEdit 打开脚本文件和日志文件Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guangzhou (8620)38240385血统分析 功能描述：通过对元数据关系的回溯，以图形方式展现指定元数据的数据血统和加工过程。 作用：通过该功能，业务人员可以清楚的了解指标等关键数据的来龙去脉。Beijing Stats Data Mining Co. Ltd.Beijing (8610)51722052 Shanghai (8621)53060345 Guang