数据质量管理及在数据仓库实现探讨

发布时间：2017-07-02 01:00

  本文关键词：数据质量管理及在数据仓库实现探讨，由笔耕文化传播整理发布。

【摘要】： 数据质量是数据仓库项目和决策分析系统成功的关键因素。数据质量问题一直以来是困扰银行管理决策和经营发展的问题。对数据进行科学有效的质量管理和质量控制,以确保数据质量较高的数据仓库为管理者提供可信的决策支持已成为现阶段银行现代化管理工作的基础工作。 企业级数据质量管理和质量控制体系是企业信息化的有效手段,是数据质量改进的必经途径,是解决数据质量问题的基础环节。 本文以中国建设银行数据仓库系统建设中进行的“数据质量管理体系项目”为基础,详细的讨论了在数据质量管理方面的具体实施过程。 本文一方面通过建立数据质量管理和质量控制体系来完善数据质量管理制度和流程,对数据进行科学有效的质量管理和质量控制;另一方面通过信息技术在数据仓库中实施数据检查来说明在数据质量管理中如何发现数据质量问题,并通过数据质量管理流程是如何进行改进的。通过这两个主要的实现途径,对建行的数据质量管理的实现方法进行初步探讨。 该项目作为数据仓库的数据质量管理问题,是建设银行借鉴先进的业界经验,通过完善的工作方法,严谨的工作流程,形成的建行数据质量管理和质量控制体系。该项目的内容可以作为提高数据仓库的数据质量方面的工作实例,为企业业务系统建设做好数据质量管理提供了很好的思路和借鉴。
【关键词】：数据质量 管理 数据仓库
【学位授予单位】：吉林大学
【学位级别】：硕士
【学位授予年份】：2007
【分类号】：TP311.13
【目录】：

• 内容提要4-8
• 第一章 引言8-11
• 1.1 数据质量管理体系项目背景8-10
• 1.2 本文介绍的重点10-11
• 第二章 数据质量及数据质量管理11-22
• 2.1 企业数据的现状及数据质量的重要性11-12
• 2.2 数据质量的定义12-14
• 2.2.1 高质量数据的含义12-13
• 2.2.2 数据的绝对质量和过程质量13-14
• 2.3 数据质量问题产生的影响14
• 2.4 数据质量的问题来源14-15
• 2.5 数据质量管理的定义及成熟度模型15-18
• 2.6 数据质量管理研究的主要内容18-19
• 2.7 实现数据质量管理的主要方法19-22
• 2.7.1 提高企业内部全体员工对数据质量的重视程度19
• 2.7.2 建立健全完善的制度管理19-21
• 2.7.3 信息技术保证21-22
• 第三章 实现企业级的数据质量管理和质量控制是企业数据信息化管理有效手段22-32
• 3.1 数据质量管理体系整体框架22-23
• 3.2 数据质量管理体系的政策制定23-24
• 3.2.1 数据质量管理策略的制定23
• 3.2.2 数据质量管理工作目标23-24
• 3.2.3 数据质量管理工作内容24
• 3.3 数据质量管理体系规章制度的建立24-26
• 3.3.1 数据组织管理构架24-25
• 3.3.2 数据质量管理体系中岗位职能25-26
• 3.3.3 数据质量报告机制26
• 3.4 数据质量管理具体实施方法26-31
• 3.4.1 数据质量标准定义26-29
• 3.4.2 数据质量管理流程29
• 3.4.3 岗位职责定义29-30
• 3.4.4 工作模板30
• 3.4.5 质量问题、历史记录30
• 3.4.6 数据质量评估30-31
• 3.5 小结31-32
• 第四章 在数据仓库中实现数据质量管理32-54
• 4.1 数据质量检查原则32-33
• 4.2 数据质量管理平台－数据质量检查系统33-42
• 4.2.1 数据质量检查系统框架结构33-34
• 4.2.2 数据质量检查平台检查执行模块功能说明34-42
• 4.2.2.1 结构设计34-36
• 4.2.2.2 流程设计36-37
• 4.2.2.3 接口设计37-38
• 4.2.2.4 数据库说明38-42
• 4.3 数据质量检查具体实现过程  在ETL 过程中的数据质量检查42-54
• 4.3.1 数据抽取、数据转换、数据加载（ETL）的定义42-43
• 4.3.2 数据质量检查具体实现过程的概述43-45
• 4.3.3 数据加载过程中的数据质量检查45-50
• 4.3.3.1 Inmod 模块功能46
• 4.3.3.2 Inmod 前置任务46
• 4.3.3.3 inmod 函数部分详细设计46-50
• 4.3.4 数据存储区的数据质量检查  业务规则在质量检查中的实现50-54
• 4.3.4.1 制定详细正确的业务规则是在数据仓库中实现专用检查的基础50
• 4.3.4.2 人民币存款其中的一个业务规则50-51
• 4.3.4.3 相应的脚本逻辑51
• 4.3.4.4 具体的脚本设计51-54
• 第五章 数据仓库数据质量的认责54-57
• 5.1 数据质量认责制是提高数据质量的重要保证54
• 5.2 数据质量认责制的实施流程54-55
• 5.2.1 维护业务数据定义54-55
• 5.2.2 协助解决数据质量问题55
• 5.2.3 跟踪，汇报数据质量55
• 5.3 数据质量认责制的实施方案55-57
• 5.3.1 建立数据质量协调会议制度55
• 5.3.2 成立数据质量问题解决方案项目组55-56
• 5.3.3 制定联系人制度56-57
• 第六章 总结57-59
• 参考文献59-60
• 摘要60-63
• Abstract63-67
• 致谢67

【引证文献】

中国期刊全文数据库 前1条

1 叶宇航;贺仁龙;程晓旭;;电信数据质量管理与稽核研究[J];电信科学;2012年02期

中国硕士学位论文全文数据库 前3条

1 柯汉松;六西格玛方法论在商业银行数据仓库管理中的应用研究[D];厦门大学;2008年

2 沈军武;ABC集团信息系统数据质量管理研究[D];中南大学;2012年

3 曾浩;云计算在电信行业经营分析系统中对海量数据处理的研究[D];湖南大学;2011年

  本文关键词：数据质量管理及在数据仓库实现探讨，由笔耕文化传播整理发布。

，

本文编号：508002