如何利用ODSEDW提升企业数据质量.ppt
《如何利用ODSEDW提升企业数据质量.ppt》由会员分享,可在线阅读,更多相关《如何利用ODSEDW提升企业数据质量.ppt(28页珍藏版)》请在三一文库上搜索。
1、如何利用ODS/EDW提升企业数据质量,IBM 2019年4月18日,ODS/EDW系统 IBM机密 | 18-Apr-19,2,汤传俊个人介绍 MSN: ,IBM业务咨询服务部的信息技术架构师,专业集中在信息系统架构设计,业务流程分析和设计,应用系统设计和开发,数据架构设计,数据建模和项目管理。 十二年电信行业经验,93年进入电信,从96年就开始参与电信九七工程的建设,足迹覆盖大部分省份,参与或领导的项目、产品有九七工程、本地网计费系统、移动计费系统、联通综合营帐系统、宽窄带系统、IP网管系统、radius认证计费系统、大客户系统、邮政BOSS系统等,以及目前正在进行的EDA/ODS项目。
2、所参与的系统涉及的运营商包括中国电信、中国移动、中国联通、中国网通等。,主要的项目: 云南电信ODS系统 武汉电信计费帐务系统 长沙电信九七/计费系统 乌鲁木齐电信计费帐务系统 安徽全省本地网计费系统 宁夏全省本地网计费系统 上海移动综合计费帐务系统 河南网通大客户系统 中国联通综合营帐系统(联通BOSS) 广东邮政综合服务平台(邮政BOSS) 河南电信互联网客户管理与认证计费系统 IP网管系统 企业级VoIP网关,Name: 汤传俊(Tommy) MSN: Mobile: 13908470717 Office: 020-87553828-2686 Email: ,ODS/EDW系统 IBM
3、机密 | 18-Apr-19,3,文档内容,数据质量问题产生原因与分类 ODS/EDW在数据架构层面对数据质量的支撑 ODS/EDW在应用功能层面对数据质量的支撑 ODS/EDW在管理层面对数据质量的支撑 ODS/EDW数据质量管理案例(穿插),ODS/EDW系统 IBM机密 | 18-Apr-19,4,数据的重要性不亚于业务功能,为什么我的电话 这么久没装好?,客户投诉我不是我的错!,两个系统的报表怎么不一致?,目标完成没有? 未来趋势怎样?,客户,客户经理,管理者,领导,实际发生的损失 资金的流失 客户的流失 生产效率的影响 提升的障碍 客户服务质量提升 市场的扩展 利润的增长,不同的系统
4、数据不一致 不知道数据应该以谁为准 数据的混乱状况处于发散状态,ODS/EDW系统 IBM机密 | 18-Apr-19,5,问题数据产生的原因架构上,前期建设重功能轻数据 前期采用统一规划分步建设思路,对如此庞大的系统这是唯一可行的方法,但谁建设谁管理的做法造成部门/系统割据,系统接口复杂,数据流向不清,缺乏像功能业务系统一样对数据的整体规划,我们需要像功能系统规划一样来规划数据,确定数据的整体架构,确定数据的归属划分,确定数据交互与共享规则,制定数据质量评价规则,建立完整的数据管理体系,ODS/EDW系统 IBM机密 | 18-Apr-19,6,问题数据产生的原因系统功能支撑上,虽然每个系统
5、多少有一些数据质量管理的功能 但没有一个系统能够完整地、系统地提供数据质量管理的机制与功能 同时由于各系统数据是分离的、割据的,他们的数据质量管理功能受到本身机制上的制约,我们需要一个能够覆盖完整数据范围的系统提供相关的数据质量管理功能,以便能够在日常运营工作中进行数据质量的管控、操作、量化考核,以及数据的沉淀积累等,ODS/EDW系统 IBM机密 | 18-Apr-19,7,问题数据产生的原因管理上,缺乏专门的数据管理组织与相关的制度 经常性的临时突击对数据质量进行清理,但清理过后数据问题暂时缓解,随着时间的推移,数据又出现问题,如此反复 数据管理工作就像警察一样,需要长期存在,一直存在,我
6、们需要专门的数据管理组织,将数据管理工作作为日常的工作,就像订单受理系统每天受理订单一样每天进行数据管理的日常工作 利用系统提供的功能,在工作流程上建立闭环机制:发现、分析、规则、执行、修正、考核,ODS/EDW系统 IBM机密 | 18-Apr-19,8,数据质量多重检查维度,数据的完整性,数据的一致性,数据的唯一性,数据的连续性,数据的完备性,数据的准确性,数据的逻辑性,数据的可用性,数据的清晰性,数据的正确性,数据质量保证体系,数据质量问题中的 职业道德和法律问题,数据质量,ODS/EDW系统 IBM机密 | 18-Apr-19,9,数据质量问题分类技术层面,单一系统数据质量 数据缺失、
7、错误 数据非空、唯一 数据关联完整性 跨系统数据质量 数据关联完整性(无主帐单) 不同系统数据一致性 汇总指标数据质量 原始数据质量问题 汇总算法问题(非质量问题),ADB单一系统数据质量保证 ODS跨系统数据质量保证 EDW数据汇总指标关联质量 ODS可以作为以上三类数据质量问题的最终管理者,ODS/EDW系统 IBM机密 | 18-Apr-19,10,文档内容,数据质量问题产生原因与分类 ODS/EDW在数据架构层面对数据质量的支撑 ODS/EDW在应用功能层面对数据质量的支撑 ODS/EDW在管理层面对数据质量的支撑 ODS/EDW数据质量管理案例(穿插),ODS/EDW系统 IBM机密
8、 | 18-Apr-19,11,企业数据架构(EDA),EDA,ODS/EDW系统 IBM机密 | 18-Apr-19,12,ODS,EDW,EDA/ODS/EDW关系数据质量管理的基础,ODS/EDW可以成为EDA的主要承载系统 拥有电信业务运营所需的完整的统一的数据视图 数据归属划分清晰 数据流向清晰 数据更新相对及时,反映数据最新状况 满足日常运营所需的数据交互与共享 可以扮演数据质量管理的关键角色 在此基础上建立所需的数据管理体系 组织机构 系统功能支撑 考核评测机制,可以看成数据的消费者,业务运营系统的一部分,系统数据交互、共享、沉淀的中心,没有单独建设ODS的省公司,可以将其功能纳
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 如何 利用 ODSEDW 提升 企业 数据 质量
链接地址:https://www.31doc.com/p-2612188.html