XX区公共数据平台20XX年度数据运营服务项目需求说明.docx
《XX区公共数据平台20XX年度数据运营服务项目需求说明.docx》由会员分享,可在线阅读,更多相关《XX区公共数据平台20XX年度数据运营服务项目需求说明.docx(8页珍藏版)》请在三一文库上搜索。
1、XX区公共数据平台20XX年度数据运营服务项目需求说明一、项目概况为进一步提升县级公共数据治理水平,满足业务部门高质量数据供给需求,推动数据赋能经济社会发展,真正做到让数据“供得出”“流得动”“用得好”。根据XX省公共数据治理工作细则XX省公共数据条例XX省公共数据共享工作细则(第二次修订版)数据服务领域增值化改革工作方案XX省推进公共数据高质量开放工作方案等文件,结合省市工作要求,开展XX区公共数据平台20XX年度数据运营服务工作。通过平台运维、数据服务等一系列工作开展,提升公共数据可用性,持续提供高质量的数据供给,最终能够产生基于业务价值导向的标准统一的高质量数据,为本市重点工作提供良好支
2、撑、释放数据社会应用价值。二、服务内容(1)平台运维日常维护服务日常维护服务如功能维护、数据库维护、服务器监测、性能调优、问题定位解决、系统更新(包括公共数据平台系统的问题解决以及针对上级规范要求的必要升级改造工作)。为确保系统平稳正常运作,针对应用系统的使用情况提供健康、安全、专业的系统巡检,主动了解应用系统存在的问题,以便并及时解决这些问题。巡检具体内容包含了应用系统服务器、数据库、网络链路和应用系统功能四个方面,通过对服务器、数据库、网络、应用系统进行全面的检测,发现潜在问题和未来趋势,并给出相应的系统建议,进行相应的系统调整,以降低系统运行中的风险,保障系统的连续性。现场服务安排1名人
3、员现场配合完成各级各部门工作。如接口统计分析、接口巡检、编制运维工作周报或月报、总结报告等。根据运维期间的工作编制输出如运维项目工作周报或运维工作月报或运维项目总结报告。通过运维分析报告,对相关工作进行辅助指导,提升平台整体支撑能力。(2)数据服务数据治理服务根据数据使用部门反馈的数据质量问题和“一数一源一标准”要求,持续开展已归集海量数据的数据治理服务,完善数据治理工作,提升数据的一致性和准确性,以高质量数据服务各类复杂的、更高层次的、更精准的、智慧应用。同时按需配合完成上级数据质量专项提升行动,做好入园入学对接支撑等工作。a.数据常态化治理对于平台存量数据,建立通用及个性化数据清洗规则,按
4、照“一数一源一标准”要求对存量数据进行标准化治理,通过数据清洗、核对等手段发现的问题数据,通过IRS数据质量问题工单及时督促数据提供单位落实整改。数据清洗过程:建立数据质量检测机制,基于清洗任务的运行筛选出问题数据。对经过质量检测后,存在质量问题的数据表,进行问题数据检测。汇总当前存在数据质量问题的数据表,清晰呈现数据表名称、数源部门、检测字段、校验规则、字段值等数据问题信息。b.专项数据治理在专项数据治理层面,根据指示要求按需开展数据质量专项提升行动,对某类数据开展数据规范统一、数据质量维护等工作,提高专项数据的准确性、及时性和完整性。同时保障数据质量,做好入园入学对接支撑等工作。数据回流服
5、务数据回流服务:提供国家、省、市数据回流实施服务,包括协助提交数据问流申请、数据调度任务配置、数据回流入仓、调度任务运维等工作。针对回流数据质量问题,提交IRS工单报告,并协助对接省技术人员进行问题处理。数据优化服务:优化数据仓库内总量数据,保证数据按更新周期定时更新。a.数据回流服务存量数据回流:XX区通过对接数据库表结构,在本地构建XX区回流数据仓。向XX市级数据平台发出数据导出巾请,将XX区域的存量数据导出至本地前置库或区县公共数据平台内。增量数据回流:根据数据使用的业务需求,以数据交换、数据高铁两种形式分别实现增量数据的定期回流和实时回流。回流数据处理:数据回流到本地后,需要本地对应部
6、门认领,且在目录平台上进行新增数据目录的补充编目,同时对省市数据目录进行“已回流”的操作实现标记,方便下一步共享。同时对数据仓建设和数据使用过程中发现的问题,通过数据治理的闭环机制向上级平台进行反馈。b.数据优化服务优化数据仓库内总量数据,保证数据按更新周期定时更新。可通过分区、分片、增量更新等方式减少数据量,使用自动化调度工具定时触发ETL任务,结合并行处理、分布式计算提升效率,采用压缩和列式存储优化存储,利用缓存加速查询,定期归档和清理数据,并通过水平扩展和云原生架构增强扩展性。同时,监控性能、保障数据质量,持续优化系统。数据共享服务数据接口开发:配合部门个性化要求,对本地数据按需进行接口
7、封装,配合做好后续IRS资源化管理,为部门提供接口形式的数据共享服务。数据接口保障:保障已上架到IRS的数据接口调用成功率不低于90%,对接口故障问题协助各方进行问题排查、修复维护。a.数据接口开发对本地数据按需进行接口封装,将开发完毕的数据共享接口提交给网关系统、由网关系统发布至IRS进行资源化管理,为部门提供接口形式的数据共享服务。接口对接管理:对接数据使用单位,并调研接口使用需求,为数源单位接口注册、接口编目和接口管理提供支撑,包括技术咨询、上架辅助、审批通知等。接口开发编目:按需求进行共享库自定义SQL接口开发和接口编目。通过对共享库数据进行接口封装,将开发完毕的数据共享接口注册至网关
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- XX 公共 数据 平台 20 年度 运营 服务项目 需求 说明
