XX省公共数据基础平台监测预警系统项目采购需求.docx
《XX省公共数据基础平台监测预警系统项目采购需求.docx》由会员分享,可在线阅读,更多相关《XX省公共数据基础平台监测预警系统项目采购需求.docx(32页珍藏版)》请在三一文库上搜索。
1、XX省公共数据基础平台监测预警系统项目采购需求一、项目概况(一)建设目标根据中共中央关于进一步全面深化改革推进中国式现代化的决定网络数据安全管理条例关于加快公共数据资源开发利用的意见XX省大数据发展条例XX省一体化公共数据体系建设方案2024年数字XX工作要点等政策文件的相关要求,建设XX省公共数据基础平台监测预警系统,加强公共基础数据安全风险信息的获取、分析、研判、预警,全面提升省一体化公共数据平台和省电子证照系统的数据合规使用和安全监管力度,实现公共数据全流程流转的合规使用和安全监管,探索“触发式”“无感式”新型监管新模式,为推动建立健全公共数据安全运行监测预警机制提供有力支撑。(二)建设
2、内容XX省公共数据基础平台监测预警系统是以XX省公共数据基础平台(省一体化公共数据平台和省电子证照系统)的监测监管为核心目标,提供监管数据采集、监管指标管理、安全监测监管、安全监测监管分析、运维支撑管理等服务,实现对公共基础数据汇聚、处理、流通、应用、运营和安全保障等全流程可监测监管,以及风险预警事件监管可闭环。本项目系统自主研发,建设包括一专区(监管业务数据专区),一系统(数据采集管理模块、指标管理模块、数据合规监测预警模块、评估分析模块、应用支撑模块、移动应用模块),标准规范建设,指标体系建设等内容。(三)总体技术建设要求1、需要依托第三方专业监管评估机构,对XX省公共数据基础平台(省一体
3、化公共数据平台和省电子证照系统)数据汇聚、数据处理、数据流通、数据应用、数据运营和数据安全保障等全过程规范性进行专业评判和制订相关标准规范,从而为监管提供依据,及时发现公共数据基础平台的业务合规风险。2、需要引入先进的数据合规监测预警技术和工具,强化技术赋能监管,实现对XX省公共数据基础平台(省一体化公共数据平台和省电子证照系统)数据汇聚、数据处理、数据流通、数据应用、数据运营和数据安全保障等全过程的业务合规风险监测、预警及处置闭环跟踪。3、需要建立监管业务数据专区,监管数据专区是省数据管理局监管XX省公共数据基础平台(省一体化公共数据平台和省电子证照系统)的数据资源中心,通过监管数据的采集、
4、汇聚、分析和应用处理,支撑监管业务协同应用。具体需求分析如下:(1)建立使用监管分离的“两轴”管理体制;(2)建立独立的数据专区;(3)实现监测预警数据高效采集;(4)实现自动化、常态化的合规风险监测监管;(5)实现业务合规的风险评估分析。二、技术和服务要求(一)监管数据专区监管数据专区是XX省数据管理局监管XX省公共数据基础平台(省一体化公共数据平台和省电子证照系统)的数据资源中心,通过监管数据的采集、汇聚、分析和应用处理,支撑监管业务协同应用。系统通过接入XX省一体化公共数据平台和XX省证照数据电文(电子证照)共享服务系统的接入数据,依托省级政务外网云平台建设合规监管数据专区,通过数据采集
5、指标初始化构建配置、元数据管理、数据预处理、数据资源目录处理等数据处理为监测预警系统提供数据采集数据库服务、主题数据库服务、系统数据库服务。数据专区分为指标采集数据库服务的指标采集数据库、主题数据库服务的监管主题库与监管文件库,系统数据库服务分为数据采集管理库、指标管理库、数据合规监测预警库、评估分析库、应用支撑库、移动应用库。LLL数据采集实施服务数据采集实施服务包括表单配置服务、采集端工具部署服务、采集任务配置服务、采集异常排查服务。采集任务配置服务应支持监管数据全生命周期业务环节的采集任务配置。LL2.主题库建设围绕公共数据基础平台监测预警主题,整合从XX省公共数据汇聚共享平台、XX省
6、公共信息资源统一开放平台、XX省公共数据资源开发服务平台以及XX省电子证照平台采集的数据,构建汇聚监管主题数据、处理监管主题数据、流通监管主题数据、应用监管主题数据、运营监管主题数据、安全保障监管主题数据。各类主题库所需要从XX省公共数据汇聚共享平台、XX省公共信息资源统一开放平台、XX省公共数据资源开发服务平台以及XX省电子证照平台采集解析处理的相关数据。同时,围绕数据汇聚监管、数据处理监管、数据流通监管、数据应用监管、数据运营监管、数据安全保障监管需要,构建监管主题库与监管文件库,为开展XX省公共数据基础平台监测预警业务提供数据支撑。(二)数据采集管理模块建设数据采集管理模块,构建多源、高
7、效的数据采集体系,实现公共数据合规安全监测监管相关数据的统一采集、监测和处理。主要建设内容包含采集端工具、采集端管理、凭证上报管理、采集进度监测、采集数据统计等。12.1.采集端工具采集端工具功能包括数据源管理、元数据、数据探查、采集任务管理、任务调度、任务执行、采集模型定制、数据入库、入库任务日志、授权许可、日志推送、预警记录等。L2LL数据源管理提供数据源管理功能,实现源数据库的注册与配置。主要包括数据源的新增、修改、删除、查询及连接测试。数据源信息包括数据源名称、数据库类型、数据库用户名、数据库密码、数据库地址、数据库信息描述等。支持OraCIe数据库、Postgresql数据库、IIl
8、ySqI数据库、达梦数据库、人大金仓数据库类型、databend、seabox等主流关系型数据库。1212.元数据基于数据探查获取的信息,自动生成元数据。主要包括字段、字段长度、字段类型、字段约束等信息。1213数据探查数据探查支持根据采集任务进行探查,包括表级探查、字段级探查,可探查数据表、数据字段。1214采集任务管理提供数据采集任务管理的功能,实现数据采集任务编辑、删除、查询、失败任务重推及数据预览的功能。采集任务管理信息包括业务数据库名称、采集周期、采集状态、创建时间。1215任务调度提供采集任务调度的功能,实现采集任务启动和暂停的功能,并支持对采集任务进行优先级排序。支持按照“月、周
9、天、小时”等维度,设置任务调度周期。1216任务执行提供任务执行功能,包括立即执行和重新执行。1217采集模型定制1 .全量采集模型定制全量采集模型,针对历史存量的数据表/文件,采用一次性全量采集模型。2 .增量采集模型定制增量采集模型,针对业务新增的数据表/文件,采用基于时间戳字段增量方式采集。3 .元数据采集模型定制数据表元数据采集模型,主要采集XX省一体化公共数据平台、XX省证照数据电文(电子证照)共享服务系统的相关数据表,主要包括字段、字段长度、字段类型、字段约束等信息。1218数据入库基于目标库要求,将采集存储到本地磁盘的数据,以文件的形式写入XX省公共数据基础监测预警系统目标数据
10、库。1219入库任务日志提供入库任务日志查看功能,入库任务列表包括批次号、业务数据库、数据表、入库任务状态、入库时间等信息,支持失败任务重新执行。121JO授权许可提供授权许可录入、授权有效性核验功能,实现将采集端节点合法接入到采集端工具管理端。121JL日志推送日志推送实现将采集端工具的日志推送到采集端工具管理端,实现管理端全局管理所有采集端的日志。L21.12.预警记录提供预警记录管理功能,支持接收采集管理端催办的预警信息。主要包括预警记录列表、预警记录查询、预警记录查看、预警信息提醒、预警解决。L22采集端管理实现数据采集端管理,并提供数据采集端检测功能。1221数据采集端管理提供采集端
11、管理功能,实现采集端的新增、修改、删除、停用、恢复,实现采集端的总数量、正常运行的采集端数量、异常的采集端数量、已暂停的采集端数量的统计,支持按采集端节点ID、状态检索采集端。采集端管理信息包括采集端IP、端口号、节点ID、MAC地址、状态、授权码。采集端信息新增并提交完成后,系统自动生成采集端授权码。1222数据采集端检测数据采集端检测。实现检测采集端连接是否正常,检测正常时可显示检测时间及正常状态;检测异常时显示检测时间及采集端异常,并可查看异常信息。1223采集端检测日志提供检测日志的功能,支持查看采集端所有的检测信息,检测日志信息包括检测状态、检测时间、异常原因。1224预警信息系统支
12、持自动生成采集、入库的预警信息,主要包括预警信息状态、预警信息列表、预警信息查询、预警信息催办、预警信息查看。1.2.3.凭证上报管理实现凭证上报管理功能,包括凭证任务上报、下发、展示、上传、下载、提交、审核及催办、重交等。1231任务上报提供凭证上报任务管理功能,主要包括任务新建、表单关联、任务编辑、填报任务删除、任务查询、任务查看等。1232.任务下发提供任务下发,将任务下发至相应的单位。1233任务列表展示按待上传、已上传、审核通过、审核不通过等状态,分类展示任务信息,展示内容包括任务名称、表单名称、任务开始时间、任务结束时间等。123.4.凭证上传提供凭证上传功能,支持上传PDF、图片
13、等多种格式的原始证明文件。1235.凭证下载提供凭证记录下载功能,支持查看凭证信息。1236凭证提交提供凭证信息提交功能,支持对上传的凭证进行上报提交。123.7.凭证审核提供凭证审核功能,审核结果包括通过与不通过,不通过需填写相应的理由。12.3.8.任务催办提供凭证上报任务催办功能,支持对即将超期的任务发起催办。催办的任务会被高亮优先展示O1239重新提交提供凭证重新提交功能,支持对审核不通过的凭证重新上传。提供采集进度监测功能,实现对采集工具采集、凭证上传等多源采集任务的监测。主要包括采集任务监测、凭证上传监测、采集进度提醒、统计接口、数据运营视图等。1241采集任务监测实现按数据库监控
14、数据采集情况、按数据表监控数据采集情况、按批次监控数据采集情况监测。提供数据总量统计、今日数据量、数据分类统计的接口,为采集管理端数据统计提供支撑。展示采集失败的数据情况,支持查看采集异常原因。异常批次采集任务信息包括业务数据库、数据表名称、批次号、创建时间、采集完成时间、失败原因、采集失败数据量。1242凭证上传进度监测提供凭证上传进度监测功能,监测内容包括任务名称、任务ID、任务下发时间、任务最后一次提交时间、状态(已上报、未上报、已审核、未审核、审核通过、审核未通过)等。1243采集进度提醒提供采集进度提醒功能,对采集失败或填报超时的任务,以邮件方式发送采集进度。1244数据运营视图提供
15、采集端管理运营视图,主要包括数据概览、数据趋势展示、toplO数据库采集量、数据批次分析、预警信息。提供采集数据统计功能,实现数据的整理、汇总和分析,支撑数据采集策略的优化,主要功能包括按采集对象统计、采集时间统计、异常统计等。1251采集对象统计提供采集对象统计功能,按XX省公共数据汇聚共享平台、XX省公共数据开发服务平台、XX省公共数据资源统一开放平台、XX省证照数据电文(电子证照)共享服务系统统计采集情况。1252采集时间统计提供按采集时间统计功能,支持按季度、月、周、天,统计展示数据表总数、数据采集总量、数据采集失败量。12.5.3.异常统计提供异常统计功能,统计采集任务总数、失败总数
16、失败占比。(三)指标管理模块指标管理模块通过指标体系化相关功能,提供公共数据监测监管管理指标的统一管理,以及多级分层指标体系构建能力,实现公共数据监测监管管理指标的动态配置。系统建设包含指标体系管理、指标项管理、指标模型管理、算子管理、指标优化分析等功能。L3.L指标体系管理指标体系管理涵盖了对指标体系的全面管理,确保指标体系的完整性和一致性。这包括对指标体系的创建、维护、更新和优化等各个环节的管理。同时,指标体系版本管理确保了指标体系在不同阶段的版本控制,以便于追溯和比较不同版本之间的差异,确保数据的准确性和可靠性。止匕外,指标目录管理则专注于对指标目录的整理和维护,以确保指标目录的清晰和
17、易用性。通过这三个方面的综合管理,可以有效地提升指标体系的科学性和实用性,为决策提供有力支持。建设包含指标体系管理、指标体系版本管理、指标目录管理。1.3.1.1.指标体系管理指标体系管理实现对监测预警系统监测指标、监管指标和安全评估指标等体系管理功能,提供指标体系的的列表和查询、创建、编辑、删除和视图总览等功能。1312指标体系版本管理指标体系版本管理提供了基于版本的指标体系历史数据管理功能,能够提取指标历史版本数据进行比较分析,实现指标全生命周期可追溯、可比较,指标体系版本管理为指标体系提供版本维护、体系配置、版本发布、版本对比、试图总览和版本导出等功能。指标目录管理建立统一的指标目录库,
18、对平台内建立的各类指标项进行集中管理,为平台多层级指标和多指标体系构建统一提供指标目录支撑。L32指标项管理指标项管理提供了平台所有基础指标项的配置管理功能,通过标项管理提供的这些功能,组织可以更加高效地管理和优化其业务,提升决策效率和质量,促进持续发展,建设包含指标项列表、指标项基本信息配置、指标项目录配置、指标项数据源配置、指标项特性配置、指标项批量管理。1321.指标项列表指标项列表展示了指标项的编码、名称、排序、描述、数据类型、逻辑数量、状态等信息。指标项基本信息配置,包括配置指标项的编码、名称、排序、描述、说明、负责人、指标状态等信息。1323.指标项目录配置指标项目录配置,即选择指
19、标项所属的目录,支持在指标项创建时选择目录进行配置,也支持选择目录进行创建指标项。L324.指标项数据源配置指标项数据源配置,即配置指标项的数据来源,支持用户通过选择数据表和字段进行数据来源的配置。1325指标项特性配置指标项特性配置,包括配置指标项的数据类型(数值、文本、字典值、逻辑、时间等);计算特性(时点状态值、时序递增量、区间累计量、区间最大最小值、区间比值、时点计算值等),以及指标单位等信息。1326指标项批量管理支持指标项数据的批量导入和导出功能,方便用户开展指标库数据初始化维护工作。L33指标模型管理指标模型管理提供了平台所有指标模型配置管理功能,建设包含指标模型列表、指标模型基
20、本信息配置、指标模型规则配置、算子调用、指标模型预览。133J.指标模型列表指标模型列表展示了指标模型的名称、描述、状态、所属指标项、创建时间等信息O1332.指标模型基本信息配置指标模型基本信息配置,包括配置指标模型的名称、描述、说明、所属指标项等信息。1333指标模型规则配置指标模型规则配置,即配置指标模型的取数和计算规则,提供对用户配置的规则进行验证和数据预览等服务,开发模式,可以仅为选择指标和规则代码编辑两个区域。1.3.34.算子调用在构建较为复杂的指标模型时,可以借助算子的调用来提高指标模型的灵活性和可扩展性,从而提升数据处理与分析效率、确保数据准确性,建设包含调用算子、新增算子、
21、搜索算子。1335指标模型调试在指标模型的创建完成后,可以通过点击指标预览来调试指标,查看指标的结果,建设包含修改模型代码、调试结果预览功能。L34算子管理在指标模型中,算子管理是确保用户能够灵活、高效地定义和使用各种算子来生成所需的指标。通过合理的配置和调试,用户可以确保算子在不同场景下的准确性和可靠性,建设包含算子列表、算子基本信息配置、算子逻辑规则配置、算子调试。1341算子列表算子列表展示了指标项的编码、名称、排序、描述、算子类型、版本信息、状态、操作等信息。算子的基本信息包含编码、名称、排序、描述、算子类型、版本信息、状态。1343算子逻辑规则配置算子逻辑规则配置,这是算子管理的核心
22、部分,涉及定义算子的具体逻辑规则或算法,包含设置条件语句、循环结构、函数调用等编程元素。1344算子测试用户可以使用调试工具来测试算子的逻辑规则,观察输入数据、中间结果和最终输出的变化。1.3.5.指标优化分析根据监测、监管、安全评估需求及执行结果情况,优化分析指标具体执行情况,如指标结果值均无风险、均有风险、均接近满分、均分值较低、指标不适应等情况,根据指标优化分析结果形成指标优化清单,以及根据指标优化过程形成指标优化记录。1351指标优化分析根据监测、监管、安全评估需求及执行结果情况,优化分析指标具体执行情况,支持根据指标体系、高区分度、低区分度等维度自动进行归类,用户可按类别开展指标优化
23、分析工作。1352指标优化人工审核根据指标优化分析结果,需结合人工筛选审核通过后,才最终形成指标优化清单。人工审核不通过的需标记理由。1353指标优化清单指标优化清单,提供对优化清单的优化、查询、查看、导出等功能。1354.指标优化记录指标优化记录,记录了所有优化清单已经优化配置的操作记录,支持对优化记录的查询、查看、导出等功能。1355指标优化统计提供对指标优化分析、指标优化清单、指标优化操作、指标优化记录等情况的数据统计分析服务,同时支持按指标体系、时间、优化等级、优化理由、优化操作等维度进行统计分析。(四)数据合规监测预警模块数据合规监测预警模块通过数字化手段,为监管部门提供对XX省公共
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- XX 公共 数据 基础 平台 监测 预警系统 项目 采购 需求
