实用标准文档
在数据库层面将红名单信息进行安全级别分类，包括多个等级；同时，对红名单建设库 于用户也可进行相应分类，一级用户可以查看一级及以下红名单，各级用户都可查看本级相应红名单。红名单管理主要是在建立数据库的同时建立查询权限，将红名单中人员的安全级别进行过滤，从而屏蔽普通用户查阅、修改、删除重要专题库的数据 系统架构 采用J2EE进行开发，应用模式为B/S 为实现大数据应用，支持多种数据库作为数据来源进行编目，所支持的源数据库至少包括：Oracle、Hadoop、Mppdb，需提供页面功能截图，同时技术要求 提供商业版数据资源管理系统1套。 ★须与公安PKI/PMI系统无缝对接，实现用户身份统一认证 支持用户通过公安数字证书登录应用门户，并且在访问应用门户的各项功能以及应用时，不再重复进行登录操作 单点登录 需完全支持PKI证书登录平台，并能够通过平台访问应用资源。除了证书登录之外，还需要提供用户名/密码的登录方式，以满足特殊情况下的应数据资源5 目录管理系统 数据元、限定词、数据项等管理模块的采集项须符合公安数据元编制相关标准规范 标准对接：与省部平台对接将上级标准数据快速导入到系统中，为方便标准管理，支持数据元和代码文件的导入功能，需提供页面功能截图 公安标准梳理 代码管理：实现对本级代码数据的新增、检索、查看、编辑、废止等功能，需提供页面功能截图 数据元管理：实现对数据元的新增、变更、废止、查询等功能，管理的范围包含上级同步的数据元和自定义数据元，需提供页面功能截图 限定词管理：包含对限定词的新增、变更、废止、查询等功能。范围包含上级同步的限定词和自定义限定词，需提供页面功能截图 用需要 文案大全
实用标准文档
数据项管理：包含对数据项和数据项别名的新增、变更、废止、查询等功能 数据项由限定词和数据元组成，不同的限定词和数据元都可以组成数据项。每个数据项都可以有一个或多个数据项别名，需提供页面功能截图 ★数据资源目录管理模块设计须符合公安相关数据资源目录技术规范，提供不少于900个数据资源目录 包含数据资源目录所需应用系统信息的新增，检索，查看，编辑，废止等功能 数据库资源注册：设置维护数据资源目录所需的数据库资源信息，数据库资源注册系统能够自动读取展示出其包含的所有数据表及其字段，管理人员可以完善各个数据表的描述信息需提供页面功能截图 数据资源目录管理系统 须与数据资源监管系统无缝对接，数据库资源所需的数据库须从数据资源监管系统的数据库列表中选择，数据资源编目的结果须能够在数据资源监管系统中直接引用 包含数据资源目录的新增、检索、查看、编辑、编制、发布、资源构成查看、废止和启用等功能 通过编制，能够建立数据资源与数据项的映射关系，需提供页面功能截图 自动化数据资源编目：为方便编目管理，在数据资源编目过程中，能够通过自动匹配实现自动化数据资源编目，需提供页面功能截图 数据资源检索 能够针对已经发布数据资源目录按照要素、业务分类和来源分类的检索和查询功能 数据质量评估：对关系型数据资源进行完整性、唯一性、规范性、值域、字符特征等方面的分析和评估，帮助用户全面掌握基础数据质量情况，快 速发现潜在的数据质量问题 文案大全
实用标准文档
数据质量管理 校验方法管理：对数据质量校验方法进行维护，支持扩展校验方法以满足特定的业务逻辑需要 标准规则配置：基于标准数据元配置校验规则，以便在方案配置时可以批量创建校验规则 基础监测方案：根据发现的数据质量问题，参照数据标准规范以及业务需求制定质量监测规则，对数据资源质量进行持续监测。主要监测完整性、规范性、单表逻辑等字段级或记录级问题 数据质量分析：按业务警种、数据种类、来源单位、时间等条件对数据质量进行分析统计，包括单位对比分析、时间趋势分析、问题类型分析等等。支持自动生成并发布数据质量分析报告。支持数据质量问题修复情况分析 数据质量追溯管理:依托已经形成的数据资源目录，结合相关部、省和市本级的数据标准和规范要求，从数据信息的准确性、值域范围、唯一性、必要性和引用代码的规范性等方面对已有的数据信息和采集、汇聚中的数据信息进行全面的动态化数据质量监管，使数据信息管理部门随时了解数据信息的质量情况，对数据质量故障能够及时发现、及时分析、及时处理。建立从数据采集、数据入库、数据转换、数据查询、对比数据全生命周期对数据档案的跟踪管控 ★其他要求 根据资源目录的建设要求，系统形成的数据资源目录需能够在服务接口构建时直接引用 系统架构 采用J2EE进行开发，应用模式为B/S ★技术要6 数据资源监管系统 求 提供大数据ETL整合工具，对各类源头数据库、文件及其它数据类型进行数据抽取，并在过程中进行清洗转换，将结果写入汇集库，同时提供商业版数据整合管理系统1套。 数据库注册管理：实现对数据整合所涉及数据库的注册管理。为实现大数据应用，数据库注册须支持多种数据库，至少包括：Oracle、Hadoop、Mppdb， 需提供页面功能截图 文案大全
实用标准文档
数据资源数据整合明细总览：对数据资源所涉及的整合情况、和质量情况进行概括性的展示，展示的方式以图表数字混合方式为主，概括性地将数据整合涉及的数据库、数据整合执行节点和整合任务的运行情况，以及数据资源的数量情况进行概述，需提供页面功能截图 监管系统 数据整合执行节点管理：对执行数据整合任务的节点的启用、停止等管理功能。为方便数据整合管理工作，数据整合执行节点须能够自动探知，新增加的执行节点能够自动增加到系统中纳入管理 数据整合任务管理：实现对数据整合任务的新增、修改、删除、启用、停止等管理功能 通过系统，能够搭建包含数据整合管理控制和执行节点的数据整合集群，并在系统中能够对数据整合执行节点进行管理，对数据整合任务进行调度 通过系统能够对数据整合执行节点的资源负载情况进行监控。 数据整合源头监控：能够对数据整合涉及的数据库状况进行监测，需提供页面功能截图 能够对数据整合执行节点的资源负载情况进行监控，并能实现节点间的任务调度 数据整合任务监控：能够根据数据资源目录对数据整合任务进行监控，能够及时展现数据整合任务的执行情况, 需提供页面功能截图 数据整合统计分析：能够从数据资源目录及要素构成、地区分布和时间三个维度对数据资源的总量情况和增量情况进行监测。在展示监测结果时，除了借助常规的表格进行呈现之外，还能以图形和图表的形式对监测结果进行显示。 监控日志管理：能够通过系统查看数据整合交换过程的详细日志信息, 需提供页面功能截图 文案大全
实用标准文档
★数据整合交换功能集数据抽取、清洗、转换及装载于一体，支撑各种复杂的数据转换流程、任务调度流程的高效运行，为大块、大批量、异构的数据的整合提供坚实保障，提供不少于1500个ETL任务 支持多节点分布式任务调度及运行管理 支持各种数据抽取模式，如全量同步、增量同步、双向同步等 支撑各种复杂的数据转换流程、任务调度流程的高效运行，为大块、大批量、异构的数据的整合提供坚实保障 支持跨系统平台运行，基于标准的 JDBC、 ODBC 接口，实现对各种主流数据整合交换 数据库系统的支持。如 Oracle、 DB2、SQL Server、 Sybase、 MySQL、Hadoop、Mppdb等并支持多种数据库，提供系统页面截图证明 支持通过内置大量的任务组件和转换组件，完成各种复杂数据集成需求和集成的调度控制。如多源的数据合并、数据的路由、数据行列转换、字典表查询、定时重启、循环调度、流程告警等 提供多个调度机制和异常恢复机制，在异常后，支持自动和手动恢复。异常恢复可以保证恢复的流程从异常点开始重新同步，保证数据的完整性和一致性 支持按批次抽取功能，为每一批次数据提供整体事务的控制，一旦出现异常，可以从数据处理的中间状态进行恢复，并保证数据的最终完整性和一致性 部署要求 ★必须满足不少于10个物理交换主机节点的使用需要 1、采用BWAD多层应用体系结构； 2、使用JAVA语言按J2EE规范进行系统研发； 3、基于SOA（面向服务体系）架构的框架设计 服务接口支持 支持包括基于特定资源或业务需求的应用服务接口和其他系统开放的应用接口，如SIS系统、PGIS平台、人像比对，和基于特定业务需求定制开发的专题应用接口 ★技术要资源服务7 总线系统 求 文案大全
大大数据资源服务平台 - 图文
