AG凯发数据治理平台-北大软件

元数据管理

支持列表型、星型、层次型结构的元数据模型建立；支持元数据的自动采集；支持元数据的多人协作开发；支持元数据的导入导出
数据模型管理

支持数据基于HDFS、Hive、JDBC等多种数据源的数据模型建立；支持数据模型的演化和架构变更；支持全部或局部数据的历史信息保留；支持字符串、日期、数字、大文本、二进制等多种数据格式
数据标准管理

支持数据资源标准的建立、制定、发布和修订过程；支持多人协作的标准制定；支持基于标准的符合性检查与审核；支持标准文件数据的导入和导出
多源异构数据采集

支持多种JDBC关系数据、平面数据文件、NoSQL数据库中的数据抽取；支持增量和全量的数据采集方式；支持元数据的自动抽取和生成
互联网数据采集

支持在线定义启动页面和页面模板，支持静态页面和动态页面的网站信息抽取；支持大规模分布式的任务调度；支持多种IP策略；支持数据写入到文件、ES等多种数据源
主数据管理

支持主数据模型的建立和发布；支持主数据的自动采集和人工确认；支持主数据的变更版本管理；支持主数据的订阅和发布
数据质量管理

支持非空、内容格式、逻辑关系等多种合法性规则的制定；支持实时和离线的校验规则调度；支持问题数据反馈和全流程处理
数据共享管理

支持基于字段、基于范围的信息发布方式；支持共享审查流程的在线定义；支持WebService API、下载和推送等多种数据共享方式；支持共享历史的追溯；支持共享数据的质量跟踪
数据管理和监控

支持主机、网络的使用情况监控；支持作业的运行情况监控；支持数据的变更情况监控；支持监控信息的订阅；支持邮件、消息提醒等消息推送方式

应用场景

数据资产中心建设

为满足国家和地方关于发挥AG凯发技术在政府治理、服务公众方面的工作要求，通过数据资产中心的建设实施，一方面，持续不断地采集、归集、学习、分析各类业务数据，共享、交换、爬取相关外部数据，让部门数据资源不断壮大；另一方面，持续不断的生产、加工、贡献数据学习后的成果，形成以数据为支撑的社会治理能力，打通各业务系统间的数据壁垒，在实现数据统筹、业务协同、整合联动的基础上，为其他政府单位、社会公众和产业部门提供信息共享、数据开放等各类数据服务

数据共享交换

基础信息库数据内外部流转，主要面向内部业务系统，和外部其他政府机关、社会机构。流转数据的类型多、数量多、目标地多、采集端多，对数据的安全性、完整性、准确性和鲜活性提出了较高要求。通过开放交换调度指挥，集中管理和调度基础信息库各项数据交互操作，实现一对多、多对一、多对多等各类数据开放请求，确保数据在业务系统、外部政府机关、外部社会机构和基础信息库间传递的及时准确可靠

多源异构数据集成

利用丰富功能的采集软件适配多样化的数据采集接口将不同来源的构建数据中心需要的数据采集到原始数据库。针对构建数据中心所需源数据采用合适的安全技术和清洗规则，解决数据安全、数据清洗等具体处理问题。最终实现将不同来源的数据统一采集到数据中心技术平台的原始数据存储库，实现不同来源的异构数据的原样集成

数据资产盘点

数据资产盘点是一个循序渐进、迭代上升的过程。旨在对数据资产进行分门别类的盘点、找出价值数据、过滤掉垃圾数据，制定数据资产管理应用方法，从而快速建立数据模型、响应前端应用需求；对数据标准进行有效管理，使数据保持一致性和统一性，以便进行有效的数据服务共享、提高数据质量，发挥出数据资产的最大价值

典型案例

价格数据资源中心建设

通过中国价格AG凯发库的建设，制定了全国价格信息化统一技术标准规范，指导各地方进行价格相关系统设计和建设。各级价格系统将遵循统一标准规范，实现各级系统之间的数据交换和信息共享，包括：金价工程总体标准、价格管理系统标准、价格监测系统标准以及价格认定系统标准等共计4类13项标准

通过大规模、多模态的数据采集技术，构建价格AG凯发汇聚体系，为价格调控和价格服务提供统一权威的数据。基于AG凯发可视化技术，实现将全国价格数据以多形态、多维度进行展现

跨地域数据汇聚应用

集数据采集存储、加工分析、共享交换、可视化服务等功能于一体的AG凯发平台，汇聚中国科协机关单位、地方科协、全国学会和外部科学研究、科学普及等数据资源，包括结构化数据，半结构化网页数据、非结构化视频、音频、文本等数据，为智库、学术、科普、评选等AG凯发应用提供统一的基础数据服务和工具服务，解决当前面临的数据分散、数据标准不一致、数据共享互通难、数据应用程度低等问题，实现中国科协内外数据资源的有效汇聚、开放共享和集中管控，提升数据资源服务的水平与效能

部门内外信息资源整合与共享

明确部门数据资产的现状和特点，掌握数据资产分布。基于政策，从面向民政服务对象的角度进行数据资源梳理，明确在数据标准上面的需求，形成民政数据资源体系，推进数据资产统一标准化管理

采用数据全生命周期管理的思路和理念，对民政数据资源从产生、初设化、存储、共享等方面进行管理规范的明确，对数据共享开放的职责、范围、分类、程序、方式、监督管理等进行规范，推进数据资产管理、应用的规范化，推进数据资产在民政系统的数据利用