高校公共数据平台软件升级。
公共数据中心
公共数据平台引入了数据治理的概念,通过数据治理的标准流程,帮助用户建立合理,稳定,高效的治理流程,为学校搭建统一的数据交换和共享平台,实现各个离散业务系统之间的实时交互与共享。
系统简介
公共数据平台是本着“突破信息孤岛,提升数据质量,实时数据交互,挖掘数据价值”的设计理念,为学校搭建统一的数据交换和共享平台,实现各个离散业务系统之间的实时交互与共享。
产品针对高校多样的数据源头,以安全,复杂,多变的同步策略,来提供稳定的异构数据源支撑,双机热备的ELT集成架构的同步机制。同时为了学校能更好的实现数据集成和查询,公共数据平台采用了SOA的架构,为各个业务系统提供数据服务,使针对不同集成需求的业务系统有不同的集成方式,增加系统服务的实时性的同时,不增加数据交互的负担。还可以在数据服务上进行二次封装,通过服务进行各个业务系统之间的串联。公共数据平台引入了数据治理的概念,通过数据治理的标准流程,帮助用户建立合理,稳定,高效的治理流程,使用户从使用零散数据变为使用统一主数据,从具有很少或没有组织和流程治理到全校范围内的综合数据治理,从尝试处理主数据混乱状况到主数据井井有条的一个过程。
系统结构
设计思路
达科经过多年在数据管理方面的研究和实践,结合当前先进技术和管理理念,研发了一整套高校公共数据平台的解决方案,其中内容主要包括三个部分:
主数据管理平台
主数据管理平台主要是针对集成中心库中的数据模型进行管理维护,对于主数据平台暴露的服务接口进行管理和监控,并且对于集成中心库的数据提供数据备份和恢复策略。
数据中心管家
数据中心管家主要是对于主数据平台和离散业务系统之间的交互进行监控和管理的平台,是让用户实时的了解主数据平台与其它系统间的ETL过程的运行情况。
数据审计平台
数据审计平台是一套基于ETL研发的数据清洗和质量管理的平台,目标是通过运行质量任务,发现数据问题,以生成的数据质量报告为依据,建立认为的数据质量管理流程,不断优化,通过不断发现问题,不断解决问题,完善数据治理流程,逐步提高校园的数据质量,提升主数据平台中数据的数据质量,使得公共数据平台下方的数据能够真正成为可信赖的数据。
功能优势
先进理念
基于IBM主数据管理的理念,基于数据服务的设计理念。
数据服务架构
基于SOA的数据服务架构;基于图形化的质量任务创建。
数据审计
用户可定义数据质量审计则对业务数据进行审计并生成质量报告。
标准化
文件存储、文本、数据库、操作系统采用UTF-8字符集。
技术优势
可集成性
支持多种异构数据源的集成,支持包括关系型数据库,XML,TEXT文本等;基于数据,事件及接口服务的多种集成方式。
高效率性
采用E-LT集成架构,利用目标的RDBMS引擎执行转换,避免星型数据集成架构成为数字化校园的性能瓶颈。
可视化性
提供统一的可视化开发工具,图形化的设计和定义抽取,转换和加载流程,自动代码生成大大降低了集成开发人员的学习难度和实施难度;可视化的质量任务设计,拖拽式的操作,使数据质量的评估和检测简单化周期化。
可管理性
实现了信息标准管理的可视化管理,通过web平台,帮助高校轻松实现对标准的制定、维护、理解、分享、集成,能够让学校用户快速了解学校的参照标准和执行标准,并且为后上的系统提供标准的数据字典;实现集成过程和数据交互过程的集中监控与管理,能够实时了解集成项目,集成状态,帮助用户快速定位问题,加快问题解决速率,逐步提升数据质量。
灵活性
借助复杂的数据集成和数据质量转换逻辑,实现数据质量规则的开发和测试;灵活的数据模型配置,良好的模型配置扩展性,缩短集成实施周期,配合达科门户平台构建用户想要的数据服务。
安全性
对集成流程提供数据完整性控制,保证数据的一致性和正确性。