泥客网 - 发布最实用的电脑技术,最新鲜的网文!
泥客注册 | 加入收藏 |
泥客广告牌
关键词:调侃 探索 电脑 网络 轻松 精彩 移动 高谈

文章中心

您的当前位置:泥客网 >> 科技 >> 信息管理 >> 浏览文章

一篇读懂数据治理、共享和应用(5)

2019-10-07 17:42:45 文章来源:泥客论坛 字体:


六、六种数据服务

以下为6种比较常用的数据服务方式,其中,1-4是主数据应用的服务,5-6已经超越主数据的概念,可以针对交易数据,指标数据提供数据共享服务。

图9 数据服务6种方式

6.1数据订阅/分发服务

简单来讲,就是传统的主数据订阅分发模式,通常通过ESB来分发;

图10 主数据订阅分发模式

将所有类型的主数据注册到ESB平台上,各目标系统提供接收各类主数据的接口,到ESB平台自主订阅相应的主数据,所有目标系统通过ESB平台订阅规范(参照ESB平台订阅文档)即可完成数据的订阅服务。

6.2主数据查询/申请服务

6.2.1主数据查询服务:

基于页面的查询服务,通常是提供给人来检索的,将系统内部的查询页面或者外部企查查的相关页面封装成服务,供其他系统嵌套调用;

图11 主数据查询服务

数据治理平台面向企业所有终端用户的查询封装成服务,集成到各应用系统,各应用系统可以方便快捷地查询各类主数据,提高查询效率,更好的用户体验。

针对外部数据来源(如:企查查),数据治理平台首先集成企查查相关页面,其他各应用系统再与数据治理平台进行集成,减少对接成本。

6.2.2主数据申请服务:

主数据将所有数据的申请功能封装成服务,供应用系统调用。当业务系统有添加主数据的需求时,不需要登陆主数据平台,只需要正常在业务系统提交新增申请,就可以以任务的形式提交到数据治理平台,数据治理平台处理完成后,以消息的形式反馈至业务系统;此服务部署在API网关上。

图12 主数据申请服务

应用系统将主数据申请功能封装成服务,供各应用系统调用。主数据申请服务注册在ESB数据服务总线平台上,提供主数据申请服务的数据类型如港口、外部单位,具体调用地址各应用系统可联系集成平台。业务系统通过调用申请服务给主数据传递一个申请任务后,由主数据运维人员进行处理,处理完成后以消息形式反馈至业务系统。

6.3数据调用API服务

指定数据类型,通过关键字查询数据详细信息。基于接口层面的点对点的方式的查询服务(模糊查询、精确查询、组合查询),通常时提供给系统接口调用的,业务系统指定关键字来调用;此服务部署在API网关上;

图13 数据调用API服务

6.4公共数据资源池

开放主数据平台基础库只读权限,各应用系统可直接查询调用。公共数据资源池相当于主数据生产库的一个镜像,业务系统可直接访问,只有只读权限。一般用于业务系统需要进行大量数据初始化操作的时候采用这种方式;

图14 公共数据资源池

该资源池数据库与主数据生产库具有实时同步机制,业务系统直接调用主数据系统的主数据,真正确保唯一源头,实现基础数据准确和一致性。具体对接方式一般是业务系统确认采取这种方式后,指明需要哪几类数据,我们再给出访问资源池数据库的连接信息,字段说明等。

6.5数据资源服务

通过相关工具(Sqoop等)将源系统的数据(HR、财务、业务等)抽取到大数据平台,经过整合、清洗、归并后形成各种主题数据,对外提供不同的数据服务(主数据、交易数据、指标数据);数据资源服务是各类数据高级应用,是将源系统数据大集中在数据资源中心,通过大数据技术工具,提供各类数据自助式服务。

6.6数据即时服务

基于ES(ElasticSearch)搜索服务器,面向所有业务系统提供快速查询检索的服务。主要原理是将不同类型的全量主数据同步到ES存储服务器中,然后业务通过ES提供的API接口进行查询,解决了大数据量查询时,查询效率比较低的问题,提供了数据的及时服务。

ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。

结束语

数据治理的目标是提高数据的质量,保证数据的安全性,实现数据资源在各组织机构部门的共享;数据治理工作在提升企业整体价值的同时,也为企业内部的数据共享等具体提供了良好的和可持续的数据基础,推进信息资源的整合、对接和共享,从而提升企业信息化水平,充分发挥信息化作用,发掘数据资产的商业价值。

掌上泥客
进入论坛论坛热帖
非凡