跨行业规模化应用,先进数通IMOIA.SMS完善数据调度机制

来源:中华网财经  
2015/1/14 14:40:39
先进数通拥有完全具备自主知识产权的数据管理产品家族IMOIA,并发布了新一代监控调度平台IMOIA.SMS,全面支持IBM Datastage、Informatica等ETL工具,为数据处理业务提供调度、管理、监控等全方位的专业支持,确保数据处理业务安全、稳定、高效地运行,帮助用户稳步进入大数据时代。

本文关键字: 先进数通 IMOIA.SMS IBM 大数据

通过iMOIA.SMS产品应用实施,系统目前已管理作业达到1200余个,实现了即时调度数据处理任务实现业务系统与财务系统间的订单信息传递,保证业务的及时性和连续性,并清晰展现出数据传输作业间的关系,有效梳理出数据传输平台的数据链路。

高效利用集中统一调度平台

问题同样出现在使用DataStage作为其ETL工具的友邦保险,友邦保险之前的数据交换主要集中在业务系统到数据中心的数据加工处理,以及业务系统与BI系统间的数据传输和交换。但随着ETL作业所涉及的业务种类的增加,ETL作业量开始迅速增长,系统间的数据交换关系也越来越复杂。首先,ETL作业较多,统一管理困难,其次,ETL服务器需要集中为统一的资源池,共同负载ETL作业,ETL作业需要动态均衡地分配到各ETL服务器上,服务器的资源管理存在一定难度,此外还需要专门针对DataStage作业进行调度,应用接口复杂。

为应对复杂的ETL作业调度场景,iMOIA.SMS调度采用事件驱动机制,该机制是在调度过程中进行决策的一种策略,即跟随当前时间点上出现的事件,调动可用资源,执行相关任务。在项目中iMOIA.SMS系统建立了ETL作业的调度控制核心、数据中心平台的管理中心、资源控制中心、安全保障中心。

随着iMOIA.SMS引入实现其多台ETL服务器资源的整合,为其3000多的ETL作业统一分配ETL服务器的计算资源,实现资源的动态负载均衡和高可用。

数据调度促进大数据应用

先进数通公司是国内最重要的IT集成与实施厂商之一,多年来致力于为中国企业的信息化建设提供专业服务。多年来一直关注ODS/DW/BI领域,目前先进数通iMOIA.SMS调度监控管理系统在国内银行、证券、保险、制造等行业均有大量的用户,受到了行业用户的认可。

在零售行业大数据领域,先进数通参与李宁体育ODS ETL数据调度统一管理的建设工作,通过将先进数通iMOIA.SMS调度监控管理系统部署在李宁体育ODS ETL等系统之上,实现了对零售系统、库存系统的每日数据抽取控制,以及对ETL服务器进行资源整合,实现资源的充分应用。

在证券行业大数据领域,先进数通参与华泰证券收购联合证券后,数据中心系统已实现各业务系统间的信息整合建设工作。华泰证券使用MOIA调度平台以实现其多台ETL服务器资源的整合,为其2000多的ETL作业统一分配ETL服务器的计算资源,实现资源的动态负载均衡和高可用。

在银行业大数据领域,先进数通参与平安银行企业级的ETL平台建设工作,平安银行的ETL平台,需要一个功能全面、高扩展性、高稳定性的企业级调度平台,从2008年至今平安银行的MOIA系统中已经部署了55000个作业,成为整个数据线建设最为重要的运行平台。通过MOIA产品的实施,平安银行取得如下效果;稳定、扩展性高的复杂集群管理;快捷、简便的调度开发;统一的作业调度监控。

随着中国各行业信息化水平不断攀升,越来越多的用户开始面临着大量的、复杂的数据调度难题。而先进数通的行业大数据调度则抓住了这个切口,为以上这些用户的大数据价值挖掘提供了产品和技术的支持。

共2页: [1]2 下一页
责编:李玉琴
vsharing微信扫一扫实时了解行业动态
portalart微信扫一扫分享本文给好友

著作权声明:畅享网文章著作权分属畅享网、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。
畅享
首页
返回
顶部
×
    信息化规划
    IT总包
    供应商选型
    IT监理
    开发维护外包
    评估维权
客服电话
400-698-9918