作 者:北京神州泰岳软件股份有限公司 何朝民
市场变化的节奏越来越快,使得企业与竞争对手的市场争夺日趋激烈化,企业的决策层对决策的准确性和及时性的要求越来越迫切。在这种情况下,决策支持系统应运而生。而在电信行业,尤其是信息化建设过程中,经营分析系统是其最主要的决策支持系统。但是,随着经营分析系统建设的日趋深入,ETL(Extract-Transform-Load)的过程更加复杂化,ETL过程中各个任务之间关联的复杂度也不断增加,原有的处理机制已经远远不能满足需要了。因此,运营商需要有一个自动化的作业调度系统来统一管理整个ETL作业,组织各个作业之间的关系,实时监控作业执行情况。
所谓ETL是形成数据仓库中各类数据的过程,即数据抽取、转换、装载的过程。作为BI(BusinessIntelligence)的核心和灵魂,它是负责完成数据从数据源向目标数据仓库转化的过程,能够按照统一的规则集成并提高数据的价值。目前,电信运营商经营分析系统中ETL的复杂度主要表现在接入数据仓库系统的各个数据源平台的多样性、数据源跨地域性、一个作业流内部跨多个平台的系统、作业流内部和作业流之间的依赖关系复杂化、作业执行方式的多样化。以中国联通全国增值业务经营分析系统为例,该系统分析中国联通全国的增值业务的营销情况,数据源涉及到多个业务系统,多个业务网关。这些系统和网关分布在全国各省,涉及到多个平台和厂商的网关设备。
业内专家介绍,为了应对这种趋势,运营商需要一个完善的作业调度系统将整个ETL过程中的每个任务有机地组织和管理起来。这个系统应该具有跨平台性、集中监控、支持多种作业执行方式、可定义多种作业依赖关系、高可视化的GUI操作界面、监控的实时性、屏蔽底层物理设备和网络的复杂性、提供异常通知功能、提供异常处理功能。只有如此,该系统才能减轻IT人员的工作负担,提高工作效率,同时也能即时了解整个作业的执行情况,即时知道其中发生的异常,从而可以快速反应,将由此导致的损失减到最小。中国联通在采用了作业调度系统后,系统维护人员可以通过图形界面方便地定义作业的执行方式,定义作业之间的关系,直观地了解作业处理的情况,及时获得作业处理的异常情况,从而可以快速解决问题,使分析数据能及时被业务人员使用。
据悉,目前市场上的作业调度软件除了一些国外的产品外,国产的作业调度软件也逐渐成熟。如神州泰岳软件股份有限公司自主研发的作业调度软件Ultra-FlowOrganizer,该产品是神州泰岳软件股份有限公司结合多年数据仓库的实施经验,从国内用户的实际需求出发,开发的一套专业的作业调度平台。它能处理复杂的作业依赖关系,可实现实时作业监控,具有良好的人机操作界面,以直观、简单的图形界面显示作业的定义内容、依赖关系和执行情况。神州泰岳的作业调度系统具有跨平台、跨系统的特点,屏蔽了复杂的系统环境,很方便地在一个统一、直观的界面中实现管理和维护。
市场竞争的不断白热化促使企业对信息化建设的需求更加迫切,通信行业也不例外。企业坚持高效合理、有的放矢的信息化建设,必然能够快速提高企业的生产力,满足企业的生产需求和提高市场竞争力的需求。