中盈优创电信数据仓库解决方案

数据库 数据仓库
每一家公司都有自己的数据。并且,许多公司在计算机系统中储存有大量的数据,记录着企业购买、销售、生产过程中的大量信息和客户的信息。通常这些数据都储存在许多不同的地方。使用数据仓库之后,企业将所有收集来的信息存放在一个唯一的地方——数据仓库。仓库中的数据按照一定的方式组织,从而使得信息容易存取并且有使用价值。本文讲述了数据仓库在中盈优创电信中应用的案例。

市场需求

在中国电信发展上升的过程中,中国电信面临的竞争环境也在加剧,具体表现在:固话或移动内部的同质竞争、固化与移动之间的异质竞争、IP业务导致的长途分流和收入下降、由于竞争导致的资费大战 、管制放松特别是加入WTO以后新的运营商的加入、中国移动和中国联通经营分析一期实施完毕造成的中国电信获得市场决策信息的不对等。在这种情况下,电信企业若想获得生存和市场领先优势,必须在服务品质、经营成本、市场管理等各方面保持竞争优势。

然而,目前中国电信的数据还分布在各个地方,如97系统、计费帐务系统、客服系统、计费系统及大客户管理系统等多个异构生产系统当中,形成了一个个“数据孤岛”。由于数据分散在不同地区,不同系统,不同操作环境中,造成业务用户很难提供一致,可靠和及时的信息。因此要求针对中国电信业务和系统状况,结合企业各层面的需求,最大限度地整合电信企业的各类历史数据和交易数据,为企业提供一个统一的数据支撑平台,并提供相应的统计分析报表、多维分析(OLAP)、数据挖掘(DATAMINING)等应用功能,从而能够更有效地满足企业的战略决策支持需求、业务操作需要及技术需求,同时也为企业进一步建立有效的CRM系统提供坚实的数据基础。

根据电总ITSP 规划中关于DW和ODS基础平台建设部分,2004 年为试点建设年,主要为浙江电信和上海电信;2005年为规模推广年,中国电信21个省公司和北方九省基本都要启动数据仓库建设;2006年为应用提升和效益体现年,重点加强数据仓库对业务的支撑功能,开展业务咨询分析。以一个省公司投入3000万保守计算,中国电信总共投入大概在7亿元左右。因此形成了对专业化的数据仓库解决方案的巨大市场需求。

目标市场

中盈优创电信数据仓库解决方案以中国电信集团公司及其所属的各省/直辖市电信公司,国内其他电信运营商为主要目标市场。

解决方案概述

中盈优创电信数据仓库解决方案针对中国电信业务和系统状况,结合企业各层面的需求,在基于英特尔?安腾?2工业标准处理器的HP Integrity 服务器平台上规划设计了一套完整、专业的数据仓库解决方案,具有统一数据模型的保证、层次性和可实施性、涵盖企业运营的各个方面、从企业后台业务系统到前台应用形成完整的信息链和价值链。中盈优创的工程师依据信息应用、信息发掘和信息增值的规律,总结出了电信企业完整的数据仓库应用视图。

中盈优创电信数据仓库系统以现有的业务系统,如:客户服务支持、大客户管理、计费帐务、综合结算、客服10000号、财务管理、网络资源管理、智能网平台、宽窄带认证系统、公话分析系统、增值业务等现有所有系统为数据源,辅以其它数据源,采用省集中模式,实行数据统一存储。目前电信省公司已经建成延伸至县、比较完善的DCN网络,系统之间均通过DCN进行数据交互,省公司不同部门及各地市分公司也将通过DCN网络访问数据仓库,根据不同权限取得各自相关的内容,开展业务应用。

#p#

具体如图1 所示:

中盈优创数据仓库解决方案具有如下的主要功能和设计特色:

● 数据仓库建设规划

从建设目标、业务现状与预测、基础平台、业务需求、投资计划与经济分析等各方面对电信数据仓库项目进行整体规划,确保数据仓库建设目标客观、实施可行、系统前瞻、应用实用、投资经济。

● 完整的数据仓库模型

这是整个解决方案的基础和核心,以电信企业数据模型CTG-EDM V1.0为基础,引入“细节数据存储”和“汇总信息存储”的概念,包含“参与人”、“产品实例”、“事件”、“地域”、“帐务”、“网络”、“市场营销”、“服务质量”等八个主题,涵盖了电信业务运营的各个方面。

● ETL 架构与信息整合

这是数据仓库实施成功的关键,采用“设备与功能分布、统一集中管理、任务平衡负载”的ETL 架构,确保ETL 过程的可靠、高效、安全、简便;对多本地网多业务系统采用“客户、用户、产品”等多种层次的信息规范和整合流程,并采用数据质量反馈机制保证数据的正确性和完整性。

● 全面分析应用

这是解决方案给客户带来受益的关键,采用业界先进的“基于企业职能和角色的对应关系”的应用设计方法,实现涵盖企业“客户、业务、运营”等职能和“操作、管理、决策”等角色的基本报表、业务多维分析、数据挖掘高级应用、分析结果与操作应用互动的增值模块等全面的分析应用,建立企业完整的数据仓库应用视图。

● 业务分析与咨询功能

在整个数据仓库解决方案中,中盈优创还可以帮助客户进行业务和流程诊断、高级应用规划和应用实施推进策略制订、进行营销策划、套餐评估、忠诚度管理等分析咨询与数据挖掘服务,帮助客户逐步建立分析型结果和操作型应用互动的增值应用系统。

● 创新的数据仓库实施方法论

这是整个解决方案实施的制度保障,中盈优创以“规划、实施、维护”的三段方法论,在每一阶段均细化为若干流程,通过对每个阶段与流程交付交接的有效管理、项目进度的有效控制、项目架构的精心组织、及时的培训和知识转移,确保解决方案为客户带来真正受益。

#p#

组成部件

中盈优创数据仓库解决方案的物理体系架构如图2所示:

中盈优创数据仓库解决方案由如下的子系统组成:

● 数据加载系统(ETL)

数据加载系统由高性能服务器主机和相应的磁盘阵列存储系统、以及一组ETL 程序组成,其主要功能是将业务系统中各种相关业务数据源,按照中央数据仓库中预先规划和设计好的物理数据模型处理后,高速地加载到中央数据仓库中。可以采用各种开放的服务器平台作为ETL服务器主机,与各种高效ETL工具组建成经营分析决策支持系统的ETL 系统。

● 中央经营分析决策支持系统

中央经营分析决策支持系统由数据仓库服务器(支持海量数据处理,扩容能力好且易于管理),企业存储磁盘阵列系统、超大型关系型数据库管理系统,数据仓库管理工作站(负责经营分析决策支持系统软、硬件的监督和管理),大容量机械手自动磁带库系统、以及各种相关的软硬件设备组成。主要功能是存储和管理从业务系统整合的业务数据,产生各种复杂的业务报表,支持随机查询(Ad-Hoc)、主题多维分析(OLAP)、数据挖掘专题分析等应用。

● 多维分析(OLAP)系统

多维分析(OLAP)系统由高性能服务器和多维分析软件组成,其主要功能是将中央数据仓库中的数据,按照预先设定的主题分析需求进行组织和整理,产生多维分析立方体,供业务人员作各种主题分析之用。多维分析(OLAP)系统的服务器可以采用各种适当的服务器。

● 数据挖掘系统

数据挖掘系统由高性能服务器和数据挖掘软件组成,其主要功能是实现各种需要深入分析的专题,组织存储在中央数据仓库中的各种相关详细数据,用各种适当的分析算法进行统计分析,找出隐藏在数据背后的商业规律和模式,并将分析结果展现给业务人员使用。数据挖掘系统的服务器可以采用适当的服务器。

● 客户端系统

客户端系统可以沿用目前省级电信业务人员使用的各种终端设备,例如PC 机、电脑笔记本等,上面安装各种所需的客户端应用软件,例如WebBrower、多维分析(OLAP)软件、报表工具软件、即席查询软件等,对多维分析(OLAP)立方体和中央数据仓库中的信息进行访问和查询。

#p#

建议的配置

中盈优创数据仓库解决方案的硬件系统配置主要包括数据库服务器和数据仓库引擎。对它们的配置要求分别是:

● 数据库服务器

支持多机群集系统(Cluster)或者海量并行处理系统(MPP);主机系统应采用UNIX 操作系统,并支持中文内码,符合我国关于中文字符集定义的有关国家标准;具有高可扩展性:具有冗余的电源安全保障措施;支持硬件热拔插、系统在线升级扩容。

● 数据仓库引擎服务器

数据库系统具有良好的扩展能力; 具有支持并行处理所需的技术;具有支持海量数据复杂处理的能力,不仅能够提供固定报表和动态查询,也能够支持数据挖掘等复杂应用;具有支持批量数据加载和近实时数据加载的能力;数据库管理操作方便,维护成本低;支持容错能力、错误恢复能力、错误记录及预警能力; 具有支持数据分区所需的技术。

中盈优创数据仓库解决方案的软件系统采用UNIX操作系统(如HP-UX 11i v2 操作系统)和Oracle 9i 数据库。针对用户的规模和发展需求,建议采用如下的的配置:

● 对并发用户数在50个以下的小型用户:建议采用HP Integrity系列入门级服务器(如rx2600, rx2620),配置500GB 的磁盘阵列。

● 对并发用户数在50-100 个之间的中型用户:建议采用HP Integrity 系列入门级服务器或中档服务器(如rx2620, rx4640等),配置500GB-1TB 的磁盘阵列。

● 对并发用户数在100-200 个之间的大型用户:建议采用HP Integrity系列更高档次的服务器或者多台服务器构成的HP Surviceguard 集群系统,配置1-20 TB 的磁盘阵列。

以上的HP Integrity 系列服务器基于英特尔? 安腾?2工业标准64 位服务器,业界领先的HP-UX 11i v2 操作系统和Oracle 9i 数据库软件。

客户价值

中盈优创数据仓库解决方案在英特尔? 安腾?2 处理器的HP Integrity 服务器平台上、基于全球领先HP-UX操作系统,建立新一代电信数据仓库解决方案。通过实施数据仓库,可以利用数据仓库帮助管理人员和业务人员更好的分析和把握业务,为其经营决策提供定量的支撑,并通过统计分析、多维分析、数据挖掘等应用,为企业提供经营分析和决策服务,最终提高企业的竞争力和增加企业的效益,包括:

● 基于惠普和英特尔 64 位工业标准平台Integrity 动能服务器是惠普基于英特尔64位工业标准安腾处理器、面向企业应用的战略产品。2004 年底惠普决定在今后3 年内增加30 亿美元投资、推动Integrity在技术创新、产品开发、应用开发和市场竞争等方面取得了巨大进展。2005 年,惠普在Integrity 平台上进一步增强了多操作系统下虚拟化功能、实现了集服务器和存储于一体的虚拟资源管理;惠普推出了基于英特尔?安腾?2的NonStop 高可用性服务器和BL 60p 刀片服务器进一步拓展了Integrity 系列;通过与广大ISV 合作,Integrity 平台上应用软件数量已经超过5700个;2004年,HP Integrity动能服务器的营业额达到了10亿美元,2005年又进一步增长113%。作为通过“飞天计划”在这一平台上开发的解决方案,不仅能赢得高性能、支持多操作系统、高性价比、高可用性、高可管理性等优势,而且能获得惠普的全面技术支持,具有无限的发展前景。

● 提供全面的功能、统一的平台

通过对支撑企业运营的各种系统(包括计费、营业、帐务、客服等业务支撑系统以及财务、工程管理等MIS系统)中数据的有效整合,对这些数据进行抽取、清洗、转换,并按企业信息模型的要求,装载到数据仓库系统中,为企业提供一个统一的数据支撑平台。

● 领先的决策支持功能

基于所构建的数据仓库,通过统计报表、多维分析等功能,使企业各级管理者和经营者能以及时的方式获取所需的数据,然后对其做出分析,以使这些数据转化为能支持经营决策的有效的信息,以对业务战略、策略和运作产生积极的正面影响。

● 取得显著的经济效益

基于所构建的数据仓库,通过数据挖掘技术建立数据模型,来实现诸如客户细分、客户行为预测、客户价值评估、产品交叉销售等应用功能。解决诸如客户行为分析、利润分析、预防欺诈等方面的问题,从而能以更好的服务留住有利润的客户,提高通话量和利用率;用比竞争者更低的成本争取到新客户,扩大市场份额;放弃无利润和信用差的客户,降低营运风险和成本。

【编辑推荐】

  1. Sybase数据仓库大鹏证券应用案例
  2. 嵌入式数据库的现状和未来
  3. ETL过程原理和数据仓库建设的优化
  4. 探求数据仓库关键环节ETL的本质
  5. OLTP与数据仓库之间的区别
责任编辑:杨鹏飞 来源: 搜讯
相关推荐

2009-01-19 16:15:05

缓慢变化维数据仓库解决方案

2011-01-21 10:10:27

2013-03-20 16:23:53

数据清洗

2009-07-17 09:17:41

IT运维SiteView游龙科技

2022-09-02 09:00:00

数据仓库架构数据源

2023-08-14 16:56:53

2016-08-15 12:57:01

数据仓库索引架构维度索引

2009-01-20 14:22:49

ODS数据仓库教程

2021-03-31 10:16:00

架构运维技术

2016-03-18 11:00:37

企业网D1Net

2017-07-28 10:27:06

互联网

2021-09-01 10:03:44

数据仓库云数据仓库数据库

2022-06-24 09:38:43

数据库大数据

2015-03-13 09:05:26

Teradata数据仓库数据管理

2009-01-19 15:52:20

OracleOSFA数据仓库

2022-10-12 15:27:19

物联网智慧仓储室内跟踪

2022-05-11 08:00:00

Lakehouse存储数据湖

2023-10-08 16:26:23

数据仓库

2010-07-06 16:50:57

2009-05-12 15:54:31

点赞
收藏

51CTO技术栈公众号