云计算技术解决大数据问题

EMC数据计算产品部大中华区总经理刘伟光: 大数据时代，IT企业仅仅为运营商提供分析平台，分析工具是不够的。如何利用这些平台，系统，以及数据实现科学建模，同样是提升运营效率的关键所在。

2012年，可以看到国内三大运营商都在衍生出一个新的项目类型，即客户上网行为分析。它将是三大运营商继信令分析和集中化精分平台后又一典型的大数据平台。这正是由3G业务催化所致，它表明传统数据库技术已无法满足运营商对大数据充分利用的需求。

如何利用工业标准的开放的普通硬件和系统平台构建“最具经济效益和最具扩展性”的高效大数据平台；如何尽量实现计算移动，而不是数据移动，这离不开优秀的并行算法，它是云计算的核心。刘伟光认为，云计算是解决上述大数据问题重要手段。

传统数据库平台无法满足当前用户迫切需求主要在三大方面。首先，新业务的涌现，导致数据的快速增长。信令数据，互联网以及移动互联网数据其规模增幅超乎想象。其次，数据的价值还与数据处理周期成正比关系，即数据处理速度越快越及时，其价值及所发挥的效能越大。如某客户到达商场，运营商可通过信令分析实现位置感知，并根据客户历史消费记录，定向而及时地向该客户推送商场打折促销活动。第三，除了分析传统结构化数据外，随着新增值业务拓展，运营商对实现跨结构化、半结构化及非结构化数据进行高效分析诉求强烈，尤其是移动互联网数据面对数据源丰富、数据类型多样化期望作快速收集处理和分析等。

由此，刘伟达总结新型数据库应具备四大主要特点。首先应采用支持大规模并行处理的分布式架构。其次，应该使用基于符合工业标准的开放硬件和系统平台，保证成本可控。第三，随着开源技术不断的成熟，创新速度快，新型数据库平台应易于与新的开源技术相融合。 第四，新的数据库平台应可实现与Hadoop平台的无缝集成，从而实现跨结构化、半结构化及非结构化海量数据的混合分析能力。

“目前我们已经看到中国三个电信运营商在业务支撑领域，网管IT支撑领域包括增值业务领域已随着市场需求诞生了很多新的大数据实时分析的项目，我们相信未来两到三年市场将成倍增长，其数量难以预期。Greenplum的面向云计算数据库云平台正是能够帮助运营商实现大数据-高价值的利器。”刘伟光说。

Greenplum新近推出的Chrous协作分析平台软件，就是基于WEB 2.0技术，依托Greenplum Database和Greenplum Hadoop大数据平台，帮助企业用户实现跨部门，跨合作伙伴实现大数据协作分析共享。企业内外的数据科学家可以基于这个平台，利用各种分析工具实现自助，协作式的数据分析模式，让更多人参与到数据分析这个领域，也能让数据产生它自身的魔力。 这一新兴分析模式已经引起了海内外众多运营商的兴趣。