欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  互联网

Teradata专家:超越Hadoop 释放大数据潜能

程序员文章站 2022-09-09 23:12:13
针对企业的大数据应用的一些疑难和苦恼,Teradata Aster联合总裁Mayank Bawa博士近日访华,与IT专家网进行了有价值的分享。Mayank Bawa表示,通过Teradata天睿公司统...

针对企业的大数据应用的一些疑难和苦恼,Teradata Aster联合总裁Mayank Bawa博士近日访华,与IT专家网进行了有价值的分享。Mayank Bawa表示,通过Teradata天睿公司统一数据架构(Teradata Unified Data Architecture,UDA)下的Aster大数据分析平台,可以最大限度地帮助企业释放不断增长的大数据中蕴藏的潜能。

如果时下关于大数据的热切讨论使您有纸上谈兵之感,那么Google通过对搜索行为的记录和分析优化广告排序,轻松实现流量到现金流的转化,这个事实足以让您信服。没错,Google获得的这种“先知”的能力,就是大数据价值的体现——我们不说未卜先知,因为Google的“占卜”工具,其实就是大数据。

当云计算、物联网、移动互联以及社交网络深刻影响中国企业的信息化进程,这样的“占卜”不再是Google的专利,如何找到一个大数据工具,通过汲取目标群体的相关数据中的价值,来规划自己的前景,已变成每一个企业的必修课。Teradata Aster正是一个优秀的大数据分析工具的代表。近日访华的Teradata Aster联合总裁Mayank Bawa博士表示,Teradata Aster基于对大数据分析市场的洞察以及对企业面临的形势和需求的深刻理解创建的SQL-MapReduce等独门工具,可以有效地分析来自web、传感器、SNS等所有来源的结构化的和非结构化的数据,成为客户释放不断增长的大数据中蕴藏的潜能的优秀解决方案。

关注大数据分析的企业一定都听说过Teradata Aster,但可能不够了解Mayank Bawa。事实上这是一位非常资深的数据研究专家,曾经从事Google、Yahoo!的数据业务研究工作,Aster Data就是他参与创立的。早在2005年,大数据的概念远未成形,Mayank Bawa就在项目研究中敏锐地发现MapReduce在解决大数据问题方面的优势及其市场空间,于是创办了该公司,并不断研发出许多拥有专利的大数据分析产品。

在2011年Aster Data被Teradata天睿公司并购之后,Mayank Bawa仍然领导Aster创新中心的研发及客户支持部门,致力于创建和支持Aster Data的产品线,为客户提供数据分析解决方案产品。

我们知道,大数据只有通过分析,才能实现它的商业价值。Hadoop是当前业界热门的大数据处理架构,但Hadoop具有一些自己的局限,作为挖掘平台还是存在效率方面的不足。而Mayank Bawa表示,随着越来越多的软件的加入,Aster平台会远远领先于Hadoop,能够做目前Hadoop不能提供的功能。

目前,Aster提供了SQL、MapReduce、统计、图形、路径、时间和地理查询等工具,通过这些结合在一起,提供更高的分析能力和效率,形成具备可快速迭代开发、存储所有数据、进行各种分析和数据分析可大众化等四大特色的解决方案,契合大数据的有效处理的特征,能够满足包括数据科学家、分析师、管理人员和业务人士等不同群体的各层次需求,成为企业进行大数据分析的有力工具。

当然,大数据的分析并不是一个独立存在的环节,它与大数据的收集、整理等工作紧密相连,企业需要一个完善的数据源,才能得出更为准确的结果。同时,这个过程越简单,对企业的管理和分析越有利。这就不能不提Teradata天睿公司首创的Teradata统一数据架构了。UDA集多种服务平台、应用程序和工具为一体,企业可以利用UDA工具和实用程序来通过工作负载专用引擎统一管理所有的数据。Teradata Aster正是UDA架构中的一个重要的部分。

Teradata专家:超越Hadoop 释放大数据潜能

图:Teradata统一数据架构 (Unified Data Architecture, UDA)

从所展示的demo可以清晰看到UDA的三大主要功能:Hadoop是存储,Aster是探索和分析,Teradata是整合。Mayank Bawa表示,Teradata Aster支持广泛的Hadoop版本,其中以Apache、Hortonworks的版本支持最好,其他版本则可能需要一些优化。

统一数据架构之下的存储、分析与整合相互结合,这才是实现大数据价值的一个完整的闭环(当然,用户可以根据自己的实际需求来部署和逐步扩展)。这也可以解释为什么Aster Data并未选择独立发展,而是加入了Teradata天睿公司大家族,并在整合之后获得了更为良好的发展态势,在过去18个月实现了大幅增长,成为大数据领域汇总价值最高的公司,虎踞龙盘于金融、电信、零售、航空和医疗等多个行业。

中国市场是Teradata Aster的最重要市场之一,Mayank Bawa表示,公司在北京设立研发团队,吸引中国大学的博士生和硕士生加入核心研发工作。他还透露,Teradata Aster已经研发出了支持包括繁简体中文在内的文本分析工具。

而为打造出更加符合用户需求的解决方案,Teradata Aster也表现出了更为开放的姿态。Mayank Bawa表示,在Aster Data核心开发团队之外,客户本身开发者、第三方伙伴开发者,客户顾问团队等都会加入开发,共同构建一个良性的生态系统。