欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  互联网

如何解决大数据云内存储难取问题

程序员文章站 2022-06-28 10:30:32
    云计算是个宝,它能够存储海量数据,不过,云存储服务中,数据的移动(存入及取回)还存在一定困难。Aspera公司CEO Michelle Munson称,按云计...

    云计算是个宝,它能够存储海量数据,不过,云存储服务中,数据的移动(存入及取回)还存在一定困难。Aspera公司CEO Michelle Munson称,按云计算技术的速度、方法,应该能够提供新的数据使用方式。


    若说云计算擅长一事,那就是存储海量数据,使企业能以不同方式使用数据——然而,随着数据不断爆炸,如何在云服务内存储海量数据成了老大难。


    GigaOM网站举办的欧洲结构大会上, Aspera 的CEO兼联合创始人Michelle Munson对与会者称,Aspera公司推出的新技术,必须能够弥补传统网络传输协议,如TCP(传输控制协议)等的不足之处,并且能够轻松转移“大数据”,有效建立各类新商机。


    Munson称,海量数据产生移动难题,这一状况在影视产业最为明显——像Netflix这样的公司 ,每月处理成百上千以TB计的数据,这些数据由在线电影以及电视节目所产生,并且,公司必须将数据转码为不同格式再传到主网络上,供终端用户使用。公司计划,将数据外包至Amazon S3,并打算使用外包转码服务,但是很难找到轻易移动any way of moving 所有数据的方法,无法将它们从实体硬盘移出,因此,该公司联系了Aspera。


    Munson还说到,Aspera公司的技术有2大功能:它能够在TCP之上再添一层,使视频及其它内容能更快传至云内,同时,它还能更快捷地传送数据,使Amazon这样的云供应商能轻易存取,整合至数据库。


    她表示,步骤简化后,企业能够开发全新的数据使用方法,例如,生物学研究行业产生的数据,几乎比影视业多出一个数量级——排定单个人体基因组,就能产生PB级别的数据,在这之前,这些数据几乎都囤积在研究实验室内。有了高速传输技术,数据共享将变得更容易。它或将开辟先河,创立前所未有的合作项目。