大数据之难:如何在云服务内存储海量数据?
4/13/2013 6:10:51 PM
云计算是个宝,它能够存储海量数据,不过,云存储服务中,数据的移动(存入及取回)还存在一定困难。Aspera公司CEO Michelle Munson称,按云计算技术的速度、方法,应该能够提供新的数据使用方式。
若说云计算擅长一事,那就是存储海量数据,使企业能以不同方式使用数据——然而,随着数据不断爆炸,如何在云服务内存储海量数据成了老大难。
GigaOM网站举办的欧洲结构大会上, Aspera 的CEO兼联合创始人Michelle Munson对与会者称,Aspera公司推出的新技术,必须能够弥补传统网络传输协议,如TCP(传输控制协议)等的不足之处,并且能够轻松转移“大数据”,有效建立各类新商机。
Munson称,海量数据产生移动难题,这一状况在影视产业最为明显——像Netflix这样的公司 ,每月处理成百上千以TB计的数据,这些数据由在线电影以及电视节目所产生,并且,公司必须将数据转码为不同格式再传到主网络上,供终端用户使用。公司计划,将数据外包至Amazon S3,并打算使用外包转码服务,但是很难找到轻易移动any way of moving 所有数据的方法,无法将它们从实体硬盘移出,因此,该公司联系了Aspera。
Munson还说到,Aspera公司的技术有2大功能:
1、它能够在TCP之上再添一层,使视频及其它内容能更快传至云内。
2、它还能更快捷地传送数据,使Amazon这样的云供应商能轻易存取,整合至数据库。
她表示,步骤简化后,企业能够开发全新的数据使用方法,例如,生物学研究行业产生的数据,几乎比影视业多出一个数量级——排定单个人体基因组,就能产生PB级别的数据,在这之前,这些数据几乎都囤积在研究实验室内。有了高速传输技术,数据共享将变得更容易。它或将开辟先河,创立前所未有的合作项目。