preduce两项创新后的又一项创新,其在设计用来针对海量数据处理情形下的管理结构型数据方面具有巨大的优势。
这种海量数据可以定义为在云计算平台中数千台普通服务器上pb级的数据。
pregel在概念模型上遵循bsp模型。
整个计算过程由若干顺序运行的超级步组成,系统从一个“超级步”迈向下一个“超级步”,直到达到算法的终止条件。
dremel是一种分析信息的方式,它可以跨越数千台服务器运行,允许“查询”大量的数据,如web文档集合或数字图书馆,甚至是数以百万计的垃圾信息的数据描述。
这类似于使用结构化查询语言分析传统关系数据库,这种方式在过去几十年被广泛使用在世界各地。
使用dremel就好比你拥有类似sql的语言,并可以无需任何编程的情况下只需将请求输入命令行中就可以很容易的制定即席查询和重复查询”。
区别在于dremel可以在极快的速度处理网络规模的海量数据。据谷歌提交的文件显示你可以在几秒的时间处理pb级的数据查询。
从谷歌三家马车看得出来,他们对云计算和大数据的应用主要在搜索上面。
早在2006年,谷歌在推出了“google 101计划”的同时,也正式提出了“云”的概念与理论,随后亚马逊、微软、ibm等公司才陆续宣布了自己的“云计划”。
但是,第一个将之落实到地的却是江燕公司,随后才是亚马逊,反观提出者谷歌一直到12年6月末,才推出了自己的云计算服务:google cpute engine。
“既然我们已经在云计算和大数据领域超越了谷歌,获得他们的三项技术还有意义吗?”庄丁宁毕竟不是技术人员,所以对这个有点疑问。
“当然有意义,虽然谷歌在市场应用方面不如我们,但技术底蕴却不输于我们。严格来说是他们也有技术优势,我们如果得到这三驾马车,吸收其优势,我们的微博云可以在短时间内更进一步。”潘星解释道。