重生之清爽人生

第973章 谷歌三驾马车

因为他们对搜索技术不那么了解,所以当场找到了公司做搜索的工程师过来。三名工程师一起研究这么清单,虽然清单上面只有技术名称和简介,但他们看完后依旧很兴奋。

在江燕公司,搜索功能并不是那么受重视,没有专门的搜索产品,这三名工程师也不是专门做搜索的,搜索只是他们的兼职任务而已。

即便如此,他们也能意识到这份清单上面的技术价值,这绝对是可以颠覆国内搜索领域的先进技术,可以省去大量研发资金和时间。

“谷歌的老三驾马车GFS、MapReduce和BigTable,新三驾马车affeine、Pregel和Dremel。前者是云计算和大数据的奠基石,后者更是近两年引领发展潮流的技术。”潘星说道。

庄丁宁等人闻言有点纳闷,谷歌的云技术不是不行吗,怎么他们的三驾马车又成了云计算和大数据的奠基石和潮流趋势?

曲风看出他们眼中的疑惑,主动解释道:“谷歌是云计算和大数据的引领者,只是因为某些原因,在市场应用方面反而不如我们和亚马逊了。”

庄丁宁明白过来,说道:“原来如此,这么说来他们所谓的搜索技术也是基于云计算和大数据的,只是应用方向跟我们不一样。”

曲风说道:“可以这样理解。”

这个东西解释起来很麻烦,曲风没有时间给他科普。

谷歌的老三驾马车:

GFS是一个可扩展的大型数据密集型应用的分布式文件系统,该文件系统可在廉价的硬件上运行,并具有可靠的容错能力,该文件系统可为用户提供极高的计算性能,而同时具备最小的硬件投资和运营成本。

其实这就是云计算的雏形了,所以说谷歌才是云计算的引领者。

MapReduce是一种处理大型及超大型数据集并生成相关执行的编程模型。

其主要思想是从函数式编程语言里借来的,同时也包含了从矢量编程语言里借来的特性。基于MapReduce编写的程序是在成千上万的普通PC机上被并行分布式自动执行的。

table是一个为管理大规模结构化数据而设计的分布式存储系统,可以扩展到PB级数据和上千台服务器。

谷歌很多项目使用Bigtable存储数据,这些应用对Bigtable提出了不同的挑战,比如数据规模的要求、延迟的要求。Bigtable能满足这些多变的要求,为这些产品成功地提供了灵活、高性能的存储解决方案。

Bigtable看起来像一个数据库,采用了很多数据库的实现策略。

但是Bigtable并不支持完整的关系型数据模型,而是为客户端提供了一种简单的数据模型,客户端可以动态地控制数据的布局和格式,并且利用底层数据存储的局部性特征。

Bigtable将数据统统看成无意义的字节串,客户端需要将结构化和非结构化数据串行化再存入Bigtable。

谷歌的新三驾马车:

在一零年的时候,谷歌的搜索引擎发生了重大变革。

谷歌将其搜索迁移到新的软件平台,他们称之为“Caffeine”。

Caffeine是谷歌出自自身的设计,Caffeine使谷歌能够更迅速的添加新的链接,包括新闻报道以及博客文章等,到自身大规模的网站索引系统中,相比于以往的系统,新系统可提供“50%新生”的搜索结果。

在本质上Caffeine丢弃MapReduce转而将索引放置在由谷歌开发的分布式数据库BigTable上。

作为继GFS和MapReduce两项创新后的又一项创新,其在设计用来针对海量数据处理情形下的管理结构型数据方面具有巨大的优势。

这种海量数据可以定义为在云计算平台中数千台普通服务器上PB级的数据。

Pregel在概念模型上遵循BSP模型。

整个计算过程由若干顺序运行的超级步组成,系统从一个“超级步”迈向下一个“超级步”,直到达到算法的终止条件。

Dremel是一种分析信息的方式,它可以跨越数千台服务器运行,允许“查询”大量的数据,如Web文档集合或数字图书馆,甚至是数以百万计的垃圾信息的数据描述。

这类似于使用结构化查询语言分析传统关系数据库,这种方式在过去几十年被广泛使用在世界各地。

使用Dremel就好比你拥有类似SQL的语言,并可以无需任何编程的情况下只需将请求输入命令行中就可以很容易的制定即席查询和重复查询”。

区别在于Dremel可以在极快的速度处理网络规模的海量数据。据谷歌提交的文件显示你可以在几秒的时间处理PB级的数据查询。

从谷歌三家马车看得出来,他们对云计算和大数据的应用主要在搜索上面。

早在2006年,谷歌在推出了“Google 101计划”的同时,也正式提出了“云”的概念与理论,随后亚马逊、微软、IBM等公司才陆续宣布了自己的“云计划”。

但是,第一个将之落实到地的却是江燕公司,随后才是亚马逊,反观提出者谷歌一直到12年6月末,才推出了自己的云计算服务:Google Compute Engine。

“既然我们已经在云计算和大数据领域超越了谷歌,获得他们的三项技术还有意义吗?”庄丁宁毕竟不是技术人员,所以对这个有点疑问。

“当然有意义,虽然谷歌在市场应用方面不如我们,但技术底蕴却不输于我们。严格来说是他们也有技术优势,我们如果得到这三驾马车,吸收其优势,我们的微博云可以在短时间内更进一步。”潘星解释道。

人气小说推荐More+

重生水浒之纵横天下
重生水浒之纵横天下
关于重生水浒之纵横天下:二十一世纪特种兵队长徐骏,执行任务归来,正值修假,他搭上一辆公交车准备回家,但是万万想不到他正坐在公交车上的时候,整个公交车都爆炸了,然后他就失去了意识,醒后突然发现自己被带上了枷锁,还成为了一个被刺配的犯人。
陆凌云
我在古代的求活之路
我在古代的求活之路
关于我在古代的求活之路:朱钰作为蓝星一个普通打工仔,在一次骑行中被闪电劈中,待他醒来时发现自己被母女二人所救,眼之所见家徒四壁。心已便是沉入谷底。随后女孩母亲还让自己娶女孩为妻。而当朱钰从母女口中知道这个时代的冰山一角时,已感觉举步为艰,他应该如何让自己与母女几人活下去呢?[注所有背景人物都是虚构,不带去任何真实历史]
三笔浓情
穿越后我成了鱼玄机的老师
穿越后我成了鱼玄机的老师
关于穿越后我成了鱼玄机的老师:21世纪曾任孔子学院老师的段书瑞,因一场车祸穿越回唐朝,还阴差阳错的成了幼年女主的老师。什么?这个女学生还是唐代三大女诗人之一的鱼玄机?史书中的她遇人不淑,因感情受挫而放浪形骸,后来在遇到婢女的背叛后失手将其杀害,最后被京兆尹处死。可现实生活中的她,分明只是一个心地善良,才华横溢的女孩。她渴望大展宏图,也向往一生一世一双人。这一次,作为师傅的他能否帮她改写命运,迎来更
飞渡关山
李世民假死?那朕就威服四海了!
李世民假死?那朕就威服四海了!
关于李世民假死?那朕就威服四海了!:贞观十五年,从小穿越过来的李承乾发现老李竟然提前嘎了?那既然老李驾崩了,那皇位可就是我顺位继承了。谁敢拦在我的皇位之前,那就领教一下我建立的三大营吧!然而,李承乾却不知道。李世民其实是因为李承乾实在太沉迷奇技淫巧了,想要用这种方式来确立自己哪个儿子适合当后继之君,同时也想看看自己死后,大唐会变成什么样子?啥?李承乾带着大军入长安了?他哪来的大军啊?还想要肃清世家
哈李路亚
穿越之赵云传
穿越之赵云传
关于穿越之赵云传:赵小云莫名其妙魂穿儿时赵云,在这乱世始端,赵小云利用后世的知识,不断提升自己的实力。同时不断学习当代知识开始了,融入当代社会,打造他的传奇人生
九龙玄宫塔道的老曾