你猜猜，Google 一共有多少台服务器？

RedGuest

Google 一共有多少台服务器？恐怕现在连 Google 自己的人都不太容易说清楚。为了让大家有个直观的概念，有人制作了下面这张图：世界最大的芯片制造厂商 Intel 有大约10万台服务器，非死不可有3万台，美国最大的电话公司 AT&T 也有2万台，而 Google。。。有超过100万台服务器！据说全世界2%的服务器都是 Google 的，这个数字实在是太恐怖了。。。

图片地址：

太大了，显示不全，可能是设置的问题：

N.XG.Y

有个直观的

razor-fantasy

你这个概念本来就是错的～

GFS下面即便是一台普通PC都可以作为服务器存在～

GFS本来就是采用的mapreduce方式来进行并行存储并行计算（也特别适合搜索这一类能够分割任务的操作）～

tezhlp44

八达有几台？

果冻仙

where is tu ?

10.3

我估计有 5-6台吧。

elffkdx

google的太牛B了

OruA

图是什么意思？我没看出来哦

bingle

这里说的google compute node的是普通pc，只能提供一部分计算力，跟“服务器”根本不是一个概念

另外，“据说全世界2%的服务器都是 Google 的”，说这话的人很外行

RedGuest

这里说的google compute node的是普通pc，只能提供一部分计算力，跟“服务器”根本不是一个概念

另外，“据说全世界2%的服务器都是 Google 的”，说这话的人很外行
bingle 发表于 2010-4-16 20:44

你说的node是普通PC，是早期的说法了，现在GOOGLE无论计算能力，计算规模，和计算的范围，都不可同日而语了。为什么GOOGLE庞大的gmail速度一点不慢，而微软的hotmail慢的要死，其原因无人知晓，商业秘密。外界只晓得其MapReduce分布式技术和BigTable的存储技术，但其实质却是无法复制的。
目前开源社区也有基于MapReduce的分布式存储项目，没有条件测试。

razor-fantasy

你说的node是普通PC，是早期的说法了，现在GOOGLE无论计算能力，计算规模，和计算的范围，都不可同日而语了。为什么GOOGLE庞大的gmail速度一点不慢，而微软的hotmail慢的要死，其原因无人知晓，商业秘密。外界只 ...
RedGuest 发表于 2010-4-16 20:52

hadoop已经有yahoo和facebook在用了～

虽然说hadoop的大大貌似跳槽了～

bingle

1. gmail快的原因是GFS的副本功能。
2. mapreduce没那么神，它能解决的问题很局限。
3. google的后台做得很nice，不过拿到高性能计算领域，还是有很大差距。

PS: hadoop，腾讯也在用

RedGuest

1. gmail快的原因是GFS的副本功能。
2. mapreduce没那么神，它能解决的问题很局限。
3. google的后台做得很nice，不过拿到高性能计算领域，还是有很大差距。

PS: hadoop，腾讯也在用
bingle 发表于 2010-4-16 21:03

兄台和razor-fantasy都是专业人士啊。
hadoop前身是出现在nutch项目里，后来代码独立出来后形成了hadoop，用过早期的nutch。不做技术好多年了，哎。

lihuizmm

taobao也在用hadoop吧，以前看到他们在招人

SW=TNT

不是单就是双

琴瑟琵琶

hadoop是谁什么，谁来扫盲

千夜不眠

非死不可是什么?

千夜不眠

哦.FACEBOOK啊?

娃娃打手

非死不可是什么?

razor-fantasy

hadoop是谁什么，谁来扫盲
琴瑟琵琶 发表于 2010-4-16 21:45

The Apache Hadoop project develops open-source software for reliable, scalable, distributed computing. Hadoop includes these subprojects:

Hadoop Common: The common utilities that support the other Hadoop subprojects.
Avro: A data serialization system that provides dynamic integration with scripting languages.
Chukwa: A data collection system for managing large distributed systems.
HBase: A scalable, distributed database that supports structured data storage for large tables.
HDFS: A distributed file system that provides high throughput access to application data.
Hive: A data warehouse infrastructure that provides data summarization and ad hoc querying.
MapReduce: A software framework for distributed processing of large data sets on compute clusters.
Pig: A high-level data-flow language and execution framework for parallel computation.
ZooKeeper: A high-performance coordination service for distributed applications.

琴瑟琵琶

我记得google用的是nginx之类的东西啊，谁来解释一下有啥区别

razor-fantasy

我记得google用的是nginx之类的东西啊，谁来解释一下有啥区别
琴瑟琵琶 发表于 2010-4-16 22:08

nginx只是一个轻量的webserver，作用跟apache类似～

这只是个读写数据和发送指令的接口～然后把结果表现到你的web上来～

就如同fuse也是个接口一样，让整个dfs上面的数据呈现成普通文件目录的形式供你操作～

还需要有存储数据的节点和存储数据的数据的节点～并且还可以通过mapreduce的方法把运算分担到各个存有数据的节点上去～

也许是这样～survey一个星期也就这个水平了～

SimoN

RedGuest

8王有点悲剧啊~~~~~~~~~~~~~
GOOGLE一下都舍不得

黑郁金香

google的确切的服务器数量就如同可口可乐配方，是公司的最高机密之一，没几个人知道。

jianzhongx

谢谢 分享

大爷大爷

我日 好专业 基本看不懂。

SM_2v2gamer

Zz2

毛用，有baidu厉害吗？

龙帅