登陆注册
16791100000201

第201章 0202.再次挖角谷歌-Kaltix归心

{时间:2003年3月4日}

{地点:加州-帕洛阿尔托}

无论哪个时候谦虚总是好的,但是过于谦虚有时候难免给人误会。所以面对Kaltix三人组,宁子默并不谦虚。

Kaltix三人组说掌握的技术,确实是针对谷歌的PageRank去做的提升。但Bing同样在网页页面权重方面有自己的专用算法,搜索引擎本质上的共性让Kaltix技术的融入并不存在问题。

问题在于,如何将Kaltix三人组纳入旗下。这可不是简单地把Kaltix三人组挖过来那么简单,而是对谷歌和Bing相对此消彼长的“骚操作”。

既然是此消彼长,宁子默不介意亮亮肌肉。

用迅雷不及掩耳之势,拿下三人!

于是,这一番大数据搜索的延伸场景摆在2003年这个时代,已经不足以用惊艳来形容。

包括霍夫曼在内,办公室里呆着的四人一幅“懵逼”的样子盯着宁子默,让宁子默一时间有种“说过了”的感觉。

确实,刚刚讲的东西对眼前的四人而言。

太超前了!

他们的理解,

或许还跟不上。

没想到赛普突然张了张嘴,小心翼翼地说,“宁,我们三人曾就谷歌搜索引擎讨论过搜索引擎技术的发展。本以为我们的展望已经十分超前,没想到你铺开在我们面前的那副画卷完全超越过我们曾经的想象。”

眼前这位叫做宁的年轻人,不仅仅是大名鼎鼎的PaypalCOO,竟然还是【领赢】和【MySpace】的联合创始人。

他已经在过去的数个项目中展现了他的创造力,却没想到他在搜索引擎这么专业的领域竟然有着超越这个时代的独到见解。

他关注的不仅仅是技术,更是科技,或者说互联网技术在人类文明未来的发展中所起到的关键作用。

如果说以前很多人问自己-搜索引擎可以干什么,自己的回答最多会比宁给出的答案更好一些:

“搜索引擎可以帮你更快速找到更专业、更详尽的答案。”

但是今天过后,赛普觉得他或许会给问出问题的人一个更好的答案。

或者说,今天过后,他突然给不出别人一个答案。

搜索引擎可以做什么?

宁已经讲得清清楚楚,

但那个未来,

离现在确实还很远。

想到这里,赛普鼓起勇气问到,“宁,你说描绘的画卷绝对是搜索引擎未来最值得去探索的发展方向。”

抱歉地点了点头,赛普讪笑着说,“并不是说我不看好你所说的未来,而是我意识到你所说的那个未来,离我们有些远。它一定会用到大量的新技术去实现,而那些技术并不是一个简简单单的团队可以完成的。

甚至就连目前在搜索引擎领域十分领先的谷歌,就算它有足够的技术积累,也不能在短期内达成你所说的那个未来。单单如何将网页文件串联成数据,并以数据库查询的方式来实现搜索,都是个目前短期内难功课的难点。”

“梦想总是要有的,要不然怎么去一步一步实现它?”

宁子默把有关梦想的话变了个说话,就在赛普表态的同时,他已经想到了更深层次的东西。

宁子默明白,有一些人,仅仅只靠画饼是不能完全说服的。

自己必须拿出完全体来对付这帮同样有梦想的年轻人!

宁子默自信地笑笑,乘着抿一口咖啡的时间在脑子里将谷歌搜索的关键技术汇集成册。

把杯子从嘴边拿开的时候,宁子默脑子里有关谷歌搜索关键技术的封印,

已然打开!

“说到搜索,人们往往会简单地认为搜索只是抓取爬虫从网络上抓取的结果。但实际上,搜索并没有人们想象的那么简单。”

宁子默将杯子轻轻地放在桌上,笑着扫了三人一眼,细细地解释到:

“我们谈到大数据搜索,其核心一定是体量极大的数据量。这种体量的数据存储、索引和检索,已经不单单是数据库结构能去实现并解决的。

大数据量的数据存储和搜索一定要有对应的文件存储检索系统,它必定是一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。

我们【Bing】除了在搜索和爬虫上用心外,最核心的部分还是背后那套围绕在BFS(Bing File System)文件系统的核心技术体。这套系统的设计目标,与许多传统的分布式文件系统有很多相同之处。比如,性能、可伸缩性、可靠性以及可用性。

但BFS的还是以应用负载情况和技术环境的分析为基础着重考虑,不管现在还是将来,BFS和早期的分布式文件系统的设想都有明显的不同。所以我们重新审视了传统文件系统在设计上的折衷选择,衍生出了完全不同的设计思路。

首先,组件失效被认为是常态而不是意外。BFS需要管理成百上千存储机器,同时被相当数量的用户终端机访问。BFS组件的数量和质量导致在事实上,任何给定时间内都有可能发生某些组件无法工作,某些组件无法从它们目前的失效状态中恢复。

当我们遇到过各种各样的问题,比如应用程序bug、操作系统的bug、人为失误,甚至还有硬盘、内存、连接器、网络以及电源失效等造成的问题。所以,持续的监控、错误侦测、灾难冗余以及自动恢复的机制必须集成在GFS中。

其次,以通常的标准衡量,我们的文件非常巨大。数GB文件都可能非常普遍。每个文件通常都包含许多应用程序对象,比如web文档。

当我们未来需要处理快速增长并由数亿个对象构成的、数以TB的数据集时,采用管理数亿个KB大小的小文件的方式是非常不明智的,尽管有些文件系统支持这样的管理方式。因此,设计的假设条件和参数,比如I/O操作和Block的尺寸都需要重新考虑。

第三,绝大部分文件的修改是采用在文件尾部追加数据,而不是覆盖原有数据的方式。对文件的随机写入操作在实际中几乎不存在。一旦写完之后,对文件的操作就只有读,而且通常是按顺序读。

大量的数据符合这些特性,比如:数据分析程序扫描的超大的数据集;正在运行的应用程序生成的连续的数据流;存档的数据;由一台机器生成、另外一台机器处理的中间数据,这些中间数据的处理可能是同时进行的、也可能是后续才处理的。

对于这种针对海量文件的访问模式,客户端对数据块缓存是没有意义的,数据的追加操作是性能优化和原子性保证的主要考量因素。

第四,应用程序和文件系统API的协同设计提高了整个系统的灵活性。比如,我们放松了对BFS一致性模型的要求,这样就减轻了文件系统对应用程序的苛刻要求,大大简化了BFS的设计。

BFS还引入了原子性的记录追加操作,从而保证多个客户端能够同时进行追加操作,不需要额外的同步操作来保证数据的一致性。”

端起咖啡又喝了一口,宁子默已经习惯了身边这四人目瞪狗呆的状态。

放下杯子,宁子默再也懒得去解释那些技术细节,但还是提点到:

“BFS一早就规划了四大核心技术体,其中涵盖了第一个部分的分布式基础设施,包含的模块有文件系统(File),分布式锁服务(Chubby)和数据化序列协议(Protocol Buffer)。

而第二部分是分布式大规模数据处理模块,其中包含分布式运算程序的编程框架和对应的数据查询语言。他们或许和SQL和类似,但实际上它应该被称之为DSL(Domain-Specific Language)。

第三部分则是分布式数据库技术,它包含的模块就有分布式数据存储系统(BigTable)和数据库分区系统(Sharding)。

最后一部分当然包含数据中心优化技术,这些技术中包括综合考虑的数据中心高温化,还有电池与服务器相应整合技术等。”

撇了撇嘴,宁子默皱着眉头说,“搜索引擎是一个全盘技术的考虑,但我仅仅只举了一个很简单的例子,并且其应用范围还只是在网页搜索结果当中,并没有提及一整个生态的整体考虑。

但我所说技术方面的内容,远比我现在讲给你们听的内容要复杂的多。每一个单项里都会包含大量工作人员相应的工作成果,确实不是短期内可以去实现的。

但好在我们【Bing】团队的目标明确啊。”

“梦想还是要有的,万一实现了呢?”宁子默撇着嘴挑了挑眉毛。

这个轻挑的动作,在Kaltix三人组的眼里却郑重如斯。

办公室里鸦雀无声,除了必要的眨眼,好半天都没有一个人有多余的动作。

大概是忍受不住这种沉重的气氛,霍夫曼赶忙站起身来,去门口招呼人帮忙添上几杯咖啡。

霍夫曼也算看出来了,宁子默今天多少都带点“火气”,所以平日里一沾即过的风格变得凌厉无比。接连的前瞻和技术开诚布公地公示出来,定然让他斯坦福大学的三位学弟有些承接不住。

待人送来新的咖啡,霍夫曼才赶忙招呼道,“来,先喝点东西消化消化。宁原来在Paypal带团队的时候就是这样的风格,每一次他有一个新的方向时,总是向着那个方向勇往直前。

这么两年来,我从未见他失败过。但为什么不会失败,相信你们刚刚也都看到了。那是因为他在每一个细节的把控方面都已经做到了极致,这才有我们步步为营的每一次胜利。”

赛普明显是三人里边拿主意的那一位,霍夫曼话音刚落,赛普就点了点头。

虽然一直都是那位年轻的宁在说话,但是赛普总是觉得自己的嗓子有些痒。

咳嗽一声看了看身边的同伴,见他们都轻轻地点了点头,赛普清了清嗓子说到,“宁,我们已经清楚地看到你描绘的未来,也如同霍夫曼学长说的那样,明白你在计划的每一个细节都十分重视。

我想,经过你这一番讲述后,我们就只剩下一个问题。那就是,如果我们加入【Bing】,那么在前期这段时间,我们能为【Bing】做些什么?”

成了!

没有多余的感叹。

宁子默在做之前就笃定会是这样的结果,降维打击不仅仅是让人屈服,其实还可以是用能力去征服别人。

要不然人马星的舰队开到地球的时候,为什么总有人类想要成为三体人呢?

当然,赛普他们并不是这样的心思,而是他们被自己说的有些找不到自己的方向了。

既然别人都已经愿意加入团队,宁子默的态度自然温和不少:

“对于整个Bing来讲,从雅虎搜索引擎部门跳槽而来的陆奇先生有足够的能力去掌控大局。但在细枝末节方面,我们需要足够多的专家来实现技术。

和谷歌一样,Bing也有自己的PageRank算法。但目前搜索引擎的优化方面,我们需要专家。这就是我让霍夫曼帮我物色人选的主要目的,而你们就是霍夫曼为我们【Bing】物色的技术专家。所以,我想要听听你们在搜索领域有哪些特长。”

尽管知道Kaltix的技术核心是一套包含三个技术的算法,就算知道这三个技术是二次外推,BlockRank和自适应PageRank。宁子默依旧要做出足够的姿态。

赛普点了点头,笑着说,“好的,宁,那么由我来向你详细的介绍一下我们的Kaltix。”

搜索引擎并不是宁子墨擅长的范围,但前世对谷歌的崇拜驱使宁子默对谷歌的技术有过相当的研究,这些积累的搜索知识让宁子默在和赛普的沟通中并不吃力。

Kaltix是赛普三人基于谷歌核心Page Rank技术的新兴搜索排序技术,它基于个人兴趣的搜索结果排序方式,可以讲搜索引擎速度提升到原有速度的五倍。

它有三项核心技术……

就算知道这些,宁子默细细听完就觉得自己淡定不起来了。

也难怪前世里的谷歌在2004年会有飞速的发展,完全是因为收购并消化了Kaltix的核心技术,而Kaltix对谷歌搜索的提升是显而易见的。

赛普的讲解,让宁子默觉得自己捡到宝了,不由地夸赞到,“你们的技术核心思想是基于用户体验的搜索排序方式,这与我重视旗下产品的“交互体验”几乎是一样的要求。你们技术的核心其实也是‘交互体验’,不仅是技术的提升更是站在用户角度的‘交互体验’的提升。

这样的技术应用非常有理由客户的便捷实用,从此搜索不再是机器式的反馈结果,而是个性化的反馈用户的真正需求。你们做了一件了不起的事情。”

“那你觉得,以我们的能力和技术,我们是否可以加入【Bing】呢?”

看着赛普天真地望着自己,宁子默突然很想笑。

无论如何,这句话都昭示着一个结果。

自己又一次坑了谷歌,

Kaltix小组归心了!

同类推荐
  • 生活体验员

    生活体验员

    在一个晚上,周瑜打开手机刷新着新的工作招聘网站,看到了一个生活体验员的工作,想也没想的就投了份简历过去。当再次刷新网页时却发现没有这个工作。过了十分钟后,手机收到未知名的短信提示着周瑜已经被录取。以为自己又被糊弄的时候工作开始了,第一份工作就是要去体验荒岛求生……
  • 我成了代理死神

    我成了代理死神

    梦想当一只咸鱼的我,碌碌无为地活了十八年。偶然的一次际遇,让我遇到了死神。劫后余生,我获得了死神的一部分力量,成为了死神助理。而那个漂亮的实习死神,竟然成了我的妹妹!于是,我宅男的平静生活被打破,走上了收集灵魂的死神之路。可是我作为一个中二病晚期,根本就不想这么做啊······本书又名《我的妹妹是死神》轻松搞笑爱吐槽,欢迎各位大大莅临指导~~
  • 医士无双

    医士无双

    医学实习生周一生,获得医疗辅助系统,开始了他精彩非凡的人生!
  • 媒人

    媒人

    因为电视曾被称作“最富魅力的大众传播媒体”,这部描写电视人的小说就叫了“媒人”,“拉郎配”也好、“诱嫁”也好,已经不是婚介场所独霸的买卖了。中国电视剧草创初期,呈现出日后必将大大发达的迹象。作为文化圈人,作者以荒诞小说为载体,以离奇夸张的故事来讽刺现实,将娱乐界的丑陋一面集中放大,揭示了当今商品经济的大潮之下,电视媒体人苦海沉浮、追逐名利的众生相,以此讽刺现实,以警醒世人,促使社会人和圈内人都反思,呼唤他们回归理性和人生的终极价值。
  • 黑客进化史

    黑客进化史

    现实,有阳光也有阴暗的角落;有可爱的人和事,也有纷杂的是与非。网络,亦然!一个初入职场的毛头小子,隐匿于校园的白帽黑客,在网络与现实两个世界打拼出属于自己的一片天空。慢慢褪去青涩,骄傲的人生从这里开始!
热门推荐
  • 野营拉练

    野营拉练

    一九七四年的腊月初八,也就是腊八那一天,我们某部八连野营拉练宿营到甘肃省岷县普麻公社赵家沟大队,一个坐落在半山腰的村子里,在那儿发生了让我终生难忘的故事。这故事是在她握住我的脚之后发生的。她的手握住了我的脚,开始给我挑泡。有水泡、血泡,还有化脓泡。一根大针从镶绣着“红十字”的药箱里取出来,在蓝色火苗的酒精灯上烧过,再用酒精棉球擦拭过。然后,从药箱包裹中拽出一根和女人头发样长短粗细的马尾丝儿,在酒精中湿过,纫进那根大针的针鼻里。
  • 关东神医

    关东神医

    著名的“关外神医”赵连阁的牌匾被人砸了。这件事在盛京城内引起了轰动,有许多人来到赵连阁的“益仁堂”药铺前瞧热闹。砸牌匾者是盛京守军的一位将领,人称大刀段彪。这是一个阳光不错的早晨,段彪率领着十余名兵土,他们皆骑马而来。当行至“益仁堂”药铺门前时,段彪一勒马,手中的马刀直奔门框上的牌匾而去,只轻轻一挑一拨,刻有“关外神医”四个大字的木制牌匾便轰然落地。段彪高声嚷道,赵连阁你充什么神医,你不配,锦州的吴先生才应该称关外神医。段彪吼罢,率随从马踏牌匾扬长而去。
  • 爷,妾身要无礼了

    爷,妾身要无礼了

    她身份卑微,却不幸生在风云变幻的年代,为了活着一心只想攀附贝勒爷,慢慢的接触之中,她才发现,贝勒爷慢慢教会了她太多。他身在泥泞也是满身光芒,而她就算懂得再多,也还愿为一人飞蛾扑火。
  • 现代中国文化与文学(第10辑)

    现代中国文化与文学(第10辑)

    李怡、毛迅主编的《现代中国文化与文学(第10辑)》汇编了当代文学研究名家的精辟论述,系统地对这个命题进行了阐述。栏目有“现代文学与现代文化”、“文学史新论”、“巴蜀文学重读”、“对视与争鸣”、“现代中国文学档案”等。
  • 恋上冰山女总裁

    恋上冰山女总裁

    我的单身女总裁,人称灭绝小师太,美丽高冷,冷血无情,苛刻无比,最喜欢养狗。但我没想到,她竟然还有另一面,让我无法逃脱,不可自拔……
  • 不成问题的问题

    不成问题的问题

    老舍《不成问题的问题》故事发生在抗战重庆树华农场,农场管理者丁场长管理能力不行,但哄人能力一流,精通人情世故,在他的治理下,大家整日偷鸡打牌,混日子。树华农场颓势一片,冒牌青年艺术家秦妙斋也掺和进来。留学归来尤主任接管农场后,开始整治作风,大家感到了自律和科学带来的愉悦……全书收录老舍的短篇小说代表作《不成问题的问题》《月牙儿》《我这一辈子》三篇,篇篇皆为经典中的经典,其中《不成问题的问题》改编电影夺得多个电影节大奖。
  • 爱情到处流传

    爱情到处流传

    “母亲”和“四婶子”围绕“父亲”有了一场较量,这场较量,表面不动声色,暗里波涛汹涌,这是一种太沉重的平和,作为悲哀的胜利者,“母亲”耗尽一生的力气。“父亲”的文化和“四婶子”的风姿是很协调的,是很靠谱的一种互相吸引。“母亲”“危”中不用费尽心思寻“机”,需要做的只是在游离着的爱情逼迫自己时告知:我们都是被绑缚的女人,女人何苦为难女人。“母亲”和“四婶子”都是刚强,隐忍的,“母亲”继续苦心经营着这份爱情,“四婶子”用终生逃离的方式也在远远守卫着自己的爱情。
  • 我是一只系统猫

    我是一只系统猫

    我是陈轩,我变成了一只猫!还是一只带着系统的猫!想变回人,我这个系统猫要伺候好一个贼漂亮的女生!苦逼的日子来了!还好哥能耐大,一爪碎大石!贼猛!
  • 异界的魔导士兵

    异界的魔导士兵

    他重生在一个动乱前夕的世界。存留的记忆,死神的系统,冲突不断加剧的世界。在一个三元帝国服役的魔导士兵,用自己的能力,来换取这世界之外的力量,使其成为一个优秀而又强大的魔导师。然而,谁也没有预料到,这场混乱会以何种方式收场.............................................................................................................................................
  • 原来帝尊是夫君

    原来帝尊是夫君

    一段欢乐暖萌的仙妖之恋,还是三生三世师徒恋;师父全心全意宠甜,徒弟大逆不道想成亲。上古战神清和帝尊闲暇跑去荒山效仿姜太公钓鱼,鱼没钓着却和小黑猫妖结下梁子——不小心打散了人家一千年的修为。只好为她抢了寿礼,再厚着脸皮去求跟自己有过节的药王为她治伤,将她带回九重天管吃管住、用独创金线为她的修行引路……想他凶名远扬的战神,活了不知道多少万年,还没为谁如此用心过。那天,小黑猫问他:“秦毓,我要怎么往你心里去呢?”昆仑山颠,漫天飞雪中,他回答:“只要你愿,怎么走都能到我心里来。”