第541章 Hadoop
听过许亮杰的话,周不器又叫来首席技术官程秉皓,也详实沟通了一下搜索的事。
新浪的爱问搜索,就是他带队做出来的。
如果他去年不离开新浪,说不定凭借此功劳,就能晋升为新浪的CTO了。
不过,他现在是紫微星的CTO,也一点不差。
程秉皓的看法跟许亮杰差不多,而且更加地本土化。
“百度为什么做内容?因为在国内做搜索,做内容是唯一能够生存下去的方式。”
程秉皓的看法更加的锐利直接。
在国内做搜索,跟硅谷不一样,要根据法律法规,要移除和屏蔽一些内容。以及要贴心的为用户考虑,通过一些深度算法,帮助用户移除一些深度的专业化内容。
因为越专业越小众,越庸俗越大众。
要想获取最多的大众用户的喜爱,不能提供太专业的内容,而是要提供一些浅白易懂、不那么复杂的搜索结果。
比如百度那边已经在做机器学习,也就是最早期的人工智能。即通过用户搜索结果以及对搜索结果的反馈,来让机器学习。从而在未来搜索的时候,让机器帮忙推荐更符合大众口味的最优解。
这就又产生了一个好处,可以进一步的缩小检索范围。
百度的搜索技术比不上谷歌,差距之大……远远超出想象。其实也不止百度了,雅虎、微软也一样。
谷歌能在最短的时间内,在海量的互联网数据中搜索出相关内容,然后根据算法排列,呈现在用户电脑前。
可其他的搜索引擎不行。
要想给用户提供最快的响应速度,怎么办?
最简单的方法,就是缩小检索目标。
谷歌检索10亿条信息,百度就检索1亿条信息。
信息来源少了,搜不出想要的答案,也就不奇怪了。
所以,百度要想坐稳国内第一的宝座,就一定、只能、必须做内容。通过自产的内容,来弥补检索技术方面的弱项。
这种方法,没法满足高端用户的需求,却可以满足全社会中80%的用户需求了,这就够了。
可以说,百度的李总通过正面退怯、背后游击的方式,完成了对谷歌在搜索领域霸权的挑战,并且成功了。单从这一点来说,可比微软、雅虎等巨头强了不少,那伙人还在苦哈哈的想跟谷歌玩技术呢。
玩个屁啊,根本不是一个量级的。
在大数据处理的领域,全球科技公司都要依靠一个叫Hadoop的开源核心架构。这个架构来源,就是谷歌对自身算法理论的公开,却没有公开算法细节。所以雅虎和阿帕奇就牵头合作,召集了一大批顶尖科学家,根据谷歌的算法理论,做出了这个大数据处理系统。
可问题很多,距离谷歌公布的一些、雅虎、百度等巨头,都要使用这个开源系统。
只有谷歌不用。
不仅不用,他们还在2010年完成了系统的更新……把原来的理论推翻,上线了一个更先进更高端的大数据管理系统。
也就是说,全世界科技巨头们使用的大数据管理系统的底层架构,比谷歌淘汰的那个旧版本,还要落后几倍的效率。
巨头们当然也抗争,想做出超越Hadoop的东西。
国内的代表就是百度。
在07年的时候,百度股价一路飞起,上下振奋。李彦红决定代表华夏,做一个世界级的开创性项目出来,起名“金字塔”计划。
抽调了百度最精英的核心技术人员,又从外面招来了一个专家团队,带头人赫然就是现在紫微星研发中心的负责人杨振坤!
这个大计划,不用JAVA、Python,甚至连C++都不用,直接用C语言写代码。
可谓是雄心壮志。
当时,百度从最高层到一线开发人员,都充满激情,毕竟这是一次叫板硅谷的大事,做成了足以扬我国威。
项目组疯狂加班,百度大厦12层西侧的灯每天晚上都亮一宿。
做了两年,项目成功了!
可是,最后百度还是回归到了Hadoop的阵营中。
为什么?
因为有一个小项目组,拿来Hadoop的代码简单包装,重写了API,然后拿过去跟百度耗时两年、斥巨资打造的金字塔系统比较性能。
结果,小项目组以微弱的优势取胜了!
李彦红看到这个结果,顿时心灰意冷,如同被泼了一盆凉水。
Hadoop是开源项目,是全世界的开发者们一起去更新、促进,潜力巨大。原创的如果没有巨大优势,再加上职场政治,就只能是朝开源的方向走了……
阿里云的初期,曾遇到过巨大困难,被业内深深质疑。因为最早期的时候,王建博士判断错了,也要搞一个类似Hadoop的大数据系统,半抄半改,还是糊了。后来看到亚马逊云成功了,才恍然大悟,赶紧调头改变方向,这才取得了成功。
企鹅、盛大、新浪、华为、金山等科技公司看到阿里在前面趟地雷,还真是趟出来了一条道。这个时候,大家也就不说什么“新瓶装旧酒”、“阿凡达时代才能诞生”的风凉话了,赶紧跟进,也都很顺利的做出了自己的云计算平台。
这背后都要依托着开源项目Hadoop。
程秉皓道:“我在新浪时,就意识到了内容的重要性,开始对爱问搜索补充内容来源,比如爱问知识人,比百度知道还早一年。可是公司给的支持有限。我99年最早做搜索时,整个搜索部就我一个人。到了去年,也才120多人的团队,别说跟百度比了,连搜狗都不如。”
周不器问:“如果做内容,你觉得还需要做什么?”
“基础性内容。”
“哪个方面?”
“比如搜索,怎么做蛋炒饭?如果用谷歌,会搜出许多长篇大论,很多资深大厨的一些心得等等。这些当然很好,可用户可能不需要,只需要一个结果,是先炒饭还是先炒蛋?百度知道很好的做了补充。”
周不器点了点头,“的确,简单搜索更符合大众口味。”
程秉皓道:“咱们有后发优势,看着百度怎么做、做了什么,去学就好了。学个七七八八,就能打败谷歌,成为国内第二了。要是做的更好了,在渠道方面发力效果更突出,超越百度也不是不可能。”
周不器哈哈笑道:“你可真有自信!”
程秉皓很认真的说:“如果搜索业务交给我来做,我保证五年之内打败百度!”
周不器又大笑了两声,敷衍过去了。
搜索业务,他更倾向的肯定是王小船。
前世有经验的。
新浪的爱问搜索一点名堂都没做起来,比网易的有道搜索还差,做的最好的当属搜狗,坐稳了市场老二的位置。
通过多次交谈,周不器算是对搜索业务,有了一个初步的认识。
许亮杰、程秉皓都是搜索领域的专家,都曾开发出影响力比较大的搜索引擎。虽然都失败了,但经验是宝贵的。
如果再把王小船拉来,紫微星就形成了搜索业务的“三驾马车”。
这个配置,总能尝试着跟百度掰一掰手腕了吧?
想一想,还真有点小兴奋!
BAT的三大巨头里,紫微星算是要真正地迎向第一个对手。
这时,周不器接到了一个急促的电话。
是温知夏打来的。
“老公,你来一趟呗。”
“现在?”
周不器有些惊讶。
温知夏吱吱呜呜的说:“办公室里刚刚拖过地,我又穿着高跟鞋,不小心摔倒了……”
“我靠!”周不器吓了一跳,很紧张,“怎么样?你人没事吧?保大,一定是保大!孩子没了,咱们以后再生,你才是最重要的!”
温知夏又好气又好笑,“你说什么呢?才怀两个多月,孩子都没成型呢,还保大保小,都要当爸爸的人了,还这么胡闹?”
这口气,略带娇嗔。
看样子,她身体没什么问题。
就是嘛,才怀两个月,不小心摔了一下,一般都问题不大。除非是女性不爱惜身子流产过太多次,又或者一些妇科疾病。
温老师肯定没这些问题。
“你没事?”周不器松了口气。
“没事。”温知夏语气有些叹息。
“那怎么了?”
“叔叔生气了,说什么都要给我休假。”
“呃……”
周不器就有点崩溃,有点无语。
上次在廊平工厂的事,周不器算是帮了老爸一个大忙。投桃报李,周不器就跟老爸请示,说是让温老师回奶茶厂上班。
怀胎十月了,总不能一直闷在家里吧?
温老师又不是那种家庭主妇的性格,她是事业型女性,有自己的事业追求。
好说歹说,老爸这才答应。
没想到,出了这种事!
这下麻烦大了。
温老师在办公室里摔跤了,只这一幕,长辈就得揪心好几个月。再想在奶茶厂工作是不太可能了。
温知夏闷闷不乐的说:“叔叔说让你来接我,去医院看看,然后……然后就不准我上班了。”
“没事,有我呢!我这就过去,你等着!嗯,你真没事吧?”
“肯定没事啊,我也注意呢,摔倒的瞬间,我用胳膊拄地呢,连屁股都没摔倒,就是胳膊扭了一下。”
“行,那你等我。”
新浪的爱问搜索,就是他带队做出来的。
如果他去年不离开新浪,说不定凭借此功劳,就能晋升为新浪的CTO了。
不过,他现在是紫微星的CTO,也一点不差。
程秉皓的看法跟许亮杰差不多,而且更加地本土化。
“百度为什么做内容?因为在国内做搜索,做内容是唯一能够生存下去的方式。”
程秉皓的看法更加的锐利直接。
在国内做搜索,跟硅谷不一样,要根据法律法规,要移除和屏蔽一些内容。以及要贴心的为用户考虑,通过一些深度算法,帮助用户移除一些深度的专业化内容。
因为越专业越小众,越庸俗越大众。
要想获取最多的大众用户的喜爱,不能提供太专业的内容,而是要提供一些浅白易懂、不那么复杂的搜索结果。
比如百度那边已经在做机器学习,也就是最早期的人工智能。即通过用户搜索结果以及对搜索结果的反馈,来让机器学习。从而在未来搜索的时候,让机器帮忙推荐更符合大众口味的最优解。
这就又产生了一个好处,可以进一步的缩小检索范围。
百度的搜索技术比不上谷歌,差距之大……远远超出想象。其实也不止百度了,雅虎、微软也一样。
谷歌能在最短的时间内,在海量的互联网数据中搜索出相关内容,然后根据算法排列,呈现在用户电脑前。
可其他的搜索引擎不行。
要想给用户提供最快的响应速度,怎么办?
最简单的方法,就是缩小检索目标。
谷歌检索10亿条信息,百度就检索1亿条信息。
信息来源少了,搜不出想要的答案,也就不奇怪了。
所以,百度要想坐稳国内第一的宝座,就一定、只能、必须做内容。通过自产的内容,来弥补检索技术方面的弱项。
这种方法,没法满足高端用户的需求,却可以满足全社会中80%的用户需求了,这就够了。
可以说,百度的李总通过正面退怯、背后游击的方式,完成了对谷歌在搜索领域霸权的挑战,并且成功了。单从这一点来说,可比微软、雅虎等巨头强了不少,那伙人还在苦哈哈的想跟谷歌玩技术呢。
玩个屁啊,根本不是一个量级的。
在大数据处理的领域,全球科技公司都要依靠一个叫Hadoop的开源核心架构。这个架构来源,就是谷歌对自身算法理论的公开,却没有公开算法细节。所以雅虎和阿帕奇就牵头合作,召集了一大批顶尖科学家,根据谷歌的算法理论,做出了这个大数据处理系统。
可问题很多,距离谷歌公布的一些、雅虎、百度等巨头,都要使用这个开源系统。
只有谷歌不用。
不仅不用,他们还在2010年完成了系统的更新……把原来的理论推翻,上线了一个更先进更高端的大数据管理系统。
也就是说,全世界科技巨头们使用的大数据管理系统的底层架构,比谷歌淘汰的那个旧版本,还要落后几倍的效率。
巨头们当然也抗争,想做出超越Hadoop的东西。
国内的代表就是百度。
在07年的时候,百度股价一路飞起,上下振奋。李彦红决定代表华夏,做一个世界级的开创性项目出来,起名“金字塔”计划。
抽调了百度最精英的核心技术人员,又从外面招来了一个专家团队,带头人赫然就是现在紫微星研发中心的负责人杨振坤!
这个大计划,不用JAVA、Python,甚至连C++都不用,直接用C语言写代码。
可谓是雄心壮志。
当时,百度从最高层到一线开发人员,都充满激情,毕竟这是一次叫板硅谷的大事,做成了足以扬我国威。
项目组疯狂加班,百度大厦12层西侧的灯每天晚上都亮一宿。
做了两年,项目成功了!
可是,最后百度还是回归到了Hadoop的阵营中。
为什么?
因为有一个小项目组,拿来Hadoop的代码简单包装,重写了API,然后拿过去跟百度耗时两年、斥巨资打造的金字塔系统比较性能。
结果,小项目组以微弱的优势取胜了!
李彦红看到这个结果,顿时心灰意冷,如同被泼了一盆凉水。
Hadoop是开源项目,是全世界的开发者们一起去更新、促进,潜力巨大。原创的如果没有巨大优势,再加上职场政治,就只能是朝开源的方向走了……
阿里云的初期,曾遇到过巨大困难,被业内深深质疑。因为最早期的时候,王建博士判断错了,也要搞一个类似Hadoop的大数据系统,半抄半改,还是糊了。后来看到亚马逊云成功了,才恍然大悟,赶紧调头改变方向,这才取得了成功。
企鹅、盛大、新浪、华为、金山等科技公司看到阿里在前面趟地雷,还真是趟出来了一条道。这个时候,大家也就不说什么“新瓶装旧酒”、“阿凡达时代才能诞生”的风凉话了,赶紧跟进,也都很顺利的做出了自己的云计算平台。
这背后都要依托着开源项目Hadoop。
程秉皓道:“我在新浪时,就意识到了内容的重要性,开始对爱问搜索补充内容来源,比如爱问知识人,比百度知道还早一年。可是公司给的支持有限。我99年最早做搜索时,整个搜索部就我一个人。到了去年,也才120多人的团队,别说跟百度比了,连搜狗都不如。”
周不器问:“如果做内容,你觉得还需要做什么?”
“基础性内容。”
“哪个方面?”
“比如搜索,怎么做蛋炒饭?如果用谷歌,会搜出许多长篇大论,很多资深大厨的一些心得等等。这些当然很好,可用户可能不需要,只需要一个结果,是先炒饭还是先炒蛋?百度知道很好的做了补充。”
周不器点了点头,“的确,简单搜索更符合大众口味。”
程秉皓道:“咱们有后发优势,看着百度怎么做、做了什么,去学就好了。学个七七八八,就能打败谷歌,成为国内第二了。要是做的更好了,在渠道方面发力效果更突出,超越百度也不是不可能。”
周不器哈哈笑道:“你可真有自信!”
程秉皓很认真的说:“如果搜索业务交给我来做,我保证五年之内打败百度!”
周不器又大笑了两声,敷衍过去了。
搜索业务,他更倾向的肯定是王小船。
前世有经验的。
新浪的爱问搜索一点名堂都没做起来,比网易的有道搜索还差,做的最好的当属搜狗,坐稳了市场老二的位置。
通过多次交谈,周不器算是对搜索业务,有了一个初步的认识。
许亮杰、程秉皓都是搜索领域的专家,都曾开发出影响力比较大的搜索引擎。虽然都失败了,但经验是宝贵的。
如果再把王小船拉来,紫微星就形成了搜索业务的“三驾马车”。
这个配置,总能尝试着跟百度掰一掰手腕了吧?
想一想,还真有点小兴奋!
BAT的三大巨头里,紫微星算是要真正地迎向第一个对手。
这时,周不器接到了一个急促的电话。
是温知夏打来的。
“老公,你来一趟呗。”
“现在?”
周不器有些惊讶。
温知夏吱吱呜呜的说:“办公室里刚刚拖过地,我又穿着高跟鞋,不小心摔倒了……”
“我靠!”周不器吓了一跳,很紧张,“怎么样?你人没事吧?保大,一定是保大!孩子没了,咱们以后再生,你才是最重要的!”
温知夏又好气又好笑,“你说什么呢?才怀两个多月,孩子都没成型呢,还保大保小,都要当爸爸的人了,还这么胡闹?”
这口气,略带娇嗔。
看样子,她身体没什么问题。
就是嘛,才怀两个月,不小心摔了一下,一般都问题不大。除非是女性不爱惜身子流产过太多次,又或者一些妇科疾病。
温老师肯定没这些问题。
“你没事?”周不器松了口气。
“没事。”温知夏语气有些叹息。
“那怎么了?”
“叔叔生气了,说什么都要给我休假。”
“呃……”
周不器就有点崩溃,有点无语。
上次在廊平工厂的事,周不器算是帮了老爸一个大忙。投桃报李,周不器就跟老爸请示,说是让温老师回奶茶厂上班。
怀胎十月了,总不能一直闷在家里吧?
温老师又不是那种家庭主妇的性格,她是事业型女性,有自己的事业追求。
好说歹说,老爸这才答应。
没想到,出了这种事!
这下麻烦大了。
温老师在办公室里摔跤了,只这一幕,长辈就得揪心好几个月。再想在奶茶厂工作是不太可能了。
温知夏闷闷不乐的说:“叔叔说让你来接我,去医院看看,然后……然后就不准我上班了。”
“没事,有我呢!我这就过去,你等着!嗯,你真没事吧?”
“肯定没事啊,我也注意呢,摔倒的瞬间,我用胳膊拄地呢,连屁股都没摔倒,就是胳膊扭了一下。”
“行,那你等我。”