为什么在别人都使用开源大数据技术时,阿里云王坚却坚持自主研发Max Compute?

科技新闻播报馆


他要么不懂大数据.要么很懂大数据...

...

1.大数据的流程是:先确定结果.再收集数据.最后根据结果和数据选择计算方法...

...

这个道理很简单吧....

我们以印度为例...印度总理要求2017年印度增长率要高于中国.也就是7%左右.也就是大数据的最终算出的结果先确定好...之后是手机数据.什么地摊.牛粪都做估价...之后按照GDP一算还是不如中国高...那就换一种算法用PPP..这样就达到7%了...这样所有印度人民包括总理都夸你算的准...

...

国际之间都这么玩...就更别提各种企业了...

...

一定要记住大数据是辅助决策.而不是指挥决策...你的工作是用大数据证明领导的决策对.而不是告诉领导该怎么做...领导不需要你告诉他怎么做...怎么做是他的自由.他的爱好...你教他怎么做那就是触动逆鳞了...

...

2.大数据的特点是什么?

a.数据量特别大.无法追溯验证.

b.数据来源特别杂.无法追溯验证.

c.数据算法多.正确性无法验证.

总之.大数据的特点就是无法追溯验证...

这也是大数据强于传统统计的优势...

因为传统统计是抽样.理论实际非常准确...

大数据是全量.理论上比抽样准确...

实际上操作空间极大...

我们其实不需要准确的统计...

这个道理很简单吧...

...

3.由此我们就明白一件事...

大数据和Hadoop Spark啥的有关系么?

毫无关系...

Hadoop Spark只不过是大数据PPT上一个角落里非常不重要的两个词...

...

大数据其实根本就不需要任何专业工具计算!!!

Excel足矣...

...

a.他可能不懂大数据.所以痴迷于工具..

b.他可能很懂大数据.知道工具没用.所以自己瞎编一个.听起来很牛逼的样子.

c.我也发布一个大数据工具.MinCompute.也是我几分钟辛勤耕耘编写的.你也来一个.不就起个名么.你也可以的...


ACME63610374577


阿里云已经成为阿里巴在科技领域有一个奇迹,当然奇迹背后必定有太多的艰辛,不完全是身体上的,还有精神上承受的压力,毕竟这个系统不是简单的靠人员的集成式开发就能短时间搞定,所以在前期受到非常大的质疑也属于很正常的范畴,恰逢大数据还在炒概念的阶段,马云拍板投入数十亿开始研发,据后来解密当初阿里巴巴内部分成了两个派系,支持阿里云的研发,坚决反对阿里云的开发,甚至在阿里巴巴内部有人直接提出质疑王坚能不能写上一行代码。

整体集团内部弥漫着对阿里云研发进度的不信任,甚至很多人喊出来王坚是在骗马云的钱,种种才猜测,王坚在2012年的年会上落泪的视频在网上还能搜到,足以说明当时承担的压力有多大,但王坚还是如同他的名字一样坚强的挺过来了,现在阿里云的全球市场份额占到第三,并且完全实现了技术上的自主研发,并且真正突破了传统意义上的5K技术,备受质疑主要在当时的互联网环境下拿出这么多钱来烧段时间内不能见效,那个阶段是互联网高度的红利期,投入就要见到产出的年代,所以环境的因素很重要,不得不佩服马云的决断力,如果没有当初资金源源不断的投入不可能有今天的阿里云技术,也算是国内科技企业里面为数不多自主研发的技术产品。

王坚加入阿里正好是阿里技术瓶颈期的时候,业务能力快速的发展,技术能力能不能跟得上都是未知数,整个来讲王坚很好的完成了这一使命,其实换个思路来看这个问题,如果不是王坚可能还会有下一个李坚出来做这个事情,毕竟公司的巨轮会一直向前发展,而王坚恰好出现在合适的时机并且把这个事情干的非常漂亮,但在具体如何去做的时候,王坚的决断力却是非常的勇敢,在尝试了开源的大数据之后发现根本不可能完成任务,于是果断开始自主研发,与其说是自动主张倒不如说成是被逼的,强大的压力下产生无尽的动力,任何有技术含量的东西大家开始都不会太认可,如同开始大家在网上购物都会觉得可能是骗子,万一我交钱了对方不发货怎么办,看看现在购物的人很少担忧这个事情发生,整个社会的价值观已经高度认可这件事情。

阿里也是在阿里云有了突破之后开始更加注重人才的培养,并且搞了个达摩院收集全球优秀的科学家一起以企业的方式产生各种创新技术,可以遇见未来阿里会带给国人更多的技术突破,未来就是人才竞争的时代,谁拥有足量多的人才谁就能有更多的话语权,随着国内软件氛围进一步提升,相信也会有更多自主性的技术产生。

其实对于王坚来讲更应该感谢阿里决策层的坚决支持,玩云计算没有足量的资金支持不可能做出个样子,而王坚很好的做出了表率,最近也看到王坚离开了阿里云,事情的真假不是很清楚,对于个人来讲已经在人生的道路上,增添了浓厚的一个色彩,至于后续是不是能够继续执掌阿里云其实这都不是其个人要谈的事情,这已经是阿里高层来决定的。

作为一个技术人员还是非常佩服王坚在如此压力下,还能保持清晰的头脑做出大胆的决定,并且把技术落地,也证明了一件事,中国的软件人才一样能做出让世界瞩目的事情,无形之中也增强自己的信心,对于阿里坚持自我研发道路确定更强的信心。

希望能够帮到你。


大学生编程指南


我觉得,王坚在阿里云的发展过程中,就像是大海航行中的舵手一样,引领阿里云不断前进。

不得不说,王坚是非常有远见的,他很早就意识到了只有自主研发的重要性,所以坚持要走自主研发的道路。

早在2007年,阿里巴巴就面临着非常严峻的考验,因为系统无法满足集团不断增长的数据处理需求,于是阿里巴巴从微软亚洲研究院招来王坚博士,解决整个集团的算力问题。

当时,市面上基于开源技术的Hadoop集群,在可控性、安全性上存在隐患,可提供的服务也有很大的局限性。虽然当时大家都在用Hadoop集群,但王坚清楚地认识到了其规模的局限,决定要自主研发一套大数据计算系统,也就是MaxCompute。

自主研发的道路上肯定会面临不少困难,但当时无论是基于Hadoop搭建的大数据系统还是自研的大数据计算平台,都未能跨越5K 的集群规模的大山。

经过不懈努力,在2013年8月,王坚终于带领团队解决了这个难题,不仅让新的基于飞天5K的MaxCompute生产集群规模达到5000,还实现了跨机房,并经受了整机房断电的严苛考验。

这也意味着,阿里成为了世界上为数不多具备5K计算能力的公司。更重要的是,阿里还成为了业界首家对外提供5K计算能力的公司。

现如今,作为单集群超过1万台服务器,数据规模更是达到EB级的大数据计算平台,MaxCompute已经成为全球领先的大数据计算平台。

阿里巴巴集团的核心业务都是由MaxCompute提供支撑。同时,阿里云还将这种大数据处理能力对外开放,让小型公司只需要花几百元就可以分析海量的数据。

现在想来,如果十年前王坚没有坚定地走自主研发的道路,也许就不会有MaxCompute的诞生,阿里巴巴和其他企业也都无法享受到MaxCompute带来的便利了,忍不住要给王坚的远见点赞!


一个退休的老者


芯片脖子上的那道血痕,永远警示着每一个华夏儿女:不自主研发,就会受制于人,就永无安宁之日。而云计算是比芯片更重要的存在,它是中国未来社会的水电煤,特别是在今天这个政府积极拥抱云计算大数据的时代




今后的昨天


自主研发通常需要投入巨量的人、财、物,短期看不到成功,遇到多方质疑仍要坚持初心。亚马逊的AWS、微软的Azure、阿里巴巴的阿里云等全球最大的三朵云都是自主研发。最终带来的成果和利益也是显而易见的。



魔卡啦啦啦


事实上,随着云计算市场上半场的结束,越来越多的云计算厂商将目光转移到了如政务云市场这样的行业市场之中。而阿里云一直以来,作为中国公有云市场的龙头老大,凭借着自主研发的技术和其诞生于互联网的创新思维,再度带领着政务云发展向新的方向前进。




追风的人r


只有自主研发才能把软件的效能和硬件的能力整合在一起,只有通过创新技术,去替代原有的柜机,让CPU效率发挥到极至,才能让开发者享受的云计算的能力,在成本、性能、效果上得到运用,阿里云做到了。





虚的白


可以说,将核心技术掌握在自己手里的阿里云不仅在国内云市场常年稳居第一的市场份额,也通过基于飞天的应用在各行各业迎来了大爆发。阿里云为天猫构建了全球最大规模的混合云,没有自研的飞天是无法做到的。




君有嘉仪11


大家都知道,国内的科技企业虽然多,发展也很蓬勃,但拥有自主研发技术,还坚持了好多年的企业实在是太少了。在最初几年里,阿里云在集团内部表现并不突出,技术上艰难,商业上也看不到可能性,如今让众人刮目相看了吧



关注black科技


到处都是阿里集团媒体,到处都是马家军,马大湿控制媒体是想左右中国人民的思想吗?马家军是想入主中原,马大湿是想做大总统吗?马大湿你居心何在?


分享到:


相關文章: