為什麼在別人都使用開源大數據技術時,阿里雲王堅卻堅持自主研發Max Compute?

科技新聞播報館


他要麼不懂大數據.要麼很懂大數據...

...

1.大數據的流程是:先確定結果.再收集數據.最後根據結果和數據選擇計算方法...

...

這個道理很簡單吧....

我們以印度為例...印度總理要求2017年印度增長率要高於中國.也就是7%左右.也就是大數據的最終算出的結果先確定好...之後是手機數據.什麼地攤.牛糞都做估價...之後按照GDP一算還是不如中國高...那就換一種算法用PPP..這樣就達到7%了...這樣所有印度人民包括總理都誇你算的準...

...

國際之間都這麼玩...就更別提各種企業了...

...

一定要記住大數據是輔助決策.而不是指揮決策...你的工作是用大數據證明領導的決策對.而不是告訴領導該怎麼做...領導不需要你告訴他怎麼做...怎麼做是他的自由.他的愛好...你教他怎麼做那就是觸動逆鱗了...

...

2.大數據的特點是什麼?

a.數據量特別大.無法追溯驗證.

b.數據來源特別雜.無法追溯驗證.

c.數據算法多.正確性無法驗證.

總之.大數據的特點就是無法追溯驗證...

這也是大數據強於傳統統計的優勢...

因為傳統統計是抽樣.理論實際非常準確...

大數據是全量.理論上比抽樣準確...

實際上操作空間極大...

我們其實不需要準確的統計...

這個道理很簡單吧...

...

3.由此我們就明白一件事...

大數據和Hadoop Spark啥的有關係麼?

毫無關係...

Hadoop Spark只不過是大數據PPT上一個角落裡非常不重要的兩個詞...

...

大數據其實根本就不需要任何專業工具計算!!!

Excel足矣...

...

a.他可能不懂大數據.所以痴迷於工具..

b.他可能很懂大數據.知道工具沒用.所以自己瞎編一個.聽起來很牛逼的樣子.

c.我也發佈一個大數據工具.MinCompute.也是我幾分鐘辛勤耕耘編寫的.你也來一個.不就起個名麼.你也可以的...


ACME63610374577


阿里雲已經成為阿里巴在科技領域有一個奇蹟,當然奇蹟背後必定有太多的艱辛,不完全是身體上的,還有精神上承受的壓力,畢竟這個系統不是簡單的靠人員的集成式開發就能短時間搞定,所以在前期受到非常大的質疑也屬於很正常的範疇,恰逢大數據還在炒概念的階段,馬雲拍板投入數十億開始研發,據後來解密當初阿里巴巴內部分成了兩個派系,支持阿里雲的研發,堅決反對阿里雲的開發,甚至在阿里巴巴內部有人直接提出質疑王堅能不能寫上一行代碼。

整體集團內部瀰漫著對阿里雲研發進度的不信任,甚至很多人喊出來王堅是在騙馬雲的錢,種種才猜測,王堅在2012年的年會上落淚的視頻在網上還能搜到,足以說明當時承擔的壓力有多大,但王堅還是如同他的名字一樣堅強的挺過來了,現在阿里雲的全球市場份額佔到第三,並且完全實現了技術上的自主研發,並且真正突破了傳統意義上的5K技術,備受質疑主要在當時的互聯網環境下拿出這麼多錢來燒段時間內不能見效,那個階段是互聯網高度的紅利期,投入就要見到產出的年代,所以環境的因素很重要,不得不佩服馬雲的決斷力,如果沒有當初資金源源不斷的投入不可能有今天的阿里雲技術,也算是國內科技企業裡面為數不多自主研發的技術產品。

王堅加入阿里正好是阿里技術瓶頸期的時候,業務能力快速的發展,技術能力能不能跟得上都是未知數,整個來講王堅很好的完成了這一使命,其實換個思路來看這個問題,如果不是王堅可能還會有下一個李堅出來做這個事情,畢竟公司的巨輪會一直向前發展,而王堅恰好出現在合適的時機並且把這個事情乾的非常漂亮,但在具體如何去做的時候,王堅的決斷力卻是非常的勇敢,在嘗試了開源的大數據之後發現根本不可能完成任務,於是果斷開始自主研發,與其說是自動主張倒不如說成是被逼的,強大的壓力下產生無盡的動力,任何有技術含量的東西大家開始都不會太認可,如同開始大家在網上購物都會覺得可能是騙子,萬一我交錢了對方不發貨怎麼辦,看看現在購物的人很少擔憂這個事情發生,整個社會的價值觀已經高度認可這件事情。

阿里也是在阿里雲有了突破之後開始更加註重人才的培養,並且搞了個達摩院收集全球優秀的科學家一起以企業的方式產生各種創新技術,可以遇見未來阿里會帶給國人更多的技術突破,未來就是人才競爭的時代,誰擁有足量多的人才誰就能有更多的話語權,隨著國內軟件氛圍進一步提升,相信也會有更多自主性的技術產生。

其實對於王堅來講更應該感謝阿里決策層的堅決支持,玩雲計算沒有足量的資金支持不可能做出個樣子,而王堅很好的做出了表率,最近也看到王堅離開了阿里雲,事情的真假不是很清楚,對於個人來講已經在人生的道路上,增添了濃厚的一個色彩,至於後續是不是能夠繼續執掌阿里雲其實這都不是其個人要談的事情,這已經是阿里高層來決定的。

作為一個技術人員還是非常佩服王堅在如此壓力下,還能保持清晰的頭腦做出大膽的決定,並且把技術落地,也證明了一件事,中國的軟件人才一樣能做出讓世界矚目的事情,無形之中也增強自己的信心,對於阿里堅持自我研發道路確定更強的信心。

希望能夠幫到你。


大學生編程指南


我覺得,王堅在阿里雲的發展過程中,就像是大海航行中的舵手一樣,引領阿里雲不斷前進。

不得不說,王堅是非常有遠見的,他很早就意識到了只有自主研發的重要性,所以堅持要走自主研發的道路。

早在2007年,阿里巴巴就面臨著非常嚴峻的考驗,因為系統無法滿足集團不斷增長的數據處理需求,於是阿里巴巴從微軟亞洲研究院招來王堅博士,解決整個集團的算力問題。

當時,市面上基於開源技術的Hadoop集群,在可控性、安全性上存在隱患,可提供的服務也有很大的侷限性。雖然當時大家都在用Hadoop集群,但王堅清楚地認識到了其規模的侷限,決定要自主研發一套大數據計算系統,也就是MaxCompute。

自主研發的道路上肯定會面臨不少困難,但當時無論是基於Hadoop搭建的大數據系統還是自研的大數據計算平臺,都未能跨越5K 的集群規模的大山。

經過不懈努力,在2013年8月,王堅終於帶領團隊解決了這個難題,不僅讓新的基於飛天5K的MaxCompute生產集群規模達到5000,還實現了跨機房,並經受了整機房斷電的嚴苛考驗。

這也意味著,阿里成為了世界上為數不多具備5K計算能力的公司。更重要的是,阿里還成為了業界首家對外提供5K計算能力的公司。

現如今,作為單集群超過1萬臺服務器,數據規模更是達到EB級的大數據計算平臺,MaxCompute已經成為全球領先的大數據計算平臺。

阿里巴巴集團的核心業務都是由MaxCompute提供支撐。同時,阿里雲還將這種大數據處理能力對外開放,讓小型公司只需要花幾百元就可以分析海量的數據。

現在想來,如果十年前王堅沒有堅定地走自主研發的道路,也許就不會有MaxCompute的誕生,阿里巴巴和其他企業也都無法享受到MaxCompute帶來的便利了,忍不住要給王堅的遠見點贊!


一個退休的老者


芯片脖子上的那道血痕,永遠警示著每一個華夏兒女:不自主研發,就會受制於人,就永無安寧之日。而云計算是比芯片更重要的存在,它是中國未來社會的水電煤,特別是在今天這個政府積極擁抱雲計算大數據的時代




今後的昨天


自主研發通常需要投入巨量的人、財、物,短期看不到成功,遇到多方質疑仍要堅持初心。亞馬遜的AWS、微軟的Azure、阿里巴巴的阿里雲等全球最大的三朵雲都是自主研發。最終帶來的成果和利益也是顯而易見的。



魔卡啦啦啦


事實上,隨著雲計算市場上半場的結束,越來越多的雲計算廠商將目光轉移到了如政務雲市場這樣的行業市場之中。而阿里雲一直以來,作為中國公有云市場的龍頭老大,憑藉著自主研發的技術和其誕生於互聯網的創新思維,再度帶領著政務雲發展向新的方向前進。




追風的人r


只有自主研發才能把軟件的效能和硬件的能力整合在一起,只有通過創新技術,去替代原有的櫃機,讓CPU效率發揮到極至,才能讓開發者享受的雲計算的能力,在成本、性能、效果上得到運用,阿里雲做到了。





虛的白


可以說,將核心技術掌握在自己手裡的阿里雲不僅在國內雲市場常年穩居第一的市場份額,也通過基於飛天的應用在各行各業迎來了大爆發。阿里云為天貓構建了全球最大規模的混合雲,沒有自研的飛天是無法做到的。




君有嘉儀11


大家都知道,國內的科技企業雖然多,發展也很蓬勃,但擁有自主研發技術,還堅持了好多年的企業實在是太少了。在最初幾年裡,阿里雲在集團內部表現並不突出,技術上艱難,商業上也看不到可能性,如今讓眾人刮目相看了吧



關注black科技


到處都是阿里集團媒體,到處都是馬家軍,馬大溼控制媒體是想左右中國人民的思想嗎?馬家軍是想入主中原,馬大溼是想做大總統嗎?馬大溼你居心何在?


分享到:


相關文章: