返回頂部
關閉軟件導航
位置:首頁 > 資訊 > 電商資訊>云棲十年阿里和阿里云的四次技術抉擇
云棲十年阿里和阿里云的四次技術抉擇

文|張超

掐指算來,云棲大會已經完整走過了10年。

駐云科技CEO蔣爍淼是阿里云很早的客戶和伙伴,他在十年中見證了云棲大會四易其名,從“中國地方網站發展論壇”到“站長大會”,再到“阿里云開發者大會”,很終化繭成蝶,成了如今的“云棲大會”。

讓他印象很深的是2021年,馬云第一次上“云棲大會”演講,臺下只有幾百位聽眾,都是來自全國各地的個人站長。

那一年的海外海酒店,很多站長追著馬云問“移動互聯網的下一個機會在哪里?”

但是那個時候,幾乎沒人看好云計算的未來,一些反對者的邏輯簡單粗暴,云計算沒前途,就連美國人都搞不起來。到了2021年3月的中國IT領袖峰會,李彥宏不客氣地說云計算只是新瓶裝舊酒,馬化騰則認為云計算是好東西,但是太遙遠。

云棲十年阿里和阿里云的四次技術抉擇1

然而,馬云堅定看好云計算。事實證實,他是對的。

這10年來,互聯網江湖風云變幻,越來越多的企業開始投身到數字化的浪潮中,而阿里已經逐漸成長為中國企業數字化轉型的 關鍵力量。

但很多人不知道的是,阿里在這10年中,有過困難、也有過淚水,好在阿里有那么一幫人,在影響阿里生存和前途的四次 關鍵技術抉擇中,選擇堅持,選擇相信,才成就了如今的阿里巴巴。

時間回到2008年,當時阿里旗下的三大業務阿里巴巴B2B網站、淘寶、支付寶都在用Oracle(甲骨文)數據庫。

而Oracle數據庫跟IBM生產的小型機、EMC生產的存儲硬件配合使用,效果很明顯,早幾年使用時,甚至速度快到根本不用做任何優化,而這三家設備合起來就是“IOE設備”。

阿里和國內互聯網企業一樣,“IOE設備”離不開身,有一段時間,甚至一排一排地買IBM小型機。

當年,淘寶和支付寶使用的絕大部分都是IOE設備。

但是經歷了06-07年的爆發式增長后發現,“IOE設備”弊端凸顯。

比如貴。一臺IBM小型機就要500萬,兩臺小型機就要配一個300萬的EMC存儲,一排一排地買小型機,就不知道花了多少個500萬,Oracle商業數據庫軟件費用大概要幾千萬元人民幣,還得外加一大筆維護費。IBM的鐵架子(服務器)躺著拿走了阿里巴巴不少利潤。

又比如設備制約,擴展有限。當年天天早上八點到九點半之間,淘寶和支付寶的服務器處理器使用率都會飆升到98%,離爆棚就差兩個百分點。

當年阿里的數據庫已經成為全亞洲很大的數據庫用戶。以當時的技術能力,如此大的數據庫已經幾乎不具備擴展可能。

時任阿里巴巴研發院業務發展專家孫黎明說,“我們把全中國很知名的頂尖的DBA(數據庫治理員)請到公司,一個晚上一張報表都做不出來,沒有任何一家公司包括IBM、微軟,能夠為我們提供一整套的技術服務。”

王堅早前曾是浙江大學的心理學系教授,博士生導師。這樣一位首席架構師,既不是程序員、也不會寫代碼,到任后提出的第一件大事卻足以讓阿里的程序員們震動,“去IOE”。

“去IOE”說得簡單,但做起來卻非常難。但歷經各種挑戰之后,阿里這幫工程師確實拿出了一套新的技術架構。

大致的替代方案是這樣的:以廉價的PC服務器替代小型機,以基于開源MySQL數據庫的自研AliSQL數據庫替代Oracle數據庫,以阿里云代替高端存儲設備,形成一個嶄新的計算系統,代替原來的IOE傳統IT架構。

研究新計算系統的重任落到了2009年成立的阿里云身上。

完成這個重任,有兩條路可以選,一條基于開源協議和軟件構建一套計算系統(云梯1,以Hadoop為基礎),另一條就是純自主研發通用大規模分布式計算系統(云梯2,飛天),阿里做了兩手預備,兩條路同時上。

然而,計算系統搞出來了,在哪里試用又是一個大問題。

現在大家都會提到當時淘寶的技術團隊愿意創新,去嘗試“去IOE”這件事,但這是沒有辦法的辦法。

當淘寶公布要放棄Oracle,轉投自研數據庫架構的時候,淘寶八十多個Oracle工程師把時任淘寶技術保障數據庫治理員的負責人后羿堵在了辦公室里,群情激憤。

但是去IOE的大勢是不可能扭轉的。

2009年秋天,轟轟烈烈的IT架構升級項目在淘寶網正式啟動。一群Oracle工程師,就這樣含著淚,一點一點親手拆毀自己安身立命的系統……

就這樣,云梯1、云梯2,兩套系統一邊搭建,一邊在淘寶內部實驗,一邊承擔部分計算任務以緩解現有系統不足的壓力。

同樣在2009年,王堅還去了一趟美國硅谷。

在斯坦福大學的一場演講中,他第一次分享了“飛天”的基本想法。但是很多人認為在中國做“飛天”這樣的事一點都不靠譜,甚至王堅都覺得這些人是對的,因為“飛天”的難度確實太高了。

不過讓王堅興奮的是,有不少對“飛天”持懷疑態度的人陸續加盟阿里云,從事“飛天”技術的研發,他說,“因為做云計算,多多少少需要點浪漫主義的精神,否則做不好”。

當年6月,金融大咖胡曉明在阿里進行內部創業,擔任阿里金融的總裁。這次內部創業前,他答應了馬云提出的兩個條件:

第一,要做100萬人民幣以下的貸款生意,幫助借不到錢的創業者;第二但要和剛成立的阿里云綁在一起,用阿里云的技術架構支撐阿里金融的服務。

“牧羊犬”是阿里金融的第一個產品,簡單來說就是給淘寶商家貸款的項目。時任阿里金融研發工程師王國濤回憶:“當時阿里云一邊搭建飛天平臺,我們就一邊在飛天上面開發牧羊犬應用。這就像是開發商一邊在造房子,我們一邊在室內裝修鋪地板。”

而當時阿里云好不好用?是真不好用,各種Bug形式翻新,永不重復。

馬上要2021年的春節都要到了,胡曉明率先帶著核心骨干跑到王堅辦公室門口“討說法”。

胡曉明是出名的“只要認定的事情就一定要辦成”,大有在王堅辦公室打地鋪靜坐的架勢。

王堅無奈,派出所有的技術工程師,駐扎在阿里金融的現場加班開發,只為了“讓兄弟團隊能過個好年”。

當年春節之后,阿里云發布了一次大版本升級,之后的阿里云,妙不可言。

巨大的計算力讓阿里金融實現了“秒級”放貸。正是因為阿里云“高效低價”的加持,單賬戶每年的IT成本可以控制在1元以內。

阿里金融,成為了后來的網商銀行。他們就這樣無意間成為了中國第一個上云的銀行。

時間到了2021年,以開源軟件為基礎的“云梯1”計劃實現了4000臺集群調度,而阿里云團隊更看好的純自研“云梯2”還在1500臺集群數量徘徊。

從2021年開始到2021年,幾年時間,阿里云死磕5K,毫無進展,那幾年阿里云整個部門都在集團拿很低分,而關于王堅的議論更多,很多阿里的同學都叫王堅“騙子”,關閉阿里云的流言到處飛。

2021年阿里云的年會上,王堅一邊哭一邊說,“這兩年我挨的罵甚至比我一輩子挨的罵還多。但是,我不后悔。……”

關鍵時刻,馬云站出來了。他公開對阿里的高管們說,“我每年給阿里云投10個億,投個10年,做不出來再說。”

這一次,流言平息,大家的關注點回落到云梯1和云梯2上。因為更加火燒眉毛的事情出現了。

2021年3月28日,一封來自集團技術保障部架構師云錚的郵件直達高層:按照數據增量與未來業務增長的情況,云梯1和云梯2兩套系統的存儲和計算能力將在今年6月21日到達瓶頸。

假如繼續分別對云梯1、云梯2投入、重復建設,開發和維護成本很高,浪費巨大,上個月的時間,必須舍棄一個,全力做好另一個。

2021年10月,阿里獨立研發的飛天5K計劃完成,單集群服務器規模達到5000臺,100TB排序能在30分鐘完成,遠超今年雅虎公司同年7月創造的世界紀錄—71分鐘。阿里云成為世界上第一個對外提供5K云計算服務能力的公司。

阿里云終于在集團內證實了自己,阿里內部關于做不做云計算,王堅到底靠不靠普的爭論忽然就煙消云散了。

現在的飛天,已經深入到各個領域,工業、農業、政務、動畫、交通……逐漸成為一種公共服務。

比如杭州在用的“城市大腦”。

“城市大腦”是2021年3月由王堅首次提出來的。

2021年10月,阿里云開發者大會改名“云棲大會”后的第二年,這一年的云棲大會上,杭州市發布了全球第一個城市大腦計劃。

2021年7月,杭州城市大腦V1.0版本系統正式上線運行,一年后,效果顯著。

通過一年的努力,杭州城市大腦成功接管128個路口,試點區域通行時間減少15.3%,高架道路出行時間節省4.6分鐘,攝像頭和信號燈終于“發生關系”了。

在主城區,城市大腦對交通事件進行智能報警,日均事件報警數達5000次,正確率達92%,大大提高了執法指向性。

在蕭山區,城市大腦讓交通信號燈聽到救護車的呼喚,創新實現了120救護車等特種車輛的優先調度,120救護車到達現場的時間縮短一半。

數據還顯示,城市大腦上線一年,視頻監控自動發現事件19200起,對城市的事故和違章進行自動檢測和報警,包括摩托車闖禁、交通事故等,支撐了交通事件的快速處理;新發現了6個交通亂點,通過嚴格治理、優化交通組織后得到了改善;進行了信號燈優化配時調整,信號燈報警并調整配時方案8000余次……

現在,城市大腦可以通過已經存在的攝像頭數據,看到每一個路口過了多少輛車,車的類型、走向,還可以獲得行人的信息,比如行人有多少,過紅綠燈要多長時間,等待了多長時間。新的通過視覺收集到的信息可以放在交通優化模型里,識別并提前猜測出交通堵點,并能夠得到更正確的紅綠燈優化配置方案……

阿里的中臺概念,很早可以追溯到2008年。

當年5月10日,阿里發布了淘寶商城,也就是現在的天貓。現在的你能想象當時淘寶商城和淘寶網是相互獨立的兩套系統嗎?淘寶商城有自己獨立的會員、商品、交易、店鋪、優惠積分等系統,優選和淘寶共享的是會員數據,淘寶商城運行了半年,由于數據和系統的獨立,沒辦法方便快速借力淘寶的大流量,這也不符合互聯網快速變化業務的特性,所以業務方決定徹底打通淘寶和淘寶商城的數據和系統。

2008年10月,淘寶網和淘寶商城的數據打通項目開始啟動,代號“五彩石”,這個項目由時任淘寶技術總架構師張建鋒直接負責,常駐杭州華星世紀大樓1樓的項目室。研發人員有60多人,項目結束后統計參與人員共計200多人。在這個項目之前,一般超過10人參與的項目就已經算是公司級的大項目了,可見當時這個項目的決心。

五彩石項目是分三期來實施的,都帶有明確的業務目標,第一期完成商品體系的整合,第二期完成交易體系的整合,第三期以打通淘寶網的店鋪和淘寶商城的店鋪為主。另外一條項目主線是架構重構,通過不斷抽取共享服務,形成服務化架構的電商平臺。

五彩石項目并沒有以淘寶網或者淘寶商城的架構為基礎進行演進式改進,而是進行了徹底的重構,是一次全新的架構升級。

這其中就有了后來中臺的影子:比如抽離出每個業務的共性功能,如交易、支付、會員等等,打包成“磚塊”,房子千奇百怪,但磚頭都是一樣的,做一個新業務就變得非常簡單;又比如讓數據沉淀到統一的池子,為之后喂養數據智能奠定基礎。

另外,為了解決隨之帶來的技術擴展性問題,五彩石項目還引進了分布式中間件技術,本質上是讓多臺廉價PC服務器組成一臺超級服務器。

2009年,淘寶商城成立第二年,第一屆“雙11”活動誕生,淘寶商城的成交額是平時的10倍,效果驚人,證實了五彩石項目獲得了成功……

十年時間,五彩石項目化身中臺,阿里云則在2021年升級為阿里云智能,將中臺能力與云全面結合。

現在阿里云也正在發揮中臺優勢,為商家賦能。

波司登信息總監桂益龍回憶,“2021年,波司登借助阿里云的互聯網中間件技術,依托企業級互聯網架構建設波司登‘零售云’平臺,基于中臺架構思想,結合波司登的業務特性,建立起波司登‘零售業務共享服務層’,包括全局共享的用戶中心、交易中心、庫存中心、訂單中心,然后基于共享中臺構建上層業務模塊,這些業務模塊能夠靈活適應不同業務項目、不同業務流程。”

波司登通過“零售云”平臺,可以實時監控全國3000多家門店的庫存和銷售情況,進而降低庫存壓力和物流成本,提升商品售罄率,近兩年利潤猛增。

這是一個馬云寄予厚望的部門,承載了阿里巴巴很頂尖的研發資源,達摩院意味著技術創新,也代表著阿里的未來。

馬云還對“達摩院”提出了三個要求。

云棲十年阿里和阿里云的四次技術抉擇2

第一,必須活的比阿里巴巴長久,“企業是有周期的,但能留下來的,是阿里巴巴的技術、經驗以及對社會的擔當。現在我們已經18年了,還有84年要走,“達摩院”至少要活85年”。

第二,“達摩院”至少要服務全世界20億人口,為1000萬家企業創造盈利的空間和機遇,“希望達摩研究院解決1億就業機會,即普惠共享、可持續發展以及快樂”。

第三,“達摩院”必須自己具備盈利的能力,“天下只有自己靠得住”,今年阿里巴巴將啟用1000億人民幣作為啟動基金,在全球尋找人才,但是未來得依靠“達摩院”自己。

在武俠世界里,“達摩院”代表著武林絕學和至尊,這是時任阿里巴巴董事局主席馬云為新成立的研究院取的名字。

但在10多年前,馬云甚至還在果斷反對公司有任何研究室、實驗室,因為在他看來,當時阿里巴巴還是一個初創公司,在還沒有立足之前就考慮研發是大災難。

“達摩院”首批公布的13個研究領域,包括量子計算、機器學習、基礎算法、網絡安全、視覺計算、自然語言處理、下一代人機交互、芯片技術、傳感器技術、嵌入式系統等,涵蓋機器智能、智聯網、金融科技等多個產業領域。

達摩院是一個技術密集型團隊,但它并不是只專注于技術的研究,同時也要把這些技術產品化。這些技術還要放到云上,分享給阿里云的合作伙伴。

成立兩年后,達摩院日前對外公布了研究成果及進展。

截至2021年9月,達摩院在國際高級學術會議上累計發表近450多篇論文,在自然語言處理、智能語音、視覺計算等領域算法奪得40多項世界第一,已成為阿里聚集科技人才和基礎技術研發的“技術基石”。

目前達摩院內“高手如林”,擁有10多位IEEEFELLOW、30多位知名高校教授、超過一半的科學家擁有名校博士學歷。

云棲十年阿里和阿里云的四次技術抉擇3

達摩院區塊鏈實驗室已申請專利500余項,連續三年蟬聯全球區塊鏈企業專利申請數量排行榜第一,讓奶粉、紅酒、大米、化妝品等數億商品有了自己的身份證;達摩院自動駕駛實驗室推出了業界前期實現車路協同的自動駕駛方案,在多個半封閉園區實現了L4級別自動駕駛物流車日常化運營……

在攀登世界科技高峰上,達摩院也交出了出色的答卷。達摩院成功孵化出了平頭哥半導體公司,已經推出3款面向公開市場的芯片類產品,包括很強RISC-V芯片處理器玄鐵910,芯片設計平臺無劍平臺以及很強AI推理芯片含光800,全面推動芯片算力進入普惠時代。

現在,達摩院和阿里云的下一個十年已經開啟,期待他們的成績。

100年前,倫敦向世界輸出了地鐵,巴黎輸出了下水道,紐約輸出了電網。今天,杭州攜手阿里云,正向世界貢獻數字化城市方案。

馬云曾說,技術變革50年,未來的30年應用變革將深入到方方面面。在技術變革的大趨勢下,依靠傳統的資源消耗型企業必定越來越難。不擁抱新制造的企業,就如同盲人開車,你都不知道誰是你的客戶,客戶到底需要什么。

未來的阿里云是世界第一朵“無處不在的智能云”,阿里云將幫助更多企業在云上用科技探索新商業邊界,創造新商業模式。

參考資料:

史中:《阿里云的這群瘋子》淺黑科技

王堅:《在線》中信出版集團

阿里巴巴集團雙11技術團隊:《盡在雙11》中國工信出版集團電子工業出版社

田豐崔昊:《云戰略》中信出版集團

虎研所:《生于疼痛的阿里云》虎嗅

阿里巴巴集團:《2021阿里技術年度精選》

如果您覺得 云棲十年阿里和阿里云的四次技術抉擇 這篇文章對您有用,請分享給您的好友,謝謝
文章地址:http://www.meyanliao.com/article/online/12574.html
解放雙手無盡可能,有問題添加天線貓微信
主站蜘蛛池模板: 精品无码久久久久久久久久| 乱色精品无码一区二区国产盗| 国产∨亚洲V天堂无码久久久| 久久亚洲AV成人无码软件| 狼人无码精华AV午夜精品| 亚洲成av人无码亚洲成av人| 日韩av无码免费播放| 色窝窝无码一区二区三区成人网站 | 日韩精品中文字幕无码专区 | 少妇中文无码高清| 成人无码午夜在线观看| 一本色道无码不卡在线观看| 特级无码毛片免费视频尤物| 亚洲性无码av在线| av无码一区二区三区| 亚洲精品无码人妻无码| yy111111少妇无码影院| 97免费人妻无码视频| 无码人妻丰满熟妇啪啪网站牛牛| 日韩免费无码一区二区视频| 国产成人亚洲综合无码| 无码专区人妻系列日韩精品少妇| 免费无码黄网站在线观看| 亚洲国产成人精品无码区在线秒播| 色国产色无码色欧美色在线| 亚洲AV无码专区在线亚| 亚洲国产成人片在线观看无码| 人妻丝袜中文无码av影音先锋专区| 免费无码国产V片在线观看| 亚洲午夜无码久久| 亚洲人片在线观看天堂无码 | 高潮潮喷奶水飞溅视频无码| 久久久久亚洲av无码专区喷水 | 精品久久久久久无码专区| 无码伊人66久久大杳蕉网站谷歌| 成年无码av片在线| 国产网红无码精品视频| 久久国产亚洲精品无码| 精品人妻无码区在线视频| 亚洲精品中文字幕无码A片老| 久久午夜福利无码1000合集|