圖片來(lái)源@視覺(jué)中國(guó)
技術(shù)周期和商業(yè)周期并不總是同步，從歷史發(fā)展來(lái)看，每一次商業(yè)周期的下行階段，常常伴隨技術(shù)周期新的開(kāi)端。
過(guò)去兩年，全球云計(jì)算基礎(chǔ)設(shè)施投資已經(jīng)超過(guò)了傳統(tǒng)IT領(lǐng)域的技術(shù)投資，世界正在加速駛向云計(jì)算。在2022年財(cái)報(bào)里，阿里巴巴披露了其用云支出達(dá)到了200多億。在前段時(shí)間的云棲大會(huì)上，阿里技術(shù)風(fēng)險(xiǎn)與效能負(fù)責(zé)人張瓅玶表示，經(jīng)過(guò)持續(xù)多年上云用云，今年阿里巴巴集團(tuán)在PaaS（包括大數(shù)據(jù)、機(jī)器學(xué)習(xí)平臺(tái)、數(shù)據(jù)庫(kù)中間件等）支持的業(yè)務(wù)形態(tài)中支出占用云總成本達(dá)43%。與此同時(shí)，阿里巴巴今年也正式確立了以“云原生”作為集團(tuán)整體技術(shù)架構(gòu)的戰(zhàn)略，正式進(jìn)入“全面云原生深度用云”階段。
在外界對(duì)阿里巴巴深度用云的諸多解讀中，增效降本成為了一個(gè)避不開(kāi)的話題。的確，增效降本確實(shí)是企業(yè)數(shù)字化轉(zhuǎn)型的最關(guān)鍵的目標(biāo)，但對(duì)于阿里巴巴來(lái)說(shuō)，增效降本只是深度用云的效果之一，這背后的更多深意是一家中國(guó)互聯(lián)網(wǎng)公司在技術(shù)長(zhǎng)征路上，不斷創(chuàng)新和探索的新故事。
新一輪的科技變革正在深入發(fā)展，以云為核心的新型計(jì)算體系正在形成，軟件研發(fā)范式也正在發(fā)生新的變革。“深度用云”更高層次的意義在于對(duì)計(jì)算體系結(jié)構(gòu)的創(chuàng)新，以及以此而帶來(lái)的長(zhǎng)尾創(chuàng)新，這包括數(shù)據(jù)庫(kù)、芯片等核心技術(shù)領(lǐng)域的自研突破，以及企業(yè)本身生產(chǎn)經(jīng)營(yíng)范式等面臨的大變化。
作為全球首家將所有業(yè)務(wù)放在公共云上的科技企業(yè)，阿里巴巴在過(guò)去十年經(jīng)歷了云計(jì)算能力從單點(diǎn)試驗(yàn)到規(guī)?；瘧?yīng)用的躍遷式變革。從“阿里巴巴上云”到“云上的阿里巴巴”，阿里正在引領(lǐng)一個(gè)全面深度用云的時(shí)代。這種底層自研技術(shù)的進(jìn)化，將帶來(lái)未來(lái)業(yè)務(wù)的敏捷創(chuàng)新及消費(fèi)體驗(yàn)的變革，引領(lǐng)商業(yè)與社會(huì)系統(tǒng)走向更全面深度的融合。
阿里巴巴首席技術(shù)官程立曾公開(kāi)表示，云計(jì)算開(kāi)啟了開(kāi)源新時(shí)代——云是數(shù)字世界的基座，云也為開(kāi)源軟件提供了最佳運(yùn)行環(huán)境，云 + 開(kāi)源共同成為數(shù)字世界的根。云與開(kāi)源的結(jié)合，將激發(fā)基礎(chǔ)軟件和技術(shù)的進(jìn)一步創(chuàng)新。
2009年創(chuàng)立之時(shí)，阿里巴巴就啟動(dòng)了搜索、推薦業(yè)務(wù)上云。搜索推薦業(yè)務(wù)對(duì)技術(shù)性能有極致的要求，彼時(shí)阿里云的云技術(shù)尚未成熟。2015年，阿里電商業(yè)務(wù)增長(zhǎng)，開(kāi)始雙11彈性上云以解決大促資源的計(jì)算缺口。2019年阿里巴巴實(shí)現(xiàn)核心系統(tǒng)上云，因?yàn)樘詫?、天貓等業(yè)務(wù)體量龐大，一開(kāi)始的階段最主要關(guān)注技術(shù)架構(gòu)的性能穩(wěn)定性。
到了2020年，阿里巴巴開(kāi)始實(shí)現(xiàn)全面云原生化，直至2021年阿里完成了包括電商主營(yíng)業(yè)務(wù)在內(nèi)的數(shù)千萬(wàn)核心算力、數(shù)萬(wàn)應(yīng)用的全面上云。
從阿里巴巴深度用云的過(guò)程可以看出，早期的云計(jì)算技術(shù)發(fā)展更關(guān)注自身產(chǎn)業(yè)鏈的完整，補(bǔ)足從基礎(chǔ)設(shè)施、平臺(tái)到應(yīng)用的各個(gè)層次。如今，以云原生為代表的新一代云計(jì)算技術(shù)，重在提升效率，賦能業(yè)務(wù)生產(chǎn)，這是技術(shù)逐步發(fā)展成熟的一個(gè)標(biāo)志。
阿里巴巴自身作為阿里云的真實(shí)客戶(hù)，通過(guò)十多年來(lái)業(yè)務(wù)的實(shí)際需求和系統(tǒng)演進(jìn)，協(xié)助打磨提升了阿里云的核心能力，實(shí)現(xiàn)了阿里自研技術(shù)能力的提升，這在后來(lái)成為阿里云能更好服務(wù)外部客戶(hù)的基礎(chǔ)前提。
“阿里云的技術(shù)需要滿足每一個(gè)超越當(dāng)下產(chǎn)品能力的要求，而這個(gè)過(guò)程，也有效促進(jìn)了阿里云的技術(shù)不斷成長(zhǎng)，幫助內(nèi)部節(jié)省成本，也給行業(yè)、客戶(hù)提供了重要的價(jià)值。”張瓅玶補(bǔ)充道。
在阿里看來(lái)，通過(guò)用好云能夠?qū)崿F(xiàn)整體的增效降本，并且實(shí)現(xiàn)基礎(chǔ)軟件和硬核技術(shù)創(chuàng)新。借助用好云和自研技術(shù)組合，也推動(dòng)了自身業(yè)務(wù)增長(zhǎng)以及用戶(hù)和商家體驗(yàn)創(chuàng)新。更重要的是，這將改變企業(yè)內(nèi)部技術(shù)人才設(shè)計(jì)，更有效利用和釋放云的能力。
以云計(jì)算發(fā)展歷程來(lái)看，用云形態(tài)主要包括IaaS（基礎(chǔ)設(shè)施即服務(wù)）、PaaS（平臺(tái)即服務(wù)）、SaaS（軟件即服務(wù)）三類(lèi)。企業(yè)在數(shù)字化轉(zhuǎn)型初期，主要借助云計(jì)算能力構(gòu)建IaaS資源平臺(tái)，統(tǒng)一云上云下資源以提升效率。
隨著大數(shù)據(jù)、AI產(chǎn)業(yè)發(fā)展，帶來(lái)了算力需求的變化，用云形態(tài)也發(fā)生改變，對(duì)PaaS投入比重高，意味著用云進(jìn)入深入階段。據(jù)IDC報(bào)告顯示，2021年中國(guó)公有云（IaaS+PaaS）市場(chǎng)PaaS支出占比為16.8%。
據(jù)張瓅玶介紹，在2022年的用云支出里面IaaS層的比例是57%，而PaaS層，包括大數(shù)據(jù)、中間件等占到了43%，相比之下，阿里巴巴在PaaS投入比重已超過(guò)業(yè)內(nèi)平均水平。這樣的高占比的支出，也是一個(gè)典型的深入用云的標(biāo)志。
在阿里看來(lái)，未來(lái)三年P(guān)aaS的比重還將持續(xù)增加。由于業(yè)務(wù)形態(tài)對(duì)算力增長(zhǎng)的需求會(huì)傾斜在大數(shù)據(jù)AI，這一側(cè)的增長(zhǎng)隨著技術(shù)發(fā)展會(huì)指數(shù)增長(zhǎng)的，例如圖像識(shí)別的模型去年到今年就有了10倍規(guī)模的提升。機(jī)器學(xué)習(xí)、大數(shù)據(jù)支持用戶(hù)的體驗(yàn)，要增長(zhǎng)一兩個(gè)百分點(diǎn)的效率，模擬訓(xùn)練就要擴(kuò)大很多倍，這也是PaaS占比持續(xù)提升的原因。
這種“靈活彈性”效果在今年的雙11體現(xiàn)得淋漓盡致。
今年雙11是三峰疊加的第一年，在11月10號(hào)晚上8點(diǎn)開(kāi)始，用戶(hù)發(fā)現(xiàn)：下單、預(yù)售尾款支付、退款功能都同時(shí)打開(kāi)了。即使在下單高峰期，消費(fèi)者也可以隨時(shí)隨心想退就退。
應(yīng)對(duì)三峰疊加壓力的背后，和阿里的深度用云、全面彈性能力密不可分。
實(shí)際上，每年雙11開(kāi)賣(mài)的那一刻，千萬(wàn)用戶(hù)同時(shí)在線下單，導(dǎo)致瞬間服務(wù)器的壓力是平時(shí)流量的數(shù)百倍，為了保障穩(wěn)定，阿里每年要提前買(mǎi)很多機(jī)器保障大促，只要交易不出問(wèn)題、系統(tǒng)不出問(wèn)題，即使很多體驗(yàn)會(huì)因此折損，也是成功的。
今年，阿里開(kāi)始非常關(guān)注用戶(hù)體驗(yàn)，云計(jì)算全面彈性的優(yōu)勢(shì)也發(fā)揮了出來(lái)。彈性的架構(gòu)能力使得業(yè)務(wù)能夠部署到公有云的全球站點(diǎn)，具備全球站點(diǎn)快速拉起服務(wù)的能力。所以，今年的雙11從信息流到詳情、店鋪、購(gòu)物車(chē)等核心鏈路，包括各層面的基礎(chǔ)設(shè)施都發(fā)生了很多變化。
借助云的隨申隨用，彈性資源供給能力，不僅可以支持流量峰值、提供性?xún)r(jià)比更優(yōu)的算力支撐，研發(fā)運(yùn)維、大促保障的方法也正在發(fā)生相應(yīng)的改變。
張瓅玶表示： “成本要以業(yè)務(wù)單位算力成本來(lái)看，而非傳統(tǒng)認(rèn)知中把物理機(jī)器成本做簡(jiǎn)單的分?jǐn)偂＜纫吹秸麄€(gè)機(jī)房和集群的分配、閑置的影響，也要看到業(yè)務(wù)架構(gòu)、資源利用率水平，存儲(chǔ)和網(wǎng)絡(luò)的彈性能力等對(duì)成本和效能的影響。”
以阿里推動(dòng)上云業(yè)務(wù)升級(jí)的云產(chǎn)品Flink為例，業(yè)務(wù)主體在兩個(gè)月時(shí)間內(nèi)就完成了云上遷移，并實(shí)現(xiàn)了性能提升30%以上，成本下降30%，整個(gè)過(guò)程不需要關(guān)注原有集群機(jī)器閑置成本以及產(chǎn)品研發(fā)團(tuán)隊(duì)投入。
在過(guò)去三年，阿里從核心系統(tǒng)上云、到全面深度用云，已經(jīng)正式實(shí)現(xiàn)了從統(tǒng)一調(diào)度到全面FinOps（云成本優(yōu)化）實(shí)踐，即運(yùn)用成本管理體系支撐優(yōu)化，通過(guò)云計(jì)算的彈性能力實(shí)現(xiàn)了機(jī)器閑置率下降和支持峰值分配率的提升、神龍?zhí)摂M化架構(gòu)帶來(lái)的CPU利用率提升、以及存儲(chǔ)、網(wǎng)絡(luò)彈性成本下降，最終帶來(lái)業(yè)務(wù)整體單位算力成本下降。
除了成本優(yōu)化，全面深度用云也帶來(lái)了阿里業(yè)務(wù)的敏捷創(chuàng)新。通過(guò)用云產(chǎn)品靈駿智能計(jì)算快速實(shí)現(xiàn)超大規(guī)模機(jī)器學(xué)習(xí)模型訓(xùn)練交付，在大規(guī)模稀疏場(chǎng)景中，訓(xùn)練萬(wàn)億樣本數(shù)據(jù)時(shí)間從兩周縮短到半周，提效四倍，訓(xùn)練集群成本下降50%。
通過(guò)對(duì)阿里集團(tuán)調(diào)用量最大的數(shù)據(jù)庫(kù)之一Tair的用云優(yōu)化，今年雙11淘寶購(gòu)物車(chē)擴(kuò)容技術(shù)以輕量化連接、異步支持技術(shù)支撐起超大連接數(shù)，使單集群訪問(wèn)流量達(dá)到100GB/s，承載數(shù)億用戶(hù)同時(shí)在線加大購(gòu)物車(chē)。
據(jù)介紹，今年阿里使用了60多款重點(diǎn)PaaS/SaaS產(chǎn)品，這些產(chǎn)品全球多region開(kāi)箱即用、無(wú)需運(yùn)維維護(hù)，減少了大量運(yùn)維成本，并實(shí)現(xiàn)了隨時(shí)彈性。
在阿里巴巴看來(lái)，未來(lái)的數(shù)字世界，必須基于彈性、敏捷的架構(gòu)來(lái)構(gòu)建，全面深度云原生化則是實(shí)現(xiàn)彈性、敏捷的必由之路。隨著“全面深度云原生化”，也將打開(kāi)越來(lái)越多的限制、創(chuàng)造更多的業(yè)務(wù)可能性。
經(jīng)歷了十多年的業(yè)務(wù)實(shí)戰(zhàn)，阿里早已預(yù)判未來(lái)業(yè)務(wù)、技術(shù)架構(gòu)、相互依賴(lài)將變得越來(lái)越復(fù)雜，而開(kāi)發(fā)者面臨的技術(shù)挑戰(zhàn)也將越來(lái)越巨大。阿里希望不僅只是依靠云的能力來(lái)優(yōu)化成本，還應(yīng)全面升級(jí)研發(fā)模式和應(yīng)用架構(gòu)，來(lái)幫助開(kāi)發(fā)者提效。
Serverless 就是關(guān)鍵的發(fā)展趨勢(shì)之一。
今年，阿里巴巴內(nèi)部確立了以“云原生”作為集團(tuán)整體技術(shù)架構(gòu)的戰(zhàn)略，向 Serverless 化邁進(jìn)，以實(shí)現(xiàn)更加彈性和敏捷的系統(tǒng)架構(gòu)。同時(shí)阿里云也在今年的云棲大會(huì)宣布核心產(chǎn)品走向全面Serverless，云正在通過(guò)產(chǎn)品能力提升致力讓開(kāi)發(fā)者用云就像用電一樣簡(jiǎn)單，為云上業(yè)務(wù)敏捷提供更強(qiáng)力的支撐。
基于 Serverless 架構(gòu)，云上研發(fā)方式正在發(fā)生根本性的改變。開(kāi)發(fā)者不需要關(guān)心過(guò)多的資源配置等工作，直接在云上高效進(jìn)行研發(fā)、運(yùn)維、部署、建站。Serverless 還能夠降低軟件開(kāi)發(fā)門(mén)檻，提供更多的預(yù)制模塊，大幅提高軟件生產(chǎn)效率，開(kāi)啟云上研發(fā)新模式。
程立表示，云原生 Serverless 化正在加速重塑阿里應(yīng)用架構(gòu)和研發(fā)模式。
今年雙 11，淘寶首頁(yè)就實(shí)現(xiàn)了 100% Serverless 化，通過(guò)更輕量靈活規(guī)范地用云，實(shí)現(xiàn)了應(yīng)用輕量化和運(yùn)維效率的顯著提升，應(yīng)用部署時(shí)長(zhǎng)縮短一半。
Serverless將讓云計(jì)算從一種資源真正變成一種能力。當(dāng)云計(jì)算全面Serverless化，客戶(hù)不再需要關(guān)心運(yùn)維問(wèn)題，只需要關(guān)注開(kāi)發(fā)業(yè)務(wù)邏輯，充分利用云的彈性能力，讓?xiě)?yīng)用依賴(lài)標(biāo)準(zhǔn)化云服務(wù)，讓?xiě)?yīng)用可以隨時(shí)在云上環(huán)境彈性部署、隨申隨用云資源，幫助開(kāi)發(fā)者和企業(yè)實(shí)現(xiàn)敏捷創(chuàng)新。
值得一提的是，阿里正在努力向社會(huì)化大協(xié)同邁進(jìn)，還將不少技術(shù)完全開(kāi)源給全社會(huì)。
其一是大規(guī)模搜索技術(shù)。Havenask是阿里巴巴內(nèi)部廣泛使用的大規(guī)模分布式搜索引擎，是阿里電商搜索和推薦業(yè)務(wù)中最核心部分的圖化引擎之一。它的實(shí)時(shí)檢索效率高，能夠支持千億級(jí)別數(shù)據(jù)實(shí)時(shí)檢索，百萬(wàn)QPS查詢(xún)，百萬(wàn)TPS高時(shí)效性寫(xiě)入保障，毫秒級(jí)查詢(xún)延遲和數(shù)據(jù)更新。Havenask支持了淘寶、天貓、菜鳥(niǎo)、優(yōu)酷在內(nèi)的整個(gè)阿里巴巴集團(tuán)的搜索業(yè)務(wù)，也是過(guò)去十多年阿里在整個(gè)電商領(lǐng)域積累下來(lái)的核心競(jìng)爭(zhēng)力的產(chǎn)品，在今年雙11期間正式開(kāi)源。不僅是在電商、互聯(lián)網(wǎng)行業(yè)，借助大規(guī)模搜索系統(tǒng)，將會(huì)有更多產(chǎn)業(yè)實(shí)現(xiàn)效率升級(jí)和體驗(yàn)進(jìn)步。
其二是大規(guī)?；觳肯到y(tǒng)。阿里巴巴早在2016年就啟動(dòng)了混部技術(shù)研發(fā)，作為云原生混部的踐行者，阿里巴巴是真刀真槍地在生產(chǎn)環(huán)境中推進(jìn)混部技術(shù)理念，在2021年雙 11 就實(shí)現(xiàn)了混部技術(shù)全面升級(jí)，支撐了全球數(shù)十個(gè)數(shù)據(jù)中心、數(shù)百萬(wàn)容器、數(shù)千萬(wàn)核的大規(guī)模資源調(diào)度。
為了幫助企業(yè)更快速獲取云原生混部帶來(lái)的資源效率紅利，阿里在今年開(kāi)源了 Koordinator 項(xiàng)目，并在云棲大會(huì)發(fā)布了Koordinator 1.0，在標(biāo)準(zhǔn)化、通用化上做出了更多的突破。Koordinator可以解決企業(yè)應(yīng)用混部的過(guò)程中面臨的兩大挑戰(zhàn)：應(yīng)用如何接入到混部平臺(tái)；應(yīng)用如何在平臺(tái)上能夠運(yùn)行穩(wěn)定、高效 ，幫助企業(yè)真正意義上的用上混部，提高全局的資源利用效率。從2022年4月正式開(kāi)源以來(lái)，Koordinator 社區(qū)吸引了包括阿里巴巴、小米、小紅書(shū)、愛(ài)奇藝、360 在內(nèi)的企業(yè)參與貢獻(xiàn)。
秉持著開(kāi)放共贏的態(tài)度，阿里巴巴將技術(shù)大規(guī)模開(kāi)源，持續(xù)降低使用門(mén)檻，讓技術(shù)融入社會(huì)的方方面面。
阿里巴巴的深度用云之路，也給各行各業(yè)建立了新的范本。龐大的技術(shù)投入要聚焦于自身的核心競(jìng)爭(zhēng)力，其次，還要有架構(gòu)和研發(fā)模式升級(jí)的決心。
基于當(dāng)下，探索未來(lái)。不管是Serverless，還是開(kāi)源，阿里巴巴技術(shù)探索的未來(lái)，就像程立說(shuō)的那樣：“讓所有人都可以使用，而且可以直接在云上使用。”
（本文首發(fā)鈦媒體App）
快報(bào)
根據(jù)《網(wǎng)絡(luò)安全法》實(shí)名制要求，請(qǐng)綁定手機(jī)號(hào)后發(fā)表評(píng)論
很客觀,值得一讀.
值得認(rèn)真的閱讀