在人工智能(AI)技術(shù)迅猛發(fā)展的今天,技術(shù)架構(gòu)和產(chǎn)業(yè)生態(tài)正經(jīng)歷著前所未有的變革。作為中國(guó)知名的科技創(chuàng)業(yè)者和前微軟、百度高管,陸奇以其深刻的行業(yè)洞察力,指出了人工智能時(shí)代一個(gè)關(guān)鍵趨勢(shì):芯片和底層軟件“基本都要重做”。這一論斷不僅揭示了技術(shù)底層革新的必然性,也為我們理解未來(lái)AI基礎(chǔ)軟件開(kāi)發(fā)的路徑提供了重要視角。
從芯片層面來(lái)看,傳統(tǒng)以CPU為中心的通用計(jì)算架構(gòu)已難以滿足AI對(duì)大規(guī)模并行處理和能效比的極致要求。AI模型,特別是大型深度學(xué)習(xí)模型,其訓(xùn)練和推理過(guò)程涉及海量矩陣運(yùn)算,這催生了針對(duì)AI計(jì)算特性專(zhuān)門(mén)設(shè)計(jì)的芯片,如GPU、TPU、NPU以及各類(lèi)ASIC芯片的興起。陸奇所強(qiáng)調(diào)的“重做”,意味著芯片設(shè)計(jì)需要從底層開(kāi)始,圍繞AI工作負(fù)載進(jìn)行優(yōu)化,實(shí)現(xiàn)更高的計(jì)算密度、更低的功耗和更靈活的可編程性。這不僅是一場(chǎng)硬件性能的競(jìng)賽,更是計(jì)算范式的根本轉(zhuǎn)變,將推動(dòng)從云端到邊緣的智能算力實(shí)現(xiàn)全面升級(jí)。
在底層軟件層面,傳統(tǒng)的操作系統(tǒng)、編譯器、驅(qū)動(dòng)程序和運(yùn)行時(shí)環(huán)境同樣面臨重構(gòu)。AI芯片的多樣性和專(zhuān)用性,要求底層軟件棧能夠高效地管理和調(diào)度異構(gòu)計(jì)算資源,將復(fù)雜的AI算法高效映射到底層硬件上。這需要開(kāi)發(fā)全新的系統(tǒng)軟件,例如針對(duì)AI優(yōu)化的新型操作系統(tǒng)內(nèi)核、能夠跨平臺(tái)和跨硬件進(jìn)行高效編譯與部署的深度學(xué)習(xí)編譯器(如TVM、MLIR等),以及統(tǒng)一、抽象的硬件加速接口和運(yùn)行時(shí)庫(kù)。陸奇的觀點(diǎn)提示我們,AI基礎(chǔ)軟件的核心使命是“軟化”硬件差異,為上層應(yīng)用提供穩(wěn)定、高性能且易用的計(jì)算抽象,從而降低AI開(kāi)發(fā)的復(fù)雜性和門(mén)檻,加速創(chuàng)新應(yīng)用的落地。
聚焦于“人工智能基礎(chǔ)軟件開(kāi)發(fā)”,這正是連接底層硬件重構(gòu)與上層AI應(yīng)用繁榮的關(guān)鍵橋梁。這一領(lǐng)域的開(kāi)發(fā)涉及多個(gè)核心層面:
- 計(jì)算框架與編譯器:如TensorFlow、PyTorch等深度學(xué)習(xí)框架需要持續(xù)進(jìn)化,其底層執(zhí)行引擎和編譯器技術(shù)需能充分利用新型芯片的算力,實(shí)現(xiàn)模型訓(xùn)練和推理的自動(dòng)優(yōu)化與加速。
- 系統(tǒng)軟件與中間件:包括資源調(diào)度與管理、分布式訓(xùn)練框架、模型服務(wù)化部署平臺(tái)等,它們確保AI算力能夠被高效、可靠、彈性地供給給大規(guī)模應(yīng)用。
- 開(kāi)發(fā)工具與平臺(tái):提供從數(shù)據(jù)管理、模型構(gòu)建、訓(xùn)練、評(píng)估到部署監(jiān)控的全生命周期工具鏈,提升開(kāi)發(fā)者的生產(chǎn)效率。
- 安全與可信軟件:隨著AI深入核心領(lǐng)域,確保AI系統(tǒng)的安全性、可靠性、可解釋性和隱私保護(hù),成為基礎(chǔ)軟件必須內(nèi)建的關(guān)鍵能力。
陸奇的判斷預(yù)示著,在AI時(shí)代,芯片、底層軟件和基礎(chǔ)軟件開(kāi)發(fā)將形成一個(gè)緊密聯(lián)動(dòng)、共同演進(jìn)的“鐵三角”。中國(guó)的科技產(chǎn)業(yè)在其中擁有巨大的機(jī)遇。通過(guò)抓住芯片架構(gòu)變革的窗口期,并行投入底層軟件和基礎(chǔ)軟件生態(tài)的建設(shè),有望在人工智能的基礎(chǔ)設(shè)施層構(gòu)建起自主可控的核心競(jìng)爭(zhēng)力。這不僅是技術(shù)挑戰(zhàn),更是一場(chǎng)關(guān)乎未來(lái)產(chǎn)業(yè)制高點(diǎn)的戰(zhàn)略布局。對(duì)于開(kāi)發(fā)者、企業(yè)和投資者而言,深入理解并參與這一“重做”進(jìn)程,將是把握AI時(shí)代脈搏、創(chuàng)造長(zhǎng)期價(jià)值的關(guān)鍵所在。