在人工智能領域里,是否存在通用人工智能(AGI),一直是研究人員、各大人工智能公司爭論的焦點??蒲蓄I域里的幾位大佬,包括圖靈獎得主約書
在人工智能領域里,是否存在通用人工智能(AGI),一直是研究人員、各大人工智能公司爭論的焦點??蒲蓄I域里的幾位大佬,包括圖靈獎得主約書亞·本吉奧(Yoshua Bengio)和楊立昆(Yann LeCun)都認為,不存在通用人工智能。
但就有科技公司愿意將自己的未來壓在通用人工智能上。例如微軟和人工智能非盈利機構OpenAI。
一年前,微軟向OpenAI投資了10億美元,希望雙方合作以微軟Azure為平臺,開發(fā)新技術,擴展大規(guī)模人工智能功能,從而實現(xiàn)通用人工智能(AGI)。作為交換,OpenAI則統(tǒng)一向微軟授予部分知識產權,并接受微軟將其商業(yè)化出售給客戶。
雙方交出了合作后的第一份成果——一臺新型人工智能超級計算機
一年以后,在微軟2020 Build大會上,雙方交出了合作后的第一份成果——一臺新型人工智能超級計算機。微軟稱,與世界TOP500的超級計算機相比,這臺計算機是全球功能最強大的第五臺計算機。
算力排在世界前五
據(jù)介紹,這臺超級計算機目前由微軟Azure托管,OpenAI設計。這款超級計算機擁有超過28.5萬個CPU,1萬個GPU,每個GPU服務器的網絡連接能力為400Gb/s ,旨在訓練單一的大規(guī)模分布式AI模型。
微軟聲稱,與世界 TOP500 超級計算機相比,自己研發(fā)的這臺可比肩 Top 5。這就意味著它在中國國家超級計算機中心的天河2A后面,在德克薩斯高級計算機中心的Frontera之前,其算力峰值每秒可以執(zhí)行23.5 到61.4個萬億浮點運算。
微軟自研超級計算機
從性能上來說,得益于在Azure上托管,這臺超級計算機擁有現(xiàn)代云計算基礎設施的各種優(yōu)點,包括快速部署、可持續(xù)發(fā)展的數(shù)據(jù)中心、并可以訪問所有Azure服務。
超高的性能更意味著它可以用來訓練超大規(guī)模的人工智能模型,并能提供超大型AI模型和訓練這一模型所需的架構。
從實驗結果看,超級計算機的大型模型之所以表現(xiàn)出色,是因為它們可以吸收語言、語法、知識、概念和上下文的細微差別,從而能夠做到: 總結冗長的演講,調節(jié)實時游戲聊天中的內容,解析復雜的法律文檔,甚至可以從搜尋GitHub中生成代碼。
微軟稱,已經使用了這臺計算機中的Turing模型(即將在開放源代碼中使用)來增強必應(Bing),Office,Dynamics及其其他產品的語言理解能力。在必應中,這些模型能將問題和回答的生成速度提高125%。在office上,模型推動了Word的智能查找和關鍵見解工具的開發(fā)。
從技術角度來看,大型模型具有自我監(jiān)督的優(yōu)勢,這意味著它們可以通過數(shù)據(jù)各部分之間的關??系來生成標簽,這對實現(xiàn)人類智能至關重要。這與監(jiān)督式學習算法相反,后者是在人工標記的數(shù)據(jù)集上進行訓練的,因此很難針對行業(yè),公司或感興趣的主題進行微調。
“這是關于能夠一次在自然語言處理、計算機視覺中完成一百項令人興奮的事情,當你開始看到這些感知領域的組合時,你將擁有無法想象的新應用程序。” 微軟首席技術官凱文·斯科特(Kevin Scott)說。
超算是通向AGI的希望之路?
在人工智能領域里,是否存在通用人工智能(AGI),一直是研究人員、各大人工智能公司爭論的焦點。
OpenAI是一家非盈利人工智能研究機構。自成立以來,這家公司就斷言,巨大的計算能力是邁向AGI的必經之路,而AGI可以學習人類,并完成任何任務。OpenAI相信功能強大的計算機結合強化學習和其他技術可以實現(xiàn)人工智能技術的進步。
不過,目前尚不清楚雙方突出的新超級計算機是否具有足夠的功能來實現(xiàn)接近AGI的功能。據(jù)《麻省理工科技評論》的報告,此前OpenAI內部有一個名為Foresight的團隊就進行了一項實驗,通過訓練越來越多的數(shù)據(jù)和計算算法來測試他們可以將AI功能推到什么程度。另外,OpenAI還正在開發(fā)一種使用圖像、文本和其他數(shù)據(jù)進行訓練的系統(tǒng),該系統(tǒng)使用大量的計算資源,OpenAI的領導層認為這是通向AGI最有希望的一條路徑。
對于微軟來說,這款超級計算機不論是成為AGI的必經之路還是大躍進,至少目前它已經為Microsoft帶來新的市場機會。通過大規(guī)模分布式AI模型,微軟以優(yōu)化的方式在Azure AI加速器和網絡上訓練模型,從而提高自家產品的性能和體驗。
關鍵詞: 微軟