李彥宏:不斷地重複開發基礎大模型是對社會資源的極大浪費

11,594 次觀看・3 個月前
2023年11月15日,百度創始人、董事長兼首席執行官李彥宏在2023西麗湖論壇發表主題演講《AI原生時代:“冷”思考和“熱”驅動》。李彥宏表示,現在人工智慧很熱,但我想首先分享兩個“冷”思考。 第一個,中國的大模型很多,但是基於大模型開發出來的AI原生應用卻非常少。大模型時代其實也是類似,大模型本身是一個基礎底座,類似作業系統,那麼最終開發者要依賴為數不多的大模型來開發出各種各樣的原生應用。所以,不斷地重複開發基礎大模型是對社會資源的極大浪費。 AI原生時代,我們需要100萬量級的AI原生應用,但是不需要100個大模型。如果我們的產業政策能夠更加鼓勵基於大模型的AI原生應用,我們一定能夠構建起一個繁榮的AI生態,推動新一輪的經濟增長。 第二個冷思考,由於沒有智慧湧現能力,專用大模型的價值其實非常有限。我看到一個現象,很多行業、企業,甚至很多城市都在買卡、囤晶片,建立智算中心,想要從頭訓練自己的專用大模型。殊不知這樣煉出來的大模型是沒有智慧湧現能力的。 因為,只有當你的模型的參數規模足夠大,訓練資料量足夠多並且能夠不斷投入,進行反覆運算,才能夠產生智慧湧現,大模型才能具有觸類旁通的能力。也就是說,你沒教過的東西,它也會了。所以,大模型的產業化模式,應該是把基礎模型的通用能力和行業領域的專業知識相結合。也就是大模型套小模型,專用的小模型反應快,成本低,大模型更智慧,可以用來兜底。