每日經(jīng)濟新聞 2023-03-16 15:35:53
每經(jīng)記者 李少婷 每經(jīng)編輯 楊夏
3月16日下午,文心一言發(fā)布會在百度科技園舉行,百度創(chuàng)始人李彥宏表示,文心一言是百度十幾年超大規(guī)模的開發(fā)投入積累來的。
李彥宏現(xiàn)場演示了文心一言的多種能力。
“從文心一言的表現(xiàn)看,某種程度上它具有了對人類意圖的理解能力,回答的準確性、邏輯性、流暢性,都逐漸接近人類水平。但整體而言,這類大語言模型還遠未到發(fā)展完善的階段,它們有時候會有很驚艷的表現(xiàn),但不少場景下,細究起來還有明顯的bug,進步空間很大。未來這段時間它一定會飛速發(fā)展,日新月異。”
李彥宏認為,人類進入人工智能時代,IT技術(shù)的技術(shù)棧發(fā)生了根本性變化。過去基本分為三層:芯片層,操作系統(tǒng)層和應(yīng)用層?,F(xiàn)在可以分為四層:芯片層、框架層、模型層和應(yīng)用層。
“百度是全球為數(shù)不多、在這四層進行全棧布局的人工智能公司。”李彥宏介紹,文心一言位于模型層。2019年,百度推出了文心大模型ERNIE 1.0。目前,ERNIE 3.0每天接受數(shù)十億次用戶的搜索請求。這讓文心一言能夠基于一個龐大的、高效的數(shù)據(jù)池,快速地學(xué)習(xí)和改進。
“大模型訓(xùn)練堪稱暴力美學(xué),需要有大算力、大數(shù)據(jù)和大模型,每一次訓(xùn)練任務(wù)都耗資巨大。”李彥宏介紹,全棧布局的優(yōu)勢在于,可以在技術(shù)棧的四層架構(gòu)中,實現(xiàn)端到端優(yōu)化,大幅提升效率。尤其是,框架層和模型層之間,有很強的協(xié)同作用,可以幫助構(gòu)建更高效的模型,并顯著降低成本。事實上,超大規(guī)模模型的訓(xùn)練和推理,給深度學(xué)習(xí)框架帶來了很大考驗。
李彥宏還表示,芯片、框架、大模型和終端應(yīng)用場景,可以形成一個高效的反饋閉環(huán),幫助大模型不斷去調(diào)優(yōu)迭代,越做越好。更好的大模型,會讓用戶體驗不斷升級。
如需轉(zhuǎn)載請與《每日經(jīng)濟新聞》報社聯(lián)系。
未經(jīng)《每日經(jīng)濟新聞》報社授權(quán),嚴禁轉(zhuǎn)載或鏡像,違者必究。
讀者熱線:4008890008
特別提醒:如果我們使用了您的圖片,請作者與本站聯(lián)系索取稿酬。如您不希望作品出現(xiàn)在本站,可聯(lián)系我們要求撤下您的作品。
歡迎關(guān)注每日經(jīng)濟新聞APP