版權聲明:本文版權為網易汽車所有,轉載請注明出處。
網易汽車4月3日報道 2023中國電動汽車百人會論壇期間,商湯科技聯合創(chuàng)始人、首席科學家、絕影智能汽車事業(yè)群總裁王曉剛表示,智能汽車是通用人工智能實現閉環(huán)的一個非常好的場景,我們已經有人機共駕。未來我們希望車和模型之間能夠產生更有效的互動,那就完成了從人到車,到模型這樣的一個互動的閉環(huán),能夠讓通用人工智能為我們提供更好的駕乘體驗,解鎖無限的想象空間。
【資料圖】
以下為王曉剛演講實錄:
各位同仁、各位嘉賓,大家上午好!我是商湯科技王曉剛,新年伊始,像ChatGPT,還有GPT-4掀起了通用人工智能的熱潮,這是一場新的技術革命。今天我也是非常有幸能有這個機會跟大家一起探討,通用人工智能和多模態(tài)大模型給智能汽車帶來的機遇和挑戰(zhàn)。
從2012年開始,過去十年,人工智能的技術革命是以深度學習不斷去突破工業(yè)應用的紅線為起點的,誕生了一系列的AI+場景的應用。那么基于每個場景都有不同的專屬的模型,其中的研發(fā)成本比較高,周期比較長。
從2022年開始,新的通用人工智能,它是以非常高效的方式去解決海量的開放式任務,更加接近人的智能,而且能夠產生有智慧的內容,它也帶來了新的研究范式,即基于一個非常強大的多模態(tài)基模型,通過強化學習和人的反饋,不斷解鎖模型新的能力。
什么是通用人工智能呢?我們可以跟現有的人工智能系統做一個比較?,F有的人工智能也能夠接收多模態(tài)的數據,但是它輸出的任務都是事先定義好的。如果我想給這個系統去增加一個新的任務,我就要對系統進行重新設計,還要采集大量樣本。
在通用人工智能時代,我們通過輸入提示詞和多模態(tài)內容,它就可以去生成多模態(tài)的數據,更重要的是,它可以用自然語言去生成對任務的描述。自然語言即可以用非常靈活的方式去覆蓋大量的長尾問題和開放性的任務,甚至包括一些主觀描述。
比如說,在之前我們做一些特定場景的檢索任務時,一個人工智能系統可能是有幾十個標簽。我們做過實驗,如果要是用自然語言描述,我們可能有一萬多個詞,通過它們的組合去描述各種任務,實際上是非常強大,而且是靈活的。
那么,這里面舉一個在自動駕駛中遇到的一個例子。給定一個圖片,我們想去問我們是否需要減速?在我們現有的AI的系統里面,我們首先要做物體的檢測,能夠檢測物體框,里面做文字的識別,最后做這樣的一個決策。那么,其中所有的過程里面的每一個模塊都是事先定義好的任務。
在通用人工智能下,給定圖像,我們只需要用自然語言去問這個圖像的問題,比方說,這個圖標是什么意思,我們應該做什么?這個模型本身不會發(fā)生變化,它輸出就會通過自然語言的方式,能夠給我們一系列的這種邏輯的推理,最后給我們結論。比如說,它可以告訴我們這里面的限速是30公里每小時,前面100米是學校的區(qū)域,有小孩,你應該去小心,能夠將車速降速到30公里每小時以下等等這一些??梢钥吹?,這都是一些開放式的新的任務,可以對我們人工智能系統產生一個非常大的變革。
通用人工智能還有非常強的一點,它能夠產生內容,而且是有智慧的內容。智能駕駛,或者自動駕駛汽車里面我們有“數據飛輪”的說法,我們的模型能夠從駕駛終端采取高質量的數據,對模型進行更新,然后再去從終端提升數據的量和質。
在通用人工智能時代,它會有一個智慧的飛輪,這里面人和模型會產生互動,人會給模型輸入什么呢?去輸入Align With Human Intention,就是這個模型是很強大的,但是它其實不知道人需要它什么樣的能力。通過人的反饋,它就更好的能夠去理解人需要它展示什么樣的能力,而去解鎖這個模型更多的技能。同時,這個模型給人輸出的是什么呢?是有智慧的一個內容。我們都知道,這些內容會激發(fā)人的各種創(chuàng)作和智慧的產生,所以這其中又會產生智慧的飛輪。
但是,AGI對算力的需求是非常大的。ChatGPT具備1750億參數, 需要3000~5000張A100訓練卡,而我們也可以看到ChatGPT一次訓練的成本是上千萬的美金。此外,今天它的推理的成本每天也有幾百萬美金高昂的成本在。
商湯從2021年在上海的臨港建立了我們AIDC的超算中心,實際上是在這方面也有提前的這樣的一個布局。SenseCore AI大裝置基于2.7萬塊GPU的并行計算系統實現了5.0 exaFLOPS的算力輸出,可支持最多20個千億參數量超大模型(以千卡并行)同時訓練。
從2019年開始,商湯從10億參數的視覺模型研發(fā),到今天有320億全球最大規(guī)模的通用視覺的模型。在NLP領域,商湯當前也有接近2000億參數的大模型,包括亦有能力去訓練1800億參數的多模態(tài)的模型。所以,未來通用人工智能基于多模態(tài)的基模型可以做視覺的感知,語言的理解、內容的生成和決策的推理。
商湯絕影是商湯下面做智能汽車的業(yè)務板塊,我們堅持駕艙云三位一體的發(fā)展策略。我們希望能夠通過駕艙融合,帶來更好的駕乘體驗;AI云能夠去為自動駕駛提供數據閉環(huán)的服務,能夠通過提供豐富的產品功能讓智能座艙成為真正的第三生活空間。同時,商湯的AI云也為通用人工智能實現智能駕駛和智能座艙打下了非常強大的基礎。
我們可以看到,在自動駕駛領域,BEV是我們當前主流的技術路線,未來可以朝多模態(tài)、通用人工智能的方向發(fā)展。我們通過AIGC可以去生成困難的樣本,我們模型去輸入多模態(tài)的這樣的一些數據。其中,自動駕駛多模態(tài)的大模型可以做到感知和決策的一體化,輸出則對3D的環(huán)境進行重建實現環(huán)境的可視化理解,我們的行為解碼可以生成完整的路徑的規(guī)劃。同時,我們動機的解碼器可以用自然語言去描述我們推理的過程,進而使我們自動駕駛的系統變得可以解釋。
我們也是基于這些多模態(tài)的大模型可以做到數據的感知的閉環(huán)和決策的閉環(huán),從前端自動的去采集高質量的數據,利用大模型自動的數據的標注,包括產品的檢測,能夠幾百倍的去提升我們模型迭代的效率并降低它的成本。
在智能座艙板塊,通用人工智能使我們基模型具備空間環(huán)境的理解、用戶狀態(tài)的感知,多模態(tài)的指令,還有多輪對話,內容生成等一系列的能力。它就可以去賦能,作為我們情緒的感知,智能助手,基于情感的對話、創(chuàng)意、內容的生成,個性的交互等等這一系列功能,不斷地去提升我們的個性化的體驗。也使我們的場景從上車、行車、停車、離車,進而拓展到娛樂、辦公、購物、休息,這里面有很多的可以去探索的應用的場景。
實際上,智能汽車是通用人工智能實現閉環(huán)的一個非常好的場景,我們已經有人機共駕。未來我們希望車和模型之間能夠產生更有效的互動,那就完成了從人到車,到模型這樣的一個互動的閉環(huán),能夠讓通用人工智能為我們提供更好的駕乘體驗,解鎖無限的想象空間。
最后,這個月商湯也在通用人工智能方面會有我們的技術日,去介紹一系列的多模態(tài)的大模型,包括語言的大模型、感知的大模型等等。我們希望去與我們的客戶和合作伙伴共同邁向通用的人工智能,謝謝大家!
標簽:
據各方數據,1月31日上午10時許,深圳出品的動畫電影《熊出沒·伴我熊芯》票房突破10億元,在首日票房、檔期票房、連續(xù)破億天數等多方面打
1月27日,攜程發(fā)布的《2023年春節(jié)旅游總結報告》顯示,今年春節(jié),深圳游客的出境游訂單量同比去年增長近5倍。相較國內熱門景點的人山人海,
1月27日,記者從深圳市文化廣電旅游體育局獲悉,2023年春節(jié)黃金周期間(1月21日至27日),深圳共接待游客469 25萬人次,旅游收入31 58億元,
據深圳市春運辦統計,1月15日和16日連續(xù)兩天,深圳對外發(fā)送旅客人數都在48萬左右,春運進入客流高峰期。1月15日,深圳春運對外旅客發(fā)送量達
新年音樂會是觀眾喜聞樂見的年度重要文化品牌活動,多年來已成為深圳市民跨歲迎新的例牌項目。12月30日、31日晚,深圳交響樂團將在深圳音樂
作為來深科研人員中的一員,中山大學附屬第八醫(yī)院的助理研究員郭雅婕對深圳在人才服務方面的舉措贊不絕口:我作為基礎研究人員,很希望自己
12月1日晚8點,2023年故宮年票正式開售。相比于去年,今年購票順暢了許多。據了解,2022年故宮年票發(fā)售時,因短時間內購買年票人數過多,曾
昨日,冷空氣到達,廣州氣溫逐步下降。據商超方面預測,隨著氣溫的逐漸下降,市民對于御寒類商品消費需求有所上升,不少廣州商超準備了有關
小井蓋、大民生。今年以來,深圳開展全市窨井蓋專項治理工作成效顯著。截至11月20日,全市共排查窨井蓋約350萬個,發(fā)現存在問題的窨井蓋約3
備受關注的汕汕(汕頭至汕尾)鐵路汕頭站及站區(qū)工程近日傳出最新動態(tài):項目已順利完成工程招標工作,由中鐵建設集團有限公司中標承建。目前,
世界播報:青島稅務:出口退稅賦動能
半島網4月3日訊(記者李京媛通訊員胡丹青)日前,國家稅務總局青島市李滄區(qū)稅務局開展出口退稅及年度核銷業(yè)務線上專場培訓,落實國家支持出口
市立醫(yī)院:眼皮爬滿“蟲” 刀到瘤除
半島網4月3日訊(記者李京媛通訊員謝小真)對于張女士(化名)來說,照鏡子是一件“鬧心事”:眼皮上的黃色突起,像一條條蟲子,不忍直視……
開展“回頭看”,推進監(jiān)督閉環(huán),市北
3月30日,街道應急辦約談恒泰勝道運動城負責人。會上通報了前期市安全生產督導組“回頭看”中發(fā)現的問題,并對企業(yè)的安全生產整改情況進行了復
愛心義診送健康,貼心服務“零距離”
為提高轄區(qū)居民健康水平,近期臺東街道通過開展義診、公益講堂等一系列豐富多彩的活動,為居民送去貼心服務和健康知識。眼科義診進社區(qū)服務為
天天播報:青島地鐵9號線再傳捷報!城
3月31日,青島地鐵9號線建設再傳捷報,城子站首幅地下連續(xù)墻順利澆筑完成。該地下連續(xù)墻也是9號線首個施工的地連墻,自此城子站正式進入車站圍
焦點!第12屆壹基金藍色行動啟動 助
中新網深圳4月3日電4月2日是世界孤獨癥日。深圳壹基金公益基金會連續(xù)第12年啟動壹基金藍色行動公益倡導活動,以“壹家人,不孤獨”為主題,聯
王筱宇_關于王筱宇介紹
王筱宇,關于王筱宇介紹這個很多人還不知道,我們一起來看看!1、王筱宇,北京吉利大學教授。2、公開發(fā)表論文,《我國農村金融體制的現實困境和
全球頭條:王筱倩_關于王筱倩介紹
王筱倩,關于王筱倩介紹這個很多人還不知道,我們一起來看看!1、王筱倩,女,博士,揚州大學建筑科學與工程學院講師。2、。關于王筱倩到此分享
王筠_關于王筠介紹
王筠,關于王筠介紹這個很多人還不知道,我們一起來看看!1、王筠(1784-1854年),字貫山,號箓友,山東安丘縣(今山東省安丘市)人,清代語
全球觀焦點:湖北襄陽:全面推行二手
湖北襄陽:全面推行二手房“帶押過戶”
王筱月_關于王筱月介紹
王筱月,關于王筱月介紹這個很多人還不知道,我們一起來看看!1、王筱月,1993年9月6日出生于重慶市,中國內地流行樂女歌手。2、2014年4月,參加19
近四百萬粉絲 UP 主回應 B 站停
多位UP主密集地公開宣布暫停更新,大部分UP主表示平臺收益減少、收支難以平衡是停止更新的主要原因 近百萬粉絲的知識領域UP主圖靈的貓對第一財
今亮點!“警營開放日”活動別開生面
文 羊城晚報全媒體記者鄭達通訊員陳瑰琦“各位老師、小朋友們,大家好!”為全方位展現公安隊伍新風貌、新擔當、新作為,提高師生安全防范意識
天天微頭條丨舉報電話已公開!惠州法
南都訊記者郭秋成2023年4月起至2023年9月,惠州市中級人民法院將在全市開展“惠州執(zhí)行風暴2023”專項行動,嚴厲打擊逃避執(zhí)行、規(guī)避執(zhí)行、阻礙
環(huán)球新資訊:進出站點“多等三秒”溫
公交車進站停穩(wěn)后,駕駛員默念三秒后再開門;所有乘客上下車完畢后,駕駛員再次默念三秒后才關門起步……4月2日,城運控股交運溫馨巴士608路隊
字母哥:我專注于讓球隊變得更好 而
直播吧4月3日訊?今日NBA常規(guī)賽,雄鹿在主場以117-104輕取76人。賽后,字母哥接受了記者采訪。他表示自己并沒有專注于MVP,而是專注于雄鹿整體
世界微速訊:王筠權_關于王筠權介紹
王筠權,關于王筠權介紹這個很多人還不知道,我們一起來看看!1、王筠權,男,漢族。2、1957年10月出生,四川閬中人,研究生學歷。關于王筠權到
麥基:我們需要贏得接下來的每一場勝
直播吧4月3日訊?今天,NBA常規(guī)賽獨行俠130-132加時不敵老鷹,麥基賽后接受了媒體采訪。談到本場失利,麥基表示:“這真的很傷,我們一直在全
當前報道:拼多多小二再次怒斥炸店行
拼多多小二在朋友圈表示,有組織有預謀的「打砸」行為仍在持續(xù),平臺「百億補貼」的店鋪和商品成為攻擊的主要目標 3月28日起,拼多多平臺幾
全球短訊!羅蘭·巴爾特“中性”思想
作者:杜寧馨(中國人民大學文學院)在法國20世紀的后現代理論中,對禪道思想的發(fā)現和借用成為法國思想家反抗“邏格斯中心主義”和“話語霸權
衛(wèi)子夫的結局為什么那么慘?衛(wèi)子夫死
衛(wèi)子夫結局為什么那么慘?衛(wèi)子夫做了38年皇后,本應當享受富貴終老,但最后卻因為受到巫蠱之禍的牽連,落得橫死的結局。衛(wèi)子夫是自殺而死。當時
上海政法大學是211還是985學校?上海
上海政法大學是211還是985學校?上海政法學院不是985也不是211大學。上海政法學院(Shanghai University of Political Science and Law
火燒圓明園發(fā)生在哪一場戰(zhàn)爭中?火燒
火燒圓明園發(fā)生在哪一場戰(zhàn)爭中?火燒圓明園是第二次鴉片戰(zhàn)爭中發(fā)生的。 咸豐十年(1860年)英法聯軍攻占北京后,占據圓明園。中國守軍寡不敵眾
精彩看點:戴格諾特:如果球隊保持這
直播吧4月3日訊?今日NBA常規(guī)賽,雷霆主場118-128不敵太陽。賽后,雷霆主帥戴格諾特接受了記者采訪。談到球隊表現,戴格諾特講道:“我們常規(guī)
天天關注:即將完工!高明這個片區(qū)改
住在河江片區(qū)的街坊發(fā)現了嗎?內街巷改造工程即將完工目前已完成工程量的90%改造后,有哪些變化?一起來看看高明區(qū)內街巷改造工程河江區(qū)域在20
今日快看!網簽457套,4月2日佛山樓市
4月2日新房+存量房合網簽457套,其中住宅203套(一手住宅130套)!新房網簽量最高的是順德區(qū)205套,合計10958㎡,南海區(qū)網簽下滑明顯;二手房成交排行
訊息:王符《潛夫論》釋讀_關于王符
王符《潛夫論》釋讀,關于王符《潛夫論》釋讀介紹這個很多人還不知道,我們一起來看看!1、《王符《潛夫論》釋讀》是(東漢)王符創(chuàng)作的現當代
環(huán)球報道:詹姆斯:我們有很多進攻火
直播吧4月3日訊?今日NBA常規(guī)賽,湖人在客場以134-109大勝火箭,賽后,詹姆斯接受了記者采訪。談到自己及球隊整體表現,詹姆斯說道:“今天我
警惕食用河豚魚、誤食藍環(huán)章魚引發(fā)食
河豚魚、藍環(huán)章魚均含有致命河豚毒素,食用會引發(fā)食物中毒,嚴重的情況下會致人死亡。為減少類似事件的發(fā)生,廣東省市場監(jiān)管局發(fā)布食品安全風
美太空發(fā)展局發(fā)射首批低軌道衛(wèi)星,主
美國天軍下屬的太空發(fā)展局(SDA)的「分布式作戰(zhàn)人員太空架構」首批衛(wèi)星發(fā)射成功 美國當地時間4月2日,SpaceX公司使用「獵鷹」9火箭將太