*智源研究院發布世界模型Emu3 多模態AGI漸行漸近?*
[科創板日報10月22日訊*記者 : 李明明] 日前,人工智能領域的新型研發機構智源研究院正式發布原生多模態世界模型Emu3。據介紹,該模型實現了視頻、圖像、文本三種模態的統一理解與生成。
當前,行業現有的多模態大模型多爲對于不同任務而訓練的專用模型,比如Stable Diffusion之于文生圖,Sora之于文生視頻,GPT-4V之于圖生文。但是現有模型的能力多爲單一分散的能力組合,而不是原生的統一能力,比如目前Sora還做不到圖像和視頻的理解。
而下一token預測被認爲是通往AGI的可能路徑,但這種範式在語言以外的多模態任務中沒有被證明。
智源研究院院長王仲遠告訴《科創板日報》記者,“Emu3證明了下一個token預測能在多模態任務中有高性能的表現,這爲構建多模態AGI提供了廣闊的技術前景。
Emu3有機會將基礎設施建設收斂到一條技術路線上,爲大規模的多模態訓練和推理提供基礎,這一簡單的架構設計將利于産業化。
同時,該訓練技術能夠以較大程度複用現有的大模型訓練基礎設施,降低了對新基礎設施的需求,從而加速多模態大模型的叠代和最終落地。
未來,多模態世界模型將促進機器人大腦、自動駕駛、多模態對話和推理等場景應用。而多模態大模型通過統一表示空間實現了跨模態的統一訓練和生成,展現巨大潛力。”
一位大模型領域專家也對《科創板日報》記者分析,當前,視覺的理解模型和生成模型各自分開獨立發展,這也是多模態領域面臨的問題,也會造成生成模型的生成能力強而理解能力弱,或者理解模型的理解能力強而生成能力弱。
因此,多模態大模型亟需將理解和生成統一在一個模型裏。目前,多模態生成模型的發展相對滯後,該領域未來的發展潛力較大。
(圖注:Emu3圖片理解案例)
具體就Emu3如何實現圖像、視頻和文字的統一輸入和輸出,王仲遠總結道,團隊構建了一個統一的Tokenizer系統,將文本、圖像、視頻等各種模態信息映射到一個離散空間,並通過auto Regressive的方式進行統一訓練和生成。這相當于爲文字、圖像、視頻發明了一種統一的“新語言”,可以在同一空間中表達。
王仲遠表示,“Emu3 會爲未來多模態基座模型的發展指明一個方向,是下一代的多模態大模型的訓練範式。對于這樣的技術路線,需要各界共同努力,才能加速多模態基座模型的發展。
期待在産業轉化過程中,Emu3能夠像悟道系列,與各大模型公司、互聯網企業等合作,共同推進技術的應用。”---來源 : 科創板日報 -
*馬斯克又惹上事了?Robotaxi發布會被訴侵權《銀翼殺手2049》*
[財聯社10月22日訊*編輯 : 劉蕊] 北京時間10月11日,特斯拉號稱可以“載入史冊”的重大發布會“Robotaxi Day”正式舉行,吸引了全球科技界的目光。在這場發布會上,馬斯克展示了其備受期待的新品Cybercab,並且毫不掩飾地暗示其靈感來源于知名科幻電影《銀翼殺手2049》
然而,馬斯克的這一行爲卻爲其引來了麻煩。當地時間周一,《銀翼殺手2049》出品公司艾肯娛樂公司正式對埃隆·馬斯克、特斯拉和華納兄弟探索公司提起訴訟,原因是他們涉嫌侵犯電影《銀翼殺手2049》中的圖像版權,並構成了“虛假代言”,這給艾娛樂肯公司帶來了“相當大”的財務損失。
馬斯克涉嫌侵權?
《銀翼殺手2049》是由艾肯娛樂公司(Alcon Entertainment)、哥倫比亞影業公司等聯合出品的知名科幻片,該片于2017年10月6日在美國上映,同年10月27日在中國上映,曾榮獲兩項奧斯卡獎。
艾肯娛樂公司提起訴訟稱,馬斯克和其他被告曾要求獲准在“Robotaxi Day”活動中使用《銀翼殺手2049″》中的“標志性靜止圖像”,當時這一請求被拒絕了。
然而,馬斯克及其他被告隨後還是依舊在活動中使用人工智能技術制作並展示了一幅與之高度類似的畫面,因此艾肯娛樂公司起訴他們涉嫌侵權。
洛杉矶聯邦法院的民事訴訟稱,“艾肯拒絕了所有許可”,並堅決反對被告暗示《銀翼殺手2049》與特斯拉、馬斯克或馬斯克擁有的任何公司有任何聯系。
訴訟稱,“被告隨後使用了一張顯然是人工智能生成的假圖像來完成這一切。”訴訟稱,被告的行爲構成了“大規模的經濟盜竊”。
《銀翼殺手2049》電影畫面(圖片來源:華納兄弟官網)
特斯拉發布會PPT畫面(圖片來源:特斯拉發布會視頻截圖)
艾肯娛樂在訴狀中寫道,在Robotaxi Day的活動中,馬斯克講話時,“這張僞造的圖像”在直播的第二張幻燈片上顯示了11秒。
根據活動視頻,馬斯克在展示這一圖片時表示:“我喜歡《銀翼殺手》,但我不知道我們是否想要這樣的未來。”
訴狀稱:“在那11秒鍾裏,馬斯克尴尬地試圖解釋,爲什麽他在本應該介紹自己的新産品時,卻向觀衆展示了《銀翼殺手2049》的照片…他真的沒有可信的理由。”
造成了相當大的財務損失
艾肯娛樂在訴訟中提出的指控包括侵犯版權和虛假代言。該訴訟稱,特斯拉公司侵犯版權和虛假代言行爲所造成的的財務影響“相當大”。
他們指出,艾肯娛樂目前正在與其他汽車品牌就正在制作的《銀翼殺手2099》電視劇的潛在合作關系進行談判。
訴狀還稱,“有問題的馬斯克”是本案的一個問題,艾肯娛樂不希望其《銀翼殺手》續集電影“與馬斯克、特斯拉或馬斯克的任何公司有關”。
愛爾康在訴訟中表示:“任何謹慎的品牌在考慮與特斯拉合作時,都必須考慮到馬斯克嚴重誇張化、高度政治化、反複無常和武斷的行爲,有時甚至會變成仇恨言論。”
在今年的美國大選中,馬斯克是共和黨總統候選人特朗普的主要支持者,經常在他擁有的社交媒體網站X上發表煽動性言論,也正因此惹來不少爭議。
艾肯娛樂還在訴訟稱 :“如果一家公司或其負責人實際上不同意馬斯克的極端政治和社會觀點,那麽與特斯拉的潛在品牌合作就更有問題了。”---來源 : 科創板日報-