「裝備大模型化」落地破圈 !AI 技術的一次自證與他證
狂飙500多天後,國內的“百模大戰”正進入落地驗證期。當下,行業和産業對大模型的期待,正從“你家大模型有多強?”變爲“你的大模型能幫我幹什麽?”。
10月22日-10月25日,2024中國國際社會公共安全産品博覽會(簡稱:2024安博會)在北京舉辦。作爲多年來AI産業發展的一大風向標,這場盛會被産業人士寄托的使命之一正是回答上述問題。而這,也是AIoT頭部企業宇視科技在做的事。
今年安博會上,宇視科技的展台成爲人氣最高展台之一。通過五大展區近百個展出單元,宇視亮出了AI大模型落地的實戰成果和作戰圖譜。
g
▲宇視展台現場人頭攢動
像百度搜索一樣檢索視頻內容的“萬物搜”、夜視能力倍增的AI-ISP獵光系列夜視攝像機、能跟用戶互動的AI體育鍛煉屏、助智慧城市治理降本增效的大模型方案……今年宇視已不限于大模型相關部件産品展示,而是實現從軟件、裝備到行業方案全覆蓋。
2023年5月,宇視推出AIoT行業大模型“梧桐”,今年4月升級爲“梧桐2.0”版本,多模態及推理能力進一步升級,目前已經衍生和優化了上千種相關AI算法,落地城市、交通、文娛、教育等超十個行業。
▲宇視展台現場展出的梧桐2.0架構圖
當下,AI亟需完成一次新的價值自證和他證。To C消費類AI大模型産品的流量高峰已被瓜分一波,第二波機會來到了與實體經濟息息相關的To B數字化轉型市場。
透過宇視科技本次安博會的展出,回溯其在數字化轉型中的“探模”之路,我們可以看到,大模型的底座價值正如何一步步潛入千行百業,轉化爲新質生産力。
一、智能升級:基于梧桐2.0的“萬物搜”來了
今年安博會,要說最引人關注的AI大模型新應用是什麽?
可能不是各家都在做的智能聊天機器人,也不是爆火的AI視頻生成工具,而是這款名爲“萬物搜”的視頻搜索“神器”。
在宇視中心區域展區,一塊大屏幕前,圍滿了視頻數據服務系統“萬物搜”的體驗者。他們只需要輸入文字描述,就能從現場實時視頻內容中,快速檢索出貼近意圖的結果。比如搜索“拉行李箱的人”,“萬物搜”就會立刻識別並輸出對應的結果。
▲“萬物搜”被許多觀衆圍觀體驗
即便是一些十分小衆的情況,“萬物搜”也可以通過深度解析和語義理解,搜索到用戶所需內容。比如搜索“帶狗頭頭套的人”這樣語義更具體的描述,“萬物搜”也能准確地識別並找到。
▲“萬物搜”現場體驗
當輸入“一個舉著手機拍照的年輕男士”這種多個任意元素組合的提示詞,“萬物搜”也能立刻識別出來貼合表述的視頻內容。
▲“萬物搜”現場體驗
這一應用具有很強的應用價值,比如可用于失物招領。在一個智慧園區場景,某業主購買了一份麥當勞外賣丟失了,他只需要借助“萬物搜”去搜索“拿麥當勞外賣的人”,就可以查詢到相關的視頻記錄,從而尋回失物。
宇視相關負責人鄭勇告訴智東西,“萬物搜”基于多模態大模型算法開發。相比于傳統小模型時代的CV識別車牌、衣著等部分有限特征,“萬物搜”的搜索對象的邊界得到了極大擴展,從而使行業價值也得到大幅提升。
究其背後主要的技術難點,還是多模態融合。
據悉,“萬物搜”基于宇視自研行業大模型“梧桐2.0”,融合自然語言處理、視頻特征提取和語音識別多種能力,深度理解分析輸入文本、語音或圖片,及其上下文語境關系,從而讓用戶可以准確搜索到所需的大部分視頻內容。
“梧桐2.0”是一個覆蓋了圖像編解碼、計算機視覺、自然語言處理、多模態等多個領域的AIoT行業大模型。根據宇視官方數據,其已經基于“梧桐2.0”大模型面向十個行業推出了近千種長尾算法。與此同時,其在這十大行業“梧桐2.0”均已有産品出貨和項目實際落地。
“從業者會有一個很直觀的感受,越來越多的長尾算法的需求都能得到響應,行業對于視頻能力的期待也因大模型提高了。”鄭勇說。
可以看到,AI大模型已經催生了一大批智能功能和行業算法,呈現出落地可用的效果。
而這,只是AI價值自證的一個開始。這些智能功能還需要在城市管理、交通治理、園區運營等各行各業的場景中廣泛應用,才能真正發揮出行業價值。
二、裝備進化:把大模型“塞進”攝像機
在大模型進入行業之前,有一個重要中間環節不容忽略,那就是“裝備大模型化”。
當下,我們看到微軟正在將大模型“塞進”電腦,華爲、蘋果等手機廠商正將大模型“塞進”手機。而以宇視爲代表的AIoT頭部企業,也正將大模型“塞進”攝像機。
大模型正催生新的裝備進化——本次,在宇視展台上備受關注的AI-ISP獵光系列智能攝像機就是一大代表。基于大模型打造的“獵光2.0-AI-ISP”圖像引擎,可以使得前端攝像機應對多種極黑、無光、微光場景挑戰。
在現場設置的暗室中,一台僅僅數百元的經濟型攝像機,即使是在低至令人難以置信的≤0.0001 Lux的照度環境下,依然能夠讓圖像呈現出如同在白晝中一般的鮮豔色彩。
▲AI-ISP獵光系列智能攝像機效果展示
大模型+智能攝像機設備,讓過去AIoT行業難以解決的痛點迎刃而解。
衆所周知,夜間是安全隱患的高發時段。由于光線不足,人類視覺難以清晰地觀察到周圍的環境,往往使得安全隱患難以察覺,星光等夜視攝像機的出現大大緩解了這一問題。但具有高品質成像效果的傳統夜視攝像機成本較高,在方案部署的時候容易被戰略性舍棄。
缺少高性價比的夜視攝像機,這是行業的一大痛點。
宇視AI-ISP獵光系列智能攝像機直擊這一痛點。鄭勇告訴智東西,基于“梧桐2.0”,攝像機算法在訓練的過程中,可以采用由AI生成的大量不同場景的視頻素材,例如微光的魚塘、無光的鄉村小路等,從而大大壓縮了訓練成本。
同時,基于數千種場景的實驗訓練及測試,AI-ISP獵光系列智能攝像機算法快速叠代,強化拖影收斂、動態降噪、場景提亮、色彩還原、對比度增強效果,使圖像質量突破傳統ISP極限。
可以看到,大模型已經展現出對裝備“點石成金”的效果。
而這只是“裝備大模型化”衆多例子中的一個。
今年4月,宇視提出“把所有裝備用大模型重做一遍”的理念,隨即推出了一大批“裝備大模型化”産品,覆蓋了AI端側裝備、AI邊緣端裝備、AI邊緣域裝備全業務場景。
在這三大場景中,除了AI-ISP獵光系列智能攝像機,大模型改造的設備還涉及AI體測一體機、室內AI體鍛屏、視頻智能推訓一體機、視頻數據服務一體機等多種硬件,都實現了不同程度的數倍效果提升。
▲獵光2.0家族
做“裝備大模型化”的難點是什麽?
鄭勇告訴智東西,不同于手機、PC等設備大模型化,AIoT設備在屬于相對弱交互但高專業度的領域,這就需要在大模型、AIoT及行業中都有深耕的業務團隊來進行支持開發,這也成爲宇視做這件事的一大優勢。
宇視正通過軟件硬件化、硬件裝備化、裝備序列化等一系列創新研發,爲全行業帶來“裝備大模型化”産品底座開放能力的質變。
當下,無論是面向消費者市場還是企業級市場,裝備大模型化已經成爲行業發展的必然趨勢。
而從企業級數字化轉型市場來看,我國ICT裝備門類衆多、産品強大而豐富。這些裝備更是大模型落地的重要載體,是大模型落地實體物理世界、釋放千行百業新質生産力的重要抓手。
三、行業破圈:AI技術的一次自證與他證
大模型帶來了智能功能和裝備的進化,最終的效果還要在行業中驗證。
作爲一家AIoT産品方案及能力提供商,宇視在視圖領域有著多年的沈澱積累,致力于在智慧城市、交通、電力、企業園區等多個場景領域進行視圖價值賦能。如今這些行業經驗,也正幫助其大模型加速在行業落地。
在本次安博會上,我們可以看到基于“梧桐2.0”的智能功能、裝備已經落地到了文體娛樂、智慧城市、智慧交通、生態保護等各個領域。
以宇視在現場展示的AI體育方案爲例,基于梧桐大模型的AI體育鍛煉屏可以讓很多人站在同一個屏幕前一起做運動,記錄他們的動作細節和成績,爲其自動打分並提供鍛煉建議。這不僅可以幫助校園開展運動、教學,也爲社區鍛煉等更多場景提供了可能性。
▲AI體育解決方案展示
鄭勇透露,自梧桐大模型推出以來,宇視科技發力文教體領域,推出了AI體鍛屏、AI跑步屏、AI足球、旅拍兔VLOG、VR導遊産品等多個創新解決方案,已快速落地全國百余個城市。
在剛剛結束的“2024吳鈎足球全國總決賽”中,直播正是由宇視的AI全景相機進行智能導播。在支持多視頻拼接畫面自動矯正消除畫面畸變的同時,其基于AI畫面矯正及運鏡算法,讓攝像機進行自動檢測控球權、自動運鏡跟蹤,從而讓AI像人一樣去進行精彩賽事直播。
基于宇視“梧桐2.0”打造的解決方案,也同時落地到了智慧城市治理、智慧人行、智慧車行、動物保護等各個領域。
在某地的智慧城市治理中,相關部門應用了基于“梧桐2.0”的城市解決方案,聚焦群衆關注的民生問題比如廣場舞噪音管理、社區及城市的衛生管理等問題,使其得到高效解決,12345投訴量下降60%。
在這類場景中,各種細碎的問題都可以找到個性化長尾算法,比如:噪音傳感器加視頻聯動,解決工地超時施工擾民難題;物聯網油箱蓋加車載攝像機,解決危險駕駛隱患和油耗異常等。這些行業解決方案,都不同程度地助力提升管理效率,減少安全隱患。
大模型爲各個行業的數字化轉型帶來了真實價值,也爲各個行業的從業者帶來更多機會和商機。
這不僅是宇視AI技術的一次自證,也是其與集成商、渠道商夥伴開啓的一次他證。
在去年6月的北京安博會現場,宇視啓動了梧桐大模型種子合作夥伴計劃,與來自交通、教育、零售、體育公共服務等領域的多位夥伴合作開啓共創。
宇視提供軟件技術賦能平台,推出了集數據管理、模型管理、服務管理、快捷工具于一體的行業大模型生態服務平台;行業夥伴基于宇視平台和協助,進行解決方案的開發和推廣。
時隔一年多,鄭勇告訴智東西,一些合作比較深入的夥伴已經能夠收益。他們通過宇視推訓一體機去訓練行業自有模型,將産品和方案銷售給同行或終端用戶,還能進行二次收益。
可以看到,當集成商、渠道商從“搬箱子”的人變爲智能化方案咨詢服務商,與上遊設備商的關系由買賣變爲培育和共創關系,AI技術的自證與他證也正在接近完成時。
生態賦能是一個長期過程。當下,仍然有一些生態夥伴抱有慣性思維,希望買回一台機器就擁有了大模型能力,因此在初始階段存在開發上手難的問題。對此,宇視會直接跟進和協助夥伴項目,保障項目看到效果;同時打磨設備,以開發出讓夥伴更易上手的平台工具。
可以預測,AI大模型帶來的將是整個行業數字化生態的變革。AIoT硬件市場或許會進一步向頭部集中,但算法、軟件、解決方案的能力將更多向集成商、渠道商靠近,從而形成新的行業秩序。
結語:宇視之路,AIoT行業之變
當全球大模型技術産業競賽加劇,中國企業與大模型技術,正以更快的速度和千行百業搭起橋梁,落地見效。宇視科技圍繞“裝備大模型化”的探索之路,也正印證了中國AIoT行業之變。
獨行快,衆行遠。裝備大模型化及産業落地前景遠大,但道阻且長,這是一條必須有夥伴同行的路。我們看到,産業鏈上的不少玩家已經在轉換角色和思路,融入全新的生態共融秩序。AI技術的自證與他證仍在進行中,宇視和他的夥伴們將一起合力推動新業態的形成。---[智東西/作者 : 三北*編輯 : 漠影]