2024年,ai大模型的熱度持續增高,全世界都在期待大模型會給我們帶來哪些變化。要讓前沿的ai技術落地,要讓遙遠的智能化浪潮走進日常生活,還需要一些切實可行的產業通道,否則ai終究是一粒遙遠的種子,難以在千行百業中開出繁花。
在awe 2024,我們可以看到各個領域的廠商都在展示ai技術,推出ai產品,但其中有一件作品,或許值得我們更多關注。那就是來自海思的——越影視覺解決方案。
3月14日,2024年中國家電及消費電子博覽會(awe2024)在上海拉開帷幕。海思以「以創新 領新境」為主題,向業界展示了「5+2」智能終端解決方案。其中就包括「越影視覺」。
ai行業有一個判斷,叫做爆火的總是自然語言處理,真正發揮作用的卻是機器視覺。同時還有大量數據表明,絕大多數ai推理任務應該在端側完成,才能發揮ai技術的最大效率。
而全新升級的越影,就是在視覺晶元中集成了最新的ai大模型技術,將端側、cv、大模型等關鍵詞融合為一。
這樣的越影視覺,將給視覺晶元產業帶來哪些改變?ai大模型,如何在無人機、攝像頭、運動相機的沃土中開出繁花?
我們可以一起走進awe 2024,看看第一次來到這個舞台的海思,為我們帶來的視覺盛宴。
千行百業智能化,離不開機器看清,看懂
隨著ai技術的廣泛發展,具有主動識別能力的機器視覺攝像頭,已經成為無人機、攝像頭等領域的標配。
但隨著產業發展與技術進步,我們卻會發現相關領域的視覺能力依舊具有不小的挑戰。總體來說,無人機、攝像頭等領域的視覺+ai挑戰,可以歸納為三點:
1.通過雲端算力來實現機器視覺任務,帶來了高成本,高延遲,穩定性差的問題。
2.傳統視覺晶元搭載的cnn演算法架構泛化性和通用性較差,帶來了個性化ai需求難以滿足,ai開發成本過高等問題。具有更強泛化性的transformer大模型架構還難以在視覺場景落地。
3.視覺晶元的聯接能力、安全能力等綜合能力不理想,導致多設備組成的場景化方案難以實現。
這些難題,給安防、機器視覺、影像產品等領域帶來了諸多痛點。總體來看,實現將ai大模型固化在硬體端,形成圍繞智能需求的場景化視覺解決方案,已經迫在眉睫。
而就在此時,越影視覺完成了具有行業引領意義的升級。
當越影,開出ai的繁花
新一代越影視覺解決方案具有諸多智能能力上的進化點。其中最引人注目的,就是其在硬體側固化了transformer大模型運算元,為transformer在端側晶元運行提供了硬體加速,從而實現了大模型與端側視覺能力的跨時代結合。
根據相關數據統計,如果基於傳統的機器視覺演算法,一個相對垂直的應用場景,用戶往往需要採集100萬以上數量的數據,才能實現98%的準確率與98%的召回率。而基於開放域大模型,則可以通過每個需求十張圖片左右的數據量進行微調,即實現了90%的準確率和95%的召回率,演算法開發的工作量降低了90%以上。由此可以看出,越影視覺將大模型與端側機器視覺結合,能夠極大降低視覺類ai演算法的綜合成本開銷,帶來了更敏銳的即時反饋,從而全面提升視覺晶元的智能化水平。
端側大模型,是越影視覺全新升級四大創新點中的一項。總體來看,四大創新點包括:
1.專業圖像。越影視覺實現更強的ai算力賦能,打造了全面升級的ai isp能力,從而讓設備獲得更好的黑光全彩效果。
2.極致智能。端側ai大模型的加入,極大降低了ai開發成本,提升了機器視覺演算法的應用邊界。
3.星閃互聯。面向未來更廣闊的短距物聯需求,越影視覺解決方案集成了具有更快更穩聯接,以及ai抗干擾能力的星閃技術。伴隨著星閃的全面崛起,越影視覺也將通過星閃與其他海思提供的晶元解決方案同頻協作,帶來更多智能化價值。
4.全棧安全。在安全能力上,越影視覺解決方案還將ai技術帶到了安全能力當中,實現了安全隱私能力的升級。
綜合來看,ai技術全面促成了越影視覺的產業差異化,同時通過綜合性、多層次的技術創新,越影視覺在ai演算法應用、圖像質量提升,以及安全隱私方面都實現了行業領先。各個方向、領域的技術如同繁花,開在越影身上,也開在了視覺能力智能化升級的路途中。
讓視覺,結出場景的碩果
ai技術,構成了越影的核心差異化優勢。這種優勢與多個領域的結合,最終形成了適配場景化應用的整體視覺解決方案。
目前階段,以安防為代表的多個產業,對視覺晶元的整體升級需求來自三個方面,即智能能力、物聯能力與安全能力。
而越影的綜合能力差異化也來自三個方面:
在智能領域,越影實現了晶元級的端側ai技術,完成了端側大模型的固化,讓萬物識別,萬物檢測成為可能。
在物聯領域,越影帶來了鴻蒙原生。從而基於鴻蒙特性,極大降低了產品的物聯化開發成本,並且通過支持星閃聯接,帶來了更強大的全場景短程通信能力。
在安全方面,越影具有全新一代安全編碼svac3.0,打造了從晶元到編碼、系統、聯接的全棧安全方案。
三大能力的交相呼應下,越影可以讓智能能力契合開發需求,契合場景化應用,從而真正推動各個領域視覺與智能的雙向進化。
海思coo支浩認為:「視覺領域是ai最先爆發的地方。海思將端側ai能力集成進去,將在視覺領域創新不止,持續引領。越影視覺基於soc,在原有的cis、星閃連接,多維感知的基礎上,還把鴻蒙、ai、黑光、全彩真正結合起來,形成了一整套的解決方案。」
這些能力的結合,讓越影視覺開花結果,為機器視覺所看到的美好世界做足了準備。
讓機器,看懂這世界的美好
早在2018年,海思就發布了全球首顆高清8k ai 智能ipc晶元,從而在交通、安平等領域帶來了一場智能化變革。今天,我們的生活已經深刻從中受惠,而全新升級的越影視覺,帶著更強大的端側ai大模型,以及出眾的綜合視覺能力,將會在這個智能時代的前夜,給多大領域帶來更深刻的變革。
在智慧管理領域,越影視覺的ai isp能力可以實現黑夜圖像像白天一樣清晰,實現晝夜如一的守護。
在對影像視覺化有較強需求的領域,比如無人機、機器人等。越影視覺可以實現更具泛化性、通用性的識別需求,讓小眾的檢測目標,識別任務,也能以輕鬆、準確、低成本的方式在端側實現。
在直播領域,越影可以讓運動相機等直播設備全面升級,實現如同單反的直播效果,從而給用戶帶來更好的視覺體驗。同時,越影視覺能夠實現更加快速準確的對焦,為剎那芳華的直播做好智能化準備。
以視覺soc為核心打造的越影視覺解決方案,可以讓更多設備、更多產品看清看懂這個世界。
而機器眼中看到的繁花,也將反過來裝點我們的生活。智能世界的美好,源自每一次機器的看見,每一次ai的看懂。