7月3日—5日,2025第九屆集微半導體大會在上海張江科學會堂盛大召開。本屆大會以“張江論劍 共贏浦東 芯鏈全球”為主題,吸引了全球半導體產(chǎn)業(yè)領(lǐng)袖、技術(shù)專家和企業(yè)家齊聚一堂,共商行業(yè)發(fā)展大計。
在7月4日下午舉辦的端側(cè)AI技術(shù)與應用創(chuàng)新論壇上,飛凌微首席執(zhí)行官兼思特威副總裁邵科帶來《端側(cè)視覺組合方案:多元智能終端感知“芯”力量》的主題演講,就端側(cè)AI技術(shù)在視覺感知領(lǐng)域的應用及趨勢,以及飛凌微端側(cè)視覺方案在車載領(lǐng)域和AIoT領(lǐng)域的應用展開分享。
在智能化浪潮下,端側(cè)AI技術(shù)在視覺感知領(lǐng)域的應用正加速滲透到生活與生產(chǎn)各方面,為多元終端視覺設備賦予強大識別感知能力,有力推動各行業(yè)變革發(fā)展。
邵科認為,端側(cè)AI近幾年的應用越來越廣泛,從傳統(tǒng)的安防行業(yè)到智能手機和車載電子等領(lǐng)域,都存在大量視覺應用落地的機會。
在智能安防領(lǐng)域,端側(cè)AI讓監(jiān)控設備實時識別人車、分析行為并及時警報;車載電子借助它感知周邊環(huán)境、識別交通信號、監(jiān)測駕駛員狀態(tài);智能手機憑其實現(xiàn)相機精準處理、場景識別與面部解鎖;筆記本電腦和平板電腦在其加持下優(yōu)化視頻會議體驗、支持手勢操作;工業(yè)自動化里,它可實時檢測產(chǎn)品質(zhì)量。在智能家居、智慧物流倉儲、智能交通系統(tǒng)及 AR/VR 設備等應用場景中,端側(cè) AI 不僅有多種視覺應用,還能對系統(tǒng)整體性能帶來顯著提升。
此外,端側(cè)AI的個性化能力也是其未來發(fā)展的重要方向。由于端側(cè)設備能夠直接接觸并學習用戶的行為和偏好,通過在本地處理數(shù)據(jù)和任務,實現(xiàn)快速響應,無需將數(shù)據(jù)傳輸?shù)皆贫?,從而能夠為用戶提供更加精準、個性化的服務,這種個性化特性不僅能夠提升用戶體驗,還將進一步提高用戶黏度,為終端廠商帶來更多的商業(yè)機會。
邵科表示,端側(cè)視覺組合方案的五大優(yōu)勢是其在視覺感知領(lǐng)域廣泛高效應用的關(guān)鍵,即高實時性保障快速響應,數(shù)據(jù)隱私安全提升信息應用可靠性,節(jié)省寬帶減輕大數(shù)據(jù)傳輸網(wǎng)絡壓力,高適配性適配不同終端,成本優(yōu)勢降低相關(guān)領(lǐng)域運營和生產(chǎn)開支。
作為思特威子品牌,飛凌微于2024年8月正式官宣成立,公司專注于先進視覺處理芯片技術(shù)的研發(fā)與設計,憑借視覺成像及處理技術(shù)和市場優(yōu)勢,結(jié)合端側(cè)應用技術(shù)和方案,推出M1系列高性能視覺處理芯片,滿足智能汽車對高清成像、高動態(tài)范圍、低功耗等性能指標的不斷提升的需求。
M1系列芯片賦能車載視覺多元應用
邵科強調(diào),飛凌微自成立起便將高性能ISP(圖像信號處理器)作為重點聚焦的方向之一。今年以來,飛凌微陸續(xù)推出的M1系列芯片包含高性能ISP(M1)以及兩顆用于車載端側(cè)視覺感知預處理的輕量級SoC(M1Pro和M1Max),各型號在性能與應用場景上各有側(cè)重。
作為高性能ISP的M1芯片,其具備強大的圖像處理能力,能夠處理800萬像素的圖像數(shù)據(jù),也可以同時處理兩路300萬像素的圖像數(shù)據(jù)。這一特性使其在多個領(lǐng)域都能發(fā)揮作用,尤其適用于車載ADAS、影像類產(chǎn)品,以及法規(guī)已經(jīng)落地的電子后視鏡等方面。
而M1Pro和M1Max這兩款輕算力端側(cè)SoC,同樣表現(xiàn)出色。它們內(nèi)置了自研的NPU和CPU算力,這一設計使其在處理好圖像的同時,還能進行輕量級的AI應用,比如人臉識別、姿態(tài)識別等。這樣的功能不僅為車載視覺系統(tǒng)的后端處理減輕了負擔,還顯著提升了整體系統(tǒng)的實時性和安全性。
這三款芯片還采用了業(yè)內(nèi)最小的封裝形式——BGA 7mm×7mm封裝。這一極小的封裝尺寸不僅提升了模組的小型化設計,還為車載應用的實際落地提供了更多靈活性。
值得一提的是,M1系列三款新品均符合AEC-Q100 Grade 2認證及ISO26262 ASIL-B功能安全等級要求,符合嚴苛的車規(guī)級標準。
在車載端側(cè)視覺組合方案領(lǐng)域,飛凌微將M1系列端側(cè)AI視覺處理芯片與車規(guī)級CMOS圖像傳感器相集成,能廣泛適配前視、后視、艙內(nèi)DMS(駕駛員監(jiān)控系統(tǒng))、OMS(乘員監(jiān)控系統(tǒng))、電子后視鏡等多種車載視覺應用場景。
以艙內(nèi)乘員監(jiān)控系統(tǒng)(OMS)的應用為例,飛凌微推出的M1 AI ISP芯片與5MP車規(guī)級圖像傳感器組合方案頗具優(yōu)勢。該方案借助M1芯片內(nèi)置的高性能暗光降噪算法、圖像增強算法,以及自研輕算力NPU對影像信息的加速處理與優(yōu)化能力,可顯著提升影像畫質(zhì),為OMS應用及車載信息娛樂系統(tǒng)提供清晰、穩(wěn)定的實時艙內(nèi)影像,進而為艙內(nèi)感知與信息娛樂系統(tǒng)的高效識別處理提供有力支撐。
邵科補充,飛凌微的產(chǎn)品已經(jīng)可以在模組端提升成像性能,給駕駛員更好的駕駛體驗,在性能端和安全端完成替換和升級。
向機器人、物聯(lián)網(wǎng)等細分應用拓展
在完成車載領(lǐng)域積累的同時,飛凌微也將產(chǎn)品從車載領(lǐng)域向機器人、物聯(lián)網(wǎng)等方向拓展,以性能更優(yōu)異的端側(cè)視覺解決方案,支撐更多細分應用的進一步升級。
邵科進一步補充,端側(cè)AI在智能車載、智能家居、物聯(lián)網(wǎng)、機器視覺等領(lǐng)域都有潛在的應用機會。飛凌微將結(jié)合原有思特威在視覺成像及處理技術(shù)上的優(yōu)勢,與端側(cè)SoC實現(xiàn)更好的方案融合,為客戶提供更優(yōu)質(zhì)的服務。
在消費和工業(yè)級智能視覺應用領(lǐng)域,飛凌微則提供了基于A1芯片產(chǎn)品的一系列端側(cè)AI SoC + Sensor組合方案,助力智能硬件、智能家居、工業(yè)檢測、夜視增強等多元智能終端應用的進一步升級。
以智能硬件為例,飛凌微A1 AI SoC芯片適配0.3MP-2MP全局快門CMOS圖像傳感器,可形成多樣的單目/雙目智能視覺感知模組方案,實現(xiàn)快速的智能化應用場景的落地。這些組合方案依托飛凌微A1芯片,不僅能實現(xiàn)精準的RGB或IR影像處理與輸出,還支持運行人臉/物體檢測識別等視覺算法應用,幫助智能硬件設備在視覺感知模組端側(cè)完成對用戶的表情、狀態(tài)和情緒的實時感知,也能為設備系統(tǒng)后端的運算處理減負,顯著提升端側(cè)視覺系統(tǒng)的整體運行效率。
邵科總結(jié)稱,飛凌微持續(xù)聚焦于端側(cè)視覺處理芯片的研發(fā),致力于將視覺處理芯片與圖像傳感器在方案層面實現(xiàn)深度融合,這種組合策略能夠為產(chǎn)品帶來獨特優(yōu)勢;另一方面,通過優(yōu)化圖像信號處理這一關(guān)鍵環(huán)節(jié),飛凌微可顯著提升影像品質(zhì)。將這兩方面優(yōu)勢相結(jié)合,能夠?qū)崿F(xiàn)更為極致的系統(tǒng)集成,通過在模組端開展相應的處理與應用,整個系統(tǒng)化應用方案不僅能具備更靈活的配置方式,還能更便捷地進行更新迭代。