瑞薩與Syntiant開發多模型人工智慧解決方案 智慧應用 影音
Wolfspeed
緯謙科技

瑞薩與Syntiant開發多模型人工智慧解決方案

  • 吳冠儀台北

瑞薩電子和Syntiant,聯合開發一種語音控制的多模型人工智慧解決方案,可支援低功耗非接觸式操作,用於基於視覺人工智慧的物聯網和邊緣系統中的圖像處理,例如自助結帳機、安全攝影機和視訊會議系統,以及清潔機器人裝置等智慧型設備。

新解決方案結合了瑞薩RZ/V系列視覺人工智慧微處理器單元和低功耗多模式Syntiant NDP120、多功能神經決策處理器,以提供進階語音和圖像處理功能。

聯合解決方案具有always-on的功能,可從待機模式快速語音觸發啟動,以執行對象識別、臉部識別和其他基於視覺的任務,這些任務是安全攝影機和其他系統中的關鍵功能。例如,當使用者定義的語音提示啟動和系統操作時,視覺人工智慧識別會追蹤操作者的行為並進行操作,或在檢測到可疑行為時發出警告。

多模型架構可提升視覺人工智慧系統的非接觸式使用者體驗。由於可獨立於視覺人工智慧功能開發軟體,因此使用專用的節能晶片進行語音識別可降低待機功耗,同時加快系統開發速度。

瑞薩物聯網和基礎設施業務部資深副總裁兼SoC業務負責人Hiroto Nitta表示,可以預見使用多個不同訊息(包括圖像和語音)來提高易用性和安全性的多模型系統需求將會增加。透過低功耗圖像AI技術領導者瑞薩和語音AI技術領導者Syntiant之間的合作,將加速低功耗、超小型智慧語音AI技術在嵌入式系統中的應用,為全球客戶提供綜合解決方案。

Syntiant CEO Kurt Busch表示,基於語音的使用者界面將為客戶帶來新的使用者體驗,使下一代創新理念從概念變為現實。已經在全球提供超過1,500萬個深度學習NDP,以在各種消費者和工業物聯網應用中實現always-on的語音。與瑞薩的合作提供一種強大、低功耗的語音和圖像解決方案,以應用在全球各種不同設備和使用情境中。

瑞薩RZ/V系列視覺AI MPU包含瑞薩獨有的DRP-AI(動態可重構處理器-AI)加速器,將高精度AI推論與業界領先的效能相結合。這種卓越的功耗表現降低對散熱措施(如散熱器或冷卻風扇等)的需求,進而減少BOM成本,並使視覺AI更容易整合至各種嵌入式應用中。

Syntiant NDP120晶片整合了複雜的人工智慧能力,可用於實現許多高精度、聲控語音功能,包括說話者識別、關鍵字檢測、多個喚醒詞和本地命令識別。NDP120與Syntiant Core 2神經網路推論引擎封裝在一起,亦可同時運行多個應用程式,只需1mW的電池功耗。

新的語音控制多模型AI解決方案使用來自更廣泛的瑞薩產品組合的多個相容的元件,為客戶提供一個進階的原型設計平台,以加快上市時間並降低風險。新的解決方案是瑞薩成功產品組合的一部分,具有引人注目的類比、電源和嵌入式處理產品組合,可幫助客戶加速設計並更快地進入市場。


關鍵字