隨著低功耗高性能只估、多模態(tài)交互能力霸株、邊緣計(jì)算和本地控制诸衔、分布式控制等趨勢技術(shù)的應(yīng)用突破希停，IoT 也正在朝更普及化的方向發(fā)展。

伴隨著技術(shù)的演進(jìn)署隘，手機(jī)宠能、智能家居設(shè)備、語音助手磁餐、AR/VR 設(shè)備违崇、耳機(jī)也將有更多的在終端上的創(chuàng)新體驗(yàn)和功能阿弃，但同時(shí)也加大了對硬件端及算法上的要求。

近日羞延，全球知名 IP 授權(quán)商 CEVA 發(fā)布了業(yè)界首個(gè)高性能傳感器中樞 DSP 架構(gòu) SensPro?渣淳，其將主要用于處理情境感知設(shè)備中的多種傳感器處理和融合工作負(fù)載，為滿足智能家居設(shè)備伴箩、語音助手入愧、AR/VR 設(shè)備、耳機(jī)等對于傳感器（攝像頭嗤谚、雷達(dá)棺蛛、ToF 等）所生成的圖像、聲音及運(yùn)動(dòng)數(shù)據(jù)的計(jì)算需要巩步。

當(dāng)下旁赊，傳感器正在變得越來越智能，除了獲取更多數(shù)據(jù)外椅野，還將承擔(dān)著為環(huán)境感知提供更精確的數(shù)據(jù)建模终畅。例如在使用結(jié)合了麥克風(fēng)、壓力竟闪、濕度离福、慣性、溫度和氣體傳感器的環(huán)境傳感器中樞（智能家居/辦公室）炼蛤，以及 ADAS/AV 中的環(huán)境感知术徊。其中，許多傳感器（雷達(dá)鲸湃、攝像頭赠涮、IMU、超聲波等）還必須能協(xié)同工作暗挑，更加大了計(jì)算難度笋除。

SensPro 的全新架構(gòu)結(jié)合了高動(dòng)態(tài)范圍信號處理、點(diǎn)云創(chuàng)建（point cloud creation）和深度神經(jīng)網(wǎng)絡(luò)（DNN）訓(xùn)練的需求炸裆，能夠支持高性能單精度和半精度浮點(diǎn)數(shù)學(xué)功能垃它，并且為語音、圖像烹看、DNN 推理處理和同時(shí)定位和映射（SLAM）提供 8 位和 16 位并行處理能力国拇。同時(shí)應(yīng)用廣泛使用的 CEVA-BX 標(biāo)量 DSP，可提供從單傳感器系統(tǒng)設(shè)計(jì)到多傳感器的情境感知設(shè)計(jì)的無縫移植路徑惯殊。

• 先進(jìn)的微體系架構(gòu)酱吝，結(jié)合了標(biāo)量和矢量處理單元，在 7nm 工藝節(jié)點(diǎn)處的運(yùn)行頻率為 1.6GHz土思；
  
• 集成了用于控制代碼執(zhí)行的 CEVA-BX2 標(biāo)量處理器务热，性能達(dá)到 4.3 CoreMark / MHz忆嗜；
  
• 采用寬 SIMD 可擴(kuò)展處理器架構(gòu)進(jìn)行并行處理，可配置多達(dá) 1024 個(gè) 8x8 MAC崎岂、256個(gè)16x16 MAC捆毫，專用的 8x2 二進(jìn)制神經(jīng)網(wǎng)絡(luò)支持，以及 64 個(gè)單精度和 128 個(gè)半精度浮點(diǎn) MAC冲甘，使得 SensPro 在 8x8 網(wǎng)絡(luò)推理绩卤、二進(jìn)制神經(jīng)網(wǎng)絡(luò)推理和浮點(diǎn)運(yùn)算的性能分別高達(dá) 3 TOPS、20 TOPS 和 400 GFLOPS江醇；
  
• 可提供每秒 400GB 帶寬的內(nèi)存架構(gòu)濒憋、4 路指令緩存、2 路矢量數(shù)據(jù)緩存嫁审、DMA 以及用于從數(shù)據(jù)交換中減輕 DSP 負(fù)荷的隊(duì)列和緩沖區(qū)管理器；

SensPro DSP 將主要先提供三種配置赖晶，每種配置均包括一個(gè) CEVA-BX2 標(biāo)量處理器和各種矢量單元律适，經(jīng)配置用于實(shí)現(xiàn)最佳的用例處理：

• SP250：具有 256 個(gè) 8x8 MAC 的單矢量單元，瞄準(zhǔn)圖像遏插、視覺和以聲音為中心的應(yīng)用捂贿；
  
• SP500F：具有 512 個(gè) 8x8 MAC 和 64 個(gè)單精度浮點(diǎn) MAC 的單矢量單元，瞄準(zhǔn)以 SLAM 為中心的應(yīng)用胳嘲；
  
• SP1000：具有 1024 個(gè) 8x8 MAC 和二進(jìn)制網(wǎng)絡(luò)支持的雙矢量單元厂僧，瞄準(zhǔn)以 AI 為中心的應(yīng)用；
  

為便于加快系統(tǒng)設(shè)計(jì)了牛，SensPro 還配備有一套先進(jìn)的軟件和開發(fā)工具颜屠，包括 LLVM C / C ++ 編譯器、基于 Eclipse 的集成開發(fā)環(huán)境（IDE）鹰祸、OpenVX API甫窟、OpenCL 軟件庫、帶有 CDNN-Invite API 以加入自定義 AI 引擎的 CEVA 深度神經(jīng)網(wǎng)絡(luò)（CDNN）圖形編譯器蛙婴、CEVA-CV 圖像功能粗井、CEVA-SLAM 軟件開發(fā)套件和視覺程序庫、ClearVox 降噪功能街图、WhisPro 語音識別浇衬、MotionEngine 傳感器融合以及 SenslinQ 軟件架構(gòu)。