20
|
2021-07-13

樂鑫聲學(xué)雙麥克風(fēng)前端算法通過 Alexa 語音服務(wù)認(rèn)證

方案基于 ESP32-S3 SoC亿遂,后續(xù)將會(huì)擴(kuò)展到更多 SoC

樂鑫科技 AI 實(shí)驗(yàn)室自主研發(fā)的聲學(xué)前端 (Audio Front-End, AFE) 算法已被認(rèn)證為 Alexa 內(nèi)置設(shè)備的「軟件音頻前端」解決方案吃既。

亞馬遜為將 Alexa 語音服務(wù)(AVS)更好的推廣應(yīng)用拒秘,共設(shè)有通用音頻前端開發(fā)套件号显、智能揚(yáng)聲器和條形音箱開發(fā)套件、耳機(jī)開發(fā)套件躺酒、智能家居開發(fā)套件押蚤、機(jī)頂盒/流媒體設(shè)備開發(fā)套件、智能屏幕開發(fā)套件羹应、音頻前端模塊揽碘、軟件音頻前端解決方案在內(nèi)的八大解決方案,通過認(rèn)證的第三方芯片园匹、模組雳刺、語音處理技術(shù)、軟件裸违,結(jié)合 AVS API 助力企業(yè)構(gòu)建商業(yè)級語音產(chǎn)品掖桦,同時(shí)降低開發(fā)成本。

此次樂鑫 AI 實(shí)驗(yàn)室獲得認(rèn)證的聲學(xué)前端算法即是 AVS 八大板塊之一累颂。值得注意的是滞详,該板塊下獲得認(rèn)證的還有思必馳、地平線及聲智等國內(nèi)企業(yè)紊馏。

樂鑫 AFE 算法可基于集成了 AI 和 DSP 加速的 ESP32-S3 SoC 進(jìn)行聲學(xué)前端處理料饥,在只有兩顆麥克風(fēng)的配置下,仍然可以實(shí)現(xiàn) 360 度語音拾音朱监。兩顆麥克風(fēng)間距可在 20mm~80mm 之間配置岸啡,為開發(fā)人員終端產(chǎn)品的硬件設(shè)計(jì)提供相當(dāng)大的靈活性。

%E6%88%AA%E5%B1%8F2021-07-13_%E4%B8%8B%E5%8D%882

針對遠(yuǎn)場精準(zhǔn)拾音的場景赫编,AI 實(shí)驗(yàn)室還開發(fā)了一套遠(yuǎn)場拾音的算法框架巡蘸,包括多通道聲學(xué)回聲消除 (AEC, Acoustic Echo Cancelation)、盲源分離 (BSS, Blind Source Separation)擂送、語音活動(dòng)檢測和噪聲抑制 (NS, Noise Suppression)悦荒,以保證智能設(shè)備在遠(yuǎn)場噪聲環(huán)境下,也能實(shí)現(xiàn)準(zhǔn)確的語音喚醒和識(shí)別嘹吨。

%E6%88%AA%E5%B1%8F2021-07-13_%E4%B8%8B%E5%8D%882

麥克風(fēng)在拾取和過濾音頻信號(hào)后搬味,算法還會(huì)通過離/在線的方式對音頻進(jìn)行處理,實(shí)現(xiàn)更深層次的抑制噪聲。

樂鑫 AFE 算法運(yùn)行時(shí)僅需消耗 12-20% CPU 空間和 460 KB 存儲(chǔ)空間(220 KB 內(nèi)存和 240 KB 外部存儲(chǔ))碰纬,能夠?yàn)檫\(yùn)行在同一 SoC 上的其他應(yīng)用程序保留充足的資源空間萍聊。

據(jù)了解,后續(xù)推出的其他集成 AI 和 DSP 加速的 SoC 也將為 AFE 算法提供硬件支持悦析。

編輯:達(dá)達(dá) / 深圳灣

>>
Back to top btn
亚洲AV无码国产精品网址,久久亚洲AV成人出白浆无码国产,日韩AV美乳欧美,永久免费AV无码软件app下载