09.16 思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

今年是TWS藍牙耳機行業發展最迅猛的時期,隨著消費升級的推進,隨身、智能已成為音頻愛好者最為關注的話題。

然而,TWS藍牙耳機行業往往具有大投入、高技術門檻、利益相關多方的行業特點,入局者想要在TWS藍牙耳機領域紮根生長並不容易,對TWS藍牙耳機行業從業者而言,如何準確把控整體產業鏈和尋找適合自身獨特的道路變得尤為重要。

對於深耕智能語音行業十多年的思必馳來說,在準確把控整體產業鏈和尋找適合自身獨特的道路上已有了一些沉澱。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

在此次2019(秋季)中國藍牙耳機產業高峰論壇上,來自思必馳的劉洪彬先生髮表了關於《 低功耗算法在智能穿戴設備的應用》的演講,從自身經驗出發,闡釋了其對TWS藍牙耳機的獨特看法。

以下為演講實錄,內容經我愛音頻網整理和編輯。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

思必馳是基於AI技術、國內領先的人機交互平臺型公司,從人機交互Turnkey產品與方案到全渠道對話式智能服務方案,逐漸總結出了自身的耳機經驗。

關於芯片適配:更多的嘗試,更多的期待

十多年來,思必馳紮根智能語音行業,不斷致力於智能語音技術的算法的研究,包括從前端信號處理、喚醒、聲紋、識別、語義理解,到知識圖譜、對話管理、語音合成等等。此外,思必馳定製平臺提供專門定製人機交互方案服務,主要應用於智能、物流等領域。

1、低功耗算法

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

低功耗算法主要包括雙麥Beamforming、命令詞檢測、骨導特徵檢測、回聲消除。而在智能穿戴產品方面,我們最常用的算法,用我們自身的喚醒說法來——minis檢測,從DMI上升到MS以後,對降噪的技術有了很好的提高。

2、思必馳在TWS藍牙耳機領域的方案嘗試

2019年上半年裡,我們團隊(40多人)針對智能耳機領域進行了嘗試許多,做了許多專門的方案,比如內嵌DSP的方案、BES2300和QCC512X、外掛DSP方案等。

(1)通用命令詞

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

針對這個方案,思必馳建立了兩個通用模型,類似接聽電話、掛斷電話、打開支付寶等。

(2)品牌喚醒詞定製

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

思必馳也會給客戶定製品牌喚醒詞。例如我們擁有完整的標準化數據產業方案以及數據標註方案,便於模型的訓練和調參。

(3)低功耗喚醒適配平臺

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

針對客戶不同的產品,不同的聲學結構,我們會對他的聲腔做一些聲學適配,最終在各個產品裡面逐個的驗證、測試。

(4)智能耳機、智能手機、平板

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

此外,思必馳適配高通的302X,藍訊的8832等藍牙芯片平臺,這些平臺通過硬件結合的形式實現,同時方案也應用於智能耳機、智能手機、平板等方面。

迄今為止,思必馳適配了這些芯片,在和芯片商適配的過程中做了很多努力,也積累了一些經驗,期待著能夠於更多的AI芯片商攜手,發揮出芯片最佳性能。

曉聽 FreeSpeech E1方案:打磨智能穿戴垂直場景解決方案

芯片的適配其實只是第一步,打磨完整的方案依然需要很多的時間和精力。

那麼接下來要談到,我們的適配能給大家帶來什麼幫助呢?

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

這個答案其實就是

曉聽 FreeSpeech E1方案,由我們和奧妮共同打造。

曉聽 FreeSpeech E1方案亮點頗多:2MIC定向增強與降噪;免提語音交互;30KM/H降風噪;always on < 2mA;12小時連續高清通話。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

Speech的降噪算法以及全交互的語音技術,通過結構的設計和聲學模型的適配,解決了30功率每小時的風噪的問題,使通話更加清晰,並同步提高了喚醒和識別率。整體功耗2mA以內,持續通話12小時,這就是思必馳整體的硬件方案。

1、QualcommH3為基,達成兩百個功耗成就

在芯片的優異表現下,整體待機功耗中,思必馳將整個功耗做到了2mA以內,持續通話12小時。

2、降噪:2MIC定向增強,環境噪聲抑制,可30KM/H抗風噪

這個方案也可以快速給方案商和手機廠商改版,在不更改外觀結構的前提下,直接就可以落地,做一款智能語音耳機。剛剛提到了我們的降噪算法,比如在騎行場景、餐廳場景、地鐵等表現效果非常不錯,這是採集的音頻數據,有一個對比的效果(播放音頻),這是帶風噪的,這是降噪後的效果。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

垂直場景解決方案

思必馳方案還包括垂直場景方案,當一個耳機賦予雲交付後,它的場景就會越來越多,比如我們在物流配送、專車駕駛、餐飲服務等方面也做了一些垂直的解決方案,致力於讓社會更為便捷、更為美好。例如讓快遞小哥解放雙手、給司機帶來一些安全、在餐飲行業的一些服務質檢等。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用


完整方案:從AI耳機到DUI對話平臺

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

從自身能力出發,思必馳可以提供一整套完整的接入方案,核心技能如下:

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用

智能耳機能夠通過SMA協議進入思必馳的曉聽APP,然後能夠滿足不同客戶的個性化需求,做個性化性能,把產品做得更具差異化:比如客戶的耳機接入我們的APP之後,就可以控制自己的家電;比如客戶要做服務質檢,利用場景識別,會進入我們後臺的質檢服務,其中包括手錶、音箱、耳機、手環等場景。此外,在蘋果的store和安卓的各大商店都可進行下載。

思必馳劉洪彬:低功耗算法在智能穿戴設備的應用


分享到:


相關文章: