“現(xiàn)在切入語音識別正是好時機(jī),更早進(jìn)入也是在教育市場,過去兩年一些公司的出貨量經(jīng)歷了非常殘酷的考驗。現(xiàn)在行業(yè)進(jìn)入拐點時期,我們進(jìn)入正是最好的時間點”,探境科技CEO魯勇對<電子發(fā)燒友>表示。
“拐點”之說何來?
根據(jù)Gartner在今年8月底發(fā)布的“人工智能技術(shù)成熟度曲線”可以看到,處于生產(chǎn)力成熟期(Plateau of Productivity)的技術(shù)僅有兩項:語音識別(Speech Recognition)和GPU加速器(accelerators),且正處于爬升態(tài)勢。來自市場的反饋同樣如此,這兩項技術(shù)是當(dāng)前落地最快、最多的AI項目。在語音識別的落地項目中,場景最多的當(dāng)屬智能家居領(lǐng)域,以智能音箱為典型代表。但是,從用戶反饋來看,兩大問題已經(jīng)浮現(xiàn)出來:一是在真實語音交互場景中,在復(fù)雜的聲場環(huán)境、噪音的影響下,語音識別準(zhǔn)確率直線下降;二是越來越多安全問題的爆出,讓用戶對于家中的這個“云耳朵”充滿了擔(dān)憂。
第一批智能音箱在滿足了用戶的好奇心之后,成為非常雞肋的一個產(chǎn)品,要么在家中落灰,要么需要時時警惕,僅在偶爾使用時才敢接上電源。
在成為爆款這件事上,智能音箱讓業(yè)界失望了。
滿足好奇心過后,語音交互下一波靠什么撬動市場?是價格嗎?
是,也不全是。在巨大的市場痛點面前,誰能抓住用戶需求,真正解決問題,誰才有希望在這條擁擠的賽道上前進(jìn)一小段。
市場正在開始新一輪的篩選。
市場需要什么樣的語音識別方案?
語音作為人機(jī)交互的重要方式之一,終極目標(biāo)是實現(xiàn)自然的交互。而當(dāng)前的技術(shù)遠(yuǎn)遠(yuǎn)達(dá)不到,在語音識別這一環(huán)節(jié),解決噪音問題、提升遠(yuǎn)場語音識別率、消除用戶顧慮/提升安全性成為當(dāng)務(wù)之急。在家居場景下,語音識別面臨兩大挑戰(zhàn):
第一是低信噪比。在我們的生活場景中,存在著一些高噪聲的環(huán)境,比如抽油煙機(jī)或者掃地機(jī)器人,這些設(shè)備上噪聲最低也有70分貝。麥克風(fēng)距離這些設(shè)備非常近,而操作者距離麥克風(fēng)會更遠(yuǎn)些,這些因素疊加,會導(dǎo)致語音識別設(shè)備采集到的信噪比非常低,給識別帶來很大的挑戰(zhàn)。
第二是非穩(wěn)態(tài)的噪聲的影響。傳統(tǒng)降噪算法無法處理,比如電視劇聲音/音樂突然的節(jié)奏變化,或者是做飯時叮叮咣咣的聲音等,都帶有突發(fā)性和不可預(yù)見性。
為了解決上述挑戰(zhàn),增強(qiáng)語音信號質(zhì)量、提升信噪比,業(yè)界通常采用麥克風(fēng)陣列的方式。但是,在干擾信號和目標(biāo)聲源方向接近的場景下,傳統(tǒng)的麥克風(fēng)陣列增強(qiáng)算法幾乎無法處理。
據(jù)<電子發(fā)燒友>了解,目前市面上的智能語音芯片方案可粗略分為兩種:一種是披著“AI”外衣的DSP,這種方案可實現(xiàn)輕量級的NN支持,在識別指令數(shù)量方面有提升,但是通常并無降噪支持;另一種可支持RNN/CNN/DNN等模型、架構(gòu)上通常采用MCU+NN或MCU+DSP+NN。
在魯勇看來,未來用戶體驗要求會越來越高,相應(yīng)地將造成算法越來越復(fù)雜,對算力的要求將更高。只有從底層進(jìn)行顛覆性創(chuàng)新,才能真正解決問題。
揭密探境語音識別三大核心技術(shù)
AI降噪+HONN神經(jīng)網(wǎng)絡(luò)提升識別率在語音識別的研發(fā)過程中,一個完整的識別鏈路可以簡化為麥克風(fēng)輸入、降噪處理、語音識別、識別結(jié)果輸入四個環(huán)節(jié)。想做好識別,首先要在降噪處理上下功夫。
探境自研的AI降噪算法基于深度學(xué)習(xí),不僅能夠處理穩(wěn)態(tài)的噪聲,非穩(wěn)態(tài)的突發(fā)性噪聲也能很好的過濾。據(jù)探境科技副總裁李同治介紹,憑借探境AI降噪算法的有效性,他曾將一批信噪比在3dB左右的語音數(shù)據(jù)做了測試,降噪后比降噪前提高30%識別準(zhǔn)確率。
在對聲音進(jìn)行降噪處理之后,就進(jìn)入到了語音識別環(huán)節(jié)。在這一環(huán)節(jié)中,神經(jīng)網(wǎng)絡(luò)模型所需的算力決定了模型的描述能力,同時也決定了模型處理能力和識別率的上限。
以往的語音識別算法,用的最多的是全連接的操作DNN/DTNN。據(jù)了解,國內(nèi)多家語音識別芯片采用的都是DNN的方法。
探境將計算機(jī)視覺的經(jīng)驗遷移到語音識別中,在語音識別算法上加入了更多的卷積操作,重新設(shè)計了一個高計算強(qiáng)度的神經(jīng)網(wǎng)絡(luò),即HONN(High Operation Neural Network)。
圖:DNN與HONN區(qū)別
在高計算強(qiáng)度神經(jīng)網(wǎng)絡(luò)里,每一個處理單元變成了立體維度,所能處理的信息量和計算密度,也遠(yuǎn)遠(yuǎn)超過傳統(tǒng)DNN/DTNN的方法。由于多了一個維度的識別,性能方面得到了顯著提升:DNN需要1.6M的存儲空間,而HONN僅需要350k,這意味著可以使用存儲空間更少、成本更低的芯片來做語音識別。
同時,DNN與HONN所需的算力相反。在處理高強(qiáng)度模型單幀時,HONN需要超過幾百兆OPS,而一般的DNN模型需要個位數(shù)的算力。兩者相差超過30倍。對于神經(jīng)網(wǎng)絡(luò)來說,模型所需的算力決定了模型的描述能力,同時也決定了模型處理能力和識別率的上限,從國內(nèi)外趨勢來看,最近工業(yè)和學(xué)術(shù)界趨向于使用算力需求大的模型來做建模。
據(jù)李同治介紹,就好比動物界大腦新皮層的容量決定著物種的智力程度,比如人類的新皮層容量是普通哺乳動物的近100倍,相應(yīng)的,人類的智能程度超出普通哺乳動物幾個數(shù)量級。
卷積運算與人類大腦負(fù)責(zé)感知模塊的處理方法類似,能夠提取滿足大腦認(rèn)知的本質(zhì)特征。在參數(shù)數(shù)量相同的條件下,HONN通過卷積操作能夠提供更高的計算強(qiáng)度,提高模型的算力需求。相對安靜的環(huán)境下兩者之間差別不大,但是當(dāng)信噪比進(jìn)一步降低時,基于HONN的方法識別優(yōu)勢非常明顯。
端到端FCSP雙麥算法簡化識別流程
“為了克服傳統(tǒng)分模塊語音增強(qiáng)算法的缺點,我們設(shè)計出了基于FCSP的端到端AI雙麥算法”,李同治表示。FCSP(Frequency Complex Subspace Projection)是探境自研的頻域復(fù)數(shù)子空間投影算法的簡稱。據(jù)了解,“端到端”是目前國際前沿的處理算法,亞馬遜、谷歌等都在采用類似的方法。探境基于FCSP的端到端雙麥算法直接輸入陣列信號,輸出的是最終的識別結(jié)果,中間部分全部交給基于深度學(xué)習(xí)的AI算法來處理,不再使用傳統(tǒng)的數(shù)字信號處理方法。信號增強(qiáng)與識別模塊整體以降低識別錯誤率為目標(biāo)進(jìn)行優(yōu)化,避免了語音增強(qiáng)與語音識別模塊錯配的問題。在信噪比為0dB時,相對于傳統(tǒng)的處理算法,相對識別錯誤率降低超過20%。
存儲優(yōu)先的SFA芯片架構(gòu)
魯勇談到,在核心技術(shù)方面,市面上一些玩家像是在跛著腳走路,要么有芯片沒算法,要么有算法沒芯片,這樣在市場上無法形成真正的競爭力。性能優(yōu)異的算法+算力強(qiáng)勁且通用性強(qiáng)的芯片,才能充分發(fā)揮實力,探境就是要提供全棧式的技術(shù)能力,包括芯片設(shè)計、算法研究、軟件開發(fā)和系統(tǒng)集成,提供Turn-key整體解決方案。
探境的骨干力量在行業(yè)內(nèi)擁有10-20年的工作經(jīng)驗,其中一些曾就職于Marvell、英偉達(dá)、高通、Intel、硅谷數(shù)模等知名公司。基于多年的經(jīng)驗和對AI未來的預(yù)判,他們決定推翻馮諾依曼體系,推出了存儲優(yōu)先(SFA)的芯片架構(gòu)。
SFA架構(gòu)以存儲驅(qū)動計算,具有能效比高、資源利用率高、通用性強(qiáng)等特點。在SFA架構(gòu)上實現(xiàn)深度學(xué)習(xí)時,只需要一個較高層次的神經(jīng)網(wǎng)絡(luò)描述。SFA的編譯器首先將這個神經(jīng)網(wǎng)絡(luò)進(jìn)行全部融合,然后根據(jù)具體架構(gòu)實現(xiàn)的規(guī)模產(chǎn)生一個統(tǒng)一的存儲流圖,再進(jìn)行存儲節(jié)點的時空映射,最后根據(jù)各個節(jié)點之間的計算類型配置計算單元,組合起來形成一個統(tǒng)一的固件供SFA控制器使用。
在28nm常規(guī)工藝芯片的對比測試中,SFA架構(gòu)在乘法器數(shù)目相同情況下(DRAM為LPDDR4),結(jié)果如下表,系統(tǒng)能效超過4T OPS/W,甚至超過12nm的芯片方案。
測試網(wǎng)絡(luò) |
數(shù)據(jù)訪問量 DSP VS SFA |
存儲子系統(tǒng)功耗 DSP/SFA |
inceptionv3 | 32:1 | 9:1 |
mobilenetssd | 43:1 | 11:1 |
resnet50 | 17:1 | 6:1 |
VGG19 | 108:1 | 17:1 |
yolov2 | 47:1 | 12:1 |
注:測試方法為帶有卷積加速器擴(kuò)展指令的DSP模式與SFA架構(gòu)模式的對比
探境有一句宣傳語:NPU的性能,MCU的價格,背后動力主要來源于芯片架構(gòu)的優(yōu)化。設(shè)計這樣一個全新的架構(gòu)難度不言而喻,據(jù)魯勇介紹,其中涉及數(shù)學(xué)、計算機(jī)架構(gòu)、數(shù)據(jù)管理調(diào)度、硬件設(shè)計經(jīng)驗等,是個復(fù)雜的綜合工程,并且要把這些方法揉在一起發(fā)揮出最大效力,通過算法和調(diào)度方式降低資源的連接復(fù)雜度,從而降低功耗,提高對數(shù)據(jù)本身的使用效率。他強(qiáng)調(diào),SFA存儲優(yōu)先,不同于存算一體架構(gòu)。后者需要從底層工藝去修改芯片設(shè)計,而存儲優(yōu)先是算法上的更新,無需修改芯片底層單元庫。在當(dāng)前商業(yè)化節(jié)奏越來越快的潮流之下,這種架構(gòu)更通用、更兼容,大大加快了商業(yè)化落地速度。
探境能否漸入佳境?
依托于獨有的AI降噪技術(shù)和HONN神經(jīng)網(wǎng)絡(luò),探境的Voitist音旋風(fēng)611可以覆蓋絕大部分生活場景,量產(chǎn)供貨僅半年,已經(jīng)實現(xiàn)百萬級出貨。目前,探境擁有約30家合作伙伴,包括美的、海爾等智能家居制造大廠,智能家居制造商阿凡達(dá)智控、渠道商世強(qiáng)科技也剛剛與探境達(dá)成合作。從探境首次曝光的產(chǎn)品矩陣來看,覆蓋低功耗產(chǎn)品、主流產(chǎn)品、旗艦產(chǎn)品三大系列、六顆AI芯片,對于離在線一體、本地NLP、超低功耗產(chǎn)品等都有布局,希望形成智能家居網(wǎng)絡(luò)的矩陣式入口。
離線智能語音交互是當(dāng)前一個重要的細(xì)分領(lǐng)域,無需聯(lián)網(wǎng)可在本地實現(xiàn)語音交互,不僅能夠保護(hù)隱私安全,同時也可以減少用戶大量數(shù)據(jù)傳送到云端的壓力,當(dāng)前主要應(yīng)用于白電市場。可通過離線智能語音控制的家電產(chǎn)品目前包括:燈控、空調(diào)、電視機(jī)、油煙機(jī)、玩具等。
不過,探境不僅僅滿足于做一家語音方案公司。初嘗到語音市場的甜頭后,探境把觸角伸到了下一個紅利市場——圖像識別。據(jù)魯勇介紹,探境的圖像芯片在2019年Q4已經(jīng)流片成功,在某些領(lǐng)域已經(jīng)開始產(chǎn)生營收了。根據(jù)公布的核心指標(biāo)來看,核心能效比IPS/W達(dá)800,是目前全球AI芯片中最高的,而這足以支撐探境去云端推理市場正面PK。
不過,就像魯勇所說,AI芯片像馬拉松長跑,比的是耐力,而不是沖刺速度,在這場比賽中,不是要看誰跑得快,而是要看誰有潛力到達(dá)終點,誰在中途不走岔路。
探境能否從智能家居開始,打穩(wěn)地基,漸入佳境?還需要市場應(yīng)用最后給出答案。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。
舉報投訴
-
人機(jī)交互
+關(guān)注
關(guān)注
12文章
1245瀏覽量
56361 -
語音識別
+關(guān)注
關(guān)注
39文章
1779瀏覽量
114131 -
NPU
+關(guān)注
關(guān)注
2文章
326瀏覽量
19666 -
探境科技
+關(guān)注
關(guān)注
0文章
4瀏覽量
1898
發(fā)布評論請先 登錄
相關(guān)推薦
熱點推薦
語音識別技術(shù)在通信領(lǐng)域中的應(yīng)用實例
語音識別技術(shù)也被稱為自動語音識別(Automatic Speech Recognition,ASR),是通過計算機(jī)對語音信號進(jìn)行分析和
詳解語音識別技術(shù)在通信領(lǐng)域中的應(yīng)用
語音識別技術(shù)也被稱為自動語音識別(Automatic Speech Recognition,ASR),是通過計算機(jī)對語音信號進(jìn)行分析和

基于語音識別的智能會議系統(tǒng)具備哪些交互功能
標(biāo)貝科技專注智能語音交互領(lǐng)域多年,在語音識別和語音合成領(lǐng)域有著多項大型企業(yè)合作案例,標(biāo)貝與多個智能會議系統(tǒng)廠商合作,成功將語音
九芯電子熱水器語音識別芯片IC方案,解放雙手,高識別率
九芯電子推出NRK3301語音識別芯片,支持離線識別,精準(zhǔn)度高,可語音控制熱水器,多國語言支持,安全保護(hù),已合作多家大廠,推動熱水器行業(yè)智能
NRK3502系列芯片 | 制氧機(jī)離線語音識別方案
NRK3502芯片制氧機(jī)離線語音識別方案制氧機(jī)離線語音識別方案是基于NRK3502藍(lán)牙雙模智能語音IoT芯片,依托于九芯電子在

語音識別技術(shù)在醫(yī)療領(lǐng)域的應(yīng)用
語音識別技術(shù)在醫(yī)療領(lǐng)域的應(yīng)用已經(jīng)越來越廣泛,為醫(yī)療服務(wù)帶來了諸多便利和效率提升。以下是對語音識別技術(shù)在醫(yī)療領(lǐng)域應(yīng)用的介紹: 一、語音病歷
語音識別與自然語言處理的關(guān)系
在人工智能的快速發(fā)展中,語音識別和自然語言處理(NLP)成為了兩個重要的技術(shù)支柱。語音識別技術(shù)使得機(jī)器能夠理解人類的語音,而自然語言處理則讓
語音識別技術(shù)的應(yīng)用與發(fā)展
語音識別技術(shù)的發(fā)展可以追溯到20世紀(jì)50年代,但直到近年來,隨著計算能力的提升和機(jī)器學(xué)習(xí)技術(shù)的進(jìn)步,這項技術(shù)才真正成熟并廣泛應(yīng)用于各個領(lǐng)域。語音識別技術(shù)的應(yīng)用不僅提高了工作效率,也極大
ASR與傳統(tǒng)語音識別的區(qū)別
ASR(Automatic Speech Recognition,自動語音識別)與傳統(tǒng)語音識別在多個方面存在顯著的區(qū)別。以下是對這兩者的對比: 一、技術(shù)基礎(chǔ) ASR : 基于深度學(xué)習(xí)算
ASR語音識別技術(shù)應(yīng)用
ASR(Automatic Speech Recognition)語音識別技術(shù),是計算機(jī)科學(xué)與人工智能領(lǐng)域的重要突破,能將人類語音轉(zhuǎn)換為文本,廣泛應(yīng)用于智能家居、醫(yī)療、交通等多個領(lǐng)域。以下是對ASR
物聯(lián)網(wǎng)系統(tǒng)智能控制產(chǎn)品的語音識別方案_離線語音識別芯片分析
01 物聯(lián)網(wǎng)系統(tǒng)中為什么要使用離線語音識別芯片 物聯(lián)網(wǎng)系統(tǒng)中使用離線語音識別芯片的原因主要基于以下幾個方面: 1、實時性與可靠性 實時性好:離線語音



唯創(chuàng)知音WT2605C用在離在線語音識別方案# #語音芯片 #語音識別 #唯創(chuàng)知音
語音識別
WT-深圳唯創(chuàng)知音電子有限公司
發(fā)布于 :2024年09月12日 17:24:28
什么是離線語音識別芯片?與在線語音識別的區(qū)別
離線語音識別芯片適用于智能家電等,特點為小詞匯量、低成本、安全性高、響應(yīng)快,無需聯(lián)網(wǎng)。在線語音識別功能更廣泛、識別準(zhǔn)確率高,但依賴穩(wěn)定網(wǎng)絡(luò)。
ESP32-WROOM跑了官方的語音識別中的asr例程,但是切換到語音識別就會出錯的原因?
我是用的是ESP32-WROOM芯片,用的Vscode+IDF+ADF,我跑了一下官方的語音識別中的asr例程,但是我發(fā)現(xiàn),語音喚醒可以,但是一旦切換到語音
發(fā)表于 07-19 08:27
評論