2018-05-09

一段聲音的旅程(二)頭疼的音頻信號處理

作者:秋半仙删铃,哼哼

上一篇講到了語音產(chǎn)品的五大關鍵環(huán)節(jié)尘分,有興趣的童鞋可以自行回顧一段聲音的旅程(一)語音產(chǎn)品的五大關鍵環(huán)節(jié)排拷。

今天我們來講講這五大關鍵環(huán)節(jié)的第一個膘婶,也就是音頻信號處理缺前。

現(xiàn)在智能設備越來越多,有音箱悬襟、后視鏡衅码、機器人等等,但是語音的效果卻參差不齊脊岳。有些人會把這個問題歸結到“語音供應商”逝段,說這是供應商語音能力不行垛玻,以至于今天很多客戶在做語音引入的時候往往糾結于語音供應商的選擇。從demo的效果上看奶躯,感覺各家供應商的產(chǎn)品都是這樣的——

圖片源自網(wǎng)絡

可一旦做到設備端里帚桩,出來的效果卻是這樣的——


圖片源自網(wǎng)絡

其實對于語音落地到各種多端設備來說,最難的并不是語音和語義本身巫糙,最難的環(huán)節(jié)就是“音頻信號處理”朗儒,信號處理出來的音頻數(shù)據(jù)的好與壞,直接影響最終語音的識別效果参淹,而語音的識別效果又直接影響語義的理解結果醉锄,這些都是環(huán)環(huán)相扣的。這就好比你家沒買好學區(qū)房浙值,你娃就很可能上不了好小學恳不,上不了好小學就可能上不了好中學,上不了好中學就可能上不了好大學开呐,上不了好大學你娃就很可能變成一個啥也干不了只會摳腳啃老的巨嬰烟勋,是不是想想就好怕怕???????(又一不小心暴露了本半仙中年危機買不起房的屌絲心理)

圖片源自網(wǎng)絡

既然買學區(qū)房筐付,哦不卵惦,既然音頻信號處理這么重要,本半仙掐指一算瓦戚,和本半仙一樣愛學習的童鞋一定偷偷上網(wǎng)搜索了一下“信號處理”沮尿,一定看到一大堆的原理圖、公式较解、代碼畜疾,也一定覺得非常的痛苦,完全不知道從何入手……


圖片源自網(wǎng)絡

來來來印衔,不要著急啡捶,本半仙早就給各位童鞋算好了出路。學習一個完全不在我們知識體系中的知識奸焙,我一般建議從兩個方面著手瞎暑,一個是學以致用,也就是從“用”這個目的出發(fā)与帆,可以有針對性地有目的性的快速使用知識了赌;另一個是類比想象,將陌生的東西類比到自己熟悉的東西上鲤桥,從而降維理解,在認知層面快速理解知識渠概;因為我們不需要去真正實現(xiàn)這些東西茶凳,自然我們也就不需要逼著自己去看那些不知道對錯的公式嫂拴,特別是藝術設計類畢業(yè)的同學。

“信號處理”作為每次語音體驗的開始環(huán)節(jié)贮喧,直接影響了每次語音體驗筒狠。之所以希望產(chǎn)品人員去了解“信號處理”,是希望他們可以去真正了解那些影響語音產(chǎn)品體驗的關鍵因素到底有哪些箱沦,以及每種情況對于產(chǎn)品體驗的影響到底有多大辩恼,從而在產(chǎn)品設計初期,擴展思維谓形,合理創(chuàng)新灶伊。在前期,能夠幫助團隊有效規(guī)避一些前期風險寒跳;在中后期時聘萨,能夠幫助及協(xié)調團隊正確應對和解決問題~

“人”負責”聽清楚“這個環(huán)節(jié)的是”耳朵“,我們可以回憶生活中關于”人耳“的”聽清楚“的一些具體例子童太,比如:

1米辐、堵住一只耳,只用一只耳聽的時候會有什么問題书释?是不是感覺有點區(qū)分不出聲音的具體位置翘贮?

2、如果隔壁在裝修爆惧,電鉆打得整個房間都在震狸页,你在看電視,想聽清楚電視里的聲音检激,是不是會很困難肴捉?同樣,課堂上大家都在說話叔收,想聽清楚老師講課的內容是不是也很困難齿穗?

圖片源自網(wǎng)絡

3、如果一個人感冒了饺律,聲音變得很含糊窃页,或者一個性子很急思維很快的人,語速超級快复濒,要聽清楚是不是也會很吃力脖卖?(此處心疼遇到語速快的演講者的口譯員三秒鐘)……

圖片源自網(wǎng)絡

這里引入兩個方法論,“黑箱理論”和“黑箱方法”:

1巧颈、“黑箱理論畦木。所謂黑箱,就是指那些既不能打開砸泛,又不能從外部直接觀察其內部狀態(tài)的系統(tǒng)十籍,比如人們的大腦只能通過信息的輸入輸出來確定其結構和參數(shù)蛆封。

2、“黑箱方法勾栗。黑箱是我們未知的世界惨篱,也是我們要探知的世界。我們只能在不直接影響原有客體黑箱內部結構围俘、?要素和機制的前提下通過觀察黑箱中輸入砸讳、輸出的變量,得出關于黑箱內部情況的推理界牡,尋找簿寂、發(fā)現(xiàn)其內部?規(guī)律,實現(xiàn)對黑箱的控制欢揖。黑箱方法從綜合的角度為人們提供了一條認識事物的重要途徑陶耍,尤其對某些內部結構比較復雜的系統(tǒng)。對迄今為止人們的力量尚不能分解的系統(tǒng)她混,“黑箱理論”提供的研究方法是非常有效的烈钞。

簡單來說,就是把一個事物看成是一個既不能打開坤按,也不能觀察內部運作的黑箱毯欣。我們通過在外圍觀察,來對這個黑箱的輸入臭脓、輸出進行思考和推理酗钞,找尋規(guī)律;注意其目的是找規(guī)律来累。我們需要深入去思考砚作,輸入具體包含什么,輸出具體包含什么嘹锁,從而得到自己想得到的規(guī)律葫录。如果再延伸得復雜一點,黑箱本身也在演進领猾,所以米同,更深層次的目的則是從中發(fā)現(xiàn)規(guī)律演變的規(guī)律。

看到這兒各位童鞋是不是覺得有點暈摔竿?暈就對了面粮!但是我們回憶一下,在以前還沒有準確便捷的天氣預報的時候继低,每當我們看到燕子低旋熬苍、螞蟻搬家、魚兒出水袁翁、蜻蜓低飛等等便知道過不了多久就要下雨柴底∏酰“天象”就像一個“黑箱”,我們并不知道為什么會下雨似枕,但是秋半仙和各位的祖先們通過不斷的觀察和總結,理出了一些規(guī)律年柠≡浼撸“下雨”這個“黑箱”,在下雨前會有一些“輸出”冗恨,這些輸出表現(xiàn)出來就是“燕子低旋”答憔、“螞蟻搬家”、“魚兒出水”掀抹、“蜻蜓低飛”虐拓;祖先們還沒有現(xiàn)代的認知水平,對于“下雨”的現(xiàn)象還無法解釋傲武,于是秋半仙的祖宗秋大神開始給他的后代秋大仙編蓉驹,哦不,是傳授各種神話故事揪利。慢慢地秋大仙的認知開始不斷提升态兴,開始懂得“水汽”、“冷凝”等等知識之后疟位,慢慢地解開了“黑箱”的未知瞻润,也認識到秋大神所說的“神話故事”純屬扯淡,其實背后包含了“科學”的“自然現(xiàn)象”甜刻。于是秋大仙又把這個結論傳授給了秋半仙(誒绍撞,怎么感覺我家祖祖輩輩越混越差…… Anyway,本半仙有的時候在想得院,如果未來我的娃秋小仙進化到一個新的認知高度傻铣,會不會回過頭推翻他老子認知中的“科學”呢?呵呵~)

圖片源自網(wǎng)絡

前面舉的例子中尿招,我們可以把人耳整體看作一個黑箱矾柜,那么實驗能夠告訴我們,耳朵的工作方式里就谜,兩只耳朵相互輔助能夠有效辨識聲源的位置怪蔑;環(huán)境的噪音會極大干擾我們耳朵提取聲源內容的效果;聲源自身的狀態(tài)也會極大影響我們耳朵提取內容的效果……

那么這些生活中的觀察丧荐,在讓我們頭疼的“信號處理”中會帶來什么啟發(fā)呢缆瓣?同樣把“信號處理”當成一個“黑箱”,我們可以通過大量實驗去理解這個“黑箱”的運作規(guī)律虹统,揚長避短弓坞,并將其最大的潛力運用到極致隧甚,給用戶帶來最極致的體驗《啥常或許戚扳,這就是今天“產(chǎn)品”的職責和價值所在吧。

以上是本大仙在研究和學習“信號處理”時的思維方法族吻,希望能夠幫助大家更好地去“發(fā)現(xiàn)規(guī)律”帽借。接下來,本大仙將把過去信號處理方面的經(jīng)驗超歌,梳理總結為“五大不安因素”砍艾,幫助大家縮短在信號處理上“發(fā)現(xiàn)規(guī)律”的從0到1的時間。

恩巍举,啥也別說了脆荷,點贊吧!

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末懊悯,一起剝皮案震驚了整個濱河市蜓谋,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌炭分,老刑警劉巖孤澎,帶你破解...
    沈念sama閱讀 222,104評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異欠窒,居然都是意外死亡覆旭,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,816評論 3 399
  • 文/潘曉璐 我一進店門岖妄,熙熙樓的掌柜王于貴愁眉苦臉地迎上來型将,“玉大人,你說我怎么就攤上這事荐虐∑叨担” “怎么了?”我有些...
    開封第一講書人閱讀 168,697評論 0 360
  • 文/不壞的土叔 我叫張陵福扬,是天一觀的道長腕铸。 經(jīng)常有香客問我,道長铛碑,這世上最難降的妖魔是什么狠裹? 我笑而不...
    開封第一講書人閱讀 59,836評論 1 298
  • 正文 為了忘掉前任,我火速辦了婚禮汽烦,結果婚禮上涛菠,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好俗冻,可當我...
    茶點故事閱讀 68,851評論 6 397
  • 文/花漫 我一把揭開白布礁叔。 她就那樣靜靜地躺著,像睡著了一般迄薄。 火紅的嫁衣襯著肌膚如雪琅关。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,441評論 1 310
  • 那天讥蔽,我揣著相機與錄音死姚,去河邊找鬼。 笑死勤篮,一個胖子當著我的面吹牛,可吹牛的內容都是我干的色罚。 我是一名探鬼主播碰缔,決...
    沈念sama閱讀 40,992評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼戳护!你這毒婦竟也來了金抡?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,899評論 0 276
  • 序言:老撾萬榮一對情侶失蹤腌且,失蹤者是張志新(化名)和其女友劉穎梗肝,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體铺董,經(jīng)...
    沈念sama閱讀 46,457評論 1 318
  • 正文 獨居荒郊野嶺守林人離奇死亡巫击,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 38,529評論 3 341
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了精续。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片坝锰。...
    茶點故事閱讀 40,664評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖重付,靈堂內的尸體忽然破棺而出顷级,到底是詐尸還是另有隱情,我是刑警寧澤确垫,帶...
    沈念sama閱讀 36,346評論 5 350
  • 正文 年R本政府宣布弓颈,位于F島的核電站,受9級特大地震影響删掀,放射性物質發(fā)生泄漏翔冀。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 42,025評論 3 334
  • 文/蒙蒙 一披泪、第九天 我趴在偏房一處隱蔽的房頂上張望橘蜜。 院中可真熱鬧,春花似錦、人聲如沸计福。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,511評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽象颖。三九已至佩厚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間说订,已是汗流浹背抄瓦。 一陣腳步聲響...
    開封第一講書人閱讀 33,611評論 1 272
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留陶冷,地道東北人钙姊。 一個月前我還...
    沈念sama閱讀 49,081評論 3 377
  • 正文 我出身青樓,卻偏偏與公主長得像埂伦,于是被迫代替她去往敵國和親煞额。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,675評論 2 359

推薦閱讀更多精彩內容

  • 劉雙鶴沾谜,焦點解決講師一期班膊毁,平頂山,成長分享第859天(2018.5.9星期三) 觀點基跑,是說你站在特定的觀察點看到...
    在路上_1閱讀 595評論 0 0
  • 原稿作者: 小石頭《災難面前讓愛說話》2008-07-28 雙流部隊集結地 編輯: 瑚楊媳否, 攝影:石華 地震—...
    瑚楊AFPMCC閱讀 428評論 0 1
  • 忞南舟閱讀 192評論 0 2
  • 火山爆發(fā) 一剎萬物融化 雪山崩塌 一瞬千里傾覆 惡毒咒罵 一語體無完膚 透明玻璃杯 一揮粉身碎骨 覆水難收 破碎的...
    愛寶丫閱讀 252評論 0 2
  • 不知不覺媽媽癌癥確診一個月了…昨夜失眠栅螟,今天狀態(tài)不好休息一天,沒有去醫(yī)院篱竭,給媽媽點的外賣…雖然在家忙了一天嵌巷,但...
    紫色的習習閱讀 119評論 0 0