語(yǔ)音識(shí)別 1-概述

1. 語(yǔ)音識(shí)別的本質(zhì)

??語(yǔ)音識(shí)別的本質(zhì)就是將一段聲音信號(hào)轉(zhuǎn)換為文字:

??左邊的彩色框框代表的是對(duì)語(yǔ)音信號(hào)進(jìn)行特征提取后的每一幀的數(shù)據(jù)勤揩。T代表的是幀數(shù),d代表的應(yīng)該是濾波器個(gè)數(shù)(特征提取里面有一段是需要經(jīng)過mel濾波器)秘蛔,即每一幀的維度陨亡。token可以理解為你訓(xùn)練時(shí)候詞典的構(gòu)成的最小元素。根據(jù)自己選擇的不同深员,token可以分為幾種负蠕。

2.Token的種類

??phoneme是發(fā)音的最小單位,在中文中可以理解為:聲母和韻母倦畅;在英文中可以中理解為一個(gè)單詞發(fā)音的音標(biāo)遮糖。grapheme是最小的書寫單位,在英文中可以理解為26個(gè)英文字母加上空格或者加上一些其他的標(biāo)點(diǎn)符號(hào)叠赐。在中文里面就可以理解為1個(gè)字欲账。word就是看做是單詞,在中文中就表示一個(gè)詞語(yǔ)芭概,在英文中就表示一個(gè)單詞赛不。但是如果token表示word的話,在中文中就會(huì)有一個(gè)難題罢洲,中文到底存在多少個(gè)單詞踢故?中文常用字大概2000~3000,但是可以組合成無(wú)數(shù)的詞語(yǔ)惹苗。Morepheme是一個(gè)語(yǔ)言中可以傳達(dá)意思的最小單位殿较,要比word小但是比grapheme大的單位。但是morepheme的由來(lái)需要語(yǔ)言學(xué)家或統(tǒng)計(jì)學(xué)家的統(tǒng)計(jì)鸽粉。

  • Token的使用情況:

3 幾種不同的語(yǔ)音系統(tǒng)的不同輸出

4.輸入部分

4.1Acoustic Feature

?&emsp現(xiàn)在MFCC這個(gè)特征提取的方法在語(yǔ)音識(shí)別中已經(jīng)運(yùn)用的不是很多了斜脂,F(xiàn)bank相對(duì)來(lái)說(shuō)多一點(diǎn)。上圖中幀長(zhǎng)為25ms,幀移為10ms触机。

帚戳。首先通過分幀、加窗儡首、快速傅里葉變換(離散傅里葉變換),將時(shí)域信號(hào)(語(yǔ)音波形圖)轉(zhuǎn)換為頻域信號(hào)(頻譜圖)片任,然后通過mel濾波、取對(duì)數(shù)就是整個(gè)Fbank特征提取過程蔬胯,最后加上DCT就是MFCC的特征提取過程对供。下圖顯示了當(dāng)前語(yǔ)音提取方法的運(yùn)用頻率,F(xiàn)bank使用最多,MFCC越來(lái)越少了产场。
??幾個(gè)常用的語(yǔ)音數(shù)據(jù)集

5.兩種不同的語(yǔ)音識(shí)別觀點(diǎn)

??一種是端到端的語(yǔ)音模型seq2seq鹅髓,即輸入語(yǔ)音信號(hào),輸出文字京景。另一種是有點(diǎn)老的HMM(韓梅梅)窿冯。

5.1 seq2seq的幾種模型

??幾種模型的使用情況
接下來(lái)的幾個(gè)博客就是上述幾種模型的筆記。
上述ppt的下載鏈接
語(yǔ)音識(shí)別【1/7】概述-1_嗶哩嗶哩 (゜-゜)つロ 干杯~-bilibili

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末确徙,一起剝皮案震驚了整個(gè)濱河市醒串,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌鄙皇,老刑警劉巖芜赌,帶你破解...
    沈念sama閱讀 217,734評(píng)論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異伴逸,居然都是意外死亡缠沈,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門违柏,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)博烂,“玉大人,你說(shuō)我怎么就攤上這事漱竖∏堇椋” “怎么了?”我有些...
    開封第一講書人閱讀 164,133評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵馍惹,是天一觀的道長(zhǎng)躺率。 經(jīng)常有香客問我,道長(zhǎng)万矾,這世上最難降的妖魔是什么悼吱? 我笑而不...
    開封第一講書人閱讀 58,532評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮良狈,結(jié)果婚禮上后添,老公的妹妹穿的比我還像新娘。我一直安慰自己薪丁,他們只是感情好遇西,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,585評(píng)論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著严嗜,像睡著了一般粱檀。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上漫玄,一...
    開封第一講書人閱讀 51,462評(píng)論 1 302
  • 那天茄蚯,我揣著相機(jī)與錄音,去河邊找鬼。 笑死渗常,一個(gè)胖子當(dāng)著我的面吹牛壮不,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播凳谦,決...
    沈念sama閱讀 40,262評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼忆畅,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼衡未!你這毒婦竟也來(lái)了尸执?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,153評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤缓醋,失蹤者是張志新(化名)和其女友劉穎如失,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體送粱,經(jīng)...
    沈念sama閱讀 45,587評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡褪贵,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,792評(píng)論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了抗俄。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片脆丁。...
    茶點(diǎn)故事閱讀 39,919評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖动雹,靈堂內(nèi)的尸體忽然破棺而出槽卫,到底是詐尸還是另有隱情,我是刑警寧澤胰蝠,帶...
    沈念sama閱讀 35,635評(píng)論 5 345
  • 正文 年R本政府宣布歼培,位于F島的核電站,受9級(jí)特大地震影響茸塞,放射性物質(zhì)發(fā)生泄漏躲庄。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,237評(píng)論 3 329
  • 文/蒙蒙 一钾虐、第九天 我趴在偏房一處隱蔽的房頂上張望噪窘。 院中可真熱鬧,春花似錦效扫、人聲如沸倔监。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,855評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)丐枉。三九已至,卻和暖如春掘托,著一層夾襖步出監(jiān)牢的瞬間瘦锹,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,983評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留弯院,地道東北人辱士。 一個(gè)月前我還...
    沈念sama閱讀 48,048評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像听绳,于是被迫代替她去往敵國(guó)和親颂碘。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,864評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • (目的:方便自己下次看椅挣,有點(diǎn)流水賬)簡(jiǎn)介:?? 信號(hào)處理與特征提取?? 傳統(tǒng)聲學(xué)模型?? 基于深度學(xué)習(xí)的聲學(xué)模型?...
    糖爰閱讀 2,344評(píng)論 0 1
  • 承接上文 語(yǔ)音識(shí)別長(zhǎng)篇研究(一) 四头岔、語(yǔ)音識(shí)別的工作流程 1、信號(hào)的數(shù)字化和預(yù)處理: 1)數(shù)字化 聲音是作為波的形...
    放飛人夜閱讀 1,762評(píng)論 0 1
  • 承接前面的《淺談機(jī)器學(xué)習(xí)基礎(chǔ)》鼠证、《淺談深度學(xué)習(xí)基礎(chǔ)》和《淺談自然語(yǔ)言處理基礎(chǔ)》峡竣,主要參考了《解析深度學(xué)習(xí):語(yǔ)音識(shí)別...
    我偏笑_NSNirvana閱讀 23,515評(píng)論 6 67
  • 什么是語(yǔ)音識(shí)別 語(yǔ)音是人類最樸素的交互方式。不止是人與人之間量九,動(dòng)物直接也都是語(yǔ)音交流适掰,或者說(shuō)語(yǔ)音交流是文字交流的前...
    AI老張閱讀 832評(píng)論 0 0
  • 語(yǔ)音信號(hào)是連續(xù)的一維模擬信號(hào),而計(jì)算機(jī)只能夠處理離散的數(shù)字信號(hào)荠列。故要想利用計(jì)算機(jī)處理語(yǔ)音信號(hào)类浪,首先要對(duì)連續(xù)的語(yǔ)音信...
    dingtom閱讀 781評(píng)論 0 0