文科生如何理解循環(huán)神經(jīng)網(wǎng)絡(RNN)互订?

這一份視頻教程中吱肌,我會用簡明的例子和手繪圖,為你講解循環(huán)神經(jīng)網(wǎng)絡(Recurrent Neural Network, RNN)的原理和使用方法仰禽。

關于深度學習氮墨,我已經(jīng)為你講解了不少內(nèi)容了。

咱們簡單回顧一下吐葵。常見的深度學習任務勇边,面對的數(shù)據(jù)類型主要是三類:

第一類,是結構化數(shù)據(jù)折联,也就是樣本和屬性組成的表格。例如《如何用Python和深度神經(jīng)網(wǎng)絡鎖定即將流失的客戶识颊?》一文中诚镰,我們用到的表格:

這種數(shù)據(jù)格式,最為簡單祥款。你也很容易理解深度神經(jīng)網(wǎng)絡的結構和處理方法清笨。

第二類,是圖像數(shù)據(jù)刃跛】侔《如何用 Python 和 fast.ai 做圖像深度遷移學習?》一文中桨昙,我給你詳細介紹過如何用卷積神經(jīng)網(wǎng)絡來處理它检号。

第三類,是序列數(shù)據(jù)蛙酪,例如文本齐苛。《如何用 Python 和深度遷移學習做文本分類桂塞?》一文里面凹蜂,咱們已經(jīng)展示了如何使用 fast.ai 提供的語言模型對其進行處理。

其中阁危,圖像和序列數(shù)據(jù)玛痊,處理起來更需要你對深度神經(jīng)網(wǎng)絡結構的理解。

作為文科生狂打,你在學習卷積神經(jīng)網(wǎng)絡和循環(huán)神經(jīng)網(wǎng)絡的時候擂煞,可能會遇到一些問題。因為它們大多采用比較復雜的結構圖和公式進行描述菱父。

當然颈娜,你看到了剑逃,即便你對于循環(huán)神經(jīng)網(wǎng)絡不了解,把它當成一個黑箱官辽,你依然可以用高階的深度學習框架蛹磺,例如 fast.ai ,執(zhí)行自然語言處理任務同仆,而且效果還很突出萤捆。

Franc?ois Chollet 在他的 "Deep Learning with Python" 一書中,也提到過這種觀點(注意這里說的是 RNN 的一個變種俗批,叫做 LSTM):

you don’t need to understand anything about the specific architecture of an LSTM cell; as a human, it shouldn’t be your job to understand it.

但是注意俗或, Franc?ois Chollet 后面還有一句話:

Just keep in mind what the LSTM cell is meant to do.

也就是說,它的實現(xiàn)細節(jié)岁忘,你不需要考慮辛慰。

當然,它的作用干像,你還是得了解的帅腌。

如果你需要做研究,就得針對具體的任務麻汰,對神經(jīng)網(wǎng)絡中的各種模塊進行調(diào)整速客、拼裝和整合。

這時候五鲫,如果你對深度神經(jīng)網(wǎng)絡的理解溺职,基本上等同于黑箱,那么你甚至都不知道該如何把它的輸出和其他模塊拼接起來位喂。

之前浪耘,我給你做了個視頻講解《文科生如何理解卷積神經(jīng)網(wǎng)絡?》塑崖,為你把卷積神經(jīng)網(wǎng)絡的原理進行了拆解剖析点待。

從讀者和觀眾們的反饋來看,許多人覺得有幫助弃舒。

有不少人留言癞埠,希望我以同樣通俗易懂的講法,講講用于處理序列數(shù)據(jù)(例如文本)的循環(huán)神經(jīng)網(wǎng)絡(Recurrent Neural Network, RNN)的原理聋呢。

其實苗踪,我也早就想為你講解這一部分的知識。無奈序列是個動態(tài)的概念削锰,所以用文字來給你講解循環(huán)神經(jīng)網(wǎng)絡模型通铲,效率不高。

好在器贩,我最近剛剛學會颅夺,如何在錄制視頻的時候朋截,使用手寫輸入。于是我立即把這一技術吧黄,納入到咱們的教程制作中來部服。

我花了一個晚上的時間,為你做了這份視頻教程拗慨。已發(fā)布到了騰訊視頻廓八,鏈接在這里

從我們耳熟能詳?shù)囊粋€故事講起赵抢,觸類旁通剧蹂,讓你更容易理解循環(huán)神經(jīng)網(wǎng)絡的作用、特點和結構烦却。

除了前文提到的一些材料宠叼,視頻中還提及了詞嵌入(word embedding)的相關知識。這一部分其爵,你可以參考《如何用Python處理自然語言车吹?(Spacy與Word Embedding)》和《如何用 Python 和 gensim 調(diào)用中文詞嵌入預訓練模型?》醋闭。

希望這份視頻教程,對你了解循環(huán)神經(jīng)網(wǎng)絡能有幫助朝卒。

祝(深度)學習愉快证逻!

喜歡請點贊和打賞。還可以微信關注和置頂我的公眾號“玉樹芝蘭”(nkwangshuyi)抗斤。

如果你對 Python 與數(shù)據(jù)科學感興趣囚企,不妨閱讀我的系列教程索引貼《如何高效入門數(shù)據(jù)科學?》瑞眼,里面還有更多的有趣問題及解法龙宏。

最后編輯于
?著作權歸作者所有,轉載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市伤疙,隨后出現(xiàn)的幾起案子银酗,更是在濱河造成了極大的恐慌,老刑警劉巖徒像,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件黍特,死亡現(xiàn)場離奇詭異,居然都是意外死亡锯蛀,警方通過查閱死者的電腦和手機灭衷,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來旁涤,“玉大人翔曲,你說我怎么就攤上這事迫像。” “怎么了瞳遍?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵闻妓,是天一觀的道長。 經(jīng)常有香客問我傅蹂,道長纷闺,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任份蝴,我火速辦了婚禮犁功,結果婚禮上,老公的妹妹穿的比我還像新娘婚夫。我一直安慰自己浸卦,他們只是感情好,可當我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布案糙。 她就那樣靜靜地躺著限嫌,像睡著了一般。 火紅的嫁衣襯著肌膚如雪时捌。 梳的紋絲不亂的頭發(fā)上怒医,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天,我揣著相機與錄音奢讨,去河邊找鬼稚叹。 笑死,一個胖子當著我的面吹牛拿诸,可吹牛的內(nèi)容都是我干的扒袖。 我是一名探鬼主播,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼亩码,長吁一口氣:“原來是場噩夢啊……” “哼季率!你這毒婦竟也來了?” 一聲冷哼從身側響起描沟,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤飒泻,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后吏廉,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體蠢络,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年迟蜜,在試婚紗的時候發(fā)現(xiàn)自己被綠了刹孔。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片场钉。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡鞋既,死狀恐怖苞轿,靈堂內(nèi)的尸體忽然破棺而出瘦锹,到底是詐尸還是另有隱情,我是刑警寧澤方库,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布结序,位于F島的核電站,受9級特大地震影響纵潦,放射性物質發(fā)生泄漏徐鹤。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一邀层、第九天 我趴在偏房一處隱蔽的房頂上張望返敬。 院中可真熱鬧,春花似錦寥院、人聲如沸劲赠。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽凛澎。三九已至,卻和暖如春估蹄,著一層夾襖步出監(jiān)牢的瞬間塑煎,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工臭蚁, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留最铁,地道東北人。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓刊棕,卻偏偏與公主長得像,于是被迫代替她去往敵國和親待逞。 傳聞我的和親對象是個殘疾皇子甥角,可洞房花燭夜當晚...
    茶點故事閱讀 42,916評論 2 344