深度學(xué)習(xí)在自然語言處理領(lǐng)域的應(yīng)用吏奸,最重要、最基礎(chǔ)的是word2vec涛癌,而且我認(rèn)為是劃時(shí)代意義的。其本質(zhì)在于窥浪,很多原來不可以計(jì)算的“變量”祖很,通過word2vec表示之后都可以計(jì)算,而且是具備客觀物理意義的漾脂。
如果說NLP領(lǐng)域有“三駕馬車”的話假颇,我認(rèn)為它們是詞向量、循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)和“編碼器-解碼器”(Encoder-Decoder)骨稿。