NLP的介紹和如何利用機(jī)器學(xué)習(xí)進(jìn)行NLP以及三種NLP技術(shù)的詳細(xì)介紹

本文用簡(jiǎn)潔易懂的語(yǔ)言，講述了自然語(yǔ)言處理（NLP）的前世今生。從什么是NLP到為什么要學(xué)習(xí)NLP，再到如何利用機(jī)器學(xué)習(xí)進(jìn)行NLP，值得一讀。這是該系列的...

2018-06-10 標(biāo)簽：機(jī)器學(xué)習(xí)機(jī)器翻譯NLP 7.8萬(wàn) 0

RNN基本原理和RNN種類與實(shí)例

這是一個(gè)delay模型，經(jīng)過(guò)一段延遲，即把所有輸入都讀取后，在decoder中獲取輸入并輸出一個(gè)序列。這個(gè)模型在機(jī)器翻譯中使用較廣泛，源語(yǔ)言輸在入放入e...

2018-07-27 標(biāo)簽：神經(jīng)元機(jī)器翻譯RNN 3.9萬(wàn) 0

為什么要有attention機(jī)制，Attention原理

沒(méi)有attention機(jī)制的encoder-decoder結(jié)構(gòu)通常把encoder的最后一個(gè)狀態(tài)作為decoder的輸入（可能作為初始化，也可能作為每一...

2019-03-06 標(biāo)簽：Decoder梯度機(jī)器翻譯 1.7萬(wàn) 0

深入了解圖神經(jīng)網(wǎng)絡(luò)背后的原理和其強(qiáng)大的表征能力

在圖分類數(shù)據(jù)集上，通過(guò)實(shí)驗(yàn)驗(yàn)證我們的理論，其中 GNN 的表達(dá)能力對(duì)于捕獲圖結(jié)構(gòu)至關(guān)重要。特別是，我們對(duì)基于各種聚合函數(shù)的 GNN 性能進(jìn)行了對(duì)比。我們...

2019-03-01 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯GNN 1.1萬(wàn) 0

LSTM的核心構(gòu)成,實(shí)際中“門(mén)”的效果如何？

門(mén)是否真的具有我們上述描述的意義呢？這也是我們這篇論文的出發(fā)點(diǎn)。為了探究這個(gè)問(wèn)題，我們分析了IWSLT14德語(yǔ)-英語(yǔ)的翻譯任務(wù)，這個(gè)翻譯任務(wù)的模型是基于...

2018-07-02 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯自然語(yǔ)言 1.0萬(wàn) 0

把Transformer模型掰開(kāi)揉碎，深度理解它的工作原理

我們已經(jīng)了解了模型的主要部分，接下來(lái)我們看一下各種向量或張量（譯注：張量概念是矢量概念的推廣，可以簡(jiǎn)單理解矢量是一階張量、矩陣是二階張量。）是怎樣在模型...

2019-01-10 標(biāo)簽：谷歌機(jī)器翻譯pytorch 6478 0

什么是Transition-based基于轉(zhuǎn)移的框架？

用在生成依存句法樹(shù)上，則具體表示為從空狀態(tài)開(kāi)始，通過(guò)動(dòng)作轉(zhuǎn)移到下一個(gè)狀態(tài)，一步一步生成依存句法樹(shù)，最后的狀態(tài)保存了一個(gè)完整的依存樹(shù)。依存分析就是用來(lái)預(yù)測(cè)...

2019-03-19 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)框架機(jī)器翻譯 5428 0

基于選擇機(jī)制的自注意力網(wǎng)絡(luò)模型

自注意力網(wǎng)絡(luò)(SANs)在許多自然語(yǔ)言處理任務(wù)中取得顯著的成功，其中包括機(jī)器翻譯、自然語(yǔ)言推理以及語(yǔ)義角色標(biāo)注任務(wù)。

2020-08-31 標(biāo)簽：機(jī)器翻譯網(wǎng)絡(luò)模型 5346 0

Facebook開(kāi)源了增強(qiáng)版的NLP工具包LASER

LASER的句子向量表示對(duì)于輸入語(yǔ)言和NLP任務(wù)都是通用的。該工具將任何語(yǔ)言中的一個(gè)句子映射到高維空間中的一個(gè)點(diǎn)，目標(biāo)是使任何語(yǔ)言中的相同語(yǔ)句最終位于同...

2019-01-25 標(biāo)簽：Laser機(jī)器翻譯數(shù)據(jù)集 4854 0

NLP概述及文本自動(dòng)分類算法詳解

同步的序列到序列，其實(shí)就是序列標(biāo)注問(wèn)題，應(yīng)該說(shuō)是自然語(yǔ)言處理中最常見(jiàn)的問(wèn)題。序列標(biāo)注的應(yīng)用包括中文分詞、命名實(shí)體識(shí)別和詞性標(biāo)注等。序列標(biāo)注問(wèn)題的輸入是一...

2018-07-25 標(biāo)簽：機(jī)器翻譯NLP 4806 0

如何在Hadoop上運(yùn)行這些深度學(xué)習(xí)工作

典型的深度學(xué)習(xí)工作流程：數(shù)據(jù)從各個(gè)終端（或其他來(lái)源）匯聚到數(shù)據(jù)湖中。數(shù)據(jù)科學(xué)家可以使用筆記本進(jìn)行數(shù)據(jù)探索，創(chuàng)建 pipelines 來(lái)進(jìn)行特征提取/分割...

2019-01-15 標(biāo)簽：機(jī)器翻譯數(shù)據(jù)集深度學(xué)習(xí) 4629 0