NLP的介紹和如何利用機(jī)器學(xué)習(xí)進(jìn)行NLP以及三種NLP技術(shù)的詳細(xì)介紹

本文用簡潔易懂的語言，講述了自然語言處理（NLP）的前世今生。從什么是NLP到為什么要學(xué)習(xí)NLP，再到如何利用機(jī)器學(xué)習(xí)進(jìn)行NLP，值得一讀。這是該系列的...

2018-06-10 標(biāo)簽：機(jī)器學(xué)習(xí)機(jī)器翻譯NLP 7.8萬 0

RNN基本原理和RNN種類與實(shí)例

這是一個(gè)delay模型，經(jīng)過一段延遲，即把所有輸入都讀取后，在decoder中獲取輸入并輸出一個(gè)序列。這個(gè)模型在機(jī)器翻譯中使用較廣泛，源語言輸在入放入e...

2018-07-27 標(biāo)簽：神經(jīng)元機(jī)器翻譯RNN 3.9萬 0

為什么要有attention機(jī)制，Attention原理

沒有attention機(jī)制的encoder-decoder結(jié)構(gòu)通常把encoder的最后一個(gè)狀態(tài)作為decoder的輸入（可能作為初始化，也可能作為每一...

2019-03-06 標(biāo)簽：Decoder梯度機(jī)器翻譯 1.7萬 0

深入了解圖神經(jīng)網(wǎng)絡(luò)背后的原理和其強(qiáng)大的表征能力

在圖分類數(shù)據(jù)集上，通過實(shí)驗(yàn)驗(yàn)證我們的理論，其中 GNN 的表達(dá)能力對于捕獲圖結(jié)構(gòu)至關(guān)重要。特別是，我們對基于各種聚合函數(shù)的 GNN 性能進(jìn)行了對比。我們...

2019-03-01 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯GNN 1.1萬 0

LSTM的核心構(gòu)成,實(shí)際中“門”的效果如何？

門是否真的具有我們上述描述的意義呢？這也是我們這篇論文的出發(fā)點(diǎn)。為了探究這個(gè)問題，我們分析了IWSLT14德語-英語的翻譯任務(wù)，這個(gè)翻譯任務(wù)的模型是基于...

2018-07-02 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯自然語言 1.0萬 0

把Transformer模型掰開揉碎，深度理解它的工作原理

我們已經(jīng)了解了模型的主要部分，接下來我們看一下各種向量或張量（譯注：張量概念是矢量概念的推廣，可以簡單理解矢量是一階張量、矩陣是二階張量。）是怎樣在模型...

2019-01-10 標(biāo)簽：谷歌機(jī)器翻譯pytorch 6438 0

什么是Transition-based基于轉(zhuǎn)移的框架？

用在生成依存句法樹上，則具體表示為從空狀態(tài)開始，通過動作轉(zhuǎn)移到下一個(gè)狀態(tài)，一步一步生成依存句法樹，最后的狀態(tài)保存了一個(gè)完整的依存樹。依存分析就是用來預(yù)測...

2019-03-19 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)框架機(jī)器翻譯 5396 0

基于選擇機(jī)制的自注意力網(wǎng)絡(luò)模型

自注意力網(wǎng)絡(luò)(SANs)在許多自然語言處理任務(wù)中取得顯著的成功，其中包括機(jī)器翻譯、自然語言推理以及語義角色標(biāo)注任務(wù)。

2020-08-31 標(biāo)簽：機(jī)器翻譯網(wǎng)絡(luò)模型 5314 0

Facebook開源了增強(qiáng)版的NLP工具包LASER

LASER的句子向量表示對于輸入語言和NLP任務(wù)都是通用的。該工具將任何語言中的一個(gè)句子映射到高維空間中的一個(gè)點(diǎn)，目標(biāo)是使任何語言中的相同語句最終位于同...

2019-01-25 標(biāo)簽：Laser機(jī)器翻譯數(shù)據(jù)集 4828 0

NLP概述及文本自動分類算法詳解

同步的序列到序列，其實(shí)就是序列標(biāo)注問題，應(yīng)該說是自然語言處理中最常見的問題。序列標(biāo)注的應(yīng)用包括中文分詞、命名實(shí)體識別和詞性標(biāo)注等。序列標(biāo)注問題的輸入是一...

2018-07-25 標(biāo)簽：機(jī)器翻譯NLP 4768 0

如何在Hadoop上運(yùn)行這些深度學(xué)習(xí)工作

典型的深度學(xué)習(xí)工作流程：數(shù)據(jù)從各個(gè)終端（或其他來源）匯聚到數(shù)據(jù)湖中。數(shù)據(jù)科學(xué)家可以使用筆記本進(jìn)行數(shù)據(jù)探索，創(chuàng)建 pipelines 來進(jìn)行特征提取/分割...

2019-01-15 標(biāo)簽：機(jī)器翻譯數(shù)據(jù)集深度學(xué)習(xí) 4601 0