FAIR和谷歌大腦的合作研究，專注于“反向翻譯”方法

如圖1所示，sampling和beam+noise方法優(yōu)于MAP方法，BLEU要高0.8-1.1。在數(shù)據(jù)量最大的設(shè)置下，sampling和beam+no...

2018-11-21 標(biāo)簽：機(jī)器翻譯數(shù)據(jù)集 5320 0

用于機(jī)器翻譯的編碼器-解碼器架構(gòu)詳解

輸入張量讓我們能夠以索引序列的形式輸入多個(gè)句子。這個(gè)方向是對(duì)的，但這些索引并沒有保留什么信息。索引54代表的單詞，和索引55代表的單詞可能全無關(guān)系?；?..

2018-11-05 標(biāo)簽：解碼器編碼器機(jī)器翻譯 9731 0

新方法開啟了多種語(yǔ)言快速翻譯、精準(zhǔn)翻譯的大門

用無監(jiān)督的雙語(yǔ)詞典推斷法進(jìn)行詞對(duì)詞翻譯并不是好的翻譯方法，因?yàn)樵~語(yǔ)可能會(huì)丟失，或打亂順序，或出現(xiàn)錯(cuò)誤。但是，它能最大程度地保留文本的意思。我們可以用語(yǔ)言...

2018-10-04 標(biāo)簽：機(jī)器翻譯數(shù)據(jù)集 3623 0

基于深度學(xué)習(xí)的自然語(yǔ)言處理系統(tǒng)和應(yīng)用程序的一些最新趨勢(shì)

對(duì)于諸如詞性標(biāo)記（POS）和命名實(shí)體識(shí)別（NER）之類的任務(wù)，查看詞匯的詞法信息是有用的，尤其是像葡萄牙語(yǔ)、西班牙語(yǔ)和中文這些構(gòu)詞方法十分豐富的語(yǔ)言。我...

2018-10-04 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯深度學(xué)習(xí) 4991 0

Facebook展示了如何讓機(jī)器翻譯速度變快，同時(shí)又能擴(kuò)展應(yīng)用的方法

后者是文本處理模型一個(gè)重要的挑戰(zhàn)，不同長(zhǎng)度的句子會(huì)讓問題更嚴(yán)重，這一點(diǎn)在計(jì)算機(jī)視覺領(lǐng)域是體會(huì)不到的，因?yàn)橛?xùn)練的圖像通常大小相同。針對(duì)上面提到的兩個(gè)問題，...

2018-09-24 標(biāo)簽：Facebook人工智能機(jī)器翻譯 3153 0

如何在沒有大量標(biāo)記數(shù)據(jù)的情況下，讓計(jì)算機(jī)也學(xué)會(huì)翻譯？

過去一年間，不斷有研究人員試圖通過無監(jiān)督學(xué)習(xí)用大量無標(biāo)記數(shù)據(jù)訓(xùn)練以進(jìn)一步提高系統(tǒng)的翻譯能力。Facebook、紐約大學(xué)、巴斯克大學(xué)、索邦大學(xué)的研究團(tuán)隊(duì)成...

2018-09-05 標(biāo)簽：神經(jīng)網(wǎng)絡(luò)人工智能機(jī)器翻譯 4588 0

機(jī)器翻譯的質(zhì)量突飛猛進(jìn),未來三年會(huì)有50萬翻譯失業(yè)

這個(gè)說法與過去我們時(shí)常聽到的言論形成了鮮明對(duì)比，原來我們總是說，至少在近期的未來，人工智能主要的作用還是增強(qiáng)，而不是直接取代人類的專業(yè)人員，Shosha...

2018-09-04 標(biāo)簽：人工智能機(jī)器學(xué)習(xí)機(jī)器翻譯 7427 0

一種全新的無監(jiān)督機(jī)器翻譯方法，在BLUE基準(zhǔn)測(cè)試上取得了10分以上提升

Facebook無監(jiān)督機(jī)器翻譯的方法，首先是讓系統(tǒng)學(xué)習(xí)雙語(yǔ)詞典，將一個(gè)詞與其他語(yǔ)言對(duì)應(yīng)的多種翻譯聯(lián)系起來。舉個(gè)例子，就好比讓系統(tǒng)學(xué)會(huì)“Bug”在作為名詞...

2018-09-02 標(biāo)簽：Facebook機(jī)器學(xué)習(xí)機(jī)器翻譯 6219 0

一種名為“普適注意力”的新翻譯模型，用2D卷積網(wǎng)絡(luò)做序列預(yù)測(cè)

我們的模型中的卷積層使用隱性3×3濾波器，特征僅根據(jù)先前的輸出符號(hào)計(jì)算。圖為經(jīng)過一層（深藍(lán)色）和兩層（淺藍(lán)色）計(jì)算之后的感受野，以及正常3×3濾波器（灰...

2018-08-27 標(biāo)簽：濾波器編碼器機(jī)器翻譯 3464 0

一種新的神經(jīng)機(jī)器翻譯架構(gòu)，它脫離了編碼器-解碼器的范疇

為了解決這些局限，我們提出了一種基于深層2D卷積神經(jīng)網(wǎng)絡(luò)（CNN）的新方法。它和圖像、音頻生成模型的自回歸模型類似，用源序列和目標(biāo)序列的輸出空間定義網(wǎng)絡(luò)...

2018-08-23 標(biāo)簽：編碼器神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯 3619 0

神經(jīng)網(wǎng)絡(luò)、機(jī)器翻譯、情感分類和自動(dòng)評(píng)論等研究方向的5篇論文

現(xiàn)實(shí)世界中很多文檔都具有超鏈接的結(jié)構(gòu)。例如，維基頁(yè)面（普通網(wǎng)頁(yè)）之間通過URL互相指向，學(xué)術(shù)論文之間通過引用互相指向。超文檔的嵌入（embedding）...

2018-07-16 標(biāo)簽：編碼器神經(jīng)網(wǎng)絡(luò)機(jī)器翻譯 5559 0