作為一個(gè)自然語言處理的初學(xué)者，看書看到“訓(xùn)練模型”，這模型那模型的，一直不知道模型究竟是什么東西?？戳诉@本書，從預(yù)處理數(shù)據(jù)到提取特征集，訓(xùn)練模型，測(cè)試修改等，一步一步實(shí)際操作了之后，才對(duì)模型一詞有了直觀的認(rèn)識(shí)（算法的中間結(jié)果，存儲(chǔ)在計(jì)算機(jī)中的一個(gè)個(gè) pkl 文件，測(cè)試的時(shí)候直接用，前面計(jì)算過的就省了）。以后聽人談“模型”的時(shí)候也有了底氣。當(dāng)然，模型還有很多其他含義。還有動(dòng)詞的“配價(jià)”、各種搭配、客觀邏輯對(duì)根據(jù)文法生成的句子的約束如何實(shí)現(xiàn)？不上機(jī)動(dòng)手做做，很難真正領(lǐng)悟。

　　自然語言處理理論書籍很多，講實(shí)際操作的不多，能講的這么系統(tǒng)的更少。從這個(gè)角度講，本書是目前世界上最好的自然語言處理實(shí)踐教程。初學(xué)者若在看過理論之后能精讀本書，必定會(huì)有獲益。這也是翻譯本書的目的之一。

?

　　PYTHON 自然語言處理

　　從輸入法聯(lián)想提示（pre dictive text）、email 過濾到自動(dòng)文本摘要、機(jī)器翻譯，大量的語言相關(guān)的技術(shù)都離不開自然語言處理的支持，而這本書提供了自然語言處理非常方便的入門指南。通過它，你將學(xué)到如何寫能處理大量非結(jié)構(gòu)化文本的 Python 程序。你將獲得有豐富標(biāo)注的涵蓋語言學(xué)各種數(shù)據(jù)結(jié)構(gòu)的數(shù)據(jù)集，而且你將學(xué)到分析書面文檔內(nèi)容和結(jié)構(gòu)的主要算法。

　　這是一本關(guān)于自然語言處理的書。所謂“自然語言”，是指人們?nèi)粘＝涣魇褂玫恼Z言，如英語，印地語，葡萄牙語等。相對(duì)于編程語言和數(shù)學(xué)符號(hào)這樣的人工語言，自然語言隨著一代人傳給另一代人而不斷演化，因而很難用明確的規(guī)則來刻畫。從廣義上講，“自然語言處理”（Natural Language Processing 簡(jiǎn)稱 NLP）包含所有用計(jì)算機(jī)對(duì)自然語言進(jìn)行的操作，從最簡(jiǎn)單的通過計(jì)數(shù)詞出現(xiàn)的頻率來比較不同的寫作風(fēng)格，到最復(fù)雜的完全“理解”人所說的話，至少要能達(dá)到對(duì)人的話語作出有效反應(yīng)的程度。

　　基于 NLP 的技術(shù)應(yīng)用日益廣泛。例如：手機(jī)和手持電腦支持輸入法聯(lián)想提示和手寫識(shí)別；網(wǎng)絡(luò)搜索引擎能搜到非結(jié)構(gòu)化文本中的信息；機(jī)器翻譯能把中文文本翻譯成西班牙文。通過提供更自然的人機(jī)界面和更復(fù)雜的存儲(chǔ)信息獲取手段，語言處理正在這個(gè)多語種的信息社會(huì)中扮演更核心的角色。這本書提供自然語言處理領(lǐng)域非常方便的入門指南。它可以用來自學(xué)，也可以作為自然語言處理或計(jì)算語言學(xué)課程的教科書，或是人工智能、文本挖掘、語料庫語言學(xué)課程的補(bǔ)充讀物。本書的實(shí)踐性很強(qiáng)，包括幾百個(gè)實(shí)際可用的例子和分級(jí)練習(xí)。本書基于 Python 編程語言及其上的一個(gè)名為自然語言工具包（Natural Language Toolk it，簡(jiǎn)稱 NLTK）的開源庫。NLTK 包含大量的軟件、數(shù)據(jù)和文檔，所有這些都可以從 http:/ /www.nltk.org/免費(fèi)下載。NLTK 的發(fā)行版本支持 Windows、Macintosh 和 Unix 平臺(tái)。我們強(qiáng)烈建議你下載 Python 和 NLTk，與我們一起嘗試書中的例子和練習(xí)。

　　本書前幾章按照概念的難易程度編排。先是實(shí)用性很強(qiáng)的語言處理的入門介紹，講述如何使用很短的 Python 程序分析感興趣的文本信息（1-3 章）。接著是結(jié)構(gòu)化程序設(shè)計(jì)章節(jié)（第 4 章），用來鞏固散布在前面幾章中的編程要點(diǎn)。之后，速度加快，我們用一系列章節(jié)講述語言處理的主要內(nèi)容：標(biāo)注、分類和信息提?。?-7 章）。接下來的三章探索分析句子、識(shí)別句法結(jié)構(gòu)和構(gòu)建表示句意的方法（8-10 章）。最后一章講述如何有效管理語言數(shù)據(jù)（第 1 1 章）。本書結(jié)尾處的后記簡(jiǎn)要討論了 NLP 的過去和未來。

　　每一章中我們都在兩種不同的敘述風(fēng)格間切換。一種風(fēng)格是以自然語言為主線。我們分析語言，探索語言學(xué)概；在討論中使用編程的例子。我們經(jīng)常會(huì)使用尚未系統(tǒng)介紹的 Pytho n 結(jié)構(gòu)，這樣你可以在鉆研這些程序如何運(yùn)作的細(xì)節(jié)之前了解它們的效能。就像學(xué)習(xí)一門外語的慣用表達(dá)一樣，你能夠買到好吃的糕點(diǎn)而不必先學(xué)會(huì)復(fù)雜的提問句型。敘述的另一種風(fēng) 17 格是以程序設(shè)計(jì)語言為主線。我們將分析程序、探索算法，而語言學(xué)例子將扮演配角。每章結(jié)尾都有一系列分級(jí)練習(xí)，用于鞏固學(xué)到的知識(shí)。練習(xí)按照如下的標(biāo)準(zhǔn)分級(jí)：○初級(jí)練習(xí)：對(duì)范例代碼作稍微修改等簡(jiǎn)單的練習(xí)；?中級(jí)練習(xí)：深入探索材料的一個(gè)方面，需要仔細(xì)的分析和設(shè)計(jì)；●高級(jí)練習(xí)：開放的任務(wù)，挑戰(zhàn)你對(duì)材料的理解并迫使你獨(dú)立思考解決的方案（新學(xué)編程的讀者應(yīng)該跳過這些）