使用斯坦福ner工具訓(xùn)練自己的模型

首先，你得去官網(wǎng)下載工具包。

在stanford-ner-2018-10-16下面

qa.txt是訓(xùn)練的原始文本。qa.tok是每一行一個(gè)單詞

java -cp stanford-ner.jar edu.stanford.nlp.process.PTBTokenizer qa.txt > qa.tok

手動(dòng)給qa.tok里的每個(gè)單詞標(biāo)注


需要有一個(gè)austen.prop，里面會(huì)指定訓(xùn)練文件

java -cp stanford-ner.jar edu.stanford.nlp.ie.crf.CRFClassifier -prop austen.prop

之后會(huì)生成一個(gè)ner-model.ser.gz

測試，需要一個(gè)測試文件，該文件也是每行一個(gè)單詞，每個(gè)單詞后面有標(biāo)注

java -cp stanford-ner.jar edu.stanford.nlp.process.PTBTokenizer testQA.txt > testQA.tok

測試測試文件里的準(zhǔn)確率

java -cp stanford-ner.jar edu.stanford.nlp.ie.crf.CRFClassifier -loadClassifier ner-model.ser.gz -testFile testQA.tok


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡書系信息發(fā)布平臺(tái)，僅提供信息存儲(chǔ)服務(wù)。

推薦閱讀更多精彩內(nèi)容