Stanford Parser 進(jìn)行詞法語(yǔ)法分析的詳細(xì)使用

http://blog.csdn.net/pipisorry/article/details/42976457

stanford-parser的使用

1、到斯坦福官方網(wǎng)站http://nlp.stanford.edu/software/lex-parser.shtml下載軟件包，解壓。

2、在eclipse中新建1個(gè)java project，把解壓得到根目錄下的stanford-parser.jar和stanford-parser⑶.*.*-models.jar兩個(gè)包導(dǎo)入項(xiàng)目到項(xiàng)目援用包中，

然后把解壓得到根目錄下的ParserDemo.java文件拷貝到項(xiàng)目的src中

DEMO的使用

 1、直接運(yùn)行該實(shí)例程序（英文語(yǔ)法解析）：

1.直接點(diǎn)擊run就能夠運(yùn)行

2.如果要String[] sent從文本輸入：

eclipse > run > run configuration > arguments > program arguments:

輸入： edu/stanford/nlp/models/lexparser/englishPCFG.ser.gzC:UsersminglanDesktoptest2.txt

test2.txt：

The screen is really big, but the price is too expensive!
The price is expensive, students don't buy it usually.
The screen is beautiful, but the price is not!
The screen is big and beautiful!

3.如果要測(cè)試中文的話，要以下修改：

（1）按需要把輸入改成要測(cè)試中文：

String[] sent = {  "這", "是", "第1個(gè)", "測(cè)試", "句子", "。" };

（2）導(dǎo)入中文的解析模型文件：

Stringgrammar = args.length > 0 ? args[0] : "edu/stanford/nlp/models/lexparser/chinesePCFG.ser.gz";

（3）修改源文件中的部份代碼：

TreebankLanguagePacktlp = new ChineseTreebankLanguagePack();//PennTreebankLanguagePack(); 

如果報(bào)錯(cuò)沒(méi)有retainTmpSubcategories參數(shù)，在源文件中注釋掉該參數(shù)：

String[] options = {"-maxLength", "80"};//, "-retainTmpSubcategories" }; 

2、Stanford Parser自帶圖形化操作界面

在windows操作系統(tǒng)下只要雙擊運(yùn)行軟件根目錄下的lexparser-gui.bat文件（linux下為lexparser-gui.sh文件）

點(diǎn)擊“Load File”導(dǎo)入需要解析文件也能夠直接在上面大的輸入框中輸入要解析內(nèi)容，

在“Language”選項(xiàng)當(dāng)選擇對(duì)應(yīng)解析的語(yǔ)言。

點(diǎn)擊“Load Parser”載入模型文件，稍等片刻（載入模型文件可能需要幾秒鐘）進(jìn)度條完成載入后“Parser”按鈕變成可用狀態(tài)，點(diǎn)擊便可解上輸入框中高亮的內(nèi)容，解析得到的樹(shù)形結(jié)果在下框中顯示，

可以把結(jié)果輸出另存為文件。

3、Stanford Parser還提供了命令行的方式lexparser-gui.bat（win）和lexparser.sh（linux）具體使用見(jiàn)官方文檔：Stanford Parser FAQ

4、Stanford Parser有個(gè)在線的解釋效果示例在：http://nlp.stanford.edu:8080/parser/index.jsp

相干設(shè)置

Stanford parser句法樹(shù)分析時(shí)候占用內(nèi)存可能較大，所以要調(diào)劑eclipse虛擬內(nèi)存空間，方法是在“運(yùn)行――運(yùn)行――自變量――VM自變量中填上-Xms256M -Xmx800M”，大小就要看實(shí)際情況和機(jī)子性能。

當(dāng)句子較長(zhǎng)時(shí)會(huì)出現(xiàn)報(bào)“FactoredParser: exceeded MAX_ITEMS work limit [200000 items]; aborting.”毛病...

在options中把MAX_ITEMS設(shè)為1個(gè)更大的書(shū)，以下例子中為500000

經(jīng)常使用的標(biāo)注解釋

CC: conjunction, coordinatin 表示連詞
CD: numeral, cardinal 表示基數(shù)詞
DT: determiner 表示限定詞
EX: existential there 存在句
FW: foreign word 外來(lái)詞
IN: preposition or conjunction, subordinating 介詞或從屬連詞
JJ: adjective or numeral, ordinal 形容詞或序數(shù)詞
JJR: adjective, comparative 形容詞比較級(jí)
JJS: adjective, superlative 形容詞最高級(jí)
LS: list item marker 列表標(biāo)識(shí)
MD: modal auxiliary 情態(tài)助動(dòng)詞
NN: noun, common, singular or mass
NNS: noun, common, plural
NNP: noun, proper, singular
NNPS: noun, proper, plural
PDT: pre-determiner 前位限定詞
POS: genitive marker 所有格標(biāo)記
PRP: pronoun, personal 人稱(chēng)代詞
PRP$: pronoun, possessive 所有格代詞
RB: adverb 副詞
RBR: adverb, comparative 副詞比較級(jí)
RBS: adverb, superlative 副詞最高級(jí)
RP: particle 小品詞
SYM: symbol 符號(hào)
TO:"to" as preposition or infinitive marker 作為介詞或不定式標(biāo)記
UH: interjection 插入語(yǔ)
VB: verb, base form
VBD: verb, past tense
VBG: verb, present participle or gerund
VBN: verb, past participle
VBP: verb, present tense, not 3rd person singular
VBZ: verb, present tense,3rd person singular
WDT: WH-determiner WH限定詞
WP: WH-pronoun WH代詞
WP$: WH-pronoun, possessive WH所有格代詞
WRB:Wh-adverb WH副詞

ROOT：要處理文本的語(yǔ)句
IP：簡(jiǎn)單從句
NP：名詞短語(yǔ)
VP：動(dòng)詞短語(yǔ)
PU：斷句符，通常是句號(hào)、問(wèn)號(hào)、感嘆號(hào)等標(biāo)點(diǎn)符號(hào)
LCP：方位詞短語(yǔ)
PP：介詞短語(yǔ)
CP：由‘的’構(gòu)成的表示修飾性關(guān)系的短語(yǔ)
DNP：由‘的’構(gòu)成的表示所屬關(guān)系的短語(yǔ)
ADVP：副詞短語(yǔ)
ADJP：形容詞短語(yǔ)
DP：限定詞短語(yǔ)
QP：量詞短語(yǔ)
NN：經(jīng)常使用名詞
NR：固著名詞
NT：時(shí)間名詞
PN：代詞
VV：動(dòng)詞
VC：是
CC：表示連詞
VE：有
VA：表語(yǔ)形容詞
AS：內(nèi)容標(biāo)記（如：了）
VRD：動(dòng)補(bǔ)復(fù)合詞
CD: 表示基數(shù)詞
DT: determiner 表示限定詞
EX: existential there 存在句
FW: foreign word 外來(lái)詞
IN: preposition or conjunction, subordinating 介詞或從屬連詞
JJ: adjective or numeral, ordinal 形容詞或序數(shù)詞
JJR: adjective, comparative 形容詞比較級(jí)
JJS: adjective, superlative 形容詞最高級(jí)
LS: list item marker 列表標(biāo)識(shí)
MD: modal auxiliary 情態(tài)助動(dòng)詞
PDT: pre-determiner 前位限定詞
POS: genitive marker 所有格標(biāo)記
PRP: pronoun, personal 人稱(chēng)代詞
RB: adverb 副詞
RBR: adverb, comparative 副詞比較級(jí)
RBS: adverb, superlative 副詞最高級(jí)
RP: particle 小品詞 
SYM: symbol 符號(hào)
TO:”to” as preposition or infinitive marker 作為介詞或不定式標(biāo)記 
WDT: WH-determiner WH限定詞
WP: WH-pronoun WH代詞
WP$: WH-pronoun, possessive WH所有格代詞
WRB:Wh-adverb WH副詞
 
關(guān)系表示
abbrev: abbreviation modifier，縮寫(xiě)
acomp: adjectival complement，形容詞的補(bǔ)充；
advcl : adverbial clause modifier，狀語(yǔ)從句修飾詞
advmod: adverbial modifier狀語(yǔ)
agent: agent，代理，1般有by的時(shí)候會(huì)出現(xiàn)這個(gè)
amod: adjectival modifier形容詞
appos: appositional modifier,同位詞
attr: attributive，屬性
aux: auxiliary，非主要?jiǎng)釉~和助詞，如BE,HAVE SHOULD/COULD等到
auxpass: passive auxiliary 被動(dòng)詞
cc: coordination，并列關(guān)系，1般取第1個(gè)詞
ccomp: clausal complement從句補(bǔ)充
complm: complementizer，引導(dǎo)從句的詞好重聚中的主要?jiǎng)釉~
conj : conjunct，連接兩個(gè)并列的詞。
cop: copula。系動(dòng)詞（如be,seem,appear等），（命題主詞與謂詞間的）連系
csubj : clausal subject，從主關(guān)系
csubjpass: clausal passive subject 主從被動(dòng)關(guān)系
dep: dependent依賴(lài)關(guān)系
det: determiner決定詞，如冠詞等
dobj : direct object直接賓語(yǔ)
expl: expletive，主要是抓取there
infmod: infinitival modifier，動(dòng)詞不定式
iobj : indirect object，非直接賓語(yǔ)，也就是所以的間接賓語(yǔ)；
mark: marker，主要出現(xiàn)在有“that” or “whether”“because”, “when”,
mwe: multi-word expression，多個(gè)詞的表示
neg: negation modifier否定詞
nn: noun compound modifier名詞組合情勢(shì)
npadvmod: noun phrase as adverbial modifier名詞作狀語(yǔ)
nsubj : nominal subject，名詞主語(yǔ)
nsubjpass: passive nominal subject，被動(dòng)的名詞主語(yǔ)
num: numeric modifier，數(shù)值修飾
number: element of compound number，組合數(shù)字
parataxis: parataxis: parataxis，并列關(guān)系
partmod: participial modifier動(dòng)詞情勢(shì)的修飾
pcomp: prepositional complement，介詞補(bǔ)充
pobj : object of a preposition，介詞的賓語(yǔ)
poss: possession modifier，所有情勢(shì)，所有格，所屬
possessive: possessive modifier，這個(gè)表示所有者和那個(gè)’S的關(guān)系
preconj : preconjunct，常常是出現(xiàn)在 “either”, “both”, “neither”的情況下
predet: predeterminer，前綴決定，常常是表示所有
prep: prepositional modifier
prepc: prepositional clausal modifier
prt: phrasal verb particle，動(dòng)詞短語(yǔ)
punct: punctuation，這個(gè)很少見(jiàn)，但是保存下來(lái)了，結(jié)果當(dāng)中不會(huì)出現(xiàn)這個(gè)
purpcl : purpose clause modifier，目的從句
quantmod: quantifier phrase modifier，數(shù)量短語(yǔ)
rcmod: relative clause modifier相干關(guān)系
ref : referent，唆使物，指代
rel : relative
root: root，最重要的詞，從它開(kāi)始，根節(jié)點(diǎn)
tmod: temporal modifier
xcomp: open clausal complement
xsubj : controlling subject 掌控者

【POS Tagging】

PS:

Stanford CoreNLP API Documentation

from:http://blog.csdn.net/pipisorry/article/details/42976457

ref:http://www.verydemo.com/demo_c173_i1328.html

生活不易，碼農(nóng)辛苦
如果您覺(jué)得本網(wǎng)站對(duì)您的學(xué)習(xí)有所幫助,可以手機(jī)掃描二維碼進(jìn)行捐贈(zèng)