使用NLTK和MaltParser的依赖性解析器

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用NLTK和MaltParser的依赖性解析器相关的知识,希望对你有一定的参考价值。

我正在使用NLTK和Maltparser从自然语言的句子中提取依赖关系。我使用此代码使用Stanford解析器进行了一些实验:

sentence =  '''I shot an elephant in my pajamas'''
os.popen("echo '"+sentence+"' > ~/stanfordtemp.txt")
parser_out = os.popen("/usr/local/Cellar/stanford-parser/2.0.3/bin/lexparser.sh ~/stanfordtemp.txt").readlines()

for i, tag in enumerate(parser_out):
    if len(tag.strip()) > 0 and tag.strip()[0] == '(':
        parse = " ".join(tag.strip())
        print i, "Parse: ", tag
    elif len(tag.strip()) > 0:
        print i, "Typed dependencies: ", tag 
bracketed_parse = " ".join( [tag.strip() for tag in parser_out if len(tag.strip()) > 0 and tag.strip()[0] == "("] )
print bracketed_parse

并得到了这个好结果:

Parsing [sent. 1 len. 7]: I shot an elephant in my pajamas

Parsed 7 words in 1 sentences (12,87 wds/sec; 1,84 sents/sec).
0 Parse:  (ROOT
1 Parse:    (S
2 Parse:      (NP (PRP I))
3 Parse:      (VP (VBD shot)
4 Parse:        (NP (DT an) (NN elephant))
5 Parse:        (PP (IN in)
6 Parse:          (NP (PRP$ my) (NNS pajamas))))))
8 Typed dependencies:  nsubj(shot-2, I-1)
9 Typed dependencies:  root(ROOT-0, shot-2)
10 Typed dependencies:  det(elephant-4, an-3)
11 Typed dependencies:  dobj(shot-2, elephant-4)
12 Typed dependencies:  poss(pajamas-7, my-6)
13 Typed dependencies:  prep_in(shot-2, pajamas-7)

使用MaltParser我有这个代码:

os.environ['MALTPARSERHOME']="/Applications/maltparser-1.7.2"
maltParser = nltk.parse.malt.MaltParser(working_dir="/Applications/maltparser-1.7.2", 
                                        mco="engmalt.linear-1.7",
                                        additional_java_args=['-Xmx1024m'])
txt = '''I shot an elephant in my pajamas'''
graph = maltParser.raw_parse(txt)
print(graph.tree().pprint())

和以下输出:

(pajamas (shot I) an elephant in my)

问题:我可以使用与使用Stanford解析器时相同的输出吗?任何帮助都会很棒。

答案

在MALT文档中,我没有看到一个与您显示的详细Stanford Parser输出完全匹配的选项,但您可以尝试使用connlx和connlu输出选项来查看它们是否具有您需要的信息。

http://www.maltparser.org/options.html

原则上,可以通过MALT输出的转换将非投影依赖性分析重新表述为选区分析,这将使您不必过多努力,但对成分进行标记则需要做更多工作。

以上是关于使用NLTK和MaltParser的依赖性解析器的主要内容,如果未能解决你的问题,请参考以下文章

我如何获得依赖解析输出的更多信息?

在 NLTK 解析器中使用整数/日期作为终端

NLTK 中用于解析的英语语法

在 setup.py 脚本中安装 nltk 数据依赖项

如何使用 nltk.Regexp.parser() 解析自定义标签

如何为 NLTK 中的歧义句子生成多个解析树?