使用NLTK的块/文本解析

Question

我想解析一些文本和图，就像你会一句话。我是NLTK的新手，并试图在NLTK中找到一些能够帮助我完成这一任务的东西。到目前为止，我已经看到nltk.ne_chunk和nltk.pos_tag。我发现他们不是很有帮助，我无法找到任何好的在线文档。

我也尝试过使用LancasterStemmer，但我不完全理解它的作用，应该如何使用或者为什么它应该存在。

有人能帮我解决这个问题吗？没有任何指导性的灯光，我真的感到茫然，而且很沮丧。

在此先感谢

Answer 1

你所描述实际上是一个很艰难的任务，因为在最后，你的程序是成功还是失败完全是一个主观的措施。在这种情况下，通常意味着构建一个解决问题的计划是困难的。在大学里，有些人为了解决这些问题而得到报酬。

如果你想刺激它，我会建议尝试使用某种自动词法分析工具，而不是尝试手动解析和注释，然后利用你的分析树。通常，分析树代表句法分析，即句子的结构。另一方面，你关心的是语义分析，也就是说它的含义 - 或者至少两个句子是相似还是不同（实际上它比某种方式更容易一些）。

您可以查看一些现成的自动汇总工具。这些尝试通过对一段文本的重要性来判断句子，并筛选出不如指定阈值重要的句子。这并不是说这对你有很大的帮助，因为你仍然有需要合并摘要的问题。