我正在尝试将一些句子标记为短语。例如,给定
我觉得你很可爱,我想更多地了解你
令牌可以是
我觉得你很可爱
和
我想更多地了解你
同样,给定输入
今天很棒,但天气本来可以更好。
代币:
今天很棒
和
天气本来可以更好
NLTK 或类似的软件包可以实现这一点吗?
任何建议表示赞赏。
我正在尝试将一些句子标记为短语。例如,给定
我觉得你很可爱,我想更多地了解你
令牌可以是
我觉得你很可爱
和
我想更多地了解你
同样,给定输入
今天很棒,但天气本来可以更好。
代币:
今天很棒
和
天气本来可以更好
NLTK 或类似的软件包可以实现这一点吗?
任何建议表示赞赏。
斯派西可以做到这一点。Spacy 的语义解析器基于在大型文本语料库上训练的语言模型。
该解析器可以将句子分解为较低级别的组件,例如单词/短语。
更多细节和例子: