名词词性标注

Question

嗨，有没有一种在非常大的文件中标记词性的有效方法？在

 import pandas as pd
 import collections 
 import nltk 

 tokens=nltk.word_tokenize(pandas_dataframe)
 tag1=nltk.pos_tag(tokens)
 counts=collections.counter([y for x,y  in tag1])

我试图在一个文件中找到最常见的词类，但不知道有更好的方法

Answer 1

通常，您需要绕过for循环、可能的高内存负载和可能的高CPU负载。在

下面是一个使用python和execnet的distributed part of speech tagging示例。在