本文整理汇总了Python中nltk.stem.porter.PorterStemmer.encode方法的典型用法代码示例。如果您正苦于以下问题：Python PorterStemmer.encode方法的具体用法？Python PorterStemmer.encode怎么用？Python PorterStemmer.encode使用的例子？那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类nltk.stem.porter.PorterStemmer的用法示例。
在下文中一共展示了PorterStemmer.encode方法的1个代码示例，这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞，您的评价将有助于系统推荐出更棒的Python代码示例。
示例1: Term
# 需要导入模块: from nltk.stem.porter import PorterStemmer [as 别名]
# 或者: from nltk.stem.porter.PorterStemmer import encode [as 别名]
class Term(object):
def __init__(self, full_word):
self.full_word = full_word
# TODO: Lemmatization requires downloads
# wnl = WordNetLemmatizer()
# lemmas = [wnl.lemmatize(token) for token in tokens]
self.stem = PorterStemmer().stem(full_word).lower()
def __eq__(self, other):
return self.stem == other.stem
def __hash__(self):
return hash(self.stem)
def __repr__(self):
return "Term {}({})".format(self.stem.encode('utf8'), self.full_word.encode('utf8'))
def __str__(self):
return repr(self)
def is_punctuation(self):
return self.stem in string.punctuation
def is_stop_word(self):
return self.full_word in _stop_words