nlp里的stemming是什么意思?

  统计/机器学习 自然语言处理    浏览次数:593        分享
0

nlp里的stemming是什么意思?

 

newcomer   2018-10-24 10:22



   2个回答 
8

stemming是词干抽取、词根提取的意思。这个一般是针对外语词汇,中文中很少有这个概念。

比如英文,每个词都有很多变形,动词、过去式、名词、动名词、单数、复数等等,stemming就是把各种形式的词还原到本身的词干上。例如

eat有eating, eaten, ate, eats, eatings等等变形,经过stemming之后,这些词应该都会变为eat

再比如这些词:color, colors, colorful, coloring, colored, colorfully等等,stemming之后,提取出来的就都是color

SofaSofa数据科学社区DS面试题库 DS面经

东布东   2018-10-27 14:50

thanks - newcomer   2018-11-16 09:58
2

找词干的意思

SofaSofa数据科学社区DS面试题库 DS面经

山中人   2018-10-29 14:32



  相关主题

怎么判断一句中文话语是否通顺   1回答

“阅读需要X分钟”这个功能是如何实现的?   2回答

自然语言处理中的Tf-idf是什么意思   2回答

文本处理中stop word什么意思   2回答

文本处理中的tf是什么意思?如何计算?   1回答

wordcloud安装报错error: Microsoft Visual C++ 14.0 is required   1回答

怎么把英文字符串转为小写(python)?   2回答

如何用python统计一个txt文本的行数   3回答

用python统计字符串中空格的个数   3回答

有个一万段文字 有一个关键词列表 找出文字中含有关键词的那些文字   1回答

python里实现词云的package   3回答

word2vec怎么处理一词多义的情况?   3回答



回答问题时需要注意什么?

我们谢绝在回答前讲“生动”的故事。

我们谢绝“这么简单,你自己想”、“书上有的,你认真看”这类的回答;如果你认为对方的提问方式或者内容不妥,你可以直接忽略该问题,不用进行任何作答,甚至可以对该问题投反对票。

我们谢绝答非所问。

我们谢绝自己不会、硬要回答。

我们感激每一个用户在编写答案时的努力与付出!