自然语言处理中的分词是什么意思?

  统计/机器学习 自然语言处理 开放问题    浏览次数: 743
1

自然语言处理中的分词是什么意思?能否请大神举几个简单的例子。抱拳!

 

魏哲   2017-05-24 14:14



   1个回答 
1

分词就是把一句话里的词按照意义或者词性分开。


今天我吃肯德基  》》今天 / 我 / 吃 / 肯德基

机器学习是一门高深的学问 》》 机器学习 / 是 / 一门 / 高深 / 的 / 学问


jieba是比较常用的中文分词包,支持各种语言。

word哥   2017-05-31 11:12



  相关主题

求推荐条件随机场(CRF)的python package   1回答

文本处理中的tf是什么意思?如何计算?   1回答

文本处理中stop word什么意思   2回答

自然语言处理中的Tf-idf是什么意思   2回答

用python统计字符串中空格的个数   3回答

如何用python统计一个txt文本的行数   3回答

python里怎么把中文字符串转化为成list   1回答

怎么把英文字符串转为小写(python)?   2回答

python里实现词云的package   3回答

wordcloud安装报错error: Microsoft Visual C++ 14.0 is required   1回答

如果不去除stop words,word2vec的结果会受到影响吗?   0回答

数据批量分析提取,求指点迷津   4回答



回答问题时需要注意什么?

我们谢绝在回答前讲“生动”的故事。

我们谢绝“这么简单,你自己想”、“书上有的,你认真看”这类的回答;如果你认为对方的提问方式或者内容不妥,你可以直接忽略该问题,不用进行任何作答,甚至可以对该问题投反对票。

我们谢绝答非所问。

我们谢绝自己不会、硬要回答。

我们感激每一个用户在编写答案时的努力与付出!