前言

自然语言处理最基本的功能是词法分析,词法分析的功能主要有:

分词分句
词语标注
词法时态(适用于英文词语)
关键词提前(词干提取)
由于英文和中文在文化上存在巨大的差异,因此Python处理英文和中文需要使用不同的模块,中文处理推荐使用jieba模块,英文处理推荐使用nltk模块。模块安装方法可自行搜索相关资料。