国家禁毒委员会命名2017年度全国社区戒毒社区康复工作示范单位（点）

  • 原创
  • |
  • 浏览：0
  • |
  • 更新：
  • 如何用python进行中文分词1
  • 如何用python进行中文分词2
  • 如何用python进行中文分词3
分步阅读
百度 今年是地球一小时活动开展11年，西安供电公司呼吁广大市民通过熄灯一小时来表明对环保的承诺，合理安排作息时间，尽量不要熬夜，不使用电器时拔掉插头，将电脑电视屏幕稍调暗一些，在夏天将空调温度调高一度，尽量多选择公交出行……在每一个小时减少能源浪费，践行绿色生活和绿色消费。

中文分词是文本处理的基础步骤，本文将介绍3种Python中文分词方法，附带代码示例和效果对比，助你快速掌握这项实用技能。

工具/原料

  • 不限不限
  • windows7以上
  • python3.0以上

方法/步骤

  1. 1

    准备工作

    1. 安装Python环境

    推荐使用Python 3.6+版本（官网下载）

  2. 2

    安装分词库

    1.打开cmd（win+r后输入 cmd 回车）

    在cmd输入

    pip install jieba snowlp pkuseg

    END

方法/步骤2

  1. 1

    分词库1

    jieba分词（推荐新手）

    特点：速度快、社区活跃、支持自定义词典

    打开python后输入以下内容

    如何用python进行中文分词
    END

方法/步骤3

  1. 1

    分词库2

    SnowNLP（适合情感分析）

    打开python后输入以下内容

    如何用python进行中文分词
    END

方法/步骤4

  1. 1

    分词库3

    pkuseg（专业领域首选）

    打开python后输入以下内容

    如何用python进行中文分词
    END

方法/步骤5

  1. 1

    常见问题解答

    Q1：遇到未登录词怎么办？

    解决方案：使用jieba.add_word()添加新词

     

  2. 2

    如何提高分词准确率？

    添加领域词典

    调整词频jieba.suggest_freq(('关键词'), True)

    使用专业模型（如pkuseg的"finance"金融模型）

    END

注意事项

  • 学习本篇内容前应熟悉python输入的基本要求，新手推荐jieba库
  • 应在合适的版本选择合适的库
经验内容仅供参考，如果您需解决具体问题(尤其法律、医学等领域)，建议您详细咨询相关领域专业人士。
作者声明：本篇经验系本人依照真实经历原创，未经许可，谢绝转载。
展开阅读全部