`
ipython
  • 浏览: 294511 次
  • 性别: Icon_minigender_1
  • 来自: 佛山
社区版块
存档分类
最新评论

python 中文分词,安装 pymmseg

阅读更多

在python这pymmseg-cpp 还是十分方便的! 

 

环境 ubuntu10.04 , python2.65

 

步骤:

1 下载mmseg-cpp的源代码 http://code.google.com/p/pymmseg-cpp/

2  tar -zxf pymmseg-cpp*.tar.gz           //解压后得到pymmseg 目录

    cd pymmseg\mmseg-cpp

    python build.py     #生成 mmseg.so文件

 

3 将 pymmseg 目录复制到 /usr/local/lib/python2.6/dist-packages 中

 

 

4 测试有没有成功:

  test.py

 

from pymmseg import mmseg 
mmseg.dict_load_defaults()  
text = '今天的天气真好啊,我们一起出去玩一下吧'
algor = mmseg.Algorithm(text)  
for tok in algor:  
    print '%s [%d..%d]' % (tok.text, tok.start, tok.end)  
 

 

 

分享到:
评论

相关推荐

    python中文分词使用的中文文章

    jieba是一个广受欢迎的Python中文分词库,它提供了多种分词模式,包括精确模式、全模式和搜索引擎模式。精确模式力求将句子最精确地切开,适合文本分析;全模式尽可能多地切割出词语,适合用于搜索引擎;而搜索引擎...

    python中文分词

    Python中文分词是Python在处理中文文本时的关键技术,它涉及到自然语言处理(NLP)领域,主要用于将连续的汉字序列切分成具有语义的单个词汇,这在数据分析、机器学习、信息检索、文本挖掘等领域有着广泛的应用。...

    python中文分词:基于条件随机场模型的中文分词实现及改进全项目.zip

    标题中的“python中文分词:基于条件随机场模型的中文分词实现及改进全项目”表明,这是一个关于Python编程语言的项目,专注于中文文本的分词处理。分词是自然语言处理(NLP)中的基础步骤,它将连续的文本序列切...

    pymmseg-cpp python中文分词

    pymmseg-cpp is a Python port of the rmmseg-cpp project. rmmseg-cpp is a MMSEG Chinese word segmenting algorithm implemented in C++ with a Python interface.

    python中文分词,使用结巴分词对python进行分词(实例讲解)

    ### Python中文分词技术详解与结巴分词应用 #### 一、中文分词的重要性及应用场景 中文分词是自然语言处理(NLP)中的一个关键步骤,它是指将连续的中文字符序列切分成一个个单独的、具有语义的词汇的过程。在文本...

    pymmseg -python分词模块

    python分词模块,基于mmseg算法编写,核心代码c++,提供python接口

    python文本分词,去停用词,包含基础停用词词典

    分词就是将连续的汉字序列切分成有意义的词汇单元,例如将“我爱你”切分为“我”,“爱”,“你”。在这个过程中,可能会遇到歧义分词问题,需要利用词典和上下文信息来解决。Python中常见的分词工具包括jieba、...

    Python-jieba结巴中文分词做最好的Python中文分词组件

    **Python-jieba结巴中文分词:打造顶级的Python中文处理工具** jieba,一个在Python开发者中广受欢迎的库,被誉为“结巴”中文分词,是处理中文文本的强大武器。它专为了解决中文分词问题而设计,为Python提供了...

    用Python做中文分词和绘制词云图

    "用Python做中文分词和绘制词云图"这个主题涉及到两个主要的知识点:一是使用jieba库进行中文分词,二是利用Python进行词云图的绘制。 首先,我们来详细探讨jieba分词。jieba是一个专门用于中文分词的Python库,它...

    python分词

    python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词python分词...

    西游记素材用于python结巴分词可视化素材

    西游记素材用于python结巴分词可视化素材 仅供学习,无商业用途

    python调用中文分词.rar

    python调用分词,分词系统只可以用2.6版本,调用的是中文分词,可自己添加词典。演示时可选择计算机一级标注、二级标注、北大一级标注二级标注等选项,上边可输入中文,下边是分词后的效果,运行界面请参考截图区域...

    HMM实现中文分词python实现作业

    在自然语言处理(NLP)领域,中文分词是一项基础且关键的任务,它涉及到将连续的汉字序列分割成有意义的词汇单元。在这个“HMM实现中文分词python实现作业”中,我们关注的是如何利用隐马尔可夫模型(HMM)来解决这...

    python jieba 分词的一系列代码

    在Python编程语言中,jieba库是一个非常流行的中文分词工具,它提供了高效且易于使用的接口,使得开发者能够轻松地处理中文文本。本项目聚焦于使用jieba进行分词,并结合其他库如snownlp(用于情感分析)和...

    PythonOCC的安装

    ### PythonOCC的安装与使用详解 #### 一、PythonOCC简介 PythonOCC是基于OpenCASCADE技术的Python封装库,由tpaviot开发并维护。它为Python用户提供了一个强大的计算机辅助设计(CAD)工具集,使得在Python环境下...

    分词_python分词_

    利用python对三体进行分词 并进行词频统计

    python 介绍和安装

    python 介绍和安装,详细介绍了python是什么,以及怎么安装。

    Python3.8 tgz安装

    请注意,直接安装系统包管理器(如apt、yum或dnf)提供的Python版本可能更简单,但对于想要自定义安装或学习编译过程的开发者来说,手动安装是一个很好的实践。此外,安装完成后,为了系统稳定性,建议创建软链接,...

    结巴分词Python代码

    结巴分词(Jieba)是Python编程语言中的一款著名中文分词库,由结巴团队开发。它以其高效、准确和易用性而受到广大开发者和数据处理人员的青睐。分词是自然语言处理(NLP)中的基础任务,对于中文文本尤其重要,因为...

Global site tag (gtag.js) - Google Analytics