`
shake863
  • 浏览: 664506 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

python 中文编码的处理

阅读更多

在win下写点python的代码,对utf-8 老是处理不过来,并且解析一点汉字总会遇到一些汉字的编码问题。
下决心把它解决掉。

1、尝试第一种方式

utf8string = utf8string.decode("utf-8");
utf8string = utf8string.encode("gbk");

 

这个时候显示基本上是正常的,但是有时候会抛出 UnicodeEncodeError 异常。疑惑

 

2、尝试第二种方式

utf8string  = unicode(utf8string , "utf-8")
utf8string  = utf8string .encode("GBK")

 这个时候和第一种的情况是一样的,也是在有些时候抛出 UnicodeEncodeError异常,

为什么会抛Unicode异常啊,会不会是python的中间代码是unicode的啊

结果!

utf8string = utf8string.decode("utf-8");

   和

 

utf8string  = unicode(utf8string , "utf-8")

 

   就已经把 utf-8的代码转成 unicode 了(这是在gbk环境下和utf-8环境下 都能正常显示汉字)
   如果再转成gbk,就有可能出问题了。

  问题解决了 !!

 

 

 

 

 

 

1
0
分享到:
评论

相关推荐

    python中文自然语言处理基础与实战

    《Python中文自然语言处理基础与实战》是一本深入浅出的教程,涵盖了使用Python进行NLP工作的各个方面。在本文中,我们将详细探讨该领域的重要概念、工具和技术,并结合实际案例来深化理解。 首先,让我们从Python...

    python查询笔画数(含汉字编码表)

    在Python编程语言中,查询汉字的笔画数是一项常见的任务,尤其在中文处理或数据分析时。这个主题涉及到几个关键知识点,包括Python的...总的来说,理解和操作汉字编码以及利用数据资源是进行中文信息处理的重要基础。

    chardet-1.0.1.tar.gz 自动检测python汉字编码辅助

    完成这些步骤后,`chardet` 就可以在Python项目中使用了,为处理汉字编码问题提供了强大的支持。总的来说,`chardet` 是Python处理编码问题的一个重要工具,尤其在与HTML解析相关的场景中,它极大地提高了代码的健壮...

    20180530_Python编码及中文乱码1

    Python 编码与解码详解 编码是将可读的字符转换为计算机内部表示的过程,而解码则是相反的过程,即将计算机内部的表示转换回可读的字符。...正确处理编码问题可以避免字符乱码,提高程序的兼容性和稳定性。

    Python中文乱码

    综上所述,Python中文乱码问题主要源于字符编码的不匹配,通过正确识别和指定编码,可以避免大部分乱码情况的发生。在处理中文字符时,养成良好的编码习惯,统一使用UTF-8编码,可以显著减少乱码问题,提升开发效率...

    Python处理中文路径

    在Python编程中,处理中文路径可能会遇到编码问题,因为Python默认使用ASCII编码,而中文字符不在ASCII编码范围内。本文将详细介绍如何在Python中正确处理包含中文的路径。 首先,我们需要理解编码的基本概念。编码...

    python避免中文乱码的代码.docx

    Python是一种广泛使用的编程语言,但在处理中文字符时可能会遇到乱码问题。这主要是因为Python的默认内部编码是ASCII,不支持中文字符。为了解决这个问题,我们需要采取一些措施确保中文字符能够正确显示。 1. **...

    python学习教程,如何解决Python中文编码乱码问….docx

    ### Python中文编码问题详解 #### 一、问题背景与概述 在进行Python编程时,我们经常会遇到中文编码的问题。特别是当我们在程序中尝试输出或处理中文字符串时,如果没有正确地设置编码方式,就会出现乱码或者是...

    PEP8Python 编码规范

    这实际上是有关代码国际化和本地化的问题,不过,原文提到的“将Python的英文编码变成中文的数据规范”并不准确,因为PEP8本身并不直接涉及语言的转换,而是关于编码风格的约定。不过,如果是要编写中文的注释,应当...

    python 中文乱码

    在Python环境中处理文本数据时,特别是涉及到中文等非ASCII字符时,很容易遇到乱码问题。例如,在读取包含中文的文件或者输出中文到控制台时,可能会出现乱码现象。这主要是因为Python默认的字符串编码与实际使用的...

    Python中文乱码详解.pdf

    总结来说,Python中文乱码问题涉及字符编码的基础知识,包括ASCII、GBK、UTF-8、MBCS、Unicode和CodePage等概念。理解和掌握这些知识点,以及Python中相应的处理方式,对于解决实际开发中的乱码问题至关重要。

    Python中文乱码详解.rar

    总的来说,Python中文乱码问题主要涉及编码和解码的选择以及统一性。了解编码原理,合理使用Python提供的工具和方法,就能有效地避免和解决乱码问题。在教育和学习过程中,掌握这些知识点对提高编程能力非常有帮助。

    python 文件读写 乱码

    在Python编程中,文件读写操作是非常常见的需求之一,尤其是在处理非英文或特殊字符时,经常会遇到乱码问题。本文将深入探讨Python中的文件读写以及如何正确处理编码问题,避免出现乱码的情况。 #### 一、Python...

    Python PEP8 编码规范中文版

    Python PEP8 编码规范中文版旨在为Python编程语言提供一套统一的代码编写标准,以便提升代码的可读性和一致性。PEP是Python Enhancement Proposal的缩写,它代表了Python增强提案,而PEP8是一份专门针对Python代码...

    Python学习笔记,Python3.5中文无法显示

    在Python编程过程中,遇到中文无法显示或报错“Non-UTF-8 code”通常是由于源代码文件的编码格式与Python解释器默认的UTF-8编码不一致所导致的问题。这个问题在Python 3.x版本中尤为常见,因为Python 3默认采用UTF-8...

    python2 编码问题的测试代码

    总的来说,理解Python2中的编码和解码机制,以及如何在处理文件和字符串时正确应用它们,对于避免中文乱码问题至关重要。通过细心处理编码转换,你可以确保Python程序能正确地处理各种语言的文本数据。

    Python字符编码_中文乱码.pdf

    ### Python字符编码与中文乱码问题详解 #### 一、引言 在处理中文文本时,经常遇到的一个问题是中文乱码。特别是在使用Python进行开发时,由于不同的操作系统默认编码方式不同,以及Python自身对源文件编码的处理...

Global site tag (gtag.js) - Google Analytics