`

很全的笔记:linux下字符编码转换

 
阅读更多

一、利用iconv函数族进行编码转换
iconv函数族的头文件是iconv.h,使用前需包含之。
#include <iconv.h>
iconv函数族有三个函数,原型如下:
(1) iconv_t iconv_open(const char *tocode, const char *fromcode);
此函数说明将要进行哪两种编码的转换,tocode是目标编码,fromcode是原编码,该函数返回一个转换句柄,供以下两个函数使用。
(2) size_t iconv(iconv_t cd,char **inbuf,size_t *inbytesleft,char **outbuf,size_t *outbytesleft);
此函数从inbuf中读取字符,转换后输出到outbuf中,inbytesleft用以记录还未转换的字符数,outbytesleft用以记录输出缓冲的剩余空间,cd是iconv_open返回的句柄。 (3) int iconv_close(iconv_t cd);
此函数用于关闭转换句柄,释放资源。
例子1: 用C语言实现的转换示例程序

/* f.c : 代码转换示例C程序 */
#include <iconv.h>
#define OUTLEN 255
main()
{
char *in_utf8 = "姝e?ㄥ??瑁?";
char *in_gb2312 = "正在安装";
char out[OUTLEN];

//unicode码转为gb2312码
rc = u2g(in_utf8,strlen(in_utf8),out,OUTLEN);
printf("unicode-->gb2312 out=%sn",out);
//gb2312码转为unicode码
rc = g2u(in_gb2312,strlen(in_gb2312),out,OUTLEN);
printf("gb2312-->unicode out=%sn",out);
}
//代码转换:从一种编码转为另一种编码
int code_convert(char *from_charset,char *to_charset,char *inbuf,int inlen,char *outbuf,int outlen)
{
iconv_t cd;
int rc;
char **pin = &inbuf;
char **pout = &outbuf;

cd = iconv_open(to_charset,from_charset);
if (cd==0) return -1;
memset(outbuf,0,outlen);
if (iconv(cd,pin,&inlen,pout,&outlen)==-1) return -1;
iconv_close(cd);
return 0;
}
//UNICODE码转为GB2312码
int u2g(char *inbuf,int inlen,char *outbuf,int outlen)
{
return code_convert("utf-8","gb2312",inbuf,inlen,outbuf,outlen);
}
//GB2312码转为UNICODE码
int g2u(char *inbuf,size_t inlen,char *outbuf,size_t outlen)
{
return code_convert("gb2312","utf-8",inbuf,inlen,outbuf,outlen);
}

例子2: 用C++语言实现的转换示例程序

/* f.cpp : 代码转换示例C++程序 */
#include <iconv.h>
#include <iostream>

#define OUTLEN 255

using namespace std;

// 代码转换操作类
class CodeConverter {
private:
iconv_t cd;
public:
// 构造
CodeConverter(const char *from_charset,const char *to_charset) {
cd = iconv_open(to_charset,from_charset);
}

// 析构
~CodeConverter() {
iconv_close(cd);
}

// 转换输出
int convert(char *inbuf,int inlen,char *outbuf,int outlen) {
char **pin = &inbuf;
char **pout = &outbuf;

memset(outbuf,0,outlen);
return iconv(cd,pin,(size_t *)&inlen,pout,(size_t *)&outlen);
}
};

int main(int argc, char **argv)
{
char *in_utf8 = "姝e?ㄥ??瑁?";
char *in_gb2312 = "正在安装";
char out[OUTLEN];

// utf-8-->gb2312
CodeConverter cc = CodeConverter("utf-8","gb2312");
cc.convert(in_utf8,strlen(in_utf8),out,OUTLEN);
cout << "utf-8-->gb2312 in=" << in_utf8 << ",out=" << out << endl;

// gb2312-->utf-8
CodeConverter cc2 = CodeConverter("gb2312","utf-8");
cc2.convert(in_gb2312,strlen(in_gb2312),out,OUTLEN);
cout << "gb2312-->utf-8 in=" << in_gb2312 << ",out=" << out << endl;
}


二、利用iconv命令进行编码转换

iconv命令用于转换指定文件的编码,默认输出到标准输出设备,亦可指定输出文件。

用法: iconv [选项...] [文件...]

有如下选项可用:

输入/输出格式规范:
-f, --from-code=名称 原始文本编码
-t, --to-code=名称 输出编码

信息:
-l, --list 列举所有已知的字符集

输出控制:
-c 从输出中忽略无效的字符
-o, --output=FILE 输出文件
-s, --silent 关闭警告
--verbose 打印进度信息

-?, --help 给出该系统求助列表
--usage 给出简要的用法信息
-V, --version 打印程序版本号

例子:
iconv -f utf-8 -t gb2312 aaa.txt >bbb.txt
这个命令读取aaa.txt文件,从utf-8编码转换为gb2312编码,其输出定向到bbb.txt文件。


本文来自CSDN博客,转载请标明出处:http://blog.csdn.net/xl_lxl/archive/2008/03/21/2202289.aspx

分享到:
评论

相关推荐

    Linux字符集编码转换.docx

    iconv 是一个开源的字符编码转换库,可以“方便”的完成几乎所有的编码转换工作。iconv 库可以将不同的编码方式转换为 Unicode 编码,然后再将 Unicode 编码转换为其他编码方式。iconv 库可以满足我们在 Linux 操作...

    libiconv-1.1.tar.gz_linux_linux 字符转换_linux字符集_字符转换_字符集

    在Linux操作系统中,字符编码和转换是一个至关重要的概念,特别是在处理多语言和跨平台的数据时。`libiconv`是一个广泛使用的开源库,用于在不同的字符集之间进行转换。这个`libiconv-1.1.tar.gz`压缩包包含的就是这...

    Windows和Linux的字符编码转换.docx

    Windows和Linux的字符编码转换.docx

    Windows和Linux的字符编码转换.pdf

    Windows和Linux的字符编码转换.pdf

    批量字符编码转换工具,批量转换文件编码 超级批量编码转换

    批量转换文件编码 超级批量编码转换 批量转换编码 编码批量转换工具 批量转换txt编码 linux 批量转换编码 编码格式批量转换 php 字符编码转换 字符编码转换 java 字符编码转换

    字符编码转换iconv

    字符编码转换是计算机科学中的一个重要概念,涉及到数据的存储、传输和显示。在处理不同语言或平台时,正确地进行编码转换是确保信息准确无误的关键。`iconv` 是一个广泛使用的命令行工具和库,它允许在不同的字符...

    linux字符集编码指南

    在Linux中,`iconv`函数族提供了非常强大的字符编码转换功能,支持多种不同的编码格式之间的转换。这些函数可以在编程中直接调用,以便开发者能够灵活地处理不同编码格式的数据。 ##### 2.1 函数族介绍 `iconv`...

    linux 字符集转换脚本

    linux 字符集转换脚本,稍微修改脚本即可批量修改文件解决字符编码导致的文件乱码问题

    JAVA 转换字符编码工具

    本篇将围绕"JAVA 转换字符编码工具"这个主题,深入探讨字符编码的概念、Java中的字符编码API以及`ReadFile.java`这个可能的源码文件如何处理字符编码。 首先,我们需要理解字符编码的基本概念。常见的字符编码有...

    Linux下查看文件编码,文件编码格式转换和文件名编码.doc

    Linux 文件编码查看、转换和文件名编码转换 在 Linux 中查看文件编码可以通过多种方式实现,例如,在 Vim 中可以使用 `set fileencoding` 命令来查看当前文件的编码格式。如果需要自动识别文件编码,可以在 `~/....

    linux下目录文件字符编码转换shell脚本

    使用方法:./fconv type1 type2 dir 含义:from 'type1' to 'type2' in directory 'dir'

    ICONV 字符转换 编码库

    在IT行业中,字符编码是一个非常重要的概念,尤其是在处理多语言和跨平台的数据交换时。`ICONV`就是这样一个工具,它是一个字符集转换库,主要用于处理不同编码间的转换,如UTF-8、GBK和Unicode等。这篇内容将深入...

    文字编码转换工具

    总的来说,文字编码转换工具是处理全球化、多语言环境下的文本问题的得力助手。它不仅简化了编码转换的复杂过程,而且有助于消除因编码不匹配带来的各种问题,促进信息的无障碍交流。对于IT专业人士来说,理解和掌握...

    新编码转换大全.rar

    这个名为"新编码转换大全.rar"的压缩包文件很可能包含了一系列与编码转换相关的资源,如工具、文档或者代码库,帮助用户解决各种编码问题。 编码是计算机处理文本的一种方式,常见的有ASCII、Unicode(包括UTF-8、...

    linux转化windows文件编码格式脚本

    Linux 转换 Windows 文件编码格式脚本是将 Windows 上的文件编码格式转换为 UTF-8 编码,以便在移植 Windows 代码到 Linux 下时避免注释代码乱码和编码格式引起的编译错误。 该脚本使用 Bash shell 脚本语言编写,...

    mac文件编码转换

    在Mac操作系统中,文件编码转换是一项重要的任务,尤其对于处理包含不同字符集的文本文件时。常见的文件类型如txt、xml、css、htm、html、php、jsp等,它们可能因开发环境或语言设定的不同而采用不同的编码方式,如...

    关于linux编码转换的DOC文档

    本文主要围绕Linux系统中如何进行编码转换,特别是针对与Windows系统之间的交互进行讨论。 首先,Windows系统默认的文件编码格式是GBK(也称为GB2312),这是一种简体中文的字符编码。相比之下,Linux系统中更倾向...

    iconv-文件编码转换

    1. **跨平台数据交换**:在不同操作系统(如 Windows 和 Linux)之间交换文件时,由于它们默认的字符编码可能不同,需要进行转换。 2. **网站迁移**:在迁移网站内容时,可能需要将数据库中的编码统一转换为标准的 ...

    编码转换支持库2.0#0版

    易语言iconv.fne支持库中文名为易语言编码转换支持库,本易语言支持库在转换编码时使用 GNU libiconv 1.9.1版,支持现有绝大多数编码和字符集。易语言iconv.fne支持库为一般支持库,需要易系统3.7版本的支持,需要...

Global site tag (gtag.js) - Google Analytics