- 浏览: 51563 次
- 性别:
- 来自: 北京
最新评论
环境:
DB-A 字符集:US7ASCII
DB-B 字符集:ZHS16GBK
需求: 从DB-A中将一个表的中文数据通过JAVA定时任务同步到DB-B.
DB-A库中表的信息如下:
CREATE TABLE USER_INFO (USER_ID number, USER_NAME varchar2(50));
如果用一般的方式来SELECT,和INSERT,不管客户端用什么样的字符集,数据到DB-B上肯定会显示乱码.
解决方法1 (在数据库实现)
解决思路:通过视图将数据转换成二进制数据,绕过字符集的转换,然后让目标库来读取.
1. 在DB-A库上创建视图:
create or replace view view_user_info
as
select user_id, utl_raw.cast_to_raw(user_name) user_name from user_info ;
2. 在DB-B库上创建视图:
create or replace view view_user_info_db_a
as
select user_id, utl_raw.cast_to_varchar2 (user_name) user_name from view_user_info@db_a;
3. 在DB-B库上进行数据读取:
select user_id,user_name from view_user_info_db_a ;
这时显示出来的数据才是正确的!
其实就是:select utl_raw.cast_to_raw('中华人民'),utl_raw.cast_to_varchar2('D6D0BBAAC8CBC3F1') from dual;
优点: 对JAVA程序来说是透明的,无所改动代码。
数据提取时,与客户端字符集无关
缺点: 增加数据库CPU开销
--经过钟MM的提示学习到了以下方法:
解决方法2 (在JAVA实现)
使用JAVA的两个函数来实现:getBytes() , new String()
先来看一下这两个函数:
. getBytes(charset)
这是java字符串处理的一个标准函数,其作用是将字符串所表示的字符按照charset编码,并以字节方式表示。
注意字符串在java内存中总是按unicode编码存储的。
比如"中文",正常情况下(即没有错误的时候)存储为"4e2d 6587",
如果charset为"gbk",则被编码为"d6d0 cec4",然后返回字节"d6 d0 ce c4"。
如果charset为"utf8"则最后是"e4 b8 ad e6 96 87"。
如果是"iso8859-1",则由于无法编码,最后返回 "3f 3f"(两个问号)。
. new String(charset)
这是java字符串处理的另一个标准函数,和上一个函数的作用相反,将字节数组按照charset编码进行组合识别,最后转换为unicode存储。
参考上述getBytes的例子,"gbk" 和"utf8"都可以得出正确的结果"4e2d 6587",但iso8859-1最后变成了"003f 003f"(两个问号)。
因为utf8可以用来表示/编码所有字符,所以new String( str.getBytes( "utf8" ), "utf8" ) === str,即完全可逆。
对于以上两个函数,我们可以有两种用法来解决这个问题:
方法 2.1
a) 无需关心客户端NLS_LANG的设置
b) 从数据库取出字符的二进制编码:
select user_id, utl_raw.cast_to_raw(user_name) user_name from user_info ;
c) 在java用其所 new String(username, 'GBK' ) 转成中文
d) 插入到目标库
方法 2.2 (推荐)
a) 将JAVA 客户端NLS_LANG设置为US7ASCII
b) 从数据库直接取出字段值
select user_id, user_name from user_info ;
(这时因为客户端和服务器的字符集一致,所以会得到正确的中文显示)
c) 将中文进行转码为GBK:
new String( user_name.getBytes( "gbk" ), "gbk" )
d) 得到正确的GBK中文编码插入到目标库
优点:代码完全由JAVA控制,无需作数据库变更,数据库的压力转移到了JAVA客户端.
注意:必须把客户端的字符集和服务器端的字符集设置成一样
DB-A 字符集:US7ASCII
DB-B 字符集:ZHS16GBK
需求: 从DB-A中将一个表的中文数据通过JAVA定时任务同步到DB-B.
DB-A库中表的信息如下:
CREATE TABLE USER_INFO (USER_ID number, USER_NAME varchar2(50));
如果用一般的方式来SELECT,和INSERT,不管客户端用什么样的字符集,数据到DB-B上肯定会显示乱码.
解决方法1 (在数据库实现)
解决思路:通过视图将数据转换成二进制数据,绕过字符集的转换,然后让目标库来读取.
1. 在DB-A库上创建视图:
create or replace view view_user_info
as
select user_id, utl_raw.cast_to_raw(user_name) user_name from user_info ;
2. 在DB-B库上创建视图:
create or replace view view_user_info_db_a
as
select user_id, utl_raw.cast_to_varchar2 (user_name) user_name from view_user_info@db_a;
3. 在DB-B库上进行数据读取:
select user_id,user_name from view_user_info_db_a ;
这时显示出来的数据才是正确的!
其实就是:select utl_raw.cast_to_raw('中华人民'),utl_raw.cast_to_varchar2('D6D0BBAAC8CBC3F1') from dual;
优点: 对JAVA程序来说是透明的,无所改动代码。
数据提取时,与客户端字符集无关
缺点: 增加数据库CPU开销
--经过钟MM的提示学习到了以下方法:
解决方法2 (在JAVA实现)
使用JAVA的两个函数来实现:getBytes() , new String()
先来看一下这两个函数:
. getBytes(charset)
这是java字符串处理的一个标准函数,其作用是将字符串所表示的字符按照charset编码,并以字节方式表示。
注意字符串在java内存中总是按unicode编码存储的。
比如"中文",正常情况下(即没有错误的时候)存储为"4e2d 6587",
如果charset为"gbk",则被编码为"d6d0 cec4",然后返回字节"d6 d0 ce c4"。
如果charset为"utf8"则最后是"e4 b8 ad e6 96 87"。
如果是"iso8859-1",则由于无法编码,最后返回 "3f 3f"(两个问号)。
. new String(charset)
这是java字符串处理的另一个标准函数,和上一个函数的作用相反,将字节数组按照charset编码进行组合识别,最后转换为unicode存储。
参考上述getBytes的例子,"gbk" 和"utf8"都可以得出正确的结果"4e2d 6587",但iso8859-1最后变成了"003f 003f"(两个问号)。
因为utf8可以用来表示/编码所有字符,所以new String( str.getBytes( "utf8" ), "utf8" ) === str,即完全可逆。
对于以上两个函数,我们可以有两种用法来解决这个问题:
方法 2.1
a) 无需关心客户端NLS_LANG的设置
b) 从数据库取出字符的二进制编码:
select user_id, utl_raw.cast_to_raw(user_name) user_name from user_info ;
c) 在java用其所 new String(username, 'GBK' ) 转成中文
d) 插入到目标库
方法 2.2 (推荐)
a) 将JAVA 客户端NLS_LANG设置为US7ASCII
b) 从数据库直接取出字段值
select user_id, user_name from user_info ;
(这时因为客户端和服务器的字符集一致,所以会得到正确的中文显示)
c) 将中文进行转码为GBK:
new String( user_name.getBytes( "gbk" ), "gbk" )
d) 得到正确的GBK中文编码插入到目标库
优点:代码完全由JAVA控制,无需作数据库变更,数据库的压力转移到了JAVA客户端.
注意:必须把客户端的字符集和服务器端的字符集设置成一样
发表评论
-
Oracle的left join中on和where的区别
2012-10-26 15:43 960Oracle的left join中on和where的区别 数 ... -
动态sql拼接单引号与 变量赋值
2012-06-21 10:09 3827if (lower(s_table)='gl_deta ... -
ora-00031:session marked for kill处理oracle中杀不掉的锁
2012-06-19 16:36 1042转: 一些ORACLE中的进程被杀掉后,状态被置为" ... -
使用DBLINK为远程数据库的用户表创建同义词
2012-06-19 14:39 9121、创建db_link create database l ... -
以字符串数组为输入参数的存储过程
2012-06-19 14:27 2725今天项目中需要用到存 ... -
函数的使用
2012-06-04 17:09 967create or replace function Fun_ ... -
Oracle中decode的使简单例子
2012-06-04 17:06 1462decode(字段,表达式1,表达式2,表达式。。。) 当,字 ... -
oracle触发器
2012-04-20 09:11 722表: A 字段:a, b, c 当修改a字段的值时触发 c字段 ... -
oracle的全文索引
2012-04-16 14:29 781已有几个项目组开始使 ... -
单独的plsql链接数据库
2011-10-14 16:03 895转的: plsql 可不可以 ... -
Oracle经验集锦
2011-09-24 13:32 6801.删除表空间 DROP ... -
Oracle分区表详解 .
2011-08-06 10:42 636一、Oracle分区简介 ORACLE的分区是一种处理超大型 ... -
利用 rowid 提升update性能 .
2011-08-04 23:52 1798能不能想办法 提升一下如下update语句的性能 UPDA ... -
oracle全文索引的简单配置
2011-08-04 23:49 9951.创建数据存储定义(Datastore),使用多列数据存储在 ... -
用java调用oracle存储过程总结
2011-08-04 23:45 6361、什么是存储过程。存 ... -
Oracle SCN详解
2011-08-04 23:38 600pre. Oracle中的SCN(system change ... -
oracle 数据库里查看表空间使用状况
2011-08-04 23:34 636oracle表空间的事情状况要经常查看,一般空闲比例过低的时候 ... -
采用全文索引解决模糊查询速度慢的问题
2011-08-04 23:31 749众所周知,使用 like 进行模糊查询速度极差,包括 like ... -
oracle9i在windows上的dataguard配置
2011-08-04 23:23 701主库:win2003 server ora9i(9.2.0.1 ... -
Rman duplicate数据库复制(单系统)
2011-08-04 23:22 643一、实验环境: 1. 虚拟机:VMware Ser ...
相关推荐
这两个函数在解决不同字符集数据库间的数据同步问题中扮演着非常重要的角色。 标签分析 本文的标签是“字符集”,这表明本文的核心主题是字符集问题。 部分内容分析 本文的部分内容部分介绍了解决不同字符集...
在数据库管理中,字符集(Character Set)是一个关键设置,它定义了系统能识别和处理的字符集合。字符集的选择直接影响到数据的存储、检索和跨语言环境的兼容性。本文档主要关注如何修改数据库的字符集,以适应不同...
在Oracle数据库管理中,字符集的设置至关重要,它直接影响到数据的存储、检索以及与之交互的准确性。本文将深入探讨Oracle数据库字符集的概念、重要性、修改过程及其潜在问题,特别是当尝试修改数据库字符集时遇到的...
2. **内部使用字符集**:数据库内部用来表示数据的字符集。 3. **客户端字符集**:客户端应用程序使用的字符集。 4. **NLS参数**:NLS(National Language Support)参数是Oracle提供的一组用于控制多语言支持行为的...
这四个环节的字符集不一致会触发字符集转换,可能导致不必要的数据损失。 2. NLS_LANG参数的影响 NLS_LANG是影响Oracle数据库字符集的最重要参数,它由三部分组成:LANGUAGE、TERRITORY和CHARACTERSET。其中,...
### MySQL两个数据库表之间的双向数据同步方案 #### 概述 本文档主要介绍了一种针对MySQL环境下两个数据库表之间的双向数据同步方案。该方案适用于需要保持两个不同位置或不同环境中数据库表数据一致性的场景,...
1. 数据库字符集与操作系统字符集不匹配:数据库系统和操作系统之间的字符集需要协调一致,否则在读写数据时,中文字符可能无法正确转换,导致乱码。 2. 数据库字符集与应用程序字符集不匹配:如果应用程序(如SQL*...
3. **创建新数据库**:考虑到Oracle官方文档不推荐直接修改现有数据库的字符集,建议创建一个新的数据库并使用期望的字符集。 #### 四、创建新数据库的具体步骤 1. **停止Oracle服务**: - 打开命令提示符,执行`...
Oracle数据库字符集是数据库系统中一个非常重要的概念,它决定了数据如何被编码和解码,影响着数据库中存储和检索的文本数据的正确性。在Oracle数据库中,字符集分为数据库字符集(Database Character Set)和国家...
2. **数据迁移**:如果数据库中的数据已经使用了不同的字符集,那么在修改字符集之前可能需要对数据进行转换或迁移。 3. **备份**:任何涉及到数据库的重大更改前都应该先做好数据备份,以防万一出现问题时能够快速...
数据库中的字符集设置不等于操作系统的字符集,数据库可以独立于操作系统来支持特定语言,即在英文操作系统中存储中文数据,在中文操作系统中存储日文数据。 2. Oracle核心字符集设置 在Oracle数据库中,核心字符集...
- 使用GBK字符集可能会占用更多存储空间,因为每个字符可能需要两个字节。在高数据量场景下,需要权衡存储成本和字符集需求。 10. **备份与恢复** - 备份和恢复过程中,字符集配置的正确传递是确保数据完整性的...
3. **MySQL数据库同步**:数据库同步是为了保持多个数据库实例间的数据一致性,这在分布式系统、灾备恢复、多数据中心部署等场景下尤为重要。MySQL提供了如Replication、Federated Engine等技术实现数据同步。 4. *...
MySQL数据库字符集与排序规则是数据库设计中的重要概念,它们直接影响到数据的存储、检索以及跨语言支持。字符集定义了数据库中字符的编码方式,而排序规则则规定了字符的比较和排序逻辑。 首先,字符集(Character...
3. **字符集转换**:当两个不同字符集的数据进行交互时,Oracle会自动进行字符集转换,但这种转换可能会导致数据损坏或丢失。 #### 二、修改Oracle字符集的必要性 - **数据兼容性**:当数据库需要支持多语言环境时...
### MySQL数据库字符集的问题研究 #### 一、MySQL字符集概述 MySQL数据库是瑞典MySQL AB公司开发的一款小型关系型数据库管理系统,因其速度快、易用性好、支持SQL、网络支持性好、可移植性好及费用低廉等特点,在...
字符集决定了数据库如何存储和显示字符,不匹配的字符集可能导致数据乱码,影响正常功能。以下是对这个问题的深入解析和解决方案。 首先,Oracle数据库默认的字符集可能会根据不同的操作系统和安装选项有所不同。...