`

基础概念

阅读更多
基础概念


一、基础概念

概念英文说明其他
比特bit数据传输大多以比特为单位二进制位:0或1
字节Byte数据存储以字节为单位1Byte = 8 bit
字符Character计算机中使用的文字和符号比如:1、2、3、A、B、C
字符集Charset是一个系统支持的所有抽象字符的集合字符是各种文字和符号的总称,包括各国家文字、标点符号、图形符号、数字等
字符编码Character Encoding将符号转换为计算机可以接受的数字系统的数,称为数字代码-
编码规则-将「码位」转换为字节序列的规则(编码/解码 可以理解为 加密/解密 的过程)-
代码点Code Point码位 / 码点是指一个编码表中的某个字符对应的代码值,也就是Unicode编码表中每个字符对应的数值;为每一个「字符」分配一个唯一的 ID
代码单元Code Unit在UTF-16中的基本多语言级别中,每一个字符用16位表示,通常被称为代码单元Java中Character采用UTF-16编码,占两字节,即一个字符,可表示一个汉字
ASCIIAmerican Standard Code for Information Interchange美国信息互换标准代码ASCII码使用7bit表示一个字符,共128个字符;0表示空,1~32 控制码;33~127 字母、数字;
ISO-8859-1-ASCII基础上扩展用8bit表示1个字符,共256个 字符;128~255 扩展编码
GB2312-在ASCII基础上扩展;一个小于127的字符的意义与原来相同,即ASCII;两个大于127的字符连在一起时,就表示一个汉字,前面的一个字节(他称之为高字节)从0xA1用到0xF7,后面一个字节(低字节)从0xA1到0xFE半角:ASCII中即0~127的字符;全角:在 ASCII 里本来就有的数字、标点、字母都统统重新编了两个字节长的编码
GBK-在GB2312基础上扩展;第一个字节是大于127就固定表示这是一个汉字的开始,不管后面跟的是不是扩展字GBK包含GB2312
GB18030-在GBK基础上扩展,与GBK基本兼容包含少数民族文字
BIG5-Big5码是一套双字节字符集,使用了双八码存储方法,以两个字节来安放一个字。第一个字节称为"高位字节",第二个字节称为"低位字节"。"高位字节"使用了0x81-0xFE,"低位字节"使用了0x40-0x7E,及0xA1-0xFE繁体字字符集
DBCSDouble Byte Charecter Set双字节字符集;GB2312/GBK/GB18030统称两字节长的汉字字符和一字节长的英文字符并存于同一套编码方案里
UnicodeUniversal Multiple-Octet Coded Character Set,简称UCS规定用16位即2字节表示所有字符;原ASCII中的半角字符因只占1字节,扩展后高位字节为0是一种字符集
通用字符集Universal Character Set,UCS由ISO制定的ISO 10646(或称ISO/IEC 10646)标准所定义的标准字符集。历史上存在两个独立的尝试创立单一字符集的组织,即国际标准化组织(ISO)和多语言软件制造商组成的统一码联盟-
UCS-2Universal Character Set coded in 2 octetsUCS-2是用两个字节来表示代码点其取值范围为 U+0000~U+FFFF
UCS-4Universal Character Set coded in 4 octetsUCS-2是用四个字节来表示代码点范围为 U+00000000~U+7FFFFFFF,其中 U+00000000~U+0000FFFF和UCS-2是一样的
UTFUCS Transfer FormatUnicode传输标准,每次传输的比特数规定存储方式
UTF-8-每次8个位传输数据是一种字符编码方案,变长的编码方式,使用1~4个字节表示一个符号,根据不同的符号而变化字节长度
UTF-16-每次16个位传输数据是一种字符编码方案,两个字节来表示一个代码点
UTF-16BOMBOM(Byte Order Mark)文件开头需要通过字符标明当前是大头顺序or小头顺序FFFE 小头,FEFF大头,与UCS-2完全对应
UTF-16BEBig Endian大头顺序,即高位在前,低位在后-
UTF-16LELittle Endian小头顺序,即低位在前,高位在后-
UTF-32-每次32位传输数据是一种字符编码方案,用四个字节表示代码点,与UCS-4完全对应



博文参考:
Unicode 和 UTF-8 有何区别?
Unicode详解(UCS-2,UCS-4,UTF-8,UTF-16,UTF-32)

二、字符与字节在不同编码格式下的对应
单位:字节
编码格式英文数字汉字半角标点全角标点
ASCII1212
GB23121212
UTF-81313
Unicode2222
UTF-162222
UTF-324444


博客参考:
字符与字节有什么区别

三、Unicode

1.Little endian和Big endian
第一个字节在前,Big endian
第二个字节在前,Little endian

参考博客:
http://blog.csdn.net/lcfeng1982/article/details/6830584
http://blog.csdn.net/tianjf0514/article/details/7854624

2.UTF-16 UTF16BE UTF16LE UTF16BOM
“ABC”这三个字符用各种方式编码后的结果如下:
UTF-16BE 00 41 00 42 00 43
UTF-16LE 41 00 42 00 43 00
UTF-16(Big Endian) FE FF 00 41 00 42 00 43
UTF-16(Little Endian) FF FE 41 00 42 00 43 00
UTF-16(不带BOM) 00 41 00 42 00 43

四、

博文参考:
http://bbs.csdn.net/topics/270062448




分享到:
评论

相关推荐

    概率论基本概念(英文版)柯尔莫哥洛夫

    在《概率论基本概念》中,柯尔莫哥洛夫试图将概率论的基础概念融入现代数学的普遍概念之中。在此之前,概率论的概念被认为是非常特殊的。然而,随着勒贝格在测度和积分理论方面的研究发表之后,集合的测度与事件的...

    电路的基本概念和基本定律 哈工程

    哈工程的电工技术课程在其第一章就深入探讨了电路的基本概念和基本定律,为学生构建起学习电气工程知识的坚实平台。 电路是一个系统,它不仅涉及电能的传输和转换,还包括信号的传递处理。电路由电源、负载和连接...

    物理学基本概念和基本定律溯源.pdf

    ### 物理学基本概念和基本定律溯源 #### 核心知识点概述 1. **物理学史在教学中的应用** - 引入物理学史能够提升教学质量,并有助于学生更深刻地理解物理概念。 - 教学中应恰当融入历史背景,以辅助而非主导课程...

    计算机网络基本概念之

    鉴于计算机网络的重要性,大连理工大学的谢希仁教授专门开设了一门课程,深入浅出地介绍了计算机网络的基本概念。这门课程的课件使用了Office XP进行演示,于2003年完成,至今仍对学习者具有极大的参考价值。 首先...

    控制理论导论:从基本概念到研究前沿

    这些理论分支不仅基础性、深入性、严谨性与前沿性兼具,同时也强调从基本概念出发,进行详尽的论述。 控制理论的研究与发展不仅推动了技术的进步,而且也对各类复杂系统的建模、分析和控制提出了新挑战。在实践中,...

    C语言算法基础、基本概念及程序设计

    本书共10章,分别介绍了C语言的算法基础、基本概念和如何利用C语言进行程序设计。通过大量的实例介绍了C语言的精华,特别针对目前C语言的发展,精心策划了C语言的综合应用、图形与动画的设计、音乐的演奏等。 从...

    通信网基本概念及其主体结构 PPT

    改PPT是关于《通信网基本概念及其主体结构》一书的

    数理统计——基本概念及专题-李泽慧等译

    《数理统计习题教程(上下)》为《数理统计——基本概念及专题》的配套习题解答。主要内容包括概率论中的一些课题、统计模型、估计方法、估计的比较——最优化理论、从估计到置信区间和假设检验、最优化检验与置信区间...

    信号与系统基础概念.rar

    系统响应是系统理论的重要组成部分,零输入响应(ZIR)、零状态响应(ZSR)和全响应(FR)是分析线性时不变系统动态特性的三个基本概念。系统稳定性是另一个关键问题,Bode图和Nyquist图是判断系统稳定性的常用方法...

    第二章 第二节:阿里云物联网平台基础概念讲解.pdf

    基于STM32节点和阿里云IoT平台 的物联网应用开发 系列课程 第二章 阿里云IoT平台介绍 课程内容下载、观看 • 视频观看:AI电堂、阿里云大学IoT课堂 ...• 第二节:物联网平台基础概念讲解 • 介绍设备与平台相关概念

    计算机网络管理的基本概念

    计算机网络管理的基本概念 计算机基础 数据通信 局域网

    ERP的基本概念 ERP的基本概念

    ERP的基本概念 ERP的基本概念 ERP的基本概念 ERP的基本概念 ERP的基本概念 ERP的基本概念

    电路基本概念与定律(电路分析基础)

    因此,对于电路基本概念与定律的深入理解,是电子工程及相关领域的专业人员必备的基础知识。本文将对电路的基本定义、分类、模型以及电路分析中的关键定律进行详细阐述,为电子技术的学习与应用打下坚实的基础。 ...

    D8_1基本概念1

    第八章第一节“D8_1基本概念1”对多元函数微分学的多个基本概念进行阐述,为后续深入学习多元微积分打下坚实的基础。 在多元函数微分学中,一个核心概念是“区域”。区域是欧几里得空间中的一个子集,可以是开放的...

    模拟电子技术基础概念.doc

    本文将系统性地探讨模拟电子技术的基本概念,深入理解这些概念将有助于我们更好地掌握电子设备的设计与应用。 首先,信号的类型是模拟电子技术研究的起点。模拟信号和数字信号是电子通信中两种基本的信号形式。模拟...

    图像处理基础概念.7z

    1. **数字图像的基本概念** - 图像类型:位图(Bitmap)和矢量图(Vector),其中数字图像通常是指位图,由像素构成。 - 像素:图像的基本组成单元,每个像素有自己的颜色和亮度值。 - 图像分辨率:图像的细节...

    第一章电路的基本概念和基本定律.doc

    本章首先介绍了电路模型的基本概念,阐述了其作为实际电路抽象化后的理想化模型的重要性,为后续的电路分析打下了坚实的基础。 电路模型的构建涉及了多个基础概念,包括电路的结构调整和电路模型功能。电路模型的...

    讨论数据库管理系统中查询处理和事务管理的基本概念和基础知识

    数据库管理系统(DBMS)是现代信息技术的核心组成部分,它负责存储、检索、更新和管理大量数据。在DBMS中,查询处理和事务管理是两个至关重要的功能,它们确保了...以下是事务管理的基本概念: 事务:事务是一组操作序

Global site tag (gtag.js) - Google Analytics