一 预备知识
1，字符：字符是抽象的最小文本单位。它没有固定的形状（可能是一个字形），而且没有值。“A”是一个字符，“€”（德国、法国和许多其他欧洲国家通用货币的标志）也是一个字符。“中”“国”这是两个汉字字符。字符仅仅代表一个符号，没有任何实际值的意义。
2，字符集：字符集是字符的集合。例如，汉字字符是中国人最先发明的字符，在中文、日文、韩文和越南文的书写中使用。这也说明了字符和字符集之间的关系，字符组成字符集（iso8859-1，GB2312/GBK，unicode）。
3，代码点：字符集中的每个字符都被分配到一个“代码点”。每个代码点都有一个特定的唯一数值，称为标值。该标量值通常用十六进制表示。
4，代码单元： 在每种编码形式中，代码点被映射到一个或多个代码单元。“代码单元”是各个编码方式中的单个单元。代码单元的大小等效于特定编码方式的位数：
UTF-8 ：UTF-8 中的代码单元由 8 位组成；在 UTF-8 中，因为代码单元较小的缘故，每个代码点常常被映射到多个代码单元。代码点将被映射到一个、两个、三个或四个代码单元；
UTF-16 ：UTF-16 中的代码单元由 16 位组成；UTF-16 的代码单元大小是 8 位代码单元的两倍。所以，标量值小于 U+10000 的代码点被编码到单个代码单元中；
UTF-32：UTF-32 中的代码单元由 32 位组成； UTF-32 中使用的 32 位代码单元足够大，每个代码点都可编码为单个代码单元；
GB18030：GB18030 中的代码单元由 8 位组成；在 GB18030 中，因为代码单元较小的缘故，每个代码点常常被映射到多个代码单元。代码点将被映射到一个、两个或四个代码单元。
5，举例：
“中国北京香蕉是个大笨蛋”这是我定义的aka字符集；各字符对应代码点为：
北 00000001
京 00000010
香 10000001
蕉 10000010
是 10000100
个 10001000
大 10010000
笨 10100000
蛋 11000000
中 00000100
国 00001000
下面是我定义的 zixia 编码方案（8位），可以看到它的编码中表示了aka字符集的所有字符对应的 代码单元；
北 10000001
京 10000010
香 00000001
蕉 00000010
是 00000100
个 00001000
大 00010000
笨 00100000
蛋 01000000
中 10000100
国 10001000
所谓文本文件 就是我们按一定编码方式将二进制数据表示为对应的文本如 00000001000000100000010000001000000100000010000001000000这样的文件。我用一个支持 zixia编码和aka字符集的记事本打开，它就按照编码方案显示为 “香蕉是个大笨蛋 ”
如果我把这些字符按照GBK另存一个文件，那么则肯定不是这个，而是
1100111111100011 1011110110110110 1100101011000111 1011100011110110 1011010011110011 1011000110111111 1011010110110000 110100001010
二，字符集
1， 常用字符集分类
ASCII及其扩展字符集
作用：表语英语及西欧语言。
位数：ASCII是用7位表示的，能表示128个字符；其扩展使用8位表示，表示256个字符。
范围：ASCII从00到7F，扩展从00到FF。
ISO-8859-1字符集
作用：扩展ASCII，表示西欧、希腊语等。
位数：8位，
范围：从00到FF，兼容ASCII字符集。
GB2312字符集
作用：国家简体中文字符集，兼容ASCII。
位数：使用2个字节表示，能表示7445个符号，包括6763个汉字，几乎覆盖所有高频率汉字。
范围：高字节从A1到F7, 低字节从A1到FE。将高字节和低字节分别加上0XA0即可得到编码。
BIG5字符集
作用：统一繁体字编码。
位数：使用2个字节表示，表示13053个汉字。
范围：高字节从A1到F9，低字节从40到7E，A1到FE。
GBK字符集
作用：它是GB2312的扩展，加入对繁体字的支持，兼容GB2312。
位数：使用2个字节表示，可表示21886个字符。
范围：高字节从81到FE，低字节从40到FE。
GB18030字符集
作用：它解决了中文、日文、朝鲜语等的编码，兼容GBK。
位数：它采用变字节表示(1 ASCII，2，4字节)。可表示27484个文字。
范围：1字节从00到7F; 2字节高字节从81到FE，低字节从40到7E和80到FE；4字节第一三字节从81到FE，第二四字节从30到39。
UCS字符集
作用：国际标准 ISO 10646 定义了通用字符集 (Universal Character Set)。它是与UNICODE同类的组织，UCS-2和UNICODE兼容。
位数：它有UCS-2和UCS-4两种格式，分别是2字节和4字节。
范围：目前，UCS-4只是在UCS-2前面加了0×0000。
UNICODE字符集
作用：为世界650种语言进行统一编码，兼容ISO-8859-1。
位数：UNICODE字符集有多个编码方式，分别是UTF-8，UTF-16和UTF-32。
2 ，按所表示的文字分类
语言 字符集 正式名称
英语、西欧语 ASCII，ISO-8859-1 MBCS 多字节
简体中文 GB2312 MBCS 多字节
繁体中文 BIG5 MBCS 多字节
简繁中文 GBK MBCS 多字节
中文、日文及朝鲜语 GB18030 MBCS 多字节
各国语言 UNICODE，UCS DBCS 宽字节
三，编码
UTF-8：采用变长字节 (1 ASCII, 2 希腊字母, 3 汉字, 4 平面符号) 表示，网络传输, 即使错了一个字节，不影响其他字节，而双字节只要一个错了，其他也错了，具体如下：
如果只有一个字节则其最高二进制位为0；如果是多字节，其第一个字节从最高位开始，连续的二进制位值为1的个数决定了其编码的字节数，其余各字节均以10开头。UTF-8最多可用到6个字节。
UTF-16：采用2字节，Unicode中不同部分的字符都同样基于现有的标准。这是为了便于转换。从 0×0000到0×007F是ASCII字符，从0×0080到0×00FF是ISO-8859-1对ASCII的扩展。希腊字母表使用从0×0370到 0×03FF 的代码，斯拉夫语使用从0×0400到0×04FF的代码，美国使用从0×0530到0×058F的代码，希伯来语使用从0×0590到0×05FF的代码。中国、日本和韩国的象形文字（总称为CJK）占用了从0×3000到0×9FFF的代码；由于0×00在c语言及操作系统文件名等中有特殊意义，故很多情况下需要UTF-8编码保存文本，去掉这个0×00。举例如下：
UTF-16: 0×0080 = 0000 0000 1000 0000
UTF-8: 0xC280 = 1100 0010 1000 0000
UTF-32：采用4字节。
优缺点
UTF-8、UTF-16和UTF-32都可以表示有效编码空间 (U+000000-U+10FFFF) 内的所有Unicode字符。
使用UTF-8编码时ASCII字符只占1个字节，存储效率比较高，适用于拉丁字符较多的场合以节省空间。
对于大多数非拉丁字符（如中文和日文）来说，UTF-16所需存储空间最小，每个字符只占2个字节。
Windows NT内核是Unicode（UTF-16），采用UTF-16编码在调用系统API时无需转换，处理速度也比较快。
采用UTF-16和UTF-32会有Big Endian和Little Endian之分，而UTF-8则没有字节顺序问题，所以UTF-8适合传输和通信。
UTF-32采用4字节编码，一方面处理速度比较快，但另一方面也浪费了大量空间，影响传输速度，因而很少使用。
四，如何判断字符集
1，字节序
首先说一下字节序对编码的影响，字节序分为Big Endian字节序和Little Endian字节序。不同的处理器可能不一样。所以，传输时需要告诉处理器当时的编码字节序。对于前者而言，高位字节存在低地址，低字节存于高地址；后者相反。例如，0X03AB,
Big Endian字节序
0000: 0 3
0001: AB
Little Endian字节序是
0000: AB
0001: 0 3
2，编码识别
UNICODE，根据前几个字节可以判断UNICODE字符集的各种编码，叫做Byte Order Mask方法BOM：
UTF-8: EFBBBF (符合UTF-8格式，请看上面。但没有含义在UCS即UNICODE中)
UTF-16 Big Endian：FEFF (没有含义在UCS-2中)
UTF-16 Little Endian：FFFE (没有含义在UCS-2中)
UTF-32 Big Endian：0000FEFF (没有含义在UCS-4中)
UTF-32 Little Endian：FFFE0000 (没有含义在UCS-4中)
GB2312：高字节和低字节的第1位都是1。
BIG5，GBK&GB18030：高字节的第1位为1。操作系统有默认的编码，常为GBK，可以下载别的并升级。
通过判断高字节的第1位从而知道是ASCII或者汉字编码。
分享到：
相关推荐
c++中对中文乱码问题的解决方法，使用CChineseCode能进行UTF_8ToUnicode、UnicodeToUTF_8、UnicodeToGB2312、Gb2312ToUnicode、GB2312ToUTF_8、UTF_8ToGB2312之间的转换
内容概要：本文详细介绍了基于FPGA的电机控制系统设计方案，重点探讨了Verilog和Nios2软核的协同工作。系统通过将底层驱动（如编码器处理、坐标变换、SVPWM生成等）交给Verilog实现，确保实时性和高效性；同时，复杂的算法（如Park变换、故障保护等）则由Nios2处理。文中展示了多个具体实现细节，如四倍频计数、定点数处理、查表法加速、软硬件交互协议等。此外，还讨论了性能优化方法，如过调制处理、五段式PWM波形生成以及故障保护机制。 适合人群：具备一定FPGA和嵌入式系统基础知识的研发人员，尤其是从事电机控制领域的工程师。 使用场景及目标：适用于希望深入了解FPGA在电机控制中的应用，掌握软硬件协同设计方法，提高系统实时性和效率的技术人员。目标是通过学习本方案，能够独立设计并实现高效的电机控制系统。 其他说明：本文不仅提供了详细的代码片段和技术细节，还分享了许多实践经验，如调试技巧、常见错误及其解决办法等。这对于实际工程项目非常有帮助。
1.版本：matlab2014/2019a/2024a 2.附赠案例数据可直接运行matlab程序。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
计算机数控(CNC)装置.pdf
内容概要：本文详细介绍了使用西门子PLC和TiA博途软件构建冷热水恒压供水系统的具体方法和技术要点。主要内容涵盖变频器控制、模拟量输入输出处理、温度控制、流量计算控制及配方控制等方面。文中不仅提供了具体的编程实例，如LAD和SCL语言的应用，还分享了许多实用的经验和技巧，例如模拟量处理中的滤波方法、PID控制的优化策略、流量计算的高精度算法等。此外，针对实际应用中的常见问题，如信号干扰和参数整定，作者也给出了有效的解决方案。 适合人群：从事自动化控制系统开发的技术人员，尤其是对西门子PLC和TiA博途有一定了解并希望深入掌握冷热水恒压供水系统设计的专业人士。 使用场景及目标：适用于工业环境中需要精确控制水压、温度和流量的冷热水供应系统的设计与维护。主要目标是帮助工程师理解和实施基于西门子PLC和TiA博途的冷热水恒压供水系统，提高系统的稳定性和效率。 其他说明：文中提到的实际案例和编程代码片段对于初学者来说非常有价值，能够加速学习进程并提升实际操作能力。同时，关于硬件配置的选择建议也为项目规划提供了指导。
内容概要：本文详细介绍了基于PLC（可编程逻辑控制器）的自动蜂窝煤生产线中五条传送带的控制系统设计。主要内容涵盖IO分配、梯形图程序编写、接线图原理图绘制以及组态画面的设计。通过合理的IO分配，确保各个输入输出点正确连接；利用梯形图程序实现传送带的启动、停止及联动控制；接线图确保电气连接的安全性和可靠性；组态画面提供人机交互界面，便于操作员远程监控和操作。此外，还分享了一些实际调试中的经验和教训，如传感器安装位置、硬件接线注意事项等。 适合人群：从事自动化控制领域的工程师和技术人员，尤其是对PLC编程和工业自动化感兴趣的读者。 使用场景及目标：适用于需要设计和实施自动化生产线的企业和个人。目标是提高生产线的自动化程度，减少人工干预，提升生产效率和产品质量。 其他说明：文中提到的具体实例和代码片段有助于读者更好地理解和掌握相关技术和方法。同时，强调了硬件和软件相结合的重要性，提供了实用的调试技巧和经验总结。
内容概要：本文详细介绍了OpenScenario场景仿真的结构及其应用，特别是通过具体的XML代码片段解释了各个参数的作用和配置方法。文中提到的思维导图帮助理解复杂的参数关系，如Storyboard、Act、ManeuverGroup等层级结构，以及它们之间的相互作用。同时，文章提供了多个实用案例，如跟车急刹再加速、变道场景等，展示了如何利用这些参数创建逼真的驾驶场景。此外，还特别强调了一些常见的错误和解决方法，如条件触发器的误用、坐标系转换等问题。 适用人群：从事自动驾驶仿真研究的技术人员，尤其是对OpenScenario标准有一定了解并希望深入掌握其应用场景的人。 使用场景及目标：适用于需要精确控制交通参与者行为的自动驾驶仿真项目，旨在提高开发者对OpenScenario的理解和运用能力，减少开发过程中常见错误的发生。 其他说明：文章不仅提供了理论指导，还包括大量实践经验分享，如调试技巧、参数优化等，有助于快速解决问题并提升工作效率。
内容概要：本文详细介绍了30kW、1000rpm、线电压380V的自启动永磁同步电机的6极72槽设计方案及其性能优化过程。首先，通过RMxprt进行快速建模，设定基本参数如电机类型、额定功率、速度、电压、极数和槽数等。接着，深入探讨了定子冲片材料选择、转子结构设计、绕组配置以及磁密波形分析等方面的技术细节。文中特别强调了双层绕组设计、短距跨距选择、磁密波形优化、反电势波形验证等关键技术手段的应用。此外，还讨论了启动转矩、效率曲线、温升控制等方面的优化措施。最终，通过一系列仿真和实测数据分析，展示了该设计方案在提高效率、降低谐波失真、优化启动性能等方面的显著成果。 适合人群：从事电机设计、电磁仿真、电力电子领域的工程师和技术人员。 使用场景及目标：适用于希望深入了解永磁同步电机设计原理及优化方法的专业人士，旨在为类似项目的开发提供参考和借鉴。 其他说明：文章不仅提供了详细的参数设置和代码示例，还分享了许多实践经验，如材料选择、仿真技巧、故障排除等，有助于读者更好地理解和应用相关技术。
内容概要：本文详细介绍了如何使用S7-1200 PLC和WinCC搭建一个完整的燃油锅炉自动控制系统。首先明确了系统的IO分配，包括数字量输入输出和模拟量输入输出的具体连接方式。接着深入讲解了梯形图编程的关键逻辑，如鼓风机和燃油泵的联锁控制、温度PID调节等。对于接线部分，强调了强电弱电线缆分离以及使用屏蔽线的重要性。WinCC组态方面，则着重于创建直观的操作界面和有效的报警管理。此外，还分享了一些调试技巧和常见问题的解决方案。 适合人群：从事工业自动化领域的工程师和技术人员，尤其是对PLC编程和SCADA系统有一定了解的人群。 使用场景及目标：适用于需要构建高效稳定的燃油锅炉控制系统的工业环境，旨在提高系统的可靠性和安全性，降低故障率并提升工作效率。 其他说明：文中提供了丰富的实践经验，包括具体的硬件选型、详细的程序代码片段以及实用的故障排查方法，有助于读者快速掌握相关技能并在实际工作中应用。
内容概要：本文详细探讨了逆变器输出纹波电流的来源及其对系统稳定性的影响，并提出了一种基于变开关频率PWM控制策略的解决方案。文中首先分析了纹波电流产生的原因，包括开关元件的导通关断、电感电流的非理想特性和电源电压波动。接着介绍了变开关频率PWM控制的基本原理，通过实时调整开关频率来优化纹波电流和开关损耗之间的平衡。随后，利用傅里叶变换建立了纹波电流预测模型，并通过Simulink仿真模型进行了验证。仿真结果显示，变开关频率控制能够显著减小纹波电流的幅值，提高系统的稳定性和效率。此外，文章还提供了具体的MATLAB/Simulink建模步骤以及一些优化建议，如提高开关频率上限、采用低纹波PWM算法和增加电感电流反馈。 适合人群：从事电力电子系统设计和优化的研究人员和技术人员，尤其是关注逆变器性能提升的专业人士。 使用场景及目标：适用于需要优化逆变器输出质量、提高系统稳定性和效率的应用场合。目标是通过变开关频率PWM控制策略，解决传统固定开关频率控制中存在的纹波电流大、效率低等问题。 其他说明：文章不仅提供了理论分析，还包括详细的仿真建模指导和优化建议，有助于读者更好地理解和应用相关技术。同时，文中提到的一些实用技巧和注意事项对于实际工程应用具有重要参考价值。
内容概要：本文详细介绍了平衡树的基本概念、发展历程、不同类型（如AVL树、红黑树、2-3树）的特点和操作原理。文中解释了平衡树如何通过自平衡机制克服普通二叉搜索树在极端情况下的性能瓶颈，确保高效的数据存储和检索。此外，还探讨了平衡树在数据库索引和搜索引擎等实际应用中的重要作用，并对其优缺点进行了全面分析。 适合人群：计算机科学专业学生、软件工程师、算法爱好者等对数据结构有兴趣的人群。 使用场景及目标：帮助读者理解平衡树的工作原理，掌握不同类型平衡树的特点和操作方法，提高在实际项目中选择和应用适当数据结构的能力。 其他说明：本文不仅涵盖了理论知识，还包括具体的应用案例和技术细节，旨在为读者提供全面的学习资料。
计算机三级网络技术 机试100题和答案.pdf
内容概要：本文详细介绍了将YOLOv5模型集成到LabVIEW环境中进行目标检测的方法。作者通过C++封装了一个基于ONNX Runtime的DLL，实现了YOLOv5模型的高效推理，并支持多模型并行处理。文中涵盖了从模型初始化、视频流处理、内存管理和模型热替换等多个方面的具体实现细节和技术要点。此外，还提供了性能测试数据以及实际应用场景的经验分享。 适合人群：熟悉LabVIEW编程，有一定C++基础，从事工业自动化或计算机视觉相关领域的工程师和技术人员。 使用场景及目标：适用于需要在LabVIEW环境下进行高效目标检测的应用场景，如工业质检、安防监控等。主要目标是提高目标检测的速度和准确性，降低开发难度，提升系统的灵活性和扩展性。 其他说明：文中提到的技术方案已在实际项目中得到验证，能够稳定运行于7x24小时的工作环境。GitHub上有完整的开源代码可供参考。
逻辑回归ex2-logistic-regression-ex2data1
内容概要：本文详细介绍了使用MATLAB/Simulink搭建单相高功率因数整流器仿真的全过程。作者通过单周期控制（OCC）方法，使电感电流平均值跟随电压波形，从而提高功率因数。文中涵盖了控制算法的设计、主电路参数的选择、波形采集与分析以及常见问题的解决方案。特别是在控制算法方面，通过动态调整占空比，确保系统的稳定性，并通过实验验证了THD低于5%，功率因数达到0.98以上的优异性能。 适合人群：电力电子工程师、科研人员、高校师生等对高功率因数整流器仿真感兴趣的读者。 使用场景及目标：适用于研究和开发高效电源转换设备的技术人员，旨在通过仿真手段优化整流器性能，降低谐波失真，提高功率因数。 其他说明：文章提供了详细的代码片段和调试经验，帮助读者更好地理解和应用单周期控制技术。同时提醒读者注意仿真与实际硬件之间的差异，强调理论计算与实际调试相结合的重要性。
计算机设备采购合同.pdf
计算机三级网络技术考试资料大全.pdf
内容概要：本文详细介绍了如何在Simulink中构建质子交换膜燃料电池（PEMFC）和固体氧化物燃料电池（SOFC）的仿真模型及其控制策略。主要内容涵盖各子系统的建模方法，如气体流道、温度、电压、膜水合度等模块的具体实现细节；探讨了几种先进的控制算法，包括模糊PID、自抗扰控制（ADRC）、RBF神经网络PID以及它们的应用场景和优势；并通过具体案例展示了不同控制器在处理复杂工况时的表现差异。此外，文中还分享了一些实用技巧，如避免模型参数调校中的常见错误、提高仿真的稳定性和准确性。 适合人群：从事燃料电池研究与开发的专业人士，尤其是具有一定Matlab/Simulink基础的研究人员和技术工程师。 使用场景及目标：帮助读者掌握燃料电池系统建模的基本流程和技术要点，理解各种控制算法的特点及其应用场景，从而能够独立完成相关项目的开发与优化工作。 其他说明：文章提供了大量MATLAB代码片段作为实例支持，便于读者理解和实践。同时强调了理论联系实际的重要性，在介绍每种技术时均结合具体的实验数据进行分析讨论。
IMX662 sensor板原理图.dsn参考资料
内容概要：本文详细介绍了线性表及其顺序表示的概念、原理和操作。线性表作为一种基础数据结构，通过顺序表示将元素按顺序存储在连续的内存空间中。文中解释了顺序表示的定义与原理，探讨了顺序表与数组的关系，并详细描述了顺序表的基本操作，包括初始化、插入、删除和查找。此外，文章分析了顺序表的优点和局限性，并讨论了其在数据库索引、图像处理和嵌入式系统中的实际应用。最后，对比了顺序表和链表的性能特点，帮助读者根据具体需求选择合适的数据结构。 适合人群：计算机科学专业的学生、软件开发人员以及对数据结构感兴趣的自学者。 使用场景及目标：①理解线性表顺序表示的原理和实现；②掌握顺序表的基本操作及其时间复杂度；③了解顺序表在实际应用中的优势和局限性；④学会根据应用场景选择合适的数据结构。 其他说明：本文不仅提供了理论知识，还附带了具体的代码实现，有助于读者更好地理解和实践线性表的相关概念和技术。