`
gaojingsong
  • 浏览: 1197047 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
文章分类
社区版块
存档分类
最新评论

【纠错算法】

阅读更多

纠错算法(Error correction algorithm)是建立在概率统计的基础上的:出现2个差错的概率远小于出现1个差错的概率,而出现3个差错的概率又远小于出现2个差错的概率。从而有理由认为:当接收到的代码是一个非法的代码时,它的正确代码应该是在逻辑空间中离它最近的有效代码。

 

工作原理

汉明码

如果某种编码的合法代码之间的最小码距为1(所有的顺序编码都是如此),显然没有检错能力,更没有纠错能力。要想使得其具有纠错能力,必须进行改造,或者按某种纠错码格式重新编码,或者在原编码的基础上附加一部分代码,使其满足纠错码的条件。后一种方法比较方便,只是在发送时临时附加一部分代码,接收端利用它进行纠错处理后就舍弃,使原代码部分维持不变,汉明码就是这一类型的纠错码。

 

检二纠一码

包含4位有效信息的汉明码只能发现并纠正一个差错,如果出现两个差错,就会被它强行“纠正”成另外一个合法代码,造成不被发现的错误。例如发方将十六进制数6按7位汉明码66H发出,在接收过程中如果出现两个差错而变成60H,经纠错处理使得到68H,还原后就成为十六进制数8,这就产生了错误。能否进一步提高编码的性能,使它在出现两个差错时能够及时发现而不乱加纠正呢?根据检错理论,只要将有效编码之前的最小码距加大到4就可以达到这个目的,这就是“检二纠一码”。

7位汉明码在实际使用中是用1字节来表示的,如果把浪费了的1位也利用起来,无疑会进一步提供抗干扰性能。

要想在不加大码距的前提下,纠正连续多位差错,提供抵抗突发干扰的能力,方法就是将编码后的汉明码重新进行组织排列。以16位的汉明码为例,把11字节的数据编码为16字节的汉明码后再按高低字节分成两组。把每组字节8个汉明码的第1位分别取出,组成1字节;然后再把这8字节吗的第2位取出,组成第2字节;依此类推,将这组8字节汉明码处理完毕,得到新的8字节编码。只要在纠错前把受干扰的编码恢复原来正常的排列顺序,就可通过计算校验码完成差错的定位及纠错

 

 

 常见的英文单词纠错法有:,主要有误拼词典法、词形距离法、最小编辑距离法、相似键法、骨架键法、N-gram法、基于规则的技术、词典及神经网络技术。

(1)误拼字典法。收集大规模真实文本中拼写出错的英文单词并给出相应的正确拼写,建造一个无歧义的误拼字典。在进行英文单词拼写检查时,查找误拼字典,如命中,则说明该单词拼写有误,该词的正确拼写字段为纠错建议。该方法的特点是侦错和纠错一体化,效率高。但英文拼写错误具有随机性,很难保证误拼字典的无歧义性和全面性,因此查准率低、校对效果差。

(2)词形距离法。这是一种基于最大相似度和最小串间距离的英文校对法。其核心思想是构造单词的似然性函数,如该单词在词典中,则单词拼写正确;否则,按照似然性函数,在词典中找到一个与误拼单词最相似的词作为纠错候选词。该方法的特点是节省存储空间,能反映一定的常见拼写错误统计规律,是一种模糊校对法。

(3)最小编辑距离法。通过计算误拼字符串与词典中某个词间的最小编辑距离来确定纠错候选词。所谓最小编辑距离是指将一个词串转换为另一个词串所需的最少的编辑操作次数(编辑操作是指插入、删除、易位和替换等)。还有人提出了反向最小编辑距离法,这种方法首先对每个可能的单个错误进行交换排列,生成一个候选集,然后,通过查词典看哪些是有

效的单词,并将这些有效的单词作为误拼串的纠错建议。

(4)相似键法。相似键技术是将每个字符串与一个键相对应。使那些拼写相似的字符串具有相同或相似的键。当计算出某个误拼字符串的键值之后,它将给出一个指针。指向所有与该误拼字符串相似的单词,并将它们作为给误拼字符串的纠错建议。

(5)骨架键法。通过构建骨架键词典,在英文单词出现错误时,先抽取出该错误单词的骨架键,然后再去查骨架键词典,将词典中与该单词具有相同骨架键的正确单词作为该单词的纠错建议。

(6)N-gram法。基于n元文法,通过对大规模英文文本的统计得到单词与单词问的转移概率矩阵。当检测到某英文单词不在词典中时。查转移概率矩阵,取转移概率大于某给定阈值的单词为纠错建议。

(7)基于规则的技术。利用规则的形式将通常的拼写错误模式进行表示,这些规则可用来将拼写错误蛮换为有效的单词。对于一个误拼字符串,应用所有合适的规则从词典中找到一些与之对应的单词作为结果,并对每个结果根据事先赋予生成它的规则的概率估计计算一个数值,根据这个数值对所有候选结果排序。

0
0
分享到:
评论

相关推荐

    RS(里德索罗门)纠错算法

    RS纠错算法 RS(里德索罗门)纠错算法是一种常用的纠错编码技术,广泛应用于数据存储和传输中。下面将对RS纠错算法的原理、计算过程、相关知识进行详细介绍,并结合RS(11,4)进行举例。 一、GF(2m)域 在RS编码...

    RS编码和纠错算法.pdf_torn999_rs_

    《RS编码和纠错算法》是Reed Solomon在通信与数据存储领域的一项开创性工作,它在1960年由Golay和Reed Solomon等人提出,是错误控制编码中的一个重要分支。RS编码是一种非线性的分组码,以其强大的纠错能力和高效的...

    RS编码和纠错算法

    ### RS编码和纠错算法 #### 1. 伽罗华域(GF)基础 ##### 1.1 GF(2^m)域的概念 在深入探讨RS编码及其纠错算法之前,我们首先需要理解它所依赖的基础数学概念——伽罗华域(Galois Field, 简称GF)。RS编码主要在GF...

    (零C币下载)ECC纠错算法与实现.pptx

    综上所述,ECC纠错算法是通过增加数据的冗余度来提高数据存储和传输的准确性,通过列校验和行校验的结合,能够在发现错误时进行修正,极大地提升了闪存设备的性能和数据安全性。在硬件实现中,通常采用Verilog等语言...

    RS.zip_C++ 纠错算法

    在IT领域,纠错算法是数据通信和存储系统中不可或缺的一部分,它们用于检测并纠正传输或存储过程中可能出现的错误。在本案例中,我们关注的是一个名为"RS.zip"的压缩包,其中包含了一个C++实现的RS(Reed-Solomon)...

    一种在网络通信中自动纠错算法的研究

    ### 一种在网络通信中自动纠错算法的研究 #### 一、差错的概念与产生 在计算机网络通信中,数据传输过程中可能会出现数据不一致的情况,这种现象被称为“差错”。差错控制是确保数据准确无损传输的关键技术之一。...

    基于Python的中文内容纠错算法-课程设计

    本项目是基于 Python 的中文文本内容纠错算法,基于jieba分词和中文词典技术实现。 中文文本纠错是针对中文文本拼写错误进行检测与纠正的一项工作,中文的文本纠错,应用场景很多,诸如输入法纠错、输入预测、ASR ...

    二维码RS数据纠错算法

    二维码RS数据纠错算法是确保二维码在受到一定程度的损坏后仍能正确解码的关键技术。 RS(Reed-Solomon)纠错编码是一种非线性的分组码,由Reed和Solomon在1960年提出,主要用于容错和数据恢复。在二维码中,RS编码...

    RS编码和纠错算法.docx

    RS 编码和纠错算法 RS 编码和纠错算法是数据传输中非常重要的一种技术,主要用来检测和纠正数据传输中的错误。在此,我们将详细介绍 RS 编码和纠错算法的原理和实现方法。 什么是 RS 编码? RS 编码(Reed-...

    杰林码信道纠错算法(e=10)BPSK-AWGN信道纠错V1.10.0.exe

    本次发布的是杰林码信道检错优化版本,提高了纠错效率,当前的demo是针对BPSK-AWGN信道的仿真纠错程序。根据王杰林发明的基础理论算法编写的程序,本代码是基于e=10的纠错demo。

    一种基于小波变换的数据位迭代纠错算法设计与Matlab实现.pdf

    本篇论文所研究的是一种基于小波变换的数据位迭代纠错算法,其目的在于提升数据处理系统中数据流的位纠错精度,从而提高数据纠错质量。 文章首先指出了传统图像数据处理系统中的问题,即数据流中位出错问题的存在,...

    一种基于小波变换的数据位迭代纠错算法设计与Matlab实现.rar

    数据位迭代纠错算法是通信和信息处理领域中的一个重要技术,其目标是检测并纠正传输或存储过程中出现的错误。在本资源"一种基于小波变换的数据位迭代纠错算法设计与Matlab实现.rar"中,作者提供了对这种特殊算法的...

    存储系统中的芯片纠错算法研究与设计.pdf

    其中,“存储器”是指存储数据的物理介质,“纠错编码”是用于实现错误检测和纠正的一系列算法和技术,“2冗余b邻接”是指研究中所提出的特定纠错码技术,“芯片纠错”则是指纠错算法在芯片级别的应用。通过这些...

    基于深度学习技术的语法纠错算法模型构建分析.pdf

    在分析《基于深度学习技术的语法纠错算法模型构建分析.pdf》这篇专业文献之前,首先需要指出,文档中出现的OCR扫描错误和识别问题对阅读理解造成了一定的困扰。尽管如此,我们仍然可以从中提炼出丰富的专业知识点。...

    面向电力巡检语音指令识别后的文本纠错算法.pdf

    电力巡检语音指令识别后的文本纠错算法是电力行业中一项重要的技术应用,特别是在智能电网和人工智能技术日益发展的背景下。传统的电力巡检方式效率低下,而通过语音人机交互技术可以提高巡检效率,减少人为错误。...

    行业分类-设备装置-基于PCM反转纠错算法的高效数据写入方法.zip

    本文将深入探讨基于PCM反转纠错算法的高效数据写入方法及其在行业分类中的应用。 PCM反转纠错算法是一种在PCM编码基础上增加纠错能力的方法。在数据写入过程中,它通过添加冗余信息来检测和纠正可能出现的错误。...

    汉明码纠错算法介绍_图文.doc

    汉明码纠错算法介绍 汉明码纠错算法是线性调试码的一种,用于侦测和更正单一比特错误。它由理查德·卫斯里·汉明命名,以其名字命名的汉明码。汉明码在传输的消息流中插入验证码,以侦测并更正单一比特错误。 一、...

    基于深度学习的语法纠错算法建模研究.pdf

    本篇文章主要探讨了基于深度学习的语法纠错算法建模研究,具体来说,是对基础seq2seq深度学习算法在语法纠错准确率和召回率方面存在不足的改善策略研究。seq2seq(Encoder-Decoder)模型在自然语言处理(NLP)领域有...

Global site tag (gtag.js) - Google Analytics