编码基本知识:
<o:p>
最早的编码是iso8859-1,和ascii编码相似。但为了方便表示各种各样的语言,逐渐出现了很多编码,重要的有如下几个:
<o:p>
1. iso8859-1
<o:p>
属于单字节编码,最多能表示的字符范围是0-255,应用于英文系列。比如,字母a的编码为0x61=97。
<o:p>
很明显,iso8859-1表示的字符范围很窄,无法表示中文字符。但是,由于是单字节编码,和计算机最基础的表示单位一致,所以很多时候,仍旧使用iso8859-1编码来表示。而且在很多协议上,默认使用该编码。比如,虽然"中文"两个字不存在iso8859-1编码,以gb2312编码为例,应该是"d6d0 cec4"两个字符,使用iso8859-1编码的时候则将它拆开为4个字节来表示:"d6 d0 ce c4"(事实上,在进行存储的时候,也是以字节为单位处理的)。而如果是UTF编码,则是6个字节"e4 b8 ad e6 96 87"。很明显,这种表示还需要以另一种编码为基础。
<o:p>
2. GB2312/GBK
<o:p>
这就是汉子的国标码,专门用来表示汉字,是双字节编码,而英文字母和iso8859-1一致(兼容iso8859-1编码)。其中gbk编码能够用来同时表示繁体字和简体字,而gb2312只能表示简体字,gbk是兼容gb2312编码的。
<o:p>
3. unicode
<o:p>
这是最统一的编码,可以用来表示所有语言的字符,而且是定长双字节(也有四字节的)编码,包括英文字母在内。所以可以说它是不兼容iso8859-1编码的,也不兼容任何编码。不过,相对于iso8859-1编码来说,uniocode编码只是在前面增加了一个0字节,比如字母a为"00 61"。
<o:p>
需要说明的是,定长编码便于计算机处理(注意GB2312/GBK不是定长编码),而unicode又可以用来表示所有字符,所以在很多软件内部是使用unicode编码来处理的,比如。
<o:p>
4. UTF
<o:p>
考虑到unicode编码不兼容iso8859-1编码,而且容易占用更多的空间:因为对于英文字母,unicode也需要两个字节来表示。所以unicode不便于传输和存储。因此而产生了utf编码,utf编码兼容iso8859-1编码,同时也可以用来表示所有语言的字符,不过,utf编码是不定长编码,每一个字符的长度从1-6个字节不等。另外,utf编码自带的校验功能。一般来讲,英文字母都是用一个字节表示,而汉字使用三个字节。
<o:p>
注意,虽然说utf是为了使用更少的空间而使用的,但那只是相对于unicode编码来说,如果已经知道是,则使用GB2312/GBK无疑是最节省的。不过另一方面,值得说明的是,虽然utf编码对汉字使用3个字节,但即使对于汉字网页,utf编码也会比unicode编码节省,因为网页中包含了很多的英文字符。
本文来自http://digest.softhouse.com.cn/digest/show/28639.html
分享到:
相关推荐
H264视频编码基本知识
视频编码技术基本是由ISO/IEC制定的MPEG-x和ITU-T制定的H.26x两大系列视频编码国际标准的推出。
视频编码技术基本是由ISO/IEC制定的MPEG-x和ITU-T制定的H.26x两大系列视频编码国际标准的推出。从H.261视频编码建议,到 H.262/3、MPEG-1/2/4等都有一个共同的不断追求的目标,即在尽可能低的码率(或存储容量)下...
本文主要包括以下几个方面:编码基本知识,java,系统软件,url,工具软件等。 在下面的描述中,将以"中文"两个字为例,经查表可以知道其GB2312编码是"d6d0 cec4",Unicode编码为"4e2d 6587",UTF编码就是"e4b8ad e...
视频编码技术基本是由ISO/IEC制定的MPEG-x和ITU-T制定的H.26x两大系列视频编码国际标准的推出。一个共同的不断追求的目标,从H.261视频编码建议,到H.262/3、MPEG-1/2/4等,即在尽可能低的码率(或存储容量)下...
Shell命令行编码脚本的基本知识
Python官方解答unicode编码基本知识以及常见问题的处理。对于深入理解Unicode编码十分重要。
本文主要包括以下几个方面:编码基本知识,java,系统软件,url,工具软件等。 最早的编码是iso8859-1,和ascii编码相似。但为了方便表示各种各样的语言,逐渐出现了很多标准编码 sqlserver里面有char和nchar,那个...
本文主要包括以下几个方面:编码基本知识,java,系统软件,url,工具软件等。在下面的描述中,将以"中文"两个字为例,经查表可以知道其GB2312编码是"d6d0 cec4",Unicode编码为"4e2d 6587",UTF编码就是"e4b8ad e...
H264视频编码基础知识.pptx介绍了视频图像处理的基础知识及H.264视频编码基本原理等知识。
全书分7章,在介绍了有关信息度量的基础上,重点讨论了信道容量、率失真函数,以及无失真信源编码、限失真信源编码、信道编码和密码学中的理论知识及其实现原理在各章的最后还附有内容小结和大量习题,书后附有部分...
设计一个LZW编码解码系统,掌握LZW编码的特点、储存方法及基本原理。运用理论课知识解决实际问题,选用一种语言实现LZW编码译码的相关函数的基本框架设计,如LZW树的构建,LZW编码的实现,LZW译码的实现。
因此,保持自己的代码符合统一的规范是一个编码者的基本素质。如果自己的编码风格与本文档的规定实在不同,无法忍受,请与维护者联系,在组内会议上统一讨论解决方案。 此外,如其他人对该编码规范有任何建议和批评...
本文主要包括以下几个方面:编码基本知识,乱码问题产生原因及问题解决方案
了解编码和解码的基本过程。 " " "4. 知道计算机内部处理信息是用二进制表示。 " " "过程与方法: " " "通过游戏和对生活中常见编码的讨论,了解常见的编码方式及其对" " "信息处理的意义。 " " "情感态度与价值观...
数据结构课程设计 一、目的 《数据结构》是一门实践性较强的软件基础课程,为了学好这门课程,必须在掌握理 论知识的同时,加强上机实践。本课程设计的目的就是要达到理论与实际应用相结合, 使同学们能够根据数据...
第二章:预备知识 5 第二章:信息论的基本概念 5 第三章:信源的熵率及冗余度 10 第四章:无失真信源编码 5 第五章:信道与信道容量 10 第六章:信道编码 5 第七章:率失真函数与信源限失真编码 5 复习考试 10
条形码39码的编码规则、译码的基本知识。得大于20个字,无语,不知道还要怎样描述……
数字通信原理的PPT学这门课的同学可以下来看看 ...包括数字通信的基础知识、数字编码、数字信号的基带传输、数字信号的频带传输、模拟信号的数字化、多路复用技术、数据交换、通信设备、移动通信和网络通信等内容。