代码页

✍ dations ◷ 2024-12-23 03:33:04 #Pages using deprecated source tags,字符编码

代码页是字符编码的别名,也称内码表,是特定语言的字符集的一张表。

早期,代码页是IBM称呼计算机的BIOS所支持的字符集编码。当时通用的操作系统都是命令行界面,这些操作系统直接使用BIOS提供的字符绘制功能来显示字符(或者是一组嵌入在显卡字符生成器中的字形)。这些BIOS代码页也被称为OEM代码页。图形操作系统使用自己的字符呈现引擎(rendering engine),可以支持多个不同的字符集编码,这类代码页被称作ANSI代码页。

早期IBM和微软内部使用数字来标记不同的编码字符集,不同的厂商对同一个字符集编码使用各自不同的名称。例如,UTF-8在IBM称作代码页1208,在微软称作代码页65001,在SAP称作代码页4110。

1987年4月,IBM发布了PC-DOS 3.3,正式开始使用16比特的无符号整数标识不同的代码页。这时的PC机使用CGA显示系统的字符界面,绘制不同语言的字符依靠BIOS硬件厂商(在当时就是指制定业界标准的IBM)提供的功能。如果想更换所支持的字符集,就必须换上支持该字符集的ROM芯片。微软作为DOS操作系统的软件厂商,并不拥有绘制这些字符集的知识产权。所以这些字符集的绘制实现,称作OEM代码页。最常见、最具代表性的OEM代码页是"IBM PC或MS-DOS 代码页437"。

随着图形用户界面操作系统的广泛使用(最初被广为接受的是Windows 3.1),操作系统具有了字符绘制的功能。微软在Windows操作系统没有转向UTF-16作为内码实现之前(也就是在Windows 2000之前),针对不同的使用地区与国家,定义了一系列的支持不同语言字符集的代码页,被称作"Windows(或ANSI)代码页"。代表性的是实现了ISO-8859-1的代码页1252。

代码页819实现了Latin-1(ISO/IEC 8859-1),用于IBM AS/400小型机。

对于中日韩的多字节编码的代码页,OEM代码页与ASCII代码页相同,例如对于简体中文的OEM代码页与ASCII代码页就是GBK代码页。而对于单字节编码的代码页,如英语、俄语等,OEM代码页与ASCII代码页一般不同。这是因为在MS-DOS时代,计算机只能使用字符界面在屏幕上画出表格的框线,所以OEM代码页要在单字节字符集中包含方框绘制字符;此外,OEM代码页437提供的有限的变音符号,只能覆盖法语、西班牙语、德语、意大利语、瑞典语的字母表。而在Windows的早期时代,仍然使用单字节字符集,这时就舍弃了这些不必要的方框绘制字符,取而代之的是丹麦语、挪威语、冰岛语、加拿大法语的变音符号。为此,一个用OEM代码页的字节流要在Windows上正确显示,就需要或者显式设定使用OEM代码页;或者要显式把OEM代码页的字节流转化为ASCII代码页的字符流,这需要使用Windows系统调用OemToChar()

Windows代码页最初是根据ANSI草案实现的,这个草案最终成为ISO 8859-1。这是Windows代码页被称作ANSI的缘由。

Windows-1252与ISO-8859-1并不完全一致。ISO-8859-1在0x80-0x9F范围的控制字符,在Windows-1252中被可打印字符取代。由于在web网页中,ASCII控制字符不起作用,所以网页一般用Windows-1252代码页标记替代ISO-8859-1标记。

既是OEM代码页,也是Windows代码页。

Windows平台上的GUI程序使用ANSI代码页,而在控制台程序使用OEM代码页(以便向后兼容)。这意味着,如果在记事本程序(notepad.exe)打开一个8位字符集编码的文本文件,将使用ANSI代码页;如果在命令行中用type命令显示这个文本文件的内容,将使用OEM代码页。这两个代码页在前128个字符的编码是一样的,但后128个字符的编码可能不一致。在Windows的命令行窗口通过标记、复制操作把一部分文本内容复制到记事本程序中,实际上是把Unicode格式的内容保存在剪贴板,使得这种文本复制保持了字符编码的透明转换。

对于Windows操作系统中的命令行窗口(Command Prompt),chcp命令在没有参数时,显示当前代码页;chcp命令带一个整数参数,则改变命令行窗口的当前代码页为参数所指定。

把UTF-8编码文本直接写到控制台,必须先使用函数SetConsoleOutputCP(65001),然后使用puts一族的函数来输出文本。把UTF-8编码文本写入UTF-8文件时,可以直接使用窄字符输出函数。

在Windows API中,CP_ACP与CP_OEMCP分别表示当前系统的ANSI代码页与OEM代码页。对于CJK(多字节编码)的环境(泰文,日文,韩文,中文),CP_ACP与CP_OEMCP没有区别。对于非 CJK(单字节编码)的环境这两个代码页不同。 Windows的文件操作的API默认使用ASCII代码页(即CP_ACP),设备的操作的函数使用OEM代码页(即CP_OEMCP)。读写console的函数是对console设备的操作,所以默认使用OEMCP。

Windows系统调用GetCPInfo()给出指定的代码页的信息。如东亚多字节代码页的缺省字符、前导字节的范围:

相关

  • 表皮样囊肿表皮样囊肿(英语:epidermoid cyst)是一种通常在皮肤上发现的良性囊肿。表皮样囊肿主要源于表皮上的外胚层组织。在组织学的角度上,它是鳞状上皮细胞所组成的。通常此类囊肿容易
  • 单倍群在分子演化的研究中,单倍群(Haplogroup)是一组类似的单倍型(英语:Haplotype)(Haplotype),它们有一个共同的单核苷酸多态性祖先。因为单倍群由相似的单倍型组成,所以可以从单倍型来预测
  • 华南板块隐没带 Alps 造山带 30→ 相对于非洲板块的移动速度(毫米/Y)华南板块,也称扬子板块、长江板块,是指从秦岭淮河到冲绳海槽这个巨大的稳定地区,是一块位于东亚的板块。在华南板块内
  • BLEACH《死神》(日语:BLEACH),是日本漫画家久保带人创作的漫画作品,于《周刊少年Jump》连载,自2001年36·37合并号起至2016年37号结束。改编动画版从2004年10月5日起于东京电视台播放。
  • 古巨蚁亚科巨蚁(学名:Titanomyrma),又称为泰坦蚁,是已发现体型最大的蚁,但现已灭绝。它们生存在始新世的德国与北美洲。2011 年所发表的 T. lubei 来自一具 49.5 百万年前美国怀俄明州体型相
  • 沃尔夫奖沃尔夫奖(Wolf Prize)由沃尔夫基金会颁发,该基金会于1976年在以色列创立,1978年开始颁奖。创始人里卡多·沃尔夫是外交家、实业家和慈善家。沃尔夫奖主要是奖励对推动人类科学与
  • 摄影滤光镜摄影滤光镜,简称滤光镜、滤色镜或滤镜(Filter),是摄影时放在照相机镜头前端的一种玻璃或塑料镜片,能够对光的不同波段进行选择性吸收,从而对摄影作品产生特殊的效果。种类很多,常见
  • 邓大量邓大量,籍贯河南洛阳,生于台湾,地质物理学家。1959年毕业于国立台湾大学地理系,1966年取得美国加州理工学院地理与应用数学博士学位。1967年进入南加州大学地理系任教。1990年当
  • 美军顾问团美军顾问团(英语:Military Assistance Advisory Group,缩写“MAAG”,即“美国军事援助技术团”),为美军派驻在中华民国境内训练中华民国国军的军事顾问团。今日一般所指的美军顾问
  • 德浪河谷美国等国正式介入之后美国撤出至南越灭亡德浪河谷战役(Battle of Ia Drang)是美国介入越南战争以来,美军与越南人民军(北越军)主力部队第一次重大正面交战,双方都认为取得了很大的