lamp字符编码的转换规则

Posted 小king哥

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了lamp字符编码的转换规则相关的知识,希望对你有一定的参考价值。

1.lamp字符编码的转换规则

  lamp(Linux+Apache+mysql+php)

 

 1.1GB 2312 

  GB 2312 或 GB 2312-80 是中国国家标准简体中文字符集,全称《信息交换用汉字编码字符集·基本集》,又称 GB 0,由中国国家标准总局发布,1981 年 5 月 1 日实施。GB 2312 编码通行于中国大陆;新加坡等地也采用此编码。中国大陆几乎所有的中文系统和国际化的软件都支持 GB 2312。

  GB 2312 标准共收录 6763 个汉字,其中一级汉字 3755 个,二级汉字 3008 个;同时收录了包括拉丁字母、希腊字母、日文平假名及片假名字母、俄语西里尔字母在内的 682 个字符。
    • GB 2312 的出现,基本满足了汉字的计算机处理需要,它所收录的汉字已经覆盖中国大陆99.75% 的使用频率。
    • 对于人名、古汉语等方面出现的罕用字,GB 2312 不能处理,这导致了后来 GBK 及 GB 18030 汉字字符集的出现。
GB 2312 对任意一个图形字符都采用两个字节表示,并对所收汉字进行了“分区”处理,每区含有 94 个汉字/符号,分别对应第一字节和第二字节。这种表示方式也称为区位码。
  • 01-09 区为特殊符号。
  • 16-55 区为一级汉字,按拼音排序。
  • 56-87 区为二级汉字,按部首/笔画排序。

10-15 区及 88-94 区则未有编码。GB 2312 的编码范围为 2121H-777EH,与 ASCII 有重叠,通行方法是将 GB 码两个字节的最高位置 1 以示区别。

 

  1.2GBK


  GBK 汉字内码扩展规范K 为汉语拼音 Kuo Zhan(扩展)中“扩”字的声母。英文全称 Chinese Internal Code Specification。

  GBK 共收入 21886 个汉字和图形符号,包括:
  • GB 2312 中的全部汉字、非汉字符号。
  • BIG5 中的全部汉字。
  • 与 ISO 10646 相应的国家标准 GB 13000 中的其它 CJK 汉字,以上合计 20902 个汉字。
  • 其它汉字、部首、符号,共计 984 个。

  GBK 向下与 GB 2312 完全兼容,向上支持 ISO 10646 国际标准,在前者向后者过渡过程中起到的承上启下的作用。

  GBK 采用双字节表示,总体编码范围为 8140-FEFE 之间,首字节在 81-FE 之间,尾字节在 40-FE 之间,剔除 XX7F 一条线。GBK 编码区分三部分:
  • 汉字区 包括
  GBK/2:OXBOA1-F7FE, 收录 GB 2312 汉字 6763 个,按原序排列;
  GBK/3:OX8140-AOFE,收录 CJK 汉字 6080 个;
  GBK/4:OXAA40-FEAO,收录 CJK 汉字和增补的汉字 8160 个。
  • 图形符号区 包括
  GBK/1:OXA1A1-A9FE,除 GB 2312 的符号外,还增补了其它符号
  GBK/5:OXA840-A9AO,扩除非汉字区。
  • 用户自定义区

  GBK 区域中的空白区,用户可以自己定义字符。

 

 

  

 

以上是关于lamp字符编码的转换规则的主要内容,如果未能解决你的问题,请参考以下文章

SQL Server - 将 varchar 转换为另一个排序规则(代码页)以修复字符编码

编码与解码杂记

浅谈编码集

43转换流

字符编码及文件操作

字符串转 UTF-8 二进制