GB 18030(全稱《信息技術 中文編碼字符集》)是中華人民共和國國家標準簡體中文字符集,由中華人民共和國信息產業部提出、信息產業部電子工業標準化研究所歸口。其向後兼容並替代GB 2312-1980GBKCP936傳統編碼,並支持UnicodeGB 13000)的所有碼位。GB 18030採用變長多字節編碼,每個字可以由1個、2個或4個字節組成。其編碼空間龐大,最多可定義161萬個字元。由於GB 18030完全支持Unicode,無需動用造字區即可支持中日韓統一表意文字、中國國內的少數民族文字以及emoji等字符。GB 18030在微軟Windows系統中的代碼頁54936

Quick Facts MIME / IANA, 別名 ...
GB 18030
Thumb
GB 18030 字節分配。「半碼"(Half codes)指成對使用的四字節部分。
MIME / IANAGB18030
別名代碼頁 54936
語言國際,但以中文為主
標準GB 18030-2022, GB 18030-2005, GB 18030-2000
分類Unicode轉換格式擴展ASCII[a]變長編碼CJK
拓展自EUC-CN, GBK
變換/編碼ISO 10646Unicode
前用GBK, GB2312
Close

除編碼方法外,GB 18030還包含其他文字和語言以及本標準適用對象的要求。不過,GB 18030不是一個漢字規範,不定義漢字的正式字形;字形由《通用規範漢字表》進行規範。

版本

本標準的第一版 GB 18030-2000《信息技術 信息交換用漢字編碼字符集 基本集的擴充》中華人民共和國信息產業部電子工業標準化研究所、北京大學計算機技術研究所、北大方正集團、北京方正新天地信息網絡科技有限責任公司、四通集團公司中國科學院軟件研究所、長城軟件公司、四通利方公司、中國軟件與技術服務股份有限公司、金山軟件公司聯想集團起草,由國家質量技術監督局於2000年3月17日發布和實施。此版本兼容Unicode 3.0的中日韓統一表意文字擴展區A,共收錄27,533個漢字。

本標準的第二版 GB 18030-2005《信息技術 中文編碼字符集》國家質量監督檢驗檢疫總局中國國家標準化管理委員會於2005年11月8日發布,並於2006年5月1日實施。此版本兼容Unicode 3.1的中日韓統一表意文字擴展區B,並刊載少數民族包括朝鮮文蒙古文(包括滿文托忒文錫伯文阿禮嘎禮文)、德宏傣文藏文維吾爾文哈薩克文柯爾克茲文彝文的文字。共有70,244個漢字。此標準內的單字節編碼部分、雙字節編碼部分,和四字節編碼部分收錄的少數中日韓統一表意文字擴展區A的漢字,為強制性標準。其他部分則屬於規模性標準。在中華人民共和國境內所有軟件產品,都需要支持這個同時包含單字節、雙字節和四字節編碼的規格。[1]:4

本標準的第三版 GB 18030-2022《信息技術 中文編碼字符集》國家市場監督管理總局和中國國家標準化管理委員會於2022年7月19日發布,並於2023年8月1日實施[2]。此版本兼容到Unicode 11為止的中日韓統一表意文字擴展區CDEF,並新增康熙部首,以及滇東北苗文傈僳文西雙版納新傣文西雙版納老傣文德宏傣文等少數民族文字以及蒙古文 BIRGA 符號,共收錄漢字87,887個和漢字部首228個,比上一版增加錄入了1.7萬餘個生僻漢字。此版本在保留總體結構的基礎上,從條文強制改為全文強制,但增加了「實現的級別」一章,定義了三個實現級別:

  • 級別1:支持中日韓統一表意文字和中日韓統一表意文字擴展區A的漢字(所有具備中文信息處理和交換功能的產品均應滿足此級別。與上一版的「部分強制」相比,實際要求「增加四字節編碼部分的CJK統一漢字」的 66 字。)
  • 級別2:在級別1的基礎上額外支持資料性附錄E中明確的《通用規範漢字表》中沒有包含在級別1之內的 8105 個漢字(操作系統數據庫管理系統中間件系統軟件和支撐軟件均應滿足此級別。)
  • 級別3:支持GB 18030-2022中所規定的全部漢字以及康熙部首(GB/T 4754《國民經濟行業分類》中任何用於政務服務和公共服務的信息技術產品和信息系統應均滿足此級別。)

Unicode支持

More information GB 字節串, Unicode 碼位 ...
不同GB 18030版本中Unicode碼位的映射更動
GB 字節串 Unicode 碼位
GB 18030-2000 GB 18030-2005
A8 BC (ḿ) U+E7C7 U+1E3F ḿ
81 35 F4 37 U+1E3F ḿ U+E7C7
Close

GB 18030在其標準中以碼表形式定義了除去代理對外的全部Unicode碼位的定義。由於GB 18030基本上是繞開已分配的碼點去指定需要對應的Unicode,其變換和UTF-8相比要複雜得多。在日常實現上,常常會直接使用一個偏移量表[3]

GB 18030-2005與GB 18030-2000、GBK相比,去除了很多原來映射在PUA中的編碼;後來剩餘的24個PUA碼位也在Unicode 4.1中加上。

在GB 18030-2022中,剩餘的24個PUA碼位已經被去除或更改對應,所有有意義字符都已經映射到正式的 Unicode 碼位上。[4]

More information GB 字節串, Unicode 碼位 [a] ...
國標碼碼表中私有區碼位的演變
GB 字節串 Unicode 碼位 [a]
GBK 1.0[5] GB 18030-2005 Unicode 4.1 GB 18030-2022[4]
A6 D9[6]:108 U+E78D U+FE10
A6 DA U+E78E U+FE12
A6 DB U+E78F U+FE11
A6 DC U+E790 U+FE13
A6 DD U+E791 U+FE14
A6 DE U+E792 U+FE15
A6 DF U+E793 U+FE16
A6 EC U+E794 U+FE17
A6 ED U+E795 U+FE18
A6 F3 U+E796 U+FE19
A8 BC U+E7C7 U+1E3F ḿ
A8 BF U+E7C8 U+01F9 ǹ
A9 89 U+E7E7 U+303E
A9 8A U+E7E8 U+2FF0
A9 8B U+E7E9 U+2FF1
A9 8C U+E7EA U+2FF2
A9 8D U+E7EB U+2FF3
A9 8E U+E7EC U+2FF4
A9 8F U+E7ED U+2FF5
A9 90 U+E7EE U+2FF6
A9 91 U+E7EF U+2FF7
A9 92 U+E7F0 U+2FF8
A9 93 U+E7F1 U+2FF9
A9 94[6]:173 U+E7F2 U+2FFA
A9 95 U+E7F3 U+2FFB
FE 50 U+E815 U+2E81
FE 51 U+E816 U+20087 𠂇 [b] U+E816
FE 52 U+E817 U+20089 𠂉 [c] U+E817
FE 53 U+E818 U+200CC 𠃌 [d] U+E818
FE 54 U+E819 U+2E84
FE 55 U+E81A U+3473
FE 56 U+E81B U+3447
FE 57 U+E81C U+2E88
FE 58 U+E81D U+2E8B
FE 59 U+E81E U+9FB4
FE 5A U+E81F U+359E
FE 5B U+E820 U+361A
FE 5C U+E821 U+360E
FE 5D U+E822 U+2E8C
FE 5E U+E823 U+2E97
FE 5F U+E824 U+396E
FE 60 U+E825 U+3918
FE 61 U+E826 U+9FB5
FE 62 U+E827 U+39CF
FE 63 U+E828 U+39DF
FE 64 U+E829 U+3A73
FE 65 U+E82A U+39D0
FE 66 U+E82B U+9FB6
FE 67 U+E82C U+9FB7
FE 68 U+E82D U+3B4E
FE 69 U+E82E U+3C6E
FE 6A U+E82F U+3CE0
FE 6B U+E830 U+2EA7 <control-2EA7>
FE 6C U+E831 U+215D7 𡗗 [e] U+E831
FE 6D U+E832 U+9FB8
FE 6E U+E833 U+2EAA
FE 6F U+E834 U+4056
FE 70 U+E835 U+415F
FE 71 U+E836 U+2EAE
FE 72 U+E837 U+4337
FE 73 U+E838 U+2EB3 <control-2EB3>
FE 74 U+E839 U+2EB6 <control-2EB6>
FE 75 U+E83A U+2EB7 <control-2EB7>
FE 76 U+E83B U+2298F 𢦏 [f] U+E83B
FE 77 U+E83C U+43B1
FE 78 U+E83D U+43AC
FE 79 U+E83E U+2EBB
FE 7A U+E83F U+43DD
FE 7B U+E840 U+44D6
FE 7C U+E841 U+4661
FE 7D U+E842 U+464C
FE 7E U+E843 U+9FB9
FE 80 U+E844 U+4723
FE 81 U+E845 U+4729
FE 82 U+E846 U+477C
FE 83 U+E847 U+478D
FE 84 U+E848 U+2ECA
FE 85 U+E849 U+4947
FE 86 U+E84A U+497A
FE 87 U+E84B U+497D
FE 88 U+E84C U+4982
FE 89 U+E84D U+4983
FE 8A U+E84E U+4985
FE 8B U+E84F U+4986
FE 8C U+E850 U+499F
FE 8D U+E851 U+499B
FE 8E U+E852 U+49B7
FE 8F U+E853 U+49B6
FE 90 U+E854 U+9FBA
FE 91 U+E855 U+241FE 𤇾 [g] U+E855
FE 92 U+E856 U+4CA3
FE 93 U+E857 U+4C9F
FE 94 U+E858 U+4CA0
FE 95 U+E859 U+4CA1
FE 96 U+E85A U+4C77
FE 97 U+E85B U+4CA2
FE 98 U+E85C U+4D13
FE 99 U+E85D U+4D14
FE 9A U+E85E U+4D15
FE 9B U+E85F U+4D16
FE 9C U+E860 U+4D17
FE 9D U+E861 U+4D18
FE 9E U+E862 U+4D19
FE 9F U+E863 U+4DAE
FE A0 U+E864 U+9FBB
備註
a.^ 藍色代表私用區碼位
b.^ GB 18030-2022將U+20087 𠂇 映射至0x95329031
c.^ GB 18030-2022將U+20089 𠂉 映射至0x95329033
d.^ GB 18030-2022將U+200CC 𠃌 映射至0x95329730
e.^ GB 18030-2022將U+215D7 𡗗 映射至0x9536B937
f.^ GB 18030-2022將U+2298F 𢦏 映射至0x9630BA35
g.^ GB 18030-2022將U+241FE 𤇾 映射至0x9635B630
Close

字節結構

GB 18030包含三種長度的編碼:單字節的ASCII、雙字節的GBK(略帶擴展)、以及用於填補所有Unicode碼位的四字節UTF區段。GBK雙字節部分通過查表定義,而四字節部分則根據之前兩個部分沒有提到的通用字符集碼位順序填補。由於和GBK兼容,GB 18030在搜索ASCII字符時也需要使用特別代碼進行判斷。

More information GB 18030, 碼位數 ...
GB 18030編碼[7]:3[8]:252[9]
GB 18030 碼位 Unicode[b]
字節1(最高位) 字節2 字節3 字節4
007F 128 0000007F
80 錯誤[c]
81FE 40FE 除去 7F[d] 23940 0080FFFF 除去 D800DFFF[e]
8184 3039 81FE 3039 39420
85 — (12600) (未來字符拓展)
868F — (126000) (未來漢字拓展)
D800DFFF[f]
90E3 3039 81FE 3039 1048576 1 000010 FFFF
E4FC — (315000) (未來標準拓展)
FDFE — (25200) (用戶造字區域)
FF 錯誤
總計 1112064
Close

一、二字節區段基本就是GBK編碼,另外加上了專門的歐元字符、豎排版本的標點符號,以及造字區對Unicode造字區的對應。四字節區段可以視作兩段形似GBK二字節區段結構的部分,每段的第一字節可以為0x81到0xFE,第二字節為0x30到0x39。由於結構類似,能夠安全於GBK的字符串搜索程序對於GB 18030來說也基本安全(正如基於字節英語byte-oriented的搜索程序對於EUCUTF-8也基本安全一般。)

四字節區段總共可以表達1,587,600(126×10×126×10)種字符,足以覆蓋Unicode的1,112,064(17×65536 − 2048個代理對)個有效碼位。

由於四字節區段通過填空定義,要寫出處理這段轉換的程序需要同時知道GBK的覆蓋範圍,並不簡單:

U+00DE (Þ) → 81 30 89 37
U+00DF (ß) → 81 30 89 38
U+00E0 (à) → A8 A4
U+00E1 (á) → A8 A2
U+00E2 (â) → 81 30 89 39
U+00E3 (ã) → 81 30 8A 30

WHATWGW3C的GB 18030實現通過一張「位置偏移表」記錄GB 18030四字節區中連續的幾塊碎片,以便高效處理轉換。[11]ICU[9]和glibc也都對大塊連續的區域使用了類似的策略。

參見

注釋

參考資料

外部連結

Wikiwand in your browser!

Seamless Wikipedia browsing. On steroids.

Every time you click a link to Wikipedia, Wiktionary or Wikiquote in your browser's search results, it will show the modern Wikiwand interface.

Wikiwand extension is a five stars, simple, with minimum permission required to keep your browsing private, safe and transparent.