中日韩统一表意文字

中日韩统一表意文字中日韩统一表 意文字(英语:CJK Unified Ideographs),目的是要把分别来自中文、日文、韩文、越文中,本质相同、形状一样或稍异的表意文字(主要为汉字,但也有仿汉字如日本国字、韩国 独有汉字、越南的喃字)于ISO 10646及Unicode标准内赋予相同编码。

越南文后来加入此计划,所以亦有 CJKV (中日韩越统一表意文字)的称呼。Unicode亦开始收录其仿汉字——喃字
版本
ISO 10646 版本Unicode 版本新增置放平面字数累计字数19931.0 中日韩统一表意文字基本多文种平面(BMP)20,90220,914位于“表意文字兼容区”中但实则独一的汉字基本多文种平面1220003.0中日韩 统一表意文字扩展A区基本多文种平面6,58227,49620013.1中日韩统一表意文字扩展B区表意文字补充平面(SIP) 42,71170,2072003第一修订版4.1HKSCS-2004 及 GB 18030-2000 中仍未加入 ISO 10646 的汉字基本多文种平面2270,229未有6.0(预计)中日韩统一表意文字扩展C区表意文字补充平面(预计)4,25174,480

历史
于1990年代初ISO 10646制订时,来自台湾的代表提出将源自中国的中日韩汉字予以统一(Unify, ISO术语称为认同),可以大量节省编码空间,获其他代表接纳。


字源

最初期统一汉字
最初期的统一汉字(20,902字)字源来自以下字集:

中国大陆的G源
G0:GB 2312-80:6,763字
G1:GB 12345-90:2,352字(含58个香港字和2个吏读字,不包括和G0重覆的字)
G3:GB 7589-87:7,237字
G5:GB 7590-87:7,039字
G7:现代汉语通用字表:642(G0, 1, 3, 5, 8未包括的字)
G8:GB 8565-89:290字(G0, 1, 3, 5未包括的字)
台湾的T源
T1:CNS 11643-1986第一字面:5,401+9字(含9个计量用汉字)
T2:CNS 11643-1986第二字面:7,650字
TE:CNS 11643-1986第十四字面:6,319+239+10(含239个CCCII特字和10个XCCS特字)
日本的J源
J1:JIS X 0208-90:6,335+1字
J2:JIS X 0212-90:5,801字
韩国的K源
K0:KS C 5601-87:4,888字(含268个重见字)
K1:KS C 5657-91:2,856字
以上的来源字集会实施字源分离原则。

另外还有:ANSI Z39.64-1989(EACC)、Big5、CCCII第一面、GB 12052-89、JEF、中国大陆电报码、台湾电报码、Xerox Chinese。这些来源字集不会实施字源分离原则。

很多人以为20,902统一汉字中来自台湾的只是Big5的一万三千多字,其实不然。

扩展A区
扩展A区包含有6,582个新的汉字,位置在 U+3400—U+4DB5。相比起最初期统一汉字,扩展A区多了来自多个来自中国大陆、台湾、新加坡等汉字。

这一节是一个小作品。欢迎您积极编辑或修订扩充其内容。

扩展B区
扩展B区包含有42,711个新的汉字,位置在 U+20000—U+2A6D6。根据ISO/IEC JTC1/SC2/WG2/IRG N777号文件,这四万多个汉字分别从以下字典或字集中取得:

CNS 11643的第4平面到第15平面所收录的30,177个汉字;
在《汉语大字典》中出现的28,914个未收录汉字;
在《康熙字典》中出现的18,486个未收录汉字(包括一个在补遗篇出现汉字);
在北朝鲜的国家标准所收录的5,642个汉字;
在越南的国家标准所收录的4,232个字喃;
HKSCS中出现的1,081个未收录汉字;
《汉语大词典》中出现的553个未收录汉字;
《四库全书》中出现的522个未收录汉字;
日本工业标准的JIS X 0213第3平面及第4平面的302个未收录汉字;
1980年代版本的《辞海》中出现的247个未收录汉字;
大韩民国PKS 5700-3:1998中出现的166个未收录汉字;
《中国大百科全书》中出现的86个未收录汉字;
《辞源》中出现的66个未收录汉字;
北大方正排版系统中出现的65个未收录汉字;
这堆汉字中重复的汉字有不少,所以经过整理之后,总数实际上只有42,711个汉字。

另外,在 U+2F800—U+2FA1D 的位置,放了542个来自台湾的兼容汉字。

Unicode 4.1汉字
为使 Unicode 向下兼容 GB 18030 和香港增补字符集(HKSCS)的所有汉字,而扩展C区又迟迟未能出笼,在 Unicode 4.1 版中引进了14个香港增补字符集的用字和8个 GB 18030 用字。该22字被编于 U+9FA6—U+9FBB 的位置。
另外,在 U+FA70—U+FAD9 的位置,放了106个来自北朝鲜的兼容汉字。

扩展C区按计划,中日韩统一表意文字扩展C区将收录4,251个汉字,包括来自中国大陆、澳门、台湾、日本、越南等尚未被编码的汉字。这些汉字预计会收录在下一版的 Unicode 版本中,位置在 U+2A6E0—U+2B77A。

字源分离原则
字源分离原则字源分离原则(Source Separation Rule)是整理中日韩统一表意文字的基础。
由于CJK各地字型多有微妙的差异,如“户”字的第一笔,台湾作撇、中国大陆作点、日本作横,这种程度的差异,理想上是整并为一个字为佳。然而,从之前各 种受挫之文字整并计划的经验得知,整合字集与现行通用字集(Big5或国标码)等无法一一对应,是推行整合字集的最大阻碍。
例如,日本的JIS标准同时收录了“剣”字与“劍”字,原本JIS文件里这两个字可以并存,但采用整合字集后反而变成同一个字,会造成使用上的困扰。于是,字源分离原则因而诞生。
字源分离原则是指,在上述所列出之各种字源里,若有任何字集同时收了两种以上的文字字形,则在Unicode中日韩统一表意文字中,也同时收录这些字。这样一来,现行的各种原有字集与Unicode汉字可以一一对应。
由于Unicode中日韩统一表意文字的主要诉求,就是能大幅减少Unicode收录汉字字数,同时尊重各地的习惯字形。但字源分离原则则破坏了“只对字,而不对字形”编码之原则,亦遭受不少批评。
已统一的汉字原则上ISO 10646只对字(Character),而非字形(Glyph)编码。同一字各地可使用自己的标准写法。下例中使用HTML标示同一编码的字在不同地区中的写法(但只是阁下电脑提供的字型,未必代表该地区的标准写法)。
例子:
Unicode中文日文韩文
中国大陆台湾香港
U+6D2A港港港港港
U+6F22漢漢漢漢漢
U+76F4直直直直直
U+7A97窗窗窗窗窗
U+89D2角角角角角
U+8D77起起起起起
U+9AA8骨骨骨骨骨


注:不是所有浏览器均可分辨“中文-香港”(zh-hk)此一HTML的语言代码(Language Code)并使用不同的字形。如阁下看到的字形和中国大陆的字形一样,表示阁下的浏览器不能分辨此标签。截至2005年6月,只有Firefox和 Mozilla浏览器支援此标签。详见Test results: Automatic font assignment for CJK text。
没有统一的汉字有些字只是同一字在不同地区的写法,理应统一,但因为字源分离原则而只好分开编码。值得注意的是字源分离原则由“把不正统的编入位于基本多 文种平面的‘兼容表意文字区’(Compatibility Ideographs)”起废弃,原因是CNS中有太多字形非常接近,按 Unicode 标准应该统一的字。这些字只有正统的会编入正式字集(包括扩展A、B、C区)中,不正统的编入位于“第二辅助平面”的“兼容表意文字补充区” (Compatibility Ideographs Supplement)中。
以下是所有摘自ISO/IEC JTC1/SC2/WG2字源分离原则文件之中有的字。
Unicode字Unicode字Unicode字
U+4E1F丟U+4E22丢

U+4E48么U+5E7A幺

U+4E89争U+722D爭

U+4EDE仞U+4EED仭

U+4F75併U+5002倂

U+4FA3侣U+4FB6侶

U+4FC1俁U+4FE3俣

U+4FDE俞U+516A兪

U+4FF1俱U+5036倶

U+5024値U+503C值

U+5077偷U+5078偸

U+507D偽U+50DE僞

U+514C兌U+5151兑

U+514E兎U+5154兔

U+5156兖U+5157兗

U+518A冊U+518C册

U+51C0净U+51C8凈

U+51E2凢U+51E3凣

U+5203刃U+5204刄

U+520A刊U+520B刋

U+5220删U+522A刪

U+5225別U+522B别

U+5238券U+52B5劵

U+5239刹U+524E剎

U+524F剏U+5259剙

U+525D剝U+5265剥

U+5292劒U+5294劔

U+52FB勻U+5300匀

U+5355单U+5358単

U+5373即U+537D卽

U+5377卷U+5DFB巻

U+53C1叁U+53C2参

U+53C3參U+53C4叄

U+5415吕U+5442呂

U+541E吞U+5451呑

U+5433吳U+5434吴U+5449呉
U+5436吶U+5450呐

U+543F吿U+544A告

U+5527唧U+559E喞

U+55A9喩U+55BB喻

U+5618嘘U+5653噓

U+568F嚏U+5694嚔

U+56EF囯U+56FD国

U+5708圈U+570F圏

U+570E圎U+5713圓

U+5716圖U+5717圗

U+5759坙U+5DE0巠

U+57D2埒U+57D3埓

U+5848塈U+588D墍

U+5861塡U+586B填

U+5897増U+589E增

U+58EE壮U+58EF壯

U+58FD壽U+5900夀

U+5910夐U+657B敻

U+5932夲U+672C本

U+5965奥U+5967奧

U+5968奨U+596C奬U+734E獎
U+5986妆U+599D妝

U+598D妍U+59F8姸

U+59CD姍U+59D7姗

U+59EB姫U+59EC姬

U+5A1B娛U+5A2F娯U+5A31娱
U+5A55婕U+5AAB媫

U+5A7E婾U+5AAE媮

U+5AAA媪U+5ABC媼

U+5AAF媯U+5B00嬀

U+5B0E嬎U+5B14嬔

U+5B24嬤U+5B37嬷

U+5B73孳U+5B76孶

U+5BAB宫U+5BAE宮

U+5BDB寛U+5BEC寬

U+5BDC寜U+5BE7寧

U+5BDD寝U+5BE2寢

U+5C02専U+5C08專

U+5C06将U+5C07將

U+5C13尓U+5C14尔

U+5C19尙U+5C1A尚

U+5C2A尪U+5C2B尫

U+5C36尶U+5C37尷

U+5C4F屏U+5C5B屛

U+5CE5峥U+5D22崢

U+5DD3巓U+5DD4巔

U+5E21帡U+5E32帲

U+5E2F帯U+5E36帶

U+5E76并U+5E77幷

U+5EC4廄U+5ECF廏

U+5F11弑U+5F12弒

U+5F37強U+5F3A强

U+5F39弹U+5F3E弾

U+5F50彐U+5F51彑

U+5F54彔U+5F55录

U+5F59彙U+5F5A彚

U+5F5B彛U+5F5C彜

U+5F5D彝U+5F5E彞

U+5F65彥U+5F66彦

U+5FB3徳U+5FB7德

U+5FB4徴U+5FB5徵

U+6075恵U+60E0惠

U+6085悅U+60A6悦

U+609E悞U+60AE悮

U+60B3悳U+60EA惪

U+6120愠U+614D慍

U+613C愼U+614E慎

U+6229戩U+622C戬

U+622F戯U+6231戱

U+6236戶U+6237户U+6238戸
U+623B戻U+623E戾

U+629B抛U+62CB拋

U+629C抜U+62D4拔

U+6329挩U+635D捝

U+633F挿U+63D2插U+63F7揷
U+634F捏U+63D1揑

U+635C捜U+641C搜

U+63B2掲U+63ED揭

U+63FA揺U+6416搖U+6447摇
U+63FE揾U+6435搵

U+6483撃U+64CA擊

U+654E敎U+6559教

U+6553敓U+655A敚

U+65E2既U+65E3旣

U+6602昂U+663B昻

U+665A晚U+6669晩

U+66A8暨U+66C1曁

U+66FD曽U+66FE曾

U+67B4枴U+67FA柺

U+67E5查U+67FB査

U+67F5柵U+6805栅

U+68B2梲U+68C1棁

U+6961楡U+6986榆

U+6982概U+69EA槪

U+6985榅U+69B2榲

U+699D榝U+6A27樧

U+69C7槇U+69D9槙

U+69D8様U+6A23樣

U+6A2A横U+6A6B橫

U+6B65步U+6B69歩

U+6B72歲U+6B73歳

U+6B7F歿U+6B81殁

U+6BBB殻U+6BBC殼

U+6BC0毀U+6BC1毁

U+6BCE毎U+6BCF每

U+6C32氲U+6C33氳

U+6C5A汚U+6C61污

U+6C92沒U+6CA1没

U+6D44浄U+6DE8淨

U+6D89涉U+6E09渉

U+6D97涗U+6D9A涚

U+6D99涙U+6DDA淚

U+6DE5淥U+6E0C渌

U+6DF8淸U+6E05清

U+6E07渇U+6E34渴

U+6E29温U+6EAB溫

U+6E88溈U+6F59潙

U+6E89溉U+6F11漑

U+6EDA滚U+6EFE滾

U+6F5B潛U+6FF3濳

U+7028瀨U+702C瀬

U+70BA為U+7232爲

U+712D焭U+7162煢

U+7155煕U+7199熙

U+7174煴U+7185熅

U+72B6状U+72C0狀

U+7464瑤U+7476瑶

U+74F6瓶U+7501甁

U+7522產U+7523産

U+75E9痩U+7626瘦

U+76A1皡U+76A5皥

U+771E眞U+771F真

U+773E眾U+8846衆

U+7814研U+784F硏

U+797F祿U+7984禄

U+79BF禿U+79C3秃

U+7A05稅U+7A0E税

U+7A42穂U+7A57穗

U+7B5D筝U+7B8F箏

U+7BB3箳U+7C08簈

U+7BE1篡U+7C12簒

U+7CA4粤U+7CB5粵

U+7D55絕U+7D76絶

U+7DA0綠U+7DD1緑

U+7DD2緒U+7DD6緖

U+7DE3緣U+7E01縁

U+7DFC緼U+7E15縕

U+7E48繈U+7E66繦

U+7FAE羮U+7FB9羹

U+7FF6翶U+7FFA翺

U+80FC胼U+8141腁

U+812B脫U+8131脱

U+817D腽U+8183膃

U+8203舃U+8204舄

U+820D舍U+820E舎

U+8216舖U+8217舗

U+8358荘U+838A莊

U+83D1菑U+8458葘

U+8480蒀U+8495蒕

U+848B蒋U+8523蔣

U+848D蒍U+853F蔿

U+8570蕰U+8580薀

U+85AB薫U+85B0薰

U+85F4藴U+860A蘊

U+865A虚U+865B虛

U+86FB蛻U+8715蜕

U+885B衛U+885E衞

U+886E衮U+889E袞

U+88C5装U+88DD裝

U+8A2E訮U+8A7D詽

U+8AAA說U+8AAC説

U+8ACC諌U+8AEB諫

U+8B20謠U+8B21謡

U+8C5C豜U+8C63豣

U+8D70走U+8D71赱

U+8EFF軿U+8F27輧

U+8F1C輜U+8F3A輺

U+8F3C輼U+8F40轀

U+8FBE达U+8FD6迖

U+8FF8迸U+902C逬

U+9059遙U+9065遥

U+90A2邢U+90C9郉

U+90CE郎U+90DE郞

U+90F7郷U+9109鄉U+9115鄕
U+9196醖U+919E醞

U+91A4醤U+91AC醬

U+9203鈃U+9292銒

U+92B3銳U+92ED鋭

U+9304錄U+9332録

U+932C錬U+934A鍊

U+93AD鎭U+93AE鎮

U+95B1閱U+95B2閲

U+9667陧U+9689隉

U+9751靑U+9752青

U+9759静U+975C靜

U+976D靭U+9771靱

U+9839頹U+983D頽

U+984F顏U+9854顔

U+985A顚U+985B顛

U+98EE飮U+98F2飲

U+9905餅U+9920餠

U+99B1馱U+99C4駄

U+99E2駢U+9A08騈

U+9AA9骩U+9AAB骫

U+9AD8高U+9AD9髙

U+9AEA髪U+9AEE髮

U+9B2C鬬U+9B2D鬭

U+9C1B鰛U+9C2E鰮

U+9CEF鳯U+9CF3鳳

U+9D87鶇U+9DAB鶫

U+9DC6鷆U+9DCF鷏

U+9EAA麪U+9EAB麫

U+9EBC麼U+9EBD麽

U+9EC3黃U+9EC4黄

U+9ED1黑U+9ED2黒


注:以上内容来自中文维基百科

CJKVCJKV,是汉语、日语、韩语(朝鲜语)、越南语(Chinese-Japanese-Korean-Vietnamese)的省略,是汉字文化 圈内的这4种语言共同使用的汉字(包含越南的喃字、越文汉字、韩文汉字和日文汉字),以及朝鲜语谚文和日语平假名、片假名。这是有关计算机国际化、地域化 的字符编码的用语。CJKV的顺序是拉丁字母顺序。旧称CJK(即中日韩用字)。

对于较早废止汉字,而曾使用过汉字及本民族类汉字文字—喃字的越南语方块文字进入CJKV编码较晚。用语的使用频度以CJK较多。不过,随着越文汉字、喃字加入该计划,CJKV的称呼开始使用。

Unicode的CJK统一汉字,作为越南的文字编码规格的 TCVN 5773:1993 和 TCVN 6056:1995 与汉字(越文汉字、喃字)作为原规格也合并,实际状态是CJKV。譬如,“U+7551 畑”就是日本国字之“畑”(JIS X 0208-1990之482A)与越南喃字之“畑”(TCVN 5773:1993之3C2F)的统合。

转载于:https://www.cnblogs.com/hunter_gio/archive/2008/04/24/1168829.html

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐