GB码和BIG5码的互换技术

中文与英文用ASCII码一个字节表示不同,它使用两个字节来表示。事实上,在文本文件中保存的就是每个汉字对应的两个字节编码,而显示问题由中文操作系统自动解决。
汉字编码并不统一,我们使用的是GB码,而台湾地区使用的是BIG5码。BIG5码文件中保存的是汉字相应的BIG5编码,GB码文件中保存的是汉字相应的GB编码。所以转换工作的关键是有一个记录每个BIG5编码对应GB编码的码表文件。
GB码编码规则是这样的:每个汉字由两个字节构成,第一个字节的范围从0XA1-0XFE,共96种。第二个字节的范围分别为0XA1-0XFE,共96种。利用这两个字节共可定义出 96 * 96=8836种汉字。实际共有6763个汉字。
BIG5码编码规则是这样的:每个汉字由两个字节构成,第一个字节的范围从0X81-0XFE,共126种。第二个字节的范围分别为0X40-0X7E,0XA1-0XFE,共157种。也就是说,利用这两个字节共可定义出 126 * 157=19782种汉字。这些汉字的一部分是我们常用到的,如一、丁,这些字我们称为常用字,其BIG5码的范围为0XA440-0XC671,共5401个。较不常用的字,如滥、调,我们称为次常用字,范围为 0XC940-0XF9FE,共7652个,剩下的便是一些特殊字符。
制作码表文件的原理是这样的:首先将所有的GB编码写入一个文件,然后,使用具有GB码到BIG5码转换功能的软件,如UCDOS下的CONVERT.EXE,将文件转换为BIG5码文件,即得到码表文件。
下面的程序可将全部国标码写入文件gb.txt(以下全部程序用foxpro书写,可很容易的转换成其他语言)

fp = fopen("gb.txt",2)
for i=161 to 247
for j=161 to 254
=fwrite(fp,chr(i)+chr(j))
next
=fwrite(fp,chr(13)+chr(10))
next
=fwrite(fp,chr(26))
=fclose(fp)

文件的组织形式:行对应编码的第一字节,列对应编码的第二字节。使用时请注意编码的偏移量,如汉字“啊”GB编码0xb1a1第一字节0xb1(177)第二字节0xa1(161)所以他应该在文件的第(177-161=16)行第((161-161)*2=0)列。
运行CONVERT.EXE将gb.txt转换成BIG5码的文件,这样就可得到按GB码组织的BIG5码表文件big5.txt。反之亦可得到按BIG5码组织的GB码表文件。

转换的思路是这样的:(用foxpro书写)
首先将码表文件装入数组
fp = fopen("big5.txt")
i = 0
do while feof(fp)
i = i+1
dime dict[i]
dict[i] = fgets(fp)
enddo
=fclose(fp)
其次将待转换的文本装入变量
create cursor temp (mm m)
append blank
append memo mm from textfilename
text = mm
然后扫描文本,替换所有的GB编码
temp = ""
i = 1
do while i < len(text)
ch = substr(text,i,1)
if isascii(ch) && 若是ASCII码
temp = temp+ch
i = i+1
else
ch1 = substr(text,i+1,1)
big5 = substr(dict[asc(ch)-161+1],(asc(ch1)-161)*2+1,2)
temp = temp+big5
i = i+2
endif
enddo
最后将在temp中得到转换后的文本

需要注意的是,在foxpro中数组指针是以1开始,substr函数的起始位>=1。
foxpro大家应该都会,看得懂的。转换好的big5.txt(17k)无法张贴。如有需要,请与我联系。email: czjsz_ah@stats.gov.cn

时间: 2024-08-03 23:40:46

GB码和BIG5码的互换技术的相关文章

贴上一贴:GB码和BIG5码的互换技术

                                                GB码和BIG5码的互换技术     中文与英文用ASCII码一个字节表示不同,它使用两个字节来表示.事实上,在文本文件中保存的就是每个汉字对应的两个字节编码,而显示问题由中文操作系统自动解决.    汉字编码并不统一,我们使用的是GB码,而台湾地区使用的是BIG5码.BIG5码文件中保存的是汉字相应的BIG5编码,GB码文件中保存的是汉字相应的GB编码.所以转换工作的关键是有一个记录每个BIG5编码

正确显示数据库里同时存在的GB码和BIG5码:

Public Function CheckBIG(strSource As String) As BooleanDim idx As LongDim ByteTemp() As ByteCheckBIG = FalseFor idx = 1 To Len(strSource) ByteTemp = StrConv(Mid(strSource, idx, 1), vbFromUnicode) If UBound(ByteTemp) > 0 Then If (ByteTemp(1) >= 64)

BIG5码到BG码转换技术

中文因为数量太多,所以与英文用ASCII码一个字节表示不同,它使用两个字节来表示.通过计算这两个字节,我们可以得到其表示的汉字在中文字库中的位置.读取该位置的若干字节,以获得表示这个汉字的点阵信息.有了这些信息,就可以分别在DOS或WINDOWS中显示该汉字.事实上,在文本文件中保存的就是每个汉字对应的两个字节编码,而显示问题由中文操作系统自动解决. 汉字编码并不统一,我们使用的是GB码,而台湾地区使用的是BIG5码.BIG5码文件中保存的是汉字相应的BIG5编码,GB码文件中保存的是汉字相应的

织梦之GB码转换成Big5码

转换 /********************************//GB码转换成Big5码*********************************/function gb2big5($Text) { global $GB_DATA; if(empty($GB_DATA)){  $filename = dirname(__FILE__)."/data/gb-big5.table";  $fp = fopen($filename, "rb");  $g

Foxmail怎么发送BIG5码邮件

  使用Foxmail,在"写邮件"窗口中写好邮件的内容,然后执行"邮件"菜单"字符转换"子菜单中的"GB→BIG5"命令,系统即会将邮件内容和主题转换成BIG5码(转换后的邮件显示为乱码).转换完毕之后再将该邮件发送出去即可.          小编推荐:Foxmail如何阅读BIG5码邮件 此方法,Foxmail不仅会改变邮件的显示状态,它还会直接对汉字的内码进行转换,转换后的邮件的内码就变成了BIG5码,这样就保证了BI

Foxmail发送BIG5码邮件的技巧

使用Foxmail,在"写邮件"窗口中写好邮件的内容,然后执行"邮件"菜单"字符转换"子菜单中的"GB→BIG5"命令,系统即会将邮件内容和主题转换成BIG5码(转换后的邮件显示为乱码).转换完毕之后我们再将该邮件发送出去即可. 此方法,Foxmail不仅会改变邮件的显示状态,它还会直接对汉字的内码进行转换,转换后的邮件的内码就变成了BIG5码,这样就保证了BIG5码用户的正确阅读.另外,Foxmail的这种功能仅转化邮件内容

二进制格雷码与自然二进制码的互换

在精确定位控制系统中,为了提高控制精度,准确测量控制对象的位置是十分重要的.目前,检测位置的办法有两种:其一是使用位置传感器,测量到的位移量由变送器经A/D转换成数字量送至系统进行进一步处理.此方法精度高,但在多路.长距离位置监控系统中,由于其成本昂贵,安装困难,因此并不实用:其二是采用光电轴角编码器进行精确位置控制.光电轴角编码器根据其刻度方法及信号输出形式,可分为增量式.绝对式以及混合式三种.而绝对式编码器是直接输出数字量的传感器,它是利用自然二进制或循环二进制(格雷码)方式进行光电转换的,

大五码繁体字库(BIG5码)的安装使用方法

大五码繁体字库(BIG5码)的安装使用方法   1.首先安装BIG5码字体,安装方法:打开"控制面版",找到"字体"打开,将需要的字体文件复制到字体文件夹中即可,安装完毕最好重新启动电脑.其它字体安装方法同上.(华康.金梅.超世纪等繁体字库都属于此类大五码字体,字体扩展名为TTF.或TTC).     2.在word里把需要的汉字输入工作区内,然后将文字全选,选择"工具"菜单中的"语言",内有"中文简繁转换"

字符,字节和编码, ASCII码, DBCS码,SBCS码 与Unicode码

字符,字节和编码, ASCII码, DBCS码,SBCS码 与Unicode码 http://www.regexlab.com/zh/encoding.htm 1. 编码问题的由来,相关概念的理解 1.1 字符与编码的发展 从计算机对多国语言的支持角度看,大致可以分为三个阶段: 系统内码 说明 系统 阶段一 ASCII 计算机刚开始只支持英语,其它语言不能够在计算机上存储和显示. 英文 DOS 阶段二 ANSI编码(本地化) 为使计算机支持更多语言,通常使用 0x80~0xFF 范围的 2 个字