数学建模社区-数学中国

标题: 深入剖析JSP和Servlet对中文的处理 [打印本页]

作者: 韩冰    时间: 2004-11-21 12:02
标题: 深入剖析JSP和Servlet对中文的处理
世界上的各地区都有本地的语言。地区差异直接导致了语言环境的差异。在开发一个国际化程序的过程中,处理语言问题就显得很重要了。
0 S  V! b$ Y" h! N5 V9 C6 |
/ S3 W5 W& ^" q9 M8 n' F  这是一个世界范围内都存在的问题,所以,Java提供了世界性的解决方法。本文描述的方法是用于处理中文的,但是,推而广之,对于处理世界上其它国家和地区的语言同样适用。
* j2 B8 D/ ^& N/ [7 ]; v' I* D9 n/ O, F" K. }' q
  汉字是双字节的。所谓双字节是指一个双字要占用两个BYTE的位置(即16位),分别称为高位和低位。中国规定的汉字编码为GB2312,这是强制性的,目前几乎所有的能处理中文的应用程序都支持GB2312。GB2312包括了一二级汉字和9区符号,高位从0xa1到0xfe,低位也是从0xa1到0xfe,其中,汉字的编码范围为0xb0a1到0xf7fe。2 g$ u( D9 @9 O# R4 Q7 Q) h
/ U/ L5 X: w# C3 p* k
  另外有一种编码,叫做GBK,但这是一份规范,不是强制的。GBK提供了20902个汉字,它兼容GB2312,编码范围为0x8140到0xfefe。GBK中的所有字符都可以一一映射到Unicode 2.0。
0 ^/ N, Y4 f; v# f: \& P
2 F0 T  Q* S8 W% Y9 R  在不久的将来,中国会颁布另一种标准:GB18030-2000(GBK2K)。它收录了藏、蒙等少数民族的字型,从根本上解决了字位不足的问题。注意:它不再是定长的。其二字节部份与GBK兼容,四字节部分是扩充的字符、字形。它的首字节和第三字节从0x81到0xfe,二字节和第四字节从0x30到0x39。
2 c$ L5 ~- k& x5 ^, c. J: K* ?4 R
0 X' z3 m4 g. X4 X+ w; K& y' C! O  本文不打算介绍Unicode,有兴趣的可以浏览“http://www.unicode.org/”查看更多的信息。Unicode有一个特性:它包括了世界上所有的字符字形。所以,各个地区的语言都可以建立与Unicode的映射关系,而Java正是利用了这一点以达到异种语言之间的转换。( ^, t+ E! P# O# w8 u

, L  t) R2 [' @- P  在JDK中,与中文相关的编码有:
- p; m7 F/ [7 S+ m& [" ^3 @
: K: r! R9 q6 [2 J: E/ X- k  表1 JDK中与中文相关的编码列表1 d4 X. d+ g$ q, a& m/ E  i5 w- @
/ Q' a* r9 m! J# i% \2 C( p; u
编码名称说明ASCII7位,与ascii7相同ISO8859-18-位,与 8859_1,ISO-8859-1,ISO_8859-1,latin1...等相同GB2312-8016位,与gb2312,gb2312-1980,EUC_CN,euccn,1381,Cp1381, 1383, Cp1383, ISO2022CN,ISO2022CN_GB...等相同GBK与MS936相同,注意:区分大小写UTF8与UTF-8相同GB18030与cp1392、1392相同,目前支持的JDK很少: S7 _9 Q* D+ N2 F2 m# D, b* A
  在实际编程时,接触得比较多的是GB2312(GBK)和ISO8859-1。5 b/ |" ~: k5 R: q! I8 |$ j

5 g' u+ I5 v) V+ p  为什么会有“?”号# K1 P: |7 @0 k, d* R8 n  P; F2 w

2 U: r- A) g7 ]  上文说过,异种语言之间的转换是通过Unicode来完成的。假设有两种不同的语言A和B,转换的步骤为:先把A转化为Unicode,再把Unicode转化为B。5 [+ z9 ~8 _5 K9 N

! Z" ^" s' G  v  a$ u# f9 H% \; U  举例说明。有GB2312中有一个汉字“李”,其编码为“C0EE”,欲转化为ISO8859-1编码。步骤为:先把“李”字转化为Unicode,得到“674E”,再把“674E”转化为ISO8859-1字符。当然,这个映射不会成功,因为ISO8859-1中根本就没有与“674E”对应的字符。4 G: N, I5 g6 U6 B
# t6 a1 A" X* I' b
  当映射不成功时,问题就发生了!当从某语言向Unicode转化时,如果在某语言中没有该字符,得到的将是Unicode的代码“\uffffd”(“\u”表示是Unicode编码,)。而从Unicode向某语言转化时,如果某语言没有对应的字符,则得到的是“0x3f”(“?”)。这就是“?”的由来。
# C/ \- f1 i. d5 A" a/ M& W* L
6 q5 [1 D( c* n( G- z- r  例如:把字符流buf =“0x80 0x40 0xb0 0xa1”进行new String(buf, "gb2312")操作,得到的结果是“\ufffd\u554a”,再println出来,得到的结果将是“?啊”,因为“0x80 0x40”是GBK中的字符,在GB2312中没有。
' d. v: h7 V9 t' q8 Q; b
& B/ x2 M& H+ @  再如,把字符串String="\u00d6\u00ec\u00e9\u0046\u00bb\u00f9"进行new String (buf.getBytes("GBK"))操作,得到的结果是“3fa8aca8a6463fa8b4”,其中,“\u00d6”在“GBK”中没有对应的字符,得到“3f”,“\u00ec”对应着“a8ac”,“\u00e9”对应着“a8a6”,“0046”对应着“46”(因为这是ASCII字符),“\u00bb”没找到,得到“3f”,最后,“\u00f9”对应着“a8b4”。把这个字符串println一下,得到的结果是“?ìéF?ù”。看到没?这里并不全是问号,因为GBK与Unicode映射的内容中除了汉字外还有字符,本例就是最好的明证。
; G" M2 o! r2 H  O6 V% I9 Z. f
4 }$ G5 N, |2 _9 p  所以,在汉字转码时,如果发生错乱,得到的不一定都是问号噢!不过,错了终究是错了,50步和100步并没有质的差别。# T# Z& X  [. M2 w8 I( f
" r1 P+ b( ^0 c6 i
  或者会问:如果源字符集中有,而Unicode中没有,结果会如何?回答是不知道。因为我手头没有能做这个测试的源字符集。但有一点是肯定的,那就是源字符集不够规范。在Java中,如果发生这种情况,是会抛出异常的。
3 k( n, R( d1 z: m1 F1 O! A
3 }- U" l8 f1 ]什么是UTF
' e' h' E' y( x, D( r- C( N8 Q. k1 ]8 O' Z3 N
  UTF,是Unicode Text Format的缩写,意为Unicode文本格式。对于UTF,是这样定义的:6 G4 \0 r; Y9 D6 N
+ v( E: ]& B$ t* z+ L
  (1)如果Unicode的16位字符的头9位是0,则用一个字节表示,这个字节的首位是“0”,剩下的7位与原字符中的后7位相同,如“\u0034”(0000 0000 0011 0100),用“34” (0011 0100)表示;(与源Unicode字符是相同的);7 W4 N5 |( [% |8 }" F# h

3 U/ B- O) T- C) n0 t: f/ s  (2)如果Unicode的16位字符的头5位是0,则用2个字节表示,首字节是“110”开头,后面的5位与源字符中除去头5个零后的最高5位相同;第二个字节以“10”开头,后面的6位与源字符中的低6位相同。如“\u025d”(0000 0010 0101 1101),转化后为“c99d”(1100 1001 1001 1101);
" a0 G$ T7 M( j3 T5 ]( G. ?* O$ d* P9 Y7 v
  (3)如果不符合上述两个规则,则用三个字节表示。第一个字节以“1110”开头,后四位为源字符的高四位;第二个字节以“10”开头,后六位为源字符中间的六位;第三个字节以“10”开头,后六位为源字符的低六位;如“\u9da7”(1001 1101 1010 0111),转化为“e9b6a7”(1110 1001 1011 0110 1010 0111);
7 l- C$ o4 }# I) ^
9 L. {1 j+ Y# ~1 n+ P  可以这么描述JAVA程序中Unicode与UTF的关系,虽然不绝对:字符串在内存中运行时,表现为Unicode代码,而当要保存到文件或其它介质中去时,用的是UTF。这个转化过程是由writeUTF和readUTF来完成的。
/ }# g* D% o1 S9 x& u& Y: n- I) ?5 b
  好了,基础性的论述差不多了,下面进入正题。
/ i# i! w3 M; u, Y: z! v) W; S6 k. b" B+ G, {
  先把这个问题想成是一个黑匣子。先看黑匣子的一级表示:
$ A) b# A% a5 `; R# [2 {, H6 ]+ X
input(charsetA)->process(Unicode)->output(charsetB)
5 q5 g2 Z+ D+ L6 |6 L
7 \: @4 t3 u* }# |/ M9 K  简单,这就是一个IPO模型,即输入、处理和输出。同样的内容要经过“从charsetA到unicode再到charsetB”的转化。' R5 J/ o6 h1 X. z/ J9 U% N

9 c/ L2 y# W3 g1 C* W  再看二级表示:
6 g" Q$ l- B! R, D- w
  n2 v1 W( A2 R* P2 B0 F$ _' L, OSourceFile(jsp,java)->class->output8 ?0 D, @' c- h. y9 h6 g) @' |, q- d

4 w& T; ]( t, I  在这个图中,可以看出,输入的是jsp和java源文件,在处理过程中,以Class文件为载体,然后输出。再细化到三级表示:7 u! O) y/ O  l  y( j0 M
) n$ P! W- @1 {8 w9 F
jsp->temp file->class->browser,os console,db
  F% P; J! J5 w- ~2 X+ {# Z
7 U( @4 Q* F1 _1 C1 A7 m' oapp,servlet->class->browser,os console,db
' r/ R2 U/ ]+ w0 c
2 u* ^7 S. F1 K* z. v" ~  这个图就更明白了。Jsp文件先生成中间的Java文件,再生成Class。而Servlet和普通App则直接编译生成Class。然后,从Class再输出到浏览器、控制台或数据库等。; e# K$ [7 V: ~3 E- j" I
# b, O, u2 n  t+ M- J" a
  JSP:从源文件到Class的过程- Z" A' }$ z, e5 I! y

! e! M4 Y, J( f% s/ y  Jsp的源文件是以“.jsp”结尾的文本文件。在本节中,将阐述JSP文件的解释和编译过程,并跟踪其中的中文变化。9 I7 ^" [; I7 d
  u6 E* p- z# ^) ~
  1、JSP/Servlet引擎提供的JSP转换工具(jspc)搜索JSP文件中用<%@ page contentType ="text/html; charset=<Jsp-charset>"%>中指定的charset。如果在JSP文件中未指定<Jsp-charset>,则取JVM中的默认设置file.encoding,一般情况下,这个值是ISO8859-1;+ K* a5 x4 g9 }6 d# d
3 f2 g, Y0 h+ j5 N/ W  G& r
  2、jspc用相当于“javac –encoding <Jsp-charset>”的命令解释JSP文件中出现的所有字符,包括中文字符和ASCII字符,然后把这些字符转换成Unicode字符,再转化成UTF格式,存为JAVA文件。ASCII码字符转化为Unicode字符时只是简单地在前面加“00”,如“A”,转化为“\u0041”(不需要理由,Unicode的码表就是这么编的)。然后,经过到UTF的转换,又变回“41”了!这也就是可以使用普通文本编辑器查看由JSP生成的JAVA文件的原因;& ~2 t+ |1 Q9 r! Q# ]

1 G5 G$ h+ G1 d) o( z3 {  3、引擎用相当于“javac –encoding UNICODE”的命令,把JAVA文件编译成CLASS文件;* m$ g. f$ c+ D7 W
" V* D  ^- F7 @% `
  先看一下这些过程中中文字符的转换情况。有如下源代码:$ _$ [( ^* o3 W; ?0 r
* n; C( ?9 ?6 A. e' G& D( W0 F
<%@ page contentType="text/html; charset=gb2312"%>
) }; N/ t7 U6 C4 }  w  M4 _) i<html><body>2 d7 I- [9 ?1 m, U, r, }
<%
( I) U- s5 G- D+ k0 f& d! m; c" _ String a="中文";
; e; L: @. y  w) H out.println(a);
- R2 N4 ?: F: ^$ X+ R" q; \%>3 w9 g. p5 @* V$ q) m  i
</body></html>
  u* t5 H2 t1 T  这段代码是在UltraEdit for Windows上编写的。保存后,“中文”两个字的16进制编码为“D6 D0 CE C4”(GB2312编码)。经查表,“中文”两字的Unicode编码为“\u4E2D\u6587”,用 UTF表示就是“E4 B8 AD E6 96 87”。打开引擎生成的由JSP文件转变而成的JAVA文件,发现其中的“中文”两个字确实被“E4 B8 AD E6 96 87”替代了,再查看由JAVA文件编译生成的CLASS文件,发现结果与JAVA文件中的完全一样。/ m" V/ p5 \- O1 C+ S" m6 b4 n0 N: ?

! O# H0 S# l! Y, T5 p6 s& R  再看JSP中指定的CharSet为ISO-8859-1的情况。; T1 V+ V5 D$ e8 R' g( m' J
; z' S5 U! O- t- p6 o0 q* O
5 |% h0 n! u) n, \* l2 X
<%@ page contentType="text/html; charset=ISO-8859-1"%>$ M$ O% X7 I2 O3 A' ~% Q
<html><body>
6 i. ^1 G& S0 a; g$ ~7 F1 ^: V<%( ^3 c9 o. B  r/ |
 String a="中文";; P) _! ~, A0 Y% L7 ]/ V* y
 out.println(a);# c$ o: C; Z$ L8 i
%>
; A  \4 r# ^% H</body></html># x* C6 w' I9 O2 d
  同样,该文件是用UltraEdit编写的,“中文”这两个字也是存为GB2312编码“D6 D0 CE C4”。先模拟一下生成的JAVA文件和CLASS文件的过程:jspc用ISO-8859-1来解释“中文”,并把它映射到Unicode。由于ISO-8859-1是8位的,且是拉丁语系,其映射规则就是在每个字节前加“00”,所以,映射后的Unicode编码应为“\u00D6\u00D0\u00CE\u00C4”,转化成UTF后应该是“C3 96 C3 90 C3 8E C3 84”。好,打开文件看一下,JAVA文件和CLASS文件中,“中文”果然都表示为“C3 96 C3 90 C3 8E C3 84”。2 U1 r2 L9 Y3 {/ a

& U7 o' \9 b. z" Y$ G4 K  如果上述代码中不指定<Jsp-charset>,即把第一行写成“<%@ page contentType="text/html" %>”,JSPC会使用file.encoding的设置来解释JSP文件。在RedHat 6.2上,其处理结果与指定为ISO-8859-1是完全相同的。+ k; ]3 I8 x$ K+ k& _
+ Q- ]6 D1 C0 U3 j% |% }
  到现在为止,已经解释了从JSP文件到CLASS文件的转变过程中中文字符的映射过程。一句话:从“JspCharSet到Unicode再到UTF”。下表总结了这个过程:; ~8 `" G9 s- Z7 }% f# ]

; Y8 R3 S2 b5 {" p$ T  A  表2 “中文”从JSP到CLASS的转化过程
/ G  }" w- _& {/ a. r' Y" {
3 x  H, d7 f4 z/ K8 r: r7 X6 }( F3 l. r. s7 O3 `, R) ~
Jsp-CharSetJSP文件中JAVA文件中CLASS文件中GB2312D6 D0 CE C4(GB2312)从\u4E2D\u6587(Unicode)到E4 B8 AD E6 96 87 (UTF)E4 B8 AD E6 96 87 (UTF)ISO-8859-1D6 D0 CE C4
6 ^* P/ ^; ^) B1 j4 V(GB2312)从\u00D6\u00D0\u00CE\u00C4 (Unicode)到C3 96 C3 90 C3 8E C3 84 (UTF)C3 96 C3 90 C3 8E C3 84 (UTF)无(默认=file.encoding)同ISO-8859-1同ISO-8859-1同ISO-8859-1
1 ~' p+ c& [$ ]6 m0 X  下节先讨论Servlet从JAVA文件到CLASS文件的转化过程,然后再解释从CLASS文件如何输出到客户端。之所以这样安排,是因为JSP和Servlet在输出时处理方法是一样的。
作者: 韩冰    时间: 2004-11-21 12:04
Servlet:从源文件到Class的过程
# u- r7 u5 K6 j3 L7 v0 S7 R- ]2 A' C, G
  Servlet源文件是以“.java”结尾的文本文件。本节将讨论Servlet的编译过程并跟踪其中的中文变化。
$ b2 D. O+ c, {9 U/ i4 V" U- F* J$ B/ Z6 C0 F2 i. e6 q7 C
  用“javac”编译Servlet源文件。javac可以带“-encoding <Compile-charset>”参数,意思是“用< Compile-charset >中指定的编码来解释Serlvet源文件”。
+ P7 m  @% [1 _5 l
- o( u# V( H  s5 Y4 E4 S  源文件在编译时,用<Compile-charset>来解释所有字符,包括中文字符和ASCII字符。然后把字符常量转变成Unicode字符,最后,把Unicode转变成UTF。
, @1 N# w5 u% E/ x% R+ w
1 x2 N- s5 i- v3 G# p5 \% w: A  在Servlet中,还有一个地方设置输出流的CharSet。通常在输出结果前,调用HttpServletResponse的setContentType方法来达到与在JSP中设置<Jsp-charset>一样的效果,称之为<Servlet-charset>。
' i0 [* ?$ H, f; K
2 d- b6 [' o8 ]. J  注意,文中一共提到了三个变量:<Jsp-charset>、<Compile-charset>和<Servlet-charset>。其中,JSP文件只与<Jsp-charset>有关,而<Compile-charset>和<Servlet-charset>只与Servlet有关。
! D0 }9 ?  n. o& h% s- I6 m+ O* P- Y# {( a9 w2 V
  看下例:# J& \  I. d/ \

/ w2 v. r" q* O4 d& Fimport javax.servlet.*;
# b. J$ V% N1 S$ s+ W0 k: x& c# }- v4 B+ l
import javax.servlet.http.*;3 N/ x- H- l3 `! @) I' E

+ K2 {) V5 j7 i; @+ Iclass testServlet extends HttpServlet0 F) Y$ R! L4 n: R# Q) X
{
" H) G8 `3 X7 B public void doGet(HttpServletRequest req,HttpServletResponse resp)' _+ Q0 @: l) [1 y" r9 W9 f6 }0 _- ]8 ^
 throws ServletException,java.io.IOException
: m- L( C1 \: {9 X {
- C( h. Y: |$ ^5 T  resp.setContentType("text/html; charset=GB2312");
6 u& W) U4 t8 J% F4 U; r0 P' F# ~  java.io.PrintWriter out=resp.getWriter();
% X: S/ r9 I5 m7 F: n* F  ]  out.println("<html>");
6 Q% o, J# {- j2 M  out.println("#中文#");
* G2 z. w! [  J6 S  out.println("</html>");
; w" C. H' Q0 d2 C) I }4 U. x$ m- ?3 W9 u2 T
}
% v  ~- J$ f' Z  f  该文件也是用UltraEdit for Windows编写的,其中的“中文”两个字保存为“D6 D0 CE C4”(GB2312编码)。. v& A" G: ]# I
8 z9 L% {5 U6 s2 L& q) I
  开始编译。下表是<Compile-charset>不同时,CLASS文件中“中文”两字的十六进制码。在编译过程中,<Servlet-charset>不起任何作用。<Servlet-charset>只对CLASS文件的输出产生影响,实际上是<Servlet-charset>和<Compile-charset>一起,达到与JSP文件中的<Jsp-charset>相同的效果,因为<Jsp-charset>对编译和CLASS文件的输出都会产生影响。
' y5 G5 d* k8 y' r' O' M5 r$ }! ?3 z) Q* F
  表3 “中文”从Servlet源文件到Class的转变过程1 ]5 {- D0 f/ ~) _7 u' `! Y
2 e" |. |) s# R" E3 ~
Compile-charsetServlet源文件中Class文件中等效的Unicode码GB2312D6 D0 CE C4
. p( e& u! [9 j: w/ o(GB2312)E4 B8 AD E6 96 87 (UTF)\u4E2D\u6587 (在Unicode中=“中文”)ISO-8859-1D6 D0 CE C4 : Q* j" h! Z% O1 R2 F
(GB2312)C3 96 C3 90 C3 8E C3 84 (UTF)\u00D6 \u00D0 \u00CE \u00C4 (在D6 D0 CE C4前面各加了一个00)无(默认)D6 D0 CE C4 (GB2312)同ISO-8859-1同ISO-8859-1
( t; A3 t5 h9 |" W  普通Java程序的编译过程与Servlet完全一样。! Z" m3 E% X9 w6 a( p

1 |: L7 j* U9 c  CLASS文件中的中文表示法是不是昭然若揭了?OK,接下来看看CLASS又是怎样输出中文的呢?
$ {6 Z( T6 B* k4 C# l, U
' [1 j( @5 Y) z0 p3 `  Class:输出字符串  {9 }9 ], R3 N3 ?
) ]( h. _. B: G6 _* r
  上文说过,字符串在内存中表现为Unicode编码。至于这种Unicode编码表示了什么,那要看它是从哪种字符集映射过来的,也就是说要看它的祖先。这好比在托运行李时,外观都是纸箱子,里面装了什么就要看寄邮件的人实际邮了什么东西。
9 H; p' \: U% n5 n' D7 T
" Q: a# I2 }2 ]7 O& j  看看上面的例子,如果给一串Unicode编码“00D6 00D0 00CE 00C4”,如果不作转换,直接用Unicode码表来对照它时,是四个字符(而且是特殊字符);假如把它与“ISO8859-1”进行映射,则直接去掉前面的“00”即可得到“D6 D0 CE C4”,这是ASCII码表中的四个字符;而假如把它当作GB2312来进行映射,得到的结果很可能是一大堆乱码,因为在GB2312中有可能没有(也有可能有)字符与00D6等字符对应(如果对应不上,将得到0x3f,也就是问号,如果对应上了,由于00D6等字符太靠前,估计也是一些特殊符号,真正的汉字在Unicode中的编码从4E00开始)。
: ~$ C1 l7 J: {: F4 q4 l/ b* O3 l# z/ Z+ E4 B
  各位看到了,同样的Unicode字符,可以解释成不同的样子。当然,这其中有一种是我们期望的结果。以上例而论,“D6 D0 CE C4”应该是我们所想要的,当把“D6 D0 CE C4”输出到IE中时,用“简体中文”方式查看,就能看到清楚的“中文”两个字了。(当然了,如果你一定要用“西欧字符”来看,那也没办法,你将得不到任何有何时何地的东西)为什么呢?因为“00D6 00D0 00CE 00C4”本来就是由ISO8859-1转化过去的。* w& l+ C1 ?* ^
8 I$ i4 l* M0 ]! X' I$ r
给出如下结论:- E4 d  f5 {) c
  q& N7 @( }& E3 x5 e
  在Class输出字符串前,会将Unicode的字符串按照某一种内码重新生成字节流,然后把字节流输入,相当于进行了一步“String.getBytes(???)”操作。???代表某一种字符集。
' R, ^% r7 i% @+ E/ u- ^' w! W$ j* |' R$ U
  如果是Servlet,那么,这种内码就是在HttpServletResponse.setContentType()方法中指定的内码,也就是上文定义的<Servlet-charset>。1 D, u& h, b* A3 a/ J
' X; a' ?1 c8 o8 U( x$ G6 P) K8 \' d
  如果是JSP,那么,这种内码就是在<%@ page contentType=""%>中指定的内码,也就是上文定义的<Jsp-charset>。. s3 p( |0 p5 g) D6 n
/ w6 |- \" Y2 W$ U. V( D' V
  如果是Java程序,那么,这种内码就是file.encoding中指定的内码,默认为ISO8859-1。4 L5 v1 x5 Z4 _  k. ~) r7 z

/ `2 L, F) ^$ r+ D  当输出对象是浏览器时
$ g! E2 f" G/ w& K% p( S& g- G# X$ j: M6 D
  以流行的浏览器IE为例。IE支持多种内码。假如IE接收到了一个字节流“D6 D0 CE C4”,你可以尝试用各种内码去查看。你会发现用“简体中文”时能得到正确的结果。因为“D6 D0 CE C4”本来就是简体中文中“中文”两个字的编码。
4 [; x' T  f' J; w0 J
: b/ ^" b* n0 k1 |! ^  OK,完整地看一遍。! P5 E2 U. N& [' b, F- u

" U' {* |" j; F# n' g: q" g" I  JSP:源文件为GB2312格式的文本文件,且JSP源文件中有“中文”这两个汉字6 V+ u) [; s; H4 p9 D

. D  T4 q. e1 X0 m8 M% F  如果指定了<Jsp-charset>为GB2312,转化过程如下表。
( {* x, y9 [/ q5 T8 ^8 N( z- Y/ e9 X1 A
  表4 Jsp-charset = GB2312时的变化过程
# k% t* X6 f1 U+ ~; p
3 x. ]/ E0 z* l+ h1 h8 y& J序号步骤说明结果1编写JSP源文件,且存为GB2312格式D6 D0 CE C4- L" ^6 s& u% u/ v& U) c0 I0 L
(D6D0=中 CEC4=文)2jspc把JSP源文件转化为临时JAVA文件,并把字符串按照GB2312映射到Unicode,并用UTF格式写入JAVA文件中E4 B8 AD E6 96 873把临时JAVA文件编译成CLASS文件E4 B8 AD E6 96 874运行时,先从CLASS文件中用readUTF读出字符串,在内存中的是Unicode编码4E 2D 65 87(在Unicode中4E2D=中 6587=文)5根据Jsp-charset=GB2312把Unicode转化为字节流D6 D0 CE C46把字节流输出到IE中,并设置IE的编码为GB2312(作者按:这个信息隐藏在HTTP头中)D6 D0 CE C47IE用“简体中文”查看结果“中文”(正确显示)
; R$ g# I4 L1 O0 v: Q; k% R& p  如果指定了<Jsp-charset>为ISO8859-1,转化过程如下表。* }4 d4 {# _. \# H$ |# M

3 x  z: Y: j2 [/ d* y6 z& ~0 [" j; w  表5 Jsp-charset = ISO8859-1时的变化过程+ a( P, T) A9 q, K3 e0 a
' U; s; T0 D: N$ U/ e" V; O
序号步骤说明结果1编写JSP源文件,且存为GB2312格式D6 D0 CE C4
" O- `6 F  n# X7 l; d0 S$ B(D6D0=中 CEC4=文)2jspc把JSP源文件转化为临时JAVA文件,并把字符串按照ISO8859-1映射到Unicode,并用UTF格式写入JAVA文件中C3 96 C3 90 C3 8E C3 843把临时JAVA文件编译成CLASS文件C3 96 C3 90 C3 8E C3 844运行时,先从CLASS文件中用readUTF读出字符串,在内存中的是Unicode编码00 D6 00 D0 00 CE 00 C4
% q7 i! \+ h2 U& i0 }(啥都不是!!!)5根据Jsp-charset=ISO8859-1把Unicode转化为字节流D6 D0 CE C46把字节流输出到IE中,并设置IE的编码为ISO8859-1(作者按:这个信息隐藏在HTTP头中)D6 D0 CE C47IE用“西欧字符”查看结果乱码,其实是四个ASCII字符,但由于大于128,所以显示出来的怪模怪样8改变IE的页面编码为“简体中文”“中文”(正确显示)" S! D, L3 W! r) I( R
  奇怪了!为什么把<Jsp-charset>设成GB2312和ISO8859-1是一个样的,都能正确显示?因为表4表5中的第2步和第5步互逆,是相互“抵消”的。只不过当指定为ISO8859-1时,要增加第8步操作,殊为不便。+ [, f5 k, W: c  m4 o  J1 C

5 Z) y8 D; {8 M* X% u& d; q  再看看不指定<Jsp-charset> 时的情况。
! ~  I; k" t. W/ R# H, z1 P7 ?% a5 _9 L/ u1 j, I4 x( q7 y
  表6 未指定Jsp-charset 时的变化过程  ~: r* P6 A7 {  X0 `

0 b" k* x! x# x! b. y0 r# B序号步骤说明结果1编写JSP源文件,且存为GB2312格式D6 D0 CE C4- I7 ?5 P8 M; O* U/ Q2 D7 v
(D6D0=中 CEC4=文)2jspc把JSP源文件转化为临时JAVA文件,并把字符串按照ISO8859-1映射到Unicode,并用UTF格式写入JAVA文件中C3 96 C3 90 C3 8E C3 843把临时JAVA文件编译成CLASS文件C3 96 C3 90 C3 8E C3 844运行时,先从CLASS文件中用readUTF读出字符串,在内存中的是Unicode编码00 D6 00 D0 00 CE 00 C45根据Jsp-charset=ISO8859-1把Unicode转化为字节流D6 D0 CE C46把字节流输出到IE中D6 D0 CE C47IE用发出请求时的页面的编码查看结果视情况而定。如果是简体中文,则能正确显示,否则,需执行表5中的第8步
+ z8 d$ ^4 d4 p) B  Servlet:源文件为JAVA文件,格式是GB2312,源文件中含有“中文”这两个汉字
. C3 r4 r7 o) k( W  H- Y( a5 w
  S8 A) M$ O2 m$ X  如果<Compile-charset>=GB2312,<Servlet-charset>=GB2312$ R7 F$ Q3 j5 c6 T& r

# e: _  k) [0 D8 b% I0 k5 X  表7 Compile-charset=Servlet-charset=GB2312 时的变化过程
$ _) `8 H' n: u
4 ~3 P& v6 l0 D5 G! p序号步骤说明结果1编写Servlet源文件,且存为GB2312格式D6 D0 CE C43 b. D" o$ |' ^0 e* v+ j
(D6D0=中 CEC4=文)2用javac –encoding GB2312把JAVA源文件编译成CLASS文件E4 B8 AD E6 96 87 (UTF)3运行时,先从CLASS文件中用readUTF读出字符串,在内存中的是Unicode编码4E 2D 65 87 (Unicode)4根据Servlet-charset=GB2312把Unicode转化为字节流D6 D0 CE C4 (GB2312)5把字节流输出到IE中并设置IE的编码属性为Servlet-charset=GB2312D6 D0 CE C4 (GB2312)6IE用“简体中文”查看结果“中文”(正确显示)1 A7 b6 N" V4 \4 N0 S
  如果<Compile-charset>=ISO8859-1,<Servlet-charset>=ISO8859-1
8 `$ M7 e+ J# T: p- R' b
0 s: J" e; x4 C) M  R, x  表8 Compile-charset=Servlet-charset=ISO8859-1时的变化过程# |! |! z0 h4 h5 X) T

8 |% Z  `( u' H+ W序号步骤说明结果1编写Servlet源文件,且存为GB2312格式D6 D0 CE C4& {4 a, b! F. _8 Z; \' `8 p
(D6D0=中 CEC4=文)2用javac –encoding ISO8859-1把JAVA源文件编译成CLASS文件C3 96 C3 90 C3 8E C3 84 (UTF)3运行时,先从CLASS文件中用readUTF读出字符串,在内存中的是Unicode编码00 D6 00 D0 00 CE 00 C44根据Servlet-charset=ISO8859-1把Unicode转化为字节流D6 D0 CE C45把字节流输出到IE中并设置IE的编码属性为Servlet-charset=ISO8859-1D6 D0 CE C4 (GB2312)6IE用“西欧字符”查看结果乱码(原因同表5)7改变IE的页面编码为“简体中文”“中文”(正确显示)
7 n0 m' H4 K2 v8 [  c  如果不指定Compile-charset或Servlet-charset,其默认值均为ISO8859-1。3 x0 N( ~' \# C9 B
# ~; P% {* d' [# V3 x+ q
  当Compile-charset=Servlet-charset时,第2步和第4步能互逆,“抵消”,显示结果均能正确。读者可试着写一下Compile-charset<>Servlet-charset时的情况,肯定是不正确的。
0 ^6 N8 W& q0 E, z. z* `- z* M$ a: H2 z- H$ Q
  当输出对象是数据库时8 e( s6 h# Q# a* l! Z
# [$ M( y! R! R2 }2 d& O
  输出到数据库时,原理与输出到浏览器也是一样的。本节只是Servlet为例,JSP的情况请读者自行推导。
. `, f) K( a9 t/ v% ?2 F' p2 e' \7 x4 [5 c  D* Y
  假设有一个Servlet,它能接收来自客户端(IE,简体中文)的汉字字符串,然后把它写入到内码为ISO8859-1的数据库中,然后再从数据库中取出这个字符串,显示到客户端。
% v- z/ U* @) Q( |% r1 G. I& J# `
2 j+ n0 i! \. O& X" k  V7 ?  表9 输出对象是数据库时的变化过程(1)" v3 u  q/ j. i2 a0 S
/ n3 e. A6 p; }
序号步骤说明结果域1在IE中输入“中文”D6 D0 CE C4IE2IE把字符串转变成UTF,并送入传输流中E4 B8 AD E6 96 873Servlet接收到输入流,用readUTF读取4E 2D 65 87(unicode)Servlet4编程者在Servlet中必须把字符串根据GB2312还原为字节流D6 D0 CE C45编程者根据数据库内码ISO8859-1生成新的字符串00 D6 00 D0 00 CE 00 C46把新生成的字符串提交给JDBC00 D6 00 D0 00 CE 00 C47JDBC检测到数据库内码为ISO8859-100 D6 00 D0 00 CE 00 C4JDBC8JDBC把接收到的字符串按照ISO8859-1生成字节流D6 D0 CE C49JDBC把字节流写入数据库中D6 D0 CE C410完成数据存储工作D6 D0 CE C4 数据库以下是从数据库中取出数的过程11JDBC从数据库中取出字节流D6 D0 CE C4JDBC12JDBC按照数据库的字符集ISO8859-1生成字符串,并提交给Servlet00 D6 00 D0 00 CE 00 C4 (Unicode) 13Servlet获得字符串00 D6 00 D0 00 CE 00 C4 (Unicode)Servlet14编程者必须根据数据库的内码ISO8859-1还原成原始字节流D6 D0 CE C4 15编程者必须根据客户端字符集GB2312生成新的字符串4E 2D 65 87
# ^# e+ x& R, B! ~" z(Unicode) Servlet准备把字符串输出到客户端16Servlet根据<Servlet-charset>生成字节流D6D0 CE C4Servlet17Servlet把字节流输出到IE中,如果已指定<Servlet-charset>,还会设置IE的编码为<Servlet-charset>D6 D0 CE C418IE根据指定的编码或默认编码查看结果“中文”(正确显示)IE
7 Z- o% B% A+ g" ~1 a9 b" D  解释一下,表中第4第5步和第15第16步是用红色标记的,表示要由编码者来作转换。第4、5两步其实就是一句话:“new String(source.getBytes("GB2312"), "ISO8859-1")”。第15、16两步也是一句话:“new String(source.getBytes("ISO8859-1"), "GB2312")”。亲爱的读者,你在这样编写代码时是否意识到了其中的每一个细节呢?
5 ~' }0 m, s, \# u* d' c4 K2 S- A* }6 E/ j) T
  至于客户端内码和数据库内码为其它值时的流程,和输出对象是系统控制台时的流程,请读者自己想吧。明白了上述流程的原理,相信你可以轻松地写出来。) d  d6 e5 O$ b+ e, o
. @; E& o5 n3 g1 F2 P
  行文至此,已可告一段落了。终点又回到了起点,对于编程者而言,几乎是什么影响都没有。
( z2 u! v, Z$ c1 v% N5 X& D9 T; Z6 M
  因为我们早就被告之要这么做了。2 i" N- M% X2 Q1 I) r

& [6 ~2 C# O4 {. k9 x8 ~  ~3 R  以下给出一个结论,作为结尾。
4 Q0 i& P6 i3 c4 c) B
2 w6 o5 N& l+ S/ c+ n4 z% A  1、 在Jsp文件中,要指定contentType,其中,charset的值要与客户端浏览器所用的字符集一样;对于其中的字符串常量,不需做任何内码转换;对于字符串变量,要求能根据ContentType中指定的字符集还原成客户端能识别的字节流,简单地说,就是“字符串变量是基于<Jsp-charset>字符集的”;4 S: g+ I' Q' o" X
9 j: o5 s8 j3 `0 T
  2、 在Servlet中,必须用HttpServletResponse.setContentType()设置charset,且设置成与客户端内码一致;对于其中的字符串常量,需要在Javac编译时指定encoding,这个encoding必须与编写源文件的平台的字符集一样,一般说来都是GB2312或GBK;对于字符串变量,与JSP一样,必须“是基于<Servlet-charset>字符集的”。




欢迎光临 数学建模社区-数学中国 (http://www.madio.net/) Powered by Discuz! X2.5