java源码-过滤掉超过3个字节的UTF8字符

javazx

在开发中发现有些特殊的字符无法正常存到mysql数据库中，列如qq昵称中加入苹果手机中的表情就导致无法正常保存，后来查了一下原因：mysql数据库是可以支持4字节的utf8字符的，不过大部分情况，这个选项是没有打开的，已创建的数据库也不可以更改，所以，在这种情况下，只好把4字节的utf8字符过滤掉，而汉字是3字节的utf8字符，不影响汉字部分，最后终于找到了一个解决的办法，但是办法虽然找到了却发现自己对于java基础知识掌握的还是不深刻的，列如16进制、异或运算等等，都是我们最初在学校学习java的知识，但是现在终于看到了他的重要性了。java论坛
. u& s/ e: c$ }# d8 k* o
0 I5 X1 I1 ]4 r5 c
, B0 v$ a7 j) o: T! x- |9 pimport java.io.UnsupportedEncodingException;
( R- A0 c# T( L# D8 b/ bimport java.nio.ByteBuffer;
1 X/ g% F8 C8 M1 ~
% e1 _, Q9 @0 j7 L
public class Test {

2 Z, H5 `* N2 r6 `5 u
) Z  P6 y% u! c- N* g+ u  |3 v        public static void main(String[] args) throws UnsupportedEncodingException {
                String nickName = "得😩得得😩";
                System.out.println(filterOffUtf8Mb4(nickName));
% O2 s1 }) G% x3 m. y        }
! ?  X! X$ S0 E) t7 K6 p$ z

' S. M) |9 A* B+ J- s        public static String filterOffUtf8Mb4(String text)
1 G7 W7 b: U; V4 _9 m6 S                        throws UnsupportedEncodingException {

* q9 j( ~' U+ @2 y* g7 j# L1 c- t/ b
4 t, d; G" k; }- k2 ^0 n3 z- x                byte[] bytes = text.getBytes("utf-8");


                ByteBuffer buffer = ByteBuffer.allocate(bytes.length);
1 r' ]" c. O  e7 J7 z

                int i = 0;

- @" ^! J# _! N3 o1 y
+ d5 l- v' m4 O4 H6 ]5 a6 ~- b                while (i < bytes.length) {

6 y7 x/ _: q. i7 Q* `, Y6 O. G9 G
                        short b = bytes;

' {* U- y# A) q
1 h* A' O, ?4 W6 U) a                        if (b > 0) {


                                buffer.put(bytes[i++]);
& m. g) e" A* f  z
2 ~/ e" O6 Z& F0 u, `  t
                                continue;
% ~0 N% R' ^& x$ q- X- N2 v( X
2 D) R8 P' [+ Y4 c
: R( `( t3 b: u: z! _7 \$ j                        }


+ }, d& A! M1 Z' c                        b += 256;
; j& I* X6 _: X0 Q4 `/ s& v

1 s' ?8 T- |/ H4 l& n; K                        if ((b ^ 0xC0) >> 4 == 0) {
6 Y% g6 B* O8 w; S, R: R0 s% ^

3 b5 J+ }% X& C7 ]0 m- J                                buffer.put(bytes, i, 2);

( j7 T8 N2 A# X' d
                                i += 2;

: |9 Y% P1 `0 s0 C& C
+ f1 n/ _( C- g8 X( P0 O                        }


                        else if ((b ^ 0xE0) >> 4 == 0) {


                                buffer.put(bytes, i, 3);


  |% L! l7 _( d' u; B/ v                                i += 3;
+ O7 f  ]& l8 [0 l* n; y

                        }

! b% I( R& k5 Z) }
                        else if ((b ^ 0xF0) >> 4 == 0) {
7 ]+ k* p0 b: d3 Q- d1 o. t( b! B

) v8 @6 e4 a1 F. e, u; @                                i += 4;
' |" \' i2 N( l$ Z& X
/ G1 H% `$ U2 m' t. B$ |
6 _9 ?& \) p# B2 X" O' P                        }
                        // 添加处理如b的指为-48等情况出现的死循环
                        else {
                                buffer.put(bytes[i++]);

  z0 B; n& W7 p% a6 ^* b4 K
                                continue;
                        }
3 g! K5 F5 [: [: q2 k
8 G; v# d, T/ @
5 Q. b4 k4 @4 t+ D( j                }


2 a; {* C! ]+ U2 x9 R2 ?                buffer.flip();
0 f9 P' `" l6 N" x3 t
, b% A! n, X4 T
' E" C" ]. m6 Z                return new String(buffer.array(), "utf-8");
        }
! x+ B6 h" _- U: E) G" B  r

}


# k1 J5 D7 ^1 c7 A( q% z, [2 c. p

AddisCB

不错好资源 可以用