java源码-过滤掉超过3个字节的UTF8字符

javazx

在开发中发现有些特殊的字符无法正常存到mysql数据库中，列如qq昵称中加入苹果手机中的表情就导致无法正常保存，后来查了一下原因：mysql数据库是可以支持4字节的utf8字符的，不过大部分情况，这个选项是没有打开的，已创建的数据库也不可以更改，所以，在这种情况下，只好把4字节的utf8字符过滤掉，而汉字是3字节的utf8字符，不影响汉字部分，最后终于找到了一个解决的办法，但是办法虽然找到了却发现自己对于java基础知识掌握的还是不深刻的，列如16进制、异或运算等等，都是我们最初在学校学习java的知识，但是现在终于看到了他的重要性了。java论坛


import java.io.UnsupportedEncodingException;
import java.nio.ByteBuffer;
5 m" v! }0 \' X$ N  F3 ?* J6 S1 N! V

' @3 \* `  [6 `. u$ n- Apublic class Test {
! s: q/ B3 I) d5 m  M  A
8 u% ~+ @8 E2 Q4 E, t
        public static void main(String[] args) throws UnsupportedEncodingException {
                String nickName = "得😩得得😩";
& ]  o7 h8 m  p5 R" s" s/ w7 p' T                System.out.println(filterOffUtf8Mb4(nickName));
$ E5 y* w  G0 _+ _        }


& n% w! _+ O: ~: j5 r        public static String filterOffUtf8Mb4(String text)
4 E9 b, ~" H+ d4 d0 A                        throws UnsupportedEncodingException {


0 t4 y7 j) H; c/ i4 }2 Z, `, V                byte[] bytes = text.getBytes("utf-8");


6 _* C1 [1 Q- N1 }: h                ByteBuffer buffer = ByteBuffer.allocate(bytes.length);

) t& y" G$ b# T6 z* _/ u
( }! _5 @$ |2 u' K  C/ z- Y% y                int i = 0;


( [; p9 H) N0 }/ i, a' R                while (i < bytes.length) {
- A! B) s3 g! o. |) [) ?8 t' d
! P+ S) W1 o$ T( W4 W9 s" e" [& |
" [5 p  v6 L+ t$ v                        short b = bytes;
) B# {% G* H* E9 O2 |  M

                        if (b > 0) {

  p4 H% k9 j( M5 C8 l8 Z) e' a
6 ]9 V7 q' Q5 O! r/ a3 L9 B                                buffer.put(bytes[i++]);

/ @1 a2 `' a; |% R4 q: }
                                continue;

, y8 s5 R) G) Q# j( X9 S6 A1 _6 t% O
/ N8 q& C+ K, j1 E4 s7 x6 \                        }
1 o+ N: ~( e2 n# U
4 j- N/ C$ ~% {1 W
, D5 @) o7 ~7 U) i                        b += 256;


% W- p" P: \# I, z" o) s+ y                        if ((b ^ 0xC0) >> 4 == 0) {
8 Q+ T5 `$ i2 \% S* T
8 K8 [0 e0 M# S% N
/ n7 p% B" v$ b2 e( E% x( f                                buffer.put(bytes, i, 2);
/ c' d: V% w( Q  p

8 S4 r2 G  n; c4 V                                i += 2;
5 U* D1 `4 h* v

                        }
3 N4 k0 I% I# {; N- \; z

# J+ l$ k7 x. l( I9 r                        else if ((b ^ 0xE0) >> 4 == 0) {

9 x/ \. C3 N% T4 M& F
                                buffer.put(bytes, i, 3);
0 D! B; B8 y) ^2 E  Z# V

                                i += 3;

7 O, t4 x6 R7 f  l7 J# s
                        }
( {! l9 K- q4 S& y& P* u

  U% \$ ]- N/ q& F                        else if ((b ^ 0xF0) >> 4 == 0) {
6 N3 A  D+ r0 d9 R

8 Y0 W/ G" Z* k$ Y! ]                                i += 4;


                        }
                        // 添加处理如b的指为-48等情况出现的死循环
                        else {
; S2 W& a( D0 F1 [4 d1 o' p                                buffer.put(bytes[i++]);
+ h& t; _* U1 z0 D

                                continue;
( x" t! Q# ]6 T) ^: x- B                        }


: \- p! V$ {8 x- A5 Q# b                }
6 O' n( s+ Q5 T& T6 ^# V

                buffer.flip();

  W9 M4 x1 R0 a* k( `
( B! v9 L) _+ S* T                return new String(buffer.array(), "utf-8");
( R8 {9 P4 }- k& a        }


}
' p& d3 G: A  j, m+ Q

! e6 i/ d7 H1 _* }& @/ z: s

AddisCB

不错好资源 可以用