java源码-过滤掉超过3个字节的UTF8字符

javazx

在开发中发现有些特殊的字符无法正常存到mysql数据库中，列如qq昵称中加入苹果手机中的表情就导致无法正常保存，后来查了一下原因：mysql数据库是可以支持4字节的utf8字符的，不过大部分情况，这个选项是没有打开的，已创建的数据库也不可以更改，所以，在这种情况下，只好把4字节的utf8字符过滤掉，而汉字是3字节的utf8字符，不影响汉字部分，最后终于找到了一个解决的办法，但是办法虽然找到了却发现自己对于java基础知识掌握的还是不深刻的，列如16进制、异或运算等等，都是我们最初在学校学习java的知识，但是现在终于看到了他的重要性了。java论坛

3 E" S. X8 T% k
* k3 l$ Z) }5 \/ V* {% o  N; I: jimport java.io.UnsupportedEncodingException;
import java.nio.ByteBuffer;

# p' k1 N! {7 r( a9 x
* O4 b' P+ H1 }6 n2 Z- i7 |public class Test {


7 X7 S3 b$ ?# }6 k9 H        public static void main(String[] args) throws UnsupportedEncodingException {
$ C% Q1 c/ T0 K3 |3 m                String nickName = "得😩得得😩";
                System.out.println(filterOffUtf8Mb4(nickName));
# S4 }9 t* T/ `, C        }
2 `( K6 H; O( Z. D
. w, q  t+ `+ T! e
" ^/ c) |9 ?6 E0 H3 V" e        public static String filterOffUtf8Mb4(String text)
. z5 S3 e6 t, U                        throws UnsupportedEncodingException {


% C# n: Z# q+ V1 U                byte[] bytes = text.getBytes("utf-8");
0 g8 G, W+ {0 c6 k7 Q9 @/ k

                ByteBuffer buffer = ByteBuffer.allocate(bytes.length);
, K; r4 G. x' ~1 s+ T

" U2 D7 R0 {2 D% W& [                int i = 0;
0 i& V$ d+ g+ P* f7 ?1 y

                while (i < bytes.length) {
+ j2 j" Y1 J( k% a

& L+ Q% o+ t! X5 F                        short b = bytes;
& A# f! R' X; V/ _, Y7 j
5 d- J. x) u* V  P$ m* M
                        if (b > 0) {

" @* A& u: I( I4 F  W" x$ `: n
/ P( W, c( r9 h' Y7 x' c                                buffer.put(bytes[i++]);
8 F8 |0 {: C2 s* I6 u5 b
3 v4 b% Z9 V& N, c: @
! l. I) r/ D4 {. c4 K- q5 [, w                                continue;
! d/ z* |& \  }8 y' w! s9 T

                        }


                        b += 256;
+ A2 @0 o; l$ }/ f: C

                        if ((b ^ 0xC0) >> 4 == 0) {


                                buffer.put(bytes, i, 2);
$ g5 n5 c& H: q2 m

                                i += 2;


                        }

! |: d$ Z6 z' G) b" b6 `0 {& s6 J
                        else if ((b ^ 0xE0) >> 4 == 0) {
; Z4 Y2 Q' Y) V; y, t
, \3 m* i( g5 E
; @9 ]* t/ L6 Q2 Y7 b: q+ [7 M                                buffer.put(bytes, i, 3);
$ c2 Z$ U! P- e  F+ R

                                i += 3;
% B# ^  j9 }0 J, ?/ R

                        }
3 u" @+ F1 M+ P" I9 E

                        else if ((b ^ 0xF0) >> 4 == 0) {

+ m/ Z; @0 m6 d3 `3 j  p0 l7 k. `
                                i += 4;


6 s: c) }9 U- _                        }
                        // 添加处理如b的指为-48等情况出现的死循环
( S1 y* u" t& ^8 w* _% T                        else {
                                buffer.put(bytes[i++]);


- D5 y1 |, W: _                                continue;
, t8 h+ {8 x0 S. U# G  ^+ y+ X                        }
1 n4 s% P8 ?$ V' T0 d) w
5 V+ _/ x0 O$ Z- ^$ p
/ c1 H& J) E  c8 q4 }2 x% B" l: r) o                }


                buffer.flip();
; N3 L* U& U, H2 J# @
; `+ s5 ]# P' m3 u) P3 _: n2 a" ]
                return new String(buffer.array(), "utf-8");
        }


}

AddisCB

不错好资源 可以用