java源码-过滤掉超过3个字节的UTF8字符

javazx

在开发中发现有些特殊的字符无法正常存到mysql数据库中，列如qq昵称中加入苹果手机中的表情就导致无法正常保存，后来查了一下原因：mysql数据库是可以支持4字节的utf8字符的，不过大部分情况，这个选项是没有打开的，已创建的数据库也不可以更改，所以，在这种情况下，只好把4字节的utf8字符过滤掉，而汉字是3字节的utf8字符，不影响汉字部分，最后终于找到了一个解决的办法，但是办法虽然找到了却发现自己对于java基础知识掌握的还是不深刻的，列如16进制、异或运算等等，都是我们最初在学校学习java的知识，但是现在终于看到了他的重要性了。java论坛

$ h8 X4 M/ q1 r3 C
& w; \6 U; _; b- Timport java.io.UnsupportedEncodingException;
import java.nio.ByteBuffer;
+ b3 {. [2 R. L, k4 Q. Y2 U
7 ^7 ~' h; ~- [+ }5 `# ]
public class Test {

$ t% c# G$ t' v, A' H5 A
        public static void main(String[] args) throws UnsupportedEncodingException {
                String nickName = "得😩得得😩";
                System.out.println(filterOffUtf8Mb4(nickName));
  f* y+ ?% s; y- F8 {  X        }

1 N# P0 G, u  |/ [* R6 C, `
        public static String filterOffUtf8Mb4(String text)
                        throws UnsupportedEncodingException {
  u/ J! a: t; h3 h0 Y
- C; r, e3 r+ }* m% Y# Z" v
0 z- B( r$ Z0 R) R; `  }8 f                byte[] bytes = text.getBytes("utf-8");

, ^: b$ a" u, Y
6 f+ J* K3 n/ Q7 j  D                ByteBuffer buffer = ByteBuffer.allocate(bytes.length);
3 _0 ^% w+ U; d% }
% n; E( J9 B4 o
! |6 K. Q1 x: `6 o                int i = 0;
# p8 q- C$ H/ a0 j* ~! d
7 G" I1 {6 O' u: @
. K+ m, p5 M0 ], K4 C3 G( P                while (i < bytes.length) {


                        short b = bytes;
, T- H6 a2 w- s6 O' L' t# L" |

                        if (b > 0) {
4 b0 Y1 e$ O" m. S# t

" \/ x# _' l* L: i9 e  w9 A" y                                buffer.put(bytes[i++]);
- [2 m! {) ^, j5 B0 v- o; z& b( [6 F6 S
$ i! n2 n- G& o3 {8 s3 Q
                                continue;
8 q- d2 M9 p7 C
5 T% E. K7 P* K  t: y& N
! X7 @- H, ?3 }$ a                        }
, J8 w+ v8 U( j. C+ J7 h

3 n1 O0 H. \; m) t/ D8 a/ g. {                        b += 256;


) b/ d, m- N" ]/ [# O  a' _* y# p                        if ((b ^ 0xC0) >> 4 == 0) {
( ^. J2 u7 r4 |0 L% R4 y
2 _, R9 e% u9 m# B. ^5 O, t
" M- t7 P% f) _/ b                                buffer.put(bytes, i, 2);
; a5 e1 m" ?& g) ]  M8 w

                                i += 2;
1 W2 O& ~1 r& e5 ~0 W

                        }
6 A! L( E% X! U( t1 ^

                        else if ((b ^ 0xE0) >> 4 == 0) {


                                buffer.put(bytes, i, 3);

, k; @% x* a: b) J, v. o% [
( M0 t; q" s# K- I" |  T                                i += 3;

0 i; \& a1 v* G" [
/ R( h$ e* L4 |& O. Z% j                        }
* @1 r' j4 q, Y" U

                        else if ((b ^ 0xF0) >> 4 == 0) {


                                i += 4;


0 C3 L4 v4 Q& J3 s0 K  j                        }
( x8 {: S8 g# ]$ R                        // 添加处理如b的指为-48等情况出现的死循环
! `6 {. Q4 N% m                        else {
& S7 c, K% j+ U                                buffer.put(bytes[i++]);


$ ?5 `  {6 B6 _2 T) K                                continue;
                        }
) e# N5 {8 l/ w9 B5 V8 c  h" b
1 i; q' n5 w: k7 P0 `9 f$ U, e. w
- c% A7 j+ T& y8 [9 ^2 X                }

0 @0 m% B4 A4 s
                buffer.flip();


                return new String(buffer.array(), "utf-8");
# D- w7 O7 J4 Q! o        }


* T9 m1 d6 j' o  l$ R1 j}
; u7 g$ l: I. T. G1 T

AddisCB

不错好资源 可以用