java源码-过滤掉超过3个字节的UTF8字符

javazx

在开发中发现有些特殊的字符无法正常存到mysql数据库中，列如qq昵称中加入苹果手机中的表情就导致无法正常保存，后来查了一下原因：mysql数据库是可以支持4字节的utf8字符的，不过大部分情况，这个选项是没有打开的，已创建的数据库也不可以更改，所以，在这种情况下，只好把4字节的utf8字符过滤掉，而汉字是3字节的utf8字符，不影响汉字部分，最后终于找到了一个解决的办法，但是办法虽然找到了却发现自己对于java基础知识掌握的还是不深刻的，列如16进制、异或运算等等，都是我们最初在学校学习java的知识，但是现在终于看到了他的重要性了。java论坛

- U+ M0 U8 r7 H/ D1 _
import java.io.UnsupportedEncodingException;
import java.nio.ByteBuffer;

$ S! O# p9 U6 t$ |  r
public class Test {

$ h9 v+ D# H8 j" H) @
& u/ i' x! W& r8 O        public static void main(String[] args) throws UnsupportedEncodingException {
" G# T) k, R& B) G                String nickName = "得😩得得😩";
                System.out.println(filterOffUtf8Mb4(nickName));
        }
3 u, |" G; L7 o" ^7 W

& d* K: e* Q- r5 e1 D        public static String filterOffUtf8Mb4(String text)
                        throws UnsupportedEncodingException {
1 V: w$ W$ J; t4 M
1 U1 @) M; v  k& r0 C
9 \$ Y7 B( l* c& i% Z! A, S                byte[] bytes = text.getBytes("utf-8");


" c! E+ F- H; q% h- W                ByteBuffer buffer = ByteBuffer.allocate(bytes.length);

. G6 I2 X* G) o, T" o) K+ J
                int i = 0;
* e1 ^7 s- o; \6 W6 {- [: b

                while (i < bytes.length) {

/ v& F% m# c6 w- i2 M& z
! v) m8 v6 f1 d2 a) v5 ^                        short b = bytes;
* A; s: h! d' ?0 _$ r! b
1 U- O2 F' P8 h6 k. Z4 `2 M* k
. e4 g6 ~+ L/ q) O: l1 ?                        if (b > 0) {
. E5 v  k9 w8 L0 b( o
1 X# B; A9 D  L- x) [
  Z. ~0 l0 G$ o, u                                buffer.put(bytes[i++]);
; S/ E# B$ l; H

                                continue;
2 X  {, V! E8 X/ }' x- U+ A/ s

                        }
8 \' q0 ?0 U, ?1 a) W$ _
  n4 e- f' z1 Z. G* |% w  M
# G; ^6 G4 H) ?8 n; S                        b += 256;
* [' }/ v( ~0 @! j( X

3 `0 N+ E( h8 G, @7 d6 j( D8 C, o                        if ((b ^ 0xC0) >> 4 == 0) {
7 `2 e* @( Z# J. q+ A

6 [" `* p8 l. v* Q) k9 H                                buffer.put(bytes, i, 2);

  f* ]* \8 b9 p1 ]4 o
                                i += 2;
1 ~# n# o- C& z" A% P1 Q

+ b7 ^4 l# e! ?( j                        }

4 k0 s0 z: e  C) E( {8 y$ [
                        else if ((b ^ 0xE0) >> 4 == 0) {
  @4 ?, Z7 a2 b+ Y# I; x. F) V( ?1 x$ p

% i2 c/ a4 j' {% `/ t                                buffer.put(bytes, i, 3);

1 x- p) J: x5 Q  f! }
                                i += 3;
" k2 d/ }" z0 Q
3 |" s, w/ C% y. z' m
2 r/ n3 Y$ v8 k! `                        }
6 f  ~9 a/ _7 U" h# J

0 F' |* y$ g6 X7 K7 V$ H                        else if ((b ^ 0xF0) >> 4 == 0) {
4 m- _' Q' G  s& Q/ `* Y

                                i += 4;


( }9 a* ]" N; E0 n$ [9 r                        }
                        // 添加处理如b的指为-48等情况出现的死循环
                        else {
- E: Z  T! P. r( E                                buffer.put(bytes[i++]);


/ t" P4 v* K2 H# S                                continue;
                        }

; G  J1 M9 }0 P0 V8 r
                }
8 P- |/ m; s2 F( ?

                buffer.flip();

/ ?( f8 l- q9 S7 U1 f1 w
5 ^2 B, _, M& D5 o" d6 B( [% [                return new String(buffer.array(), "utf-8");
5 m; J& j) h2 K" `3 m        }
) @6 u7 \" F8 \; P: Z: |

}
# s6 [8 D$ P3 l5 |

AddisCB

不错好资源 可以用