微信表情符号 mysql_Emoji表情符号入MySQL数据库报错的解决方案
Emoji表情符号入MySQL数据库报错的解决方案
发布时间:2020-08-15 08:21:52
来源:ITPUB博客
阅读:136
作者:bestpaydata
auther:Jane.Hoo
上周有开发人员反馈一个问题:前台应用抓取微博信息,每天总有几条数据插入不成功。应用日志显示:
java.sql.SQLException: Incorrect string value: '\xF0\x9F\x92\xAA",...' for column 'raw_json' at row 1, 异常:org.springframework.jdbc.UncategorizedSQLException:
其中raw_json字段显示如下:
由上图可知,插入的字段里面包含emoji表情符。基本可以判定是字符编码的问题。我们的数据库里面使用的是utf8编码,普通的字符串或者表情都是占位3个字节,所以utf8足够用了,但是移动端的表情符号占位是4个字节,普通的utf8就不够用了,为了应对无线互联网的机遇和挑战、避免 emoji 表情符号带来的问题、涉及无线相关的 MySQL 数据库建议都提前采用utf8mb4 字符集,这必须要作为移动互联网行业的一个技术选型的要点。
utf8与utf8mb4说明:
UTF- 8:Unicode Transformation Format-8bit,允许含BOM,但通常不含BOM。是用以解决国际上字符的一种多字节编码,它对英文使用8位(即一个字节),中文使用24为(三个字节)来
编码。UTF-8包含全世界所有国家需要用到的字符,是国际编码,通用性强。UTF-8编码的文字可以在各国支持UTF8字符集的浏览器上显示。如,如果是UTF8编码,则在外国人的英文IE上也能
显示中文,他们无需下载IE的中文语言支持包。
UTF8MB4:MySQL在5.5.3之后增加了utf8mb4的编码,mb4就是most bytes 4的意思,专门用来兼容四字节的unicode。
既然找到了原因就来执行吧.既然只有raw_json列含表情符,就先修改此列的字符集:
ALTER TABLE xx_pnl_weibo_usershow MODIFY ` raw_json` varchar(3000) CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci ;
改完后测试,插入失败。
修改表的字符集:
alter table xx_pnl_weibo_usershow CHARSET=utf8mb4 ;
改完后测试,插入失败。
修改库级别的字符集
vi /etc/my.cnf
[client]
default-character-set=utf8mb4
[mysqld]
character-set-server = utf8mb4
service mysqld restart
改完后测试,插入成功。
emoji表情编码参考:
http://punchdrunker.github.io/iOSEmoji/table_html/flower.html
因为是线上生产业务,需要先在测试环境做好测试工作。避免业务高峰期,线上申请停机窗口操作。
微信表情符号 mysql_Emoji表情符号入MySQL数据库报错的解决方案相关推荐
- Emoji表情符号录入MySQL数据库报错的解决方案
2019独角兽企业重金招聘Python工程师标准>>> 前言:手机app应用评论的时候,恢复表情符号,提示失败. 1,查看tomcat后台日志,核心报错信息如下: Caused ...
- php mysql 表情录入_Emoji表情符号录入MySQL数据库报错的解决方案
mysql> 2,先去修改表字段字符集为utf8mb4: ALTER TABLE UGC_REVIEW_CONTENT MODIFY `CONTENT` TEXT CHARACTER SET u ...
- java连服务器mysql报错_tomcat程序连接服务器mysql数据库报错
tomcat程序连接服务器mysql数据库,报 错误,后来用java程序直接连接数据库,发现可以连得上,可以操作数据库, 在网上查了设置数据库连接等待时间(wait_timeout)设置,也没用. 奇 ...
- jmeter连接MySQL出错_MySQL数据库之jmeter连接mysql数据库报错Cannot create PoolableConnectionFactory...
本文主要向大家介绍了MySQL数据库之jmeter连接mysql数据库报错Cannot create PoolableConnectionFactory ,通过具体的内容向大家展现,希望对大家学习M ...
- IDEA 2020.3 连接mysql数据库报错解决
IDEA 2020.3 连接mysql数据库报错解决 问题: Cannot connect to "Connection". The server time zone value ...
- MYSQL数据库报错 1055
MYSQL数据库报错 1055 今天在做毕业设计,当点开要查看的视图的时候,爆出了1055的错,该错误如下: 错误原因:在MySQL5.7之后,sql_mode中默认存在ONLY_FULL_GROUP ...
- 普元 AppServer 6.5 业务应用连接mysql数据库报错:java.security.UnrecoverableKeyException: Password verification fai
问题] AppServer 6.5 业务应用连接mysql数据库报错: [解答] 问题原因:mysql高版本需要指明是否进行SSL连接,当前配置的mysql连接字符串url中没有指定是否进行SSL连接 ...
- 关于MAC下pymysql连接mysql数据库报错2003的问题解决方法
关于MAC下pymysql连接mysql数据库报错2003的问题解决方法 问题:pymysql.err.OperationalError: (2003, "Can't connect to ...
- Springboot连接mysql数据库报错
Springboot连接mysql数据库报错java.sql.SQLException: Access denied for user ''@'localhost' (using password: ...
最新文章
- [原]LVM管理问题解决
- linux看到的分区重复,找到了linux分区顺序错乱修复方法
- 罗永浩直播翻车频现,抖音选错了吗?
- Bottle 框架中的装饰器类和描述符应用
- ubuntu服务器创建共享文件夹,Ubuntu samba安装创建共享目录及使用
- [Hadoop]MapReduce多路径输入与多个输入
- 使用C#和Excel进行报表开发(5)
- vue划入划出事件_基于vue中对鼠标划过事件的处理方式详解
- python执行循环内存变大_python – 为什么我的循环在每次迭代时需要更多内存?...
- 黄聪:移动应用抓包调试利器Charles
- 《你必须知道的.NET》--简易不简单:认识枚举(Ⅲ)
- python mysql 循环语句怎么写_用于mysql语句的Python循环
- 不使用反射,“一行代码”实现Web、WinForm窗体表单数据的填充、收集、清除,和到数据库的CRUD...
- fa萤火虫算法c语言,优化算法笔记(十)萤火虫算法
- Onvif协议快速入门
- 关于WAMP出现无法启动的一些分析以及解决思路
- android 辅助音量放大,为什么总是感觉手机音量太小?教你开启这个功能,声音瞬间放大一倍...
- 计算机网页设计与制作论文,网页设计与制作毕业论文
- 人脸识别-驾驶疲劳检测(1) 眨眼检测
- 选择室内地图提供商时需要考虑的12件事