Question

关于mysql数据库字符编码的问题、中文乱码！

mysql 系统、库、表、字段 全部设置的utf8编码！数据写入的页面是utf8 插入数据库成功、命令行select 显示的是乱码！

Answer 1

一、转码失败
在数据写入到表的过程中转码失败，数据库端也没有进行恰当的处理，导致存放在表里的数据乱码。
针对这种情况，前几篇文章介绍过客户端发送请求到服务端。
其中任意一个编码不一致，都会导致表里的数据存入不正确的编码而产生乱码。
比如下面简单一条语句：
set @a = "文本字符串";
insert into t1 values(@a);
1. 变量 @a 的字符编码是由参数 CHARACTER_SET_CLIENT 决定的，假设此时编码为 A，也就是变量 @a 的编码。
2. 写入语句在发送到 MySQL 服务端之前的编码由 CHARACTER_SET_CONNECTION 决定，假设此时编码为 B。
3. 经过 MySQL 一系列词法，语法解析等处理后，写入到表 t1，表 t1 的编码为 C。
那这里编码 A、编码 B、编码 C 如果不兼容，写入的数据就直接乱码。
二、客户端乱码
表数据正常，但是客户端展示后出现乱码。
这一类场景，指的是从 MySQL 表里拿数据出来返回到客户端，MySQL 里的数据本身没有问题。客户端发送请求到 MySQL，表的编码为 D，从 MySQL 拿到记录结果传输到客户端，此时记录编码为 E（CHARACTER_SET_RESULTS）。
那以上编码 E 和 D 如果不兼容，检索出来的数据就看起来乱码了。但是由于数据本身没有被破坏，所以换个兼容的编码就可以获取正确的结果。
这一类又分为以下三个不同的小类：
1)字段编码和表一致，客户端是不同的编码
比如下面例子， 表数据的编码是 utf8mb4，而 SESSION 1 发起的连接编码为 gbk。那由于编码不兼容，检索出来的数据肯定为乱码。
2）表编码和客户端的编码一致，但是记录之间编码存在不一致的情形
比如表编码是 utf8mb4，应用端编码也是 utf8mb4，但是表里的数据可能一半编码是 utf8mb4，另外一半是 gbk。那么此时表的数据也是正常的，不过此时采用哪种编码都读不到所有完整的数据。这样数据产生的原因很多，比如其中一种可能性就是表编码多次变更而且每次变更不彻底导致（变更不彻底，我之前的篇章里有介绍）。举个例子，表 t3 的编码之前是 utf8mb4，现在是 gbk，而且两次编码期间都被写入了正常的数据。
3）每个字段的编码不一致，导致乱码
和第二点一样的场景。不同的是：非记录间的编码不统一，而是每个字段编码不统一。举个例子，表 c1 字段 a1,a2。a1 编码 gbk，a2 编码是 utf8mb4。那每个字段单独读出来数据是完整的，但是所有字段一起读出来，数据总会有一部分乱码。
三、LATIN1
还有一种情形就是以 LATIN1 的编码存储数据
估计大家都知道字符集 LATIN1，LATIN1 对所有字符都是单字节流处理，遇到不能处理的字节流，保持原样，那么在以上两种存入和检索的过程中都能保证数据一致，所以 MySQL 长期以来默认的编码都是 LATIN1。这种情形，看起来也没啥不对的点，数据也没乱码，那为什么还有选用其他的编码呢？原因就是对字符存储的字节数不一样，比如 emoji 字符 "❤"，如果用 utf8mb4 存储，占用 3 个字节，那 varchar(12) 就能存放 12 个字符，但是换成 LATIN1，只能存 4 个字符。

Answer 2

嗯，你这种情况，页面显示应该是正常的，只有命令行显示为乱码，那是因为命令行默认不是utf8的

追问

那我需要更改cmd的显示编码吗？ 我mysql 的编码信息都是utf-8 character_set_client = utf-8!
我现在mysqldump出来的sql语句文件里面的中文也是乱码 、我担心的是当我导入另一个数据库（非mysql）的时候出现问题

追答

尝试过用phpmyadmin工具吗？看是否显示正常

追问

phpmyadmin 显示乱码、并且乱码内容跟我导出的数据是一样

追答

哦，那就是导出就有问题。或者存入的数据就有问题。

追问

存入的数据在页面上正常显示

追答

在页面上显示正常，并不代表导出的数据表数据也是显示正常的。当显示是正常的，存入时数据库是乱码，然后取出来，显示在页面也正常。 这本身就没问题。
1 看PHP文件格式是否为UTF8
2 看PHP文件head头是否为UTF8
3 看数据库是否为UTF8
4 连接数据库时，是否为UTF8.

如果还有问题，俺也不知道了。

追问

文件编码、页面编码、数据库数据编码都是统一的 utf-8！我需要下班看看我电脑的配置、貌似自己电脑一切正常！
顺便问下 sqlite 数据库 里面直接 导入sql语句的脚本可以吗？支持auto_increment吗？

Answer 3

数据库的编码你改了吗?mysql默认的是latin1。。当你取值时在链接数据库的同时，加上一句，mysql_query("set names uft8");

追问

第一句已经说明了 所有的编码都设置成了utf-8；show variables like ‘character_set%’;显示的编码全是utf-8

追答

数据库需要改编码格式的，明白么？不是说你见表的时候选utf8就可以了。。

追问

你是指my.ini里面的配置编码？\s 能查到库的编码不是吗？
我刚查了下my.ini里面的编码指定的也是utf-8
我是在命令行做的、没有用工具（phpmyadmin）

追答

你下载一个navicat试试建个表还会乱码么，这是一个挺不错的工具 。

追问

我不是要如何实现数据库数据不乱码、汉字的话 插入取出前可以set names gb2312 也能达到显示不乱码！我现在需要的是将数据导出然后在导入另一个非mysql数据库，导出的sql文件里面 汉字是乱码 ，导致数据在导入新数据库的时候 报错！utf-8是设计的 占3B 的、为什么我所有都是按utf8走的 还会报错？难道utf-8有不同版本？（我只知道一个utf-8 DOM+的新类型） 不同的软件对utf-8的标准会有一些差别吗？

Answer 4

你用的什么编辑器，在哪查的是乱码

追问

命令行里面乱码、mysqldump导出的数据乱码、页面上header指定下utf-8 正常显示（都是中文乱码）

追答

如果你my.ini中
default-character-set = utf8
character_set_server = utf8
都需要修改，都改了吗？如果都改了，那你的pc呢，是什么，是简体中文中国吗？

追问

my.ini早改了、系统是简体中文

追答

...那不知道了