2. 程式人生 > >Mysql系列 —— MySQL的Charset和Collation

Mysql系列 —— MySQL的Charset和Collation

阿新 • • 發佈：2018-07-24
not null 分鐘 支持 fault mat 影響 但我 innodb 建表

本文轉載自：再見亂碼：5分鐘讀懂MySQL字符集設置

一.內容概述

在MySQL的使用過程中，了解字符集、字符序的概念，以及不同設置對數據存儲、比較的影響非常重要。不少同學在日常工作中遇到的“亂碼”問題，很有可能就是因為對字符集與字符序的理解不到位、設置錯誤造成的。

本文由淺入深，分別介紹了如下內容：

  • 字符集、字符序的基本概念及聯系
  • MySQL支持的字符集、字符序設置級，各設置級別之間的聯系
  • server、database、table、column級字符集、字符序的查看及設置
  • 應該何時設置字符集、字符序

二.字符集、字符序的概念與聯系

在數據的存儲上，MySQL提供了不同的字符集支持。而在數據的對比操作上，則提供了不同的字符序支持。

MySQL提供了不同級別的設置，包括server級、database級、table級、column級，可以提供非常精準的設置。

什麽是字符集、字符序？簡單的來說：

字符集（character set）：定義了字符以及字符的編碼。
字符序（collation）：定義了字符的比較規則。
舉個例子：

有四個字符：A、B、a、b，這四個字符的編碼分別是A = 0, B = 1, a = 2, b = 3。這裏的字符 + 編碼就構成了字符集（character set）。

如果我們想比較兩個字符的大小呢？比如A、B，或者a、b，最直觀的比較方式是采用它們的編碼，比如因為0 < 1，所以 A < B。

另外，對於A、a，雖然它們編碼不同，但我們覺得大小寫字符應該是相等的，也就是說 A == a。

這上面定義了兩條比較規則，這些比較規則的集合就是collation。

同樣是大寫字符、小寫字符，則比較他們的編碼大小；
如果兩個字符為大小寫關系，則它們相等。
三、MySQL支持的字符集、字符序
MySQL支持多種字符集 與 字符序。

一個字符集對應至少一種字符序（一般是1對多）。
兩個不同的字符集不能有相同的字符序。
每個字符集都有默認的字符序。
上面說的比較抽象，我們看下後面幾個小節就知道怎麽回事了。

1.查看支持的字符集

可以通過以下方式查看MYSQL支持的字符集。

方式一：

mysql> SHOW CHARACTER SET;
+----------+-----------------------------   +---------------------+--------+
| Charset  | Description                 | Default  collation   | Maxlen |
+----------+-----------------------------   +---------------------+--------+
| big5     | Big5 Traditional Chinese    |  big5_chinese_ci     |      2 |
| dec8     | DEC West European           |  dec8_swedish_ci     |      1 |
...省略

方式二：

mysql> use information_schema;
mysql> select * from CHARACTER_SETS;
+--------------------+----------------------    +-----------------------------+--------+
| CHARACTER_SET_name | DEFAULT_COLLATE_name |   DESCRIPTION                 | MAXLEN |
+--------------------+----------------------    +-----------------------------+--------+
| big5               | big5_chinese_ci      | Big5  Traditional Chinese    |      2 |
| dec8               | dec8_swedish_ci      | DEC   West European           |      1 |
...省略

當使用SHOW CHARACTER SET查看時，也可以加上WHERE或LIKE限定條件。

例子一：使用WHERE限定條件。

mysql> SHOW CHARACTER SET WHERE Charset="utf8";
+---------+---------------+-------------------  +--------+
| Charset | Description   | Default collation |     Maxlen |
+---------+---------------+-------------------  +--------+
| utf8    | UTF-8 Unicode | utf8_general_ci   |         3 |
+---------+---------------+-------------------  +--------+
1 row in set (0.00 sec)

例子二：使用LIKE限定條件。

mysql> SHOW CHARACTER SET LIKE "utf8%";
+---------+---------------+-------------------- +--------+
| Charset | Description   | Default collation  |    Maxlen |
+---------+---------------+-------------------- +--------+
| utf8    | UTF-8 Unicode | utf8_general_ci    |        3 |
| utf8mb4 | UTF-8 Unicode | utf8mb4_general_ci |        4 |
+---------+---------------+-------------------- +--------+
2 rows in set (0.00 sec)

2.查看支持的字符序

類似的，可以通過如下方式查看MYSQL支持的字符序。

方式一：通過SHOW COLLATION進行查看。

可以看到，utf8字符集有超過10種字符序。通過Default的值是否為Yes，判斷是否默認的字符序。

mysql> SHOW COLLATION WHERE Charset = ‘utf8‘;
+--------------------------+---------+----- +---------+----------+---------+
| Collation                | Charset | Id  |    Default | Compiled | Sortlen |
+--------------------------+---------+----- +---------+----------+---------+
| utf8_general_ci          | utf8    |  33 | Yes        | Yes      |       1 |
| utf8_bin                 | utf8    |  83 |            | Yes      |       1 |
...略

方式二：查詢information_schema.COLLATIONS。

mysql> USE information_schema;
mysql> SELECT * FROM COLLATIONS WHERE   CHARACTER_SET_name="utf8";
+--------------------------+--------------------    +-----+------------+-------------+---------+
| COLLATION_name           | CHARACTER_SET_name |   ID  | IS_DEFAULT | IS_COMPILED | SORTLEN |
+--------------------------+--------------------    +-----+------------+-------------+---------+
| utf8_general_ci          | utf8               |   33 | Yes        | Yes         |       1 |
| utf8_bin                 | utf8               |   83 |            | Yes         |       1 |
| utf8_unicode_ci          | utf8_name               |  192 |            | Yes         |       8 |

3.字符序的命名規範

字符序的命名，以其對應的字符集作為前綴，如下所示。比如字符序utf8_general_ci，標明它是字符集utf8的字符序。更多規則可以參考 官方文檔。

MariaDB [information_schema]> SELECT    CHARACTER_SET_name, COLLATION_name FROM COLLATIONS  WHERE CHARACTER_SET\_name="utf8" limit 2; 
+--------------------+-----------------+
| CHARACTER_SET_name | COLLATION_name  |
+--------------------+-----------------+
| utf8               | utf8_general_ci |
| utf8               | utf8_bin        |
+--------------------+-----------------+
2 rows in set (0.00 sec)

四.server的字符集、字符序

用途：當你創建數據庫，且沒有指定字符集、字符序時，server字符集、server字符序就會作為該數據庫的默認字符集、排序規則。

如何指定：MySQL服務啟動時，可通過命令行參數指定。也可以通過配置文件的變量指定。

server默認字符集、字符序：在MySQL編譯的時候，通過編譯參數指定。

character_set_server、collation_server分別對應server字符集、server字符序。

1.查看server字符集、字符序

分別對應character_set_server、collation_server兩個系統變量。

mysql> SHOW VARIABLES LIKE "character_set_server";
mysql> SHOW VARIABLES LIKE "collation_server";

2.啟動服務時指定

可以在MySQL服務啟動時，指定server字符集、字符序。如不指定，默認的字符序分別為latin1、latin1_swedish_ci

mysqld --character-set-server=latin1     --collation-server=latin1_swedish_ci

單獨指定server字符集，此時，server字符序為latin1的默認字符序latin1_swedish_ci。

mysqld --character-set-server=latin1

3.配置文件指定

除了在命令行參數裏指定，也可以在配置文件裏指定，如下所示。

[client]
default-character-set=utf8

[mysql]
default-character-set=utf8

[mysqld]
collation-server = utf8_unicode_ci
init-connect=‘SET NAMES utf8‘
character-set-server = utf8

4.運行時修改

例子：運行時修改（重啟後會失效，如果想要重啟後保持不變，需要寫進配置文件裏）

mysql> SET character_set_server = utf8 ;

5.編譯時指定默認字符集、字符序

character_set_server、collation_server的默認值，可以在MySQL編譯時，通過編譯選項指定：

cmake . -DDEFAULT_CHARSET=latin1        -DDEFAULT_COLLATION=latin1_german1_ci

五.database的字符集、字符序

用途：指定數據庫級別的字符集、字符序。同一個MySQL服務下的數據庫，可以分別指定不同的字符集/字符序。

1.設置數據的字符集/字符序

可以在創建、修改數據庫的時候，通過CHARACTER SET、COLLATE指定數據庫的字符集、排序規則。

創建數據庫：

CREATE DATABASE db_name
    [[DEFAULT] CHARACTER SET charset_name]
    [[DEFAULT] COLLATE collation_name]

修改數據庫：

ALTER DATABASE db_name
    [[DEFAULT] CHARACTER SET charset_name]
    [[DEFAULT] COLLATE collation_name]

例子：創建數據庫test_schema，字符集設置為utf8，此時默認的排序規則為utf8_general_ci。

CREATE DATABASE `test_schema` DEFAULT CHARACTER     SET utf8;

2.查看數據庫的字符集/字符序

有3種方式可以查看數據庫的字符集/字符序。

例子一：查看test_schema的字符集、排序規則。（需要切換默認數據庫）

mysql> use test_schema;
Database changed
mysql> SELECT @@character_set_database,     @@collation_database;
+--------------------------+----------------------  +
| @@character_set_database | @@collation_database   |
+--------------------------+----------------------  +
| utf8                     | utf8_general_ci        |
+--------------------------+----------------------  +
1 row in set (0.00 sec)

例子二：也可以通過下面命令查看test_schema的字符集、數據庫（不需要切換默認數據庫）

mysql> SELECT SCHEMA_name,  DEFAULT_CHARACTER_SET_name, DEFAULT_COLLATION_name      FROM information_schema.SCHEMATA WHERE  schema_name="test_schema";
+-------------+---------------------------- +------------------------+
| SCHEMA_name | DEFAULT_CHARACTER_SET_name |    DEFAULT_COLLATION_name |
+-------------+---------------------------- +------------------------+
| test_schema | utf8                       |    utf8_general_ci        |
+-------------+---------------------------- +------------------------+
1 row in set (0.00 sec)

例子三：也可以通過查看創建數據庫的語句，來查看字符集。

mysql> SHOW CREATE DATABASE test_schema;
+-------------  +-----------------------------------------------------  -----------------+
| Database    | Create Database                                                         |
+-------------  +-----------------------------------------------------  -----------------+
| test_schema | CREATE DATABASE `test_schema` /*!   40100 DEFAULT CHARACTER SET utf8 */ |
+-------------+-----------------------------------------------------    -----------------+
1 row in set (0.00 sec)

3.database字符集、字符序是怎麽確定的

創建數據庫時，指定了CHARACTER SET或COLLATE，則以對應的字符集、排序規則為準。
創建數據庫時，如果沒有指定字符集、排序規則，則以
character_set_server、collation_server為準。

六.table的字符集、字符序

創建表、修改表的語法如下，可通過CHARACTER SET、COLLATE設置字符集、字符序。

CREATE TABLE tbl_name (column_list)
    [[DEFAULT] CHARACTER SET charset_name]
    [COLLATE collation_name]]

ALTER TABLE tbl_name
    [[DEFAULT] CHARACTER SET charset_name]
    [COLLATE collation_name]

1.創建table並指定字符集/字符序

例子如下，指定字符集為utf8，字符序則采用默認的。

CREATE TABLE `test_schema`.`test_table` (
`id` INT NOT NULL COMMENT ‘‘,
PRIMARY KEY (`id`)  COMMENT ‘‘)
DEFAULT CHARACTER SET = utf8;

2.查看table的字符集/字符序

同樣，有3種方式可以查看table的字符集/字符序。

方式一：通過SHOW TABLE STATUS查看table狀態，註意Collation為utf8_general_ci，對應的字符集為utf8。

MariaDB [blog]> SHOW TABLE STATUS FROM test_schema \G;
*************************** 1. row ***************************
      Name: test_table
        Engine: InnoDB
        Version: 10
        Row_format: Compact
      Rows: 0
        Avg_row_length: 0
        Data_length: 16384
        Max_data_length: 0
        Index_length: 0
        Data_free: 11534336
    Auto_increment: NULL
    Create_time: 2018-01-09 16:10:42
    Update_time: NULL
    Check_time: NULL
  Collation: utf8_general_ci
  Checksum: NULL
    Create_options: 
    Comment: 
1 row in set (0.00 sec)

方式二：查看information_schema.TABLES的信息。

mysql> USE test_schema;
mysql> SELECT TABLE_COLLATION FROM  information_schema.TABLES WHERE TABLE_SCHEMA =  "test_schema" AND TABLE\_name = "test_table";
+-----------------+
| TABLE_COLLATION |
+-----------------+
| utf8_general_ci |
+-----------------+

方式三：通過SHOW CREATE TABLE確認。

mysql> SHOW CREATE TABLE test_table;
+------------+----------------------------------------------------------------------------------------------------------------+
| Table      | Create Table                                                                                                     |
+------------+----------------------------------------------------------------------------------------------------------------+
| test_table | CREATE TABLE `test_table` (
`id` int(11) NOT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 |
+------------+----------------------------------------------------------------------------------------------------------------+
1 row in set (0.00 sec)

3.table字符集、字符序如何確定

假設CHARACTER SET、COLLATE的值分別是charset_name、collation_name。如果創建table時：

明確了charset_name、collation_name，則采用charset_name、collation_name。
只明確了charset_name，但collation_name未明確，則字符集采用charset_name，字符序采用charset_name對應的默認字符序。
只明確了collation_name，但charset_name未明確，則字符序采用collation_name，字符集采用collation_name關聯的字符集。
charset_name、collation_name均未明確，則采用數據庫的字符集、字符序設置。

七.column的字符集、排序

類型為CHAR、VARCHAR、TEXT的列，可以指定字符集/字符序，語法如下：

col_name {CHAR | VARCHAR | TEXT} (col_length)
    [CHARACTER SET charset_name]
    [COLLATE collation_name]

1.新增column並指定字符集/排序規則

例子如下：（創建table類似）

mysql> ALTER TABLE test_table ADD COLUMN    char_column VARCHAR(25) CHARACTER SET utf8;

2.查看column的字符集/字符序

例子如下：

mysql> SELECT CHARACTER_SET_name, COLLATION_name FROM information_schema.COLUMNS WHERE TABLE_SCHEMA="test_schema" AND TABLE_name="test_table" AND COLUMN_name="char_column";
+--------------------+-----------------+
| CHARACTER_SET_name | COLLATION_name  |
+--------------------+-----------------+
| utf8               | utf8_general_ci |
+--------------------+-----------------+
1 row in set (0.00 sec)

3.column字符集/排序規則確定

假設CHARACTER SET、COLLATE的值分別是charset_name、collation_name：

如果charset_name、collation_name均明確，則字符集、字符序以charset_name、collation_name為準。
只明確了charset_name，collation_name未明確，則字符集為charset_name，字符序為charset_name的默認字符序。
只明確了collation_name，charset_name未明確，則字符序為collation_name，字符集為collation_name關聯的字符集。
charset_name、collation_name均未明確，則以table的字符集、字符序為準。

八.選擇：何時設置字符集、字符序

一般來說，可以在三個地方進行配置：

創建數據庫的時候進行配置。
mysql server啟動的時候進行配置。
從源碼編譯mysql的時候，通過編譯參數進行配置

1.方式一：創建數據庫的時候進行配置

這種方式比較靈活，也比較保險，它不依賴於默認的字符集/字符序。當你創建數據庫的時候指定字符集/字符序，後續創建table、column的時候，如果不特殊指定，會繼承對應數據庫的字符集/字符序。

CREATE DATABASE mydb
    DEFAULT CHARACTER SET utf8
    DEFAULT COLLATE utf8_general_ci;

2.方式二：mysql server啟動的時候進行配置

可以添加以下配置，這樣mysql server啟動的時候，會對character-set-server、collation-server進行配置。

當你通過mysql client創建database/table/column，且沒有顯示聲明字符集/字符序，那麽就會用character-set-server/collation-server作為默認的字符集/字符序。

另外，client、server連接時的字符集/字符序，還是需要通過SET NAMES進行設置。

[mysqld]
character-set-server=utf8
collation-server=utf8_general_ci

3.方式三：從源碼編譯mysql的時候，通過編譯參數進行設置

編譯的時候如果指定了-DDEFAULT_CHARSET和-DDEFAULT_COLLATION，那麽：

創建database、table時，會將其作為默認的字符集/字符序。
client連接server時，會將其作為默認的字符集/字符序。（不用單獨SET NAMES）

shell> cmake . -DDEFAULT_CHARSET=utf8        -DDEFAULT_COLLATION=utf8_general_ci

九.寫在後面

本文較為詳細地介紹了MySQL中字符集、字符序相關的內容，這部分內容主要針對的是數據的存儲與比較。其實還有很重要的一部分內容還沒涉及：針對連接的字符集、字符序設置。

由於連接的字符集、字符序設置不當導致的亂碼問題也非常多，這部分內容展開來講內容也不少，放在下一篇文章進行講解。

篇幅所限，有些內容沒有細講，感興趣的同學歡迎交流，或者查看官方文檔。如有錯漏，敬請指出。

參考

10.1 Character Set Support

Mysql系列 —— MySQL的Charset和Collation

相關推薦

Mysql系列 —— MySQL的Charset和Collation

not null 分鐘 支持 fault mat 影響 但我 innodb 建表 本文轉載自：再見亂碼：5分鐘讀懂MySQL字符集設置 一.內容概述 在MySQL的使用過程中，了解字符集、字符序的概念，以及不同設置對數據存儲、比較的影響非常重要。不少同學在日常工作中遇到

mysql系列之5--完全備份和增量備份

bsp 定時 實時 sta form sql -a posit 密碼 一、利用系統自帶的工具實現完全備份：mysqldump1、備份所有的數據庫： mysqldump -hlocalhost -uroot -p12345678 --all-database

mysql系列之6--------使用第三方工具-percona來備份mysql和恢復

文件目錄 restart form rpm 導入 完全備份 mys 只需要 schema 使用第三方工具來備份mysql-----percona一、前期準備工作： 1、安裝依賴包：yum -y install perl-Digest-MD5 perl-DBD-

MySQL常用配置和性能壓力測試：MySQL系列之十五

text imu reat ini -o blocks debug 生成 存在 一、MySQL常用配置 以下所有配置參數以32G內存的服務器為基 1、打開獨立的表空間 innodb_file_per_table = 1 2、MySQL服務所允許的同時會話數的上限，默認為

Mysql系列三：Centos6下安裝Mysql和Mysql主從復制的搭建

sso libc mage 進行 我們 服務器 後繼 lis list 一、Centos6下安裝Mysql 檢測下系統有沒有自帶的mysql：yum list installed | grep mysql， 如果已經有的話執行命令yum -y remove mysql-li

[MS Access+MySQL系列]如何在phpMyAdmin設定使用者帳號和密碼?

承接[MS Access+MySQL系列]利用XAMPP建置phpMyAdmin文章，當完成phpMyAdmin建置工作後，基於資訊安全和資料庫管理考量，如何在phpMyAdmin設定使用者許可權成為下

Mysql筆記系列一MySQL體系結構和InnoDB儲存引擎

名詞解釋： “資料庫”和”資料庫例項” 資料庫：更側重於指的是儲存在物理磁碟上的檔案的集合，例如frm,myd,myi,ibd結尾的檔案。 資料庫例項：執行在記憶體中，正在執行的一個程序，用來操作資料庫檔案。 可以通過理解程序和程式之間的關係來類比的理解，程序就是動態的執行在記憶

[MS Access+MySQL系列]如何利用phpMyAdmin介面進行資料表匯入、SQL簡易資料查詢和資料表刪除等操作?

承接[MS Access+MySQL系列]如何在phpMyAdmin設定使用者帳號和密碼文章，當後端資料庫搭建完成後，如何在phpMyAdmin中匯入資料表、進行簡易SQL查詢和資料表刪除等等操作，使得未來前端操作人員進行存取作業，成為下一步重點工作。 本文以虛構的客戶資料為例，說明如何將客

Mysql系列（三）—— Mysql字符集和比較規則

二、檢視命令 檢視支援的字符集命令是：SHOW (CHARACTER SET|CHARSET) [LIKE 匹配的模式],CHARACTER SET|CHARSET同意，兩者都可以用。 檢視支援的比較規則命令是：SHOW COLLATION [LIKE 匹配的模式]。 注意，比較規則的命名方式有一定規律，一

深入理解MySQL系列之redo log、undo log和binlog

#### 事務的實現 redo log保證事務的永續性，undo log用來幫助事務回滾及MVCC的功能。 #### InnoDB儲存引擎體系結構 ![](https://img2020.cnblogs.com/blog/2211828/202012/2211828-20201222093735507-1

MySQL基礎知識：Character Set和Collation

**A character set is a set of symbols and encodings. A collation is a set of rules for comparing characters in a character set.** - ```Character Set```： 一套

mysql合並和時間函數

eat _for 逗號 時間 then 一行 指定 time ces sql：利用group_concat()方法，參數為需要合並的字段，合並的字段分隔符默認為逗號，可通過參數separator指定，該方法往往配合group by 一起使用。利用group_concat()

MySQL的字符集和字符編碼筆記

mysql字符亂碼比較初級，深入的請參考盧sir的博客：http://cenalulu.github.io/linux/character-encoding/http://cenalulu.github.io/mysql/mysql-mojibake/GBK 和UTF8的實際在系統裏面的存放方式： 1、GBK

實用工具mycli：MySQL、MariaDB 和 Percona 的命令行界面

mysqlmycli 是默認的 MySQL 客戶端的現代替代品，mycli 將在你輸入時自動補全關鍵字、表名、列和函數。HomePage: http://mycli.net 使用效果如下：RHEL, Centos安裝方式： 目前作者沒有針對RHEL, Centos提供RPM包，暫時可用pip方式

mysql中replicate_wild_do_table和replicate_do_db區別

lan rep cati mil 多人 pan think lte 避免 使用replicate_do_db和replicate_ignore_db時有一個隱患，跨庫更新時會出錯。 如在Master（主）服務器上設置 replicate_do_db=test（my.conf

MySQL聯合查詢和左關聯的區別

rand 定義 ges left join == sql img alt 我把這個定義為聯合查詢或者說並查詢： 第1種:SELECT a.gbname,b.gcontent FROM tb_goodsbrand a,tb_goods b WHERE a.gbid = b.g

mysql，mysqli和PDO的區別

active column attribute oca 數字 proc string att 以及 介紹： PHP-MySQL 是 PHP 操作 MySQL 資料庫最原始的 Extension PHP-MySQLi 的 i 代表 Improvement ，提更了相對進階的

Mac環境下雙mysql環境統一和centos下mysql忘記密碼處理

round local macos oca height com 空間 鏈接 ica /1》 Mac系統本地mysql自帶的環境 a. 剛開始找不到mysql命令，原因是沒找到mysql的軟連接 默認安裝目錄 /usr/local mysql(紫色)是mysql-5.7.1

MySQL中TIMESTAMPDIFF和TIMESTAMPADD函數的用法

用法 int blog 函數 mysq second row logs tail TIMESTAMPDIFF 語法： TIMESTAMPDIFF(interval,datetime_expr1,datetime_expr2)。 說明： 返回日期或日期時間表達式date

mysql分表和表分區詳解

sql char 根據 blank 服務端 lpad one urn 聯系 為什麽要分表和分區？ 日常開發中我們經常會遇到大表的情況，所謂的大表是指存儲了百萬級乃至千萬級條記錄的表。這樣的表過於龐大，導致數據庫在查詢和插入的時候耗時太長，性能低下，如果涉及聯合查詢的情況，性