docker 部署 MYSQL8 (可用於生產環境)

目錄

1、拉取鏡像;

2、創建掛載的目錄:

3、運行鏡像實例:

4、錯誤排查

5、設置登錄權限

6、 需要注意的幾個地方:


1、拉取鏡像;

docker pull mysql

#拉取的是最新的官方mysql docker 鏡像,也可以制定版本

 

2、創建掛載的目錄:

#配置文件
mkdir /home/docker/mysql/conf

#擴展配置
mkdir /home/docker/mysql/conf.d

#數據庫存儲路徑
mkdir /home/docker/mysql/data

如果有需要,可以將鏡像中的其他目錄,也掛載到宿主機上。

如果有必要,可以將鏡像中的文件copy到制定目錄,然後手動修改一些內容。

docker cp MYSQL8.0:/etc/mysql/my.cnf /home/docker/mysql/conf
docker cp MYSQL8.0:/etc/mysql/conf.d /home/docker/mysql/conf.d

 my.cnf 詳細的配置文件

,其中關於查詢緩存的配置 ,在mysql8中已經去掉了,功能有點雞肋。

window 環境要將 my.cnf文件格式設置爲UTF-8,換行符設置爲 UNIX(LF)

# Copyright (c) 2017, Oracle and/or its affiliates. All rights reserved.
#
# This program is free software; you can redistribute it and/or modify
# it under the terms of the GNU General Public License as published by
# the Free Software Foundation; version 2 of the License.
#
# This program is distributed in the hope that it will be useful,
# but WITHOUT ANY WARRANTY; without even the implied warranty of
# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
# GNU General Public License for more details.
#
# You should have received a copy of the GNU General Public License
# along with this program; if not, write to the Free Software
# Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301 USA

#
# The MySQL  Server configuration file.
#
# For explanations see
# http://dev.mysql.com/doc/mysql/en/server-system-variables.html

[mysqld]
pid-file        = /var/run/mysqld/mysqld.pid
socket          = /var/run/mysqld/mysqld.sock
datadir         = /var/lib/mysql
secure-file-priv= NULL
#skip-grant-tables
# Disabling symbolic-links is recommended to prevent assorted security risks

#sql_mode = STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE
#sql_mode = STRICT_TRANS_TABLES,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION

sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 

default-storage-engine = InnoDB
innodb_file_per_table = 1
lower_case_table_names = 1
# InnoDB爲獨立表空間模式,每個數據庫的每個表都會生成一個數據空間
# 獨立表空間優點:
# 1.每個表都有自已獨立的表空間。
# 2.每個表的數據和索引都會存在自已的表空間中。
# 3.可以實現單表在不同的數據庫中移動。
# 4.空間可以回收(除drop table操作處,表空不能自已回收)
# 缺點:
# 單表增加過大,如超過100G
# 結論:
# 共享表空間在Insert操作上少有優勢。其它都沒獨立表空間表現好。當啓用獨立表空間時,請合理調整:innodb_open_files
innodb_open_files = 500
# 限制Innodb能打開的表的數據,如果庫裏的表特別多的情況,請增加這個。這個值默認是300
innodb_buffer_pool_size = 64M
# InnoDB使用一個緩衝池來保存索引和原始數據, 不像MyISAM.
# 這裏你設置越大,你在存取表裏面數據時所需要的磁盤I/O越少.
# 在一個獨立使用的數據庫服務器上,你可以設置這個變量到服務器物理內存大小的80%
# 不要設置過大,否則,由於物理內存的競爭可能導致操作系統的換頁顛簸.
# 注意在32位系統上你每個進程可能被限制在 2-3.5G 用戶層面內存限制,
# 所以不要設置的太高.
innodb_write_io_threads = 4
innodb_read_io_threads = 4
# innodb使用後臺線程處理數據頁上的讀寫 I/O(輸入輸出)請求,根據你的 CPU 核數來更改,默認是4
# 注:這兩個參數不支持動態改變,需要把該參數加入到my.cnf裏,修改完後重啓MySQL服務,允許值的範圍從 1-64
innodb_thread_concurrency = 0
# 默認設置爲 0,表示不限制併發數,這裏推薦設置爲0,更好去發揮CPU多核處理能力,提高併發量
innodb_purge_threads = 1
# InnoDB中的清除操作是一類定期回收無用數據的操作。在之前的幾個版本中,清除操作是主線程的一部分,這意味着運行時它可能會堵塞其它的數據庫操作。
# 從MySQL5.5.X版本開始,該操作運行於獨立的線程中,並支持更多的併發數。用戶可通過設置innodb_purge_threads配置參數來選擇清除操作是否使用單
# 獨線程,默認情況下參數設置爲0(不使用單獨線程),設置爲 1 時表示使用單獨的清除線程。建議爲1
innodb_flush_log_at_trx_commit = 2
# 0:如果innodb_flush_log_at_trx_commit的值爲0,log buffer每秒就會被刷寫日誌文件到磁盤,提交事務的時候不做任何操作(執行是由mysql的master thread線程來執行的。
# 主線程中每秒會將重做日誌緩衝寫入磁盤的重做日誌文件(REDO LOG)中。不論事務是否已經提交)默認的日誌文件是ib_logfile0,ib_logfile1
# 1:當設爲默認值1的時候,每次提交事務的時候,都會將log buffer刷寫到日誌。
# 2:如果設爲2,每次提交事務都會寫日誌,但並不會執行刷的操作。每秒定時會刷到日誌文件。要注意的是,並不能保證100%每秒一定都會刷到磁盤,這要取決於進程的調度。
# 每次事務提交的時候將數據寫入事務日誌,而這裏的寫入僅是調用了文件系統的寫入操作,而文件系統是有 緩存的,所以這個寫入並不能保證數據已經寫入到物理磁盤
# 默認值1是爲了保證完整的ACID。當然,你可以將這個配置項設爲1以外的值來換取更高的性能,但是在系統崩潰的時候,你將會丟失1秒的數據。
# 設爲0的話,mysqld進程崩潰的時候,就會丟失最後1秒的事務。設爲2,只有在操作系統崩潰或者斷電的時候纔會丟失最後1秒的數據。InnoDB在做恢復的時候會忽略這個值。
# 總結
# 設爲1當然是最安全的,但性能頁是最差的(相對其他兩個參數而言,但不是不能接受)。如果對數據一致性和完整性要求不高,完全可以設爲2,如果只最求性能,例如高併發寫的日誌服務器,設爲0來獲得更高性能
innodb_log_buffer_size = 2M
# 此參數確定些日誌文件所用的內存大小,以M爲單位。緩衝區更大能提高性能,但意外的故障將會丟失數據。MySQL開發人員建議設置爲1-8M之間
innodb_log_file_size = 32M
# 此參數確定數據日誌文件的大小,更大的設置可以提高性能,但也會增加恢復故障數據庫所需的時間
innodb_log_files_in_group = 3
# 爲提高性能,MySQL可以以循環方式將日誌文件寫到多個文件。推薦設置爲3
innodb_max_dirty_pages_pct = 90
# innodb主線程刷新緩存池中的數據,使髒數據比例小於90%
innodb_lock_wait_timeout = 120 
# InnoDB事務在被回滾之前可以等待一個鎖定的超時秒數。InnoDB在它自己的鎖定表中自動檢測事務死鎖並且回滾事務。InnoDB用LOCK TABLES語句注意到鎖定設置。默認值是50秒
bulk_insert_buffer_size = 8M
# 批量插入緩存大小, 這個參數是針對MyISAM存儲引擎來說的。適用於在一次性插入100-1000+條記錄時, 提高效率。默認值是8M。可以針對數據量的大小,翻倍增加。
myisam_sort_buffer_size = 8M
# MyISAM設置恢復表之時使用的緩衝區的尺寸,當在REPAIR TABLE或用CREATE INDEX創建索引或ALTER TABLE過程中排序 MyISAM索引分配的緩衝區
myisam_max_sort_file_size = 10G
# 如果臨時文件會變得超過索引,不要使用快速排序索引方法來創建一個索引。註釋:這個參數以字節的形式給出
myisam_repair_threads = 1
# 如果該值大於1,在Repair by sorting過程中並行創建MyISAM表索引(每個索引在自己的線程內) 
interactive_timeout = 28800
# 服務器關閉交互式連接前等待活動的秒數。交互式客戶端定義爲在mysql_real_connect()中使用CLIENT_INTERACTIVE選項的客戶端。默認值:28800秒(8小時)
wait_timeout = 28800
# 服務器關閉非交互連接之前等待活動的秒數。在線程啓動時,根據全局wait_timeout值或全局interactive_timeout值初始化會話wait_timeout值,
# 取決於客戶端類型(由mysql_real_connect()的連接選項CLIENT_INTERACTIVE定義)。參數默認值:28800秒(8小時)
# MySQL服務器所支持的最大連接數是有上限的,因爲每個連接的建立都會消耗內存,因此我們希望客戶端在連接到MySQL Server處理完相應的操作後,
# 應該斷開連接並釋放佔用的內存。如果你的MySQL Server有大量的閒置連接,他們不僅會白白消耗內存,而且如果連接一直在累加而不斷開,
# 最終肯定會達到MySQL Server的連接上限數,這會報'too many connections'的錯誤。對於wait_timeout的值設定,應該根據系統的運行情況來判斷。
# 在系統運行一段時間後,可以通過show processlist命令查看當前系統的連接狀態,如果發現有大量的sleep狀態的連接進程,則說明該參數設置的過大,
# 可以進行適當的調整小些。要同時設置interactive_timeout和wait_timeout纔會生效。

max_connections = 1000
# MySQL的最大連接數,如果服務器的併發連接請求量比較大,建議調高此值,以增加並行連接數量,當然這建立在機器能支撐的情況下,因爲如果連接數越多,介於MySQL會爲每個連接提供連接緩衝區,就會開銷越多的內存,所以要適當調整該值,不能盲目提高設值。可以過'conn%'通配符查看當前狀態的連接數量,以定奪該值的大小。
max_connect_errors = 6000
# 對於同一主機,如果有超出該參數值個數的中斷錯誤連接,則該主機將被禁止連接。如需對該主機進行解禁,執行:FLUSH HOST。
open_files_limit = 65535
# MySQL打開的文件描述符限制,默認最小1024;當open_files_limit沒有被配置的時候,比較max_connections*5和ulimit -n的值,哪個大用哪個,
# 當open_file_limit被配置的時候,比較open_files_limit和max_connections*5的值,哪個大用哪個。
table_open_cache = 128
# MySQL每打開一個表,都會讀入一些數據到table_open_cache緩存中,當MySQL在這個緩存中找不到相應信息時,纔會去磁盤上讀取。默認值64
# 假定系統有200個併發連接,則需將此參數設置爲200*N(N爲每個連接所需的文件描述符數目);
# 當把table_open_cache設置爲很大時,如果系統處理不了那麼多文件描述符,那麼就會出現客戶端失效,連接不上
max_allowed_packet = 4M
# 接受的數據包大小;增加該變量的值十分安全,這是因爲僅當需要時纔會分配額外內存。例如,僅當你發出長查詢或MySQLd必須返回大的結果行時MySQLd纔會分配更多內存。
# 該變量之所以取較小默認值是一種預防措施,以捕獲客戶端和服務器之間的錯誤信息包,並確保不會因偶然使用大的信息包而導致內存溢出。
binlog_cache_size = 1M
# 一個事務,在沒有提交的時候,產生的日誌,記錄到Cache中;等到事務提交需要提交的時候,則把日誌持久化到磁盤。默認binlog_cache_size大小32K
max_heap_table_size = 8M
# 定義了用戶可以創建的內存表(memory table)的大小。這個值用來計算內存表的最大行數值。這個變量支持動態改變
tmp_table_size = 16M
# MySQL的heap(堆積)表緩衝大小。所有聯合在一個DML指令內完成,並且大多數聯合甚至可以不用臨時表即可以完成。
# 大多數臨時表是基於內存的(HEAP)表。具有大的記錄長度的臨時表 (所有列的長度的和)或包含BLOB列的表存儲在硬盤上。
# 如果某個內部heap(堆積)表大小超過tmp_table_size,MySQL可以根據需要自動將內存中的heap表改爲基於硬盤的MyISAM表。還可以通過設置tmp_table_size選項來增加臨時表的大小。也就是說,如果調高該值,MySQL同時將增加heap表的大小,可達到提高聯接查詢速度的效果
read_buffer_size = 2M
# MySQL讀入緩衝區大小。對錶進行順序掃描的請求將分配一個讀入緩衝區,MySQL會爲它分配一段內存緩衝區。read_buffer_size變量控制這一緩衝區的大小。
# 如果對錶的順序掃描請求非常頻繁,並且你認爲頻繁掃描進行得太慢,可以通過增加該變量值以及內存緩衝區大小提高其性能
read_rnd_buffer_size = 8M
# MySQL的隨機讀緩衝區大小。當按任意順序讀取行時(例如,按照排序順序),將分配一個隨機讀緩存區。進行排序查詢時,
# MySQL會首先掃描一遍該緩衝,以避免磁盤搜索,提高查詢速度,如果需要排序大量數據,可適當調高該值。但MySQL會爲每個客戶連接發放該緩衝空間,所以應儘量適當設置該值,以避免內存開銷過大
sort_buffer_size = 8M
# MySQL執行排序使用的緩衝大小。如果想要增加ORDER BY的速度,首先看是否可以讓MySQL使用索引而不是額外的排序階段。
# 如果不能,可以嘗試增加sort_buffer_size變量的大小
join_buffer_size = 8M
# 聯合查詢操作所能使用的緩衝區大小,和sort_buffer_size一樣,該參數對應的分配內存也是每連接獨享
thread_cache_size = 8
# 這個值(默認8)表示可以重新利用保存在緩存中線程的數量,當斷開連接時如果緩存中還有空間,那麼客戶端的線程將被放到緩存中,
# 如果線程重新被請求,那麼請求將從緩存中讀取,如果緩存中是空的或者是新的請求,那麼這個線程將被重新創建,如果有很多新的線程,
# 增加這個值可以改善系統性能.通過比較Connections和Threads_created狀態的變量,可以看到這個變量的作用。(–>表示要調整的值)
# 根據物理內存設置規則如下:
# 1G  —> 8
# 2G  —> 16
# 3G  —> 32
# 大於3G  —> 64
#query_cache_size = 8M
#MySQL的查詢緩衝大小(從4.0.1開始,MySQL提供了查詢緩衝機制)使用查詢緩衝,MySQL將SELECT語句和查詢結果存放在緩衝區中,
# 今後對於同樣的SELECT語句(區分大小寫),將直接從緩衝區中讀取結果。根據MySQL用戶手冊,使用查詢緩衝最多可以達到238%的效率。
# 通過檢查狀態值'Qcache_%',可以知道query_cache_size設置是否合理:如果Qcache_lowmem_prunes的值非常大,則表明經常出現緩衝不夠的情況,
# 如果Qcache_hits的值也非常大,則表明查詢緩衝使用非常頻繁,此時需要增加緩衝大小;如果Qcache_hits的值不大,則表明你的查詢重複率很低,
# 這種情況下使用查詢緩衝反而會影響效率,那麼可以考慮不用查詢緩衝。此外,在SELECT語句中加入SQL_NO_CACHE可以明確表示不使用查詢緩衝
#query_cache_limit = 2M
#指定單個查詢能夠使用的緩衝區大小,默認1M
key_buffer_size = 4M
#指定用於索引的緩衝區大小,增加它可得到更好處理的索引(對所有讀和多重寫),到你能負擔得起那樣多。如果你使它太大,
# 系統將開始換頁並且真的變慢了。對於內存在4GB左右的服務器該參數可設置爲384M或512M。通過檢查狀態值Key_read_requests和Key_reads,
# 可以知道key_buffer_size設置是否合理。比例key_reads/key_read_requests應該儘可能的低,
# 至少是1:100,1:1000更好(上述狀態值可以使用SHOW STATUS LIKE 'key_read%'獲得)。注意:該參數值設置的過大反而會是服務器整體效率降低
ft_min_word_len = 4
# 分詞詞彙最小長度,默認4
transaction_isolation = REPEATABLE-READ
# MySQL支持4種事務隔離級別,他們分別是:
# READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE.
# 如沒有指定,MySQL默認採用的是REPEATABLE-READ,ORACLE默認的是READ-COMMITTED

#log_bin = mysql-bin
#binlog_format = mixed
#expire_logs_days = 5 #超過30天的binlog刪除
#log_error = /data/mysql/log/mysql-error.log #錯誤日誌路徑
#slow_query_log = 1
#long_query_time = 1 #慢查詢時間 超過1秒則爲慢查詢
#slow_query_log_file = /data/mysql/log/mysql-slow.log
performance_schema = 0
explicit_defaults_for_timestamp
#lower_case_table_names = 1 #不區分大小寫


[mysqldump]
quick
max_allowed_packet = 16M #服務器發送和接受的最大包長度

[myisamchk]
key_buffer_size = 8M
sort_buffer_size = 8M
read_buffer = 4M
write_buffer = 4M

# Custom config should go here
!includedir /etc/mysql/conf.d/

3、運行鏡像實例:

#Linux環境
docker run --restart=on-failure:3 --privileged=true --name MYSQL8.0 -p 3306:3306 -e MYSQL_ROOT_PASSWORD=123456 --mount type=bind,src=/home/docker/mysql/conf/my.cnf,dst=/etc/mysql/my.cnf --mount type=bind,src=/home/docker/mysql/data,dst=/var/lib/mysql --mount type=bind,src=/home/docker/mysql/conf.d,dst=/etc/mysql/conf.d -d mysql --lower-case-table-names=1

#windows 環境
docker run --restart=on-failure:3 --privileged=true --name MYSQL8.0 -p 3306:3306 -e MYSQL_ROOT_PASSWORD=123456 --mount type=bind,src=C:/home/docker/mysql/conf/my.cnf,dst=/etc/mysql/my.cnf --mount type=bind,src=C:/home/docker/mysql/data,dst=/var/lib/mysql --mount type=bind,src=C:/home/docker/mysql/conf.d,dst=/etc/mysql/conf.d -d mysql --lower-case-table-names=1

參數說明

  • --restart:重啓策略
  • --name:爲容器指定一個名字
  • -p:指定端口映射,格式爲:主機(宿主)端口:容器端口
  • -e:username="xxx",設置環境變量
  • --restart=on-failure:3:是指容器在未來出現異常退出(退出碼非0)的情況下循環重啓3次
  • -mount:綁定掛載,MySQL官方Docker搭建MySQL文檔中,建議我們大家使用--mount
  • -d:後臺運行容器,並返回容器 id
  • --lower-case-table-names=1 運行實例的時候,就要添加這個參數,啓動後要再修改

 

4、錯誤排查

可以通過下面的命令查看錯誤日誌:

docker logs MYSQL8.0

看到下面字樣,說明啓動成功,看到socket 已經創建,端口號已經綁定

2020-03-21 11:06:50+00:00 [Note] [Entrypoint]: Entrypoint script for MySQL Server 8.0.19-1debian10 started.
2020-03-21 11:06:50+00:00 [Note] [Entrypoint]: Switching to dedicated user 'mysql'
2020-03-21 11:06:50+00:00 [Note] [Entrypoint]: Entrypoint script for MySQL Server 8.0.19-1debian10 started.
2020-03-21T11:06:50.921681Z 0 [Warning] [MY-010915] [Server] 'NO_ZERO_DATE', 'NO_ZERO_IN_DATE' and 'ERROR_FOR_DIVISION_BY_ZERO' sql modes should be used with strict mode. They will be merged with strict mode in a future release.
2020-03-21T11:06:50.921798Z 0 [System] [MY-010116] [Server] /usr/sbin/mysqld (mysqld 8.0.19) starting as process 1
2020-03-21T11:06:51.907265Z 0 [Warning] [MY-010068] [Server] CA certificate ca.pem is self signed.
2020-03-21T11:06:51.914080Z 0 [Warning] [MY-011810] [Server] Insecure configuration for --pid-file: Location '/var/run/mysqld' in the path is accessible to all OS users. Consider choosing a different directory.
2020-03-21T11:06:51.945911Z 0 [System] [MY-010931] [Server] /usr/sbin/mysqld: ready for connections. Version: '8.0.19'  socket: '/var/run/mysqld/mysqld.sock'  port: 3306  MySQL Community Server - GPL.
2020-03-21T11:06:52.162497Z 0 [System] [MY-011323] [Server] X Plugin ready for connections. Socket: '/var/run/mysqld/mysqlx.sock' bind-address: '::' port: 33060

 

5、設置登錄權限

進入docker實例

docker exec -it MYSQL8.0 bash

創建新的用戶,並授予權限

mysql -uroot -p123456

ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '123456';

#這裏創建個臨時賬號,並給予較大的權限
CREATE USER 'test'@'%' IDENTIFIED BY '123456';
GRANT ALL ON *.* TO 'test'@'%';

然後重啓

docker stop MYSQL8.0
docker start MYSQL8.0

 

6、 需要注意的幾個地方:

(1)如果使用虛擬機,內存比較小時,注意max_connections和innodb_buffer_pool_size不要設置太大,否則啓動會非常慢,本例中分別配置了2000和1200M,但當前虛擬機纔給分配了1G內存,故啓動的時候非常慢,一般前者調整爲512 ~1000,後者爲物理內存的60%~70%,

(2)一般是需要忽略大小寫的

這是一個部署過程中比較麻煩的問題:在MySQL 官方提供的RPM包中默認是使用lower-case-table-names=0,不太適合生產環境部署。在生產環境建議使用官方的二進制包。https://blog.csdn.net/weixin_34121282/article/details/94469299

我這裏使用docker部署,docker 運行實例的時候加上參數,所以在啓動docker實例時添加了一個參數:--lower-case-table-names=1,然後再修改配置文件,my.cnf,將這個參數 放到 [mysqld]下面。上面給出的配置,已經加上了,在使用的過程中需要注意

(3) 關於初始化,docker部署時,可以不需要初始化。

--initialize-insecure

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章