docker?mysql關(guān)于配置文件、連接客戶端、/docker-entrypoint-initdb.d/目錄的使用
1. 查找mysql配置文件
提示說明:
docker使用mysql鏡像,得知道m(xù)ysql的配置my.cnf文件在哪里,然后再對有些配置參數(shù)進(jìn)行適當(dāng)修改。
1.1 臨時啟動一個mysql容器
docker run -it mysql -e MYSQL_ROOT_PASSWORD=123456 sh
1.2 查看mysql啟動時讀取配置文件的默認(rèn)路徑
mysql --help | grep "my.cnf"
bash-4.4# mysql --help | grep "my.cnf" order of preference, my.cnf, $MYSQL_TCP_PORT, /etc/my.cnf /etc/mysql/my.cnf /usr/etc/my.cnf ~/.my.cnf
/etc/my.cnf /etc/mysql/my.cnf /usr/etc/my.cnf ~/.my.cnf,這些就是mysql默認(rèn)會搜尋my.cnf的目錄,順序排前的優(yōu)先。
1.3 配置文件內(nèi)容
通過cat查看,這個配置文件就是如下路徑:
bash-4.4# cat /etc/my.cnf
# For advice on how to change settings please see # http://dev.mysql.com/doc/refman/8.3/en/server-configuration-defaults.html [mysqld] # # Remove leading # and set to the amount of RAM for the most important data # cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%. # innodb_buffer_pool_size = 128M # # Remove leading # to turn on a very important data integrity option: logging # changes to the binary log between backups. # log_bin # # Remove leading # to set options mainly useful for reporting servers. # The server defaults are faster for transactions and fast SELECTs. # Adjust sizes as needed, experiment to find the optimal values. # join_buffer_size = 128M # sort_buffer_size = 2M # read_rnd_buffer_size = 2M # Remove leading # to revert to previous value for default_authentication_plugin, # this will increase compatibility with older clients. For background, see: # https://dev.mysql.com/doc/refman/8.3/en/server-system-variables.html#sysvar_default_authentication_plugin # default-authentication-plugin=mysql_native_password host-cache-size=0 skip-name-resolve datadir=/var/lib/mysql socket=/var/run/mysqld/mysqld.sock secure-file-priv=/var/lib/mysql-files user=mysql pid-file=/var/run/mysqld/mysqld.pid [client] socket=/var/run/mysqld/mysqld.sock !includedir /etc/mysql/conf.d/
對上面配置文件涉及到的配置參數(shù),進(jìn)行一個了解
innodb_buffer_pool_size
- innodb_buffer_pool_size 的值越大,緩存命中率越高,訪問 InnoDB 表需要的磁盤 I/O 就越少,性能也就越高。
在一個專用的數(shù)據(jù)庫服務(wù)器上可以將 80% 的物理內(nèi)存分配給 InnoDB buffer pool ,需要注意避免設(shè)置過大而導(dǎo)致頁的交換。
# 查看 buffer pool 的使用情況 show global status like '%Innodb_buffer_pool%'; # 計算 InnoDB 緩存池的命中率,如果命中率太低,則應(yīng)該考慮擴充內(nèi)存、增加 innodb_buffer_pool_size 的值 (1-Innodb_buffer_pool_reads/Innodb_buffer_pool_read_requests)*100
參考設(shè)置
1 物理內(nèi)存小于 1 GB innodb_buffer_pool_size=128M innodb_log_file_size=48M 2 物理內(nèi)存為 1 GB ~ 4GB innodb_buffer_pool_size=物理內(nèi)存*0.5 innodb_log_file_size=128M 3 物理內(nèi)存大于 4 GB innodb_buffer_pool_size=物理內(nèi)存*0.75 innodb_log_file_size=1024M
join_buffer_size
sort_buffer_size
- 如果Sort_merge_passes的值很大,可以考慮調(diào)整參數(shù)sort_buffer_size的值來增大排序緩存區(qū),以改善帶有order by子句或group子句SQL的性能。
mysql> show global status like 'Sort_merge_passes'; +-------------------+-------+ | Variable_name | Value | +-------------------+-------+ | Sort_merge_passes | 0 | +-------------------+-------+ 1 row in set (0.00 sec)
join_buffer_size 和 sort_buffer_size 都是面向客戶服務(wù)線程分配的,如果設(shè)置過大造成內(nèi)存浪費,甚至導(dǎo)致內(nèi)存交換。
尤其是 join_buffer_size ,如果是多表關(guān)聯(lián)的復(fù)雜查詢,還可能會分配多個 join buffer ,因此最好是設(shè)置較小的全局 join_buffer_size ,而對需要做復(fù)雜連接操作的 session 單獨設(shè)置較大的 join_buffer_size
read_rnd_buffer_size
- MySQL的隨機讀緩沖區(qū)大小。
- 當(dāng)按任意順序讀取行時(例如,按照排序順序),將分配一個隨機讀緩存區(qū)。
- 進(jìn)行排序查詢時,MySQL會首先掃描一遍該緩沖,以避免磁盤搜索,提高查詢速度,如果需要排序大量數(shù)據(jù),可適當(dāng)調(diào)高該值。
- 但MySQL會為每個客戶連接發(fā)放該緩沖空間,所以應(yīng)盡量適當(dāng)設(shè)置該值,以避免內(nèi)存開銷過大
default-authentication-plugin
- password加密方法。
- mysql8.0之前的版本加密方式是mysql_native_password,mysql8.0之后的加密方式是caching_sha2_password。
- 如果有些第三方客戶端工具連接報錯,則可以設(shè)置成之前的加密方式。
host-cache-size
- host緩存大小。
- MySQL會緩存IP和host的對應(yīng)信息,以免重復(fù)解析。
- 設(shè)為0表示禁用host緩存。
skip-name-resolve
- 配置了,就禁用dns解析,授權(quán)的時候需要用ip,不能用域名。
datadir
- MySQL數(shù)據(jù)存儲的根目錄。存儲了MySQL中所有的數(shù)據(jù)文件,包括表數(shù)據(jù)、索引數(shù)據(jù)、日志文件、配置文件等等。
socket
- 指定文件socket共享文件存放的位置。
secure-file-priv
- ure_file_priv的值為null ,表示限制mysqld 不允許導(dǎo)入|導(dǎo)出
- 當(dāng)secure_file_priv的值為/var/lib/mysql-files/ ,表示限制mysqld 的導(dǎo)入|導(dǎo)出只能發(fā)生在/var/lib/mysql-files/目錄下
- 當(dāng)secure_file_priv的值沒有具體值時,表示不對mysqld 的導(dǎo)入|導(dǎo)出做限制
pid-file
- pid存放路徑,pid用于標(biāo)識MySQL服務(wù)器進(jìn)程的唯一標(biāo)識符。
- 系統(tǒng)會去檢測這個pid文件存在不存在,存在則說明程序活著,不存在則說明程序掛了。
!includedir
表示包含/etc/mysql/conf.d/
這個路徑下的配置文件,docker額外配置文件就可以映射到該目錄下。
1.4 my.cnf配置詳解
[client] default-character-set=utf8mb4 #mysqlde utf8字符集默認(rèn)為3位的,不支持emoji表情及部分不常見的漢字,故推薦使用utf8mb4 [mysql] default-character-set=utf8mb4 [mysqld] skip-locking #避免MySQL的外部鎖定,減少出錯幾率增強穩(wěn)定性。 #skip-name-resolve # 禁止MySQL對外部連接進(jìn)行DNS解析,使用這一選項可以消除MySQL進(jìn)行DNS解析的時間。但需要注意,如果開啟該選項,則所有遠(yuǎn)程主機連接授權(quán)都要使用IP地址方式,否則MySQL將無法正常處理連接請求! # 因為docker官方的mysql的dockerfile中有一段代碼:echo '[mysqld]\nskip-host-cache\nskip-name-resolve' > /etc/mysql/conf.d/docker.cnf將這個配置寫入另一個文件,這里咱們就不用寫了,docker默認(rèn)解析docker name或者service為ip,這樣mysql就不用解析了 back_log = 512 # MySQL能有的連接數(shù)量。當(dāng)主要MySQL線程在一個很短時間內(nèi)得到非常多的連接請求,這就起作用, # 然后主線程花些時間(盡管很短)檢查連接并且啟動一個新線程。back_log值指出在MySQL暫時停止回答新請求之前的短時間內(nèi)多少個請求可以被存在堆棧中。 # 如果期望在一個短時間內(nèi)有很多連接,你需要增加它。也就是說,如果MySQL的連接數(shù)據(jù)達(dá)到max_connections時,新來的請求將會被存在堆棧中, # 以等待某一連接釋放資源,該堆棧的數(shù)量即back_log,如果等待連接的數(shù)量超過back_log,將不被授予連接資源。 # 另外,這值(back_log)限于您的操作系統(tǒng)對到來的TCP/IP連接的偵聽隊列的大小。 # 你的操作系統(tǒng)在這個隊列大小上有它自己的限制(可以檢查你的OS文檔找出這個變量的最大值),試圖設(shè)定back_log高于你的操作系統(tǒng)的限制將是無效的。默認(rèn)值為50,對于Linux系統(tǒng)推薦設(shè)置為小于512的整數(shù)。 key_buffer_size = 64M # 這是mysql優(yōu)化中非常重要的一項配置 # 指定用于索引的緩沖區(qū)大小,增加它可得到更好處理的索引(對所有讀和多重寫)。注意:該參數(shù)值設(shè)置的過大反而會是服務(wù)器整體效率降低 # 默認(rèn)值是16M,對于內(nèi)存在4GB左右的服務(wù)器該參數(shù)可設(shè)置為384M或512M。 # 想要知道key_buffer_size設(shè)置是否合理,通過命令show global status like 'key_read%';來查看Key_read_requests(索引請求次數(shù))和Key_reads(從i/o中讀取數(shù)據(jù),也就是未命中索引), # 計算索引未命中緩存的概率:key_cache_miss_rate = Key_reads / Key_read_requests * 100%,至少是1:100,1:1000更好,比如我的key_cache_miss_rate = 15754 / 26831941 * 100% = 1/1700,也就是說1700個中只有一個請求直接讀取硬盤 # 如果key_cache_miss_rate在0.01%以下的話,key_buffer_size分配的過多,可以適當(dāng)減少。 # MySQL服務(wù)器還提供了key_blocks_*參數(shù):show global status like 'key_blocks_u%'; # Key_blocks_unused表示未使用的緩存簇(blocks)數(shù),Key_blocks_used表示曾經(jīng)用到的最大的blocks數(shù),比如這臺服務(wù)器,所有的緩存都用到了,要么增加key_buffer_size,要么就是過渡索引了,把緩存占滿了。 # 比較理想的設(shè)置:Key_blocks_used / (Key_blocks_unused + Key_blocks_used) * 100% < 80% max_connections = 1500 # MySQL的最大連接數(shù),默認(rèn)是100,測試開過1萬個連接數(shù),并將他們持久化,內(nèi)存增加了一個多G,由此算出一個連接大概為100+K。 # 如果服務(wù)器的并發(fā)連接請求量比較大,建議調(diào)高此值,以增加并行連接數(shù)量,當(dāng)然這建立在機器能支撐的情況下,因為如果連接數(shù)越多,介于MySQL會為每個連接提供連接緩沖區(qū),就會開銷越多的內(nèi)存,所以要適當(dāng)調(diào)整該值,不能盲目提高設(shè)值。可以過'conn%'通配符查看當(dāng)前狀態(tài)的連接數(shù)量,以定奪該值的大小。 # 比較理想的設(shè)置應(yīng)該是max_used_connections / max_connections * 100% ≈ 80%,當(dāng)發(fā)現(xiàn)這一比例在10%以下的話,說明最大連接數(shù)設(shè)置的過高了 # 查看最大的連接數(shù):SHOW VARIABLES LIKE "max_connections"; # 查看已使用的最大連接:SHOW GLOBAL STATUS LIKE 'max_used_connections'; # 顯示連接相關(guān)的設(shè)置:SHOW STATUS LIKE '%connect%'; # 顯示當(dāng)前正在執(zhí)行的mysql連接:SHOW PROCESSLIST innodb_buffer_pool_size = 128M # InnoDB使用一個緩沖池來保存索引和原始數(shù)據(jù), 默認(rèn)值為128M。 # 這里你設(shè)置越大,你在存取表里面數(shù)據(jù)時所需要的磁盤I/O越少. # 在一個獨立使用的數(shù)據(jù)庫服務(wù)器上,你可以設(shè)置這個變量到服務(wù)器物理內(nèi)存大小的80%即5-6GB(8GB內(nèi)存),20-25GB(32GB內(nèi)存),100-120GB(128GB內(nèi)存),注意這是在獨立數(shù)據(jù)庫服務(wù)器中推薦的設(shè)置 # 不要設(shè)置過大,否則,會導(dǎo)致system的swap空間被占用,導(dǎo)致操作系統(tǒng)變慢,從而減低sql查詢的效率。 # 注意在32位系統(tǒng)上你每個進(jìn)程可能被限制在 2-3.5G 用戶層面內(nèi)存限制,所以不要設(shè)置的太高. query_cache_size = 0 # MySQL的查詢緩沖大?。◤?.0.1開始,MySQL提供了查詢緩沖機制)使用查詢緩沖,MySQL 5.6以后的默認(rèn)值為0,MySQL將SELECT語句和查詢結(jié)果存放在緩沖區(qū)中, # query cache(查詢緩存)是一個眾所周知的瓶頸,甚至在并發(fā)并不多的時候也是如此。 最佳選項是將其從一開始就停用,設(shè)置query_cache_size = 0(MySQL 5.6以后的默認(rèn)值)并利用其他方法加速查詢:優(yōu)化索引、增加拷貝分散負(fù)載或者啟用額外的緩存(比如memcache或redis)。 # 打開query cache(Qcache)對讀和寫都會帶來額外的消耗:a、讀查詢開始之前必須檢查是否命中緩存。b、如果讀查詢可以緩存,那么執(zhí)行完之后會寫入緩存。 c、當(dāng)向某個表寫入數(shù)據(jù)的時候,必須將這個表所有的緩存設(shè)置為失效 # 緩存存放在一個引用表中,通過一個哈希值引用,這個哈希值包括查詢本身,數(shù)據(jù)庫,客戶端協(xié)議的版本等,任何字符上的不同,例如空格,注釋都會導(dǎo)致緩存不命中。 # 通過命令:show status like '%query_cache%';查看查詢緩存相關(guān)設(shè)置: # # have_query_cache:是否有此功能 # # query_cache_limit:允許 Cache 的單條 Query 結(jié)果集的最大容量,默認(rèn)是1MB,超過此參數(shù)設(shè)置的 Query 結(jié)果集將不會被 Cache # # query_cache_min_res_unit:設(shè)置 Query Cache 中每次分配內(nèi)存的最小空間大小,也就是每個 Query 的 Cache 最小占用的內(nèi)存空間大小 # # uery_cache_size:設(shè)置 Query Cache 所使用的內(nèi)存大小,默認(rèn)值為0,大小必須是1024的整數(shù)倍,如果不是整數(shù)倍,MySQL 會自動調(diào)整降低最小量以達(dá)到1024的倍數(shù) # # query_cache_type:控制 Query Cache 功能的開關(guān),可以設(shè)置為0(OFF),1(ON)和2(DEMAND)三種,意義分別如下: # # # 0(OFF):關(guān)閉 Query Cache 功能,任何情況下都不會使用 Query Cache # # # 1(ON):開啟 Query Cache 功能,但是當(dāng) SELECT 語句中使用的 SQL_NO_CACHE 提示后,將不使用Query Cache # # # 2(DEMAND):開啟 Query Cache 功能,但是只有當(dāng) SELECT 語句中使用了 SQL_CACHE 提示后,才使用 Query Cache # # query_cache_wlock_invalidate:控制當(dāng)有寫鎖定發(fā)生在表上的時刻是否先失效該表相關(guān)的 Query Cache,如果設(shè)置為 1(TRUE),則在寫鎖定的同時將失效該表相關(guān)的所有 Query Cache,如果設(shè)置為0(FALSE)則在鎖定時刻仍然允許讀取該表相關(guān)的 Query Cache。 # 通過命令:show status like ‘%Qcache%';查看查詢緩存使用狀態(tài)值: # # Qcache_free_blocks:目前還處于空閑狀態(tài)的 Query Cache 中內(nèi)存 Block 數(shù)目 # # Qcache_free_memory:目前還處于空閑狀態(tài)的 Query Cache 內(nèi)存總量 # # Qcache_hits:Query Cache 命中次數(shù) # # Qcache_inserts:向 Query Cache 中插入新的 Query Cache 的次數(shù),也就是沒有命中的次數(shù) # # Qcache_lowmem_prunes:當(dāng) Query Cache 內(nèi)存容量不夠,需要從中刪除老的 Query Cache 以給新的 Cache 對象使用的次數(shù) # # Qcache_not_cached:沒有被 Cache 的 SQL 數(shù),包括無法被 Cache 的 SQL 以及由于 query_cache_type 設(shè)置的不會被 Cache 的 SQL # # Qcache_queries_in_cache:目前在 Query Cache 中的 SQL 數(shù)量 # # Qcache_total_blocks:Query Cache 中總的 Block 數(shù)量 # 如果Qcache_hits的值也非常大,則表明查詢緩沖使用非常頻繁,且Qcache_free_memory值很小,此時需要增加緩沖大?。? # 如果Qcache_hits的值不大,且Qcache_free_memory值較大,則表明你的查詢重復(fù)率很低,查詢緩存不適合你當(dāng)前系統(tǒng),這種情況下使用查詢緩沖反而會影響效率,可以通過設(shè)置query_cache_size = 0或者query_cache_type 來關(guān)閉查詢緩存。 # Query Cache 的大小設(shè)置超過256MB,這也是業(yè)界比較常用的做法。此外,在SELECT語句中加入SQL_NO_CACHE可以明確表示不使用查詢緩沖 max_connect_errors = 6000 # 對于同一主機,如果有超出該參數(shù)值個數(shù)的中斷錯誤連接,則該主機將被禁止連接。如需對該主機進(jìn)行解禁,執(zhí)行:FLUSH HOST。防止黑客 open_files_limit = 65535 # MySQL打開的文件描述符限制,默認(rèn)最小1024;當(dāng)open_files_limit沒有被配置的時候,比較max_connections*5和ulimit -n的值,哪個大用哪個, # 當(dāng)open_file_limit被配置的時候,比較open_files_limit和max_connections*5的值,哪個大用哪個。 table_open_cache = 128 # MySQL每打開一個表,都會讀入一些數(shù)據(jù)到table_open_cache緩存中,當(dāng)MySQL在這個緩存中找不到相應(yīng)信息時,才會去磁盤上讀取。默認(rèn)值64 # 假定系統(tǒng)有200個并發(fā)連接,則需將此參數(shù)設(shè)置為200*N(N為每個連接所需的文件描述符數(shù)目); # 當(dāng)把table_open_cache設(shè)置為很大時,如果系統(tǒng)處理不了那么多文件描述符,那么就會出現(xiàn)客戶端失效,連接不上 max_allowed_packet = 4M # 接受的數(shù)據(jù)包大小;增加該變量的值十分安全,這是因為僅當(dāng)需要時才會分配額外內(nèi)存。例如,僅當(dāng)你發(fā)出長查詢或MySQLd必須返回大的結(jié)果行時MySQLd才會分配更多內(nèi)存。 # 該變量之所以取較小默認(rèn)值是一種預(yù)防措施,以捕獲客戶端和服務(wù)器之間的錯誤信息包,并確保不會因偶然使用大的信息包而導(dǎo)致內(nèi)存溢出。 binlog_cache_size = 1M # 一個事務(wù),在沒有提交的時候,產(chǎn)生的日志,記錄到Cache中;等到事務(wù)提交需要提交的時候,則把日志持久化到磁盤。默認(rèn)binlog_cache_size大小32K max_heap_table_size = 8M # 定義了用戶可以創(chuàng)建的內(nèi)存表(memory table)的大小。這個值用來計算內(nèi)存表的最大行數(shù)值。這個變量支持動態(tài)改變 tmp_table_size = 16M # MySQL的heap(堆積)表緩沖大小。所有聯(lián)合在一個DML指令內(nèi)完成,并且大多數(shù)聯(lián)合甚至可以不用臨時表即可以完成。 # 大多數(shù)臨時表是基于內(nèi)存的(HEAP)表。具有大的記錄長度的臨時表 (所有列的長度的和)或包含BLOB列的表存儲在硬盤上。 # 如果某個內(nèi)部heap(堆積)表大小超過tmp_table_size,MySQL可以根據(jù)需要自動將內(nèi)存中的heap表改為基于硬盤的MyISAM表。還可以通過設(shè)置tmp_table_size選項來增加臨時表的大小。也就是說,如果調(diào)高該值,MySQL同時將增加heap表的大小,可達(dá)到提高聯(lián)接查詢速度的效果 read_buffer_size = 2M # MySQL讀入緩沖區(qū)大小。對表進(jìn)行順序掃描的請求將分配一個讀入緩沖區(qū),MySQL會為它分配一段內(nèi)存緩沖區(qū)。read_buffer_size變量控制這一緩沖區(qū)的大小。 # 如果對表的順序掃描請求非常頻繁,并且你認(rèn)為頻繁掃描進(jìn)行得太慢,可以通過增加該變量值以及內(nèi)存緩沖區(qū)大小提高其性能 read_rnd_buffer_size = 8M # MySQL的隨機讀緩沖區(qū)大小。當(dāng)按任意順序讀取行時(例如,按照排序順序),將分配一個隨機讀緩存區(qū)。進(jìn)行排序查詢時, # MySQL會首先掃描一遍該緩沖,以避免磁盤搜索,提高查詢速度,如果需要排序大量數(shù)據(jù),可適當(dāng)調(diào)高該值。但MySQL會為每個客戶連接發(fā)放該緩沖空間,所以應(yīng)盡量適當(dāng)設(shè)置該值,以避免內(nèi)存開銷過大 sort_buffer_size = 8M # MySQL執(zhí)行排序使用的緩沖大小。如果想要增加ORDER BY的速度,首先看是否可以讓MySQL使用索引而不是額外的排序階段。 # 如果不能,可以嘗試增加sort_buffer_size變量的大小 join_buffer_size = 8M # 聯(lián)合查詢操作所能使用的緩沖區(qū)大小,和sort_buffer_size一樣,該參數(shù)對應(yīng)的分配內(nèi)存也是每連接獨享 thread_cache_size = 8 # 這個值(默認(rèn)8)表示可以重新利用保存在緩存中線程的數(shù)量,當(dāng)斷開連接時如果緩存中還有空間,那么客戶端的線程將被放到緩存中, # 如果線程重新被請求,那么請求將從緩存中讀取,如果緩存中是空的或者是新的請求,那么這個線程將被重新創(chuàng)建,如果有很多新的線程, # 增加這個值可以改善系統(tǒng)性能.通過比較Connections和Threads_created狀態(tài)的變量,可以看到這個變量的作用。(–>表示要調(diào)整的值) # 根據(jù)物理內(nèi)存設(shè)置規(guī)則如下: # 1G —> 8 # 2G —> 16 # 3G —> 32 # 大于3G —> 64 query_cache_limit = 2M #指定單個查詢能夠使用的緩沖區(qū)大小,默認(rèn)1M ft_min_word_len = 4 # 分詞詞匯最小長度,默認(rèn)4 transaction_isolation = REPEATABLE-READ # MySQL支持4種事務(wù)隔離級別,他們分別是: # READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE. # 如沒有指定,MySQL默認(rèn)采用的是REPEATABLE-READ,ORACLE默認(rèn)的是READ-COMMITTED log_bin = mysql-bin binlog_format = mixed expire_logs_days = 30 #超過30天的binlog刪除 log_error = /data/mysql/mysql-error.log #錯誤日志路徑 slow_query_log = 1 long_query_time = 1 #慢查詢時間 超過1秒則為慢查詢 slow_query_log_file = /data/mysql/mysql-slow.log performance_schema = 0 explicit_defaults_for_timestamp #lower_case_table_names = 1 #不區(qū)分大小寫 skip-external-locking #MySQL選項以避免外部鎖定。該選項默認(rèn)開啟 default-storage-engine = InnoDB #默認(rèn)存儲引擎 innodb_file_per_table = 1 # InnoDB為獨立表空間模式,每個數(shù)據(jù)庫的每個表都會生成一個數(shù)據(jù)空間 # 獨立表空間優(yōu)點: # 1.每個表都有自已獨立的表空間。 # 2.每個表的數(shù)據(jù)和索引都會存在自已的表空間中。 # 3.可以實現(xiàn)單表在不同的數(shù)據(jù)庫中移動。 # 4.空間可以回收(除drop table操作處,表空不能自已回收) # 缺點: # 單表增加過大,如超過100G # 結(jié)論: # 共享表空間在Insert操作上少有優(yōu)勢。其它都沒獨立表空間表現(xiàn)好。當(dāng)啟用獨立表空間時,請合理調(diào)整:innodb_open_files innodb_open_files = 500 # 限制Innodb能打開的表的數(shù)據(jù),如果庫里的表特別多的情況,請增加這個。這個值默認(rèn)是300 innodb_write_io_threads = 4 innodb_read_io_threads = 4 # innodb使用后臺線程處理數(shù)據(jù)頁上的讀寫 I/O(輸入輸出)請求,根據(jù)你的 CPU 核數(shù)來更改,默認(rèn)是4 # 注:這兩個參數(shù)不支持動態(tài)改變,需要把該參數(shù)加入到my.cnf里,修改完后重啟MySQL服務(wù),允許值的范圍從 1-64 innodb_thread_concurrency = 0 # 默認(rèn)設(shè)置為 0,表示不限制并發(fā)數(shù),這里推薦設(shè)置為0,更好去發(fā)揮CPU多核處理能力,提高并發(fā)量 innodb_purge_threads = 1 # InnoDB中的清除操作是一類定期回收無用數(shù)據(jù)的操作。在之前的幾個版本中,清除操作是主線程的一部分,這意味著運行時它可能會堵塞其它的數(shù)據(jù)庫操作。 # 從MySQL5.5.X版本開始,該操作運行于獨立的線程中,并支持更多的并發(fā)數(shù)。用戶可通過設(shè)置innodb_purge_threads配置參數(shù)來選擇清除操作是否使用單 # 獨線程,默認(rèn)情況下參數(shù)設(shè)置為0(不使用單獨線程),設(shè)置為 1 時表示使用單獨的清除線程。建議為1 innodb_flush_log_at_trx_commit = 2 # 0:如果innodb_flush_log_at_trx_commit的值為0,log buffer每秒就會被刷寫日志文件到磁盤,提交事務(wù)的時候不做任何操作(執(zhí)行是由mysql的master thread線程來執(zhí)行的。 # 主線程中每秒會將重做日志緩沖寫入磁盤的重做日志文件(REDO LOG)中。不論事務(wù)是否已經(jīng)提交)默認(rèn)的日志文件是ib_logfile0,ib_logfile1 # 1:當(dāng)設(shè)為默認(rèn)值1的時候,每次提交事務(wù)的時候,都會將log buffer刷寫到日志。 # 2:如果設(shè)為2,每次提交事務(wù)都會寫日志,但并不會執(zhí)行刷的操作。每秒定時會刷到日志文件。要注意的是,并不能保證100%每秒一定都會刷到磁盤,這要取決于進(jìn)程的調(diào)度。 # 每次事務(wù)提交的時候?qū)?shù)據(jù)寫入事務(wù)日志,而這里的寫入僅是調(diào)用了文件系統(tǒng)的寫入操作,而文件系統(tǒng)是有 緩存的,所以這個寫入并不能保證數(shù)據(jù)已經(jīng)寫入到物理磁盤 # 默認(rèn)值1是為了保證完整的ACID。當(dāng)然,你可以將這個配置項設(shè)為1以外的值來換取更高的性能,但是在系統(tǒng)崩潰的時候,你將會丟失1秒的數(shù)據(jù)。 # 設(shè)為0的話,mysqld進(jìn)程崩潰的時候,就會丟失最后1秒的事務(wù)。設(shè)為2,只有在操作系統(tǒng)崩潰或者斷電的時候才會丟失最后1秒的數(shù)據(jù)。InnoDB在做恢復(fù)的時候會忽略這個值。 # 總結(jié) # 設(shè)為1當(dāng)然是最安全的,但性能頁是最差的(相對其他兩個參數(shù)而言,但不是不能接受)。如果對數(shù)據(jù)一致性和完整性要求不高,完全可以設(shè)為2,如果只最求性能,例如高并發(fā)寫的日志服務(wù)器,設(shè)為0來獲得更高性能 innodb_log_buffer_size = 4M # 此參數(shù)確定些日志文件所用的內(nèi)存大小,以M為單位。緩沖區(qū)更大能提高性能,但意外的故障將會丟失數(shù)據(jù)。MySQL開發(fā)人員建議設(shè)置為1-8M之間 innodb_log_file_size = 32M # 此參數(shù)確定數(shù)據(jù)日志文件的大小,更大的設(shè)置可以提高性能,但也會增加恢復(fù)故障數(shù)據(jù)庫所需的時間 innodb_log_files_in_group = 3 # 為提高性能,MySQL可以以循環(huán)方式將日志文件寫到多個文件。推薦設(shè)置為3 innodb_max_dirty_pages_pct = 90 # innodb主線程刷新緩存池中的數(shù)據(jù),使臟數(shù)據(jù)比例小于90% innodb_lock_wait_timeout = 120 # InnoDB事務(wù)在被回滾之前可以等待一個鎖定的超時秒數(shù)。InnoDB在它自己的鎖定表中自動檢測事務(wù)死鎖并且回滾事務(wù)。InnoDB用LOCK TABLES語句注意到鎖定設(shè)置。默認(rèn)值是50秒 bulk_insert_buffer_size = 8M # 批量插入緩存大小, 這個參數(shù)是針對MyISAM存儲引擎來說的。適用于在一次性插入100-1000+條記錄時, 提高效率。默認(rèn)值是8M。可以針對數(shù)據(jù)量的大小,翻倍增加。 myisam_sort_buffer_size = 8M # MyISAM設(shè)置恢復(fù)表之時使用的緩沖區(qū)的尺寸,當(dāng)在REPAIR TABLE或用CREATE INDEX創(chuàng)建索引或ALTER TABLE過程中排序 MyISAM索引分配的緩沖區(qū) myisam_max_sort_file_size = 10G # 如果臨時文件會變得超過索引,不要使用快速排序索引方法來創(chuàng)建一個索引。注釋:這個參數(shù)以字節(jié)的形式給出 myisam_repair_threads = 1 # 如果該值大于1,在Repair by sorting過程中并行創(chuàng)建MyISAM表索引(每個索引在自己的線程內(nèi)) interactive_timeout = 28800 # 服務(wù)器關(guān)閉交互式連接前等待活動的秒數(shù)。交互式客戶端定義為在mysql_real_connect()中使用CLIENT_INTERACTIVE選項的客戶端。默認(rèn)值:28800秒(8小時) wait_timeout = 28800 # 服務(wù)器關(guān)閉非交互連接之前等待活動的秒數(shù)。在線程啟動時,根據(jù)全局wait_timeout值或全局interactive_timeout值初始化會話wait_timeout值, # 取決于客戶端類型(由mysql_real_connect()的連接選項CLIENT_INTERACTIVE定義)。參數(shù)默認(rèn)值:28800秒(8小時) # MySQL服務(wù)器所支持的最大連接數(shù)是有上限的,因為每個連接的建立都會消耗內(nèi)存,因此我們希望客戶端在連接到MySQL Server處理完相應(yīng)的操作后, # 應(yīng)該斷開連接并釋放占用的內(nèi)存。如果你的MySQL Server有大量的閑置連接,他們不僅會白白消耗內(nèi)存,而且如果連接一直在累加而不斷開, # 最終肯定會達(dá)到MySQL Server的連接上限數(shù),這會報'too many connections'的錯誤。對于wait_timeout的值設(shè)定,應(yīng)該根據(jù)系統(tǒng)的運行情況來判斷。 # 在系統(tǒng)運行一段時間后,可以通過show processlist命令查看當(dāng)前系統(tǒng)的連接狀態(tài),如果發(fā)現(xiàn)有大量的sleep狀態(tài)的連接進(jìn)程,則說明該參數(shù)設(shè)置的過大, # 可以進(jìn)行適當(dāng)?shù)恼{(diào)整小些。要同時設(shè)置interactive_timeout和wait_timeout才會生效。 [mysqldump] quick max_allowed_packet = 16M #服務(wù)器發(fā)送和接受的最大包長度 [myisamchk] key_buffer_size = 8M sort_buffer_size = 8M read_buffer = 4M write_buffer = 4M
2. MySQL客戶端登錄
語法:
mysql -u 用戶名 [-h 主機名] -p 密碼 [-P 端口號] [-D 數(shù)據(jù)庫名] [-e MySQL命令] [-S socket文件名]
說明:
- -u, --user=name,登錄用戶名
- -h, --host=name,主機名
- -p, --password[=name],登錄密碼
- -P, --port=#,端口號,默認(rèn)3306
- -D, --database=name,數(shù)據(jù)庫名
- -e, --execute=name,執(zhí)行命令
- -S, --socket=name,socket文件
3. /docker-entrypoint-initdb.d/
在使用Docker部署數(shù)據(jù)庫時,容器內(nèi)的/docker-entrypoint-initdb.d/
目錄,在容器啟動時會自動執(zhí)行其中的腳本文件,并將其用于初始化數(shù)據(jù)庫。
這些腳本文件可以是任何可執(zhí)行的腳本,如Shell腳本、SQL腳本等。
下面進(jìn)行測試下:
1、準(zhǔn)備一個init.sql文件,內(nèi)容如下:
建1個庫,建1個表,插入兩條數(shù)據(jù)
CREATE DATABASE mydb; USE mydb; CREATE TABLE users ( id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(50) NOT NULL ); INSERT INTO users (name) VALUES ('beijing'); INSERT INTO users (name) VALUES ('guangzhou');
2、創(chuàng)建一個mysql容器
docker run --name=mysql-test -d -e MYSQL_ROOT_PASSWORD=123456 -v ./init.sql:/docker-entrypoint-initdb.d/init.sql mysql docker exec -it mysql-test sh mysql -uroot -p select * from mydb.users;
作用:
- 1.數(shù)據(jù)庫初始化
- 2.數(shù)據(jù)庫遷移
- 3.數(shù)據(jù)庫備份與恢復(fù)
- 4.數(shù)據(jù)庫配置
總結(jié)
以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關(guān)文章
基于Docker+Jenkins實現(xiàn)自動化部署的方法
這篇文章主要介紹了基于Docker+Jenkins實現(xiàn)自動化部署,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2020-07-07docker創(chuàng)建mongodb數(shù)據(jù)庫容器的方法
本文將通過docker創(chuàng)建一個mongodb數(shù)據(jù)庫容器,本文通過實例代碼給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友參考下吧2024-03-03Docker安裝MySQL8.0的詳細(xì)步驟(附圖文!)
Windows上安裝MySQL相對來說會較為簡單,但是在Docker安裝就沒那么簡單了,下面這篇文章主要給大家介紹了關(guān)于Docker安裝MySQL8.0的詳細(xì)步驟,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-02-02Docker開啟遠(yuǎn)程連接并實現(xiàn)安全通信詳解
這篇文章主要為大家介紹了Docker開啟遠(yuǎn)程連接并實現(xiàn)安全通信過程詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-08-08Docker基礎(chǔ)學(xué)習(xí)之?dāng)?shù)據(jù)管理
我們在使用Docker 的時候,會產(chǎn)生很多數(shù)據(jù),比如web服務(wù)器啊,數(shù)據(jù)庫之類的,有時我們還需要備份或復(fù)制這些數(shù)據(jù),這就需要涉及到Docker的數(shù)據(jù)管理了。這篇文章就給大家詳細(xì)的介紹Docker的數(shù)據(jù)管理,感興趣的朋友們可以參考借鑒,下面來一起看看吧。2016-10-10