mysql數據庫峰值（數據的峰值）

本文目錄一覽：

1、mysql表中同時有myisam和innodb怎麼導入
2、mysql數據庫怎麼把查詢出來的數據生成臨時表
3、怎樣才能使mysql運行時性能不受設置的限制
4、mysql 如何分配內存
5、關於 MYSQL 臨時表的問題，求解答
6、mysql 中InnoDB和MyISAM的區別分析小結

mysql表中同時有myisam和innodb怎麼導入

　InnoDB和MyISAM是在使用MySQL最常用的兩個表類型，各有優缺點，視具體應用而定。

下面是已知的兩者之間的差別，僅供參考。

innodb

InnoDB 給 MySQL 提供了具有事務(commit)、回滾(rollback)和崩潰修復能力

(crash recovery capabilities)的事務安全

(transaction-safe (ACID compliant))型表。InnoDB 提供了行鎖

(locking on row level)，提供與 Oracle 類型一致的不加鎖讀取(non-locking

read in SELECTs)。這些特性均提高了多用戶並發操作的性能表現。

在InnoDB表中不需要擴大鎖定(lock escalation)，因為 InnoDB 的列鎖定(row level

locks)適宜非常小的空間。InnoDB 是 MySQL 上第一個提供外鍵約束(FOREIGN KEY

constraints)的表引擎。

InnoDB 的設計目標是處理大容量數據庫系統，它的 CPU 利用率是其它基於磁盤的關係數據庫

引擎所不能比的。在技術上，InnoDB 是一套放在 MySQL 後台的完整數據庫系統，

InnoDB 在主內存中建立其專用的緩衝池用於高速緩衝數據和索引。 InnoDB 把數據和索引存

放在表空間里，可能包含多個文件，這與其它的不一樣，舉例來說，在 MyISAM 中，表被存放

在單獨的文件中。InnoDB 表的大小隻受限於操作系統的文件大小，一般為 2 GB。

InnoDB所有的表都保存在同一個數據文件 ibdata1 中（也可能是多個文件，或者是獨立的

表空間文件）,相對來說比較不好備份，免費的方案可以是拷貝數據文件、備份 binlog，

或者用 mysqldump。

MyISAM

MyISAM 是MySQL缺省存貯引擎 .

每張MyISAM 表被存放在三個文件。frm 文件存放表格定義。數據文件是MYD (MYData) 。

索引文件是MYI (MYIndex) 引伸。

因為MyISAM相對簡單所以在效率上要優於InnoDB..小型應用使用MyISAM是不錯的選擇.

MyISAM表是保存成文件的形式,在跨平台的數據轉移中使用MyISAM存儲會省去不少的麻煩

MyISAM是ISAM表的新版本，有如下擴展：

·二進制層次的可移植性。

·NULL列索引。

·對變長行比ISAM表有更少的碎片。

·支持大文件。

·更好的索引壓縮。

·更好的鍵嗎統計分布。

·更好和更快的auto_increment處理。

以下是一些細節和具體實現的差別：

◆1.InnoDB不支持FULLTEXT類型的索引。

◆2.InnoDB 中不保存表的具體行數，也就是說，執行select count(*) from table時，

InnoDB要掃描一遍整個表來計算有多少行，但是MyISAM只要簡單的讀出保存好的行數即可。

注意的是，當count(*)語句包含 where條件時，兩種表的操作是一樣的。

◆3.對於AUTO_INCREMENT類型的字段，InnoDB中必須包含只有該字段的索引，但是在MyISAM

表中，可以和其他字段一起建立聯合索引。

◆4.DELETE FROM table時，InnoDB不會重新建立表，而是一行一行的刪除。

◆5.LOAD TABLE FROM MASTER操作對InnoDB是不起作用的，解決方法是首先把InnoDB表改成

MyISAM表，導入數據後再改成InnoDB表，但是對於使用的額外的InnoDB特性（例如外鍵）的

表不適用。

◆MyISAM類型的二進制數據文件可以在不同操作系統中遷移。

另外，InnoDB表的行鎖也不是絕對的，假如在執行一個SQL語句時MySQL不能確定要掃描的

範圍，InnoDB表同樣會鎖全表，例如update table set num=1 where name like “%aaa%”

再另外，使用兩種的選擇：如果你的數據執行大量的INSERT或UPDATE，出於性能方面的考慮，

應該使用InnoDB表。如果執行大量的SELECT，MyISAM是更好的選擇。若需要使用事務處理，

但是原來的數據表使用的是myisam，就需要改為bdb或者innodb，這樣基於myisam的程序，

將類型改為innodb後，其程序不用改動……

綜上所述，任何一種表都不是萬能的，只有恰當的針對業務類型來選擇合適的表類型，才能

最大的發揮MySQL的性能優勢。

MyISAM和InnoDB優化：

key_buffer_size – 這對MyISAM表來說非常重要。如果只是使用MyISAM表，可以把它設置

為可用內存的 30-40%。合理的值取決於索引大小、數據量以及負載 — 記住，MyISAM表會

使用操作系統的緩存來緩存數據，因此需要留出部分內存給它們，很多情況下數據比索引大

多了。儘管如此，需要總是檢查是否所有的 key_buffer 都被利用了 — .MYI 文件只有 1GB

，而 key_buffer 卻設置為 4GB 的情況是非常少的。這麼做太浪費了。如果你很少使用

MyISAM表，那麼也保留低於 16-32MB 的 key_buffer_size 以適應給予磁盤的臨時表索引

所需。

innodb_buffer_pool_size – 這對Innodb表來說非常重要。Innodb相比MyISAM表對緩衝更

為敏感。MyISAM可以在默認的 key_buffer_size 設置下運行的可以，然而Innodb在默認的

innodb_buffer_pool_size 設置下卻跟蝸牛似的。由於Innodb把數據和索引都緩存起來，

無需留給操作系統太多的內存，因此如果只需要用Innodb的話則可以設置它高達 70-80% 的

可用內存。一些應用於 key_buffer 的規則有 — 如果你的數據量不大，並且不會暴增，那

么無需把

innodb_additional_pool_size – 這個選項對性能影響並不太多，至少在有差不多足夠內存

可分配的操作系統上是這樣。不過如果你仍然想設置為 20MB(或者更大)，因此就需要看一下

Innodb其他需要分配的內存有多少。

innodb_log_file_size 在高寫入負載尤其是大數據集的情況下很重要。這個值越大則性能相

對越高，但是要注意到可能會增加恢復時間。我經常設置為 64-512MB，跟據服務器大小而異。

innodb_log_buffer_size 默認的設置在中等強度寫入負載以及較短事務的情況下，服務器性

能還可以。如果存在更新操作峰值或者負載較大，就應該考慮加大它的值了。如果它的值設置

太高了，可能會浪費內存 — 它每秒都會刷新一次，因此無需設置超過1秒所需的內存空間。

通常 8-16MB 就足夠了。越小的系統它的值越小。

innodb_flush_logs_at_trx_commit 是否為Innodb比MyISAM慢1000倍而頭大？看來也許你忘

了修改這個參數了。默認值是 1，這意味着每次提交的更新事務（或者每個事務之外的語句）

都會刷新到磁盤中，而這相當耗費資源，尤其是沒有電池備用緩存時。很多應用程序，尤其是

從 MyISAM轉變過來的那些，把它的值設置為 2 就可以了，也就是不把日誌刷新到磁盤上，

而只刷新到操作系統的緩存上。日誌仍然會每秒刷新到磁盤中去，因此通常不會丟失每秒1-

2次更新的消耗。如果設置為 0 就快很多了，不過也相對不安全了 — MySQL服務器崩潰時

就會丟失一些事務。設置為 2 指揮丟失刷新到操作系統緩存的那部分事務。

table_cache — 打開一個表的開銷可能很大。例如MyISAM把MYI文件頭標誌該表正在使用

中。你肯定不希望這種操作太頻繁，所以通常要加大緩存數量，使得足以最大限度地緩存打

開的表。它需要用到操作系統的資源以及內存，對當前的硬件配置來說當然不是什麼問題了。

如果你有200多個表的話，那麼設置為 1024 也許比較合適（每個線程都需要打開表），

如果連接數比較大那麼就加大它的值。我曾經見過設置為 100,000 的情況。

thread_cache — 線程的創建和銷毀的開銷可能很大，因為每個線程的連接/斷開都需要。

我通常至少設置為 16。如果應用程序中有大量的跳躍並發連接並且 Threads_Created 的值

也比較大，那麼我就會加大它的值。它的目的是在通常的操作中無需創建新線程。

query_cache — 如果你的應用程序有大量讀，而且沒有應用程序級別的緩存，那麼這很有

用。不要把它設置太大了，因為想要維護它也需要不少開銷，這會導致MySQL變慢。通常設置

為 32-512Mb。設置完之後最好是跟蹤一段時間，查看是否運行良好。在一定的負載壓力下，

如果緩存命中率太低了，就啟用它。

sort_buffer_size –如果你只有一些簡單的查詢，那麼就無需增加它的值了，儘管你有

64GB 的內存。搞不好也許會降低性能

mysql數據庫怎麼把查詢出來的數據生成臨時表

MySQL 需要創建隱式臨時表來解決某些類型的查詢。往往查詢的排序階段需要依賴臨時表。例如，當您使用 GROUP BY，ORDER BY 或DISTINCT 時。這樣的查詢分兩個階段執行：首先是收集數據並將它們放入臨時表中，然後是在臨時表上執行排序。

對於某些 UNION 語句，不能合併的 VIEW，子查詢時用到派生表，多表 UPDATE 以及其他一些情況，還需要使用臨時表。如果臨時表很小，可以到內存中創建，否則它將在磁盤上創建。MySQL 在內存中創建了一個表，如果它變得太大，就會被轉換為磁盤上存儲。內存臨時表的最大值由 tmp_table_size 或 max_heap_table_size 值定義，以較小者為準。MySQL 5.7 中的默認大小為 16MB。如果運行查詢的數據量較大，或者尚未查詢優化，則可以增加該值。設置閾值時，請考慮可用的 RAM 大小以及峰值期間的並發連接數。你無法無限期地增加變量，因為在某些時候你需要讓 MySQL 使用磁盤上的臨時表。

注意：如果涉及的表具有 TEXT 或 BLOB 列，則即使大小小於配置的閾值，也會在磁盤上創建臨時表。

怎樣才能使mysql運行時性能不受設置的限制

儘管可以調節很多MySQL服務器上的變量，但是在大多數通常的工作負載下，只有少數幾個才真正重要。如果把這些變量設置正確了，那麼修改其他變量最多只能對系統性能改善有一定提升。

key_buffer_size – 這對MyISAM表來說非常重要。如果只是使用MyISAM表，可以把它設置為可用內存的 30-40%。合理的值取決於索引大小、數據量以及負載 — 記住，MyISAM表會使用操作系統的緩存來緩存數據，因此需要留出部分內存給它們，很多情況下數據比索引大多了。儘管如此，需要總是檢查是否所有的 key_buffer 都被利用了 — .MYI 文件只有 1GB，而 key_buffer 卻設置為 4GB 的情況是非常少的。這麼做太浪費了。如果你很少使用MyISAM表，那麼也保留低於 16-32MB 的 key_buffer_size 以適應給予磁盤的臨時表索引所需。

iinnodb_buffer_pool_size – 這對Innodb表來說非常重要。Innodb相比MyISAM表對緩衝更為敏感。MyISAM可以在默認的 key_buffer_size 設置下運行的可以，然而Innodb在默認的 innodb_buffer_pool_size 設置下卻跟蝸牛似的。由於Innodb把數據和索引都緩存起來，無需留給操作系統太多的內存，因此如果只需要用Innodb的話則可以設置它高達 70-80% 的可用內存。一些應用於 key_buffer 的規則有 — 如果你的數據量不大，並且不會暴增，那麼無需把 innodb_buffer_pool_size 設置的太大了。

innodb_additional_pool_size – 這個選項對性能影響並不太多，至少在有差不多足夠內存可分配的操作系統上是這樣。不過如果你仍然想設置為 20MB(或者更大)，因此就需要看一下Innodb其他需要分配的內存有多少。

innodb_log_file_size 在高寫入負載尤其是大數據集的情況下很重要。這個值越大則性能相對越高，但是要注意到可能會增加恢復時間。我經常設置為 64-512MB，跟據服務器大小而異。

innodb_log_buffer_size 默認的設置在中等強度寫入負載以及較短事務的情況下，服務器性能還可以。如果存在更新操作峰值或者負載較大，就應該考慮加大它的值了。如果它的值設置太高了，可能會浪費內存 — 它每秒都會刷新一次，因此無需設置超過1秒所需的內存空間。通常 8-16MB 就足夠了。越小的系統它的值越小。

innodb_flush_logs_at_trx_commit 是否為Innodb比MyISAM慢1000倍而頭大？看來也許你忘了修改這個參數了。默認值是 1，這意味着每次提交的更新事務（或者每個事務之外的語句）都會刷新到磁盤中，而這相當耗費資源，尤其是沒有電池備用緩存時。很多應用程序，尤其是從 MyISAM轉變過來的那些，把它的值設置為 2 就可以了，也就是不把日誌刷新到磁盤上，而只刷新到操作系統的緩存上。日誌仍然會每秒刷新到磁盤中去，因此通常不會丟失每秒1-2次更新的消耗。如果設置為 0 就快很多了，不過也相對不安全了 — MySQL服務器崩潰時就會丟失一些事務。設置為 2 指揮丟失刷新到操作系統緩存的那部分事務。

table_cache — 打開一個表的開銷可能很大。例如MyISAM把MYI文件頭標誌該表正在使用中。你肯定不希望這種操作太頻繁，所以通常要加大緩存數量，使得足以最大限度地緩存打開的表。它需要用到操作系統的資源以及內存，對當前的硬件配置來說當然不是什麼問題了。如果你有200多個表的話，那麼設置為 1024 也許比較合適（每個線程都需要打開表），如果連接數比較大那麼就加大它的值。我曾經見過設置為 100,000 的情況。

thread_cache — 線程的創建和銷毀的開銷可能很大，因為每個線程的連接/斷開都需要。我通常至少設置為 16。如果應用程序中有大量的跳躍並發連接並且 Threads_Created 的值也比較大，那麼我就會加大它的值。它的目的是在通常的操作中無需創建新線程。

query_cache — 如果你的應用程序有大量讀，而且沒有應用程序級別的緩存，那麼這很有用。不要把它設置太大了，因為想要維護它也需要不少開銷，這會導致MySQL變慢。通常設置為 32-512Mb。設置完之後最好是跟蹤一段時間，查看是否運行良好。在一定的負載壓力下，如果緩存命中率太低了，就啟用它。

注意：就像看到的上面這些全局表量，它們都是依據硬件配置以及不同的存儲引擎而不同，但是會話變量通常是根據不同的負載來設定的。如果你只有一些簡單的查詢，那麼就無需增加 sort_buffer_size 的值了，儘管你有 64GB 的內存。搞不好也許會降低性能。

通常在分析系統負載後才來設置會話變量。

P.S，MySQL的發行版已經包含了各種 my.cnf 範例文件了，可以作為配置模板使用。通常這比你使用默認設置好的多了。

mysql 如何分配內存

我們仍然使用兩個會話，一個會話 run，用於運行主 SQL；另一個會話 ps，用於進行 performance_schema 的觀察：

主會話線程號為 29，

將 performance_schema 中的統計量重置，

臨時表的表大小限制取決於參數 tmp_table_size 和 max_heap_table_size 中較小者，我們實驗中以設置 max_heap_table_size 為例。

我們將會話級別的臨時表大小設置為 2M（小於上次實驗中臨時表使用的空間），執行使用臨時表的 SQL：

查看內存的分配記錄：

會發現內存分配略大於 2M，我們猜測臨時表會比配置略多一點消耗，可以忽略。

查看語句的特徵值：

可以看到語句使用了一次需要落磁盤的臨時表。

那麼這張臨時表用了多少的磁盤呢？

我們開啟 performance_schema 中 waits 相關的統計項：

重做實驗，略過。

再查看 performance_schema 的統計值：

可以看到幾個現象：

1. 臨時表空間被寫入了 7.92MiB 的數據。

2. 這些數據是語句寫入後，慢慢逐漸寫入的。

來看看這些寫入操作的特徵，該方法我們在實驗 03 使用過：

可以看到寫入的線程是 page_clean_thread，是一個刷臟操作，這樣就能理解數據為什麼是慢慢寫入的。

也可以看到每個 IO 操作的大小是 16K，也就是刷數據頁的操作。

結論：

我們可以看到，

1. MySQL 會基本遵守 max_heap_table_size 的設定，在內存不夠用時，直接將錶轉到磁盤上存儲。

2. 由於引擎不同（內存中表引擎為 heap，磁盤中表引擎則跟隨 internal_tmp_disk_storage_engine 的配置），本次實驗寫磁盤的數據量和實驗 05 中使用內存的數據量不同。

3. 如果臨時表要使用磁盤，表引擎配置為 InnoDB，那麼即使臨時表在一個時間很短的 SQL 中使用，且使用後即釋放，釋放後也會刷臟頁到磁盤中，消耗部分 IO。

關於 MYSQL 臨時表的問題，求解答