建站
咨詢
售后
建站咨詢
新聞中心
GP數(shù)據(jù)庫(kù)（Greenplum Database）是業(yè)界領(lǐng)先的分布式關(guān)系型數(shù)據(jù)庫(kù)管理系統(tǒng)，其高效的數(shù)據(jù)壓縮、強(qiáng)大的分布式查詢和多種工具集使其成為大數(shù)據(jù)分析和數(shù)據(jù)倉(cāng)庫(kù)領(lǐng)域的首選方案。在GP數(shù)據(jù)庫(kù)中，多表關(guān)聯(lián)查詢是常見的操作，但是由于數(shù)據(jù)量大、并行性高的特性，會(huì)對(duì)查詢性能產(chǎn)生影響。本文將介紹一些GP數(shù)據(jù)庫(kù)多表關(guān)聯(lián)的調(diào)優(yōu)技巧，以提高查詢效率，并減少查詢時(shí)間。
創(chuàng)新互聯(lián)堅(jiān)持“要么做到，要么別承諾”的工作理念，服務(wù)領(lǐng)域包括：網(wǎng)站建設(shè)、成都做網(wǎng)站、企業(yè)官網(wǎng)、英文網(wǎng)站、手機(jī)端網(wǎng)站、網(wǎng)站推廣等服務(wù)，滿足客戶于互聯(lián)網(wǎng)時(shí)代的五家渠網(wǎng)站設(shè)計(jì)、移動(dòng)媒體設(shè)計(jì)的需求，幫助企業(yè)找到有效的互聯(lián)網(wǎng)解決方案。努力成為您成熟可靠的網(wǎng)絡(luò)建設(shè)合作伙伴！
1. 索引優(yōu)化
在GP數(shù)據(jù)庫(kù)中，索引是提高查詢效率的重要手段，因?yàn)樗饕梢钥焖俣ㄎ恍枰樵兊臄?shù)據(jù)。因此，我們?cè)谶M(jìn)行多表關(guān)聯(lián)查詢時(shí)，需要對(duì)表進(jìn)行索引優(yōu)化?？梢酝ㄟ^以下方法進(jìn)行優(yōu)化：
1） 在關(guān)聯(lián)字段上創(chuàng)建索引
在多表關(guān)聯(lián)查詢時(shí)，通常會(huì)使用關(guān)聯(lián)字段進(jìn)行連接，此時(shí)可以在這些關(guān)聯(lián)字段上創(chuàng)建索引，以加快查詢速度。在GP數(shù)據(jù)庫(kù)中，可以使用以下語句創(chuàng)建索引：
“`
CREATE INDEX index_name ON table_name (column_name);
“`
2） 使用覆蓋索引
覆蓋索引是指索引包含了查詢所需的所有信息，避免了查詢數(shù)據(jù)的IO操作，從而提高查詢效率。在GP數(shù)據(jù)庫(kù)中，如果查詢的列已經(jīng)包含在索引中，就可以使用覆蓋索引進(jìn)行查詢?？梢允褂靡韵抡Z句創(chuàng)建覆蓋索引：
“`
CREATE INDEX index_name ON table_name (column_name) INCLUDE (column1, column2…);
“`
2. 分區(qū)表優(yōu)化
在GP數(shù)據(jù)庫(kù)中，如果表的數(shù)據(jù)量很大，會(huì)對(duì)查詢性能產(chǎn)生影響。可以通過分區(qū)表的方式，將表分割成多個(gè)小表，以減輕每個(gè)表的負(fù)載。在進(jìn)行多表關(guān)聯(lián)查詢時(shí)，可以將分區(qū)表進(jìn)行優(yōu)化，以提高查詢效率。可以通過以下方法進(jìn)行優(yōu)化：
1） 使用合適的分區(qū)方式
在進(jìn)行分區(qū)表優(yōu)化時(shí)，需要選擇合適的分區(qū)方式。GP數(shù)據(jù)庫(kù)提供了多種分區(qū)方式，如范圍分區(qū)、哈希分區(qū)、列表分區(qū)等。具體的選擇需要根據(jù)實(shí)際情況進(jìn)行調(diào)整。
2） 使用本地連接
在多表關(guān)聯(lián)查詢時(shí)，可以使用本地連接方式，即只在同一節(jié)點(diǎn)上進(jìn)行表的連接操作，避免了跨節(jié)點(diǎn)的通信，從而提高查詢效率?？梢酝ㄟ^以下語句指定本地連接：
“`
SELECT /*+NOCROSSJOINS*/ column FROM table1, table2 WHERE table1.column = table2.column;
“`
3. 并行查詢優(yōu)化
在GP數(shù)據(jù)庫(kù)中，分布式查詢是默認(rèn)開啟的，可以通過并行查詢的方式，利用集群中的所有節(jié)點(diǎn)進(jìn)行計(jì)算，從而提高查詢速度。在進(jìn)行多表關(guān)聯(lián)查詢時(shí)，可以通過以下方法進(jìn)行并行查詢優(yōu)化：
1） 控制并行度
在進(jìn)行并行查詢時(shí)，需要控制并行度，即使用多少個(gè)節(jié)點(diǎn)進(jìn)行查詢。在GP數(shù)據(jù)庫(kù)中，可以通過設(shè)置max_statement（查詢語句的更大并行度）和max_connections（查詢的更大連接數(shù)）兩個(gè)參數(shù)來控制并行度。通常情況下，建議將max_statement設(shè)置為節(jié)點(diǎn)數(shù)的2-4倍。
2） 并行執(zhí)行計(jì)劃查詢
并行執(zhí)行計(jì)劃查詢是一種優(yōu)化查詢過程的方式，它可以讓查詢?cè)谒泄?jié)點(diǎn)上同時(shí)運(yùn)行。在GP數(shù)據(jù)庫(kù)中，可以通過以下語句執(zhí)行并行執(zhí)行計(jì)劃查詢：
“`
EXPLN ANAZE SELECT column1, column2 FROM table1, table2 WHERE table1.column = table2.column;
“`
4. 數(shù)據(jù)庫(kù)結(jié)構(gòu)優(yōu)化
在GP數(shù)據(jù)庫(kù)中，還可以通過優(yōu)化數(shù)據(jù)庫(kù)結(jié)構(gòu)，進(jìn)一步提高多表關(guān)聯(lián)查詢的效率?？梢酝ㄟ^以下方法進(jìn)行優(yōu)化：
1） 壓縮數(shù)據(jù)
對(duì)于GP數(shù)據(jù)庫(kù)中的大數(shù)據(jù)量，可以對(duì)其進(jìn)行壓縮，以減少存儲(chǔ)空間，從而提高查詢速度。可以通過以下語句對(duì)表進(jìn)行壓縮：
“`
ALTER TABLE table_name SET WITH (COMPRESSION_TYPE=‘type’, COMPRESSION_LEVEL=‘level’);
“`
2） 選擇合適的數(shù)據(jù)類型
在創(chuàng)建數(shù)據(jù)庫(kù)表時(shí)，需要選擇合適的數(shù)據(jù)類型。數(shù)據(jù)類型的選擇會(huì)影響存儲(chǔ)空間和查詢速度。通常情況下，建議使用與實(shí)際數(shù)據(jù)類型相匹配的數(shù)據(jù)類型，以提高查詢效率。
多表關(guān)聯(lián)查詢是GP數(shù)據(jù)庫(kù)中常見的操作之一，但是由于數(shù)據(jù)量大、并行性高的特性，會(huì)對(duì)查詢性能產(chǎn)生影響。在進(jìn)行多表關(guān)聯(lián)查詢時(shí)，需要對(duì)表進(jìn)行索引優(yōu)化、分區(qū)表優(yōu)化、并行查詢優(yōu)化、數(shù)據(jù)庫(kù)結(jié)構(gòu)優(yōu)化等多方面的調(diào)優(yōu)工作，以提高查詢效率，并減少查詢時(shí)間。同時(shí)，也需要根據(jù)實(shí)際情況進(jìn)行選擇和調(diào)整，不同的情況需要采用不同的優(yōu)化方案。
相關(guān)問題拓展閱讀：
- MySQL性能調(diào)優(yōu) – 你必須了解的15個(gè)重要變量
- GBase8s數(shù)據(jù)庫(kù)SQL語句性能緩慢從哪個(gè)方面入手分析？
MySQL性能調(diào)優(yōu) – 你必須了解的15個(gè)重要變量
前言:
MYSQL 應(yīng)該是更流行了 WEB 后端數(shù)據(jù)庫(kù)。雖然 NOSQL 最近越來越多的被提到，但是相信大部分架構(gòu)師還是會(huì)選擇 MYSQL 來做數(shù)據(jù)存儲(chǔ)。本文作者總結(jié)梳理MySQL性能調(diào)優(yōu)的15個(gè)重要變量，又不足需要補(bǔ)充的還望大佬指出。
1.DEFAULT_STORAGE_ENGINE
如果你已經(jīng)在用MySQL 5.6或者5.7，并且你的數(shù)據(jù)表都是InnoDB，那么表示你已經(jīng)設(shè)置好了。如果沒有，確保把你的表轉(zhuǎn)換為InnoDB并且設(shè)置default_storage_engine為InnoDB。
為什么？簡(jiǎn)而言之，因?yàn)镮nnoDB是MySQL(包括Percona Server和MariaDB)更好的存儲(chǔ)引擎 – 它支持事務(wù)，高并發(fā)，有著非常好的性能表現(xiàn)(當(dāng)配置正確時(shí))。這里有詳細(xì)的版本介紹為什么
2.INNODB_BUFFER_POOL_SIZE
這個(gè)是InnoDB最重要變量。實(shí)際上，如果你的主要存儲(chǔ)引擎是InnoDB，那么對(duì)于你，這個(gè)變量對(duì)于MySQL是最重要的。
基本上，innodb_buffer_pool_size指定了MySQL應(yīng)該分配給InnoDB緩沖池多少內(nèi)存，InnoDB緩沖池用來存儲(chǔ)緩存的數(shù)據(jù)，二級(jí)索引，臟數(shù)據(jù)(已經(jīng)被更改但沒有刷新到硬盤的數(shù)據(jù))以及各種內(nèi)部結(jié)構(gòu)如自適應(yīng)哈希索引。
根據(jù)經(jīng)驗(yàn)，在一個(gè)獨(dú)立的MySQL服務(wù)器應(yīng)該分配給MySQL整個(gè)機(jī)器總內(nèi)存的80%。如果你的MySQL運(yùn)行在一個(gè)共享服務(wù)器，或者你想知道InnoDB緩沖池大小是否正確設(shè)置，詳細(xì)請(qǐng)看這里。
3.INNODB_LOG_FILE_SIZE
InnoDB重做日志文件的設(shè)置在MySQL社區(qū)也叫做事務(wù)日志。直到MySQL 5.6.8事務(wù)日志默認(rèn)值innodb_log_file_size=5M是唯一更大的InnoDB性能殺手。從MySQL 5.6.8開始，默認(rèn)值提升到48M,但對(duì)于許多稍繁忙的系統(tǒng)，還遠(yuǎn)遠(yuǎn)要低。
根據(jù)經(jīng)驗(yàn)，你應(yīng)該設(shè)置的日志大小能在你服務(wù)器繁忙時(shí)能存儲(chǔ)1-2小時(shí)的寫入量。如果不想這么麻煩，那么設(shè)置1-2G的大小會(huì)讓你的性能有一個(gè)不錯(cuò)的表現(xiàn)。這個(gè)變量也相當(dāng)重要，更詳細(xì)的介紹請(qǐng)看這里。
當(dāng)然，如果你有大量的大事務(wù)更改，那么，更改比默認(rèn)innodb日志緩沖大小更大的值會(huì)對(duì)你的性能有一定的提高，但是你使用的是autocommit，或者你的事務(wù)更改小于幾k，那還是保持默認(rèn)的值吧。
4.INNODB_FLUSH_LOG_AT_TRX_COMMIT
默認(rèn)下，innodb_flush_log_at_trx_commit設(shè)置為1表示InnoDB在每次事務(wù)提交后立即刷新同步數(shù)據(jù)到硬盤。如果你使用autocommit，那么你的每一個(gè)INSERT, UPDATE或DELETE語句都是一個(gè)事務(wù)提交。
同步是一個(gè)昂貴的操作(特別是當(dāng)你沒有寫回緩存時(shí))，因?yàn)樗婕皩?duì)硬盤的實(shí)際同步物理寫入。所以如果可能，并不建議使用默認(rèn)值。
兩個(gè)可選的值是0和2:
* 0表示刷新到硬盤，但不同步(提交事務(wù)時(shí)沒有實(shí)際的IO操作)
* 2表示不刷新巖困和不同步(也沒有實(shí)際的IO操作)
所以你如果設(shè)置它為0或2，則同步操作每秒執(zhí)行一次。所以明顯的缺點(diǎn)是你可能會(huì)丟失上一秒的提交數(shù)據(jù)。具體來說，你的事務(wù)已經(jīng)提交了，但服務(wù)器馬上斷電了侍棗前，那么你的提交相當(dāng)于沒有發(fā)生過。
顯示的，對(duì)于金融機(jī)構(gòu)，如銀行，這是無法忍受的。不過對(duì)于大多數(shù)網(wǎng)站，可以設(shè)置為innodb_flush_log_at_trx_commit=0|2，即使服務(wù)器最終崩潰也沒有什么大問題。畢竟，僅僅在幾年前有許多網(wǎng)站還是用MyISAM，當(dāng)崩潰時(shí)會(huì)丟失30s的數(shù)據(jù)(更不要提那令人抓狂的慢修復(fù)進(jìn)程)。
那么，0和2之間的實(shí)際區(qū)別是什么？性能明顯的差異是可以忽略不計(jì)，因?yàn)樗⑿碌讲僮飨到y(tǒng)緩存的操作是非?？斓?。所以很明顯應(yīng)該設(shè)置為0，老清萬一MySQL崩潰(不是整個(gè)機(jī)器)，你不會(huì)丟失任何數(shù)據(jù)，因?yàn)閿?shù)據(jù)已經(jīng)在OS緩存，最終還是會(huì)同步到硬盤的。
5.SYNC_BINLOG
已經(jīng)有大量的文檔寫到sync_binlog，以及它和innodb_flush_log_at_trx_commit的關(guān)系，下面我們來簡(jiǎn)單的介紹下：
a) 如果你的服務(wù)器沒有設(shè)置從服務(wù)器，而且你不做備份，那么設(shè)置sync_binlog=0將對(duì)性能有好處。
b) 如果你有從服務(wù)器并且做備份，但你不介意當(dāng)主服務(wù)器崩潰時(shí)在二進(jìn)制日志丟失一些事件，那么為了更好的性能還是設(shè)置為sync_binlog=0.
c) 如果你有從服務(wù)器并且備份，你非常在意從服務(wù)器的一致性，以及能及時(shí)恢復(fù)到一個(gè)時(shí)間點(diǎn)(通過使用最新的一致性備份和二進(jìn)制日志將數(shù)據(jù)庫(kù)恢復(fù)到特定時(shí)間點(diǎn)的能力)，那么你應(yīng)該設(shè)置innodb_flush_log_at_trx_commit=1，并且需要認(rèn)真考慮使用sync_binlog=1。
問題是sync_binlog=1代價(jià)比較高 – 現(xiàn)在每個(gè)事務(wù)也要同步一次到硬盤。你可能會(huì)想為什么不把兩次同步合并成一次，想法正確 – 新版本的MySQL(5.6和5.7，MariaDB和Percona Server)已經(jīng)能合并提交，那么在這種情況下sync_binlog=1的操作也不是這么昂貴了，但在舊的mysql版本中仍然會(huì)對(duì)性能有很大影響。
6.INNODB_FLUSH_METHOD
將innodb_flush_method設(shè)置為O_DIRECT以避免雙重緩沖.唯一一種情況你不應(yīng)該使用O_DIRECT是當(dāng)你操作系統(tǒng)不支持時(shí)。但如果你運(yùn)行的是Linux，使用O_DIRECT來激活直接IO。
不用直接IO，雙重緩沖將會(huì)發(fā)生，因?yàn)樗械臄?shù)據(jù)庫(kù)更改首先會(huì)寫入到OS緩存然后才同步到硬盤 – 所以InnoDB緩沖池和OS緩存會(huì)同時(shí)持有一份相同的數(shù)據(jù)。特別是如果你的緩沖池限制為總內(nèi)存的50%，那意味著在寫密集的環(huán)境中你可能會(huì)浪費(fèi)高達(dá)50%的內(nèi)存。如果沒有限制為50%，服務(wù)器可能由于OS緩存的高壓力會(huì)使用到swap。
簡(jiǎn)單地說，設(shè)置為innodb_flush_method=O_DIRECT。
7.INNODB_BUFFER_POOL_INSTANCES
MySQL 5.5引入了緩沖實(shí)例作為減小內(nèi)部鎖爭(zhēng)用來提高M(jìn)ySQL吞吐量的手段。
在5.5版本這個(gè)對(duì)提升吞吐量幫助很小，然后在MySQL 5.6版本這個(gè)提升就非常大了，所以在MySQL5.5中你可能會(huì)保守地設(shè)置innodb_buffer_pool_instances=4，在MySQL 5.6和5.7中你可以設(shè)置為8-16個(gè)緩沖池實(shí)例。
你設(shè)置后觀察會(huì)覺得性能提高不大，但在大多數(shù)高負(fù)載情況下，它應(yīng)該會(huì)有不錯(cuò)的表現(xiàn)。
對(duì)了，不要指望這個(gè)設(shè)置能減少你單個(gè)查詢的響應(yīng)時(shí)間。這個(gè)是在高并發(fā)負(fù)載的服務(wù)器上才看得出區(qū)別。比如多個(gè)線程同時(shí)做許多事情。
8.INNODB_THREAD_CONCURRENCY
InnoDB有一種方法來控制并行執(zhí)行的線程數(shù) – 我們稱為并發(fā)控制機(jī)制。大部分是由innodb_thread_concurrency值來控制的。如果設(shè)置為0，并發(fā)控制就關(guān)閉了，因此InnoDB會(huì)立即處理所有進(jìn)來的請(qǐng)求(盡可能多的)。
在你有32CPU核心且只有4個(gè)請(qǐng)求時(shí)會(huì)沒什么問題。不過想像下你只有4CPU核心和32個(gè)請(qǐng)求時(shí) – 如果你讓32個(gè)請(qǐng)求同時(shí)處理，你這個(gè)自找麻煩。因?yàn)檫@些32個(gè)請(qǐng)求只有4 CPU核心，顯然地會(huì)比平常慢至少8倍(實(shí)際上是大于8倍)，而然這些請(qǐng)求每個(gè)都有自己的外部和內(nèi)部鎖，這有很大可能堆積請(qǐng)求。
下面介紹如何更改這個(gè)變量，在mysql命令行提示符執(zhí)行：
對(duì)于大多數(shù)工作負(fù)載和服務(wù)器，設(shè)置為8是一個(gè)好開端，然后你可以根據(jù)服務(wù)器達(dá)到了這個(gè)限制而資源使用率利用不足時(shí)逐漸增加?？梢酝ㄟ^show engine innodb status\G來查看目前查詢處理情況，查找類似如下行：
9.SKIP_NAME_RESOLVE
這一項(xiàng)不得不提及，因?yàn)槿匀挥泻芏嗳藳]有添加這一項(xiàng)。你應(yīng)該添加skip_name_resolve來避免連接時(shí)DNS解析。
大多數(shù)情況下你更改這個(gè)會(huì)沒有什么感覺，因?yàn)榇蠖鄶?shù)情況下DNS服務(wù)器解析會(huì)非?？臁２贿^當(dāng)DNS服務(wù)器失敗時(shí)，它會(huì)出現(xiàn)在你服務(wù)器上出現(xiàn)“unauthenticated connections” ，而就是為什么所有的請(qǐng)求都突然開始慢下來了。
所以不要等到這種事情發(fā)生才更改?，F(xiàn)在添加這個(gè)變量并且避免基于主機(jī)名的授權(quán)。
10.INNODB_IO_CAPACITY, INNODB_IO_CAPACITY_MAX
* innodb_io_capacity：用來當(dāng)刷新臟數(shù)據(jù)時(shí)，控制MySQL每秒執(zhí)行的寫IO量。
* innodb_io_capacity_max: 在壓力下，控制當(dāng)刷新臟數(shù)據(jù)時(shí)MySQL每秒執(zhí)行的寫IO量
首先，這與讀取無關(guān) – SELECT查詢執(zhí)行的操作。對(duì)于讀操作，MySQL會(huì)盡更大可能處理并返回結(jié)果。至于寫操作，MySQL在后臺(tái)會(huì)循環(huán)刷新，在每一個(gè)循環(huán)會(huì)檢查有多少數(shù)據(jù)需要刷新，并且不會(huì)用超過innodb_io_capacity指定的數(shù)來做刷新操作。這也包括更改緩沖區(qū)合并（在它們刷新到磁盤之前，更改緩沖區(qū)是輔助臟頁(yè)存儲(chǔ)的關(guān)鍵）。
第二，我需要解釋一下什么叫“在壓力下”，MySQL中稱為”緊急情況”，是當(dāng)MySQL在后臺(tái)刷新時(shí)，它需要刷新一些數(shù)據(jù)為了讓新的寫操作進(jìn)來。然后，MySQL會(huì)用到innodb_io_capacity_max。
那么，應(yīng)該設(shè)置innodb_io_capacity和innodb_io_capacity_max為什么呢？
更好的方法是測(cè)量你的存儲(chǔ)設(shè)置的隨機(jī)寫吞吐量，然后給innodb_io_capacity_max設(shè)置為你的設(shè)備能達(dá)到的更大IOPS。innodb_io_capacity就設(shè)置為它的50-75%，特別是你的系統(tǒng)主要是寫操作時(shí)。
通常你可以預(yù)測(cè)你的系統(tǒng)的IOPS是多少。例如由8 15k硬盤組成的RAID10能做大約每秒1000隨機(jī)寫操作，所以你可以設(shè)置innodb_io_capacity=600和innodb_io_capacity_max=1000。許多廉價(jià)企業(yè)SSD可以做4,000-10,000 IOPS等。
這個(gè)值設(shè)置得不完美問題不大。但是，要注意默認(rèn)的200和400會(huì)限制你的寫吞吐量，因此你可能偶爾會(huì)捕捉到刷新進(jìn)程。如果出現(xiàn)這種情況，可能是已經(jīng)達(dá)到你硬盤的寫IO吞吐量，或者這個(gè)值設(shè)置得太小限制了吞吐量。
11.INNODB_STATS_ON_METADATA
如果你跑的是MySQL 5.6或5.7，你不需要更改innodb_stats_on_metadata的默認(rèn)值，因?yàn)樗呀?jīng)設(shè)置正確了。
不過在MySQL 5.5或5.1，強(qiáng)烈建議關(guān)閉這個(gè)變量 – 如果是開啟，像命令show table status會(huì)立即查詢INFORMATION_SCHEMA而不是等幾秒再執(zhí)行，這會(huì)使用到額外的IO操作。
從5.1.32版本開始，這個(gè)是動(dòng)態(tài)變量，意味著你不需要重啟MySQL服務(wù)器來關(guān)閉它。
12.INNODB_BUFFER_POOL_DUMP_AT_SHUTDOWN & INNODB_BUFFER_POOL_LOAD_AT_STARTUP
innodb_buffer_pool_dump_at_shutdown和innodb_buffer_pool_load_at_startup這兩個(gè)變量與性能無關(guān)，不過如果你偶爾重啟mysql服務(wù)器(如生效配置)，那么就有關(guān)。當(dāng)兩個(gè)都激活時(shí)，MySQL緩沖池的內(nèi)容(更具體地說，是緩存頁(yè))在停止MySQL時(shí)存儲(chǔ)到一個(gè)文件。當(dāng)你下次啟動(dòng)MySQL時(shí)，它會(huì)在后臺(tái)啟動(dòng)一個(gè)線程來加載緩沖池的內(nèi)容以提高預(yù)熱速度到3-5倍。
兩件事：
之一，它實(shí)際上沒有在關(guān)閉時(shí)復(fù)制緩沖池內(nèi)容到文件，僅僅是復(fù)制表空間ID和頁(yè)面ID – 足夠的信息來定位硬盤上的頁(yè)面了。然后它就能以大量的順序讀非?？焖俚募虞d那些頁(yè)面，而不是需要成千上萬的小隨機(jī)讀。
第二，啟動(dòng)時(shí)是在后臺(tái)加載內(nèi)容，因?yàn)镸ySQL不需要等到緩沖池內(nèi)容加載完成再開始接受請(qǐng)求(所以看起來不會(huì)有什么影響)。
從MySQL 5.7.7開始，默認(rèn)只有25%的緩沖池頁(yè)面在mysql關(guān)閉時(shí)存儲(chǔ)到文件，但是你可以控制這個(gè)值 – 使用innodb_buffer_pool_dump_pct，建議75-100。
這個(gè)特性從MySQL 5.6才開始支持。
13.INNODB_ADAPTIVE_HASH_INDEX_PARTS
如果你運(yùn)行著一個(gè)大量SELECT查詢的MySQL服務(wù)器(并且已經(jīng)盡可能優(yōu)化)，那么自適應(yīng)哈希索引將下你的下一個(gè)瓶頸。自適應(yīng)哈希索引是InnoDB內(nèi)部維護(hù)的動(dòng)態(tài)索引，可以提高最常用的查詢模式的性能。這個(gè)特性可以重啟服務(wù)器關(guān)閉，不過默認(rèn)下在mysql的所有版本開啟。
這個(gè)技術(shù)非常復(fù)雜，在大多數(shù)情況下它會(huì)對(duì)大多數(shù)類型的查詢直到加速的作用。不過，當(dāng)你有太多的查詢往數(shù)據(jù)庫(kù)，在某一個(gè)點(diǎn)上它會(huì)花過多的時(shí)間等待AHI鎖和閂鎖。
如果你的是MySQL 5.7，沒有這個(gè)問題 – innodb_adaptive_hash_index_parts默認(rèn)設(shè)置為8，所以自適應(yīng)哈希索引被切割為8個(gè)分區(qū)，因?yàn)椴淮嬖谌只コ狻?/p>
不過在mysql 5.7前的版本，沒有AHI分區(qū)數(shù)量的控制。換句話說，有一個(gè)全局互斥鎖來保護(hù)AHI，可能導(dǎo)致你的select查詢經(jīng)常撞墻。
所以如果你運(yùn)行的是5.1或5.6，并且有大量的select查詢，最簡(jiǎn)單的方案就是切換成同一版本的Percona Server來激活A(yù)HI分區(qū)。
14.QUERY_CACHE_TYPE
如果人認(rèn)為查詢緩存效果很好，肯定應(yīng)該使用它。好吧，有時(shí)候是有用的。不過這個(gè)只在你在低負(fù)載時(shí)有用，特別是在低負(fù)載下大多數(shù)是讀取，小量寫或者沒有。
如果是那樣的情況，設(shè)置query_cache_type=ON和query_cache_size=256M就好了。不過記住不能把256M設(shè)置更高的值了，否則會(huì)由于查詢緩存失效時(shí)，導(dǎo)致引起嚴(yán)重的服務(wù)器停頓。
如果你的MySQL服務(wù)器高負(fù)載動(dòng)作，建議設(shè)置query_cache_size=0和query_cache_type=OFF，并重啟服務(wù)器生效。那樣Mysql就會(huì)停止在所有的查詢使用查詢緩存互斥鎖。
15.TABLE_OPEN_CACHE_INSTANCES
從MySQL 5.6.6開始，表緩存能分割到多個(gè)分區(qū)。
表緩存用來存放目前已打開表的列表，當(dāng)每一個(gè)表打開或關(guān)閉互斥體就被鎖定 – 即使這是一個(gè)隱式臨時(shí)表。使用多個(gè)分區(qū)絕對(duì)減少了潛在的爭(zhēng)用。
從MySQL 5.7.8開始，table_open_cache_instances=16是默認(rèn)的配置。
歡迎做Java的工程師朋友們私信我資料免費(fèi)獲取免費(fèi)的Java架構(gòu)學(xué)習(xí)資料（里面有高可用、高并發(fā)、高性能及分布式、Jvm性能調(diào)優(yōu)、Spring源碼，MyBatis，Netty,Redis,Kafka,Mysql,Zookeeper,Tomcat,Docker,Dubbo,Nginx等多個(gè)知識(shí)點(diǎn)的架構(gòu)資料）
其中覆蓋了互聯(lián)網(wǎng)的方方面面，期間碰到各種產(chǎn)品各種場(chǎng)景下的各種問題，很值得大家借鑒和學(xué)習(xí)，擴(kuò)展自己的技術(shù)廣度和知識(shí)面。
GBase8s數(shù)據(jù)庫(kù)SQL語句性能緩慢從哪個(gè)方面入手分析？
在實(shí)際的生產(chǎn)運(yùn)行環(huán)境中，很多客戶現(xiàn)場(chǎng)都看到開發(fā)人員和系統(tǒng)管理人員遇到很多有關(guān)于GBase 8s 數(shù)據(jù)庫(kù)引起的性能問題，進(jìn)而被多次問起如何進(jìn)行GBase 8s 數(shù)據(jù)庫(kù)性能調(diào)優(yōu)，
性能優(yōu)化原則
包括：
性能規(guī)劃：深入了解應(yīng)用與數(shù)據(jù)庫(kù)的交互特征，確立良好的設(shè)計(jì)、開發(fā)、測(cè)試迭代過程，上線前消除模型上的性能瓶胡擾頸。
實(shí)例調(diào)優(yōu)：建立性能基準(zhǔn)，對(duì)比調(diào)節(jié)數(shù)據(jù)庫(kù)、操作系統(tǒng)、存儲(chǔ)、網(wǎng)絡(luò)等的配置，主動(dòng)監(jiān)控、消除瓶頸。
SQL 調(diào)優(yōu)：書寫高效 SQL，優(yōu)化相關(guān)數(shù)據(jù)庫(kù)對(duì)象，充分借助優(yōu)化器，確定更佳執(zhí)行計(jì)劃。
性能優(yōu)化流程
首先執(zhí)行下面的初始檢查：
– 獲取直接用戶的使用反饋，確定性能目標(biāo)和范圍。
– 獲取性能表現(xiàn)好與壞時(shí)的操作系統(tǒng)、數(shù)據(jù)庫(kù)、應(yīng)用統(tǒng)計(jì)信息。
– 對(duì)數(shù)據(jù)庫(kù)做一次全面健康檢查。
根據(jù)收集的信息，以及對(duì)應(yīng)用特性的了解，構(gòu)建性能概念模型，明確性能瓶頸所在，以及導(dǎo)致性能的根本原因。
– 首先應(yīng)該排除操作系統(tǒng)、硬件資源造成的瓶頸。
– 然后針對(duì)數(shù)據(jù)庫(kù)系統(tǒng)性能進(jìn)行分析
– 必要時(shí)，還需要檢查應(yīng)用日志，因?yàn)橄到y(tǒng)性能問題也可能由于應(yīng)用非 SQL 部分造成瓶頸。
提出一系列針對(duì)的優(yōu)化措施，并根據(jù)它們對(duì)性能改善的重要程度排序，然后逐一加以實(shí)施。不要一次執(zhí)行所有的優(yōu)化措施，必須逐條嘗試，逐步對(duì)比。
通過獲取直接用戶的反饋驗(yàn)證調(diào)節(jié)是否已經(jīng)產(chǎn)生預(yù)期的效果，否則，需要重新提煉性能概念模型，直到對(duì)應(yīng)用特性了解進(jìn)一步準(zhǔn)確。
重復(fù)上述，直到性能達(dá)到目標(biāo)或由于客觀約束無法進(jìn)一步優(yōu)化。
常見調(diào)優(yōu)技巧
找到 CPU 占用更高的 SQL
在 syaster 庫(kù)中執(zhí)行
select sqx_estcost, sqx_sqlstatement
from syssqexplain
order by sqx_estcost desc
注意：此時(shí)看到的僅僅是當(dāng)前正在執(zhí)行的 SQL
需要多看幾次
onstat 命令
onstat -g act 得到當(dāng)前正在執(zhí)行的 SQL
根據(jù) rstcb 列
onstat -u | grep 57c68220
從第三列 sessid 得到 SESSION
onstat -g ses SESSION 即可得到當(dāng)時(shí)正在執(zhí)行的 SQL
一般多找?guī)讉€(gè) threads 后，就基本可以確定問題 SQL
得到 SQL 后，利用 set explain on 分析其查詢路徑，看是否未利用索引，在對(duì)大表進(jìn)行全表掃描，根據(jù)需要?jiǎng)?chuàng)建相應(yīng)索引。
找到全表掃描較多的表及其 SQL
得到全表掃描較多的表
— 系統(tǒng)順序掃描較褲鄭旦多時(shí)，被多次順序掃描的大表，如果有，應(yīng)該考慮增加索引
select first 5
substr(t.tabname,0,20) tabname,
substr(dbsname,0,10) dbname,
nrows*rowsize*p.seqscans costs,
substr(p.seqscans,0,8) seqscans,
substr(nrows,0,8) nrows
from syaster:sysptprof p , systables t,syaster:sysprofile s
where p.tabname = t.tabname
and p.seqscans > s.value/50
and s.name = ‘seqscans’
–and s.value >and nrows > 2023
order by 3 desc
利用 onstat –g ses 0 –r 5/ onstat –g stm 的輸出信息，根據(jù)表名，找到可能的 SQL 語句。叢伏由于以上獲取 SQL 的辦法是有局限的，如果無法獲取，建議通過查看應(yīng)用日志或聯(lián)系開發(fā)人員查看源代碼的方式來找到。
利用 set explain on 分析其查詢路徑，確認(rèn)是在對(duì)表進(jìn)行全表掃描，根據(jù)需要?jiǎng)?chuàng)建相應(yīng)索引。
關(guān)于gp數(shù)據(jù)庫(kù)多表關(guān)聯(lián)性能調(diào)優(yōu)的介紹到此就結(jié)束了，不知道你從中找到你需要的信息了嗎 ？如果你還想了解更多這方面的信息，記得收藏關(guān)注本站。
香港服務(wù)器選創(chuàng)新互聯(lián)，2H2G首月10元開通。
創(chuàng)新互聯(lián)（www.cdcxhl.com）互聯(lián)網(wǎng)服務(wù)提供商,擁有超過10年的服務(wù)器租用、服務(wù)器托管、云服務(wù)器、虛擬主機(jī)、網(wǎng)站系統(tǒng)開發(fā)經(jīng)驗(yàn)。專業(yè)提供云主機(jī)、虛擬主機(jī)、域名注冊(cè)、VPS主機(jī)、云服務(wù)器、香港云服務(wù)器、免備案服務(wù)器等。
網(wǎng)站欄目：高效運(yùn)行GP數(shù)據(jù)庫(kù)多表關(guān)聯(lián)的調(diào)優(yōu)技巧(gp數(shù)據(jù)庫(kù)多表關(guān)聯(lián)性能調(diào)優(yōu))
分享地址：http://www.fisionsoft.com.cn/article/djssgsd.html
