婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解

InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解

熱門標簽:電銷機器人公眾號推送 手機用地圖標注工具 昆明智能外呼系統中心 智能電銷機器人靠譜么 長安區違法建房地圖標注 南宋地圖標注黃河華山 地圖標注培訓 電銷機器人說明書 安國在哪里辦理400電話

InnoDB存儲引擎的關鍵特性包括插入緩沖兩次寫(double write)、自適應哈希索引(adaptive hash index)。這些特性為InnoDB存儲引擎帶來了更好的性能和更高的可靠性。

插入緩沖

插入緩沖是InnoDB存儲引擎關鍵特性中最令人激動的。不過,這個名字可能會讓人認為插入緩沖是緩沖池中的一個部分。其實不然,InnoDB緩沖池中有Insert Buffer信息固然不錯,但是Insert Buffer和數據頁一樣,也是物理頁的一個組成部分。

主鍵是行唯一的標識符,在應用程序中行記錄的插入順序是按照主鍵遞增的順序進行插入的。因此,插入聚集索引一般是順序的,不需要磁盤的隨機讀取。

比如說我們按下列SQL定義的表:create table t(id int auto_increment,name varchar(30),primary key(id));

id列是自增長的,這意味著當執行插入操作時,id列會自動增長,頁中的行記錄按id執行順序存放。一般情況下,不需要隨機讀取另一頁執行記錄的存放。因此,在這樣的情況下,插入操作一般很快就能完成。但是,不可能每張表上只有一個聚集索引,在更多的情況下,一張表上有多個非聚集的輔助索引(secondary index)。比如,我們還需要按照name這個字段進行查找,并且name這個字段不是唯一的。

表是按如下的SQL語句定義的:create table t (id int auto_increment,name varchar(30),primary key(id),key(name));

這樣的情況下產生了一個非聚集的并且不是唯一的索引。在進行插入操作時,數據頁的存放還是按主鍵id的執行順序存放,但是對于非聚集索引,葉子節點的插入不再是順序的了。這時就需要離散地訪問非聚集索引頁,插入性能在這里變低了。然而這并不是這個name字段上索引的錯誤,因為B+樹的特性決定了非聚集索引插入的離散性。

InnoDB存儲引擎開創性地設計了插入緩沖,對于非聚集索引的插入或更新操作,不是每一次直接插入索引頁中,而是先判斷插入的非聚集索引頁是否在緩沖池中。如果在,則直接插入;如果不在,則先放入一個插入緩沖區中,好似欺騙數據庫這個非聚集的索引已經插到葉子節點了,然后再以一定的頻率執行插入緩沖和非聚集索引頁子節點的合并操作,這時通常能將多個插入合并到一個操作中(因為在一個索引頁中),這就大大提高了對非聚集索引執行插入和修改操作的性能。

插入緩沖的使用需要滿足以下兩個條件:

1.索引是輔助索引。

2.索引不是唯一的。

當滿足以上兩個條件時,InnoDB存儲引擎會使用插入緩沖,這樣就能提高性能了。不過考慮一種情況,應用程序執行大量的插入和更新操作,這些操作都涉及了不唯一的非聚集索引,如果在這個過程中數據庫發生了宕機,這時候會有大量的插入緩沖并沒有合并到實際的非聚集索引中。如果是這樣,恢復可能需要很長的時間,極端情況下甚至需要幾個小時來執行合并恢復操作。

輔助索引不能是唯一的,因為在把它插入到插入緩沖時,我們并不去查找索引頁的情況。如果去查找肯定又會出現離散讀的情況,插入緩沖就失去了意義。

查看插入緩沖的信息:

show engine innodb status\G

seg size顯示了當前插入緩沖的大小為2*16KB,free list len代表了空閑列表的長度,size代表了已經合并記錄頁的數量。

下面一行可能是我們真正關心的,因為它顯示了提高性能了。inserts代表插入的記錄數,merged recs代表合并的頁的數量,merges代表合并的次數。

merged recs:merges大約為3:1,代表插入緩沖將對于非聚集索引頁的IO請求大約降低了3倍。

問題:

目前插入緩沖存在一個問題是,在寫密集的情況下,插入緩沖會占用過多的緩沖池內存,默認情況下最大可以占用1/2的緩沖池內存。Percona已發布一些patch來修正插入緩沖占用太多緩沖池內存的問題,具體的可以到http://www.percona.com/percona-lab.html查找。簡單來說,修改IBUF_POOL_SIZE_PER_MAX_SIZE就可以對插入緩沖的大小進行控制,例如,將IBUF_POOL_SIZE_PER_MAX_SIZE改為3,則最大只能使用1/3的緩沖池內存。

兩次寫

如果說插入緩沖帶給InnoDB存儲引擎的是性能,那么兩次寫帶給InnoDB存儲引擎的是數據的可靠性。當數據庫宕機時,可能發生數據庫正在寫一個頁面,而這個頁只寫了一部分(比如16K的頁,只寫前4K的頁)的情況,我們稱之為部分寫失效(partial page write)。在InnoDB存儲引擎未使用double write技術前,曾出現過因為部分寫失效而導致數據丟失的情況。

有人也許會想,如果發生寫失效,可以通過重做日志進行恢復。這是一個辦法。但是必須清楚的是,重做日志中記錄的是對頁的物理操作,如偏移量800,寫'aaaa'記錄。如果這個頁本身已經損壞,再對其進行重做是沒有意義的。這就是說,在應用(apply)重做日志前,我們需要一個頁的副本,當寫入失效發生時,先通過頁的副本來還原該頁再進行重做,這就是doublewrite。

InnoDB存儲引擎doublewrite的體系架構如圖2-4所示

doublewrite由兩部分組成:一部分是內存中的doublewrite buffer,大小為2MB;另一部分是物理磁盤上共享表空間中連續的128個頁,即兩個區(extent),大小同樣為2MB(頁的副本)。當緩沖池的臟頁刷新時,并不直接寫磁盤,而是會通過memcpy函數將臟頁先拷貝到內存中的doublewrite buffer,之后通過doublewrite buffer再分兩次,每次寫入1MB到共享表空間的物理磁盤上,然后馬上調用fsync函數,同步磁盤,避免緩沖寫帶來的問題。在這個過程中,因為doublewrite頁是連續的,因此這個過程是順序寫的,開銷并不是很大。在完成doublewrite頁的寫入后,再將doublewrite buffer中的頁寫入各個表空間文件中,此時的寫入則是離散的。

可以通過以下命令觀察到doublewrite運行的情況: show global status like 'innodb_dblwr%'\G

doublewrite一共寫了18 445個頁,但實際的寫入次數為434,(42:1)   基本上符合64:1。

如果發現你的系統在高峰時Innodb_dblwr_pages_written:Innodb_dblwr_writes遠小于64:1,那么說明你的系統寫入壓力并不是很高。

如果操作系統在將頁寫入磁盤的過程中崩潰了,在恢復過程中,InnoDB存儲引擎可以從共享表空間中的doublewrite中找到改頁的一個副本,將其拷貝到表空間文件,再應用重做日志。下面顯示了由doublewrite進行恢復的一種情況: 

090924 11:36:32 mysqld restarted
090924 11:36:33 InnoDB:Database was not shut down normally!
InnoDB:Starting crash recovery.
InnoDB:Reading tablespace information from the.ibd files……
InnoDB:Error:space id in fsp header 0,but in the page header 4294967295
InnoDB:Error:tablespace id 4294967295 in file./test/t.ibd is not sensible
InnoDB:Error:tablespace id 0 in file./test/t2.ibd is not sensible
090924 11:36:33 InnoDB:Operating system error number 40 in a file operation.
InnoDB:Error number 40 means'Too many levels of symbolic links'.
InnoDB:Some operating system error numbers are described at
InnoDB:http://dev.mysql.com/doc/refman/5.0/en/operating-system-error-codes.html
InnoDB:File name./now/member
InnoDB:File operation call:'stat'.
InnoDB:Error:os_file_readdir_next_file()returned-1 in
InnoDB:directory./now
InnoDB:Crash recovery may have failed for some.ibd files!
InnoDB:Restoring possible half-written data pages from the doublewrite
InnoDB:buffer……

參數skip_innodb_doublewrite可以禁止使用兩次寫功能,這時可能會發生前面提及的寫失效問題。不過,如果你有多臺從服務器(slave server),需要提供較快的性能(如slave上做的是RAID0),也許啟用這個參數是一個辦法。不過,在需要提供數據高可靠性的主服務器(master server)上,任何時候我們都應確保開啟兩次寫功能。

注意:有些文件系統本身就提供了部分寫失效的防范機制,如ZFS文件系統。在這種情況下,我們就不要啟用doublewrite了。 

自適應哈希索引

哈希(hash)是一種非常快的查找方法,一般情況下查找的時間復雜度為O(1)。常用于連接(join)操作,如SQL Server和Oracle中的哈希連接(hash join)。但是SQL Server和Oracle等常見的數據庫并不支持哈希索引(hash index)。MySQL的Heap存儲引擎默認的索引類型為哈希,而InnoDB存儲引擎提出了另一種實現方法,自適應哈希索引(adaptive hash index)。

InnoDB存儲引擎會監控表上索引的查找,如果觀察到建立哈希索引可以帶來速度的提升,則建立哈希索引,所以稱之為自適應(adaptive)的。自適應哈希索引通過緩沖池的B+樹構造而來,因此建立的速度很快。而且不需要將整個表都建哈希索引,InnoDB存儲引擎會自動根據訪問的頻率模式來為某些頁建立哈希索引。

根據InnoDB的官方文檔顯示,啟用自適應哈希索引后,讀取和寫入速度可以提高2倍;對于輔助索引的連接操作,性能可以提高5倍。自適應哈希索引是非常好的優化模式,其設計思想是數據庫自優化(self-tuning),即無需DBA對數據庫進行調整。

查看當前自適應哈希索引的使用狀況:show engine innodb status\G

現在可以看到自適應哈希索引的使用信息了,包括自適應哈希索引的大小、使用情況、每秒使用自適應哈希索引搜索的情況。值得注意的是,哈希索引只能用來搜索等值的查詢,如select * from table where index_col='xxx',而對于其他查找類型,如范圍查找,是不能使用的。因此,這里出現了non-hash searches/s的情況。用hash searches:non-hash searches命令可以大概了解使用哈希索引后的效率。

由于自適應哈希索引是由InnoDB存儲引擎控制的,所以這里的信息只供我們參考。不過我們可以通過參數innodb_adaptive_hash_index來禁用或啟動此特性,默認為開啟。

以上這篇InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持腳本之家。

您可能感興趣的文章:
  • 探究MySQL中索引和提交頻率對InnoDB表寫入速度的影響
  • 淺談innodb的索引頁結構,插入緩沖,自適應哈希索引
  • mysql 數據庫中索引原理分析說明
  • Mysql使用索引的正確方法及索引原理詳解
  • MySQL索引背后的數據結構及算法原理詳解
  • 深入講解MySQL Innodb索引的原理

標簽:東莞 潛江 武漢 合肥 江門 吉安 長沙 南昌

巨人網絡通訊聲明:本文標題《InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解》,本文關鍵詞  InnoDB,的,關鍵,特性,插入,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解》相關的同類信息!
  • 本頁收集關于InnoDB的關鍵特性-插入緩存,兩次寫,自適應hash索引詳解的相關信息資訊供網民參考!
  • 推薦文章
    婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av
    欧美亚洲丝袜传媒另类| 日韩国产欧美在线播放| 一区二区在线观看不卡| 精品一区二区三区久久| 欧美视频在线不卡| 亚洲一区二区五区| 色综合天天综合色综合av | 91精品国产乱码久久蜜臀| 亚洲欧美怡红院| 成人综合婷婷国产精品久久| 国产免费成人在线视频| 菠萝蜜视频在线观看一区| 中文字幕精品一区| 成人免费的视频| 麻豆精品一二三| 久久精品这里都是精品| 成人国产在线观看| 亚洲乱码一区二区三区在线观看| 欧美日韩精品是欧美日韩精品| 日本美女一区二区三区视频| 久久精品视频一区| 色哟哟精品一区| 日本vs亚洲vs韩国一区三区 | 国产一区二区精品久久99| 国产亚洲成年网址在线观看| 在线一区二区观看| 激情深爱一区二区| 亚洲激情在线播放| 精品女同一区二区| 99久久国产综合精品色伊 | 亚洲自拍另类综合| 日韩美一区二区三区| 波多野结衣一区二区三区| 亚洲一区二区三区四区不卡| zzijzzij亚洲日本少妇熟睡| 亚洲欧美色一区| 欧洲激情一区二区| 亚洲日本成人在线观看| 色婷婷综合久久久久中文| 26uuu精品一区二区三区四区在线| 色999日韩国产欧美一区二区| 日韩丝袜情趣美女图片| 欧美自拍偷拍午夜视频| 欧美国产日韩精品免费观看| 亚洲国产精品一区二区久久 | 国产一区二区免费在线| 亚洲综合丁香婷婷六月香| 国产精品88av| 麻豆精品国产91久久久久久| 欧美美女一区二区在线观看| 99re6这里只有精品视频在线观看 99re8在线精品视频免费播放 | 精品在线一区二区| 欧美日韩国产美| 成人国产电影网| 国产成人免费视频网站| 麻豆中文一区二区| 一级日本不卡的影视| 不卡一区二区在线| 国内精品国产成人| 777久久久精品| 久久理论电影网| 欧美精品一卡二卡| 蜜臀久久99精品久久久久久9 | 国产精品国产三级国产普通话蜜臀 | 亚洲欧美另类小说| 久久黄色级2电影| 丝袜亚洲另类欧美综合| 欧美一区二区三区系列电影| 色综合久久久久综合| 亚洲乱码一区二区三区在线观看| 日韩国产高清影视| 日本欧美一区二区三区乱码| 欧美精品一区二区三区久久久 | 日韩av高清在线观看| 51精品久久久久久久蜜臀| 一区二区高清免费观看影视大全| 亚洲欧洲日韩女同| 色美美综合视频| 99re在线视频这里只有精品| 亚洲女同一区二区| 在线播放一区二区三区| 欧美日韩一级片在线观看| 日韩国产欧美一区二区三区| 久久午夜免费电影| 欧美精品色综合| 97精品国产露脸对白| 奇米一区二区三区av| 91精品久久久久久久91蜜桃| 91麻豆视频网站| 91亚洲精品乱码久久久久久蜜桃 | 色综合天天狠狠| 91蝌蚪porny| 亚洲综合色丁香婷婷六月图片| 欧美群妇大交群的观看方式| 欧美一二三在线| 奇米在线7777在线精品| 免费黄网站欧美| 精品午夜一区二区三区在线观看| 久久人人爽人人爽| 亚洲精品亚洲人成人网 | 91麻豆福利精品推荐| 免费视频最近日韩| 日韩美女视频一区| 国产亚洲一区二区三区在线观看| 成人激情免费电影网址| 免费在线观看一区二区三区| 国产亚洲一区二区三区| 亚洲一区二区三区免费视频| 久久久久久久性| 亚洲国产日韩a在线播放性色| 国产欧美日韩在线观看| 性欧美大战久久久久久久久| 久久综合久久综合久久| 亚洲高清视频在线| 国产精品精品国产色婷婷| 日韩影视精彩在线| 亚洲女同女同女同女同女同69| 亚洲国产精品久久不卡毛片 | 国产99精品视频| 亚洲婷婷综合久久一本伊一区| 久久精品噜噜噜成人av农村| 一区二区三区高清不卡| 国产·精品毛片| 黄色小说综合网站| 欧美三级中文字| 欧美视频一区在线观看| 成人精品电影在线观看| 成人激情动漫在线观看| 99久久精品免费精品国产| 亚洲欧美色一区| 亚洲伦理在线精品| 99久久久久免费精品国产| 精品夜夜嗨av一区二区三区| 91免费版在线| 日本乱人伦aⅴ精品| 亚洲国产视频网站| 91福利区一区二区三区| 91玉足脚交白嫩脚丫在线播放| 久久精品亚洲乱码伦伦中文| 久久精品网站免费观看| 蜜桃久久久久久| 日本一区中文字幕 | 欧美肥妇bbw| 国产女人aaa级久久久级 | 99精品久久免费看蜜臀剧情介绍| 国产麻豆精品久久一二三| 欧美日产国产精品| 日韩欧美自拍偷拍| 久久精品国产精品青草| 欧美xxxxx裸体时装秀| 欧美韩国日本不卡| 青青青伊人色综合久久| 激情综合色播激情啊| 波多野洁衣一区| 制服丝袜亚洲色图| 国产精品免费看片| 五月婷婷欧美视频| 国产高清不卡一区| 亚洲人成7777| 蜜臀av性久久久久蜜臀aⅴ| 中文字幕 久热精品 视频在线| 粗大黑人巨茎大战欧美成人| 在线观看三级视频欧美| 青草av.久久免费一区| 国产成人无遮挡在线视频| 26uuu久久综合| 亚洲一区二区在线视频| 国产剧情av麻豆香蕉精品| 亚洲色图另类专区| 蜜桃av一区二区三区| 国产精品美女www爽爽爽| 亚洲va欧美va人人爽| 亚洲黄色片在线观看| 精品一区二区三区在线观看| 97久久超碰精品国产| www一区二区| 午夜不卡av免费| 99久久精品国产毛片| 精品一区二区三区香蕉蜜桃| 色一情一伦一子一伦一区| 26uuu久久天堂性欧美| 91麻豆123| 精品国产一区二区三区不卡 | 中文字幕日本不卡| 日韩精品免费专区| 亚洲一区二区免费视频| 成人av集中营| 国产亚洲成年网址在线观看| 无码av中文一区二区三区桃花岛| 日本中文字幕一区二区有限公司| 天堂精品中文字幕在线| 欧美成人vr18sexvr| 欧美精品一区二区三区在线| 一区二区三区 在线观看视频| 18涩涩午夜精品.www| 亚洲综合另类小说| 久久精品国产精品亚洲红杏| 日韩精品亚洲一区| 一本色道**综合亚洲精品蜜桃冫| 久久激情五月婷婷|