婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > mysql自增id超大問題的排查與解決

mysql自增id超大問題的排查與解決

熱門標簽:外呼系統防封號違法嗎 湘潭電銷機器人咨詢電話 高德地圖標注中心個人注冊 電銷機器人針對的 寶應電信400電話辦理費用 高德地圖標注模式 如何在高德地圖標注新地址 400電話辦理都選易號網 外呼系統服務

引言

小A正在balabala寫代碼呢,DBA小B突然發來了一條消息,“快看看你的用戶特定信息表T,里面的主鍵,也就是自增id,都到16億了,這才多久,在這樣下去過不了多久主鍵就要超出范圍了,插入就會失敗,balabala......”

我記得沒有這么多,最多1k多萬,count了下,果然是1100萬。原來運維是通過auto_increment那個值看的,就是說,表中有大量的刪除插入操作,但是我大部分情況都是更新的,怎么會這樣?

下面話不多說了,來一起看看詳細的介紹吧

問題排查

這張表是一個簡單的接口服務在使用,每天大數據會統計一大批信息,然后推送給小A,小A將信息更新到數據庫中,如果是新數據就插入,舊數據就更新之前的數據,對外接口就只有查詢了。

很快,小A就排查了一遍自己的代碼,沒有刪除的地方,也沒有主動插入、更新id的地方,怎么會這樣呢?難道是小B的原因,也不太可能,DBA那邊兒管理很多表,有問題的話早爆出來了,但問題在我這里哪里也沒頭緒。

小A又仔細觀察了這1000多萬已有的數據,將插入時間、id作為主要觀察字段,很快,發現了個問題,每天第一條插入的數據總是比前一天多1000多萬,有時候遞增的多,有時候遞增的少,小A又將矛頭指向了DBA小B,將問題又給小B描述了一遍。

小B問了小A,“你是是不是用了REPLACE INTO ...語句”,這是怎么回事呢,原來REPLACE INTO ...會對主鍵有影響。

REPLACE INTO ...對主鍵的影響

假設有一張表t1:

CREATE TABLE `t1` (
`id` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID,自增',
`uid` bigint(20) unsigned NOT NULL DEFAULT '0' COMMENT '用戶uid',
`name` varchar(20) NOT NULL DEFAULT '' COMMENT '用戶昵稱',
PRIMARY KEY (`id`),
UNIQUE KEY `u_idx_uid` (`uid`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='測試replace into';

如果新建這張表,執行下面的語句,最后的數據記錄如何呢?

insert into t1 values(NULL, 100, "test1"),(NULL, 101, "test2");
replace into t1 values(NULL, 100, "test3");

原來,REPLACE INTO ...每次插入的時候如果唯一索引對應的數據已經存在,會刪除原數據,然后重新插入新的數據,這也就導致id會增大,但實際預期可能是更新那條數據。

小A說:“我知道replace是這樣,所有既沒有用它”,但還是又排查了一遍,確實不是自己的問題,沒有使用REPLACE INTO ...,

小A又雙叒叕仔細的排查了一遍,還是沒發現問題,就讓小B查下binlog日志,看看是不是有什么奇怪的地方,查了之后還是沒發現問題,確實存在跳躍的情況,但并沒有實質性的問題。

下圖中@1的值對應的是自增主鍵id,用(@2, @3)作為唯一索引

后來過了很久,小B給小A指了個方向,小A開始懷疑自己的插入更新語句INSERT ... ON DUPLICATE KEY UPDATE ...了,查了許久,果然是這里除了問題。

INSERT ... ON DUPLICATE KEY UPDATE ...對主鍵的影響

這個語句跟REPLACE INTO ...類似,不過他并不會變更該條記錄的主鍵,還是上面t1這張表,我們執行下面的語句,執行完結果是什么呢?

insert into t1 values(NULL, 100, "test4") on duplicate key update name = values(name);

沒錯,跟小A預想的一樣,主鍵并沒有增加,而且name字段已經更新為想要的了,但是執行結果有條提示,引起了小A的注意

No errors; 2 rows affected, taking 10.7ms

明明更新了一條數據,為什么這里的影響記錄條數是2呢?小A,又看了下目前表中的auto_increment

CREATE TABLE `t1` (
`id` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID,自增',
`uid` bigint(20) unsigned NOT NULL DEFAULT '0' COMMENT '用戶uid',
`name` varchar(20) NOT NULL DEFAULT '' COMMENT '用戶昵稱',
PRIMARY KEY (`id`),
UNIQUE KEY `u_idx_uid` (`uid`)
) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8 COMMENT='測試replace into';

竟然是5`,這里本應該是4的。

也就是說,上面的語句,會跟REPLACE INTO ...類似的會將自增ID加1,但實際記錄沒有加,這是為什么呢?

查了資料之后,小A得知,原來,mysql主鍵自增有個參數innodb_autoinc_lock_mode,他有三種可能只0,1,2,mysql5.1之后加入的,默認值是1,之前的版本可以看做都是0。

可以使用下面的語句看當前是哪種模式

select @@innodb_autoinc_lock_mode;

小A使用的數據庫默認值也是1,當做簡單插入(可以確定插入行數)的時候,直接將auto_increment加1,而不會去鎖表,這也就提高了性能。當插入的語句類似insert into select ...這種復雜語句的時候,提前不知道插入的行數,這個時候就要要鎖表(一個名為AUTO_INC的特殊表鎖)了,這樣auto_increment才是準確的,等待語句結束的時候才釋放鎖。還有一種稱為Mixed-mode inserts的插入,比如INSERT INTO t1 (c1,c2) VALUES (1,'a'), (NULL,'b'), (5,'c'), (NULL,'d'),其中一部分明確指定了自增主鍵值,一部分未指定,還有我們這里討論的INSERT ... ON DUPLICATE KEY UPDATE ...也屬于這種,這個時候會分析語句,然后按盡可能多的情況去分配auto_incrementid,這個要怎么理解呢,我看下面這個例子:

truncate table t1;
insert into t1 values(NULL, 100, "test1"),(NULL, 101, "test2"),(NULL, 102, "test2"),(NULL, 103, "test2"),(NULL, 104, "test2"),(NULL, 105, "test2");

-- 此時數據表下一個自增id是7

delete from t1 where id in (2,3,4);

-- 此時數據表只剩1,5,6了,自增id還是7

insert into t1 values(2, 106, "test1"),(NULL, 107, "test2"),(3, 108, "test2");

-- 這里的自增id是多少呢?

上面的例子執行完之后表的下一個自增id是10,你理解對了嗎,因為最后一條執行的是一個Mixed-mode inserts語句,innoDB會分析語句,然后分配三個id,此時下一個id就是10了,但分配的三個id并不一定都使用。此處 @總是遲到 多謝指出,看官方文檔理解錯了

模式0的話就是不管什么情況都是加上表鎖,等語句執行完成的時候在釋放,如果真的添加了記錄,將auto_increment加1。

至于模式2,什么情況都不加AUTO_INC鎖,存在安全問題,當binlog格式設置為Statement模式的時候,從庫同步的時候,執行結果可能跟主庫不一致,問題很大。因為可能有一個復雜插入,還在執行呢,另外一個插入就來了,恢復的時候是一條條來執行的,就不能重現這種并發問題,導致記錄id可能對不上。

至此,id跳躍的問題算是分析完了,由于innodb_autoinc_lock_mode值是1,INSERT ... ON DUPLICATE KEY UPDATE ...是簡單的語句,預先就可以計算出影響的行數,所以不管是否更新,這里都將auto_increment加1(多行的話大于1)。

如果將innodb_autoinc_lock_mode值改為0,再次執行INSERT ... ON DUPLICATE KEY UPDATE ...的話,你會發現auto_increment并沒有增加,因為這種模式直接加了AUTO_INC鎖,執行完語句的時候釋放,發現沒有增加行數的話,不會增加自增id的。

INSERT ... ON DUPLICATE KEY UPDATE ...影響的行數是1為什么返回2?

為什么會這樣呢,按理說影響行數就是1啊,看看官方文檔的說明

With ON DUPLICATE KEY UPDATE, the affected-rows value per row is 1 if the row is inserted as a new row, 2 if an existing row is updated, and 0 if an existing row is set to its current values

官方明確說明了,插入影響1行,更新影響2行,0的話就是存在且更新前后值一樣。是不是很不好理解?

其實,你要這樣想就好了,這是為了區分到底是插入了還是更新了,返回1表示插入成功,2表示更新成功。

解決方案

將innodb_autoinc_lock_mode設置為0肯定可以解決問題,但這樣的話,插入的并發性可能會受很大影響,因此小A自己想著DBA也不會同意。經過考慮,目前準備了兩種較為可能的解決方案:

修改業務邏輯

修改業務邏輯,將INSERT ... ON DUPLICATE KEY UPDATE ...語句拆開,先去查詢,然后去更新,這樣就可以保證主鍵不會不受控制的增大,但增加了復雜性,原來的一次請求可能變為兩次,先查詢有沒有,然后去更新。

刪除表的自增主鍵

刪除自增主鍵,讓唯一索引來做主鍵,這樣子基本不用做什么變動,只要確定目前的自增主鍵沒有實際的用處即可,這樣的話,插入刪除的時候可能會影響效率,但對于查詢多的情況來說,小A比較兩種之后更愿意選擇后者。

結語

其實INSERT ... ON DUPLICATE KEY UPDATE ...這個影響行數是2的,小A很早就發現了,只是沒有保持好奇心,不以為然罷了,沒有深究其中的問題,這深究就起來會帶出來一大串新知識,挺好,看來小A還是要對外界保持好奇心,保持敏感,這樣才會有進步。

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對腳本之家的支持。

您可能感興趣的文章:
  • MySQL的自增ID(主鍵) 用完了的解決方法
  • 關于mysql自增id,你需要知道的
  • MySQL表自增id溢出的故障復盤解決
  • 關于MySQL自增ID的一些小問題總結
  • 關于Mysql自增id的這些你可能還不知道
  • MySQL分表自增ID問題的解決方法
  • 線上MySQL的自增id用盡怎么辦

標簽:南充 賀州 蘭州 宿遷 佛山 黃山 馬鞍山 黔南

巨人網絡通訊聲明:本文標題《mysql自增id超大問題的排查與解決》,本文關鍵詞  mysql,自增,超大,問,題的,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《mysql自增id超大問題的排查與解決》相關的同類信息!
  • 本頁收集關于mysql自增id超大問題的排查與解決的相關信息資訊供網民參考!
  • 推薦文章
    婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av
    久久一二三国产| 久久综合av免费| 欧美顶级少妇做爰| 亚洲美腿欧美偷拍| 成人永久aaa| 国产精品网站在线播放| 成人av网站在线观看| 日韩一区在线播放| 色噜噜狠狠成人网p站| 亚洲视频一区二区在线| 91在线国内视频| 亚洲高清免费观看| 在线不卡中文字幕播放| 久久电影国产免费久久电影 | 亚洲bt欧美bt精品777| 欧美综合一区二区三区| 亚洲国产aⅴ天堂久久| 欧美一激情一区二区三区| 国产一区91精品张津瑜| 成人免费视频在线观看| 欧美老年两性高潮| 成人精品一区二区三区中文字幕| 国产精品国产三级国产专播品爱网| 色婷婷精品大在线视频| 日本麻豆一区二区三区视频| 日本一区二区成人在线| 色av成人天堂桃色av| 免费观看久久久4p| 亚洲你懂的在线视频| 欧美xxxxxxxx| 欧美日韩日日摸| 精品一区二区三区蜜桃| 亚洲色图视频免费播放| 日韩一级二级三级| 91成人在线精品| 成人一区二区三区中文字幕| 一区二区成人在线观看| 精品久久国产字幕高潮| 欧美怡红院视频| 成人爱爱电影网址| 久久精品国产亚洲aⅴ| 亚洲老司机在线| 亚洲国产成人一区二区三区| 日韩一二在线观看| 在线观看亚洲一区| 成人激情图片网| 国内成人精品2018免费看| 五月激情综合色| 亚洲在线观看免费| 亚洲另类在线制服丝袜| 国产精品久久毛片| 久久久久久99久久久精品网站| 7777精品伊人久久久大香线蕉的 | 日韩成人精品在线| 中文字幕日韩欧美一区二区三区| 欧美哺乳videos| 91精品国产综合久久久久| 91极品美女在线| 99视频一区二区三区| 高清国产一区二区三区| 国产精品自在在线| 国产一区二区三区久久悠悠色av| 日韩高清欧美激情| 亚洲精品老司机| 亚洲一区二区三区四区五区黄| 国产夜色精品一区二区av| 精品嫩草影院久久| 欧美二区乱c少妇| 日韩欧美卡一卡二| 精品国产乱码久久久久久图片 | 日韩理论片在线| 亚洲视频一区二区免费在线观看| 亚洲日本丝袜连裤袜办公室| 最新国产精品久久精品| 中文字幕一区二区三区不卡 | 国产精品卡一卡二| 国产人成亚洲第一网站在线播放 | 国产在线播放一区三区四| 亚洲国产精品麻豆| 亚洲夂夂婷婷色拍ww47| 视频在线在亚洲| 美女精品一区二区| 久久精品999| 老司机一区二区| 国产精品一区二区三区四区| 国产成人av一区二区三区在线 | 欧美顶级少妇做爰| 日韩欧美国产精品一区| 国产免费久久精品| 亚洲黄色录像片| 久久精品免费观看| av不卡一区二区三区| 在线观看日韩毛片| 日韩一区二区三区免费看 | 欧美一区午夜视频在线观看| 欧洲国内综合视频| 精品免费国产一区二区三区四区| 国产欧美中文在线| 五月天一区二区三区| 国产精品99久久久久久宅男| 成人免费观看视频| 欧美精品tushy高清| 国产日产欧美一区二区三区| 亚洲国产精品一区二区久久 | 国产精品视频一二| 一区二区激情小说| 国产一区不卡精品| 777久久久精品| 亚洲欧美视频在线观看视频| 秋霞成人午夜伦在线观看| 99久久久精品| 日韩一本二本av| 亚洲一区视频在线观看视频| 久久9热精品视频| 3d成人h动漫网站入口| 亚洲婷婷综合久久一本伊一区| 精品一区二区国语对白| 欧美精选一区二区| 一区二区三区四区蜜桃| www.欧美.com| 国产精品美女久久久久久久久久久| 男男视频亚洲欧美| 欧美日韩不卡一区| 亚洲精品国产品国语在线app| 粉嫩蜜臀av国产精品网站| 欧美伦理电影网| 亚洲成人一区二区| 欧美日韩一区二区在线观看| 国产精品欧美极品| 国产a视频精品免费观看| 欧美mv日韩mv| 国内外精品视频| 精品少妇一区二区三区| 久久草av在线| 精品成人一区二区三区四区| 午夜婷婷国产麻豆精品| 欧美日韩一区不卡| 午夜成人免费视频| 欧美狂野另类xxxxoooo| 午夜成人免费电影| 欧美一区二区三区男人的天堂| 午夜免费久久看| 91精品在线观看入口| 蜜臀a∨国产成人精品| 欧美一区二区三区四区五区| 伦理电影国产精品| 久久久.com| 国产精品 欧美精品| 中文文精品字幕一区二区| 国产高清久久久久| 自拍偷拍国产精品| 精品视频在线免费看| 婷婷成人激情在线网| 欧美一区二区三区人| 久久99热99| 中文字幕av资源一区| 91片在线免费观看| 视频一区欧美日韩| 2021久久国产精品不只是精品| 国产宾馆实践打屁股91| 中文字幕在线不卡视频| 色天使色偷偷av一区二区| 一区二区免费在线| 337p日本欧洲亚洲大胆色噜噜| 国产一区二区精品久久| 亚洲日本在线看| 精品国产露脸精彩对白| 国产精品一区二区三区乱码| 亚洲免费在线视频| 精品视频全国免费看| 精品一区二区免费| 亚洲免费观看高清完整版在线观看 | 国产一区激情在线| 欧美国产欧美亚州国产日韩mv天天看完整 | 日本最新不卡在线| 国产欧美精品在线观看| 欧美日韩国产高清一区| 国产高清一区日本| 婷婷亚洲久悠悠色悠在线播放| 久久久久久久精| 欧美三级中文字幕| 国产不卡视频在线播放| 天天做天天摸天天爽国产一区 | 亚洲成人久久影院| 国产日韩av一区| 欧美精品日韩一区| 91丝袜美腿高跟国产极品老师| 午夜精品久久久久久久蜜桃app| 国产性色一区二区| 欧美一区二区三区视频免费| 99久久久精品| 成人黄色电影在线| 日韩精品一级二级| 亚洲激情校园春色| 国产精品人人做人人爽人人添 | 亚洲三级免费电影| 日本一区二区视频在线观看| 这里只有精品免费| 91社区在线播放| 欧美日韩一本到|