好湿?好紧?好多水好爽自慰,久久久噜久噜久久综合,成人做爰A片免费看黄冈,机机对机机30分钟无遮挡

主頁 > 知識庫 > mysql 大表批量刪除大量數據的實現方法

mysql 大表批量刪除大量數據的實現方法

熱門標簽:外呼系統打電話上限是多少 啥是企業400電話辦理 電話外呼系統改號 武漢網絡外呼系統服務商 南昌三維地圖標注 地圖標注費用是多少 百應電話機器人優勢 怎樣在地圖標注銷售區域 曲靖移動外呼系統公司

問題參考自:https://www.zhihu.com/question/440066129/answer/1685329456 ,mysql中,一張表里有3億數據,未分表,其中一個字段是企業類型,企業類型是一般企業和個體戶,個體戶的數據量差不多占50%,根據條件把個體戶的行都刪掉。請問如何操作?答案為個人原創

假設表的引擎是 Innodb, MySQL 5.7+

刪除一條記錄,首先鎖住這條記錄,數據原有的被廢棄,記錄頭發生變化,主要是打上了刪除標記。也就是原有的數據 deleted_flag 變成 1,代表數據被刪除。但是數據沒有被清空,在新一行數據大小小于這一行的時候,可能會占用這一行。這樣其實就是存儲碎片。

之后,相關數據的索引需要更新,清除這些數據。并且,會產生對應的 binlog 與 redolog 日志。
如果 delete 的數據是大量的數據,則會:

  • 如果不加 limit 則會由于需要更新大量數據,從而索引失效變成全掃描導致鎖表,同時由于修改大量的索引,產生大量的日志,導致這個更新會有很長時間,鎖表鎖很長時間,期間這個表無法處理線上業務。
  • 由于產生了大量 binlog 導致主從同步壓力變大
  • 由于標記刪除產生了大量的存儲碎片。由于 MySQL 是按頁加載數據,這些存儲碎片不僅大量增加了隨機讀取的次數,并且讓頁命中率降低,導致頁交換增多。
  • 由于產生了大量日志,我們可以看到這張表的占用空間大大增高。

解決方案

我們很容易想到,在 delete 后加上 limit 限制控制其數量,這個數量讓他會走索引,從而不會鎖整個表。

但是,存儲碎片,主從同步,占用空間的問題并沒有解決。可以在刪除完成后,通過如下語句,重建表:

alter table 你的表 engine=InnoDB, ALGORITHM=INPLACE, LOCK=NONE;

注意這句話其實就是重建你的表,雖然你的表的引擎已經是 innodb 了,加上后面的, ALGORITHM=INPLACE, LOCK=NONE 可以不用鎖表就重建表。

還有一種方案是,新建一張同樣結構的表,在原有表上加上觸發器:

create trigger person_trigger_update AFTER UPDATE on 原有表 for each row 
begin set @x = "trigger UPDATE";
Replace into 新表 SELECT * from 原有表 where 新表.id = 原有表.id;
END IF;
end;

這樣可以保證線上業務有新數據會同步。之后,將所有企業類型的數據,插入新表,同時如果已存在則證明發生了更新同步就不插入。個體戶數據由于業務變化,并不在這個表上更新,所以這樣通過了無表鎖同步實現了大表的數據清理

到此這篇關于mysql 大表批量刪除大量數據的實現方法的文章就介紹到這了,更多相關mysql 大表批量刪除內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • MyBatis批量插入/修改/刪除MySql數據
  • mysql利用mysqlbinlog命令恢復誤刪除數據的實現
  • mysql5.7.33誤刪除ibdata文件找回數據的方法
  • mysql數據庫刪除重復數據只保留一條方法實例
  • 淺談為什么MySQL不建議delete刪除數據
  • Python批量刪除mysql中千萬級大量數據的腳本分享
  • Mysql刪除數據以及數據表的方法實例
  • MySQL刪除數據,表文件大小依然沒變的原因
  • MySQL 快速刪除大量數據(千萬級別)的幾種實踐方案詳解
  • MySQL Delete 刪數據后磁盤空間未釋放的原因

標簽:甘南 黑河 吉林 荊州 錦州 隨州 滄州 資陽

巨人網絡通訊聲明:本文標題《mysql 大表批量刪除大量數據的實現方法》,本文關鍵詞  mysql,大表,批量,刪除,大量,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《mysql 大表批量刪除大量數據的實現方法》相關的同類信息!
  • 本頁收集關于mysql 大表批量刪除大量數據的實現方法的相關信息資訊供網民參考!
  • 推薦文章
    主站蜘蛛池模板: 无码精品人妻一区二区三区天堂| 免费高清理伦片快速播放| BigASs大白屁股Picc| 乳娘葡萄多汁| 欧美精品无码一级毛片免费大全| 色戒未删减完整版1080p| 金莎朗尺度最大的电影| 欧美精品一区二区三区无码视频 | 做暧暧18???| 杨思敏一级做a爰片毛片免费| 日本特景观照欣赏| 无码帝国www色情综合| 老司机免费福利视频| 直播视频区国产| 二次元女趴着扒开屁股动图| 粉嫩在线| 日本孕妇与黑人xxxxxx| 国产精品5g天天爽久久| 公交车上多人三级AV| 小坏蛋好烫好多怀孕| 女性裸体被?羞羞被扒胸衣| 国产精品无码日韩18???| 正在播放舔穴视频| 男女性接交无遮挡免费看视频| 狠狠色婷婷久久综合频道日韩小说 | 377人体粉嫩噜噜噜| 开着车有肉的小说| Japan白嫩丰满老师vidos| 靖边县| 中国河南老妇女bbbbbb| 3D黄漫?18禁视频免费看网站 | 三上悠亚ssni绝顶を教え込ま | 毛片a级放荡的护士hd| 韩国中文字幕在线观看| 黑寡妇高潮一级A片免费观看| 94vvv com永久区域网| 中国bgmbgmbgm老妇和青年交| 中国xx爽69护士丝袜| 国内精久久久久久久久久久| 一级毛片91蝌蚪| 色戒中吸奶头高潮了几次|