加入收藏 | 设为首页 | 会员中心 | 我要投稿 拼字网 - 核心网 (https://www.hexinwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 站长学院 > MySql教程 > 正文

这样做数据清理,可以避免引发MySQL故障

发布时间:2018-11-09 12:52:05 所属栏目:MySql教程 来源:DBAplus社群
导读:【51CTO技术沙龙】10月27日,让我们共同探索AI场景化应用实现之道 通常来说,性能监控类业务场景具有数据导入量大、表空间增长快的特点,为了避免磁盘空间被占满,并提高SQL执行效率,要定期对历史数据进行清理。根据数据采集频率和保留周期的不同,可在应

代码如下:

  1. delimiter $$  
  2. CREATE PROCEDURE `clean_partiton`(SCHEMANAME VARCHAR(64), TABLENAME VARCHAR(64),reserve INT)  
  3. BEGIN 

注:

  • 该储存过程适用于分区字段类型为datetime,按天分区且命名为p20180301格式规范的分区表
  • 获取最旧一个分区,判断是否为reserve天前分区,是则进行删除,每次只删除一个分区
  • 提前创建14天分区,判断命名不重复则创建
  • 创建 history_partition 表,varchar(200)和datetime类型。记录执行成功的SQL语句
  1. DECLARE PARTITION_NAMES VARCHAR(16);  
  2. DECLARE OLD_PARTITION_NAMES VARCHAR(16);  
  3. DECLARE LESS_THAN_TIMES varchar(16);  
  4. DECLARE CUR_TIME INT;  
  5. DECLARE RETROWS INT;  
  6. DECLARE DROP_PARTITION VARCHAR(16);  
  7. SET CUR_TIME = DATE_FORMAT(NOW,'%Y%m%d');  
  8. BEGIN  
  9. SELECT PARTITION_NAME INTO DROP_PARTITION FROM information_schema.partitions WHERE table_schema = SCHEMANAME AND table_name = TABLENAME order by PARTITION_ORDINAL_POSITION asc limit 1 ;  
  10. IF SUBSTRING(DROP_PARTITION,2) < DATE_FORMAT(CUR_TIME - INTERVAL reserve DAY, '%Y%m%d') THEN  
  11. SET @sql = CONCAT( 'ALTER TABLE ', SCHEMANAME, '.', TABLENAME, ' drop PARTITION ', DROP_PARTITION, ';' );  
  12. PREPARE STMT FROM @sql;  
  13. EXECUTE STMT;  
  14. DEALLOCATE PREPARE STMT;  
  15. INSERT INTO history_partition VALUES (@sql, now);  
  16. END IF;  
  17. end;  
  18. SET @__interval = 1;  
  19. create_loop: LOOP  
  20. IF @__interval > 15 THEN  
  21. LEAVE create_loop;  
  22. END IF;  
  23. SET LESS_THAN_TIMES = DATE_FORMAT(CUR_TIME + INTERVAL @__interval DAY, '%Y%m%d');  
  24. SET PARTITION_NAMES = DATE_FORMAT(CUR_TIME + INTERVAL @__interval -1 DAY, 'p%Y%m%d');  
  25. IF(PARTITION_NAMES != OLD_PARTITION_NAMES) THEN  
  26. SELECT COUNT(1) INTO RETROWS FROM information_schema.partitions WHERE table_schema = SCHEMANAME AND table_name = TABLENAME AND LESS_THAN_TIMES <= substring(partition_description,2,8) ;  
  27. IF RETROWS = 0 THEN  
  28. SET @sql = CONCAT( 'ALTER TABLE ', SCHEMANAME, '.', TABLENAME, ' ADD PARTITION (PARTITION ', PARTITION_NAMES, ' VALUES LESS THAN ( "',LESS_THAN_TIMES, '" ));' );  
  29. SET @__interval=@__interval+1;  
  30. SET OLD_PARTITION_NAMES = PARTITION_NAMES;  
  31. END LOOP;  
  32. END  
  33. $$  
  34. delimiter ; 

(编辑:拼字网 - 核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!