根据插入率预测MySQL中的主键耗尽

Question

我们的产品表的主键即将耗尽。我们不希望这种情况再次发生。因此，我们需要一种机制来根据插入率在主键用完时提醒我们，以便我们可以缓解这种情况。

我编写了一个 Jenkins 作业，它运行并执行信息模式查询，并从 MySQL 数据库中提取索引长度、表行和 auto_increment。但是我们需要跟踪先前的读数，因为我们想要将其与当前的读数进行比较，以便预测密钥何时会耗尽。

        SELECT 
        INDEX_LENGTH, TABLE_NAME, AUTO_INCREMENT, TABLE_ROWS 
        FROM 
        information_schema.TABLES 
        ORDER BY 
        index_length DESC;

我在 Mysql 表中找不到任何与变化率相关的内容来预测主键的使用率。如果有人想到一种好的替代方法，我也愿意使用任何好的替代方法，但请记住，我必须通过 cron 作业或 Jenkins 作业运行一个查询，该查询应该告诉哪些表将在今年年底耗尽。

Answer 1

找到相关查询获取自动增量用完的百分比。请参阅this链接和评论部分。

SELECT table_schema, table_name, column_name, column_type, auto_increment,max_int,ROUND(auto_increment/max_int*100,2) AS “USED %” FROM
    (SELECT table_schema, table_name, column_name, column_type, auto_increment,
    pow(2, case data_type
    when ‘tinyint’ then 7
    when ‘smallint’ then 15
    when ‘mediumint’ then 23
    when ‘int’ then 31
    when ‘bigint’ then 63
    end+(column_type like ‘% unsigned’))-1 as max_int
    FROM information_schema.tables t
    JOIN information_schema.columns c USING (table_schema,table_name)
    WHERE t.table_schema not in (‘mysql’,’information_schema’,’performance_schema’) and t.table_type = ‘base table’
    and c.extra = ‘auto_increment’ AND t.auto_increment IS NOT NULL order by auto_increment desc limit 10) TMP;

Answer 2

您可以简单地创建一个表来存储指标、您当前正在检索的值以及时间戳

    INSERT INTO table_metrics(index_length, table_name, auto_increment, row_count, when)
    SELECT INDEX_LENGTH, TABLE_NAME, AUTO_INCREMENT, TABLE_ROWS, now()
    FROM information_schema.TABLES 
    ;

然后对该数据运行查询

SELECT table_name
    , il_change / daysPassed AS ilGrowthRate
    , ([literal ceiling value] - il_current) / (il_change / daysPassed) AS daysRemaining
    , ...
FROM (
SELECT table_name
    , MAX(index_length) AS il_current
    , MAX(index_length) - MIN(index_length) AS il_change
    , ....
    , DATEDIFF(MAX(when), MIN(when)) AS daysPassed
GROUP BY table_name
) AS subQ

这假设您在截断表时删除了表的数据，以便指标在表截断时重新开始；当然，您可以添加条件以仅查看最近一天、一周、一个月等的指标...（在这种情况下，清除后修剪指标表变得不太重要）。

Answer 3

只需使用 tsdb 插入值并随时间跟踪它，您可以使用 grafana 对其进行监控和警报