返回

MySQL重建全文索引导致Tomcat阻塞？5个实用解决方案

mysql

重建 MySQL 全文索引，看似一个常规的数据库维护操作，却可能引发意想不到的性能问题，例如 Tomcat 连接池阻塞，最终导致 HTTP 请求失败。 本文将深入剖析这个问题的根源，并提供一系列实用解决方案。

首先，我们来还原一下问题的典型场景：为了确保全文索引的有效性，我们定期执行 ALTER TABLE 命令重建索引。 然而，这个命令会长时间锁定表，就像关上了一扇大门，阻止其他请求进入。 Tomcat 连接池尝试获取数据库连接时，就会被阻塞，一旦超过了 maxWaitMillis 设定的等待时间，连接获取就会超时，导致 HTTP 请求失败。 此时，Tomcat 连接池本身并没有崩溃，后台查询可能依然正常，但新的 HTTP 请求无法获取数据库连接，如同被困在门外的访客。 重启 Tomcat 后，系统恢复正常，这恰恰说明问题出在数据库连接上，而不是 Tomcat 本身。

有人可能会说，我的连接池配置很合理啊，maxTotal、maxIdle、maxWaitMillis 都设置了合适的值。 但这些参数只是连接池的内部管理机制，无法改变数据库表被锁住的事实。 这好比一个停车场，即使车位充足，如果出口被堵住了，车辆依然无法通行。 更有意思的是，有时我们会发现，一些直接连接数据库的程序却不受影响。 这是因为这些连接在索引重建之前就建立了，并且一直保持着，就像提前进入停车场的车辆。 这种直接连接的方式虽然可以暂时规避问题，却绕过了连接池的管理，存在连接泄露的风险，不推荐使用。

那么，该如何解决这个问题呢？ 仅仅调整 Tomcat 连接池参数是治标不治本的，我们需要从根本上减少 ALTER TABLE 命令的锁定时间。 下面提供几种解决方案，就像提供不同的钥匙来打开那扇被锁住的门。

  1. pt-online-schema-change 工具： 这是 Percona Toolkit 提供的利器，可以在不停机的情况下修改数据库 schema，包括添加和删除索引。 它的工作原理类似于“偷梁换柱”，先创建一个影子表，在后台同步数据，最后替换原表，从而将锁定时间降到最低。 这就像在旁边建一座新房子，等装修完毕后再搬进去，对日常生活的影响最小。

  2. 选择低峰期执行： 在访问量较低的时段执行索引重建，可以有效减少对用户的影响。 这就像在深夜进行道路施工，对交通的影响最小。

  3. 优化索引重建语句： MySQL 8.0 之后引入了 ALGORITHM=INPLACE 选项，在特定情况下可以减少锁定时间，就像找到了更高效的施工方法。 例如：ALTER TABLE some_table ADD FULLTEXT INDEX full_text (description) VISIBLE ALGORITHM=INPLACE; 但并非所有场景都适用，需要根据实际情况测试。

  4. LOCK=NONE (MySQL 8.0+)： 这个选项尝试不获取任何 MDL 锁，如果存在 MDL 锁则会报错。 这就像尝试不封路施工，但如果道路已经被其他车辆占用，就无法进行。 适用于低并发或读取操作较少的场景，需要谨慎使用并在测试环境充分验证。

  5. 分表： 对于数据量非常大的表，可以考虑分表，将数据分散到多个表中，减少单个表的操作时间，就像将一个大型仓库分成多个小仓库，方便管理。 不过，分表方案比较复杂，需要仔细设计和规划。

解决这个问题的关键在于理解 ALTER TABLE 命令的锁定机制，以及如何将其对在线应用的影响最小化。 选择合适的方案，可以有效避免 Tomcat 连接池阻塞和 HTTP 请求失败，保障系统稳定运行。 上述方法各有优缺点，需要根据实际情况选择和调整。 例如，对于高并发系统，pt-online-schema-change 是首选；而对于低并发系统，选择低峰期执行可能更简单直接。

在实际应用中，可以结合多种方案，例如先分表再使用 pt-online-schema-change，进一步降低对线上服务的影响。 这就像先规划好路线，再选择合适的交通工具，才能更快更安全地到达目的地。

常见问题解答：

  1. pt-online-schema-change 工具如何使用？ 可以参考 Percona Toolkit 的官方文档，其中包含详细的使用说明和示例。

  2. 如何确定业务的低峰期？ 可以通过监控系统或日志分析来了解业务的访问模式，找到访问量较低的时段。

  3. ALGORITHM=INPLACE 有什么限制？ 并非所有场景都适用，例如，添加列时如果会导致行格式变化，就无法使用 INPLACE 算法。

  4. 分表方案有哪些需要注意的地方？ 需要考虑分表键的选择、数据迁移、查询路由等方面的问题。

  5. 除了上述方案，还有其他方法吗？ 可以考虑使用其他工具，例如 gh-ost，或者根据具体情况自定义方案。