揭秘 MySQL 中百万级数据插入效率提升秘籍

2024-02-16 02:48:28

在数据量日益增长的今天，数据库的性能优化至关重要。作为流行的关系型数据库，MySQL 在处理海量数据时难免会遇到效率瓶颈。本文将深入探究 MySQL 中百万级数据插入效率优化的两大方法，为数据库从业者提供实用指导。

一、利用 Java 代码批量插入

Java 语言提供了强大的数据操作接口，可以高效地处理大量数据。通过使用 PreparedStatement 和批处理功能，我们可以一次性向数据库插入多条记录，大大提高了插入效率。

示例代码：

// 创建 PreparedStatement
String sql = "INSERT INTO table_name (column1, column2, column3) VALUES (?, ?, ?)";
PreparedStatement pstmt = connection.prepareStatement(sql);

// 批量添加参数
for (int i = 0; i < data.size(); i++) {
    pstmt.setInt(1, data.get(i).getId());
    pstmt.setString(2, data.get(i).getName());
    pstmt.setInt(3, data.get(i).getAge());

    // 添加到批处理中
    pstmt.addBatch();
}

// 执行批处理
pstmt.executeBatch();

二、借助存储过程提高性能

MySQL 提供了存储过程功能，可以将一组 SQL 语句封装成一个独立的单元。通过使用存储过程，我们可以减少数据库和应用程序之间的往返次数，从而提升插入效率。

创建存储过程：

CREATE PROCEDURE insert_data(IN id INT, IN name VARCHAR(255), IN age INT)
BEGIN
    INSERT INTO table_name (id, name, age) VALUES (id, name, age);
END

调用存储过程：

// 创建 CallableStatement
String sql = "{call insert_data(?, ?, ?)}";
CallableStatement cstmt = connection.prepareCall(sql);

// 设置参数
cstmt.setInt(1, data.getId());
cstmt.setString(2, data.getName());
cstmt.setInt(3, data.getAge());

// 执行存储过程
cstmt.execute();