Java: добавьте несколько строк в MySQL с помощью PreparedStatement
Я хочу вставить несколько строк в таблицу MySQL сразу с помощью Java. Количество строк является динамическим. Раньше я делал...
for (String element : array) {
myStatement.setString(1, element[0]);
myStatement.setString(2, element[1]);
myStatement.executeUpdate();
}
Я бы хотел оптимизировать это, чтобы использовать синтаксис, поддерживаемый MySQL:
INSERT INTO table (col1, col2) VALUES ('val1', 'val2'), ('val1', 'val2')[, ...]
но с PreparedStatement
я не знаю, как это сделать, потому что я не знаю заранее, сколько элементов array
будет содержать. Если это невозможно с помощью PreparedStatement
, как еще я могу это сделать (и все еще избегать значений в массиве)?
Ответы
Ответ 1
Вы можете создать пакет PreparedStatement#addBatch()
и выполнить его PreparedStatement#executeBatch()
.
Вот пример запуска:
public void save(List<Entity> entities) throws SQLException {
try (
Connection connection = database.getConnection();
PreparedStatement statement = connection.prepareStatement(SQL_INSERT);
) {
int i = 0;
for (Entity entity : entities) {
statement.setString(1, entity.getSomeProperty());
// ...
statement.addBatch();
i++;
if (i % 1000 == 0 || i == entities.size()) {
statement.executeBatch(); // Execute every 1000 items.
}
}
}
}
Выполняется каждые 1000 элементов, потому что некоторые драйверы JDBC и/или DB могут иметь ограничение на длину пакета.
См. также:
Ответ 2
Когда используется драйвер MySQL, необходимо установить для параметра соединения rewriteBatchedStatements
значение true ( jdbc:mysql://localhost:3306/TestDB?**rewriteBatchedStatements=true**)
.
С этим параметром оператор переписывается для массовой вставки, когда таблица блокируется только один раз, а индексы обновляются только один раз. Так что это намного быстрее.
Без этого параметра единственным преимуществом является более чистый исходный код.
Ответ 3
Если вы можете создать свой SQL-запрос динамически, вы можете сделать следующее обходное решение:
String myArray[][] = { { "1-1", "1-2" }, { "2-1", "2-2" },
{ "3-1", "3-2" } };
StringBuffer mySql = new StringBuffer(
"insert into MyTable (col1, col2) values (?, ?)");
for (int i = 0; i < myArray.length - 1; i++) {
mySql.append(", (?, ?)");
}
myStatement = myConnection.prepareStatement(mySql.toString());
for (int i = 0; i < myArray.length; i++) {
myStatement.setString(i, myArray[i][1]);
myStatement.setString(i, myArray[i][2]);
}
myStatement.executeUpdate();
Ответ 4
Если у вас есть автоматическое увеличение в таблице и вам нужно получить к нему доступ. вы можете использовать следующий подход... Проведите тест перед использованием, потому что getGeneratedKeys() в Statement, потому что он зависит от используемого драйвера. Нижеприведенный код тестируется на Марии DB 10.0.12 и Марии JDBC драйвер 1.2
Помните, что увеличение размера партии повышает производительность только в определенной степени... для моей установки увеличение размера партии выше 500 фактически ухудшало производительность.
public Connection getConnection(boolean autoCommit) throws SQLException {
Connection conn = dataSource.getConnection();
conn.setAutoCommit(autoCommit);
return conn;
}
private void testBatchInsert(int count, int maxBatchSize) {
String querySql = "insert into batch_test(keyword) values(?)";
try {
Connection connection = getConnection(false);
PreparedStatement pstmt = null;
ResultSet rs = null;
boolean success = true;
int[] executeResult = null;
try {
pstmt = connection.prepareStatement(querySql, Statement.RETURN_GENERATED_KEYS);
for (int i = 0; i < count; i++) {
pstmt.setString(1, UUID.randomUUID().toString());
pstmt.addBatch();
if ((i + 1) % maxBatchSize == 0 || (i + 1) == count) {
executeResult = pstmt.executeBatch();
}
}
ResultSet ids = pstmt.getGeneratedKeys();
for (int i = 0; i < executeResult.length; i++) {
ids.next();
if (executeResult[i] == 1) {
System.out.println("Execute Result: " + i + ", Update Count: " + executeResult[i] + ", id: "
+ ids.getLong(1));
}
}
} catch (Exception e) {
e.printStackTrace();
success = false;
} finally {
if (rs != null) {
rs.close();
}
if (pstmt != null) {
pstmt.close();
}
if (connection != null) {
if (success) {
connection.commit();
} else {
connection.rollback();
}
connection.close();
}
}
} catch (SQLException e) {
e.printStackTrace();
}
}
Ответ 5
@Ali Shakiba ваш код нуждается в некоторой модификации. Часть ошибки:
for (int i = 0; i < myArray.length; i++) {
myStatement.setString(i, myArray[i][1]);
myStatement.setString(i, myArray[i][2]);
}
Обновленный код:
String myArray[][] = {
{"1-1", "1-2"},
{"2-1", "2-2"},
{"3-1", "3-2"}
};
StringBuffer mySql = new StringBuffer("insert into MyTable (col1, col2) values (?, ?)");
for (int i = 0; i < myArray.length - 1; i++) {
mySql.append(", (?, ?)");
}
mysql.append(";"); //also add the terminator at the end of sql statement
myStatement = myConnection.prepareStatement(mySql.toString());
for (int i = 0; i < myArray.length; i++) {
myStatement.setString((2 * i) + 1, myArray[i][1]);
myStatement.setString((2 * i) + 2, myArray[i][2]);
}
myStatement.executeUpdate();
Ответ 6
мы можем отправлять несколько обновлений в JDBC для отправки обновлений пакета.
мы можем использовать объекты Statement, PreparedStatement и CallableStatement для обновления bacth с отключением autocommit
Функции addBatch() и executeBatch() доступны со всеми объектами-операторами, чтобы иметь BatchUpdate
здесь метод addBatch() добавляет набор операторов или параметров в текущую партию.