Как пропускать столбцы в CSV файле при импорте в таблицу MySQL с помощью LOAD DATA INFILE?

У меня есть CSV файл с 11 столбцами, и у меня есть таблица MySQL с 9 столбцами.

Файл CSV выглядит так:

col1, col2, col3, col4, col5, col6, col7, col8, col9, col10, col11

и таблица MySQL выглядит так:

col1, col2, col3, col4, col5, col6, col7, col8, col9

Мне нужно сопоставить столбцы 1-8 файла CSV непосредственно с первыми 8 столбцами таблицы MySQL. Затем мне нужно пропустить следующие два столбца в файле CSV, а затем сопоставить столбец 11 файла CSV с столбцом 9 таблицы MySQL.

В настоящее время я использую следующую команду SQL:

LOAD DATA LOCAL INFILE 'filename.csv' INTO TABLE my_table
FIELDS TERMINATED BY ','
ENCLOSED BY ''
LINES TERMINATED BY '\n'

Но приведенный выше код отображает первые 9 столбцов CSV файла в 9 столбцов в таблице MySQL.

Ответы

Ответ 1

Из документов Mysql:

Вы также можете отбросить входное значение на присвоение ему переменной пользователя и не назначать переменную таблице колонка:

LOAD DATA INFILE 'file.txt'  
INTO TABLE t1 (column1, @dummy, column2, @dummy, column3);

Ответ 2

step1.deal с awk.

cat file.txt |awk '{print $1,$2,$5...}'>new_file.txt

step2.load в mysql.

load data local infile 'new_file' into table t1(...)

приведенный ниже метод прост, но не разрешен в нижней версии mysql.

LOAD DATA INFILE 'file.txt'  
INTO TABLE t1 (column1, @dummy, column2, @dummy, column3);

Ответ 3

@deemi:

Единственный способ игнорировать @dummy заключается в установке поля по умолчанию AUTO INCREMENT. Таким образом, вы можете пропустить поле и просто код, подобный этому,

LOAD DATA INFILE 'file.txt'  
INTO TABLE t1 (column2, column3, column4, column5);

//предполагает, что для поля name column1 установлено значение AUTO INCREMENT по умолчанию.

Ответ 4

Я думаю, что в коде есть еще одно изменение:

Следующая команда SQL:

LOAD DATA LOCAL INFILE 'filename.csv' INTO TABLE my_table
FIELDS TERMINATED BY ','
ENCLOSED BY ''
LINES TERMINATED BY '\n'

- вероятно, приведет к ошибке обрыва данных.

Поэтому лучше использовать LINES TERMINATED BY '\r\n' вместо LINES TERMINATED BY '\n'

SO, код будет:

LOAD DATA LOCAL INFILE 'filename.csv' INTO TABLE my_table
FIELDS TERMINATED BY ','
ENCLOSED BY ''
LINES TERMINATED BY '\r\n'