Дамп базы данных mysql в резервную копию открытого текста (CSV) из командной строки

В самом MySQL вы можете указать вывод CSV, например:

SELECT order_id,product_name,qty
FROM orders
INTO OUTFILE '/tmp/orders.csv'
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'

Из https://www.tech-recipes.com/rx/1475/save-mysql-query-results-into-a-text-or-csv-file/

Кажется, я не могу найти сброшенный файл в указанном мной каталоге, почему? — person dreeves; 18.12.2015

@JCm сбрасывает на сервер — person dreeves; 18.12.2015

Если вам действительно нужна «резервная копия», вам также понадобится схема базы данных, например, определения таблиц, определения представлений, процедуры хранения и так далее. Резервная копия базы данных — это не просто данные.

Ценность формата mysqldump для резервного копирования в частности заключается в том, что его очень ЛЕГКО использовать для восстановления баз данных mysql. Резервная копия, которую нелегко восстановить, гораздо менее полезна. Если вы ищете способ надежного резервного копирования данных mysql, чтобы вы могли восстановить их на сервере mysql, то я думаю, вам следует придерживаться инструмента mysqldump.

Mysql бесплатен и работает на многих различных платформах. Настроить новый сервер mysql, на который я могу восстановить данные, очень просто. Меня совсем не беспокоит то, что я не смогу настроить mysql, поэтому я могу выполнить восстановление.

Меня бы гораздо больше беспокоило настраиваемое резервное копирование / восстановление на основе хрупкого формата, такого как сбой csv / tsv. Вы уверены, что все ваши кавычки, запятые или вкладки, которые есть в ваших данных, будут правильно экранированы, а затем правильно проанализированы вашим инструментом восстановления?

Если вы ищете способ извлечения данных, посмотрите несколько других ответов.

спасибо, очень помогли! ты убедил меня. Однако у меня есть другие причины, по которым мне нужен быстрый способ получить дамп csv с помощью команды командной строки. Я жду принятого ответа. (хотя я, вероятно, мог бы собрать его на этом этапе из текущих ответов, я думаю, с помощью сценария mysql). — person dreeves; 22.01.2009

Я вижу большую ценность как в резервной копии, использующей собственный метод, так и в извлечениях для других целей. — person dreeves; 22.01.2009

mk-parallel-restore может восстановить резервную копию CSV, созданную с помощью mk-parallel dump, так что вы можете получить лучшее из обоих миров. Фактически, mk-parallel-restore работает лучше, гарантируя, что все триггеры, которые вы определили, восстанавливаются в последнюю очередь. — person dreeves; 22.01.2009

Опция select into outfile не сработает для меня, но приведенный ниже обходной способ передачи файла с разделителями табуляции через SED сработал:

mysql -uusername -ppassword -e "SELECT * from tablename" dbname | sed 's/\t/","/g;s/^/"/;s/$/"/' > /path/to/file/filename.csv

Эта команда привела к замене буквы t на ", " в выходном файле. Не совсем то, что мне было нужно. — person dreeves; 10.02.2017

Вы можете использовать приведенный ниже сценарий, чтобы получить вывод в файлы csv. Один файл на таблицу с заголовками.

for tn in `mysql --batch --skip-page --skip-column-name --raw -uuser -ppassword -e"show tables from mydb"`
do 
mysql -uuser -ppassword mydb -B -e "select * from \`$tn\`;" | sed 's/\t/","/g;s/^/"/;s/$/"/;s/\n//g' > $tn.csv
done

user — ваше имя пользователя, password — это пароль, если вы не хотите продолжать вводить пароль для каждой таблицы, а mydb — это имя базы данных.

Объяснение сценария: Первое выражение в sed заменит табуляцию на «,», поэтому у вас есть поля, заключенные в двойные кавычки и разделенные запятыми. Вторая вставляет двойную кавычку в начале, а третья вставляет двойную кавычку в конце. И последний заботится о \ n.

В основном это привело меня туда, куда мне нужно было пойти, но был удивлен, когда букву t заменили запятыми: stackoverflow.com/a/2610121/ 8400969 — person dreeves; 17.05.2019

И это также должно быть --skip-column-names в моей версии mysql — person dreeves; 17.05.2019

Если вы хотите сбросить весь db как csv

#!/bin/bash

host=hostname
uname=username
pass=password

port=portnr
db=db_name
s3_url=s3://bxb2-anl-analyzed-pue2/bxb_ump/db_dump/



DATE=`date +%Y%m%d`
rm -rf $DATE

echo 'show tables' | mysql -B -h${host} -u${uname} -p${pass} -P${port} ${db} > tables.txt
awk 'NR>1' tables.txt > tables_new.txt

while IFS= read -r line
do
  mkdir -p $DATE/$line
  echo "select * from $line" | mysql -B -h"${host}" -u"${uname}" -p"${pass}" -P"${port}" "${db}" > $DATE/$line/dump.tsv
done < tables_new.txt

touch $DATE/$DATE.fin


rm -rf tables_new.txt tables.txt