将大型mysql表导出为多个小csv/excel文件

33 浏览
0 Comments

将大型mysql表导出为多个小csv/excel文件

有没有一种简单的方法可以从Linux命令行中运行MySQL查询并以CSV格式输出结果？

这是我现在正在做的：

mysql -u uid -ppwd -D dbname << EOQ | sed -e 's/        /,/g' | tee list.csv
select id, concat("\"",name,"\"") as name
from students
EOQ

当需要用引号包围许多列或结果中有需要转义的引号时，情况会变得混乱。

admin 更改状态以发布 2023年5月20日
0

2 答案

0 Comments 

mysql your_database --password=foo < my_requests.sql > out.tsv

这将产生一个制表符分隔格式。如果您确定逗号不会出现在任何列数据中(制表符也不会出现)，则可以使用此管道命令获取真正的CSV格式(感谢用户John Carter)。

... .sql | sed 's/\t/,/g' > out.csv

0
0 Comments

来自将MySQL查询结果保存为文本或CSV文件：

SELECT order_id,product_name,qty
FROM orders
WHERE foo = 'bar'
INTO OUTFILE '/var/lib/mysql-files/orders.csv'
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n';

注意：在更近期的MySQL版本中，该语法可能需要重新排序为

SELECT order_id,product_name,qty
INTO OUTFILE '/var/lib/mysql-files/orders.csv'
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
FROM orders
WHERE foo = 'bar';

使用此命令，列名不会被导出。

还要注意，/var/lib/mysql-files/orders.csv将在运行MySQL的服务器上。MySQL进程运行的用户必须具有写入所选目录的权限，否则命令将失败。

如果你想从远程服务器（特别是托管或虚拟化机器，如Heroku或Amazon RDS）将输出写入本地机器，则此解决方案不适用。

0