• Clickhouse通过命令导入导出文件(在Linux命令窗口)


    问题:在Linux服务器的命令窗口,通过命令行的方式对部署在该服务器的clickhouse里面的数据进行导入导出文件操作。

    操作的clickhouse相关信息:

            数据库名:default

            数据库密码:ps123

            操作的数据库表:student

    1. create table student(
    2. name String,
    3. age Int,
    4. sex Int,
    5. address String
    6. )ENGINE = MergeTree
    7. ORDER BY tuple()

    1、在linux窗口执行Clickhouse的sql语句

    clickhouse-client --password ps123 -d default -q "insert into student values('小王', '18', '1', 'XXX小区')"

    2、导出student表数据至服务器磁盘

    1. # 导出带表头的txt文件
    2. clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSVWithNames" --format_csv_delimiter='|' > /data/student.txt
    3. # 导出不带表头的txt文件
    4. clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSV" --format_csv_delimiter='|' > /data/student.txt
    5. # 导出带表头的csv文件
    6. clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSVWithNames" --format_csv_delimiter='|' > /data/student.csv
    7. # 导出不带表头的csv文件
    8. clickhouse-client --password ps123 -d default -q "select * from student FORMAT CSV" --format_csv_delimiter='|' > /data/student.csv

    注意:如果执行语句后面不加FORMAT CSV或FORMAT CSVWithNames,默认是\t作为分隔符。只有指定FORMAT CSV或FORMAT CSVWithNames后,指定--format_csv_delimiter才生效。

    3、导入服务器磁盘文件到数据库

    1. # 导入带表头的txt文件
    2. clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSVWithNames" --format_csv_delimiter='|'  <  /data/student1.txt
    3. # 导入不表头的txt文件
    4. clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSV" --format_csv_delimiter='|'  <  /data/student1.txt
    5. # 导入带表头的csv文件
    6. clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSVWithNames" --format_csv_delimiter='|'  <  /data/student1.csv
    7. # 导入不表头的csv文件
    8. clickhouse-client --password ps123 -d default -q " insert into student FORMAT CSV" --format_csv_delimiter='|'  <  /data/student1.csv

    导入带表头的文件格式:

    4、客户端连接Clickhouse数据库

    clickhouse-client -h localhost --port 9001 -u default --password ps123 --database default;

    clickhouse-client的常用参数:
    1、-C:--config-file 配置文件目录
    2、-c:--config 配置文件目录
    3、-h:--host 服务器ip地址
    4、--port: 指定端口
    5、-u:--user 指定用户名
    6、--password: 指定密码
    7、--ask-password :询问密码
    8、-q:--query 指定SQL
    9、-d:--database 指定数据库,默认数据库为default,如果是默认数据库,可选择不写
    10、-m:--multiline 多行组合成一个sql执行。
    11、-n:--multiquery 一次执行多个SQL,SQL之间使用’;'分号隔离
    12、--queries-file:指定SQL文件(file1 file2)
    13、-f:--format 输出格式

    14、FORMAT CSV:指导入导出的文件类型,不带表头,导出的文件名后置可以为csv\txt\json,FORMAT CSV等同于--format CSV

    15、FORMAT CSVWithNames:同FORMAT CSV,但是文件带导出表头,FORMAT CSVWithNames等同于--format CSVWithNames
    16、-t:--time 在非交互式格式中将执行时间打印到错误日志中。
    17、--format_csv_delimiter:指定CSV数据中的列分隔符, 默认情况下分隔符为逗号(,)。

    操作中遇到的问题:

    (1)执行导出文件命令时,由于--format_csv_delimiter='\t'导致报错:

    1. [root@local ~]# clickhouse-client --password ps123 -d default -q "select * from student" --format_csv_delimiter='\t' --format CSVWithNames > /data/student.txt
    2. Code: 19. DB::Exception: A setting's value string has to be an exactly one character long. (SIZE_OF_FIXED_STRING_DOESNT_MATCH)

    (2)执行导入文件命令时,由于--format CSVWithNames不能用于导入语句中而报错

    1. [root@local ~]# clickhouse-client --password ps123 -d default -q "insert into student" --format_csv_delimiter='|' --format CSVWithNames < /data/student.txt
    2. Code: 62. DB::Exception: Syntax error: failed at position 20 (end of query): . Expected one of: token, Dot, OpeningRoundBracket, FROM INFILE, VALUES, FORMAT, SELECT, WITH, WATCH. (SYNTAX_ERROR)
  • 相关阅读:
    看了B站上的这些课程,我飘了!
    哈夫曼树(附C++代码)
    VS2017下第一个C#控制台程序helloworld
    webSocket基于面向对象二次封装
    基于nginx开发下的OpenResty开发指南构建百万级别并发的Web应用
    电脑如何连蓝牙耳机
    若依框架RuoYi项目运行启动教程【傻瓜式教程】
    CNN人脸识别(python实现)
    ASEMI-GBU808整流桥如何测好坏
    解绑UI,先看看好用的React表单校验库
  • 原文地址:https://blog.csdn.net/qq_39512532/article/details/127577952