5步带你入门GaussDB(DWS)的GDS导入导出

行歌沐雨

摘要：本篇文档为使用GDS导入示例的具体简单步骤和示例。

本文分享自华为云社区《带你快速入门GDS导入导出，玩转PB级数仓GaussDB(DWS)》，作者： yd_220527686。
1、创建导入目标表

1. CREATE TABLE tpcds_reasons
2. (
3. r_reason_sk integer not null,
4. r_reason_id char(16) not null,
5. r_reason_desc char(100)
6. );

复制代码

2、创建与目标表一致的外表

#外表中配置了数据源格式信息、GDS服务的访问信息，从而GaussDB(DWS)最终可以通过外表将数据服务器上的数据引流进数据库实表中。

1. DROP TABLE IF EXISTS foreign_tpcds_reasons;
2. CREATE FOREIGN TABLE foreign_tpcds_reasons
3. (
4. r_reason_sk integer not null,
5. r_reason_id char(16) not null,
6. r_reason_desc char(100)
7. )
8. SERVER gsmpp_server
9. OPTIONS
10. (
11. LOCATION 'gsfs://127.0.0.1:8780/*',
12. FORMAT 'CSV' ,
13. DELIMITER ',',
14. ENCODING 'utf8',
15. HEADER 'false',
16. FILL_MISSING_FIELDS 'true',
17. IGNORE_EXTRA_DATA 'true'
18. );

复制代码

创建成功后可以使用alter修改表的属性，示例如下：

1. alter foreign table foreign_tpcds_reasons options(set  quote  '"');

复制代码

3、启动本地gds

1. gds -d dir -p ip:port -H address_string -l log_file -D

复制代码

注意端口号与外表端口号一致，示例如下：

1. gds -d /input_data/ -D -p 127.0.0.1:8780 -l /CodeHub/gds_log.txt -H 0/0 -t 10 -D

复制代码

4、执行导入

1. INSERT INTO [目标表名] SELECT * FROM [foreign table 表名];

复制代码

出现INSERT 0 3类信息表示数据导入成功，示例如下：

1. INSERT INTO tpcds_reasons SELECT * FROM foreign_tpcds_reasons;

复制代码

5、tips

设置\set VERBOSITY verbose可看到导入失败的更多信息，包括gauss-00000类型错误码，SQLSTATE，以及HINT等信息
导入数据类型需与外表的各个参数做对应，比如：FORMAT为csv文件，以空格做字段分割，在外表创建时，DELIMITER需以空格为分割符
本篇文档为使用GDS导入示例的具体简单步骤和示例，如需详细介绍及参数说说明，请参考DWS产品文档。
 
点击关注，第一时间了解华为云新鲜技术~

来源:https://www.cnblogs.com/huaweiyun/p/17121908.html
免责声明：由于采集信息均来自互联网，如果侵犯了您的权益，请联系我们【E-Mail:cb@itdo.tech】 我们会及时删除侵权内容，谢谢合作！