DBLOG

分类 - 2、数据导入导出

1、 DWS外部表
2025-05-22 15:08:58    1    0    0
外部表 创建DWS外表的语法与普通表相比，需要额外指定server和option选项。（1）server是一个数据库对象，可通过create server语法创建，它存储了数据源的访问或认证信息，告诉外表如何找到目标数据。语法CREATE SERVER server_name foreign data wrapper fdw_name OPTIONS ( { option_name ' value ' } [, ...] ) ;外部服务器是存储HDFS集群信息、OBS服务器信息、DLI连接信息或其他同构集群信息的载体。默认只有系统管理员才可以创建外部服务器，否则需要对所使用的FORE
2、GDS
2025-05-22 15:08:58    1    0    0
1. GDS工具适用场景 GDS是GaussDB(DWS)提供的一个数据导入导出工具，可在支持多种场景下的数据迁移业务，如异型数据库之间、两个集群之间等。主要使用场景包括： 大数据量表以文本数据作为来源导入 大数据量表的导出 数据迁移，同构异构集群数据迁移 2. GDS工具原理 GDS（Gauss Data Service）数据服务位于数据库系统外部，通过网络与系统相连。数据服务器上部署GDS管理源数据，提供数据服务功能，分发数据文件给DataNode。各DataNode并行收到数据分片，进行数据的入库。数据导出流程刚好反过来。GDS支持导入和导出的文件格式有c
3、 基于Flink构建实时数仓
2025-05-22 15:08:58    1    0    0
Flink简介 1. 概念 2. 组件 3. 任务 4. API和库 dws-flink-connector介绍与使用 1. 概述 2. 批量读 说明 3. 维流join 说明 维表join语法 4. 攒批写 语法示例 说明 5. 丰富的写入方式 6. 攒批写入典型参数 数据写入模式说明 7. Flink Catalog 说明 实时增量读取 1. 实时增量读取的作用原理 2. Binlog数据格式 gs_binlog_event_type可能的取值： 3. 实时读取Binlog 说明 数据同步示例 增量计算示例 4. 实时读取Binlog注意事项 5.