栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

GBase 8a MPP分析型数据库集群并行加载

GBase 8a MPP分析型数据库集群并行加载

Gbase 8a MPP Cluster 中,集群加载功能直接集成在 Gbase 8a MPP Cluster 内部,提供了面向用户的 SQL 接口,集群和单机加载方式统一,支持如下功能:

支持从通用数据服务器拉取数据,支持 ftp/http/hdfs/sftp 等多种协议;
 支持多加载机对单表的并行加载,最大化加载性能;
 支持普通文本、gzip 压缩、snappy 压缩、lzo 压缩等多种格式数据文件;
 支持普通文本与定长文本的加载(format 3 和 format 4)
 支持错误数据溯源功能,可以准确定位错误数据在源文件中的位置;
 加载性能可以随着集群规模的扩展而持续提升

加载的时候只写主分片,副本分片系统内部自动同步,性能大幅提升,可达30TB+/小时,同时加载方式简单,通过直接调用sql语句加载。流程如下图:

 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/600109.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号