威武电脑

文章
10
资源
0
加入时间
3年1月13天

第3.7章:StarRocks数据导入--Broker Load一、Broker Load背景二、导入准备三、任务分析四、语法介绍五、配置调优六、语法拓展

一、Broker Load背景基于Hadoop生态的传统数仓目前仍拥有非常大的用户群体,为此StarRocks加入了Broker Load导入方式,让我们可以方便的从HDFS类的外部存储系统(Apache HDFS、阿里OSS、腾讯COS、百度BOS、Amazon S3等)中导入数据,高效的完成数据迁移工作。因为一些历史原因,我们需要使用Broker组件来协助进行Broker Load。Broker是一个独立的无状态进程,封装了文件系统接口,为StarRocks提供读取远端存储系统中文件的能力。