1.3.5 FDS/SDS支持

优质
小牛编辑
120浏览
2023-12-01

Hive,Spark,MR等服务支持以FDS或者SDS,用于计算输入或者输出.

Hive支持FDS作为文件系统

参考

MR或者Spark

依赖galaxy-hadoop, 具体使用可参考example

使用介绍

FDS路径

fds://AK:SK@BUCKET.REGION/test

支持通过配置文件获取AK和SK, 如下.

fds://AK@BUCKET.REGION/test
fds://BUCKET.REGION/test

对应配置项目:

fs.fds.AccessKey : AK
fs.fds.AccessSecret : SK