首页
互助圈
新手教程
进阶之路
算法原理
架构设计
JAVA进阶
C/C++进阶
Python进阶
JavaScript
数据库
大数据
消息服务
源码解读
JAVA源码
Spring源码
数据库
消息服务
Dubbo源码
面试指南
大厂专栏
面试技巧
面试经验
面试题库
开发资料
文档资料
工具软件
电子书籍
小牛导航
在线工具
登录
目录
目标
galaxy-hadoop库
注意
当前位置:
首页
>
文档资料
>
小米结构化数据存储服务 SDS 开发指南
>
1.3.15 离线分析
优质
小牛编辑
128浏览
2023-12-01
目标
提交mr/spark作业对存储在SDS上的数据进行离线分析, 可以使用自己搭建的yarn集群,或
小米EMR服务
galaxy-hadoop库
我们封装离线分析库
galaxy-hadoop
,可以参考其中的example
MR job:
sds-mapreduce
spark job:
sds-spark
注意
离线分析读请求应访问SDS备集群的Endpoint,访问主集群可能会影响在线请求.
免责声明:
以上内容版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。感谢每一位辛勤著写的作者,感谢每一位的分享。