念念不忘
必有回响

标签:Spark

Spark2.4.4单节点部署-码农志
运维不息

Spark2.4.4单节点部署

阅读(633)评论(0)赞(0)

最近基友送了台电脑,准备将其作为一个虚拟机用来平时在家的学习环境,因为在公司学习的话会被认为是摸鱼或者工作量不饱和。由于是16G的内存,所以也做不了集群,用来学习的话也没必要,就搞个单节点吧。 1. 环境说明 本次安装环境: CentOS ...

Hue整合Oozie和Spark2-码农志
编程不止

Hue整合Oozie和Spark2

阅读(566)评论(0)赞(0)

在Hue中使用Oozie调度Spark2任务时总是调用不起来,默认Hue也只支持Spark,那么要支持Spark2还需要进行如下操作。 1.将Spark2中的jar包依赖上传到/user/oozie/share/lib/中: hadoop ...