在datproc中的集群中查找Hadoop流传输jar

问题描述 投票:1回答:1

所以我想在dataproc集群上运行python map reduce作业,问题是我似乎找不到需要提交到Main类或jar输入中的Hadoop流jar文件,我正在使用Hadoop 2.7 image,Hadoop 2.8的答案也可以谢谢

python hadoop mapreduce google-cloud-dataproc
1个回答
2
投票

位于Dataproc群集节点上/usr/lib/hadoop-mapreduce/文件夹中的[Hadoop Streaming jar:/usr/lib/hadoop-mapreduce/hadoop-streaming.jar

© www.soinside.com 2019 - 2024. All rights reserved.