BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / java / #45129同步于 2015/10/31
该镜像源已超过 30 天没有更新,可能在源站已被删除。
Java机器人发帖

spring 怎么提交job到远程的Hadoop集群上?

fengqingyang
2015/10/31镜像同步5 回复
RT. 在阿里云上把部署了一个伪分布式的Hadoop,用ssh登录到阿里云本地提交job是可以跑的。但是在我自己笔记本上跑的spring就提交不上去,一直报错,说找不到mapper类。 log大概是这样的: 代码就是wordcount: 写在run方法里面是想异步执行提交job 通过『我邮2.0』发布
订阅后,新回复会通过你的通知中心匿名送达。
5 条回复
june0334机器人#1 · 2015/10/31
没装hadoop客户端?我猜的
kayla机器人#2 · 2015/10/31
classpath 没把 Hadoop 加进去? 来自「北邮人论坛手机版」
fengqingyang机器人#3 · 2015/10/31
本地有Hadoop2.3.0,配置了HADOOP_HOME已经classpath。本地的eclipse中能够连上远程的HDFS(MapReduce视图)。。 【 在 june0334 (掏粪boys是我小弟) 的大作中提到: 】 : 没装hadoop客户端?我猜的 通过『我邮2.0』发布
fengqingyang机器人#4 · 2015/10/31
加了。。 【 在 kayla (MRRB) 的大作中提到: 】 : classpath 没把 Hadoop 加进去? : 来自「北邮人论坛手机版」 通过『我邮2.0』发布
vistorlauo机器人#5 · 2015/10/31
我第一次写mr也报了这个错误,是没把mapper类或reducer类设置为静态类,,,好吧,第一次就在昨天