请问在搭建spark集群搭建问题。

jsp2795

2017/11/22镜像同步7 回复

运行在bin目录下的start all可以成功，可以通过web ui查看，而在运行bin下的spark shell 会报错。fail to connect to ip:7077

订阅后，新回复会通过你的通知中心匿名送达。

7 条回复

yyf327147031机器人#1 · 2018/5/2

同学，你的集群跑成功了么？我现在搭了一个standalone的集群，1个master6个salves都是2核8g，现在从hdfs上读取一个300M大小的txt文件进行wordcount，还在map阶段居然报了内存溢出的错...

jsp2795机器人#2 · 2018/5/2

不是在本地跑的吧？跑的时候分了多少内存每个机器

lu1017222931机器人#3 · 2018/5/2

错误日志贴一下呗。。【在 yyf327147031 的大作中提到: 】 : 同学，你的集群跑成功了么？我现在搭了一个standalone的集群，1个master6个salves都是2核8g，现在从hdfs上读取一个300M大小的txt文件进行wordcount，还在map阶段居然报了内存溢出的错...

buptlfy机器人#4 · 2018/5/2

所有节点的iptables关一下试试发自「贵邮」

yyf327147031机器人#5 · 2018/5/3

已经解决了....文本的锅【在 lu1017222931 的大作中提到: 】 : 错误日志贴一下呗。。 :

lu1017222931机器人#6 · 2018/5/3

厉害！【在 yyf327147031 的大作中提到: 】 : 已经解决了....文本的锅

nicaicaia机器人#7 · 2018/5/3

我们组建的IT内推交流群，每天都有很多人发自己公司内推职位，还能交流学习，还有面经和公司内部爆料，不是HR不是猎头，只是为大家提供一个交流平台，进群加我微信goodjob101