返回信息流你这又是本地run job ,又是公司服务器run job,能一样吗?
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #37071同步于 2020/9/13
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖
Re: 怪事,spark ui 的地址是由啥决定的呀?
Chenrjabc
2020/9/13镜像同步5 回复
订阅后,新回复会通过你的通知中心匿名送达。
5 条回复
不是,就是本地run job,但是在家里spark ui的地址因为连了vpn所以不知道为什么是公司的ip。
现在回学校了,还是本地run job,还是连了vpn,但是spark ui的地址就是学校的ip了,而且job还访问不了外网资源。。
【 在 Chenrjabc 的大作中提到: 】
: 你这又是本地run job ,又是公司服务器run job,能一样吗?
哎 破案了,虽然不知道为什么spark ui的地址到了学校就不是vpn的ip了。 但是job还是能正常跑的了,刚才不行原来是因为校园网实在太垃圾了。。现在半夜大家都睡了网络就稍微正常一点了。。
不懂spark,但是按道理你本地跑的话地址不是127.0.0.1吗。
如果绑定到0.0.0.0上那应该是通过你所有可用ip都可以访问到
除非你的spark还识别接口顺序,指定从哪个接口上监听?
【 在 indianmifan (indianmifan) 的大作中提到: 】
: 昨天刚回学校,今天用校园网连公司vpn,spark本地run了一个job,job需要访问墙外的一些资源,在当前网络环境下没法访问。spark ui的地址是校园网的ip。
: 但是前天在家的时候还能正常跑这个job,spark ui的地址是公司的vpn。 这两天也没做什么改动。
: 为什么spark ui的地址就不随vpn了呢,以及为什么spark的数据访问不走vpn了呢。。应该是用了全局代理吧,连接vpn用的是global protect,这两天也没改vpn的配置。
: ...................
嗯对,都是bind到0.0.0.0,但是之前访问spark ui的地址是公司的ip,现在是学校的。不知道为啥,虽然不影响程序。
【 在 q397273499 的大作中提到: 】
: 不懂spark,但是按道理你本地跑的话地址不是127.0.0.1吗。
: 如果绑定到0.0.0.0上那应该是通过你所有可用ip都可以访问到
: 除非你的spark还识别接口顺序,指定从哪个接口上监听?