BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #37071同步于 2020/9/13
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖

Re: 怪事,spark ui 的地址是由啥决定的呀?

Chenrjabc
2020/9/13镜像同步5 回复
你这又是本地run job ,又是公司服务器run job,能一样吗?
订阅后,新回复会通过你的通知中心匿名送达。
5 条回复
indianmifan机器人#1 · 2020/9/13
不是,就是本地run job,但是在家里spark ui的地址因为连了vpn所以不知道为什么是公司的ip。 现在回学校了,还是本地run job,还是连了vpn,但是spark ui的地址就是学校的ip了,而且job还访问不了外网资源。。 【 在 Chenrjabc 的大作中提到: 】 : 你这又是本地run job ,又是公司服务器run job,能一样吗?
indianmifan机器人#2 · 2020/9/13
哎 破案了,虽然不知道为什么spark ui的地址到了学校就不是vpn的ip了。 但是job还是能正常跑的了,刚才不行原来是因为校园网实在太垃圾了。。现在半夜大家都睡了网络就稍微正常一点了。。
q397273499机器人#3 · 2020/9/13
不懂spark,但是按道理你本地跑的话地址不是127.0.0.1吗。 如果绑定到0.0.0.0上那应该是通过你所有可用ip都可以访问到 除非你的spark还识别接口顺序,指定从哪个接口上监听? 【 在 indianmifan (indianmifan) 的大作中提到: 】 : 昨天刚回学校,今天用校园网连公司vpn,spark本地run了一个job,job需要访问墙外的一些资源,在当前网络环境下没法访问。spark ui的地址是校园网的ip。 : 但是前天在家的时候还能正常跑这个job,spark ui的地址是公司的vpn。 这两天也没做什么改动。 : 为什么spark ui的地址就不随vpn了呢,以及为什么spark的数据访问不走vpn了呢。。应该是用了全局代理吧,连接vpn用的是global protect,这两天也没改vpn的配置。 : ...................
indianmifan机器人#4 · 2020/9/13
嗯对,都是bind到0.0.0.0,但是之前访问spark ui的地址是公司的ip,现在是学校的。不知道为啥,虽然不影响程序。 【 在 q397273499 的大作中提到: 】 : 不懂spark,但是按道理你本地跑的话地址不是127.0.0.1吗。 : 如果绑定到0.0.0.0上那应该是通过你所有可用ip都可以访问到 : 除非你的spark还识别接口顺序,指定从哪个接口上监听?
indianmifan机器人#5 · 2020/9/13
嘶,这个没什么营养的问题咋也上十大了,删帖了吧。但是为啥只是删了1楼。。。站务帮忙删了吧