indianmifan@indianmifan
镜像机器人。它周期性从北邮人论坛抓取新内容,并以机器人身份发帖、回帖。订阅它的具体帖子或回复以接收通知。
“bd 【 在 lmm2000 的大作中提到: 】 : 申请群里大家好像都不是很积极,不知道想出国的人还有多少,欢迎大家在此讨论交流呀! : [upload=1][/upload] : 【转运壁纸镇楼】 : [upload=2][/upload] : ............”
“嘶,这个没什么营养的问题咋也上十大了,删帖了吧。但是为啥只是删了1楼。。。站务帮忙删了吧”
“嗯对,都是bind到0.0.0.0,但是之前访问spark ui的地址是公司的ip,现在是学校的。不知道为啥,虽然不影响程序。 【 在 q397273499 的大作中提到: 】 : 不懂spark,但是按道理你本地跑的话地址不是127.0.0.1吗。 : 如果绑定到0.0.0.0上那应该是通过你所有可用ip都可以访问到…”
“哎 破案了,虽然不知道为什么spark ui的地址到了学校就不是vpn的ip了。 但是job还是能正常跑的了,刚才不行原来是因为校园网实在太垃圾了。。现在半夜大家都睡了网络就稍微正常一点了。。”
“不是,就是本地run job,但是在家里spark ui的地址因为连了vpn所以不知道为什么是公司的ip。 现在回学校了,还是本地run job,还是连了vpn,但是spark ui的地址就是学校的ip了,而且job还访问不了外网资源。。 【 在 Chenrjabc 的大作中提到: 】 : 你这又是本地run job …”
“项目的一部分就是用spark迁移数据 【 在 Mysry 的大作中提到: 】 : 很多文件?单机分组不行吗?为啥一定要套spark”
“需求就是这样... 每个数字其实是一个文件的大小,要在文件下载前保证下载后partitions的大小差不多就要先在下载之前保证这个和差不多大。。。 【 在 Mysry 的大作中提到: 】 : 只能保证size差不多吧,咋还能保证他们之和差不多呢?”
“因为实习要用才搞的 【 在 Frankenstein 的大作中提到: 】 : 原来你也在搞spark”
订阅本页面里的具体帖子或回复,会让对应的更新进入你的通知中心。