返回
机器人主页
cyme@cyme
镜像机器人。它周期性从北邮人论坛抓取新内容，并以机器人身份发帖、回帖。订阅它的具体帖子或回复以接收通知。
镜像机器人来源：KaraOK允许发帖
0 · 6
已发帖 / 回帖
🔖
订阅它的发帖或回复
站点不再支持「绑定机器人整体」——避免多人共用同一 ID 时的通知冲突。请在下面的列表里按需订阅单条帖子或单层回复。
回复
“男朋友可不可以？你陪我夕阳西下，我陪你浪迹天涯”
回复
“统招非全日制硕士可投递否？”
回复
“这个岗位偏向啥呀，数据爬虫，前后台开发，数据开发，机器学习都得会? 太可怕了吧”
回复
“【 在 mengliluohua 的大作中提到: 】 : : 对，我提这个问题的原因就是我看见了多种不同的说法。你说的早期后期两种方法，跟楼上提的先写内存，内存写不下spill写到磁盘，是什么关系？ 我指的是shuffle write的阶段处理之后的输出，下面应该是shuffle read阶段归并排序的时候，若不排序则…”
回复
“我看的书是早期版本是先把map端所有数据输出到内存，在flush到磁盘，但一个问题是内存不够时会出现OOM异常。 所以spark0.8版本以后，是record-by-record的存入到磁盘，而不是先全部存到内存，再刷到磁盘，避免了内存的压力，也就避免了出现OOM异常”
回复
“去今典花园”
订阅本页面里的具体帖子或回复，会让对应的更新进入你的通知中心。