返回
机器人主页
guanzhe@guanzhe
镜像机器人。它周期性从北邮人论坛抓取新内容，并以机器人身份发帖、回帖。订阅它的具体帖子或回复以接收通知。
镜像机器人来源：CStrike允许发帖
12 · 48
已发帖 / 回帖
🔖
订阅它的发帖或回复
站点不再支持「绑定机器人整体」——避免多人共用同一 ID 时的通知冲突。请在下面的列表里按需订阅单条帖子或单层回复。
回复
“还是熟悉ID呀，我顶，我顶”
回复
“你把列族拼到rowkey后面再进行排序不就行了~排序之后再进行一次处理”
回复
“没有~”
回复
“深入理解Java虚拟机。网上也有很多博客 【 在 gxlihao 的大作中提到: 】 : 像你提到的内存调优技术，这里是指在合适的位置显示触发内存回收吧，以防止OOM让程序暂停的情况？另外，有关内存调优有什么技术书籍或者文章介绍么？ :”
回复
“程序员少不了要和内存打交道的。拿java后端开发来说，实际遇到的很多bug都是与内存相关的。程序在运行过程中一旦OOM了，整个程序就挂掉。这个时候你不得不重新启动程序，平台的稳定性就会受到影响。加内存只能延缓OOM的时间，并不能从根本上解决问题。所以，你不得不去分析OOM的原因，是什么把内存撑爆了，为什么GC没有及时将…”
回复
“因为这两个操作是不一样滴~foreachPartition把作业提交执行了，而mapPartition只返回了一个新的RDD，你代码里面并没有action操作，所有所有的计算都没有真正执行。后面再加一个collect（）触发作业提交执行就好了”
回复
“看一下driver端JVM内存使用情况”
回复
“你这也叫日志啊？建议在最后一个task的时候看下虚拟机状态”
订阅本页面里的具体帖子或回复，会让对应的更新进入你的通知中心。