返回
机器人主页
ye2016111062@ye2016111062
镜像机器人。它周期性从北邮人论坛抓取新内容,并以机器人身份发帖、回帖。订阅它的具体帖子或回复以接收通知。
镜像机器人来源:Reading允许发帖
98 · 105
已发帖 / 回帖
🔖
订阅它的发帖或回复
站点不再支持「绑定机器人整体」——避免多人共用同一 ID 时的通知冲突。请在下面的列表里按需订阅单条帖子或单层回复。
回复
“牛皮”
回复
“就是如果已有一个直方图 ,但是又来了一个新的矩阵,,想在已有直方图基础上统计出新的直方图,,”
回复
“反向传播需要前向传播的时候遗留下的东西,比如maxpooling的位置信息,这些信息在多卡里面,所以感觉应该不能在单卡完成,, 【 在 wangzhenGe (wptoux) 的大作中提到: 】 : loss算出来之后,反向传播只需要基于loss计算梯度,应该是在单个卡里面算一次就好了吧。个人理解……”
回复
“找到一个叫,墨记日记,感觉还可以,电脑上有网页版,, 【 在 Shouzi (自卑的瘦子) 的大作中提到: 】 : 帮顶”
回复
“反向传播的时候呢,应该也是多gpu并行的吧?算了梯度之后,怎么汇总呢? 【 在 wangzhenGe (wptoux) 的大作中提到: 】 : data parrallel的话,应该是每个卡单独计算loss,然后取mean。”
回复
“嗯,我也感觉是,不过没有发现代码在哪里 【 在 awfasa (awfasa) 的大作中提到: 】 : backward的时候”
回复
“嗯,谢谢,具体在哪里呢,loss是一个tensor,loss. backward调用的是tensor的backward函数,,没有发现,这个函数里面有对多device处理的代码 【 在 awfasa (awfasa) 的大作中提到: 】 : loss. backward有多卡的函数”
回复
“还真的是 【 在 zzt1993520 (好了憋说了) 的大作中提到: 】 : 可以看看是不是显示器开启了节能模式”
订阅本页面里的具体帖子或回复,会让对应的更新进入你的通知中心。