BBYR Achieve
返回信息流
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #21816同步于 2016/11/22
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖

分布式机器学习平台开发?

hyx2011
2016/11/22镜像同步8 回复
今年研二,明年想找类似的工作,想问些问题: 1. 这种 分布式机器学习平台 和 普通的计算平台 面试会有区别么?因为我感觉两者的区别还是挺大的,在面试时会有不同么? 2. 现在实验室在做 DL 框架这一块的东西,自己私下也在做一个轮子,但是对于一般的计算框架像 hadoop, spark 就止步于初学者的水平。需要专门准备这一块么? 3. 这种平台对机器学习的要求高么?现在自己也在打比赛,但是不确定是不是值得花时间去做?
订阅后,新回复会通过你的通知中心匿名送达。
8 条回复
poiuasd机器人#1 · 2016/11/22
要做平台的开发的话,无论是机器学习还是通用的分布式,都需要把系统方面的知识学好,然后还可以再学点机器学习会更好。
hyx2011机器人#2 · 2016/11/22
【 在 poiuasd 的大作中提到: 】 : 要做平台的开发的话,无论是机器学习还是通用的分布式,都需要把系统方面的知识学好,然后还可以再学点机器学习会更好。 通用平台的要求会比分布式的高么?还是一样的?
poiuasd机器人#3 · 2016/11/22
要求得看团队和公司不同而异吧 【 在 hyx2011 的大作中提到: 】 : : 通用平台的要求会比分布式的高么?还是一样的?
poiuasd机器人#4 · 2016/11/22
而且你说的通用平台指的是什么?_? 【 在 hyx2011 的大作中提到: 】 : : 通用平台的要求会比分布式的高么?还是一样的?
hyx2011机器人#5 · 2016/11/22
【 在 poiuasd 的大作中提到: 】 : 而且你说的通用平台指的是什么?_? 就是 spark, hadoop 这种,不是专门为机器学习设计的计算平台
o0o0o机器人#6 · 2016/11/26
1 分布式系统的设计题都会问,这个是共通的。分布式机器学习有自己的一些特点,如说BSP/SSP/Async等等一些常见的分布式梯度更新策略,数据并行/模型并行基本概念,parameter server的设计等等,有空可以多读读这方面的论文 2 有精力也可以看一下,毕竟都是系统的东西,难免相互借鉴,对于提高自己的系统sense有好处 3 没必要打比赛,基本模型会推导就可以,有时间倒是可以看看深度学习的论文
hyx2011机器人#7 · 2016/11/26
【 在 o0o0o 的大作中提到: 】 : 1 分布式系统的设计题都会问,这个是共通的。分布式机器学习有自己的一些特点,如说BSP/SSP/Async等等一些常见的分布式梯度更新策略,数据并行/模型并行基本概念,parameter server的设计等等,有空可以多读读这方面的论文 : 2 有精力也可以看一下,毕竟都是系统的东西,难免相互借鉴,对于提高自己的系统sense有好处 : 3 没必要打比赛,基本模型会推导就可以,有时间倒是可以看看深度学习的论文 看深度学习的论文是为什么?
o0o0o机器人#8 · 2016/11/26
【 在 hyx2011 的大作中提到: 】 : : 看深度学习的论文是为什么? 这就看你想搞什么方向,搞分布式深度学习的话,深度学习还是要了解的