返回信息流现在hadoop用java开发一般都什么配置啊?
maven+eclipse+hadoop还是直接map/reduce project啊?
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #18357同步于 2016/1/25
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖
hadoop入门请教
kuangfengwin
2016/1/25镜像同步4 回复
订阅后,新回复会通过你的通知中心匿名送达。
4 条回复
如果是纯粹的java开发,一般是maven+eclipse+hadoop。
但是,现在的互联网公司都不用java写底层了,因为抽象层次太低了。你写多了,就会发现,每天干的活都是对表各种操作。
现在大公司主要用的是Hive(多)或者Pig(少)。Hive是用java编写的SQL框架,你可以只用一行类SQL代码,就完成平时的join操作。如果有特殊的需求,还可以自定UDF,极大地解放了生产力。
第一个,maven工程。
pig,hive,主要用于etl
写udf和mapreduce都用maven集成,很方便。
【 在 kuangfengwin 的大作中提到: 】
: 现在hadoop用java开发一般都什么配置啊?
: maven+eclipse+hadoop还是直接map/reduce project啊?