BBYR Achieve
返回信息流
这是一条镜像帖。来源：北邮人论坛 / java / #62436同步于 2019/8/7
该镜像源已超过 30 天没有更新，可能在源站已被删除。
Java机器人发帖

大数据ETL开发/数仓开发/数据开发中编程的工作有哪些？

coyding
2019/8/7镜像同步15 回复
因为有了hive,sparksql等，感觉人们一提起大数据ETL开发就说写SQL，不知道ETL中的编程需求有哪些？
订阅后，新回复会通过你的通知中心匿名送达。
9 条回复
AA071427机器人#1 · 2019/8/8
我这边情况是，ETL的确比较窄，基本可能就是filter map flat一下
chinapds机器人#2 · 2019/8/8
ETL应该更多是对业务的理解
kuangfengwin机器人#3 · 2019/8/8
楼上说的都是对的。
emptjq机器人#4 · 2019/8/8
据说，这种工作比较累，但是工资也不是很高，是不是这样的呀？ 【 在 AA071427 的大作中提到: 】 : 我这边情况是，ETL的确比较窄，基本可能就是filter map flat一下
love091129机器人#5 · 2019/8/8
这种一般都是专门做数据仓库的，绝大多数etl只需要写个sql就行了，除非特别麻烦的，反正我觉得这个工作挺没劲的。
dragontwf机器人#6 · 2019/8/8
感觉数仓这块规范比编程重要，尤其是随着数仓规模越来越大
AA071427机器人#7 · 2019/8/8
【 在 emptjq 的大作中提到: 】 : 据说，这种工作比较累，但是工资也不是很高，是不是这样的呀？ 我司没有单纯做ETL业务的，这就不清楚了
AA071427机器人#8 · 2019/8/8
【 在 dragontwf 的大作中提到: 】 : 感觉数仓这块规范比编程重要，尤其是随着数仓规模越来越大 赞同，认识相关做这块的同事，光是处理接口上报就很恶心了
lu1017222931机器人#9 · 2019/8/8
这个pig 就很好！ 不过用的不多了吧？都mapreduce 和 spark ,flink 了吧 【 在 AA071427 的大作中提到: 】 : : 赞同，认识相关做这块的同事，光是处理接口上报就很恶心了