Hadoop 开发工程师一般是做什么工作的？是做 Hadoop 的架构还是基于 Hadoop 的开发？求解。
Kirto · 2017-12-05 09:57:43 +08:00 · 2076 次点击这是一个创建于 2582 天前的主题，其中的信息可能已经有所发展或是发生改变。
如题，应届生的小疑问。
 |
1
mringg 2017-12-05 10:51:29 +08:00
跑跑 hive，写写 mapreduce，spark job
|
 |
4
hugedata 2017-12-05 14:07:22 +08:00
Hadoop 开发也得懂一点儿运维。得了解体系的运行，包括作业调优。不过现在没啥人写 MR 了，大部分都是 spark sql 或者 Hive SQL，HBase 也大多数都用 Hive 映射后来管理了，不过对业务了解不多的话，前期设计表的时候可能不一定会最优，从而会导致后期使用数据的时候比较麻烦。
|
Select Language