岗位职责:
1.参与大数据分布式应用系统服务器端或客户端软件开发工作(需求、开发、故障解决和性能优化等);
2.承担数据抽取、清洗、转化等数据处理程序开发;
3.完成数据分析应用开发,对数据进行挖掘、优化及统计。
4.构建数据的监测与分析体系,帮助业务人员快速、及时发现问题并找到原因;
岗位要求:
1.深入理解Linux操作系统,能够独立解决Linux系统问题;
2.熟练掌握一种主流脚本语言(shell、python);
3.熟悉Hadoop、Hbase、Hive相关技术,能够独立安装、配置和集成相关组件:Hadoop、Hbase、Hive、Zookeeper、kafka、elasticsearch等;
4.Hadoop的Map/Reduce原理有研究,具备一定Hadoop/Habase开发经验;
5.数据大数据相关存储技术,Hadoop/Hbase作为内容存储,Nosql技术作为元数据存储,数据采集用到flume,数据交换用到kafka;
6.具备较强的故障排查能力,有很好的技术敏感度和风险识别能力;
7.能够快速熟悉公司业务,并把大数据系统分析应用到不同业务场景中;
8.有互联网大数据应用经验者优先;
行业猎头网-行业公益平台 黔ICP备15015209号-1 网安备案号:52260102556091
地址:行业公益平台 EMAIL:ddcjobhr@163.com