岗位职责:
1、负责数据处理工作(数据采集,清洗,汇总,集成等),主要包括数据ETL过程的设计开发实施、单元测试;
2、根据业务需求进行报表设计和开发;参与ETL程序的相关开发;
3、根据工作流程规定,与测试工程师保持良好的沟通,及时修复测试人员提交的测试缺陷并及时提报。
岗位要求:
1、***大学本科,优秀应届毕业生亦考虑;
2、熟练MySQL、Oracle等数据库的SQL语法——查询尤为重要;
3、熟悉对文本、excel等格式的数据处理方式;
4、具备丰富的ETL开发及实施经验;熟悉Kettle、datax等至少一种ETL工具,以及至少一种任务调度工具;
5、具备基本较好的shell脚本编写能力;
6、熟悉HDFS、HBase、Hive、Sqoop者优先;
7、具备流式数据处理经验者优先;
8、拥有Google PDE证书优先。
个人素质:
1、工作认真、负责、仔细,良好的分析能力、沟通技巧。
2、独立完成模块或系统的开发任务。
3、善用沟通技巧,能够融入团队。
4、准确、按时完成任务。