工作职责
1、完成基于大数据平台的业务项目的开发、实施和维护工作;
2、参与数据仓库设计,根据业务需求实现高效率高灵活性的查询,数据分析,数据挖掘;
3、负责高吞吐高可用数据实时和离线采集,高并发的大数据业务架构设计"
任职资格
1、3年及以上大数据平台开发、维护经验;
2、精通Hadoop技术栈,熟悉大数据生态技术,如Impala、Sqoop、Klein、Flink、Kafka、Zookeeper、Oozie等集群架构,有大规模、开发及运维经验,能根据业务场景设计合适的技术栈完成需求;
3、熟悉Hadoop安装、调试、发布配置应用,熟悉Linux操作系统;
4、熟练掌握SQL语言,掌握Mysql、Oracle、Postgresql等一种或多种关系型数据库使用,有一定的SQL调优经验;
5、至少熟练掌握Shell、Java、Scala、Python等编程语言中的一种;
6、具备良好的团队合作精神,良好的沟通能力"