[上海-徐汇区]大数据开发工程师工作职责

工作职责:

1、负责基于Hadoop、Spark平台的海量数据处理、数据计算、数据开发。

2、负责高并发、高可用性、高可扩展性的线上数据系统开发。

3、负责数据挖掘应用服务开发和数据挖掘算法研究和应用。

4、负责数据产品和数据项目的相关开发支持。

5、负责垂直领域的数据探索，价值数据提取。

任职资格：

1、计算机及相关专业本科及以上学历；

2、精通java和scala开发技术，熟练掌握多进程/多线程开发，熟悉常用设计模式；

3、熟练掌握ElasticSearch、Hadoop、Spark、Sqoop、Kafka、HBase、Impala、Kudu等大数据开发技术，进行过大数据项目实践；

4、有机器学习、数据挖掘、推荐系统经验者优先；

5、具有分布式计算/搜索引擎等后台开发经验者优先；

6、对技术有激情、有追求；富于技术创新精神，勇于解决技术难题

参考工资：