您当前的位置:首页 > 大数据 > 数据仓库工程师

[]大数据开发工程师工作职责

时间:2020-09-30 ...

岗位职责:

1.负责公司大数据平台的开发; 根据业务场景, 对数据数据分析、加工、清理; 

2.负责基于大数据平台的BI设计、开发、测试 和维护; 

3.负责基于大数据平台的ETL设计、开发及测 试;

4.协助进行机器学习模型构建、用户画像建设、 用户精细化分析等操作。

任职资格

1.计算机相关专业,3年以上相关工作经验,本科 及以上学历; 

2.熟练使用SQL语言,掌握Oracle、ProgreSQL、 MySQL、Hive等一种或多种数据库系统的使用,有 较好的SQL性能调优经验; 3.对大数据平台、数据仓库有基本的理解,了解维 度建模基本思想; 

4.有数据仓库、ETL、大数据相关的开发实施经验; 

5.熟悉Shell、Java、Python等其中至少一门开发语 言; 

6.熟悉Hadoop、Hive,Hbase,Kafka,Spark, Storm等大数据技术栈优先; 

7.了解基本的ETL体系和算法,熟悉Datastage、 Kettle、Sqoop、Flume等其中至少一种ETL工具优先; 

8.有Hive数据仓库开发经验者优先考虑。

参考工资:


版权声明:以上文章中所选用的图片及文字来源于网络以及用户投稿,如有本文知识产权人并不愿意我们使用,请联系我们:304541079@qq.com,我们会立即删除。

相关职责

    无相关信息

职责吧

陕ICP备14001139号-1

浏览