大数据开发工程师的职责文本精选.doc

大数据开发工程师的职责文本精选大数据开发工程师需要处理公司大数据平台产品的技术工作,包括存储、处理、分析、挖掘、架构设计、研发工作。下面是我整理的大数据开发工程师的职责文本精选。大数据开发工程师的职责文本精选1 职责: 1、负责该领域的业务需求讨论,完成技术方案及数据开发; 2、负责数据仓库的体系建设及落地实现; 3、负责大数据平台各类环境的部署及运维、并参与架构优化、性能优化等工作; 4、负责该领域所属模块的代码开发、调试与维护工作,并进行技术沉淀和文档输出。招聘要求: 1、计算机、电子通信、自动化等专业,本科及以上学历; 2、五年以上研发经验,其中二年以上大数据开发的相关工作经验; 3、熟练JAVA开发语言;熟悉微服务及Spring框架; 4、熟练熟练Hive、Impala、ES性能调优,关注细节,学****能力强; 5、能配合团队完成该领域的工作,自我管理能力强,能承受工作中的各种压力,具备很好的团队意识 6、熟练主流大数据平台产品部署及运维,如CDH、HDP平台。 7、对机器学****和深度学****等方面有一定的了解; 8、有汽车制造业及相关行业的大数据开发经验优先。大数据开发工程师的职责文本精选2 职责: 1、负责数据中心和大数据处理平台的搭建 2、在线和离线海量数据分析平台的开发; 3、研究大数据前沿技术,提升系统的运维效率; 4、参与大数据的采集、存储、处理,分析等开发 5、参与数据挖掘算法的设计、对海量数据进行挖掘分析和发掘数据价值及算法学****及实现【任职要求】: 1、计算机或相关专业本科学历及以上,2年工作经验以上 2、熟悉Java/Scala等至少一门语言,能对分布式常用技术进行合理应用,解决实际架构问题 3、熟练使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大数据开发组件 4、熟悉整个大数据的完整处理流程,包括数据的采集、清洗、存储、分析和可视化及报表开发; 5、熟悉分布式系统概念、架构,有大规模分布式系统设计、实现、部署等经验; 、独立分析和解决问题能力,良好的团队合作精神。 。大数据开发工程师的职责文本精选3 职责: ,对数据进行清洗、计算与加工; ,可快速响应数据处理的需求,评估并给出合理的解决方案,并采用合理的方式处理需求; ,能够与团队成员进行有效沟通,并完成数据处理结果的核对与对接; 。岗位要求 ; ,精通Hadoop生态圈,熟练使用Spark,HBase、Hive、Kafka、Redis等; ,熟练使用HSQL实现复杂数据处理逻辑,并具备数据处理调优的能力; ,熟悉Linux的shell命令。 ,具备独立问题排查与处理的能力; ,强烈的责任心,对工作有***,良好的沟通能力,能吃苦耐劳; ; ,并具有SparkSQL优化经验者优先。