大数据开发工程师的基本职责_第1页
大数据开发工程师的基本职责_第2页
大数据开发工程师的基本职责_第3页
大数据开发工程师的基本职责_第4页
大数据开发工程师的基本职责_第5页
已阅读5页,还剩3页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、标准制度示范文本 | Excellent Model Text 资料编码:CYKJ-FW-684编号:_大数据开发工程师的基本职责编辑:_日期:_单位:_大数据开发工程师的基本职责用户指南:该制度资料适用于加强和规范人员自身的建设,实行工作管理和维护工作秩序,并进一步提高工作效率形成明文上的条款,经过一定的程序严格制定并公式,最终成为管理的依据和准则。可通过修改使用,也可以直接沿用本模板进行快速编辑。大数据开发工程师的基本职责1职责:1、数字货币领域数据统计分析,负责数字货币量化投资策略的设计、管理以及实际投资运作2、与交易员对接,制定切实可行的的策略测试计划,开展新策略模型的开发和验证3、协

2、助交易员进行交易、风险管理,并对实际交易结果进行量化的绩效分析,推动交易自动化4、上级交办的其他工作任职要求:1、数学/计算机/金融专业毕业,有扎实的算法和机器学习的理论基础2、有量化实盘交易经验,具备丰富的数学建模经验及较强的数据处理能力优先3、对金融市场的价格波动有独特理解和深入的量化分析,具备一定对冲策略研究经验;4、对数字货币领域感兴趣,结果导向;5、有网页抓取和爬虫程序编写经验者优先。大数据开发工程师的基本职责2职责:1、大数据日志分析系统的设计,选型和开发;2、配合各业务给予数据支持,对产品和运营数据总结和优化;3、处理用户海量数据,提取、分析、归纳用户属性,行为等信息,完成分析结

3、果;4、发现并指出数据异常情况,分析数据合理性;5、公司大数据基础架构平台的运维,保障数据平台服务的稳定性和可用性;6、大数据基础架构平台的监控、资源管理、数据流管理;7、基于数据分析的可预测的云平台弹性扩展解决方案。任职要求:1、日志分析数据系统实际经验;2、3年以上互联网行业研发经验,有使用Hadoop/hive/spark分析海量数据的能力;3、掌握 Hadoop、Flume,Kafka、Zookeeper、HBase、Spark 的安装与调试;4、熟悉大数据周边相关的数据库系统,关系型数据库和 NoSQL。5、掌握 Linux 操作系统的配置,管理及优化,能够独立排查及解决操作系统层的

4、各类问题;6、有良好的沟通能力,具备出色的规划、执行力,强烈的责任感,以及优秀的学习能力。大数据开发工程师的基本职责3职责:1、负责数据分析、加工、清理、处理程序的开发;2、负责数据相关平台的搭建、维护和优化;3、负责基于Hadoop/Spark/Hive/kafka等分布式计算平台实现离线分析、实时分析的计算框架的开发;岗位要求:1、本科学历须211院校以上,硕士及以上学历不限院校,计算机软件及相关专业2、熟悉Java和Scala语言、熟悉常用设计模式、具有代码重构意识;3、熟练使用hadoop、hbase、Kafka、hive、spark、presto,熟悉底层框架和实现原理;4、使用Sp

5、ark Streaming和Spark SQL进行数据处理, 并具有SPARK SQL优化经验;5、需要有至少2年开发经验,有flink开发经验优先;6、学习能力强,喜欢研究新技术,有团队观念,具备独立解决问题的能力。大数据开发工程师的基本职责4职责:1、负责大数据平台的基础环境搭建与性能优化,完成平台的构建与维护、实时流计算平台、分布式调度、可视化报表等平台的架构与研发;2、对各种开源框架进行深入的代码剖析和优化;3、参与大数据技术方案评审;4、指导初中级大数据工程师工作;岗位要求:1、计算机相关专业全日制专科及以上学历,具有3年或以上的分布式计算平台研发工作经验;2. 对大数据相关组件:H

6、adoop、Spark、Hbase、Hive、Flink、Kafka、Flume等架构与底层实现有深入理解,具备相应的定制和研发能力,尤其需要精通Flink框架;3. 具备构建稳定的大数据基础平台的能力,具备数据收集、数据清洗、数据仓库建设、实时流计算等系统研发经验;4. 对技术有热情,有不错的数据思维和敏感度,有一定的数据分析能力优先,对深度学习、机器学习有一定的了解优先;5. 工作有计划性,责任心和执行能力强,具备高度的责任心、诚信的工作作风、优秀沟通能力及团队精神。大数据开发工程师的基本职责5职责:1.参与大数据平台搭建以及项目技术架构。2.数据分析,挖掘,模型具体的产品化;3.根据产品需求,分析编写和制定大数据相关解决方案岗位要求:1、计算机相关专业本科以上学历,编程基础扎实,有2年以上大数据开发经验2、熟悉Hadoop生态和体系架构,熟悉Flink、Spark,Hive等常用开源工具3、熟悉Flume,kakfa,scribe等日志收集体系4、熟悉主流数据库(Oracle、postgresql、Mysql、Sql Server)中的1种及以上,有较好的SQL性

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论