大数据开发工程师的具体职责（汇编5篇）

第第页大数据开发工程师的实在职责（汇编5篇）大数据开发工程师的实在职责第1篇职责：1、大数据的分布式采集与环境搭建和测试；2、大数据存储、处理和分析工作；3、大数据相关产品线的改进和相关核心开发工作；4、其他大数据相关工作。任职要求：1、本科及以上学历，计算机相关专业；2、2年以上Java开发及大数据相关开发阅历，java基础坚固结实，娴熟把握多线程、集合、缓存、序列化、nio等技术；3、谙习Linux环境，谙习Linuxshell/python/perl任一脚本；4、谙习Hadoop、Spark、ZooKeeper等主流的大数据处理架构，并有1年以上Hadoop相关的实际开发、架构及调优阅历；5、使用过阿里云；6、谙习架构；7、具有较好的学习本领、沟通表达本领及团队合作本领。大数据开发工程师的实在职责第2篇职责：1、本岗位培育方向为证券基金行业数据架构师；2、辅佑襄助大数据架构师订立项目开发流程、规范，辅佑襄助数据模型设计人员进行模型设计；3、辅佑襄助技术架构师进行大数据平台调优（业务逻辑角度）；4、负责大数据平台开发，包括数据抽取、转换和加载；5、负责掌控数据需求、管理项目开发进度，搭配QA完成项目质量管理；职位要求：1、2年以上证券或者基金行业数据中心、大数据平台建设阅历；2、具备较强的学习本领，对数据模型和大数据技术有深厚的爱好；3、娴熟把握基于ORACLE或MPP数据库或Hadoop等开发技术；4、至少把握一种ETL开发工具。如：Informatica、DataStage、SSIS、Kettle等；5、良好的团队合作精神、公司供给优厚待遇。大数据开发工程师的实在职责第3篇职责:1、负责公司大数据平台数据处理工具ETL、流处理平台等建设，功能规划，平台演进，维护调优等；2、结合公司业务特征，负责公司数据仓库规划、数据仓库建设、数仓管理等；3、负责大数据处理技术讨论及新技术引进，参加超大规模实时/离线数据计算框架，存储、查询、可视化解决方案的设计，研发；4、负责公司业务数据仓库模型建设及全业务数据域打通；5、负责BI报表和可视化项目，和客户深度沟通，理解客户的业务挑战，供给解决方案，订立开发计划并执行，支持各单位日常数据需求和任务；任职资格:1、娴熟把握关系型数据库,例如：Oracle、Mysql、Vertica等；谙习NoSql数据库，例如HBase、Redis、MongodDB等；具备丰富的数据库管理和运维调优阅历；2、谙习数据仓库领域学问和技能者优先，包括但不局限于：元数据管理、数据开发测试工具与方法、数据质量、主数据管理，数据打通等；3、有从事分布式数据存储与计算平台应用开发阅历，谙习Hadoop生态相关技术并有相关实践阅历着优先，如Hdfs、Mapreduce、Hive、Hbase、Spark、Storm；4、精通数据预处理、检验、清洗、分析方法，精通各种常用统计检验方法；娴熟把握一门或多门编程语言，并有大型项目建设阅历者优先，如Java、Python、Shell和scala等；5、精通Linux，谙习日常运维、搭建常见服务器、定位解决日常问题的本领，具备ETL开发阅历优先；6、良好的语言沟通与表达本领，有丰富的数据开发阅历，较强的数据、平台、技术理解本领；7、具备数学类、计算机类等相关专业统招本科及以上学历，具有3年及以上大数据开发工作阅历，有互联网行业背景优先。大数据开发工程师的实在职责第4篇职责：1、在hadoop平台进行hive/hbase/spark开发；2、处理公司大数据平台产品的技术工作，包括存储、处理、分析、挖掘、架构设计、研发工作；3、谙习设计、构建和优化基于hadoop/Hbase的存储平台架构；4、谙习整体提升hadoop/Hbase/Storm/Spark集群的高可用性、高性能、高扩展特性；5、部门相关工作。岗位要求：1、计算机等相关专业大专及以上学历；2、3年以上软件开发阅历，精通Java开发，至少2年以上Hadoop相关开发阅历；3、谙习分布式系统、分布式计算系统的工作机制，具有大规模数据平台，高并发大型系统，大数据等架构设计和开发阅历；4、谙习sqoop、Hive、hbase、spark等大数据生态组件；5、精通linuxshell和sql脚本；6、有javaweb开发阅历者优先；7、良好的团队精神和沟通本领，很强的逻辑思维本领和学习本领。大数据开发工程师的实在职责第5篇职责负责大数据分析需求设计和开发工作，包括数据存储、预处理、查询、统计、实时分析、数据优化及配置等功能；对大数据分析系统存在的问题进行跟踪和定位并适时解决；负责上级交办的其他相关工作。岗位要求：本科以上学历，2年以上工作阅历；Java基础坚固结实，娴熟使用JavaIDE进行代码编写和调试，谙习JUnit单元测试框架；谙习Linux操作系统，能在Linux上完成开发、调试工作；谙习网络IO、多线程并发编程、集合等基础框架，精通数据结构和数据算法；参加过分布式高性能服务的设计开发过程，有大规模分布式