数据仓库工程师的工作职责

1、数据仓库工程师的工作职责数据仓库工程师需要与团队形成良好交流，有效传达设计意图，并持续跟进设计的调节和优化。以下是小编收拾的数据仓库工程师的工作职责。数据仓库工程师的工作职责1职责1.负责数据etl开发，优化etl流程设计;2.负责数据质量问题的分析、跟进、解决，举行数据质量监测、校验和提升;3.负责etl开发实施文档的编写;4.负责梳理公司数据仓库/数据集市数据清单、数据映射关系，优化现有数据仓库模型;5.完美和梳理数据指标体系，完成和维护数据字典的工作;6.参加数据标准的制定、数据标准管理和数据平安管理工作;7.参加公司大数据平台的建设，包括sugar报表或神策接口配置，用户画像标签体系的

2、开发等任职要求：1.有shell或python脚本开发阅历;2.有传统数据库sql server和mysql，有存储过程编写能力;3.认识hadoop生态相关技术并有相关实践阅历，包括但不限于sqoop、hive、hbase、kylin等开发阅历;4.有kettle、azkaban或oozie工作流调度阅历;5.认识hive sql或flink sql的开发;6.有数据仓库模型设计，有用法kafka+flink streaming实时数据处理阅历优先;7.有sugar、神策或tableau用法阅历,实用户画像或客户召回标签工作阅历优先;8.对数据挖掘和机器学习有所了解，包括常用的机器学习算法和

3、数据建模过程的优先数据仓库工程师的工作职责2职责：1、负责数据源导入、清洗、集成等工作，优化etl流程并解决etl相关技术问题;2、负责参加数据模型体系构建及数据主题设计和开发，数据仓库和业务数据集市的建设;3、负责数据集市需求调研和需求分析;4、基于阿里云maxcompute，举行数据开发工作。岗位要求：1、3年或以上数据仓库开发和模型设计阅历;2、深化理解dw，bi相关的学问，包括：etl、数据仓库、olap、多维数据模型等;3、认识mapreduce、hive原理;4、精通sql，能够娴熟用法hivesql举行数据开发;5、具有良好的团队配合精神和交流能力，较强的规律思维，学习能力和解决

4、问题的能力，可担当较大的工作压力;6、认识阿里云大数据开发平台优先，如maxcompute;7、认识跨境电商及供给链业务优先。数据仓库工程师的工作职责3职责:1. 负责直播业务相关数据仓库的数据模型设计;3. 参加数据仓库etl流程设计、开发和优化，解决etl过程相关技术问题;3. 参加项目规划，数据采集设计，数据仓库开发，模型开发，报表开发等;4. 总结数据仓库建模的办法，负责数据产品平台化和系统化;任职资历:1. 2年及以上的数据仓库/bi相关研发阅历，对数据和业务敏感，有较好的数据模型设计能力;2. 认识数据仓库各类模型建模理论，了解数据仓库数据分层架构，多维数据模型设计;3. 娴熟用法

5、hadoop/spark/hive/hbase/mysql，有列式数据库/kylin/elasticsearch等阅历者优先;4. 有较强的编程能力和编程阅历，起码认识java/scala/python/php等其中一门编程语言;5. 参加过大型数据仓库架构设计、模型设计、etl设计，具备海量数据处理、性能调优阅历;6. 学习能力强，热衷开源技术，有团队观念，具备自立解决问题的能力;数据仓库工程师的工作职责4职责：1、 参加数据仓库及etl基础架构规划、平安规划制定;2、 负责数据仓库及etl的开发、测试和优化，并准时解决相关技术问题;3、 负责相关数据精确性验证及报表等日常维护;4、 报表性

6、能优化：对存在性能问题的数据报表举行优化;5、 数据运维：准时处理线上问题;6、 完成上级交代的其他工作。岗位要求：1.计算机相关专业本科及以上学历，2年以上etl开发或数仓相关工作阅历;2.娴熟用法oracle、mysql、postgresql等主流数据库，具有较强的sql编写、优化能力，认识存储过程编写;3.认识数据仓库数据处理流程，有一定的数据建模能力;4.具有良好的交流理解能力，能按照业务提出的需求，迅速理解并落地实施;5.有kettle、greenplum开发阅历者优先。数据仓库工程师的工作职责5职责：1. 负责数据仓库架构设计与开发2. 按照业务调研，设计信息模型与数据模型，负责大数据建模、etl、数据产品及平台的设计与开发3. 满足业务数据需求，设计面对业务的数据集市模型4. 需求的交流与数据开发项目管理5. 基于hadoop生态的程序设计、开发和维护岗位要求：1.认识sql语言，起码认识oracle、mysql、sql sever一种及以上2.精通数据库系统(oracle、sql、mysql等)：精通认识oracle数据库体系结构，基础扎实;精通认识dataguardrac等高可用技术，能顺当的配置和管理dataguard;精通认识o