版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、大数据架构师的岗位职责大数据架构师负责大数据根底平台、海量数据存储 处理 分布式平台、数据分析系统架构设计和研发。下面 是 xx 为 您精心整理的大数据架构师的岗位职责。大数据架构师的岗位职责 1职责:1、负责公司大数据产品的架构设计, 包含数据收集、 数据存储、 数据应用, 并完成相关架构设计文档的撰写 ;2、参与规划从数据源到数据应用的整体流程, 并参 与 相关产品的决策 ;3、负责解决核心技术问题,对技术方案进行决策4、负责大数据研发团队建设、 人才梯队培养和技术 团 队管理 ;5、积极了解业界开展, 研究与跟踪大数据新技术发 展 方向。任职要求:1、精通 GoldenGate For
2、Bigdata 相关理论,具备大型数据利用的生产实战经验2、精通数据驱动的理论, 设计并生产上线相关数据 驱 动的产品 ;3、精通常用消息中间件的使用,例如 kafka/RocketMQ/Apache Pulsar ,有解读相关源码者优先4、掌握 hadoop 、 spark 生态体系相关产品的使用, 掌 握 MapReduce 编程或 Spark 编程 ;5、了解传统数据仓库理论及相关 ETL 工具,例如 kettle/datastage;6、熟悉 Oracle 、 Mongodb 、 Mysql 数据库的使用 ;7、扎实的 Java 语言根底,熟悉 Java 开发工具和调 试 工具的使用
3、;8、良好的团队协作精神, 有能力对团队在软件设计、 实现和测试方面进行指导 ;9、良好的逻辑分析能力和沟通能力,执行力强、对 待 工作认真严谨、责任心强、具备出色的学习能力和团 队合作 精神,有一定的推动能力 ;10、计算机科学、信息技术或相关领域本科以上学 历, 具有 5 年以上数据平台工程开发经验, 3 年以上 的架构设计 经验,具有大数据平台应用大型工程架构设 计经验优先 ;大数据架构师的岗位职责 2职责:1、搭建基于 Hadoop/Spark 的数据挖掘体系和大数据 分 析系统架构 ;2、研究大数据领域前沿数据挖掘技术, 并引入相应 技 术在数据中心的使用 ;3、进行大数据系统框架设
4、计、模型算法开发;4、负责大型数据挖掘工程方案制定、 工程实施落地 及 优化等 ;5、开展数据爬取、聚类分析、舆情分析、鱼骨图分 析、 定价策略等领域数据挖掘工作 ;任职资格:1、本科以上学历 持有学士学位 985 ,211 优 先 ,计 算机相关专业,五年工作经验 ;2、二年以上数据挖掘工程经验, 完整参与过数据挖 掘 大数据平台的架构开发过程, 具备互联网行业背景优3、精通分布式计算框架 hadoop 、spark 、Storm 等 及 相关经验, 熟练掌握 Hive/SQL ,Python ,熟悉 Python 、 R 相 关数值科学计算库 NumPy,SciPy 等 ;4、了解传统的
5、Bi/dW 理论,能结合传统 Bi* 实践 设 计大数据平台 ;5、熟悉常用机器学习算法 如分类、回归、聚类、 关联 规那么等 及其原理,具备应用场景经验,如用户画 像、商品 关联度分析、舆情分析 ;6、熟悉主数据、元数据、数据质量、和数据建模等 数 据治理相关的体系和方法 ;7、具备较强的逻辑思维能力、数据敏感度,擅于利 用 数据发现问题及解决问题 ;大数据架构师的岗位职责 3职责:1、负责大数据开发团队建设 ;2、负责行业大数据产品架构设计与研发;3、负责带着团队进行行业大数据产品关键技术攻关。 任职要求:1、有三年以上大数据应用、开发经验; 具备海量数据加 工处理 (ETL) 相关经验,
6、对数据挖掘及机器学习有 较为深刻 的理解 ;2、熟悉 Hadoop 相关技术,对 HdFS 、MapReduce 、 Hive 、 HBase 有一定的使用和开发经验 ;3、熟悉 Linux ,熟练使用 Shell 或 Python ,进行脚 本 编写 ;4、对数据结构和数据统计分析算法有较为深刻理解5、掌握至少一种主流关系数据库开发技术: Oracle 、 SQL Server 、 MySQL 等 ;6、掌握实时流计算技术,有 Spark 、 Storm 开发经 验者 优先 ;7、需要具备 2 年以上研发团队管理经验。 大数据 架构师的岗位职责 4 职责 :1) 负责公司软件产品整体架构的设
7、计和关键功能实 现2) 负责公司架构长期看护以及优化 ;3) 负责软件部门各模组间的协调配合 ;4) 提高稳固软件代码质量 ;5) 负责大数据流式框架的设计、优化及部署 ;6) 规划研发部门员工的技术开展路线并提供必要的帮 助和指导任职资格 :1) 本科及以上学历,计算机相关专业, 5 年以上工 作经验;2) 频繁换工作,比方一年一个公司,请绕路 ;3) 3 年以上产品架构经验,主导过产品的成功上线;4) 对底层设备通讯协议, B/S 系统, APP 开发 等都 有一定的了解 ;5) 对各种主流语言 C#JavaPathon 有一定的了解5) 精通各种大数据架构,并深入研究过其中一种,有 st
8、ormkafka 等流式实时处理经验为佳6) 能够承担较强的工作压力,有良好的自我驱动能 力和 责任感 ;7) 具备优秀的逻辑思维能力、 表达能力、沟通协调能力。 大数据架构师的岗位职责 5职责:1. 负责公司大数据底层框架的整体架构设计,结合公司实际业务情况进行技术选型及大数据战略规划2. 负责统一数据平台工程的整体评估、设计、架构 及关键模块的开发,不断提升系统的稳定性和效率3. 负责架构优化及系统关键模块的设计开发,协助 团队解决开发过程中的技术难题;4. 建立良好的公司内外的业界技术影响力;有效辅导团队,提升数据研发能力;2年以上经验;有 作;有海量数据实践任职要求:1.从事大数据工程相关开发和 设计术负责人系统化解决问题的成 功案例 经验优先;2. 拥有一定的算法和数据结构;有很强的数据设根底计抽象能
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2024年度辅警培训与晋升机会共享合同
- 2024年公安礼服租赁合同范文
- 草原有害植物防治合同范例
- 蚂蚁天使融资合同范例
- 《动物基因工程》课件
- 2024年度人才引进与培养合同协议书2篇
- 二零二四年度珠宝设计与制作许可合同3篇
- 《理解教材新知》课件
- 《动物运动的形式》课件
- 执行力与团队建设课件
- GB/T 44713-2024节地生态安葬服务指南
- 一年级家长会课件2024-2025学年
- 2024年教资考试时政高频考点141条
- 《扣件式钢管脚手架安全技术规范》JGJ130-2023
- 装修设计需求模版
- 欠薪清零台账
- 施工进度计划网络图(模板)
- 中国数字地震观测网络技术规程
- 型材切割机使用说明
- 交通事故法律知识100问
- 烟草专用贮柜
评论
0/150
提交评论