当前位置:网站首页 >> 作文 >> 数据仓库工程师的工作内容(模板10篇)

数据仓库工程师的工作内容(模板10篇)

格式:DOC 上传日期:2023-03-31 06:04:02
数据仓库工程师的工作内容(模板10篇)
时间:2023-03-31 06:04:02     小编:zdfb

人的记忆力会随着岁月的流逝而衰退,写作可以弥补记忆的不足,将曾经的人生经历和感悟记录下来,也便于保存一份美好的回忆。大家想知道怎么样才能写一篇比较优质的范文吗?下面是小编帮大家整理的优质范文,仅供参考,大家一起来看看吧。

数据仓库工程师的工作内容篇一

1.建设公司级数据仓库,并根据业务变化持续迭代和优化;

2.对业务数据进行梳理和抽象,建设数据仓库的数据模型;

3.对业务数据进行采集、清洗、转换和存储;

4.支撑bi、用户数据、用户运营、用户画像、房源数据、推荐系统等核心数据平台产品;

5.研究大数据前沿技术,不断持续优化大数据平台,为业务提供价值。

任职资格:

1.本科及以上计算机、统计学、数据库、机器学习等相关专业,5年以上数据相关工作;

2.对业务数据有敏锐的理解能力,并能快速梳理和分析业务数据;

3.熟练掌握sql语言、熟悉mysql,对shell、java(主要开发语言)、python编程非常熟悉;

4.熟悉常用的etl技术和原则;精通数据仓库数据库设计规范和实操;

5.熟悉hadoop、hive、hbase、spark、storm等开源平台者优先;

6.具有较强的分析和解决问题的能力,良好的学习能力和团队合作精神,追求价值实现,认同目标管理和敏捷。

数据仓库工程师的工作内容篇二

职责:

1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市

2.熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。

3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地

4.配合和协助数据分析/数据挖掘形成底层/中间层的业务逻辑切片

任职资格:

1. 本科或硕士以上学历,计算机工程相关专业

2. 熟悉大数据相关技术能力(hadoop/mapreduce/hive/hbase等),熟练进行数仓hive建设和软件架构,较强的数据抽象能力

3.精通sql,具备海量数据处理和hive/spark性能调优经验,3年以上大规模分布式数据仓库建设经验

4.熟练使用druid/kylin之一进行数据挖掘模型设计,熟练掌握java/scala之一,具备良好的coding素养和习惯,了解脚本语言,如python、shell等

5.强烈的责任心,工作态度积极主动,有较好的团队精神和沟通能力,工作细致认真

数据仓库工程师的工作内容篇三

职责:

1、负责etl开发、作业调度和数据平台建设

2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的数据仓库

3、设计并研发bi分析相关的数据产品

4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘

任职要求

1、计算机相关专业本科及以上学历,有2年以上数据仓库、etl工作经验

2、有海量数据处理、etl及作业调度优化、数据仓库建模等经验

3、熟悉linux、sql、python或java、shell脚本,有hadoop/hive/spark/hbase/kylin/impala等大数据技术使用经验

4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议

数据仓库工程师的工作内容篇四

职责:

1、负责制定数据仓库平台技术体系架构、数据架构及规范;

2、负责设计和实施公司业务数据的实时/离线数据etl架构方案;

3、负责调度架构设计与开发;

4、负责数据仓库平台运维以及日常数据运营等管理;

5、负责关键技术攻关;

任职要求:

1、5年以上数据仓库项目开发经验,参与过数据仓库架构设计,对etl开发流程、调度架构有深入理解;

2、精通mysql、 oralce 、greenplum等至少一种数据库,丰富的sql性能调优经验;

3、熟练使用java、shell、python、perl等至少一种脚本语言;

4、熟悉数据治理理论,数据质量、元数据管理流程和方法;

5、了解hadoop/hive/hbase/spark/storm等技术及其生态圈;

6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;

数据仓库工程师的工作内容篇五

职责:

1.参与传统数仓和大数据数仓日常开发工作;

2.参与大数据仓库设计、规划和开发;

3.参与日常工作的优化,提出建设性意见;

4.负责管理项目,负责板块内的资源协调、进度管理、交付管理;

5.参与数据仓库、数据集市体系架构的设计、规划与开发, 参与大数据、etl开发,sql性能优化。

任职要求:

1.全日制本科,计算机等相关专业。3年以上数仓开发经验,有银行、金融从业经验者优先。

2.2年以上项目管理经验,具备pmp证书优先.

3.熟悉oracle/hive/spark,熟悉数据处理和性能优化,有udf自定义函数、mr开发经验优先;

4.熟悉常用etl工具,熟悉常用的linux指令,熟悉shell/python任意一种脚本语言。

数据仓库工程师的工作内容篇六

1. 负责主线桥梁、各种城市立交等常规跨径桥梁设计;

2. 桥梁结构整体和局部分析计算,完成计算分析报告;

3. 制订和实施项目技术方案, 解决桥梁工程施工中的技术问题,提供相关技术咨询意见;

4. 熟练运用桥梁博士、midas、ansys及cad及相关软件,有编程基础者优先;

5. 短期出差,与委托方或承包方进行技术交流;

6. 完成公司领导交办的其他工作。

数据仓库工程师的工作内容篇七

职责:

1、持续了解信贷行业发展,负责调研评估行业内外最新风控技术、产出可行性方案,协调资源应用于公司内部风控产品体系建设中;

2、负责信审相关系统产品设计、需求文档编写,与风控业务、技术部门紧密配合,管控进度及质量,确保产品高效落地;

3、负责信审相关系统日常需求收集评估;

4、负责信审相关系统问题处理定位分析及跟踪;

5、领导安排的其他工作;

任职资格:

1、3年以上互联网金融风控产品/运营/实操/开发工作经验;

2、具有敏锐的业务洞察、逻辑思维及数据分析能力;

3、具有较强的创新意识和目标导向意识;

4、具有良好的产品文档撰写及产品原型设计能力 ;

5、具备良好的项目统筹推动及跨部门沟通协调能力 ;

数据仓库工程师的工作内容篇八

职责:

1.参与打造数据中心内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;

2.参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据仓库;

3.参与数据产品与应用的数据研发;

4.负责日常应用系统监控,发现异常问题及时分发,并跟进后续处理;

5.编写python程序,或etl技术完成日常数据抽取和整理任务,可独立进行数据分析;

岗位要求:

1.熟悉etl开发、数据仓库设计流程,熟悉oracle, ms sql server 等主流数据库,表结构设计,存储过程编写;

2.熟练掌握常用linux命令,具备shell编程能力,熟练掌握python编程语言

3.具有较强的语言表达和沟通能力,良好的团队合作精神

4.逻辑思维能力强,对数据敏感,有较强学习能力和创新思维;

5.具有高度的责任感和敬业精神,能够承受较大的工作压力

数据仓库工程师的工作内容篇九

职责:

1、编制水文水资源信息化项目有关的科研报告、实施方案、投标文件等;

2、负责与客户进行业务沟通,挖掘和把握客户的需求;

3、在项目实施过程中,对阶段成果进行功能性测试;

4、协助项目经理在项目实施过程中进行汇报、沟通;

5、带领团队进行需求调研,包括需求调研计划编制、需求调研实施、系统原型设计、需求规格说明书编写、推进需求评审等;

6、掌握软件开发与数据库基础知识,辅助项目实施工作;

7、负责需求变更的跟踪管理;

8、编制项目过程文档,完成各类汇报与项目验收等工作,承担培训及后期维护工作;

9、配合项目经理,带领团队针对项目中的数据进行规划、整理,掌握行业发展现状,了解行业动态,分析政策信息。

任职要求:

1、从事水利行业需求分析等相关经验3年以上,最好做过2个以上大中型项目(300万以上),熟悉软件开发者更佳;

2、本科及以上学历,硕士研究生优先考虑;

3、有良好的计算机基础,了解软件设计和开发基本原理;

4、熟悉水文、水资源、地下水、水环境等业务者优先,具备应用系统初步设计能力;

5、有较强的文档编写能力;

6、具备良好的系统分析、逻辑思维和抽象概括的能力;

7、具备独立工作能力和团队合作精神,细心、责任感强;

8、 对用户体验方面的理论有一定的了解和认识,并能有效运用于产品设计工作中;

9、熟悉需求调研方法,有较强的业务流程及业务模型分析设计能力。

10、优先考虑具有水利行业软件需求分析经验的人员。

数据仓库工程师的工作内容篇十

职责:

对业务数据进行采集、清洗、整理、标签、分层;

根据业务需求,应用统计学、数据挖掘等建立精准数据模型,满足业务需求;

能从业务和产品角度出发,利用数据来发现产品或业务的瓶颈,提出优化方案;

探索业界和学术界前言的数据挖掘、机器学习理论与实践。

任职资格:

本科及以上学历,数学、统计学、计算机专业优先;

精通数据挖掘脚本语言,能灵活运用r、python中的一种,熟练sklean/numpy/pandas等科学计算相关库,有统计建模、机器学习或数据挖掘应用的项目经验优先;

对大数据技术有深入了解,能够使用hadoop、spark等相关技术;

勤奋踏实,乐于学习新事物,有良好团队合作精神和高度的责任感;

医疗、生物背景人员优先。

全文阅读已结束,如果需要下载本文请点击

下载此文档
a.付费复制
付费获得该文章复制权限
特价:5.99元 10元
微信扫码支付
已付款请点这里
b.包月复制
付费后30天内不限量复制
特价:9.99元 10元
微信扫码支付
已付款请点这里 联系客服