- 目录
第1篇 高级etl开发工程师职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责数据平台的etl设计开发、工作流调度设计、存储过程开发、自定义函数开发。
2、负责各业务系统数据源业务调研、数据调研、准确性完整性验证。
3、负责项目中与第三方系统基于数据库的数据对接、数据预处理、数据清洗、数据处理、数据导入、数据校验相关开发工作。
4、负责数据平台的etl相关软件和工具的研发和改进。
5、负责数据平台日常管理、跑批、维护、监控、处理临时数据需求。
任职资格:
1、本科计算机相关专业,5年工作经验
2、具备3年或以上etl数据处理相关开发经验
3、拥有3年以上sql开发
4、掌握hadoop hive-hql 基础技能
第2篇 高级etl开发经理职位描述与岗位职责任职要求
职位描述:
岗位职能:
1. 基于公司数据建设需要,完成数据平台构建、数据内容开发等工作。包括:数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作;
2. 充分理解需求文档,基于此进行自测,交付高质量的开发代码和数据内容;
3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能并积极建言、促进组织和系统发展;
4. 团队日常管理,及其他根据部门需要安排事宜。
岗位要求:
1. 信息技术类、数学、统计学、计量经济学类专业,本科,工作年限5年以上;
2. 熟悉数据仓库模型设计和精通etl开发经验 ,掌握3nf,kimball的维度建模设计方法,具备海量数据加工处理(etl)相关经验 ;
3. 掌握至少一种数据库开发技术:oracle、teradata、db2、mysql等,精通并灵活运用sql实现海量数据etl加工处理 ;
4. 熟悉linu_系统常规shell处理命令,灵活运用shell做的文本处理和系统操作 ;
5. 有从事分布式数据存储与计算平台应用开发经验 ;
6. 熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察python、perl、java ;
7. 熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据开发测试工具与方法、数据质量等;
8. 良好的语言沟通与表达能力和自我驱动动力。
注:此岗位需在杭州一个月
第3篇 高级etl工程师岗位职责
高级etl 工程师 职责描述:
1. 负责基于spark技术的海量数据处理和建设工作;
2. 参与流式数据处理系统的开发和维护;
3. 协同数据采集团队和数据应用团队进行系统和代码间对接;
4. 跟踪新的大数据处理技术,并将新的大数据处理技术应用到医疗业务场景中;
任职要求:
1. 计算机软件相关专业,本科以上学历
2. 两年及以上spark相关开发经验
3. 熟练掌握java,scala,python,c++语言中的一种
4. 熟悉linu_/uni_操作系统
5. 熟悉 mysql/hbase/hive/kafka/elasticsearch/redis 中一种或多种技术
6. 扎实的数据结构及算法基础, 良好的英文文档阅读能力
7. 思路敏捷清晰,良好的语言表达和理解能力,良好的学习能力及创新意识
8. 具有优良的问题分析及解决能力
9. 具有良好的团队合作精神及协调能力
职责描述:
1. 负责基于spark技术的海量数据处理和建设工作;
2. 参与流式数据处理系统的开发和维护;
3. 协同数据采集团队和数据应用团队进行系统和代码间对接;
4. 跟踪新的大数据处理技术,并将新的大数据处理技术应用到医疗业务场景中;
任职要求:
1. 计算机软件相关专业,本科以上学历
2. 两年及以上spark相关开发经验
3. 熟练掌握java,scala,python,c++语言中的一种
4. 熟悉linu_/uni_操作系统
5. 熟悉 mysql/hbase/hive/kafka/elasticsearch/redis 中一种或多种技术
6. 扎实的数据结构及算法基础, 良好的英文文档阅读能力
7. 思路敏捷清晰,良好的语言表达和理解能力,良好的学习能力及创新意识
8. 具有优良的问题分析及解决能力
9. 具有良好的团队合作精神及协调能力
第4篇 高级etl工程师职位描述与岗位职责任职要求
职位描述:
1、负责公司数据平台项目的etl设计、实现以及优化。
2、负责etl流程优化,关键问题解决、团队技术与引导和前瞻性技术研究;
3、参与数据仓库数据模型设计,进行数据质量监测、校验和提升;
4、使用etl技术对医院信息系统数据进行提取、清洗、转换和整合;
岗位要求:
1、至少三年以上etl数据开发经验;计算机相关专业本科以上学历,熟悉数据分析与数据挖掘理论;
2、熟悉dw实施方法论和常规etl构架,有整体etl开发经验,深刻理解元数据管理;
3、熟练掌握oracle、sql server、mysql、postgresql等至少两种主流数据库的使用;
4、熟练掌握ssis、kettle、informatica等至少一种etl工具的使用;
5、精通sql、存储过程、函数的使用,具备编写、优化复杂sql的能力;
6、对数字,数据敏感,具备良好的逻辑思维能力;
7、具备专业的业务研究、分析能力,能够独立开展业务调研、数据分析、数据建模、报告编写工作;
8、有医疗卫生数据平台开发、实施经验优先;
9、能适应长期出差。
第5篇 高级etl技术经理职位描述与岗位职责任职要求
职位描述:
岗位职能:
1. 基于公司数据建设需要,完成数据平台构建、数据内容开发等工作。包括:数据平台基础设施建设、数据采集、etl、数仓及数据集市、数据应用产品等开发工作;
2. 充分理解需求文档,基于此进行自测,交付高质量的开发代码和数据内容;
3. 工作中对数据平台基础设施、数据内容建设等工作主动深度思考,提升效能并积极建言、促进组织和系统发展;
4. 团队日常管理,及其他根据部门需要安排事宜。
岗位要求:
1. 信息技术类、数学、统计学、计量经济学类专业,本科,工作年限5年以上;
2. 熟悉数据仓库模型设计和精通etl开发经验 ,掌握3nf,kimball的维度建模设计方法,具备海量数据加工处理(etl)相关经验 ;
3. 掌握至少一种数据库开发技术:oracle、teradata、db2、mysql等,精通并灵活运用sql实现海量数据etl加工处理 ;
4. 熟悉linu_系统常规shell处理命令,灵活运用shell做的文本处理和系统操作 ;
5. 有从事分布式数据存储与计算平台应用开发经验 ;
6. 熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,重点考察python、perl、java ;
7. 熟悉数据仓库领域知识和技能者优先,包括但不局限于:数据开发测试工具与方法、数据质量等;
8. 良好的语言沟通与表达能力和自我驱动动力。
注:此岗位需在杭州一个月