- 目录
-
第1篇 数据仓库架构工程师岗位职责
数据仓库架构师/etl工程师 同程艺龙 同程网络科技股份有限公司,同程旅游,同程艺龙,同程 位职责:
1、负责数据仓库数据采集、处理、存储以及挖掘分析的架构实现,负责架构设计和指导团队落地;
2、参与数据平台建设,包括环境和框架的规划搭建以及部分核心编码工作;设计并实现对bi分析、数据产品开发、算法开发的系统性支持;
3、研究未来数据模型和计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面。
职位要求:
1、具备5年以上dw系统建设经验;了解数据仓库建设过程中的挑战与问题,有实际架构设计和数据建模经验,有作为技术负责人系统化解决问题的成功案例;
2、有dw/bi架构体系中某些领域的专项建设经验,包括但不限于:数据质量、元数据管理、主数据管理、数据监控、流计算、分布式计算、分布式文件系统、分布式存储、大规模数据实时化、跨平台资源调度;
3、熟悉hadoop生态圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;
4、有海量数据建模实践经验优先。
第2篇 数据仓库高级研发工程师职位描述与岗位职责任职要求
职位描述：
工作职责:
1. 负责参与制定数据仓库设计与开发规范
2. 设计和开发数据产品和工具，负责相关业务数据需求的开发
3. 负责参与建立数据质量与数据安全保障体系：包括相关工具开发，数据开发流程的权限管理和控制
任职资格：
1. 具备丰富的数据仓库理论和实践经验
2. 熟悉shell， python， hive sql编程，有丰富的sql查询优化经验
3. 具备电商业务解能力，有较强的逻辑、概率思维能力以及数学建模能力，善于分析、归纳、解决问题背景，并对业务逻辑有兴趣者优先
4. 有互联网数据研发、海量数据处理分析、olap项目开发经验者优先
第3篇 高级数据仓库工程师职位描述与岗位职责任职要求
职位描述：
职责描述：
1、规划业务主题模型，与业务沟通并管理数据需求；
2、数据仓库和数据集市建设，数据模型设计和推进开发；
3、负责数据治理，梳理工作流程和方法，保证口径统一、指标规范、数据准确；
4、培养团队数仓能力
任职要求：
1、有至少3年数据仓库实施及至少2年模型设计经验，本科以上学历；
2、深入理解dw，bi相关的知识，包括：etl、数据仓库、olap、3nf和多维数据模型设计等；
3、熟悉数据仓库建模理论，以及数据仓库数据层级关系，精通多维数据模型设计，具备大型数据仓库架构设计、模型设计和处理性能调优等相关经验；
4、熟练使用主流数据模型设计工具。精通sql，能够熟练使用hiveql和spark sql进行数据开发，熟悉hive数据模型优化；
5、熟悉db2、oracle、teradata、greenplum等主流数据仓库模型设计之一
6、熟悉hadoop、hive，具备海量数据处理和性能调优经验，对hadoop、hive源码有研究更佳
7、学习能力强，优秀的逻辑思维能力和业务需求分析能力，较好的沟通交流能力，能够迅速融入团队
第4篇 数据仓库高级工程师职位描述与岗位职责任职要求
职位描述：
工作职责：
1、负责今日头条的用户产品线的数据仓库架构设计、建模和etl开发；
2、参与数据治理工作，提升数据易用性及数据质量，与数据工具团队紧密合作；
3、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。
任职要求：
1、精通数据仓库实施方法论、深入了解数据仓库体系，并支撑过实际业务场景；
2、具备较强的编码能力，熟悉sql，python，hive，spark，kafka，storm中的多项，有至少tb以上级大数据处理经验；
3、对数据敏感，认真细致，善于从数据中发现疑点；
4、善于沟通，具备优秀的技术与业务结合能力。
第5篇 资深数据仓库工程师职位描述与岗位职责任职要求
职位描述：
工作职责
1、基于公司数据建设需要，完成数据内容开发等工作，维护与完善数据模型各类信息；
2、负责各业务线系统的信息调研、表与字段的关系梳理，根据业务及日常需求来优化模型；
3、工作中对数据平台基础设施、数据内容建设等工作主动深度思考，提升效能、促进组织和系统发展；
4、负责核心数据仓库模型代码开发，跟进etl的完成。负责接入源系统数据的脚本开发、数据测试与验证、以及调度开发等工作；
5、与上游系统与下游应用同事沟通协作，推动各类需求在数据模型中的落地；
6、跟踪、监测、维护及优化数据模型，确保数据模型被使用。
任职资格
1、本科以上学历，5年或以上金融行业数据类工作经验；
2、熟悉hadoop生态系统组件，如：hive、mapreduce、spark、hbase等；具备编写、优化复杂sql的能力；
3、负责过大型数据平台或数据仓库设计，具有扎实的大数据和数据仓库的理论功底；
4、掌握一定的数据质量管理方法论、评估模型设计、质量报表设计，能够根据数据质量要求制定数据质量探查规则并进行实施；
5、掌握一定元数据管理方法论、元数据管理设计。
6、能够围绕业务和产品特征建模并解决问题；
7、具有丰富的数据实践经验；
8、基于公司数据建设需要，完成数据内容开发等工作，维护与完善数据模型各类信息。
第6篇 数据仓库工程师岗位职责
资深数据仓库工程师(严选)-邮件事业部172 网易集团 网易(杭州)网络有限公司,杭州网易,网易,网易杭州,网易游戏,网易网络,网易集团,网易 工作职责:
1. 负责电商数据仓库搭建、etl开发与维护;
2. 完成数据统计、编写计算任务、接口开发;
3. 参于数据规范制定、文档编写。
任职要求:
1.本科以上学历,软件工程/计算机/通信/数学等相关专业;
2.熟悉hive sql语言,熟悉shell, python等至少一种脚本语言;
3.有hadoop、spark、flink等至少一种大数据平台的使用经验;
4.理解能力强,善于沟通,有责任心和团队精神;
5.有数据仓库建设、商业数据分析、增长项目经验者优先。
第7篇 数据仓库开发高级工程师职位描述与岗位职责任职要求
职位描述：
工作职责：
1、负责字节跳动旗下的用户产品线的数据仓库架构设计、建模和etl开发；
2、参与数据治理工作，提升数据易用性及数据质量，与数据工具团队紧密合作；
3、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。
任职要求：
1、精通数据仓库实施方法论、深入了解数据仓库体系，并支撑过实际业务场景；
2、具备较强的编码能力，熟悉sql，python，hive，spark，kafka，storm中的多项，有至少tb以上级大数据处理经验；
3、对数据敏感，认真细致，善于从数据中发现疑点；
4、善于沟通，具备优秀的技术与业务结合能力。
第8篇 数据仓库开发工程师职位描述与岗位职责任职要求
职位描述：
职责描述：
1、负责数据仓库的模型规划设计工作；
2、负责数据仓库etl规则设计、数据映射工作；
3、负责数据仓库建设需求调研、业务沟通；
4、负责业务模型抽象和数据模型的设计开发。
任职要求：
1、计算机相关专业本科及以上学历；
2、5年以上数据仓库建模经验；
3、熟悉etl、数据仓库开发及相关技术，熟悉hive等主流数据库技术，精通sql开发与优化；
4、熟练掌握维度建模理论，有能力分析业务数据，完成数据仓库模型设计；
5、有实时数据处理开发经验（如flink/sparkstreaming/storm）优先；
6、对apache kylin以及其他olap技术深入了解者优先；
7、工作态度踏实认真、积极主动，可接受较高强度工作，具备良好的沟通能力和协调能力。
第9篇 数据仓库需求开发工程师职位描述与岗位职责任职要求
职位描述：
岗位职责:
1）负责数据需求沟通、需求调研、需求分析、需求跟踪；
2）负责业务源系统业务梳理、 信息调研、数据分析；
3）负责逻辑数据模型设计、业务映射规则整理，数据业务规则、数据准确性等质量核对、校验；
4）负责数据业务开发；
任职要求：
1）本科以上及同等学历，计算机、软件等相关专业毕业；
2）五年以上工作经验；
3）熟练数据库sql语言，掌握数据库中mysql/oracle/gp等至少2种；
4）熟悉linu_系统，具备shell编程等开发能力；
5）熟悉通信行业基本业务及业务流程从事通信行业数模型设计经验优先；
6）熟悉大数据技术(hadoop、hive等)，并具备一定的数据处理开发经验；
7）熟悉数据仓库模型优先具有较强的逻辑分析能力、文字表达能力；
8）具有较强的需求判断、引导能力，逻辑思维能力强，良好的沟通表达和文档交付能力
加分项：
有移动通信行业(移动、电信、联通)tb、pb级数据分析和处理经验；
有java，python等开发基础；
第10篇 数据仓库开发（高级）工程师职位描述与岗位职责任职要求
职位描述：
工作职责：
1、负责今日头条的用户产品线的数据仓库架构设计、建模和etl开发；
2、参与数据治理工作，提升数据易用性及数据质量，与数据工具团队紧密合作；
3、理解并合理抽象业务需求，发挥数据价值，与业务团队紧密合作。
任职要求：
1、精通数据仓库实施方法论、深入了解数据仓库体系，并支撑过实际业务场景；
2、具备较强的编码能力，熟悉sql，python，hive，spark，kafka，storm中的多项，有至少tb以上级大数据处理经验；
3、对数据敏感，认真细致，善于从数据中发现疑点；
4、善于沟通，具备优秀的技术与业务结合能力。
第11篇 数据仓库开发工程师-创新工具职位描述与岗位职责任职要求
职位描述：
工作职责：
1、负责创新工具核心业务模块数据仓库的构建；
2、负责数据模型的设计，etl实施、etl性能优化、etl数据监控以及一系列技术问题的解决；
3、负责构建用户主题、各业务线主题、推荐主题、企业bi门户系统；
4、负责全产品线数据字典维护，提升数据资产质量。
任职要求：
1、计算机、数学相关专业本科及以上学历，三年以上大数据开发工作经验，数据挖掘和bi分析领域优先；
2、熟练掌握hive/sql，熟悉spark/map-reduce/mpi分布式计算框架，熟悉大数据的离线和实时处理，可以进行海量数据模型的设计、开发；
3、有产品sense，主动思考基于业务场景下的数据体系建设，而不单单只会做执行；
4、工作认真，负责，良好的团队合作精神和解决问题分析能力。钻研技术克服困难，勇于挑战；
5、有分析经验的优先。
第12篇 广告数据仓库工程师职位描述与岗位职责任职要求
职位描述：
工作职责：
1、广告业务数据仓库建设和管理，包括但不限于数据质量、数据模型、数据安全相关标准的制定；
2、负责与业务团队协同规划与设计数据仓库模型，并快速实现；
3、参与数据治理工作，提升数据易用性及数据质量；
4、参与大数据应用规划、为数据挖据、应用团队提供应用指导。
任职要求：
1、本科以上学历，2年以上互联网业务数据仓库模型设计、开发经验；
2、熟练使用hadoop及hive，熟悉hql、java、python等编程语言；
3、具有web开发经验者优先；
4、有elasticsearch、druid、hbase使用经验者优先。
第13篇 数据仓库工程师岗位职责数据仓库工程师职责任职要求
数据仓库工程师岗位职责
工作内容:
1.集团大数据可视化、数据管理、元数据等核心数据平台研发;
2.负责维护和搭建高性能的hbase/hadoop/spark/storm等离线和实时分布式计算平台，并根据系统压力提前规划并给出性能优化方案;
3.为运营决策、线上数据服务提供可靠稳定的数据服务;
4.负责开源大数据平台与产品和相关技术的追踪和研究;
职位要求:
1.计算机相关专业本科以上学历 - 扎实的php/python/java编程能力;
2.了解olap、etl、分布式数据库 - 具有良好的平台化思维，沟通理解能力，和团队协作精神;
具备以下经验者优先:
- 熟练使用各种数理统计、数据/日志分析及可视化工具者;
- 精通habse、hive、strom、zookeeper、spark等分布式开源软件，有多年实际开发和应用经验;
- 具有开源项目经验者;
工作内容:
1.集团大数据可视化、数据管理、元数据等核心数据平台研发;
2.负责维护和搭建高性能的hbase/hadoop/spark/storm等离线和实时分布式计算平台，并根据系统压力提前规划并给出性能优化方案;
3.为运营决策、线上数据服务提供可靠稳定的数据服务;
4.负责开源大数据平台与产品和相关技术的追踪和研究;
职位要求:
1.计算机相关专业本科以上学历 - 扎实的php/python/java编程能力;
2.了解olap、etl、分布式数据库 - 具有良好的平台化思维，沟通理解能力，和团队协作精神;
具备以下经验者优先:
- 熟练使用各种数理统计、数据/日志分析及可视化工具者;
- 精通habse、hive、strom、zookeeper、spark等分布式开源软件，有多年实际开发和应用经验;
- 具有开源项目经验者;
第14篇 高级数据仓库开发工程师职位描述与岗位职责任职要求
职位描述：
职责描述：
1.能够独立的分析和设计数据仓库需求解决方案；
2.善于和用户沟通、准确了解和定义业务需求并设计解决方案；
3.熟练掌握mysql数据库，精通sql语句编写；
5.有数据仓库/数据集市相关项目背景者有限考虑；
6.5年以上数据库实际项目开发经验；
7.熟练掌握etl工具，掌握kettle/informatica开发者优先；
8.熟悉shell、perl等脚本语言者优先；
9.良好的沟通和学习能力。
第15篇 数据仓库/etl/bi工程师职位描述与岗位职责任职要求
职位描述：
职责描述：
1、负责数据仓库建模，业务数据集市建设开发
2、负责数据仓库etl流程的优化及解决etl相关技术问题、etl流程监控，保障数据平台架构稳定性
3、建立数据分析指标体系，不断完善指标体系和分析模型；
4、通过专项分析，输出专项分析报告
5、负责数据分析相关需求和数据测试的工作
任职要求：
学历要求：
全日制统考类本科及以上学历，计算机、通信、电子、软件工程、统计学、应用数学、数据分析等相关专业
专业技能：
1、熟悉数据仓库各类模型建模理论，熟悉数据仓库数据分层架构和多维数据模型设计；
2、丰富的数据分析经验，熟练掌握sql、hql、sparksql，擅长运用其分析并完成复杂业务数据查询
3、掌握至少一种数据库开发技术：mysql/oracle/db2等，灵活运用sql实现海量数据etl加工处理；
4、熟悉hadoop生态（如：hdfs/mapreduce/hive/hbase等），并有相关实践经验；
5、熟练掌握一门或多门编程语言（如：python/shell/java/c++等），并有大型项目建设经验者优先；
素质：
1、敏锐的数据观察和分析能力，及时发现和分析其中隐含的变化和问题并给出建议；
2、良好的沟通能力和团队精神，较强的学习能力，能承担一定的工作压力。
经验：
至少2年以上数据仓库（离线&实时）模型设计开发、etl设计开发的相关经验，有通信运营商o域/b域大数据、智慧城市大数据的数据仓库、etl设计研发经验者优先'
第16篇 etl工程师（中级数据仓库工程师）职位描述与岗位职责任职要求
职位描述：
职责描述：
1、 负责数据仓库建模和etl技术工作，参与数据项目各类数据源etl的接口设计和文档、流程规范；
2、负责项目中数据清洗、数据处理、数据校验相关开发工作；
3. 配合使用主流数据挖掘工具、etl工具、bi展现的设计和开发；
4、 能够按照公司全面质量管理的要求，高质量地完成各类技术支持工作。
任职要求：
1.计算机相关专业本科以上学历，3年以上工作经验；
2.熟悉etl开发、数据仓库设计流程，熟悉mysql、oracle， ms sql server等主流数据库，表结构设计，存储过程编写；
3.有一定的sql调优知识和经验，具有bi相关知识；
4.有hana、hive经验优先；
5.具备财务基础知识或者erp基础知识者优先；
