- 目录
岗位职责是什么
大数据岗位,是企业中负责管理和分析海量数据的专业角色,旨在通过挖掘数据价值,推动业务发展,优化决策过程,并为企业创造竞争优势。
岗位职责要求
1. 精通大数据处理技术,如hadoop、spark、hive等,具备实际项目经验。
2. 熟练掌握编程语言,如python、java、scala,用于数据清洗、转换和建模。
3. 深入理解数据仓库和数据湖概念,能设计高效的数据架构。
4. 具备统计学和机器学习基础,能够运用相关算法进行预测和洞察。
5. 良好的业务理解能力,能将数据分析结果转化为业务策略。
6. 强烈的团队协作精神,与各部门有效沟通,确保数据需求的准确传达。
岗位职责描述
大数据专家在企业中扮演着数据科学家和数据工程师的双重角色。他们负责收集、整合来自各种来源的大量数据,然后利用高级分析工具和技术揭示隐藏的模式和趋势。此外,他们还需要构建和优化数据管道,确保数据的准确性和及时性。在这个过程中,他们需要与业务团队紧密合作,理解业务需求,提供数据驱动的洞见,帮助制定战略决策。
有哪些内容
1. 数据采集:设计和实施数据获取策略,包括结构化和非结构化数据的抓取、清洗和存储。
2. 数据分析:运用统计方法和机器学习算法,进行深度数据挖掘和预测建模。
3. 平台维护:管理大数据平台,确保其稳定运行,优化性能,处理数据安全和隐私问题。
4. 业务咨询:与业务部门合作,解释数据分析结果,提出业务改进建议。
5. 报告与可视化:创建易于理解的数据报告和可视化工具,以直观方式呈现复杂数据。
6. 项目管理:参与或领导数据相关的项目,确保按时交付并达成预期目标。
7. 技术研发:关注行业动态,研究新的数据工具和技术,提升企业数据分析能力。
大数据岗位的核心在于将数据转化为知识,通过深入分析和解读,驱动企业的创新和增长。这一角色不仅需要深厚的技术功底,更需要敏锐的业务洞察力和出色的沟通能力,以确保数据的价值能够在整个组织中得到有效利用。
大数据岗位职责范文
第1篇 大数据工程师( elasticsearch/spark)职位描述与岗位职责任职要求
职位描述:
岗位职责:
1、 负责基于elasticsearch的研发;
2、 负责基于spark生态系统的研发;
3、 负责elasticsearch/spark集群调优;
4、 负责对数据进行建模。
任职要求:
1、 大学本科及以上学历,计算机相关专业;
2、 三年以上工作经验;
3、 熟练掌握java/scala后端开发,如多线程、网络等;
4、 熟练掌握python、shell中的一种脚本语言;
5、 熟悉spark 生态系统组件,如:hadoop、flume、kafka、hbase、hive、pig、zookeeper;
6、 熟悉linu_开发环境;
7、 熟悉elasticsearch、lucene优先;
8、 能够读懂及书写英文文档;
9、 有spark调优、统计学知识的优先考虑;
10、 有机器学习经验者优先考虑;
11、 对新技术有孜孜不倦的热情。
第2篇 大数据系统架构师岗位职责大数据系统架构师职责任职要求
大数据系统架构师岗位职责
职责描述:
1. 负责客户业务需求、数据分析需求的调研、收集与分析;
2. 负责kyligence大数据平台整体架构和数据架构设计,根据具体业务需求和产品对数据模型进行统一分析和规划;
3. 负责技术设计及技术实现规范编制,指导开发团队进行项目设计、项目实现及技术汇报;
4. 负责项目重难点模块的功能设计和难点攻坚;
5. 参与大数据平台的应用设计、开发、测试及优化工作。
任职要求:
1. 计算机相关专业,本科及以上学历;
2. 有5年以上工作经验,3年以上数据仓库架构和大数据系统设计经验;
3. 精通hadoop、hive、hbase原理及优化,熟悉大数据生态技术圈,如storm、spark、flume、sqoop、kafka、zookeeper、es等,有大规模集群架构设计、开发及管理经验;
4. 熟练使用sql语言,掌握oracle、db2、gp、mysql等至少两种数据库系统的使用,有较好的sql性能调优经验;
5. 至少熟悉java,scala,python,shell等编程语言中的2种;
6. 熟悉数据治理及应用,元数据管理的设计与应用;
7. 熟悉数据仓库模型的设计,分层设计原理,并结合大数据技术组建解决模型应用的问题;
8. 优秀的分析和解决问题的能力,对挑战性问题充满激情;
9. 具备良好的文档撰写能力和技术团队管理能力;
10. 具备良好的团队合作精神,较强的沟通能力,具备良好的技术领导能力;
11. 有hive数据仓库或者apache kylin的开发经验者优先考虑;
第3篇 大数据开发工程师(数仓方向)职位描述与岗位职责任职要求
职位描述:
岗位职责:
1. 理解业务需求,负责数据仓库建设、etl流程的开发和优化工作;
2. 解决业务数据分析、数据报表、数据异常相关的技术问题;
3. spark/yarn/hdfs 的性能改进、功能扩展、故障分析;
任职资格:
1. 计算机相关专业本科及以上学历;
2. 精通java编程语言,并熟悉scala、python、shell等一门以上脚本语言;
3. 熟悉hadoop大数据平台架构,熟悉spark/spark sql/yarn开发调优技术,具有相关项目经验
4. 掌握数据仓库(dw)/olap/商业智能(bi)/数据统计理论,熟悉oracle/mysql数据库;
5. 思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力;
6. 具有高度的责任感,工作认真、踏实。
福利待遇:
1、薪酬:有竞争力的薪酬体系,我们不止跟你谈理想,钱也必须谈一谈~
2、交通:无论天涯,免费班车直达公司,蓦然回首,地铁就在公司不远处。。。
3、工作时间:5天7小时工作制,充足的休息让你一整天元气满满!
4、各种福利:五险一金小case,节日礼物福利补贴说不完!
5、团建活动:下午茶,团队活动,部门聚餐,经费充足不差钱,大公司就是这么壕!
6、发展平台:想要升职加薪走向人生巅峰?上市公司晋升发展机会多多~
第4篇 大数据高级开发职位描述与岗位职责任职要求
职位描述:
1、负责基于hadoop、spark、mpp的大数据、数据仓库构架设计及开发工作;
2、负责理解业务数据需求,开展数据采集、存储、管理、分析、建模及数据处理流程设计及开发;
3、牵头大数据库开发工作,负责整体推进剂技术疑难问题的解决。
本职位为外包职位,外包到浙江华云信息科技有限公司,从事电力行业信息化工作。
第5篇 大数据开发leader职位描述与岗位职责任职要求
职位描述:
岗位职责:
1、负责整体大数据平台体系的建设工作。
2、负责带领团队完成基于大数据平台的业务项目的开发、实施和维护工作。
3、负责解决大数据平台建设过程中的技术难点和性能调优工作。
4、负责指导和培训团队成员,共同提升大数据技能。
任职要求:
1、计算机相关专业,至少5年以上大数据开发经验;
2、熟悉大数据、数据仓库,分布式架构技术理论,具有大数据整体系统架构设计和实战经验,,有从无到有建设大数据平台经验者优先;
3、熟悉大数据生态圈技术,不限于hadoop、hdfs、hive、hbase、spark、storm、flume、sqoop、kylin等,阅读过底层源码者优先;
4、熟悉至少一种编程语言,python,java,scala等,精通sql;
5、2年以上技术团队管理经验,有阿里,百度,腾讯,滴滴,美团等互联网大数据工作经验者优先;
6、逻辑思维清晰,具备高度的责任感和良好的沟通协调能力,遇事积极主动。
第6篇 大数据技术经理岗位职责任职要求
大数据技术经理岗位职责
大数据技术经理职位描述:
1、主要负责产品和项目的开发管理工作,带领团队保质保量完成开发任务;
2、参与产品需求分析、架构设计、技术选型等工作,参与技术框架构建;
3、负责项目开发进程管理,核心代码编写;
4、负责制定相关技术解决方案,解决开发中的技术问题;
5、负责对外的产品技术支持
任职要求:
1、有2-3年的技术管理经验,参与过企业级产品研发过程;
2、精通java、熟悉spring mvc开发架构
3、精通hadoop生态圈中常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp实际应用经验;
4、精通linu_平台,熟悉shell、python其一或多种;
5、熟悉系统部署、开发、测试、维护过程与方法;
6、能够及时地跟进项目进度、管理项目风险,及时发现并解决项目问题,推动项目团队朝目标前进;
7、综合素质高,具有良好的执行力和责任心,有较强的组织能力和沟通能力;
8、具有pmp证书优先。
职位描述:
1、主要负责产品和项目的开发管理工作,带领团队保质保量完成开发任务;
2、参与产品需求分析、架构设计、技术选型等工作,参与技术框架构建;
3、负责项目开发进程管理,核心代码编写;
4、负责制定相关技术解决方案,解决开发中的技术问题;
5、负责对外的产品技术支持
任职要求:
1、有2-3年的技术管理经验,参与过企业级产品研发过程;
2、精通java、熟悉spring mvc开发架构
3、精通hadoop生态圈中常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp实际应用经验;
4、精通linu_平台,熟悉shell、python其一或多种;
5、熟悉系统部署、开发、测试、维护过程与方法;
6、能够及时地跟进项目进度、管理项目风险,及时发现并解决项目问题,推动项目团队朝目标前进;
7、综合素质高,具有良好的执行力和责任心,有较强的组织能力和沟通能力;
8、具有pmp证书优先。
大数据技术经理岗位
第7篇 大数据汽车客户it销售总监岗位职责描述岗位要求
职位描述:
岗位职责:
1. 掌握公司大数据项目和产品与分析客户需求,为客户提供咨询或顾问服务,与项目交付者共同制定营销方案;
2. 带领销售团队,完成新客户开拓及老客户维护,完成公司下达的各项销售任务和业绩指标;
3.管理整个销售的全过程,包括但不限于合同的签定、实施、验收、回款等;
4. 掌握大数据与ai行业动态,及时反馈给高层,并协助高层制定销售新策略;
工作要求:
1. 本科及以上学历;国内外知名学校毕业优先,会驾车佳、市场营销、计算机相关专业优先。
2. 有汽车行业相关、it和大数据销售/顾问具备行业深度资源, 8年及以上项目或产品销售和销售管理工作经验,
3. 具备社会精英商务的形象和气息,优秀的表达沟通、抗压、逻辑思维等能力。具有撰写方案和客户演说的能力;
4. 具备创业精神,追求事业发展决心和责任心;
5. 接受出差。
薪资:年薪40-60万,上不封顶
第8篇 全国各地大区大数据高级客户经理岗位职责任职要求
全国各地大区大数据高级客户经理岗位职责
职位描述:
职位描述:
1.开拓新客户,完成业绩目标
2.服务好客户,促进更大的合作
3.做好市场研究的相关工作
4.做好管理咨询的相关工作
5.做好团队和跨部门的相关工作
岗位要求:
1.2~5年或以上的市场研究、市场营销、管理咨询或相关的客户服务的工作经历;
2.具备互联网市场研究或管理咨询的基本知识,在中等以上规模的互联网市场研究或管理咨询公司做研究咨询或客户服务的优先考虑
3.具有开拓互联网客户和服务客户的技能和意识;具有探索精神,喜欢接触新事物;
4.喜欢互联网和互联网达人,具有良好的沟通协调、开拓创新、抗压能力和客户服务能力, 熟悉ms office,团队协作能力强,有意愿在冠升长期发展和成长
全国各地大区大数据高级客户经理岗位
第9篇 大数据算法工程师/专家(p6-p8)3职位描述与岗位职责任职要求
职位描述:
职责描述:
1.深度分析位置大数据、轨迹大数据及多源海量时空数据,进行数据质量控制、建模和信息提取,解决基于位置服务和商业价值挖掘核心问题。
2.研究开发基于地理大数据、时空数据挖掘及空间优化的创新性应用
3.负责或参与时空大数据分析框架搭建,从事前沿大规模机器学习和知识获取的算法研究与分布式开发
4.跟踪相关领域(工业界及学术界)的最新研究成果
任职要求:
1.计算机、数学、统计学等相关专业硕士以上学位
2.在以下至少一个领域有深入的研究:
(1)统计方法、数据挖掘和机器学习(如深度神经网络、boosting、图模型、概率统计、最优化方法等)
(2)语义理解检索 (如知识图谱表示、结构化预测、语义解析、信息检索、知识挖掘等)
(3)大数据分析(如搜索/推荐,用户行为分析,位置大数据挖掘等)
(4)计算机视觉(如图像识别理解、人脸检测识别、目标检测和跟踪、ocr、增强现实、图像质量评价、图像分割增强等)
3.良好的编程功底,至少精通c++/java/python/r/matlab至少一门编程语言
4.良好的文献追踪能力,关注相关会议、学术期刊、国际算法竞赛发表的最新技术和专利。
第10篇 项目经理 – 大数据项目实施职位描述与岗位职责任职要求
职位描述:
工作职责:
1,负责公司大数据相关项目的协调和跟进工作,确保各项工作任务的落地和执行;
2,与客户方、项目团队紧密合作,编制项目计划,对项目进度进行全面监督、管理;
3,定期总结分析项目任务完成情况,对过程中的项目风险进行分析、把控,并及时提供预警信息与总监作出业务判断;
4,完成各个项目的业务例行报告汇总和整理;协助部门完成其他日常管理工作。
任职要求:
1,本科及以上学历,5年及以上项目管理工作经验,熟悉管理、开发、运营的工作流程,有大数据相关行业、项目经验优先;
2,具备项目全过程管理能力以及较强的业务理解能力;并且能够运用项目管理能力合理拆解任务目标并进行过程跟进,确保项目方向落地与业务战略达成一致;
3,具备系统化思考的能力;且对项目结果达成有主观强烈的渴望,责任心强,能承受一定压力;
4,熟悉crm,广告计算的优先;
5,熟悉大数据技术,系统架构的优先;
第11篇 java大数据开发工程师职位描述与岗位职责任职要求
职位描述:
职责描述:
1. 精通java开发、熟悉restful和maven,精通主流java web开发框架spring、spring boot、spring data jpa、logback、mybatis;
2.熟悉对常用关系型数据库和hdfs、hive,kafka、storm等读写操作,性能优化;
3. 具备系统架构设计能力,具备较强的java程序调优能力及数据库设计和sql调优能力,具备良好的沟通能力;
4. 熟悉多线程编程、熟悉junit单元测试;
第12篇 大数据开发高级工程师-etl方向职位描述与岗位职责任职要求
职位描述:
工作职责:
1、 根据公司数据分析需求进行基于hadoop 平台的项目开发;
2、 根据需求进行数据仓库模型设计,熟练使用kettle工具进行etl程序的开发;包括实时数据加工,计算,etl,管理, 监控等;
3、 负责针对源系统进行数据抽取、处理、分析等相关工作,及项目中涉及到的数据库创建、维护及提供数据接口工作;
4、 负责设计并优化基于hive 的数据仓库的建设;
5、 制定数据库备份和恢复策略及工作流程与规范。
6、能出具消费品品牌制造行业应用的数据分析技术解决方案,并落地。
任职资格:
1.从事数据仓库领域至少2年以上,熟悉数据仓库模型设计与etl开发经验 ,具备海量数据加工处理相关经验;
2. 熟悉数据仓库领域知识和技能者优先,包括但不局限于:元数据管理、数据开发测试工具与方法、数据质量、主数据管理;
3.有从事分布式数据存储与计算平台应用开发经验,熟悉hadoop生态相关技术并有相关实践经验着优先,重点考察hive、hdfs、hbase;
4. 熟练掌握kettlesqoop、data_、airflow等;
5. 有消费品品牌制造、零售行业经验,尤其快消品行业和财务领域数据项目经验者优先;
6. 熟悉分布式计算presto/imapa优先;
7.有实时计算方面的经验的优先。
第13篇 大数据产品研发工程师职位描述与岗位职责任职要求
职位描述:
职责描述:1、参与公司大数据产品的设计和开发;
2、负责公司大数据产品的的部署和维护,保证其稳定和可靠。
任职要求:1、计算机相关专业,本科及以上学历,3年以上软件开发经验,1年以上互联网产品或分布式系统开发设计经验;
2、熟悉java, python编程语言, linu_操作系统及bash shell编程;
3、熟悉mysql等常用rdbms数据库;
4、了解微服务框架及相关技术, 如dubbo, springcloud等;
5、具有一定的软件设计能力, 热爱大数据和技术,有面向业务的思维, 较强的自主学习能力和英文技术文档阅读能力;
6、良好的沟通能力、团队精神及服务意识,勇于接受挑战,能承受较大的工作压力。
第14篇 大数据team leader-创新工具职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责业务线内大数据平台架构的规划与设计,并带领团队落地实施;
2、负责大数据能力在产品功能上的落地,推动产品数据化和智能化;
3、负责团队在数据挖掘、算法、分析方面的能力构建,持续进行团队能力建设和提升;
4、负责大数据团队的管理工作。
任职要求:
1、计算机、数学、统计学、人工智能等相关专业,硕士或以上学历,5年以上大数据、人工智能相关经验,3年以上管理经验;
2、熟悉hive/hadoop/spark/storm等大数据开发技术,并有过相关项目成功经验;
3、熟悉机器学习相关算法,数据挖掘相关算法,并有过相关项目成功经验;
4、熟悉至少一种主流深度学习编程框架(tensorflow/caffe/m_net),熟悉常用的深度学习算法;
5、精通至少一门编程语言,python/java/c++等;
6、有丰富的行业经验,丰富的专业知识,独特的行业见解,有战略视野和规划能力;
7、有良好的业务和产品sense,执行力、推动力强。
第15篇 大数据课程研究员职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责对原有大数据课程进行优化
2、负责大数据相关新项目研发
3、关注大数据前沿技术研究,通过新技术带动大数据课程
4、与学科交流课程方向,把握新技术带来的新方向
任职资格:
1、本科以上学历,3年以上java开发经验,3年以上大数据研发经验,能独立完成大数据新技术研究
2、具有较强的学习能力,创新能力,问题解决能力,计划能力
3、具有较高的心理承受能力,全局意识和责任心
4、熟练掌握javaweb项目开发技术,如ssh、ssm、js、mq、redis、zookeeper、dubbo等
5、熟练掌握hadoop、hive、storm、spark环境搭建
6、熟练掌握hdfs、mapreduce,storm,spark操作及其内部原理机制
7、熟练使用sqoop、hive、oozie、hue、azkaban等工具的使用
8、熟练掌握脚本语言shell
9、对python具有一定的操作能力
10、熟知电商等互联网系统的开发过程、运维过程、日志采集过程
11、熟练使用scala开发语言
12、对jdk、spark、hadoop、storm、rpc内部源码了解者优先
有授课经验优先
第16篇 资深售前咨询-城市大数据应用岗位职责要求
职位描述:
岗位职责:
1.紧跟智慧城市、城市大数据发展及相关政策,梳理城市大数据应用方向
2.结合公司及战略合作伙伴产品和解决方案,包装城市大数据应用整体解决方案
3.负责政府行业售前技术支撑工作(设定范围、提出解决方案、客户交流、项目投标书编写及投标),配合渠道完成销售任务
4.负责协调公司内部资源(咨询、产品、研发)和外部合作伙伴资源,共同完成方案设计和项目交付
5.较强的学习能力,能够较快的学习公司的数据体系及产品体系,同时不断迭代相关行业知识,能够结合行业知识及公司产品与数据
6.培训渠道的销售团队使其掌握基本的产品特性
7.负责友商产品的竞争分析。
8.参与相关的市场活动和主题演讲。
岗位要求:
1.本科及以上学历,3-5年以上相关工作经验,具有传统咨询公司工作及传统企业服务经验优先;
2.具有丰富的政府行业售前或咨询经验,熟悉政府行业信息化项目,包含不限在统计、规划、交通、旅游、公共安全等领域,具体前期规划、方案规划和整合、资源整合和项目落地经验者优先,政府大数据项目优先
3.热爱大数据行业,有较强的业务分析、数据分析能力及逻辑思维能力,具有政府相关数据咨询经验者优先;
4.具备优秀的方案编纂、撰写能力,具备出色的演讲技巧和能力,具有敏锐的洞察力和优秀的判断能力。
5.具备一定管理才能,熟悉行业特点的专门人才
第17篇 高级需求工程师(大数据方向)职位描述与岗位职责任职要求
职位描述:
职责描述:
1、主要负责大数据分析和应用相关产品的需求调研、规划与分析工作;
2、承担部分的产品宣传、演示汇报等工作;
3、完成领导交办的其他工作。
任职要求:
1、本科及以上学历,3年以上需求工作经验,数学、统计学、计算机相关专业优先;
2、对数据分析、数据挖掘、etl等相关数据分析技巧有一定了解;
3、熟练掌握需求捕获、分析、管理相关技能;
4、熟练掌握a_ure、脑图、office等需求工作常用工具;
5、有较强的逻辑思维、文档编写、沟通协作能力,有团队意识和责任心,能够承担一定工作压力;
6、有检察院、公安、纪委监察委等行业背景优先。
第18篇 大数据架构工程师 - 性能优化职位描述与岗位职责任职要求
职位描述:
工作职责:
1、参与计算框架和服务的定制和改进,为公司批处理和流式计算能力提供支撑;
2、深入理解业务场景,解决性能瓶颈,实现业务目标;
3、计算、存储和网络方面基础技术的探索和储备。
任职要求:
1、精通各种性能分析和调试工具,高效进行分析;
2、熟练的 c/c++/java 开发能力,代码质量高;
3、熟悉网络、linu_、hadoop 等系统,能够灵活解决新问题;
4、较好的团队协作和沟通能力。
第19篇 大数据研发工程师-抖音/火山职位描述与岗位职责任职要求
职位描述:
工作职责:
1、负责抖音/火山等多个业务线的策略算法建设与优化工作;
2、通过海量数据,分析与挖掘各种潜在关联,不断优化策略效果,保障用户体验;
4、负责实时及离线特征抽取、融合,为数据挖掘及策略平台提供特征服务;
5、负责大数据能力在产品功能上的落地,推动产品数据化和智能化。
任职要求:
1、计算机等相关专业,硕士或以上学历,3年以上大数据、人工智能相关经验;
2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大数据开发技术;
3、有良好的业务和产品sense,执行力、推动力强优先;
4、有丰富的行业经验,丰富的专业知识,独特的行业见解,有战略视野和规划能力优先;
5、优秀的理解沟通能力,崇尚数据说话,深信数据在驱动业务、支撑决策上的价值优先。
第20篇 大数据售前工程师岗位职责
大数据售前工程师 舆情早报网 北京智慧星光信息技术有限公司,智慧星光,舆情早报网 岗位职责:
1、 海量采集互联网数据为基础,为金融、汽车等行业提供互联网品牌聆听,帮助企业及时掌握网络口碑和竞争动态;
2、 负责汽车、金融行业的客户,主要是售前工作,包括挖掘客户需求、设计解决方案,知道实施交付等工作。
任职要求:
1、3年以上大数据领域售前工作经验;
2、熟悉大数据行业,了解舆情、金融、政务、安全等行业业务场景;
3、要求大数据行业经验。