大数据开发工程师岗位的职责描述(通用23篇)

来源:飞鸿范文帮 2.01W

大数据开发工程师岗位的职责描述 篇1

职责

大数据开发工程师岗位的职责描述(通用23篇)

1、负责大数据分析平台的建设,基于历史和业务实时数据构建数据挖掘模型;

2、根据需求设计和实现数据分析展示平台;

3、负责建立、维护和改进大数据分析流程、规范、方法;

4、负责基于大数据的数据分析算法研究,基于数据分析结果优化现有应用并探索新的应用。

任职要求:

1、本科及以上学历,统计、数学、计算机或相关专业/方向,3年以上数据分析、数据挖掘相关工作经验;

2、精通MATLAB、Python等大数据涉及的语言和工具,并能熟练运用相关数据分析工具实现数据分析方法;

3、对机器学习、数据挖掘算法及其应用有比较全面的认识和理解,熟悉主流数据挖掘框架;

4、熟悉分布式数据库、数据仓库和数据集市,熟悉数据库相关操作和编程;

5、具有优秀的发现、分析并解决问题的能力,积极性高,具有严谨缜密的工作习惯、较强的沟通能力及团队合作精神;

6、有旅游行业数据分析与挖掘从业经验者优先。有主导完成优秀应用、大型数据平台项目、有数据挖掘,算法设计等开发经验者优先。

大数据开发工程师岗位的职责描述 篇2

职责:

1、参与南方电网软件产品(项目)前/后台服务开发,要求高性能、高可用、高并发;

2、独立完成产品模块(项目)核心代码开发、业务代码开发、系统性能调优等工作;

3、根据分配任务制定开发计划并按时完成相应模块的设计、开发和单元测试;

4、参与产品(项目)相关系统需求分析以及撰写相关系统设计文档;

要求:

1. 五年左右大数据研发岗位工作经验

2、丰富大数据开发经验:熟悉企业大数据常用技术,熟悉Spark、Flume、Hbase、Hadoop、Kafka,ES技术;

3、具有大型应用系统开发经验,具有分布式、高并发、高性能等架构经验,具有一定团队管理经验者优先;

4、了解J2EE技术平台及主流框架,具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架开发经验;

5、了解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技术,熟悉jQuery、Bootstrap、AngularJS,VUE等主流前端JS框架中的一种;

大数据开发工程师岗位的职责描述 篇3

职责:

1、负责异构数据系统和大数据平台的集成与融合;

2、负责数据挖掘算法的设计及对海量数据进行挖掘分析;

3、负责分布式数据仓库平台、海量数据批处理平台、实时数据处理平台等系统开发;

4、参与海量数据处理,业务数据体系的设计、数据统计、分析及数据建模;

5、参与数据平台各系统的性能分析与系统优化,不断提高系统运行效率;

6、完成领导交办的其他任务。

任职资格:

1、计算机及其相关专业,大专及以上学历。两年以上大数据应用经验;

2、具备实时处理框架的设计和开发能力,熟练掌握Storm、Spark streaming等大数据实时处理框架中的一种;

3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相关技术;

4、熟悉Scala、熟悉Linux开发环境,能进行shell脚本的编写;

5、具有较强的逻辑分析能力,高度的责任心及团队合作精神;

6、具有实际大数据项目的成功经验者优先考虑。

大数据开发工程师岗位的职责描述 篇4

职责:

1、负责大数据ETL开发与维护;

2、负责大数据平台数据库的设计以及开发;

3、负责大数据计算框架的选型与计算流程的设计与开发;

4、负责数据服务的设计与开发。

任职资格:

1、本科及以上学历;

2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分布式开源软件,具备系统优化与性能调优能力者优先;

3、精通JAVA等面向对象编程,有分布式并行计算的开发经验优先;

4、熟练掌握至少一种MySQL、SQL Server、Oracle等关系型数据库或MongoDB、Redis等NoSQL数据库 ,有hive等数据仓库研发经验优先;

5、熟悉大数据、云计算概念,了解Hadoop、Hive、Hbase等大数据主流技术及开源框架者优先;

6、自学能力强,沟通能力较好,有一定独立分析,技术研究能力,具有良好的团队合作精神;

7、数据意识强,有较好的文档编写能力,以及踏实的工作作风。

大数据开发工程师岗位的职责描述 篇5

1. 负责Android产品的功能研发和性能优化,完成高质量编码工作;

2. 与产品经理配合,深度参与手机产品需求讨论,功能定义等 ;

3. 设计编写良好的代码结构,不断迭代重构 ;

4. 需有即时通讯类产品研发经验,可快速适应工作内容。

大数据开发工程师岗位的职责描述 篇6

职责:

1、大数据日志分析系统的设计,选型和开发;

2、配合各业务给予数据支持,对产品和运营数据总结和优化;

3、处理用户海量数据,提取、分析、归纳用户属性,行为等信息,完成分析结果;

4、发现并指出数据异常情况,分析数据合理性;

5、公司大数据基础架构平台的运维,保障数据平台服务的稳定性和可用性;

6、大数据基础架构平台的监控、资源管理、数据流管理;

7、基于数据分析的可预测的云平台弹性扩展解决方案。

任职要求:

1、日志分析数据系统实际经验;

2、3年以上互联网行业研发经验,有使用Hadoop/hive/spark分析海量数据的能力;

3、掌握 Hadoop、Flume,Kafka、Zookeeper、HBase、Spark 的安装与调试;

4、熟悉大数据周边相关的数据库系统,关系型数据库和 NoSQL。

5、掌握 Linux 操作系统的配置,管理及优化,能够独立排查及解决操作系统层的各类问题;

6、有良好的沟通能力,具备出色的规划、执行力,强烈的责任感,以及优秀的学习能力。

大数据开发工程师岗位的职责描述 篇7

职责

1.数据库安装、配置、故障处理、备份与恢复;

2.数据库性能监控与优化、数据库安全加固、数据库空间管理等(包括线上、线下环境);

3.负责项目数据ETL整合与数据库设计;

4.审核数据库设计方案和SQL语句,对上线数据库质量进行管理;

5.负责数据库操作标准化流程制定,并遵照执行;(如数据库设计规范、数据库变更管理规范)

6.负责跟进、试用厦门数据组产出的工具、数据整合方案,以及在重庆团队中推广使用;

7.提升实施团队数据库运维相关技能。

岗位要求

1、计算机或相关专业本科以上学历,2年以上数据处理工作经验;

2、精通关系型数据库体系架构和原理,精通存储过程、触发器、动态SQL的编写;

3、精通数据库的性能优化及SQL语句的优化;

4、精通MySql/oracle数据库的规划、设计、优化及运维;

5、熟悉Linux常用命令,熟悉shell/python/perl(其中一种)脚本开发;

6、熟悉数据库的负载解决方案,如分库、分表、主从;

7、高度的责任心、良好的沟通技巧和团队合作精神;

大数据开发工程师岗位的职责描述 篇8

职责:

1、从事Hadoop、Spark、Hbase、hive等分布式大数据产品的设计和开发;

2、针对部门大数据业务进行大数据分析、挖掘等产品应用的开发;

3、大数据平台各类数据业务抽象及模型化;

4、参与大数据管理平台的开发及维护;

5、负责大数据平台数据及相关的应用开发,调优及维护;

6、为项目相关开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题;

7、良好的团队合作与沟通能力。

任职要求:

1、本科及以上学历,2年以上大数据应用开发经验;

2、具备Java、Python、Scala其中两种语言的开发经验;

3、了解泛Hadoop大数据生态圈,熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中两种以上技术,并有实际的项目开发经验,有相关源码研究者优先;

4、具备ETL开发与运维能力,有Flume、kettle经验优先;

5、熟悉大数据平台的搭建过程,熟悉数据处理流程,有TB级以上数据处理经验优先,有实时数据处理经验者优先;

6、熟悉离线和实时数据处理流程,熟练使用Spark,Flink处理TB级数据优先;

7、熟悉Linux系统环境,有shell等脚本编写经验,熟悉Mysql、PostgreSql、Oracle等常用关系数据库,熟练编写SQL语句;

8、熟悉Yarn,Kubernetes,Azkaban等资源调度框架者优先;

9、熟悉Datax的二次开发,并有实际开发经验优先。

大数据开发工程师岗位的职责描述 篇9

职责:

1、利用HTML5相关技术开发移动平台的web前端页面效果实现;

2、根据产品设计实现页面交互,与后台工程师共同实现产品功能,完成数据交互、动态信息展现;

3、协助设计师实现页面及交互,协助产品完善需求,提供技术实现方案;

4、优化代码及实现技术,提高页面性能。

任职要求:

两年以上JavaScript开发工作经验;

熟悉HTTP协议、W3C标准,能书写兼容主流浏览器并且能够良好的适配各个尺寸移动设备;

熟练掌握前端开发技术(HTML5、JS、Ajax、Json、XHTML、CSS),了解各项技术的相关标准,并严格按照标准进行开发;

熟悉javascript设计模式 能以模块化进行程序开发;熟悉主流Javascript MVC框架,如reactjs AngularJS ,有 开发经验者优先录用;

对任意一门非Web前端脚本的语言(如Java、PHP、C、Python )有一定的了解程度;

6、对HTML5技术领域、新兴Web标准和Web发展趋势有良好洞察力和极高的关注度,有强烈的求知欲;

7、具有android、iphone、ipad等智能手机和平板开发经验优先考虑

8、良好的编程习惯和团队协作精神,工作积极上;

大数据开发工程师岗位的职责描述 篇10

职责:

1、计算机相关专业专科及以上学历,毕业后1-2年工作经验

2、辅助进行系统的功能定义,程序设计;

3、具有良好的编程习惯,热爱编程

4、具有良好的沟通能力和团队协作能力

岗位要求:

1、具有扎实的Java基础,理解多线程、网络等基础框架

2、熟练使用SSH框架,了解Spring工作机制

3、熟悉使用oracle/sqlserver/mysql至少一种数据库,熟练使用sql开发;

4、熟练使用javascript,有一定的前端知识;

5、了解linux,能够进行基本的操作

6、具有强烈的进取心和责任感,有良好的逻辑思维能力

大数据开发工程师岗位的职责描述 篇11

职责

1、负责游戏服务器的日常运维;

2、负责数据备份、恢复、冗余设置,安全防范;

3、负责Web服务,MySQL等数据库安装和调优;

4、负责游戏项目等生产服务器的日常更新等操作;

5、负责服务器工具的开发部署。

任职要求

1、计算机相关专业,本科以上学历,三年以上工作经验;

2、熟悉linux操作系统的常用命令,工具,配置,熟悉shell/python任一语言的编写;

3、熟练搭建优化apache、nginx、tomcat、iis、lamp等web服务环境;

4、熟悉mysql数据库,sql语句,及备份,恢复;

5、了解linux上的集群构架服务如LVS、Keepalived、NFS、MFS的相关知识;

6、了解OpenStack、CloudStack、KVM等虚拟化实现技术;

7、熟悉网络架构,具备基本的网络故障排错能力,对网络安全有一定的了解。

大数据开发工程师岗位的职责描述 篇12

1、根据公司产品发展方向,负责/参与新产品开发;

2、负责产品的页面制作及维护,根据设计图完成页面html5应用的编码;

3、根据产品需求,分析并给出最优的页面前端结构解决方案;

4、根据产品设计,利用HTML5相关技术开发网站、手机、平板电脑等多平台上的前端应用;

5、编写可复用的用户界面组件;

6、协助后台程序员完成功能镶嵌和调试;

7、有微信小程序开发经验者优先。

大数据开发工程师岗位的职责描述 篇13

职责:

1. 负责同程艺龙核心系统的可靠、稳定、高效运行;

2. 参与系统架构设计与优化,不断提高系统性能与稳定性;

3. 设计、开发提高同程艺龙稳定性、工程效率、资源效率的运维自动化工具与平台;

4. 探索运维自动化和智能化的技术和方向。

任职要求:

1. 计算机或相关专业;

2. 熟悉Linux操作系统原理、网络原理;

3. 掌握JAVA/C/Go/Shell/Python等1至2种语言;

4. 良好的沟通、组织协调能力和强烈的责任心,具备很强的分析和解决问题的能力;

5. 对行业技术敏感度高且细致,善于思考,乐于发现,对解决具有挑战性问题充满激情。

大数据开发工程师岗位的职责描述 篇14

职责:

1、负责平台PHP开发工作;

2、团队协作与分工,按时完成每周进度要求;

3、根据数据接口文档开发接口,与前端进行数据交互。

4、负责微信小程序项目开发

任职资格:

1、 精通PHP开发语言,1年PHP经验

2、 熟练掌握HTML、熟悉DIV+CSS布局,熟悉Ajax,熟练掌握jquery;

3、 具有MySql索引、查询、存储优化;PHP缓存技术、静态化方面的经验;

4、对编程充满热情,爱捣鼓程序,有代码洁癖,乐于了解和掌握新鲜知识;

5、对前后端合作开发有一定的认知,对交互体验有较为深入的了解;

6、具备OOP编程思想,熟悉MVC,有项目案例,有Laravel开发框架经验者优先;

7、对互联网产品熟悉,关注用户体验,对用户体验有自己的独到见解。

8、有小程序经验者优先

大数据开发工程师岗位的职责描述 篇15

1、负责公司基础产品框架和开发环境的设计搭建和研发;

2、编写开发平台和工具,解决实际业务开发问题,提高公司项目开发效率;

3、建立和健全公司技术体系,使产品具备技术竞争性;

4、参与项目需求调研、项目可行性分析、技术可行性分析和需求分析;

5、负责公司项目的后端数据库设计、代码编写、前后端整合;

大数据开发工程师岗位的职责描述 篇16

职责:

1、项目的需求分析、系统设计,相关过程文档编写;

2、项目的计划制定,进度把控,人员关系的协调沟通;

3、项目的编译、构建、部署,技术疑难问题解决;

4、项目的单元测试和集成测试;

5、项目的培训、验收、总结。

任职要求:

1、精通Java,有2年以上Java深层次开发经验(有丰富项目开发经验者,可以破格录用),具备深厚的Java功底;

2、精通面向对象软件结构知识,熟悉设计模式、OOA/D、UML,能熟练使用Rose建模工具完成软件设计;

3、熟悉Struts,Hibernate,Spring等开源框架,有架构设计经验者优先;

4、精通J2EE体系结构,熟悉JBoss, weblogic, Tomcat等应用服务器系统的开发;

5、为人诚信,思维严谨,工作主动,能承受一定的工作压力;

6、工作勤奋,责任心强,有良好的质量意识,具有良好的沟通能力和团队合作意识。

7、具备PMP或中高级项目管理认证资质优先;

大数据开发工程师岗位的职责描述 篇17

职责

1、负责客户端应用逻辑的编写,与项目组美术、策划人员深入沟通,准确实现开发需求,完成所负责模块系统的设计、开发和编程;

2.持续优化产品性能,提高用户体验;

3.负责游戏的上线发布和维护。

任职资格

1、本科及以上学历,至少有参与过一款H5项目的研发;

2、熟悉TypeScript/JavaScript/ActionScript,熟悉MVC,有良好的OOP思想;

3、熟悉WebSocket网络编程,了解ProtoBuf序列化方式,能独立开发业务逻辑;

4、需有1年或以上使用Egret/Laya 开发项目经验;

5、踏实上进,善于钻研技术,具备良好的编程习惯和代码规范;有较强的独立解决问题能力,富于团队精神,喜欢游戏行业。

大数据开发工程师岗位的职责描述 篇18

职责:

1.负责公司项目开发与维护;

2.负责公司项目核心代码编写;

3.负责代码的单元测试,保证开发质量,提交符合规范的成果;

4.针对业务场景的应用要求,不断优化系统设计和前台表现,提升系统效能和安全性。

任职要求

1.3年以上的PHP开发经验,有独立开发经验者优先;

2.了解HTML5、CSS3、JAVASCRIPT等前端代码;

3.具有MySQL索引优化、查询优化和存储优化经验,熟练使用redis;

4.具有良好的PHP基础,熟悉ThinkPHP开源框架;

5.熟悉微擎二开者优先,做过微信公众号优先,接过各平台支付SDK优先,熟悉对高并发业务的处理;

6.有游戏开发经验者优先,计算机专业优先,熟悉linux服务器操作的优先;

7.有良好的面向对象分析、设计能力、规范的编程风格和良好的文档习惯;

8.有良好的团队精神、敬业精神,有高效的执行力,能主动学习钻研与工作相关的知识和技术;

大数据开发工程师岗位的职责描述 篇19

职责

1、负责公司产品的软件系统的开发与维护,对整个平台的安全、稳定、性能和架构先进性负责;

2、负责公司环境管理运营平台的开发管理,服务器实施;

3、负责公司软件系统的架构设计,核心代码编写,与系统日常维护;

4、按照部门经理制定的项目计划,按时并高质量的完成开发任务;

5、参与技术难题攻关,对相关系统的接口进行设计和规划;

6、按时完成领导交办的其他工作事项。

任职资格:

1、计算机相关专业,具有三年以上PHP项目开发经验;

2、熟悉PHP+MySQL,熟练掌握主流的PHP开发框架;

3、熟练使用mysqL等数据库,熟悉sql语言,掌握mysql的常规优化;

4、优秀的代码编程习惯及文档编写能力。

大数据开发工程师岗位的职责描述 篇20

职责:

1.熟悉thinkcmf5框架优先录取

2.核心业务功能开发和代码维护;

3.负责网站后端程序开发、数据库结构设计和搭建;

4.参与网站产品的设计和开发,配合产品经理进行技术决策。

岗位要求:

1.有开发商城系统/微信定制开发优先;1-2年工作经验也可考虑;

2.熟练掌握PHP,熟悉面向对象的软件设计方法; 熟悉MVC三层架构的开发,熟练应用PHP框架Thinkphp5。

3.熟悉HTML、CSS、Javascript等前端技术,熟悉jquery者优先;

4.熟悉Linux常用命令;MySQL数据库开发及常用优化方法;

5.有良好的代码习惯,要求结构清晰、命名规范、逻辑性强、代码冗余率低,代码注释清晰;

6.性格开朗、喜欢钻研技术,具有较强的分析和解决问题的能力。

大数据开发工程师岗位的职责描述 篇21

职责:

1、独立负责工作小组,并对下级成员进行监督;

2、具备资源整合以及对软件项目全局把控的能力;

3、负责软件项目的系统设计和需求分析;

4、制定软件项目开发计划,并按时完成功能模块的设计、开发以及编程任务;

5、积极配合并完成主管下达的任务,并能够对软件部门的发展规划提出意见;

任职条件

1、大数据相关开发经验3年以上,至少具备2年以上java开发经验;

2、有基于hadoop的数据抽取、转换、加载的开发相关经验;

3、熟练掌握hadoop生态的相关知识,如hive,hbase,a,storm,spark,mapreduce等;

4、熟悉Linux操作系统。熟悉linux各项基本操作,至少掌握一门脚本语言;

5、熟练数据仓库,对多维数据建模有深入理解;

6、有BI数据平台、数据仓库、日志采集、多维数据仓库设计、开发、架构经验者优先;

7、思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作;

大数据开发工程师岗位的职责描述 篇22

职责:

1.针对项目需求,进行基于JAVA的web后台开发;

2.按照项目计划,与项目组其他成员协同工作,在保证质量的前提下,按时完成开发任务;

3.对接短信通道,维护优化短信平台;

4.积极、认真地根据测试人员提出的问题对程序进行修改,确保产品的高品质。

任职资格:

1.2年以上Java开发实际工作经验;

2.熟练使用Java语言,熟悉JavaEE体系架构,具有B/S应用开发经验;

3.熟悉应用开发框架SSH及其他主流JavaEE开发技术;熟悉jQuery等框架;

4:熟练掌握sqlserver数据库技术,熟练掌握sql语句 ;

5.对用户体验、交互操作流程及用户需求有深入理解;

6.具有规范的编程习惯与文档编写能力,积极配合公司各项规范化建设工作;

7.有短信平台开发维护经验优先。

大数据开发工程师岗位的职责描述 篇23

1.负责互联网系统后端模块的开发和测试;

2.与前端开发、运营、测试团队合作完成整个项目开发;

3.编写及维护软件功能规格说明书,设计及开发过程中产生的系列文档;

4.参与系统架构设计和核心代码的编写,可指导初级开发人员参与工作;

5.参与网站性能优化、产品体验优化以及产品功能迭代;与前端开发团队紧密配合,确保代码有效对接,优化前端性能。

热门标签