最新范文网 > 工作职责 > 大数据开发工程师的职责是什么

大数据开发工程师的职责是什么

时间: 新华 工作职责

明确职责可以帮助员工更好地了解彼此的工作内容和职责,从而更好地协调合作、避免工作重叠或缺失。大数据开发工程师的职责是什么怎么写才规范?下面给大家分享大数据开发工程师的职责是什么,希望对大家有所帮助。

大数据开发工程师的职责是什么篇1

职责:

1.负责公司项目的开发和维护,产品的后端web程序开发、数据库结构设计和搭建,包括架构设计、技术方案的制定相关工作;

2.根据项目情况,完成项目可行性和需求分析,并完成系统设计;

3.根据开发需求,负责完成PHP核心代码,接口规范制定;

职位要求:

1、计算机相关专业专科以上学历;

2、3年以上实际项目开发经验,熟练运用HTML、Javascript、Ajax等技术;

3、精通PHP+MYSQL程序设计及开发,拥有良好的代码习惯;

4、熟练应用各种工具进行协作开发,有团队开发经验

5、逻辑性强,善于思考,具备良好的需求理解能力、学习能力、分析和独立解决问题的能力

大数据开发工程师的职责是什么篇2

职责:

1.负责设计和实现手机卫士大数据BI平台;

2.不断完善数据产品的架构设计,应用开发和新技术迭代;

3.配合业务,产品,根据不同的业务需求,灵活快速地完成具有挑战性的项目,为业务提供有价值的数据分析和预测。

任职要求

1.计算机软件相关专业本科及以上学历,至少3年以上工作经验;

2.认可技术与平台在BI的价值,能够深入业务领域,通过使用数据分析和挖据技术,让业务生成的海量数据产生更大价值。

3.熟练掌握大数据技术:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP,ElasticSearch等等。

4.具备良好的编程能力和代码风格,熟练掌握Java,Python等语言,熟练使用SQL,并具有较强的优化能力。

5.需要有很强的开发和架构设计能力,特别是在大数据的分布式和实时处理领域,对存储引擎和查询引擎的原理和优化都具备比较深入的理解。

6.有一定的数据挖掘和机器学习算法能力,包括推荐系统,深度学习等技术领域。

7.拥有正直、积极、宽容的品质,学习能力强,并且善于沟通合作。

大数据开发工程师的职责是什么篇3

职责:

1.负责公司大数据业务集群的运维工作确保高可用;

2.负责基础运维、故障定位、容量规划、扩容及性能优化;

3.设计实现大规模分布式集群的运维、报警监控和管理平台;

4.参与业务架构设计,在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。

任职资格:

1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;

2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;

3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

大数据开发工程师的职责是什么篇4

职责:

1.负责金融银行大数据系统相关模块的数据架构及研发实施工作

2.依据业务场景、分析需求提供技术解决方案并加以实现;

3.与客户业务部门对接,解决数据建模、报表和报告在系统开发遇到的问题;

任职资格:

1.具备3年以上DW系统建设经验,了解BI系统,有数据管理经验,有维度建模相关经验,了解数据仓库建设过程中的挑战与问题

2.精通多系统数据融合、清洗、转换、整合,具备海量数据加工处理相关经验

3.熟悉业界数据仓库建模方法、元数据管理、数据质量体系管理

4.掌握大型数据库开发技术(ORACLE/DB2等),有丰富的数据库模型设计和优化经验

5.熟练掌握Unix/Linux常规命令、工具及Shell编程

6.掌握一门或多门编程语言优先,如Java、Python、scala等

7.熟悉Hadoop、spark、kafka等大数据生态相关技术,有相关实践经验着优先8.良好的语言沟通与表达能力和自我驱动动力9.具备银行项目设计、开发、优化等经验者加分

大数据开发工程师的职责是什么篇5

1、负责数据仓库和大数据处理模块的架构设计和开发;

2、负责实现基于Spark框架的分布式计算框架的设计和开发工作;

3、负责Spark技术研究和通用数据平台的性能调优;

4、负责大数据项目中,基于kafka、flume、sparkstreaming、SparkSQL等相关技术的海量数据的处理、分析、统计、挖掘工作。

5、熟悉Scala/Java语言,对Scala/Java原理、底层技术有深入研究者优先;

6、有过海量数据系统开发经验者优先;

7、熟悉Hadoop/Spark生态系统组件的使用,至少有2年以上的Spark开发经验;

8、写过推荐系统的优先考虑

大数据开发工程师的职责是什么篇6

职责

1、独立承担系统功能的需求分析和重要功能模块的设计;

2、负责核心模块的代码编写、测试;

3、参与软件项目工程的实施和管理;

4、培养和指导团队成员开展工作。

任职资格:

1、计算机相关专业(数学、物理专业也可),本科以上学历;

2、精通Java语言,熟练使用Eclipse;

3、能熟练掌握目前主流的数据库(Oralce/DB2/SQLSERVER/MySql)至少一种;

4、有3年以上实际项目开发经验,1-2年作为项目团队核心成员;

5、能参与系统设计,独立完成模块开发;

6、富有责任心和创新精神,具有团队合作精神;

7、计算机相关专业,本科以上学历,或研究生毕业;

8、有过项目管理经历的优先录用。

大数据开发工程师的职责是什么篇7

职责:

1、完成软件的设计、开发、测试、修改bug等工作。

2、撰写相关的技术文档。

3、参与业务需求的沟通,功能模块详细设计,业务功能实现与单元测试,系统维护等工作。

4、对代码质量如执行性能、可读性、可维护性负责

5、独立的解决和分析开发过程中的问题

6、完成上级安排的其他临时性工作。

岗位要求:

1、计算机相关专业专科以上。

2、精通Java语言,熟练使用MyEclipse,熟悉Linux平台的程序开发。

3、熟悉面向对象编程原理,数据结构和算法基础扎实。

4、熟悉J2EE相关技术,掌握Spring、SpringMVC、Mbatis/Hibernate等常用应用开发框架。

5、掌握Web前端技术,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用经验者优先。

6、熟悉Mysql/Oracle等常用关系型数据库,精通SQL,能够对SQL进行优化。

7、了解分布式计算、NoSQL技术,有实际应用经验者优先。

8、有SpringBoot、SpringCloud、Git、Redis、Java8等相关使用经验者优先。

9、思维敏捷,具备良好的表达能力和沟通能力,PMP/ACP/CSM优先。

10、工作认真负责,有强烈的责任感和吃苦耐劳精神,具有良好的团队合作精神,具有强烈的事业心和责任感。

大数据开发工程师的职责是什么篇8

职责:

1.负责运营平台以及移动应用服务器API开发与维护,编写开发文档;

2.根据业务需求提出技术方案,负责系统框架的规划、开发;

3.熟悉支付业务流程,对已有模块的调优和bug修复。

任职资格:

1.计算机及相关专业,熟悉掌握PHP、熟悉面向对象编程;

2.有成熟的项目经验,能独立处理开发中遇到的问题;

3.熟悉Linux服务器相关知识,熟悉Nginx/Apache等服务搭建,对服务器搭建和系统性能调优有了解;

4.熟悉掌握MySQL数据库的使用,对高并发数据处理和数据优化有相应的处理方案;

5.对缓存技术有了解,使用过Redis/Memcache/Mongodb等常见nosql数据库之一。

大数据开发工程师的职责是什么篇9

职责:

1、与项目经理沟通和确认某个模块的需求和实现方法。

2、负责自己范围内的功能代码编写

3、负责自己范围内的功能模块的单元测试以及阶段测试工作

4、对自己开发的功能模块进行维护工作

5、部分现场支撑问题解答以及处理

6、合理编制技术文件,改进和规范工艺流程;

岗位要求

1、计算机及相关专业本科及以上学历

2、2年以上大型互联网电子商务系统或者其他大型企业应用系统开发相关经验;

3、精通JavaEE相关技术和框架

(包括Java语言基础/多线程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)

4、有Web及前端技术开发经验

(包括Javascript,ajax,jason,HTML,XML,MVC类Web开发框架);

5、熟悉基于Mysql、Oracle等数据库的设计和开发、Linux操作系统和某种脚本语言编程(如Shell等)

6、熟悉大容量、高性能的数据库系统的应用开发,对各种开源的软件有深入的了解,

有1年以上的大规模高并发访问的Web应用开发经验;

7、熟悉企业应用设计模式、面向对象的分析和设计技术,包括设计模式、UML建模等

大数据开发工程师的职责是什么篇10

职责:

1、负责数据库的安装、配置、监控、实时备份、恢复和管理;

2、负责数据清理及系统间的数据迁移;

3、根据需要负责数据库设计包括表结构、表、索引等的设计;

4、负责编写SQL、触发器、存储过程等;

5、负责原有SQL优化,原有存储过程维护。

工作要求:

1、2年以上数据库开发或Java软件开发经验;

2、熟练使用Linux系统,熟悉表结构设计、SQL优化,熟练编写存储过程;

3、熟悉Oracle、Mysql数据库运行机制、体系架构;

4、掌握Oracle数据库维护,能对业务需求和故障及时反馈和处理;

5、具较强的责任心和学习能力,有团队合作精神、沟通协调能力、承压能力。

大数据开发工程师的职责是什么篇11

职责:

1、负责大型播客网站和大型电子商务网站PHP程序设计,开发,维护;

2、参与开发移动互联网的应用,包括数据架构,接口定制,大数据采集和分析;

3、较好的文档撰写能力,编写易读,易维护,高质量,高效率的代码。

岗位要求:

1、计算机或相关专业大专以上学历,2年以上PHP项目开发经验;

2、精通LAMP架构的PHP开发,熟悉OOP、框架、模板、缓存、优化等技术;

3、熟练使用MySQL数据库,可以写出高效的SQL语句;

4、熟练掌握PHP+MySQL环境的Web应用开发,有yii等MVC框架下开发经验者优先;

5、熟练掌握Ajax,jQuery,熟悉memcache,redis,mongoDB;

6、熟悉linux操作系统,熟练使用常用命令和工具;

7、良好的英语阅读能力,能适应全英文技术文档的开发项目;

8、具备很好的学习钻研能力,爱好编程这项工作,乐于学习新技术;

9、有大型网站开发经验者优先。

大数据开发工程师的职责是什么篇12

职责:

1.负责公司产品软件功能模块的详细设计、开发、测试;

2.参与系统的需求调研和需求分析;

3.参与撰写需求分析、概要设计、详细设计等相关技术文档;

4.根据公司的设计和编码规范能独立完成分配模块的设计、编码、测试工作;

5.对自身承担模块的开发进度、代码质量负责。

任职资格:

1、本科或以上历;

2、3年以上Java开发经验,有较大型高性能应用系统开发经验者优先;

3、熟练使用各种开发工具(Eclipse、Maven、Junit、Svn);

4、熟练使用Mysql数据库,对sql优化有一定的了解,有针对业务场景有设计数据库结构关系的能力;

5、熟悉Linux基础命令

6、熟练使用Spring、SpringMVC、Mybatis、Hibernate等开源框架,熟悉springboot/springcloud优先;

7、熟练使用Mysql/Oracle/Sqlserver等数据库设计及应用经验;

8、熟练使用JavaScript脚本语言,熟悉JQuery类库;

9、可以独立完成简单模块的数据结构设计和代码开发;

10、能够独立开发业务模块,有较强的系统分析能力;

大数据开发工程师的职责是什么篇13

职责:

1、参与微信开发、小程序项目功能编码及完成项目技术攻关;

2、独立完成网站前后台的功能开发;

3、负责数据库优化、程序性能优化;

4、能独立理清产品需求,完成代码编导;

岗位要求:

1、大专以上学历,三年或以上相关工作经验;

2.精通PHP+MYSQL编程

3.熟练使用一种PHP框架,ThinkPHP、Yii2框架优先;

4.熟练的进行MySQL数据库设计和优化;

5.熟练使用PHP缓存技术

6.对前端语言Html、Div+CSS、JS、jq有所了解;

7.熟悉常见的短信接口,熟悉支付宝、微信等支付接口的集成.

8.有微信开发、小程序项目、商城开发经验者优先

大数据开发工程师的职责是什么篇14

1.能够快速适应业务需求,撰写技术方案和系统设计;

2.参与技术方案和系统设计评审;把握复杂系统的设计,确保系统的架构质量;

3.系统核心部分代码编写;疑难问题的解决;

4.负责参与技术架构设计、开发、重构、优化,根据业务规划及技术规划制定应用架构方案;

5.为团队引入创新的技术、创新的解决方案,用创新的思路解决问题。

大数据开发工程师的职责是什么篇15

职责:

1、负责公司在线平台系统的设计、评审、编码等开发和迭代升级工作,确保相关系统稳定可靠运行;

2、完成系统架构设计、数据库结构设计、业务逻辑抽象、组件封装等编码工作;

3、与产品经理、前端开发工程师保持良好沟通,能快速理解、消化各方需求,并落实为具体的开发工作;

4、对自己开发的模块的性能、稳定、安全等方面的监测和调优承担

任职要求

1、3年以上的PHP项目开发工作经验,熟练掌握各种API接口研发;

2、精通PHP,深入理解MVC模式,精通OOP开发,熟练运用常用设计模式开发;

3、熟悉html5/CSS3/javascript/AJAX等前端技术,熟悉jQuery/Bootstrap等前端类库/框架;

4、熟悉MySQL数据库设计,熟悉分布式储存者优先;熟悉LNMP/LAMP架构的搭建、配置和优化;

5、熟悉redis/memcached底层缓存技术,有高并发开发经验者优先;

6、有中大型电商系统、ERP系统等项目开发及维护经验者优先;

7、精通一种或多种PHP开发框架,熟悉Laravel/Magento者优先;

8、具备较强的独立开发能力和学习能力,同时需要较强的团队协作精神、良好的表达能力和沟通能力;

9、工作认真负责,思路清晰,思维敏捷,能承担较大的工作压力,能适应创业型公司的成长速度和挑战,具有较强的自我驱动力;

大数据开发工程师的职责是什么篇16

职责:

1、负责网站功能的开发和维护;能针对各种程序网站做二次开发。

2、负责对网站已经上线的功能进行修改和维护;

3、进行详细设计、代码开发,配合测试,高质量完成项目;

任职资格:

1、了解PHP常用开发框架,熟悉MYSQL,熟悉Div+CSS;

2、具有PHP缓存技术、静态化设计方面的经验,能够独立开发后台CMS系统;

3、具有良好的编程风格,有多层结构的开发经精通网站开发中常见的安全漏洞及避免方法;

4、具有较强的团队意识,高度的责任感,对工作积极严谨,勇于承担压力;

5、有良好的沟通和学习能力、有较强的团队协作能力以及快速解決问题的能力;

大数据开发工程师的职责是什么篇17

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写,线上产品的维护;

3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计,数据建模,负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求:

1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;

2、学历背景:计算机相关专业本科及以上学历;

3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。

5、有团队管理经验者优先。

大数据开发工程师的职责是什么篇18

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写,线上产品的维护;

3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计,数据建模,负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求:

1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;

2、学历背景:计算机相关专业本科及以上学历;

3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。

5、有团队管理经验者优先。

85784