大数据开发工程师工作职责内容
明确的职责分工可以使企业更好地实现团队协作和资源整合,提升企业的综合竞争力。这里提供优秀的大数据开发工程师工作职责内容,方便大家写大数据开发工程师工作职责内容参考。
大数据开发工程师工作职责内容篇1
职责:
1、参与产品初期的需求定义
2、根据需求快速完成开发方案设计
3、高效完成功能开发
4、功能自测、代码定期自查、框架及系统完善
5、参与日常的功能快速迭代,完成开发、自动化测试到产品发布的整个流程。
任职要求:
1、扎实的计算机编程及网络基础,熟悉常用软件设计模式
2、3年以上PHP开发经验,熟练练使用PHP框架,有一个以上Laravel或Swoft的完整项目的开发经验
3、熟练使用MySQL数据库,对索引、锁和事务有了解,有并发处理和调优经验
4、熟练使用Redis、Memcache等常见非关系型数据库
5、熟练使用HTML、CSS、Javascript、Jquery、Vue等前端技术,有Vue实际使用经验
6、有支付、OSS、消息通讯等一种以上三方应用的集成经验
7、熟悉Docker、Git、及常用Linux命令使用有,有生产服务器运维经验的优先
8、熟悉或掌握一种或以上其他服务端语言的优先
9、有SaaS系统、社交软件、直播平台高并发处理能力经验的优先
10、有责任心,具备良好的编码习惯,较强的学习及沟通能力。
大数据开发工程师工作职责内容篇2
1、家电产品内部结构及装配设计,有智能家电开发经验者优先;
2、负责参与新产品整体结构设计方案设计,确定产品的结构设计方案和项目计划,完成样机试制,确定零部件的详细设计;
3、能够结合工业设计、市场反馈、用户体验、产品品质综合确定产品的结构设计方向;
4、负责样品分析,参与试产、对产品可靠性、工艺性、合理性负责。
大数据开发工程师工作职责内容篇3
1.能够快速适应业务需求,撰写技术方案和系统设计;
2.参与技术方案和系统设计评审;把握复杂系统的设计,确保系统的架构质量;
3.系统核心部分代码编写;疑难问题的解决;
4.负责参与技术架构设计、开发、重构、优化,根据业务规划及技术规划制定应用架构方案;
5.为团队引入创新的技术、创新的解决方案,用创新的思路解决问题。
大数据开发工程师工作职责内容篇4
职责:
1.负责金融银行大数据系统相关模块的数据架构及研发实施工作
2.依据业务场景、分析需求提供技术解决方案并加以实现;
3.与客户业务部门对接,解决数据建模、报表和报告在系统开发遇到的问题;
任职资格:
1.具备3年以上DW系统建设经验,了解BI系统,有数据管理经验,有维度建模相关经验,了解数据仓库建设过程中的挑战与问题
2.精通多系统数据融合、清洗、转换、整合,具备海量数据加工处理相关经验
3.熟悉业界数据仓库建模方法、元数据管理、数据质量体系管理
4.掌握大型数据库开发技术(ORACLE/DB2等),有丰富的数据库模型设计和优化经验
5.熟练掌握Unix/Linux常规命令、工具及Shell编程
6.掌握一门或多门编程语言优先,如Java、Python、scala等
7.熟悉Hadoop、spark、kafka等大数据生态相关技术,有相关实践经验着优先8.良好的语言沟通与表达能力和自我驱动动力9.具备银行项目设计、开发、优化等经验者加分
大数据开发工程师工作职责内容篇5
职责:
1.负责运营平台以及移动应用服务器API开发与维护,编写开发文档;
2.根据业务需求提出技术方案,负责系统框架的规划、开发;
3.熟悉支付业务流程,对已有模块的调优和bug修复。
任职资格:
1.计算机及相关专业,熟悉掌握PHP、熟悉面向对象编程;
2.有成熟的项目经验,能独立处理开发中遇到的问题;
3.熟悉Linux服务器相关知识,熟悉Nginx/Apache等服务搭建,对服务器搭建和系统性能调优有了解;
4.熟悉掌握MySQL数据库的使用,对高并发数据处理和数据优化有相应的处理方案;
5.对缓存技术有了解,使用过Redis/Memcache/Mongodb等常见nosql数据库之一。
大数据开发工程师工作职责内容篇6
职责:
1、独立负责工作小组,并对下级成员进行监督;
2、具备资源整合以及对软件项目全局把控的能力;
3、负责软件项目的系统设计和需求分析;
4、制定软件项目开发计划,并按时完成功能模块的设计、开发以及编程任务;
5、积极配合并完成主管下达的任务,并能够对软件部门的发展规划提出意见;
任职条件
1、大数据相关开发经验3年以上,至少具备2年以上java开发经验;
2、有基于hadoop的数据抽取、转换、加载的开发相关经验;
3、熟练掌握hadoop生态的相关知识,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系统。熟悉linux各项基本操作,至少掌握一门脚本语言;
5、熟练数据仓库,对多维数据建模有深入理解;
6、有BI数据平台、数据仓库、日志采集、多维数据仓库设计、开发、架构经验者优先;
7、思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作;
大数据开发工程师工作职责内容篇7
职责:
1.负责公司产品软件功能模块的详细设计、开发、测试;
2.参与系统的需求调研和需求分析;
3.参与撰写需求分析、概要设计、详细设计等相关技术文档;
4.根据公司的设计和编码规范能独立完成分配模块的设计、编码、测试工作;
5.对自身承担模块的开发进度、代码质量负责。
任职资格:
1、本科或以上历;
2、3年以上Java开发经验,有较大型高性能应用系统开发经验者优先;
3、熟练使用各种开发工具(Eclipse、Maven、Junit、Svn);
4、熟练使用Mysql数据库,对sql优化有一定的了解,有针对业务场景有设计数据库结构关系的能力;
5、熟悉Linux基础命令
6、熟练使用Spring、SpringMVC、Mybatis、Hibernate等开源框架,熟悉springboot/springcloud优先;
7、熟练使用Mysql/Oracle/Sqlserver等数据库设计及应用经验;
8、熟练使用JavaScript脚本语言,熟悉JQuery类库;
9、可以独立完成简单模块的数据结构设计和代码开发;
10、能够独立开发业务模块,有较强的系统分析能力;
大数据开发工程师工作职责内容篇8
职责:
1、与项目经理沟通和确认某个模块的需求和实现方法。
2、负责自己范围内的功能代码编写
3、负责自己范围内的功能模块的单元测试以及阶段测试工作
4、对自己开发的功能模块进行维护工作
5、部分现场支撑问题解答以及处理
6、合理编制技术文件,改进和规范工艺流程;
岗位要求
1、计算机及相关专业本科及以上学历
2、2年以上大型互联网电子商务系统或者其他大型企业应用系统开发相关经验;
3、精通JavaEE相关技术和框架
(包括Java语言基础/多线程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)
4、有Web及前端技术开发经验
(包括Javascript,ajax,jason,HTML,XML,MVC类Web开发框架);
5、熟悉基于Mysql、Oracle等数据库的设计和开发、Linux操作系统和某种脚本语言编程(如Shell等)
6、熟悉大容量、高性能的数据库系统的应用开发,对各种开源的软件有深入的了解,
有1年以上的大规模高并发访问的Web应用开发经验;
7、熟悉企业应用设计模式、面向对象的分析和设计技术,包括设计模式、UML建模等
大数据开发工程师工作职责内容篇9
职责:
1.负责公司大数据业务集群的运维工作确保高可用;
2.负责基础运维、故障定位、容量规划、扩容及性能优化;
3.设计实现大规模分布式集群的运维、报警监控和管理平台;
4.参与业务架构设计,在设计阶段给出可运维性改进建议;
5.深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。
任职资格:
1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;
2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;
3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。
大数据开发工程师工作职责内容篇10
职责
1、负责公司大数据平台建设工作,完成Hdaoop/Spark搭建部署,根据业务需要进行开发;
2、开发实现网络爬虫并爬取所需数据,有效存储到大数据平台;
3、对平台数据做预处理,满足数据展现及后续机器学习等系统使用;
4、根据业务需要,应用大数据实时分析技术、可视化技术等,并对平台发展规划进行设计。
任职资格
1、本科及以上学历,计算机相关专业;
2、熟悉数据仓库和数据建模相关技术细节,有编程经验,熟悉SQL/Hadoop/Hive/Hbase/Spark等大数据工具;
3、具备海量数据处理经验,或有互联网行业数据挖掘工作经验;
4、1年以上岗位经验优先,本科应届有意向的,可优先培养。
大数据开发工程师工作职责内容篇11
职责:
1、负责数据库的安装、配置、监控、实时备份、恢复和管理;
2、负责数据清理及系统间的数据迁移;
3、根据需要负责数据库设计包括表结构、表、索引等的设计;
4、负责编写SQL、触发器、存储过程等;
5、负责原有SQL优化,原有存储过程维护。
工作要求:
1、2年以上数据库开发或Java软件开发经验;
2、熟练使用Linux系统,熟悉表结构设计、SQL优化,熟练编写存储过程;
3、熟悉Oracle、Mysql数据库运行机制、体系架构;
4、掌握Oracle数据库维护,能对业务需求和故障及时反馈和处理;
5、具较强的责任心和学习能力,有团队合作精神、沟通协调能力、承压能力。
大数据开发工程师工作职责内容篇12
职责:
1、完成软件的设计、开发、测试、修改bug等工作。
2、撰写相关的技术文档。
3、参与业务需求的沟通,功能模块详细设计,业务功能实现与单元测试,系统维护等工作。
4、对代码质量如执行性能、可读性、可维护性负责
5、独立的解决和分析开发过程中的问题
6、完成上级安排的其他临时性工作。
岗位要求:
1、计算机相关专业专科以上。
2、精通Java语言,熟练使用MyEclipse,熟悉Linux平台的程序开发。
3、熟悉面向对象编程原理,数据结构和算法基础扎实。
4、熟悉J2EE相关技术,掌握Spring、SpringMVC、Mbatis/Hibernate等常用应用开发框架。
5、掌握Web前端技术,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用经验者优先。
6、熟悉Mysql/Oracle等常用关系型数据库,精通SQL,能够对SQL进行优化。
7、了解分布式计算、NoSQL技术,有实际应用经验者优先。
8、有SpringBoot、SpringCloud、Git、Redis、Java8等相关使用经验者优先。
9、思维敏捷,具备良好的表达能力和沟通能力,PMP/ACP/CSM优先。
10、工作认真负责,有强烈的责任感和吃苦耐劳精神,具有良好的团队合作精神,具有强烈的事业心和责任感。
大数据开发工程师工作职责内容篇13
职责
1、维护和升级现有产品,快速修复Bug和缺陷。新产品新特性高质量的开发;
2、根据开发规范与流程独立完成编码、测试及相关文档;
3、负责模块的任务开发,并按照设计和进度要求编码和单元测试;
4、完成项目经理交付的开发工作,完成团队中相互codereview的工作,并能够给出自己的意见和建议;
5、管理方向:协助项目经理参与部分项目管理工作,比如计划的制定、跟进、协调、组织等。
任职要求:
1、大学本科以上学历,计算机相关专业,学历真实可查,至少四年以上JAVA开发经验;
2、熟悉Linux操作系统及常用命令;
3、熟悉linux下使用Tomcat应用服务器的配置、部署;
4、熟悉至少一种(Mysql、Oracle、SQLServer等)主流关系型数据库开发,熟练掌握SQL语句的编写;
5、熟悉JavaEE技术,对各种开源的软件如Spring、Struts、hibernate/mybatis等有深入的了解;
6、懂得单元测试的相关知识,懂得各种单元测试覆盖率的含义及应用优先;
7、具有良好的学习能力、沟通理解能力,乐于承担工作压力,富有团队精神
大数据开发工程师工作职责内容篇14
职责:
1、负责大数据平台的技术和产品的设计、开发、优化和维护;
2、负责大数据平台设计文档编写,线上产品的维护;
3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;
4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;
5、参与指标设计,数据建模,负责将数据模型在系统中实现;
6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;
7、负责追踪整体产品过程及质量把控。
任职要求:
1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;
2、学历背景:计算机相关专业本科及以上学历;
3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验
4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。
5、有团队管理经验者优先。
大数据开发工程师工作职责内容篇15
1、负责数据仓库和大数据处理模块的架构设计和开发;
2、负责实现基于Spark框架的分布式计算框架的设计和开发工作;
3、负责Spark技术研究和通用数据平台的性能调优;
4、负责大数据项目中,基于kafka、flume、sparkstreaming、SparkSQL等相关技术的海量数据的处理、分析、统计、挖掘工作。
5、熟悉Scala/Java语言,对Scala/Java原理、底层技术有深入研究者优先;
6、有过海量数据系统开发经验者优先;
7、熟悉Hadoop/Spark生态系统组件的使用,至少有2年以上的Spark开发经验;
8、写过推荐系统的优先考虑
大数据开发工程师工作职责内容篇16
职责:
1、完成日常任务开发及代码优化;
2、完成公司现有项目(tp5开发)的更新迭代;
3、参与公司产品的设计,以及完成相应功能模块的开发,调试;
4、保质保量完成团队分配的任务。
任职资格:
1、3年以上php开发经验,从事过电信增值业务者优先;
2、熟练使用thinkphp5或laravel框架;
3、熟悉Unix/Linux操作系统,会使用git或svn等版本控制工具;
4、熟悉mysql数据库,熟练sql查询语句;
5、熟悉memcache或redis等缓存技术;
6、熟悉html、css、javascript、jquery框架和ajax等前端技术。
大数据开发工程师工作职责内容篇17
职责:
1、负责公司云计算业务相关系统的开发、升级、优化工作。
2、参与相关业务逻辑后台架构设计、系统建模、数据库设计、核心代码的编写及后台服务程序的研发和编写。
3、独立完成完整功能测试和发布,准备相关的技术文档,协助解决各种技术问题。
4、进行详细设计、代码开发,配合测试,高质量完成项目。
5、按照项目计划,按时提交高质量代码,完成开发任务。
任职资格:
1、2年以上PHP开发经验;精通PHP+MySQL,熟悉OOP编程思想和MVC框架,有整体项目开发经验。
2、熟练使用JavaScript,jQuery熟悉AJAX、JSON数据交互,对Mysql数据库有丰富的经验及熟悉优化。
3、熟悉PHP缓存技术、了解高并发、负载均衡处理技术。
4、有移动开发经验,能完成主流应用工具接口的二次开发,能为业务提供接口支持者优先。
5、有良好的编码习惯,具有高度的责任心、良好的沟通能力和团队协作精神。
大数据开发工程师工作职责内容篇18
职责:
1、负责大型播客网站和大型电子商务网站PHP程序设计,开发,维护;
2、参与开发移动互联网的应用,包括数据架构,接口定制,大数据采集和分析;
3、较好的文档撰写能力,编写易读,易维护,高质量,高效率的代码。
岗位要求:
1、计算机或相关专业大专以上学历,2年以上PHP项目开发经验;
2、精通LAMP架构的PHP开发,熟悉OOP、框架、模板、缓存、优化等技术;
3、熟练使用MySQL数据库,可以写出高效的SQL语句;
4、熟练掌握PHP+MySQL环境的Web应用开发,有yii等MVC框架下开发经验者优先;
5、熟练掌握Ajax,jQuery,熟悉memcache,redis,mongoDB;
6、熟悉linux操作系统,熟练使用常用命令和工具;
7、良好的英语阅读能力,能适应全英文技术文档的开发项目;
8、具备很好的学习钻研能力,爱好编程这项工作,乐于学习新技术;
9、有大型网站开发经验者优先。