大数据架构师工作职责
明确工作职责，员工可以更加专注于自己的工作，减少分心和失误。优秀的大数据架构师工作职责要怎么写？下面给大家整理大数据架构师工作职责，希望对大家能有帮助。
大数据架构师工作职责篇1
职责:
1、负责大数据仓库、数据集市的规划及实现，负责大数据中台的设计和核心开发工作;
2、负责数据基础架构和数据处理体系的升级和优化，不断提升系统的稳定性和效率，为公司的业务提供大数据底层平台的支持和保证;
3、大数据平台的数据采集、处理、存储以及挖掘分析的架构实现;
4、研究未来数据模型和计算框架的创新与落地，包括但不限于以下领域：大规模数据实时化、研发模式敏捷化、数据计算框架轻量化、数据模型组织方式业务化等方面,参与制定并实践团队的技术发展路线
任职资格:
1、精通数据建模、数据标准管理、元数据管理、数据质量管理;
2、有作为技术负责人系统化解决问题的成功案例;有海量数据实践经验优先;
3、熟悉目前正在发展的大数据分布式平台前沿技术的应用;包括但不仅仅限于：hadoop、flink、spark等;
4、性格积极乐观，诚信，能自我驱动，有较强的语言表达能力;具备强烈的进取心、求知欲及团队合作精神;具有良好的沟通、团队协作、计划和创新的能力;在数据业界有一定的影响力优先，具有风控经验背景的人优先;
5、具备独立的深度思考能力，给出结合实际情况的较为理想的技术解决方案。
大数据架构师工作职责篇2
职责：
1.能够带领技术人员基于hadoop平台进行海量数据应用系统开发;
2.负责结构化和非结构化数据的解析和清洗,海量数据查询和报表展现;
3.负责超大规模数据平台的搭建、维护和优化;
4.负责大数据采集、存储框架研究，参与在线或离线数据存储模型设计;
5.负责大数据平台新技术的开发使用和性能优化，测试。
任职资格：
1.计算机相关专业本科及以上学历;
2.熟悉hadoop相关各种开源项目，比如HDFS/Hive/Hbase等有实际应用。(5年以上开发经验者优先);
3.两年以上熟练编写mapreduce代码经验，有三年以上网络日志分析、ETL经验。熟悉日志分析框架chukwa,flume,scribe者优先;
4.两年以上海量数据存储的安装部署、优化、二次开发经验，对大规模数据存储、传输、处理等有丰富的经验;
5.在数据挖掘、数据密集型处理、分布式计算、网格计算领域有深入理论基础;
6.具有较强的文档撰写能力，较强的团队精神和合作精神，对工作有热情，能承受压力。
大数据架构师工作职责篇3
职责：
1、负责spark,hadoop,flink等开发和优化。
2、参与前期需求沟通和分析，以产品化开发的思维，完成需求分解和数据架构设计。
3、与研发和数据科学家合作保证产品定义清晰，按时完成产品上线。
4、能够洞察市场状况，与各部门合作转化为基于大数据挖掘的新策略或方案.
5、主动创造和发掘新的基于大数据挖掘产品商业模式.
任职要求：
1、全日制本科及以上学历，计算机软件相关专业，5年以上开发经验，3年以上架构经验
2、精通hadoop/MapReduce/Spark/Hbase/Flink/Hive/R/Mahout等分布式数据存储和分布式计算平台原理，流式计算开发，有开源二次开发经验者优先。
3、精通大数据挖掘、机器学习.熟练掌握Java/Perl/Python至少一种编程语言。
4、具有数据挖掘和分析、机器学习等项目实施相关经验者优先;
5、良好的跨部门沟通合作能力，解决不同观点能力并取得结果。具备敏锐的互联网产品理解力，学习能力和逻辑思维能力强;
6、较强的自我驱动力、推动和协调能力，强烈的责任心和团队合作精神;
大数据架构师工作职责篇4
职责：
1、数据分析软件平台架构搭建
2、负责深度学习核心框架或高性能后台服务系统的架构设计工作，包括系统总体规划、架构设计、系统分析、软件实现、性能优化;
3、指导开发人员开发，并解决系统出现的问题，理解物业需求;
4、制定开发计划和控制开发进度，负责指导研发团队开展设计工作;
任职要求：
1、硕士以上，计算机或先关专业;
2、5年左右软件开发经验，含3年以上系统分析、设计经验，有大型软件项目大型软件项目;有中大型互联网企业数据库架构设计及管理经验，
3、具备良好的组件级建模能力，熟悉HTTP、TCP等协议
4、熟练使用UML进行软件架构设计，至少精通EA，RATIONAL，VISIO等一种设计工具.
5、精通至少一种编程语言，熟悉Linux相关技术，能独立在上面进行开发、测试和部署
6、深入理解数据库、数据仓库、大数据、分布式体系架构和关键技术
大数据架构师工作职责篇5
职责：
1.深刻理解政府行业业务模式，构建政府行业的数据模型，制定公司大数据技术发展路线;
2.对接业务研究和技术部门，主动搜集和转化需求，组织数据中心业务开发，进行数据相关产品需求分析和设计;
3.搭建数据仓库，研发数据库管理系统，搜集、提取、处理业务积累的海量数据，开展数据分析和挖掘;
4.根据公司战略和发展需要，规划数据中心重点工作和任务;落实部门人员、事务管理，开展跨部门、跨地区协作，协助对外交流与合作。
职位要求：
1.5年以上相关工作经验，有团队管理和项目管理经验者优先;
2.了解政府运作机制，掌握财政行业知识，有电子政务行业经验者优先;
3.熟练掌握使用Java或Python,精通数据库查询语言如SQL，Oracle等,在机器学习模型和算法方向有应用经验者优先;
4.具备数据中心产品策划整体思维，有大数据处理、分析、挖掘经验者优先;
5.逻辑思维严密，具备业务抽象、分解和标准化的能力，口头和书面表达优秀;
6.有较强的大局意识和良好的团队合作意识，富有领导力，具备优秀的人际交往和沟通能力。
大数据架构师工作职责篇6
职责：
1、负责大数据平台的架构设计、核心代码开发等任务;根据项目要求编写相关技术文档;
2、负责大数据平台的架构评审，代码评审，上线评审;参与数据应用需求、设计、审核和评审;
3、负责核心模块研发，负责大数据平台的搭建，完成系统调试、集成与实施;
4、负责建立和维护大数据平台技术标准规范，指导开发人员编写代码;
任职要求：
1、本科及以上计算机相关专业毕业;
2、精通离线和实时数据处理流程，掌握离线数据处理框架hive、impala、spark-sql等，掌握实时数据处理常用技术工具，包括Storm、SparkStreaming等;
3、熟悉大数据技术生态圈，精通大数据技术架构，有大数据平台构建经验;
4、掌握常见数据流接入工具，包括Flume、kafka等;
5、熟练掌握基本的Linux操作系统和某种脚本语言编程(如Shell等);
6、掌握一种或以上实时处理语言，如JAVA、SCALA、PYTHON等，有SCALA经验者优先;
7、有实际大规模数据(TB级以上)处理经验优先;
大数据架构师工作职责篇7
职责：
负责公司大数据产品架构的设计与实现;
配合大数据产品经理完成产品的快速研发与交付;
负责大数据产品架构的持续优化设计;
负责大数据产品核心组件设计;
负责大数据相关数据架构规划、数据建模、数据库设计以及大数据产品研发工作;
为应用开发团队提供技术支撑。
任职要求：
本科及以上学历，3年以上的大数据开发经验、
2年以上大数据架构设计经验;
丰富的JAVA研发经验，精通JAVA，熟悉PythonScala等编程语言;具备深厚的分布式系统或数据库系统的理论基础，熟悉分布式计算系统的工作机制，具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;
熟悉整个大数据的完整处理流程(数据的采集、清洗、预处理、存储、分析挖掘、机器学习和数据可视化);
精通各种大数据相关技术体系：Hadoop、Spark、Storm、ElasticSearch、Kafka;
有数据挖掘、机器学习相关应用或研究背景;
沟通能力较好，积极主动意识较强，责任心较强。
大数据架构师工作职责篇8
职责：
1、负责规划大数据平台及应用产品的需求和技术方案设计;
2、负责数据对接和对外服务设计、开发和维护，并能保证质量和性能;
3、负责基于大数据平台的应用设计、开发和维护;
4、能从系统全局和各子系统的角度思考可能存在的问题，并提出改进方案建议;
任职要求：
1、大学本科6年以上工作经验，计算机相关专业。
2、至少4年以上的Java开发经验，3年以上大数据应用系统的开发和设计经验。
3、熟悉Hadoop生态圈技术体系，对离线计算、内存计算和流式计算均有深刻理解，如Hadoop、Storm、Spark三个中的任意二个，能进行平台和组件优化。
4、精通Hive、HBase仓库设计，深刻理解MR运行原理和机制，能进行以提供高任务执行效率的优化。
5、精通Java开发，熟悉JVM调优，对GC有深刻理解。
6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相关技术，能进行hbase可靠性诊断和维护。
7、快速研究和学习技术能力。