1、大数据架构师工作的职责 大数据架构师工作的职责1 职责: 1、负责大数据工程平台架构的评估、规划和设计 2、开发大数据平台的核心模块代码,负责大数据平台的搭建,完成系统调试、集成与实施,保证大数据产品的上线运行 3、根据业务需求整合优化数据架构,保证产品的可靠性、稳定性 4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现 5、深入研究大数据相关技术和产品,跟进业界先进技术; 6、根据工程要求编写相关技术文档; 7、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审; 8、负责核心模块研发,负责大数据平台的搭建,完成系统调试、集成与实施; 9.负责关键功能
2、的开发,技术难题的解决,以及输出代码的关键把控; 2023.负责对使用关键技术的预研和选型,完成poc; 11.指导工程师完成开发工作,并能分享技术经验。 任职资格: 1、精通linux操作系统,熟练使用java; 2、3年以上大数据工程实战经验,两个工程的架构设计经验,熟悉hadoop、hbase、storm、spark、pig等开源框架,并熟悉其工作原理; 3、有hadoop、spark、hbase平台性能调优经验; 4、熟悉其它分布式存储相关技术,包括hdfs,hive、redis、mongodb、flume、kafaka、sqoop、zookeeper、elasticsearch等;
3、5、熟悉java开发常用框架.如spring、mybatis等; 6、熟悉关系型数据库如oracle及数据库编程。 7、能够根据工程情况安排人力、分配任务,具有较强的团队管理能力。 8、硕士以上学历,2023年以上的工作经验。 大数据架构师工作的职责2 职责: 1.负责设计企业级大数据平台的整体架构,从技术层面制定清晰的大数据产品与系统技术架构,并负责实现关键技术和产品。 2.负责设计具有创新价值的大数据底层平台、大数据上层应用系统等,带着团队完成有质变的技术解决方案。 3.负责组织同事研究行内最前沿的技术开展方向,突破现有的技术难题。 4.负责研究院对外工程合作协调与支持,编写工程建设方案及
4、后期工程建设支持。 任职要求: 1.硕士及以上学历,计算机相关专业。 2.java根底扎实,不少于8年的一线开发经验,精通springboot/mybatis/restfulapi的开发与管理.熟悉reactjs/angular/vue之一前端开发技术,熟悉maven或ant.,熟悉python语言开发加分。 3.不少于4年大数据的直接研发经验,精通hadoop/spark系统,有hands-on的架构设计、性能调优、开发经验。有mongodb、kafka、hbase/cassandra/storm/hive等系统的开发经验。 4.掌握分布式系统原理,对分布式存储、流式计算、消息队列中的一项或
5、多项有深入的理解和认识。 5.熟悉分布式系统的监控、运维、故障恢复,高可用原理和设计理念。 6.算法根底扎实,熟悉常见的数据结构,掌握大规模高并发访问、大数据开发等处理经验;熟练的linux系统,网络,内存和存储等方面知识。 7.必须要有千万级别的工程管理经验,包括但不限于前期需求沟通,建设方案编写,中期工程实施,进度汇报,后期工程维护。 大数据架构师工作的职责3 职责: 把控大数据系统及全公司的产品做技术选型和架构设计; 负责公司产品需求技术解决方案的编制设计工作,并能够将解决方案清晰地传达给工程组成员; 主导工程关键技术问题的攻关,协助工程管理对技术问题进行跟进; 协助解决具体研发过程中的
6、问题; 定期进行新技术研究和汇报; 对产品线进行技术方案支持,及客户、市场技术调研 任职要求: 1.全日制综合类大学本科及以上学历,计算机科学与技术、信息工程、大数据、通讯相关专业(如有特殊经历者酌情考虑); 2.拥有多年系统设计与开发工作经验,深刻理解计算机、互联网有关技术与理论、设计模式,深刻理解多线程、内存数据库、分布式系统、大数据相关的设计、架构规划、开发经验者优先; 3.深入理解各类技术与产品的原理与思想,有较强需求分析和技术设计与实现能力; 大数据架构师工作的职责4 职责: 1、正确理解业务需求,对需求进行工作量评估; 2、参与工程相关的需求、设计、投产手册等文档的编写; 3、根据
7、进度方案,完成所承担功能模块的设计、开发、单元测试、联调测试; 4、配合测试组修复代码缺陷,确保功能实现与代码质量; 5、负责所承担功能模块投产、部署,及上线后的日常维护; 6、完成工程经理或者架构师安排的其他工作; 任职资格: 1、本科以上学历,计算机相关专业,两年以上大数据开发经验; 2、熟悉linux环境,掌握shell或python; 3、熟练使用hadoop,hive,hbase,yarn,kafka,spark等大数据开发组件; 4、精通etl,数据仓库的设计和开发; 5、有大数据处理实战经验,熟悉整个大数据的完整处理流程,包括数据的采集、清洗、存储; 6、较强的动手能力和学习能力
8、,良好的沟通能力、团队协调能力; 7、具有银行、金融行业从业背景者优先。 大数据架构师工作的职责5 职责: 1.负责大数据根底平台、海量数据存储/处理分布式平台、数据分析系统架构设计和研发; 2.负责实时计算平台根底架构设计、部署、监控、优化升级; 3.制定工程/数据仓库设计及实现标准,指导设计研发和部署; 4.协助策略和算法团队工作,保障数据挖掘建模和工程化; 5.深入研究大数据相关技术和产品,跟进业界先进技术。 任职要求: 1.全日制本科及以上学历,5年以上软件和分布式系统研发经验,3年以上大数据系统架构经验; 2.精通hadoop/hbase/spark/storm/redis技术及其生态圈; 3.具备java/c+/scala等开发经验,熟悉数据挖掘和分析的策略与算法; 4.具备良好的系统分析能力、故障诊断能力; 5.有大数据策略、算法、可视化经验优先; 6、211/985重点学校毕业优先。