大数据架构师岗位的职责内容
大数据架构师岗位的职责内容
大数据架构师负责大数据平台技术框架的选型与技术难点攻关,指导开发大数据平台的开发,保证大数据产品的上线运行。以下是我整理的大数据架构师岗位的职责内容。
大数据架构师岗位的职责内容1
职责:
1、大数据平台架构规划与设计;
2、负责大数据平台技术框架的选型与技术难点攻关;
3、能够独立进行行业大数据应用的整体技术框架、业务框架和系统架构设计和调优等工作,依据系统的业务需求,能够指导开发团队完成实施工作;
4、负责数据基础架构和数据处理体系的升级和优化,不断提升系统的稳定性和效率,为相关的业务供应大数据底层平台的支持和保证;
5、培育和建立大数据团队,对团队进行技术指导。
任职要求:
1、计算机相关专业的背景专业一类院校毕业本科、硕士学位,8年(硕士5年)以上工作阅历(至少拥有3年以上大数据项目或产品架构阅历);
2、精通相关技术,精通常见开源框架的架构,精通关系数据库系统(Oracle MySQL等)和noSQL数据存储系统的原理和架构;
3、精通SQL和Mapreduce、Spark处理方法;
4、精通大数据系统架构,熟识业界数据仓库建模方法及新的建模方法的发展,有DW,BI架构体系的专项建设阅历;
5、对大数据体系有深化相识,熟识Kafka、Hadoop、Hive、HBase、Spark、Storm、greenplum、ES、Redis等大数据技术,并能设计相关数据模型;
6、很强的学习Java,J2EE、分析和解决问题实力,可以快速驾驭业务逻辑并转化为技术方案,能独立撰写项目解决方案、项目技术文档;
7、具有较强的内外沟通实力,良好的团队意识和协作精神;
8、机器学习技术、数据挖掘、人工智能阅历丰富者优先考虑;
9、具有能源电力行业工作阅历者优先。
大数据架构师岗位的职责内容2
职责:
1、负责大数据仓库、数据集市的规划及实现,负责大数据中台的设计和核心开发工作;
2、负责数据基础架构和数据处理体系的升级和优化,不断提升系统的稳定性和效率,为公司的业务供应大数据底层平台的支持和保证;
3、大数据平台的数据采集、处理、存储以及挖掘分析的架构
实现;
4、探讨将来数据模型和计算框架的创新与落地,包括但不限于以下领域:大规模数据实时化、研发模式灵敏化、数据计算框架轻量化、数据模型组织方式业务化等方面,参加制定并实践团队的技术发展
路途
任职资格:
1、精通数据建模、数据标准管理、元数据管理、数据质量管理;
2、有作为技术负责人系统化解决问题的胜利案例;有海量数据实践阅历优先;
3、熟识目前正在发展的大数据分布式平台前沿技术的应用;包括但不仅仅限于:hadoop、flink、spark等;
计算机架构师证书4、性格主动乐观,诚信,能自我驱动,有较强的语言表达实力;具备剧烈的进取心、求知欲及团队合作精神;具有良好的沟通、团队协作、安排和创新的实力; 在数据业界有肯定的影响力优先,具有风控阅历背景的人优先;
5、具备独立的深度思索实力,给出结合实际状况的较为志向的技术解决方案。
大数据架构师岗位的职责内容3
职责:
1、对业务需求深化分析,从而进行大数据平台核心应用的架构设计、开发和技术支持;
2、规划业务应用系统和基础平台的技术架构,参加需求分析、建模、架构设计、技术决策以及具体设计;
3、把握困难系统的设计,确保系统的架构质量,编写核心部分代码;
4、带领团队攻克例如大数据量、高并发、高稳定性等带来的各种挑战及技术难关;
5、在大数据平台建设路途图指导下,进行架构实施和交付物投递,同时确保研发质量和方向的精确性;
6、进行团队技术的培训和梯队建设岗位要求;
任职条件:
1、本科或以上学历,计算机相关专业,8年以上研发阅历,3年以上大数据平台相关工作阅历;
2、精通Java开发技术,熟识Shell、Scala语言和PYTHON优先;
3、编程基础扎实,熟识I/O、多线程、集等基础框架和原理,熟识分布式、缓存、消息等机制;
4、熟识常用设计模式,代码评审规则,单元测试,持续集成;
5、熟识AWS云服务或阿里云服务;
6、熟识容器技术原理、生态系统,熟识Docker、Mesos、Kubernetes等容器系统、大规模容器资源调度系统、分布式应用生命周期。
大数据架构师岗位的职责内容4
职责:
1)负责大数据平台系统架构设计、核心开发工作(HadoopSpark 技术方向),基于业务场景设计最优的系统解决方案。
2)构架支持大数量级的数据的大数据平台系统,及相关监控,拓展系统设计及实现。
3)利用Hadoop、Spark等大数据技术对海量数据进行处理,支持BI和数据科学(建模)的应用实现。
4)对现有系统的进行架构深化分析及系统优化,进一步提升系统的性能及数据处理实力。
任职资格
1)统招本科或以上学历,计算机相关专业,5年以上软件开发阅历、3年以上大数据项目阅历。
2)具备较丰富的大数据平台相关构建,维护及调优阅历,有大数据量级下的大数据集市相关阅历。
3)具备较丰富的基于Hadoop或Hive或Spark等大数据处理项目阅历,具备肯定的数据挖掘阅历。
4) 具有阿里云的EMR(emapreduce)的阅历者优先考虑。
5)具有良好的业务理解、沟通和协作实力,具有较强的学习和总结实力。
6)优秀的团队合作精神、诚恳、勤奋、严谨,敢于接受挑战。
7)机器学习技术、数据挖掘阅历丰富者优先考虑。
大数据架构师岗位的职责内容5
职责:
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论