您好,欢迎来到钮旅网。
搜索
您的当前位置:首页大数据架构师的基本职责 篇19

大数据架构师的基本职责 篇19

来源:钮旅网

  职责:

  1、负责大数据平台架构的评估、规划和设计 ;负责海量数据采集、处理及存储、应用方案的技术选型及架构实现;

  2、开发大数据平台的核心代码,负责大数据平台的搭建,完成系统调试、集成与实施,技术难题的解决,保证大数据产品的上线运行 ;

  3、根据业务需求持续优化数据架构,保证产品的可靠性、稳定性 ;

  4、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现 ,分享技术经验;

  5、负责大数据平台的架构评审,代码评审,上线评审;参与数据应用需求、设计、审核和评审;

  6、深入研究大数据相关技术和产品,跟进业界先进技术;

  任职资格:

  1.本科及以上学历,数学或计算机相关专业毕业,不少于5年的工作经验,具有扎实的计算机基础理论知识;

  2.有3年以上Hadoop、Spark、Hbase平台性能调优经验;熟悉sparkstreaming等实时计算技术

  3.熟悉hive、hbase、storm、mahout、flume、ElasticSearch、Spark、Kafka等,具备实际项目设计及开发经验;

  4.熟悉sparkstreaming等相关的实时计算技术;

  5.熟悉大规模数据挖掘、机器学习、自然语言处理、分布式计算中一项或多项技术,并具备多年的实际工作经验;

  6.熟悉主流关系型数据库(Oracle、MySql)、NoSql数据库,熟悉pl/sql编程;精通Linux操作系统,熟练使用Java;熟悉常用框架.如Spring、MyBatis等;

  7.具有较强的执行力,高度的责任感、很强的学习、沟通能力,能够在高压下高效工作;

Copyright © 2019- niushuan.com 版权所有

违法及侵权请联系:TEL:199 1889 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务