大数据架构师岗位的主要职责概述

　　职责：

　　1、负责大数据平台及BI系统框架设计、规划、技术选型，架构设计并完成系统基础服务的开发;

　　2、负责海量埋点规则、SDK标准化、埋点数据采集、处理及存储，业务数据分布存储、流式/实时计算等应用层架构搭建及核心代码实现;

　　3、开发大数据平台的核心代码，项目敏捷开发流程管理，完成系统调试、集成与实施，对每个项目周期技术难题的解决，保证大数据产品的上线运行;

　　4、负责大数据平台的架构优化，代码评审，并根据业务需求持续优化数据架构，保证产品的可靠性、稳定性;

　　5、指导开发人员完成数据模型规划建设,分析模型构建及分析呈现，分享技术经验;

　　6、有效制定各种突发性研发技术故障的应对预案，有清晰的隐患意识;

　　7、深入研究大数据相关技术和产品，跟进业界先进技术;

　　【任职要求】

　　1、统计学、应用数学或计算机相关专业大学本科以上学历;

　　2、熟悉互联网移动端埋点方法(点击和浏览等行为埋点)，无埋点方案等，有埋点SDK独立开发经验者优选;

　　3、熟悉Hadoop,MR/MapReduce,Hdfs,Hbase,Redis,Storm,Python,zookeeper,kafka,flinkHadoop,hive,mahout,flume,ElasticSearch,KafkaPython等，具备实际项目设计及开发经验;

　　4、熟悉数据采集、数据清洗、分析和建模工作相关技术细节及流程

　　5、熟悉Liunx/Unix操作系统，能熟练使用shell/perl等脚本语言，熟练掌握java/python/go/C++中一种或多种编程语言

　　6、具备一定的算法能力，了解机器学习/深度学习算法工具使用，有主流大数据计算组件开发和使用经验者优先

　　7、熟悉大数据可视化工具Tableau/echarts

　　8、具有较强的执行力，高度的责任感、很强的学习、沟通能力，能够在高压下高效工作;