职位要求
岗位职责
1.负责大数据基础平台的整体规划和架构设计, 参与需求分析、 架构设计、 技术决策以及详
细设计;
2.为现有大数据 Hadoop、 hive 平台提供性能调优、 架构优化重组, 解决系统中的关键问题
和技术难题;
3.把握基础业务复杂系统的设计, 确保系统的架构质量, 编写核心部分代码;
4.指导和培训工程师, 不断提升团队能力;
5.持续挑战新的技术方向, 攻克大数据量, 高并发, 高稳定性, 易用性等各种技术难点。
任职资格:
1.3 年以上大数据架构经验, 2 年团队管理经验, 熟悉 Hadoop、 Spark 并有丰富的开发经验,
熟悉 zeus 调度;
2.扎实的 Java、 Scala 语言基础, 对 JVM 运行机制有深入了解;
3.熟练使用 Linux/Unix 等操作系统,具备编写 shell 的能力;
4.熟悉 SQL 和 noSQL 数据库的设计和开发, 如: Oracle/Mysql/Hbase/Mongodb/Redis 等;
5.熟悉大数据相关组件搭建、 应用、 优化, 如:Mapreduce/Sqoop/Hdfs/Hive/Spark-Streaming/Solr 等;
6.熟练使用 ETL 工具进行数据抽取, 清洗, 转换, 关联等操作;
7.较强的人际关系能力、 有团队精神, 较强的执行与推动能力, 有一定抗压力。