Scala开发者

15个月前全职
Capgemini

Capgemini

location 新加坡
unsaved
**职责**: - 在DevOps模式下有6-8年的敏捷工作经验 - 编写可扩展、健壮、可测试、高效且易于维护的代码 - 将软件需求转化为稳定的高性能软件,确保软件包和程序有良好的文档记录和合理的测试覆盖率 - 与其他内部技术团队和业务用户密切合作,进行调查、测试和部署 - 负责处理发布管理、提出变更请求并安排修复和增强功能的实施 - 与基础设施服务支持团队成员合作进行根本原因分析管理沟通和客户关系管理 - 确保所有生产变更都按照生命周期方法和风险指南进行 技术技能: - 理解非功能性需求,并能将其转化为功能性技术需求 - 对适当和有益的自动化充满热情 - 理解数据采集,开发数据集处理的知识和数据概念 - 理解复杂的转换逻辑,并将其转化为Spark代码或Spark SQL查询 - 能够使用Scala、Java在Apache Spark、Hadoop生态系统中编写可重用的代码,使用Spark Hive、HBase、YARN和Kafka处理Spark Core、Spark SQL和实时流数据集,使用Kafka、Spark Streaming、Unix Shell脚本编程,并了解TWS调度 - Cloudera分发框架、Jenkins或任何版本控制器 - 出色的理解技术生命周期以及构建大数据解决方案所需的概念和实践 - 能够理解和构建可重用的数据资产,具备Unix Shell脚本编程和TWS调度知识 - 在Unix环境中具有批处理脚本和命令的经验 - 最好具有分布式存储和计算技术的经验