职位:具备SAS知识的Pyspark开发人员
主要职责:
- 分析和理解现有的SAS程序和数据集
- 设计和开发能够复制现有SAS程序功能的PySpark代码
- 优化PySpark代码以提高性能和可扩展性
- 测试和验证PySpark代码,确保其产生与原始SAS程序相同的结果
- 在迁移过程中识别和解决问题和差异
- 与数据工程师、数据科学家和业务利益相关者合作,定义和实施数据处理流程
• *要求**:
- 具备SAS编程和分析、Spark和AWS经验。
- 具备SQL和NoSQL数据库经验
- 熟练掌握Python编程技能,具备数据操作、数据摄入和数据分析经验。
- 具备分布式计算系统(如Hadoop、Spark或Databricks)经验
• *福利*
• 每月薪资:6500 - 8500新加坡元