AWS数据管道开发人员（平台赋能）
地点：新泽西州纽瓦克（混合办公 – 每周3天现场）
聘用方式：合同
薪酬：W2每小时最高55美元或C2C每小时60美元
行业：金融服务/投资管理
居住要求：候选人必须目前居住在距离新泽西州纽瓦克可通勤的范围内
角色概述
我们正在寻找一位专注于AWS的开发人员加入一家大型投资公司的平台赋能团队。此角色专注于使用AWS服务设计、构建和优化基于云的数据馈送解决方案。团队通过低代码和配置驱动的方法使功能组能够生成操作数据馈送，重点在于可扩展性、可靠性和遵守服务级别协议。
主要职责
设计与开发
• 设计、开发、测试和部署支持数据管道的AWS组件
• 使用包括Lambda、S3、EventBridge和ECS Fargate在内的AWS服务构建解决方案
• 在多个数据域（例如合同、客户）中实现参数驱动的馈送生成逻辑
• 构建和维护基于PostgreSQL的CFGenDB模式以转换域数据
数据集成与转换
• 配置和管理从本地和云数据库中提取数据
• 使用配置文件应用转换规则，以确保为下游系统生成准确的馈送
自动化与部署
• 使用Jenkins等工具创建和维护CI/CD管道
• 确保部署符合安全、治理和监管标准
监控与故障排除
• 监控馈送生成工作流、Lambda执行和ECS任务
• 解决与数据验证、文件标记、访问权限和处理失败相关的问题
协作与文档
• 与功能团队、DBA和平台工程师合作验证部署并解决缺陷
• 制作和维护技术文档、部署程序和操作手册
• 向利益相关者清晰地传达进展、风险和问题
所需技能与经验
• 丰富的AWS服务实际操作经验，包括Lambda、S3、EventBridge和ECS Fargate
• 扎实的PostgreSQL和SQL数据建模和转换经验
• 熟悉Jenkins和Bitbucket等CI/CD工具
• 理解基础设施即代码概念
• 具备事件驱动架构和数据管道编排经验
• 在AWS环境中使用Python或Java的实际开发经验
• 具备云安全最佳实践的工作知识
软技能
• 强大的分析和问题解决能力
• 适应在敏捷环境中工作
• 清晰有效的书面和口头沟通能力
• 能够跨工程、数据和平台团队进行协作
