大数据工程师-艾伦,德克萨斯州或加利福尼亚州科斯塔梅萨市 现场

16个月前全职
United Software Group Inc. - US South

United Software Group Inc. - US South

location 洛杉矶
unsaved
职位发布已成功更新 职位分享收件人电子邮件分享 取消 职位描述 • 分享 • 分享 • 电子邮件 • Facebook • 推特 • 领英 • 打印 大数据工程师- Allen, TX或Costa Mesa, CA 现场 [Costa Mesa, 92627], [Allen, 75013], 加利福尼亚州, 德克萨斯州 - 美国 | 发布日期- 08/31/23 申请 简单申请 概述 亲爱的专业人士,希望您一切顺利。请查看以下要求,并告诉我您的兴趣? 大数据工程师 地点:Allen, TX或Costa Mesa, CA 期限:长期 关键职责: 使用Python和Apache Spark进行大规模数据处理。 利用AWS服务如S3、EMR、EC2进行数据存储和处理。 使用Apache Airflow安排、监控和排除故障数据管道。 确保所有数据基础设施的数据质量、可观察性和完整性。 实施数据结构和算法来优化数据处理和管道。 编写和维护健壮的Python测试用例来验证数据处理任务。 监督数据版本控制、备份和恢复,以确保数据的弹性和可用性。 与跨职能团队合作,实施数据管理的最佳实践。 技能与资格: 在数据工程角色方面有丰富经验,专注于大规模数据处理。 熟练掌握Python编程语言。 熟练使用AWS服务,包括S3、EMR和EC2。 有PySpark和Apache Airflow的实际经验。 对数据处理优化有良好的理解和实际经验。 对数据结构和算法有很好的理解。 有编写Python测试用例来验证数据处理任务的经验。 深入理解数据质量保证、数据版本控制、备份和恢复。 熟悉Git或Bitbucket进行版本控制。 谢谢, 祝您有个美好的一天。 Vinod T 直线电话:469 591 1882 | 传真:866-764-1148 电子邮件:vinod.t@usgrpinc.com USG Inc. 总部:6000 Venture Dr, Ste C-D, Dublin, Ohio43017 www.usgrpinc.com 在此查看USG热门职位! 美国。 加拿大。 墨西哥。 哥斯达黎加 英国。 爱尔兰。 波兰。 印度 USG被INC. 5000认定为美国增长最快的私营公司。 USG是一家平等机会雇主。合格的申请人将根据联邦、州或适用的地方法律获得就业机会,不论种族、肤色、宗教、性别、年龄、残疾、军事地位、国籍或其他受保护特征。 要取消订阅此邮件,请在主题行中回复此电子邮件,并输入“取消订阅”或点击此处取消订阅。