后端软件工程师,Python

14个月前合同
A Society Group, Inc.

A Society Group, Inc.

location 旧金山
unsaved
数据团队利用我们的自动驾驶车辆和运营数据来确定自主性和服务准备情况。我们为战略决策提供基础。您将帮助开发和实施我们的下一代数据管道,以确保在我们朝着自动移动服务的推出进行规模扩展时对我们的业务有清晰的了解。您将定义系统并构建管道,以使我们的公司能够以数据为先的文化进行开发和扩展。 职责 • 设计、构建和维护供我们团队使用的大规模数据管道平台 • 推动平台效率的提升,减少延迟并改善数据的新鲜度 • 通过改进的可观察性和关键指标支持数据驱动的工程决策 • 与工程团队合作,支持其数据管道的长期扩展 资格要求 • 5年以上的软件工程经验 • 熟练使用Python • 对分布式系统有深入的理解 • 较强的书面和口头沟通能力 • 在大规模数据密集型生产系统的构建和维护方面具有丰富经验 • 在关系型数据库和非关系型(NoSQL)数据库方面具有丰富经验 • 在基础设施即代码工具(如Terraform,...)方面具有丰富经验 • 在大规模流处理平台(如Kafka,Kinesis)方面具有经验 额外资格 • 在数据仓库平台(如Redshift,BigQuery,Databricks,...)方面有经验 • 在构建可扩展和易于维护的数据管道方面有经验 • 对AWS ECS和/或Kubernetes有经验 • 对Airflow等工作流管理器有经验 • 对大规模处理框架(如Spark,Hadoop,...)有经验 • 每日免费早餐和午餐 • 健康保险计划(医疗、牙科和视力) • 寿险(基本、自愿和意外死亡和残疾) • 带薪休假(年假、病假和法定假日) • 培训与发展 • 退休计划(401k,IRA)