数据工程师
W2合同
薪资范围：每年129,000美元至149,800美元
地点：加利福尼亚库比蒂诺 - 混合角色
职责和责任：
• 支持、设计、开发、测试、部署、维护和改进数据流水线。
• 设计和开发数据处理技术，包括自动化手动流程、数据交付、验证、质量和完整性。
• 从基础设施角度支持、测试、部署和维护AWS生态系统（混合云SDK升级、安全修复等）。
• 与客户和团队成员有效沟通，帮助解决设置中的挑战。
资格：
• 计算机科学、工程、信息系统或相关学位的学士或硕士学位是必需的。
• 在本地和云环境（S3、EKS）中设计和实施数据流水线的专业工作经验5年以上。
• 具有SQL/关系数据库的经验。
• 具有处理结构化和非结构化数据的经验。
• 具有Hadoop和相关技术（Spark、Kafka、Trino等）的分布式数据系统的经验。
• 有编程语言（Python和Scala）的背景。
• 有使用为前端应用程序提供API的数据库的经验。
• 有现代调度程序（Airflow）的经验。
• 必需具备Apache Hive或类似经验；优先考虑Apache Iceberg。
期望的技能和经验
数据工程师，Python，SQL，Spark，Scala，AWS，S3，EKS，Airflow，Kafka，Hive，Iceberg
在职位申请过程中，Bayside Solutions, Inc.可能会收集您的个人信息。请查阅Bayside Solutions, Inc.的CCPA隐私政策，网址为www.baysidesolutions.com。 
旧金山