高级数据工程师,精通Python和Snowflake - 现场工作@纽约市 - 仅限本地人

纽约 12天前合同 网络
面议
标题 - 高级数据工程师 地点 - 现场 @纽约市 - 需要本地人 合同期限 设计、构建和部署数据管道和后端服务,Snowflake 数据建模,以及丰富的数据工程经验。 职位概要 我们正在寻找一位高级数据工程师来设计、构建和部署可扩展的数据管道和后端数据服务。理想的候选人应具备丰富的 Snowflake 数据建模、现代数据工程实践经验,能够构建支持分析和商业智能的可靠、高性能数据平台。 主要职责 • 设计、构建和部署用于大规模数据处理的端到端数据管道。 • 开发和维护后端数据服务和 API 以支持数据消费。 • 执行 Snowflake 数据建模,包括模式设计、优化和性能调优。 • 实施结构化和半结构化数据源的 ELT/ETL 过程。 • 优化 Snowflake 中的数据存储、查询性能和成本效率。 • 确保数据质量、可靠性、安全性和管道治理。 • 与数据科学家、分析师和业务利益相关者合作以了解数据需求。 • 为数据管道实施监控、日志记录和警报。 • 支持数据工程部署的 CI/CD 管道。 • 记录数据流、架构和最佳实践。 所需技能和资格 • 10 年以上数据工程或相关职位的经验。 • 丰富的 Snowflake 实践经验(数据建模、性能调优、安全性)。 • 精通 SQL 和数据转换技术。 • 熟练使用 Python 和/或 Java 进行后端数据处理。 • 具有构建可扩展 ETL/ELT 管道的经验。 • 了解数据编排工具(Airflow、Azure Data Factory 或类似工具)。 • 具有云平台(AWS、Azure 或 Google Cloud Platform)的经验。 • 熟悉 CI/CD、Git 和 DevOps 实践。 • 较强的问题解决和沟通能力。 加分项 • 具有流技术(Kafka、Kinesis)经验。 • 接触过 dbt 或现代转换框架。 • 在大型企业或受监管环境中有经验。 • 了解数据治理和元数据管理工具。 此致, Sai Srikar 电子邮件: