大 数据 解决 方案 负责人 工程师

纽约 16天前全职 网络
面议
职务: 大 数据 解决 方案 负责人 工程师 地点: 新泽西州 帕特森 经验: 12 年 以上 雇佣: 合同 面试 类型: 现场 或 网络摄像头 职位 概述 我们 正在 寻找 一位 高度 经验丰富 的 大 数据 解决 方案 负责人 工程师,负责 设计、实施 和 管理 大规模 数据 解决 方案。 理想 的 候选人 将 负责 领导 大 数据 平台 的 架构、开发 和 优化,确保 它们 满足 业务 需求 和 性能 标准。 此职位 需要 较强 的 技术 专业知识、领导 能力 和 从 概念 到 部署 推动 复杂 项目的 能力。 主要 职责 • 领导 使用 现代 技术 和 框架 的 端到端 大 数据 解决 方案 的 设计 和 实施。 • 架构 和 管理 大规模 数据 处理 管道,包括 ETL/ELT 工作流、数据 湖 和 数据 仓库。 • 确保 数据 质量、安全性 和 治理 标准 在 所有 平台 上 得到 维护。 • 与 利益相关者 合作,理解 业务 需求 并 将 其 转化 为 可扩展 的 数据 解决 方案。 • 评估、选择 和 实施 大 数据 工具、技术 和 框架,以 优化 性能 和 效率。 • 指导 和 带领 技术 团队,提供 最佳 实践 和 复杂 数据 挑战 的 解决 方案。 • 排查 和 解决 现有 大 数据 基础设施 中 的 性能 问题。 • 开发 和 维护 数据 架构、流程 和 标准 的 文档。 • 关注 大 数据、分析 和 云 平台 中 新兴 趋势 和 技术。 所需 技能 和 资格 • 教育: 计算机 科学、信息 系统 或 相关 领域 的 学士 或 硕士 学位。 • 经验: 至少 12 年 大 数据 工程 的 专业 经验,包括 在 大规模 数据 平台 上 的 实际 操作 经验。 • 技术 技能: • 精通 大 数据 技术,如 Hadoop、Spark、Kafka、Hive、HBase 或 类似 技术。 • 熟练 使用 Java、Scala 或 Python 等 编程 语言。 • 具备 AWS、Azure 或 GCP 等 云 平台 和 基于 云 的 数据 服务 的 经验。 • 对 数据 建模、ETL/ELT 过程 和 数据 仓库 概念 具有 深刻 理解。 • 熟悉 数据 治理、数据 安全 和 合规 要求。 • 软技能: • 较强 的 问题 解决 和 分析 能力。 • 优秀 的 领导 和 团队 管理 能力。 • 与 技术 和 非技术 利益相关者 协作 的 有效 沟通 能力。 • 能够 在 快节奏 的 环境 中 管理 多个 优先级 和 项目。