职务: 大 数据 解决 方案 负责人 工程师
地点: 新泽西州 帕特森
经验: 12 年 以上
雇佣: 合同
面试 类型: 现场 或 网络摄像头
职位 概述
我们 正在 寻找 一位 高度 经验丰富 的 大 数据 解决 方案 负责人 工程师,负责 设计、实施 和 管理 大规模 数据 解决 方案。 理想 的 候选人 将 负责 领导 大 数据 平台 的 架构、开发 和 优化,确保 它们 满足 业务 需求 和 性能 标准。 此职位 需要 较强 的 技术 专业知识、领导 能力 和 从 概念 到 部署 推动 复杂 项目的 能力。
主要 职责
• 领导 使用 现代 技术 和 框架 的 端到端 大 数据 解决 方案 的 设计 和 实施。
• 架构 和 管理 大规模 数据 处理 管道,包括 ETL/ELT 工作流、数据 湖 和 数据 仓库。
• 确保 数据 质量、安全性 和 治理 标准 在 所有 平台 上 得到 维护。
• 与 利益相关者 合作,理解 业务 需求 并 将 其 转化 为 可扩展 的 数据 解决 方案。
• 评估、选择 和 实施 大 数据 工具、技术 和 框架,以 优化 性能 和 效率。
• 指导 和 带领 技术 团队,提供 最佳 实践 和 复杂 数据 挑战 的 解决 方案。
• 排查 和 解决 现有 大 数据 基础设施 中 的 性能 问题。
• 开发 和 维护 数据 架构、流程 和 标准 的 文档。
• 关注 大 数据、分析 和 云 平台 中 新兴 趋势 和 技术。
所需 技能 和 资格
• 教育: 计算机 科学、信息 系统 或 相关 领域 的 学士 或 硕士 学位。
• 经验: 至少 12 年 大 数据 工程 的 专业 经验,包括 在 大规模 数据 平台 上 的 实际 操作 经验。
• 技术 技能:
• 精通 大 数据 技术,如 Hadoop、Spark、Kafka、Hive、HBase 或 类似 技术。
• 熟练 使用 Java、Scala 或 Python 等 编程 语言。
• 具备 AWS、Azure 或 GCP 等 云 平台 和 基于 云 的 数据 服务 的 经验。
• 对 数据 建模、ETL/ELT 过程 和 数据 仓库 概念 具有 深刻 理解。
• 熟悉 数据 治理、数据 安全 和 合规 要求。
• 软技能:
• 较强 的 问题 解决 和 分析 能力。
• 优秀 的 领导 和 团队 管理 能力。
• 与 技术 和 非技术 利益相关者 协作 的 有效 沟通 能力。
• 能够 在 快节奏 的 环境 中 管理 多个 优先级 和 项目。