具有Tableau和Databricks技能的数据工程师

新加坡 7天前全职 网络
32.8万 - 43.7万 / 年
主要职责 数据库迁移支持 - 支持端到端数据库迁移活动,包括数据验证、转换和对账。 - 协助迁移支持大型可视化仪表板的数据源。 - 识别并解决迁移过程中出现的数据完整性、性能和兼容性问题。 数据工程和平台管理 - 使用Databricks和Jupyter Notebooks开发和维护基于SQL和Python的数据管道。 - 创建和管理Databricks计算集群和SQL仓库;配置Unity Catalog以进行数据治理和访问控制。 - 优化查询和数据模型,以确保迁移后的性能和可扩展性。 BI和仪表板支持 - 重新配置、测试和验证受数据库更改影响的Tableau仪表板。 - 与仪表板所有者合作,确保迁移后的数据准确性、性能和功能一致性。 - 支持与Tableau和SpotFire仪表板相关的临时分析和故障排除。 协作与文档 - 与ASM内的数据分析师、业务利益相关者和IT团队密切合作。 - 记录迁移步骤、数据映射和已知问题,以支持知识转移和审计准备。 - 遵循ASM数据治理、安全和合规标准。 - 与全球网络/数据库团队合作,识别、设计符合现有需求的关键数据元素。 所需技能和资格 技术技能(必需) - Tableau认证(必需;活跃或近期获得)。 - 精通SQL / MySQL用于查询、转换和验证。 - 拥有使用Python进行数据处理和自动化的实际经验。 - 使用Databricks的经验,包括:创建和管理计算集群和SQL仓库。 - 使用Unity Catalog的经验 - 使用Jupyter Notebooks的经验。 技术技能(优先/高度青睐) - 具有SpotFire经验(仪表板开发或支持)。 - 之前参与过数据库或平台迁移项目。 - 熟悉制造业、生物技术或受监管环境。