星爆开发者/数据工程师

纽约 9天前合同 网络
面议
标题:Starburst开发人员/数据工程师 地点:威尔明顿-DE / 拉瑟福德-NJ / 泽西市-NJ / 坦帕-FL / 纽约市-NY / 普莱诺-TX / 奥斯汀-TX 混合模式:(每周3天在办公室工作,2天在家办公) 职位描述 作为一名Starburst开发人员,您将负责利用Starburst企业平台,通过集成和分析各种数据源(如Oracle、MS SQL、MongoDB、Amazon S3和其他企业数据源)生成全面的分析。通过确保我们数据分析平台的最佳性能,您的专业知识将在分析、报告、API服务和数据驱动决策中发挥关键作用。 职责: • 设计、开发和维护Starburst数据管道和工作流,以集成和分析来自Oracle、MSSQL、MongoDB(复杂集合)、Hive、Amazon S3和企业数据源的各种数据 • 与数据工程师、领域产品负责人、分析师和其他利益相关者合作,了解数据需求并在SEP上开发最佳解决方案 • 优化Starburst查询、配置和性能,以确保高效的数据处理和检索 • 编写和维护数据管道、配置、调优参数和流程的详细文档,以便未来维护 • 排查和解决与数据集成、权限和性能相关的问题 • 参考上游领域数据模型设计适当的数据集成 技术技能: • 3年以上作为Starburst开发人员的经验,整合各种关系型和No-SQL源,包括复杂的MongoDB集合 • 熟悉数据集成、ETL处理和数据仓库概念 • 必须具备MS SQL Server/ Oracle、MongoDB、S3和Hive的基本(实际操作)知识和理解 • 接触过数据建模——维度/报告、数据仓库和事务性用例(物理和逻辑建模) • 了解报告和查询工具及实践 教育背景: • 学士学位/大学学位或同等经验