CCI正在积极寻找一名数据工程师-报告与数据分析,具有强大的金融数据管道开发背景,加入我们充满活力的伦敦办公室团队。候选人将在增强我们的报告与数据分析平台方面发挥重要作用,专注于设计、实施和不断改进我们的数据管理能力。CCI为那些对推动数据工程创新充满激情的个人提供了具有挑战性和有回报的环境。如果您在构建金融数据解决方案方面有成功的记录,并且希望产生重大影响,我们鼓励您申请这个令人兴奋的机会。
职责:
• 架构、开发和维护稳健可扩展的数据管道,确保数据的完整性和可用性,以进行分析和报告。
• 分析源数据,识别模式、异常和数据丰富的机会,确保全面理解以进行有效的数据建模。
• 设计和实施支持复杂财务分析的数据模型,整合数据质量措施,确保数据产品的准确性和可靠性。
• 执行持续的数据管理任务,包括数据映射、标准化和规范化,以促进一致的数据消费。
• 进行研究,了解数据管理、大数据、人工智能和供应商解决方案的最新趋势和最佳实践。
• 领导现有数据集、数据库和代码库迁移到现代可扩展技术堆栈。
• 监控数据加载、排除错误、建立高效的数据工作流程,并进行数据质量分析,以识别和解决系统问题。
• 积极管理供应商关系,并预测数据输入的变化,以保持数据产品的相关性。
• 与全球团队合作,了解和记录数据流、架构和功能要求,确保与业务目标的一致性。
资格:
• 计算机科学、工程学、数学、物理或相关领域的学士学位。
• 5年以上的数据工程经验,有能源商品或金融服务经验。
• 强大的分析能力,注重细节。
• 出色的沟通能力,能够与各级管理层进行互动。
• 能够在压力下表现出色,具有高度的动力和能量水平,并能够按照既定的截止日期管理多个任务。展示了成功管理项目的能力。
• 具备编程的专业知识,熟练掌握SQL和Python。
• 熟练使用Autosys和Airflow等编排工具,具备设计和管理自动化数据工作流的能力。
• 具备现代数据转换工具的实际经验,包括DBT(数据构建工具)、Azure数据工厂(ADF)和Databricks,展示了高效转换和处理大型数据集的能力。
• 具备扎实的代码库管理经验,深入了解CI/CD流水线流程、版本控制系统和代码部署和集成的最佳实践。
• 了解实施自动化测试和数据质量(DQ)框架,确保数据解决方案的可靠性和完整性。
• 具备使用Amazon Redshift的经验,展示了在基于云的数据仓库环境中管理和优化数据的能力。
• 擅长故障排除、优化数据流程和解决复杂的数据工程挑战。
• 熟悉商业智能工具Power BI和Tableau。