高级数据工程师
数据科学/数据工程
全职
申请此职位
日期:2024年2月23日
地点:伦敦,英国
职位编号:REF035325W
职位类型:全职
职位描述和职责
这个角色将管理变革和运营需求,以提高Visa的数据管理能力,并使数据科学团队能够在业务各个领域中提供更好、更有影响力的项目。
我们对您的日常工作有什么期望
• 深入了解Visa的数据资产以及如何利用它们来支持公司各个部门的数据科学活动
• 在Spark、Python或HIVE中构建和维护高性能的ETL管道,处理交易和账户级别的数据,并在各种数据源中标准化数据字段,包括与技术、内部报告和其他功能团队对齐的数据质量和测试
• 设计、开发和维护可重复使用的数据资产,可以用于项目交付并组合成产品化解决方案
• 创建数据字典,设置/监控数据验证警报,并执行定期作业,如性能仪表盘、客户交付的预测模型评分
• 定义和构建技术/数据文档,并具备代码版本控制系统(如git)的经验。确保数据的准确性、完整性和一致性
• 与北美和其他全球地区的数据工程团队合作,生产和维护关键数据资产。
这是一个混合职位。混合型员工可以在远程和办公室之间交替工作。混合型角色的员工预计每周在办公室工作2-3天(由领导/现场决定),根据业务需求,通常要在办公室工作50%或更多的时间。
资格要求
必备资格:
• 扎实的关系建模(SQL)和编程技能(最好是Python)
• 使用Python、Hive、Scala编写和优化高效的SQL查询,处理大数据环境中的大数据集的高级经验。
• 使用Hadoop、Hive和Spark等大数据和分布式处理平台管理大规模数据集的经验
• 具备Unix/Shell的经验,接触过Airflow等调度工具。
• 长期战略思维和强大的问题解决能力
• 熟悉现代DevOps实践(包括Git和CI/CD)
优选资格:
• 具有数据管理或数据治理方面的专业经验
• 对AWS、Azure或GCP等云计算平台有功能性了解
• 支付或银行业背景
其他信息
Visa是一家平等就业机会雇主。符合资格的申请人将获得与种族、肤色、宗教、性别、国籍、性取向、性别认同、残疾或受保护的退伍军人身份无关的就业机会。Visa还将根据EEOC准则和适用的当地法律考虑有犯罪记录的合格申请人的就业机会。
申请此职位 返回职位列表