高级数据工程师

15个月前全职
60K - 80K USD Ingram Micro UK Ltd

Ingram Micro UK Ltd

location 洛杉矶
unsaved
在一个真正相信自己所做的事情的公司工作是很有趣的! 英格拉姆微是全球品牌的背后,几乎覆盖了全球90%的人口。我们的市场覆盖范围、多样化的解决方案组合和数字平台Ingram Micro Xvantage™使我们与众不同。我们拥有大约27,000名员工致力于为全球超过161,000名客户和1,500名供应商合作伙伴提供服务。了解更多信息,请访问 英格拉姆微已在美国获得了Great Placeto Work Certification™!这一崇高的认可反映了我们对员工和企业文化的承诺。 加入我们的团队,您将以出人意料的方式推动技术的发展。让我们共同塑造未来 - 这将是一段有趣的旅程! 这个职位的基地是我们在加利福尼亚州尔湾的总部,有机会实行混合工作制。 高级数据工程师将与跨职能团队合作,支持我们的实时数据和实时数据流水线架构的构建和优化。高级数据工程师还将协助设计和开发技术解决方案,以满足产品需求。理想的候选人是一位经验丰富的实时数据流水线构建者和数据处理专家,喜欢为亚秒级延迟要求构建和优化数据系统。 高级数据工程师将在数据倡议方面支持一组工程师、软件开发人员、架构师和产品经理,并确保最佳的数据交付架构保持一致。他们必须能够自我管理,并且能够满足多个团队、系统和产品的数据需求。合适的候选人将对优化甚至重新设计英格拉姆微的数据架构以支持我们下一代产品和数据倡议的前景感到兴奋。 这个角色还可能与团队中的其他成员共同负责确保为每个系统变更请求进行适当的文档记录,并在将变更移入生产之前进行充分的变更控制、严格的测试和培训。这个职位将协助改善业务团队采用、支持和推广英格拉姆微能力的能力。 此外,这个职位还将为基于数据的业务解决方案和业务自助提供持续改进的倡议。 职责: 数据流设计和实施 • 创建和维护最佳的实时数据流水线架构。 • 收集和处理大规模、复杂、原始数据集(包括编写脚本、网络抓取、调用API、编写SQL查询等),以满足功能/非功能业务需求。 • 确定、设计和实施内部流程改进:自动化手动流程、优化数据交付、重新设计基础架构以提高可扩展性、SQL查询的性能优化、分析查询计划中的瓶颈、数据索引分区等。 • 使用SQL和“大数据”技术构建所需的基础架构,从各种数据源中以最佳的方式提取、转换和加载数据。 • 与业务、产品、工程和设计团队等相关方合作,协助解决与数据相关的技术问题并支持其数据基础设施需求。 • 为分析和工程团队成员创建数据工具,帮助他们构建和优化我们的产品。 • 数据管理需要提供实施和支持活动的呼叫支持。 • 运用您的设计、开发和交付世界一流的数据算法工件的技能,包括文档编写和编码;与基础架构开发协调数据算法开发。 • 与我们的工程和跨职能IT团队密切合作,将您的创新和算法集成到我们的产品中。 • 研究和应用涉及数据挖掘、统计分析和机器学习技术的高级算法和方法。 • 将非结构化数据处理成适合分析的形式 - 然后进行分析。 • 根据需要通过临时分析支持业务决策。 • 掌握第三方系统和接口,包括各方提供的数据、用于获取数据的API,以及与这些接口相关的限制。 • 在设计算法和业务逻辑以自动化商业流程流程方面具有出色的专业知识。 • 高效实施干净、易维护和可测试的数据解决方案,具有高可用性、高速性和容错性。 • 积极参与代码审查,支持整体代码库,并支持建立标准流程和框架。 • 参与敏捷项目执行,并提供准确的工作量估计。 • 运用出色的沟通技巧、创造力和实际知识,造福于我们的客户。 人际技巧 • 表现出对高绩效环境的个人承诺。 • 充分了解英格拉姆微的政策和流程,并按照...