高级软件工程师 - Hadoop基础设施

14个月前全职
160K - 240K USD / 年 Bloomberg

Bloomberg

location 纽约
unsaved
团队 彭博社依靠数据运行!这是我们的业务,也是我们的产品。金融机构需要及时准确的数据来抓住机会和评估快速变动的市场风险,无论是最大的银行还是顶级对冲基金。 彭博社的应用团队面临复杂的挑战-大规模数据存储,低延迟检索,高容量请求以及分布式计算和存储环境下的高可用性。Hadoop基础设施的使命是提供一个由开源Apache Hadoop平台(HDFS、HBase、Hive、Oozie、YARN/Spark等)支持的多租户、可观察和高可用性基础设施,以支持彭博社的大规模数据应用。Hadoop基础设施团队管理着处理数万PB存储量的集群,分布在数千台运行数百亿次请求并每天运行数万个作业的服务器上,每天还会命中数十万个表。我们还为彭博社各个产品领域的应用提供关于Hadoop服务的标准方法和领域专业知识。 你是谁? • 你是一名专注且有动力的工程师,对构建和管理大规模分布式系统感兴趣,寻找一个紧密合作的团队。 • 你是一个创新的问题解决者,喜欢在多个角色中工作,并在快节奏的环境中蓬勃发展。 • 你希望产生重大影响,并为开源软件做出贡献。 我们相信你能够: • 推动来自多个产品领域的租户如何利用Hadoop基础设施服务实现他们的目标 • 提供并改进我们迁移和支持大规模数据和计算基础设施(数十PB)到更新版本的能力。 • 提高我们租户与强大的底层基础设施框架安全交互的用户体验。 • 理解并改进开源Apache Hadoop服务的可用性、可靠性和可扩展性,以优化彭博社应用团队的需求。 你需要具备: • 4年以上使用面向对象编程语言(Java)和相关技术(例如Spring/JMX/JDBC)的实际经验 • 计算机科学、工程或类似领域的学位或同等工作经验。 • 3年以上Hadoop生态系统和相关技术(HBase、Hive 3、HDFS、Spark、Oozie)的经验 • 熟悉现代开发方法和工具(Jenkins/Maven/Jira)。 • 扎实的Linux操作系统、Shell脚本、操作系统故障排除能力 • 强大的问题解决和沟通能力。 我们希望看到: • 分布式系统架构和系统设计经验。 • 对Ansible的了解。 • 与开源软件/社区合作的经验。 彭博社是一家平等机会雇主,我们重视公司的多样性。我们不以年龄、血统、肤色、性别认同或表达、遗传倾向或携带者身份、婚姻状况、国家或种族出身、种族、宗教或信仰、性别、性取向、性和其他生殖健康决策、父母或照顾者身份、身体或精神残疾、怀孕或产假、受家庭暴力害者身份或适用法律保护的任何其他分类歧视。彭博社为合格的残疾人士提供合理的调整/适应。如果您需要合理的调整/适应来申请工作或履行工作,请告诉我们。合理的调整/适应的示例包括但不限于改变申请流程或工作程序,以替代格式提供文件,使用手语翻译员或使用专门设备。如果您希望保密讨论此事,请发送电子邮件至AMER_recruit@bloomberg.net(美洲),EMEA_recruit@bloomberg.net(欧洲、中东和非洲)或APAC_recruit@bloomberg.net(亚太地区),根据您提交申请的地区。 薪资范围:每年160,000 - 240,000美元+福利+奖金 所引用的薪资范围基于公司在发布时的真诚信念。实际薪酬可能因地理位置、工作经验、市场条件、教育/培训和技能水平等因素而有所不同。 我们提供最全面、最慷慨的福利计划之一,并提供一系列的总体回报,可能包括绩效增长、激励报酬[仅限免税职位]、带薪假期、带薪休假、医疗、牙科、视觉、短期和长期残疾福利、401(k) +匹配、人寿保险和各种健康计划,等等。公司不直接为临时工/合同工和实习生提供福利。