数据摄取 SRE,数据平台 - USDS

洛杉矶 8天前全职 网络
1.1K - 2.7K / 年
位置: 洛杉矶 就业类型: 常规 职位代码: A259491 申请此职位 分享此列表: 职责 站点可靠性工程(SRE)结合了软件和系统工程,以构建和运行大规模、广泛分布的服务和基础设施。作为数据平台领域的站点可靠性工程师,您将有机会管理全球最大的数据平台之一的服务和基础设施,该平台直接支持TikTok应用。您需要确保数据、服务和基础设施的可靠性、容错性、高效可扩展性和成本效益。为了增强协作和跨职能合作伙伴关系,目前,我们的组织遵循混合工作时间表,要求员工每周在办公室工作3天,或由其经理/部门指示。我们定期审查我们的混合工作模式,具体要求可能随时更改。职责: - 全生命周期服务管理:参与并持续改进服务的全生命周期,从初始设计和开发到部署、持续运营和迭代优化。 - 确保可靠性和可扩展性:维护高度可靠、容错和可扩展的系统,确保数据、服务和基础设施满足业务需求,同时具备成本效益和效率。 - 性能故障排除:诊断和解决性能问题,包括分布式存储引擎和服务中的慢查询、资源争用和瓶颈。 - 集群扩展和数据增长:规划和实施策略,以有效扩展集群以适应不断增加的数据量,同时优化性能和成本效益。 - 文档和事件响应:开发和维护清晰的运行手册、标准操作程序(SOP),并领导可持续、无责备的事件响应实践,通过事后分析推动持续改进。 - 大数据系统设计:设计和实施健壮、可扩展和可扩展的大数据系统,支持核心业务和产品,确保数据流畅和系统集成。 - 值班轮换:参与生产事件的值班轮换,确保关键问题得到迅速解决,并在需要时在正常工作时间之外进行故障排除和解决问题。 - 事件所有权和分析:在值班时间内承担事件责任,必要时协调升级,并进行彻底的事后分析以确定根本原因并实施预防措施。 资格 最低资格 - 计算机科学、涉及软件或系统工程的相关技术领域的学士学位或同等实践经验。 - 具有用Java、Scala、Go、Python或类似语言编写代码的经验。强大的脚本技能(例如,Bash和Shell)用于自动化任务。 - 具有算法、数据结构、复杂性分析和软件设计的经验:对如何构建可扩展和高效的系统有扎实的理解。 - 基本SQL(MySQL、PostgreSQL或类似):对传统关系数据库如MySQL或PostgreSQL有深入理解。能够编写查询、执行连接、使用聚合函数并优化基本SQL查询。 - 系统和基础设施:了解Linux/Unix系统,因为大多数基础设施基于Linux。熟悉系统内部、网络和资源管理(内存、CPU、存储)。 - 具有Prometheus、Grafana和OpenTSDB等可观察性工具的实际经验:用于监控、日志记录和实时性能跟踪。 - CI/CD工具:熟悉持续集成/持续部署管道和工具(例如,Jenkins、GitLab CI)。 优先资格: - 具有Apache Spark和Apache Flink等分布式处理框架的实际经验:在大规模数据处理和流处理中使用这些框架的专业知识。 - 熟悉Apache Kafka和Apache Hive集成:在数据管道和流处理上下文中使用这些工具的经验。 - HiveSQL知识:对HiveSQL(Hive查询语言 - HQL)有扎实的理解,包括在基于Hadoop的系统(如Hive、HDFS或类似系统)中编写、优化和调试大数据集上的查询的能力。 - HiveSQL与Kafka流集成:在将HiveSQL与Kafka流或Kafka Connect集成进行实时数据处理方面的知识和经验 - 具有大规模运行生产级服务的经验:了解云原生技术、网络和存储管理,以支持高可用性和大规模环境。 - 开发工具和API的经验:减少系统管理中的手动干预,提高自动化和运营效率。 - 在设计、分析和故障排除大规模系统方面的专业知识:具有Hadoop、Spark、Hive、Presto、Kafka、Flink或类似解决方案的经验是一个强大的加分项。 申请此职位的候选人必须被合法授权在美国工作。此职位不符合签证赞助或支持的资格。 职位信息 [为薪酬透明度]薪酬说明(年) 在所选城市,此职位的基本工资范围为每年$137750 - $337250。 薪酬可能会因多种因素而在此范围之外变化,包括候选人的资格、技能、能力和经验以及地点。基本工资是补偿和认可员工工作的整体套餐的一部分,此角色可能有资格获得额外的酌情奖金/激励和限制性股票单位。 福利可能因就业性质和国家工作地点而异。员工从第一天起即可获得医疗、牙科和视力保险,享有公司匹配的401(k)储蓄计划、带薪育儿假、短期和长期残疾保险、生命保险、健康福利等。员工每年还享有10天带薪假期、10天带薪病假和17天带薪个人时间(入职时按比例分配,随任期增加)。 公司保留随时更改或修改这些福利计划的权利,恕不另行通知。 对于洛杉矶县(未合并)候选人: 符合条件的申请人将根据所有联邦、州和地方法律,包括洛杉矶县雇主公平机会条例和加利福尼亚公平机会法案,考虑有逮捕或定罪记录的就业。我们公司认为,犯罪历史可能对以下工作职责产生直接、负面和消极的关系,可能导致撤回有条件的录用通知: 1. 与内部/外部客户和/或同事互动并偶尔进行无人监督的接触; 2. 适当处理和管理机密信息,包括专有和商业秘密信息以及访问信息技术系统;以及 3. 运用良好的判断力。 关于USDS TikTok是短视频移动视频的领先目的地。我们的使命是激发创造力并带来快乐。美国数据安全(“USDS”)是TikTok在美国的子公司。这个新的安全优先部门的创建是为了加强对我们的数据保护政策和内容保证协议的关注和治理,以确保美国用户的安全。我们的重点是提供对TikTok平台和美国用户数据的监督和保护,以便数百万美国人可以继续转向TikTok学习新知识、谋生、表达创造力或获得娱乐。USDS内的团队每天都在履行这一承诺,涵盖信任与安全、安全与隐私、工程、用户与产品运营、公司职能等领域。 数据安全声明 此角色需要能够处理和支持旨在保护敏感数据和信息的系统。因此,此角色将受到严格的国家安全相关筛选。 为什么加入我们 激发创造力是TikTok使命的核心。我们的创新产品旨在帮助人们真实地表达自己、发现和连接——而我们的全球多元化团队使这一切成为可能。我们共同为我们的社区创造价值,激发创造力并带来快乐——这是我们每天努力实现的使命。 我们努力与优秀的人一起做伟大的事情。我们以好奇心、谦逊和在快速发展的科技公司中产生影响的愿望为指导。每一个挑战都是学习和创新的机会,作为一个团队。我们具有韧性,并接受挑战。通过不断迭代和培养“始终如一”的心态,我们为自己、公司和用户实现了有意义的突破。当我们共同创造和成长时,可能性是无限的。加入我们。 多样性与包容性 TikTok致力于创造一个包容的空间,让员工因其技能、经验和独特视角而受到重视。我们的平台连接来自全球各地的人,我们的工作场所也是如此。在TikTok,我们的使命是激发创造力并带来快乐。为了实现这一目标,我们致力于庆祝我们的多样化声音,并创造一个反映我们所接触的众多社区的环境。我们对此充满热情,希望您也是如此。 USDS合理便利 USDS致力于在我们的招聘过程中为残疾、怀孕、真诚持有的宗教信仰或其他受适用法律保护的原因的候选人提供合理的便利。如果您需要帮助或合理的便利,请通过https://tinyurl.com/USDS-RA与我们联系。 申请此职位