我们正在寻找一位熟练的Databricks数据架构师,负责推动我们客户在Databricks平台上的数据架构战略、设计和实施。成功的候选人将在构建和维护健壮、可扩展和高性能的数据解决方案方面发挥关键作用,以支持我们业务的战略目标。合同期为9个月,有可能延长,位于悉尼北岸。
职责:
- 通过了解业务需求、当前系统和数据流动,开发和维护组织的基于Databricks的数据架构。
- 与利益相关者、数据工程师和业务分析师合作,收集需求并将其转化为Databricks平台上的技术解决方案。
- 使用Databricks设计和实施可扩展的数据模型、数据管道和ETL流程,以支持各种分析和运营需求。
- 优化和维护Databricks平台上数据解决方案的性能和稳定性,确保可靠性、效率和安全性。
- 提供Databricks最佳实践、配置和调优方面的专业知识,以最大限度地发挥平台的能力和优势。
- 领导和指导数据工程师团队,提供关于Databricks架构和开发最佳实践的指导和知识转移。
- 了解行业趋势、新兴技术和数据工程和架构的最佳实践,并利用这些知识不断改进我们的数据解决方案。
理想情况下,您应具备以下条件:
- 计算机科学、信息技术或相关领域的学士学位,硕士学位为佳。
- 数据架构师的经验,包括至少3年的Databricks架构和开发实践经验。
- 在Databricks、Apache Spark和相关技术上构建和优化数据管道和ETL流程的专业知识。
- 对基于云的数据平台,特别是Azure有深入了解,并熟练运用Databricks在这些环境中。
- 对大数据技术、数据仓库和数据建模概念有深入了解,以及对结构化和非结构化数据格式有经验。
- 熟练掌握Python、SQL、Scala或Java等编程和脚本语言,重点是数据操作和处理。
- 有Azure数据工厂和Power BI经验者优先考虑。
- 出色的沟通和协作能力,能够与跨职能团队有效合作,并向非技术人员传达复杂的技术概念。
- 具备领导和指导技能,能够指导和培养数据工程师团队实施Databricks数据解决方案。
请在下方申请,或致电Mark,电话:0438 198 849,了解更多详情。