数据架构师

16个月前全职
Mane Consulting

Mane Consulting

location 悉尼
unsaved
我们正在寻找一位熟练的Databricks数据架构师,负责推动我们客户在Databricks平台上的数据架构战略、设计和实施。成功的候选人将在构建和维护健壮、可扩展和高性能的数据解决方案方面发挥关键作用,以支持我们业务的战略目标。合同期为9个月,有可能延长,位于悉尼北岸。 职责: - 通过了解业务需求、当前系统和数据流动,开发和维护组织的基于Databricks的数据架构。 - 与利益相关者、数据工程师和业务分析师合作,收集需求并将其转化为Databricks平台上的技术解决方案。 - 使用Databricks设计和实施可扩展的数据模型、数据管道和ETL流程,以支持各种分析和运营需求。 - 优化和维护Databricks平台上数据解决方案的性能和稳定性,确保可靠性、效率和安全性。 - 提供Databricks最佳实践、配置和调优方面的专业知识,以最大限度地发挥平台的能力和优势。 - 领导和指导数据工程师团队,提供关于Databricks架构和开发最佳实践的指导和知识转移。 - 了解行业趋势、新兴技术和数据工程和架构的最佳实践,并利用这些知识不断改进我们的数据解决方案。 理想情况下,您应具备以下条件: - 计算机科学、信息技术或相关领域的学士学位,硕士学位为佳。 - 数据架构师的经验,包括至少3年的Databricks架构和开发实践经验。 - 在Databricks、Apache Spark和相关技术上构建和优化数据管道和ETL流程的专业知识。 - 对基于云的数据平台,特别是Azure有深入了解,并熟练运用Databricks在这些环境中。 - 对大数据技术、数据仓库和数据建模概念有深入了解,以及对结构化和非结构化数据格式有经验。 - 熟练掌握Python、SQL、Scala或Java等编程和脚本语言,重点是数据操作和处理。 - 有Azure数据工厂和Power BI经验者优先考虑。 - 出色的沟通和协作能力,能够与跨职能团队有效合作,并向非技术人员传达复杂的技术概念。 - 具备领导和指导技能,能够指导和培养数据工程师团队实施Databricks数据解决方案。 请在下方申请,或致电Mark,电话:0438 198 849,了解更多详情。