研究员 - 高效架构大语言模型

蒙特利尔 7天前合同 网络
面议
职位:研究员 - 大型语言模型(LLM)的高效架构 地点:蒙特利尔 职位描述 华为加拿大现有一个为期12个月的研究员合同职位空缺。 关于团队: 成立于2012年,诺亚方舟实验室已发展成为一个在学术界和工业界取得显著成就的研究组织。实验室的使命是推动人工智能及相关领域的发展,以造福公司和社会。通过有影响力的长期项目,旨在提升最先进的研究,同时将创新整合到公司的产品和服务中,包括LLM、强化学习(RL)、自然语言处理(NLP)、计算机视觉、AI理论和自动驾驶。 关于职位: - 提出和开发新的研究理念,以推进大型语言模型(LLM)的最先进技术。 - 参与应用研究项目,专注于实现长上下文LLM,包括高效架构、数据策划和后训练方法的工作。 - 通过设计和执行实验、分析结果和展示发现来交付端到端项目。 - 在顶级机器学习和自然语言处理(NLP)会议上发表研究。 - 监督和指导一小组研究人员和工程师完成项目并发表会议论文。 - 跟踪LLM和AI生态系统的进展,将新发展转化为团队的可操作见解。 职位要求 理想候选人: - 计算机科学、软件工程或相关领域的博士学位。 - 在顶级机器学习(ML)和自然语言处理(NLP)会议上以第一作者身份发表论文,如NeurIPS、ICML、ICLR、ACL、EMNLP或NAACL。 - 对NLP和大型语言模型(LLM)的基本原理和最先进的方法有深入理解,并具有扎实的机器学习理论基础。 - 精通现代LLM架构,包括变压器模型(如Llama、Qwen)和线性注意力模型(如Mamba、GLA)。 - 熟练掌握Python编程,精通PyTorch。 - 具有现代LLM训练和推理堆栈的经验(如Hugging Face Transformers/Accelerate、Megatron-LM、vLLM)。 - 出色的口头和书面沟通能力。 华为旨在为其在魁北克的员工提供法语工作环境。我们已采取措施避免为此职位要求使用法语以外的语言。然而,英语能力对于该职位至关重要,原因如下: 该职位需要定期与位于魁北克以外的同事沟通,而英语是办公室之间沟通的主要语言。此外,该职位涉及的任务属于人工智能的高度专业化领域,也需要具备英语知识。