2023年戈登贝尔奖揭晓:Frontier超算获奖「量子级精度」材料模拟 <img src=""> 欢迎阅读AIGC动态 本文原题为:“2023戈登贝尔奖揭晓:Frontier超算「量子级精度」材料模拟获奖”,关键词包括量子、团队、精度、材料和缺陷。文章来源于《机器之心》,全文共4716字。 ACM戈登贝尔奖成立于1987年,被誉为超级计算... AI工具箱3年前
LLaMA微调显存需求减半,清华大学提出新型4比特优化器 欢迎阅读AIGC动态 原标题:LLaMA微调显存需求减半,清华提出4比特优化器 关键词:张量,状态,显存,精度,模型 文章来源:机器之心 内容字数:8553字 最近,清华大学的朱军、陈键飞团队提出了一种4比特优化器,用于神经网络训练,可以减少模型训练中的内存开销。这对于训练大型模型和微调过程对显存要... AI工具箱3年前
揭秘最新人工智能芯片技术:Nature报道 欢迎阅读AIGC动态 原标题:Nature:人工智能芯片! 关键词:芯片、报告、权重、精度、作者 文章来源:人工智能学家 文章字数:3664字 内容摘要:最新研究表明,拥有数十亿参数的人工智能(AI)模型在多项任务中表现出色,但它们在通用处理器(如图形处理单元或处理单元)中的效率有所不足。模拟内存计... AI工具箱3年前
混合精度下位置编码存在大坑,llama等主流开源模型相继受影响!百川智能提供修复方案 AIGC动态欢迎阅读原标题:混合精度下位置编码存在重大问题,llama 等主流开源模型纷纷受影响!百川智能提出修复方案关键词:位置、精度、表示、模型、问题文章来源:AI前线字数:8763字内容摘要:作者 | 百川智能 位置编码技术是一种能够让神经网络建模句子中 Token 位置信息的技术。在 Tra... AI工具箱3年前