首页 > 生活分享 > 免费教学 > 90/270亿参数,谷歌发布Gemma 2 AI大语言模型

90/270亿参数,谷歌发布Gemma 2 AI大语言模型

发布时间:2024-06-28 22:52:09来源: 15210273549

 6 月 28 日消息,谷歌公司昨日发布新闻稿,面向全球研究人员和开发人员发布 Gemma 2 大语言模型,共有 90 亿参数(9B)和 270 亿参数(27B)两种大小。

Gemma 2 大语言模型相比较第一代,推理性能更高、效率更高,并在安全性方面取得了重大进步。

谷歌在新闻稿中表示,Gemma 2-27B 模型的性能媲美两倍规模的主流模型,而且只需要一片英伟达 H100 ensor Core GPU 或 TPU 主机就能实现这种性能,从而大大降低了部署成本。

Gemma 2-9B 模型优于 Llama 3 8B 和其他类似规模的开源模型。谷歌还计划在未来几个月发布参数为 26 亿的 Gemma 2 模型,更适合智能手机的人工智能应用场景。

谷歌表示为 Gemma 2 重新设计了整体架构,实现卓越的性能和推理效率。IT之家附上 Gemma 2 主要特点如下:

性能优异:

27B 版本在同规模级别中性能最佳,甚至比两倍于其尺寸的机型更具竞争力。9B 版本的性能在同类产品中也处于领先地位,超过了 Llama 3 8B 和其他同规模的开放模型。

效率和成本:

27B Gemma 2 模型可在单个谷歌云 TPU 主机、英伟达 A100 80GB Tensor Core GPU 或英伟达 H100 Tensor Core GPU 上以全精度高效运行推理,在保持高性能的同时大幅降低成本。这使得人工智能部署更容易实现,预算也更合理。

跨硬件快速推理

Gemma 2 经过优化,可在各种硬件(从功能强大的游戏笔记本电脑和高端台式机到基于云的设置)上以惊人的速度运行。

在 Google AI Studio 中尝试全精度的 Gemma 2,在 CPU 上使用 Gemma.cpp 的量化版本解锁本地性能,或通过 Hugging Face Transformers 在配备 NVIDIA RTX 或 GeForce RTX 的家用电脑上进行尝试。

免费教学更多>>

2024年合肥经开区管委会招聘考试公告(30名) 2024年安徽省医疗保障局直属事业单位招聘工作人员公告 2024年安徽省人力资源和社会保障厅直属事业单位招聘工作人员公告 2024年安徽水利水电职业技术学院招聘公告(20名) 2024年芜湖市妇幼保健计划生育服务中心(芜湖市妇幼保健院)招聘编内工作人员公告 2024年济南市南部山区管委会卫健系统事业单位招聘工作人员简章(16名) 2024年东营市东凯中学招聘劳务派遣教师简章 2024年山东第一医科大学第二附属医院招聘初级岗位人员简章(16名) 2024年重庆大学国际合作与交流处招聘公告 2024年重庆市渝北区事业单位面向渝北区服务期满且考核合格“三支一扶”人员公开招聘工作人员公告 2024年重庆医科大学招聘公告 2024年重庆大学电气工程学院劳务派遣员工招聘公告 2024年重庆市青木关中学招聘带编人员公告 2024年遵义市习水县第二人民医院招聘见习人员公告 2024年铜仁市碧江区铜仁外国语学校招聘公告 2024年六盘水市中医医院招聘编制外专技人员公告(12名) 2024年黔西南兴仁市选聘城市社区工作者公告(100名) 2024年黔西南普安县选聘城市社区工作者公告 2024年贵阳市息烽县中医医院招聘工作人员(编制外备案制)公告 2024年毕节黔西市招募青年就业见习人员公告(329名) 2024年黔东南岑巩县选聘城市社区工作者公告(67名) 2024年杭州师范大学附属医院招聘编外聘用人员公告 2024年台州市立医院招聘合同制工作人员公告 2024年舟山市定海区卫生健康系统招聘编外人员公告 2024年杭州建德市第一人民医院招聘编外人员公告(16名) 2024年台州市黄岩区体育事业发展中心招聘公告 2024年杭州市建德市第一人民医院编外人员招聘公告(16名) 2024年台州市黄岩区卫健系统面向硕士研究生及以上招聘卫技人员公告 2024年金华市永康市信访局编外工作人员招聘公告 2024年云浮市招聘教育人才公告(云浮市特殊教育学校)