blog details

2024年6月28日

08

186

谷歌最强开源模型Gemma 2发布

6月27日晚,谷歌发布了新一代最强开源模型——Gemma 2。Gemma 2提供了90亿(9B)和270亿(27B)两种参数规模,分别训练了13T和8T tokens,且都拥有8192上下文窗口,可在Google AI Studio中使用。即将发布的26亿参数(2.6B)模型将小到可以在智能手机本地运行。Gemma 2在单个英伟达A100/H100 Tensor Core GPU或TPU主机上以全精度高效运行推理,大大降低了AI部署成本。

1. 卓越性能:Gemma 2的27B模型在其同类大小中提供了最佳性能,甚至可以竞争两倍以上大小的模型。9B模型也具有领先的性能,表现超过了Llama 3 8B及其他同类大小的开源模型。这对AI系统开发和AI模型训练提供了强有力的技术支持。

三大特点及其优势

2. 无与伦比的效率和成本节省:Gemma 2 27B模型设计用于在单个谷歌云TPU主机、英伟达A100 80GB Tensor Core GPU或H100 Tensor Core GPU上高效运行全精度推理,显著降低了成本,使得AI定制化开发更加易于实现且经济实惠。这对于教育行业AI解决方案和税务AI咨询等行业应用有重大意义。

6月27日晚,谷歌公布新一代最强开源模型——Gemma 2。

“新智元”

应用场景与区域发展

3. 各种硬件的快速推理:Gemma 2经过优化,可以在多种硬件上以令人难以置信的速度运行,包括功能强大的游戏笔记本电脑和基于云的设置。在Google AI Studio中以全精度试用Gemma 2,并在CPU上使用专业量化版本解锁本地性能。这一特点在浙江AI解决方案和杭州AI定制开发市场具备广阔的应用前景。

Gemma 2的发布不仅提升了大型语言模型开发的能力,还预示着企业AI开发的新纪元。通过这种强大的开源模型,企业能够实现更加高效和经济的AI解决方案,特别是在ChatGPT开发和Langchain框架下,一些具体的应用场景包括教培行业AI应用和税务行业知识问答AI。

如有侵权,请联系删除。

Related Articles