首页 > 生活分享 > 免费教学 > 90/270亿参数,谷歌发布Gemma 2 AI大语言模型

90/270亿参数,谷歌发布Gemma 2 AI大语言模型

发布时间:2024-06-28 22:52:09来源: 15210273549

 6 月 28 日消息,谷歌公司昨日发布新闻稿,面向全球研究人员和开发人员发布 Gemma 2 大语言模型,共有 90 亿参数(9B)和 270 亿参数(27B)两种大小。

Gemma 2 大语言模型相比较第一代,推理性能更高、效率更高,并在安全性方面取得了重大进步。

谷歌在新闻稿中表示,Gemma 2-27B 模型的性能媲美两倍规模的主流模型,而且只需要一片英伟达 H100 ensor Core GPU 或 TPU 主机就能实现这种性能,从而大大降低了部署成本。

Gemma 2-9B 模型优于 Llama 3 8B 和其他类似规模的开源模型。谷歌还计划在未来几个月发布参数为 26 亿的 Gemma 2 模型,更适合智能手机的人工智能应用场景。

谷歌表示为 Gemma 2 重新设计了整体架构,实现卓越的性能和推理效率。IT之家附上 Gemma 2 主要特点如下:

性能优异:

27B 版本在同规模级别中性能最佳,甚至比两倍于其尺寸的机型更具竞争力。9B 版本的性能在同类产品中也处于领先地位,超过了 Llama 3 8B 和其他同规模的开放模型。

效率和成本:

27B Gemma 2 模型可在单个谷歌云 TPU 主机、英伟达 A100 80GB Tensor Core GPU 或英伟达 H100 Tensor Core GPU 上以全精度高效运行推理,在保持高性能的同时大幅降低成本。这使得人工智能部署更容易实现,预算也更合理。

跨硬件快速推理

Gemma 2 经过优化,可在各种硬件(从功能强大的游戏笔记本电脑和高端台式机到基于云的设置)上以惊人的速度运行。

在 Google AI Studio 中尝试全精度的 Gemma 2,在 CPU 上使用 Gemma.cpp 的量化版本解锁本地性能,或通过 Hugging Face Transformers 在配备 NVIDIA RTX 或 GeForce RTX 的家用电脑上进行尝试。

免费教学更多>>

那些年惊艳无比的十部手机,你用过哪几部? 目前公认“完美”的4款手机,低价还有旗舰配置,几乎“零差评” 双11入手了TCL智能锁!一家人用了31天,聊聊细节体验 # 摩托罗拉奖励:向未来进发的创新之路 智领兴时代 中兴通讯2025年度全球合作伙伴大会召开 索尼MDR-M1深度评测:一款向市场「妥协」的专业监听耳机 12月起这些小米设备将升级澎湃OS 2 含小米11和红米13 2024年,iQOO、真我以及荣耀三家的千元机,到底怎么选? 手游玩家如何拯救游戏沉浸感?iQOO 13都替你想好了 极具性价比手机!华为nova 13系列持续热销,高颜值强体验获赞无数 小天才、小米、vivo、荣耀、OPPO、传音亮相维信诺F1发布仪式 OPPO不讲武德,骁龙7Gen3+5500mAh+100W,卖到了1349元 2024年第三季度紧凑型MPV质量排行共有8款车型上榜,其中平均值(含平均值)以上共有5款车型,平均值以下共有3款车型。平均值(含平均值)以上的车型包括广汽传祺M6、上汽大众途安、上汽大通MAXUS G50、五菱汽车佳辰、东风风光380;平均值以下的车型包括五菱汽车凯捷、吉利汽车嘉际,排行最后的车型是海马7X。 13.78万元起,睿蓝8七座纯电MPV上市 马自达上硬菜!爆258马力,配8155芯片+索尼音响,家用值得入手? 沃尔沃汽车:正就可能剥离领克股份进行讨论 78790美元起售,配双电机+615匹马力,全新凯迪拉克Vistiq亮相 雷克萨斯销售:2025款ES三天后上市!工厂照曝光,造型接受吗 全新阿斯顿·马丁Vanquish,售价499.80万 为什么旗舰保时捷也要减配碳轮碳杠 保时捷推出2025款Taycan GTS和入门级的Taycan 4 163.3万起!新款保时捷双车国内首发亮相,颜值更亮眼,来看看升级了哪些地方… 布加迪Mistral以453.9km/h创全球敞篷跑车最速纪录 优惠后起售价仅9.98万,配2.0L引擎,日产逍客·荣誉值得买吗? 8座的丰田大汉兰达正式亮相,造型像RAV4,提供三种动力,配四驱 从途观到途观L Pro,上汽大众SUV进阶之道 2024广州车展 | 探岳L正式亮相 尺寸升级 3块屏+3套动力 搭载大疆智驾 9款SUV荣获2024中国汽车质量奖——车型奖! 星瑞再获A级燃油家轿市占率第一,合资产品精神要紧绷了 全新亚洲龙升级又降价,省油耐用,一公里才3毛!真香警告!