首页 > 生活分享 > 免费教学 > 90/270亿参数,谷歌发布Gemma 2 AI大语言模型

90/270亿参数,谷歌发布Gemma 2 AI大语言模型

发布时间:2024-06-28 22:52:09来源: 15210273549

 6 月 28 日消息,谷歌公司昨日发布新闻稿,面向全球研究人员和开发人员发布 Gemma 2 大语言模型,共有 90 亿参数(9B)和 270 亿参数(27B)两种大小。

Gemma 2 大语言模型相比较第一代,推理性能更高、效率更高,并在安全性方面取得了重大进步。

谷歌在新闻稿中表示,Gemma 2-27B 模型的性能媲美两倍规模的主流模型,而且只需要一片英伟达 H100 ensor Core GPU 或 TPU 主机就能实现这种性能,从而大大降低了部署成本。

Gemma 2-9B 模型优于 Llama 3 8B 和其他类似规模的开源模型。谷歌还计划在未来几个月发布参数为 26 亿的 Gemma 2 模型,更适合智能手机的人工智能应用场景。

谷歌表示为 Gemma 2 重新设计了整体架构,实现卓越的性能和推理效率。IT之家附上 Gemma 2 主要特点如下:

性能优异:

27B 版本在同规模级别中性能最佳,甚至比两倍于其尺寸的机型更具竞争力。9B 版本的性能在同类产品中也处于领先地位,超过了 Llama 3 8B 和其他同规模的开放模型。

效率和成本:

27B Gemma 2 模型可在单个谷歌云 TPU 主机、英伟达 A100 80GB Tensor Core GPU 或英伟达 H100 Tensor Core GPU 上以全精度高效运行推理,在保持高性能的同时大幅降低成本。这使得人工智能部署更容易实现,预算也更合理。

跨硬件快速推理

Gemma 2 经过优化,可在各种硬件(从功能强大的游戏笔记本电脑和高端台式机到基于云的设置)上以惊人的速度运行。

在 Google AI Studio 中尝试全精度的 Gemma 2,在 CPU 上使用 Gemma.cpp 的量化版本解锁本地性能,或通过 Hugging Face Transformers 在配备 NVIDIA RTX 或 GeForce RTX 的家用电脑上进行尝试。

免费教学更多>>

岚图L3智能架构引热议!车主吐槽“变懒”,高管回应安全黑科技 3款新品重磅齐发 江淮1卡玩转全场景运输新价值 智能电动汽车强监管,沃尔沃全新XC90的安全叙事恰逢其时 上海车展的祛魅时刻到了 捷途奔着加长买,明年别墅临着海 蔚来最便宜新车开卖!不到12万起,预售价打了8折 哈弗枭龙MAX二代上市:混动四驱SUV能否重塑市场格局? 官方禁用“智驾”宣传,宝马的“保守”策略成了大赢家? 预算二十多万,想买辆既能家用又能越野的SUV?不妨看看方程豹豹 5 2024款丰田卡罗拉锐放车型介绍及落地价参考 这款电动轿车,高颜值,高性能,引领未来出行! 东风纳米01 330km 6.58万与吉利星愿 310km 6.98万,谁是性价比之王? 五菱宏光MINI:爆款小车,真香还是劝退?购车难题,你猜得到吗? 越野皮卡王者归来,新款丰田坦途,动力强劲,长城炮地位不保? 德系三强争霸:奔驰、宝马、奥迪谁才是真正的老大? 重磅!宝马将推出全新长轴5系曜夜版! 奔驰、宝马、奥迪、沃尔沃,传统豪华品牌2025新车大曝光 理想高管评豪华品牌周销量榜单:奔驰还是厉害 2025特斯拉Model Y Launch Series详细解析,豪华与性能兼备! 我校跃居2024中国大学海外网络传播力排名内地高校20强 512G新机1189元,vivo y200t 成LCD手机性价比之王 手机“国补”新政实施第4天,叠加商家新春优惠带动市民换机热 制作人承诺:《最终幻想7》重制项目第三部不会是索尼PS6独占 小米15 Pro使用感受分享,全能旗舰机非它莫属 华为Mate60 Pro还值得买吗?华为Mate60 Pro实测:依旧是市场的王者 华为近三年收入差距:22年6423亿,23年7042亿,24年是多少? 2024年SUV油耗排名:1~215名,荣放、探歌低于8个,最高是坦克500 试驾完新一代本田思域,才发现它比想象中更值得!真的\"卷\"成这样 广汽传祺S7实车现身,配冰箱彩电大沙发,搭500马力+续航超1000km 五菱:扎根人民,驱动创富与时代前行的民族之光