谷歌推出超小型AI模型Gemma 3 270M
创始人
2025-08-18 07:12:50
0

谷歌LLC旗下的DeepMind人工智能实验室发布了迄今为止最小的模型之一——Gemma 3 270M,该模型仅包含2.7亿个参数。

这意味着它比大多数强大的前沿大语言模型要小得多,后者通常拥有数十亿个参数或控制其行为的内部设置。模型中的参数数量通常描述了其强大程度,但谷歌在开发Gemma 3 270M时选择了更加精简的方案,目的是让它能够直接在智能手机等低功耗设备上无需互联网连接即可运行。尽管如此,谷歌表示Gemma 3 270M仍然能够处理一系列复杂的特定领域任务,因为开发者可以快速对其进行微调以满足需求。

谷歌DeepMind员工AI开发者关系工程师Omar Sanseviero在X平台的帖子中表示,Gemma 3 270M是开源的,小到可以在"烤面包机"中运行,或者在掌上大小的树莓派计算机等设备上运行。

在宣布Gemma 3 270M的博客文章中,谷歌DeepMind团队解释说,该模型结合了1.7亿个"嵌入参数"和1亿个"Transformer块参数"。它还能够处理非常特定和罕见的Token,使其成为可以在特定任务和语言上进行微调的"强大基础模型"。

公司补充说,Gemma 3 270M的架构适合在指令遵循任务中实现"强劲性能",同时足够小,可以快速微调并部署在功耗有限的设备上。其架构基于更大的Gemma 3模型,旨在单个图形处理器上运行,并提供各种微调方案、文档和部署指南,适用于包括Hugging Face、JAX和UnSlot在内的开发者工具,帮助用户快速开始为该模型构建应用程序。

Gemma 3 270M的基准测试结果看起来相当令人印象深刻。在旨在测量AI模型正确遵循指令能力的IFEval基准测试中,该模型的指令调优版本获得了51.2%的分数。这大幅超越了类似大小的小型模型,如Qwen 2.5 0.5B Instruct和SmolLM2 135M Instruct的分数。谷歌指出,它也不远落后于一些较小的十亿参数模型。

话虽如此,Gemma 3 270M可能不是同类中最好的。谷歌的竞争对手之一,名为Liquid AI Inc.的初创公司回应称,该公司忽略了其上月推出的LFM2-350M模型,该模型在相同基准测试中获得了65.12%的分数,尽管只多了几个参数。

尽管如此,谷歌强调Gemma 3 270M的重点是能效,指出使用Pixel 9 Pro智能手机上INT4量化版本模型的内部测试。它表示在25次对话中,该模型仅使用了Pixel电池电量的0.75%。

因此,谷歌表示Gemma 3 270M是寻求部署设备端AI的开发者的绝佳选择,这对于需要隐私保护和离线功能的应用程序通常是首选。

谷歌强调,AI开发者需要为工作选择合适的工具,而不是简单地专注于模型大小来提高AI应用程序的性能。对于创意写作、合规检查、实体提取、查询路由、情感分析和结构化文本生成等工作负载,它认为Gemma 3 270M可以进行微调,以比数十亿参数大语言模型更高的成本效率有效完成工作。

在YouTube上发布的演示视频中,谷歌展示了一位开发者如何构建由Gemma 3 270M驱动的睡前故事生成器应用。它能够在网络浏览器中离线运行,并根据家长的提示为孩子创作原创故事。

该视频展示了Gemma 3 270M同时合成多个输入的能力,因此用户可以指定主角(如魔法猫)、设定(如魔法森林)、故事主题、情节转折(如角色发现一个神秘盒子,里面有东西)以及故事长度。一旦用户设置了这些参数,Gemma 3 270M就会快速根据用户输入生成连贯的原创故事。

这是设备端AI快速发展的绝佳例子,为甚至不需要互联网连接的新型应用程序创造了可能性。

谷歌表示,Gemma 3 270M可以在Hugging Face、Docker、Kaggle、Ollama和LM Studio上找到,提供预训练和指令调优版本供下载。

Q&A

Q1:Gemma 3 270M有什么特别之处?

A:Gemma 3 270M是谷歌DeepMind发布的超小型AI模型,仅有2.7亿参数,但能在智能手机等低功耗设备上离线运行。它结合了1.7亿个嵌入参数和1亿个Transformer块参数,虽然体积小但仍能处理复杂的特定领域任务。

Q2:Gemma 3 270M的性能表现如何?

A:在IFEval基准测试中,Gemma 3 270M获得了51.2%的分数,大幅超越同等大小的其他小型模型。在Pixel 9 Pro手机上的测试显示,25次对话仅消耗0.75%的电池电量,展现出优异的能效表现。

Q3:开发者如何使用Gemma 3 270M?

A:开发者可以在Hugging Face、Docker、Kaggle等平台获取该模型,支持快速微调以适应创意写作、情感分析、实体提取等特定任务。谷歌还提供了完整的文档、部署指南和各种开发工具支持。

相关内容

热门资讯

scr故障灯怎么解决 scr故... SCR故障灯亮起时,车主需要采取以下措施来解决问题: 1. 尿素故障灯亮的解决方法:如果车辆出现加速...
奥迪A4L选动感还是致雅 奥迪... 在豪华中型车市场中,奥迪A4L、奔驰C级和宝马3系是最受欢迎的三款车型。其中,奥迪A4L凭借其较高的...
第一辆电动车 第一辆电动车 第... 第一辆电动车的发明比汽油车早了40年,1834年美国人Tomas Davenport就发明了第一台直...
电动车电机锁怎么用 电动车电机... 电动车电机锁使用方法爱玛电动车的车把锁使用方法:首先,将车把向左转至死位,然后将钥匙插入锁孔中,并用...
cx5连接carplay教程 ... 马自达cx5的carplay连接方式有两种,一种是通过USB线连接,另一种是通过蓝牙连接。如果您选择...
开英菲尼迪是啥家庭 开英菲尼迪... 英菲尼迪是那些追求品味与个性,同时保持低调生活态度的小资家庭所钟爱的座驾。选择英菲尼迪的车主,往往是...
车载高德地图无法定位怎么办 车... 在使用车载高德地图导航时,很多车主可能会遇到gps信号弱的问题,甚至无法定位。那么,该如何解决这个问...
变速自行车能跑多快 变速自行车... 自行车变速是指自行车的变速系统,通过改变链条和齿轮的比例,使骑行者能够更轻松地骑行不同的路况,提高骑...
意大利为什么造车这么厉害 意大... 为什么意大利在汽车设计领域如此厉害? 意大利在二战中虽然名义上与德日两国同为轴心成员,但在战争中不仅...
新乐今天限号多少 新乐今天限号... 很抱歉,由于限号政策时常更新变动,我无法直接提供新乐今天具体的限号信息。为了获取最准确和即时的限号数...