Meta释放Llama 4,这是一种新的旗舰AI模型

Meta在其Llama家族中发布了新的AI模型Llama 4的系列 - 星期六,不少于

Meta释放Llama 4,这是一种新的旗舰AI模型

总共有四个新型号:Llama 4 Scout,Llama 4 Maverick和Llama 4 Emboth。 Meta说,所有这些都接受了“大量未标记的文本,图像和视频数据”的培训,以使它们“广泛的视觉理解”。

据报道,中国AI Lab DeepSeek的开放模型的成功,该模型的表现比Meta以前的Llama模型更好,据报道将Llama Development促进了Overdrive。据说Meta有乱列的战争室,以破译降低跑步和部署R1和V3等模型的成本。

Scout和Maverick在Llama.com和Meta的合作伙伴中公开可用,包括AI Dev Platform拥抱面孔,而Bememoth仍在接受培训。梅塔(Meta在40个国家 /地区使用美洲驼4。多式联运功能暂时仅限于美国。

一些开发人员可能会对Llama 4许可证质疑。

用户和公司在欧盟中“居住”或具有“主要业务地点”的使用,禁止使用或分发模型,这可能是该地区AI和数据隐私法规定的治理要求的结果。 (过去,Meta谴责这些法律过于繁重。)此外,与以前的Llama发行版一样,拥有超过7亿个月活跃用户的公司必须向Meta申请特殊许可,Meta可以全部批准或​​拒绝其。

“这些Llama 4模型标志着Llama生态系统的新时代的开始,” Meta在博客文章中写道。 “这只是Llama 4系列的开始。”

图片来源:元

meta说,美洲驼4是其使用混合物的第一个型号专家(MOE)体系结构,在培训和回答查询方面更有效。 MOE体系结构基本上将数据处理任务分解为子任务,然后将它们委派给较小的专业“专家”模型。 

例如,小牛的总参数为4000亿,但在128个“专家”中只有170亿个活动参数。 (参数大致对应于模型的解决问题的技能。)侦察员有170亿个活动参数,16个专家和10090亿个参数。

根据Meta的内部测试,Maverick说,该公司称其最适合“普通助理和聊天”用例(例如创意写作),超过了OpenAI的GPT-4O和Google的Gemini 2.0,涉及某些编码,推理,多语言,长篇文章和图像基准。但是,Maverick并不能完全衡量更有能力的近期模型,例如Google的Gemini 2.5 Pro,这是一个Nthththopic的Claude 3.7十四行诗和Openai的GPT-4.5。

侦察兵的优势在于诸如文档摘要和大型代码库推理之类的任务。独特的是,它具有很大的上下文窗口:1000万个令牌。 (“令牌”代表原始文本的位,例如“奇妙”一词分为“ fan”,“ tas”和“ tic”。

侦察员可以在单个NVIDIA H100 GPU上运行,而Maverick则需要NVIDIA H100 DGX系统或同等系统,根据Meta的计算。

Meta的未发行的庞然大物甚至需要更强大的硬件。据该公司称,庞然大物拥有2880亿个活跃参数,16个专家和近2万亿个参数。 Meta的内部基准测试的表现优于GPT-4.5,Claude 3.7十四行诗,以及Gemini 2.0 Pro(但不是2.5 Pro),以测量诸如数学问题解决的STEM技能的评估。

值得注意的是,Llama 4模型都不是沿Openai的O1和O3-Mini的正确“推理”模型。推理模型事实检验他们的答案,通常更可靠地回答问题,但因此,要比传统的“非调理”模型需要更长的时间来提供答案。

图片来源:元

有趣的是,梅塔(Meta)说,它调整了所有Llama 4模型,以拒绝频繁回答“有争议的”问题。据该公司称,美洲驼4回应了“辩论”的政治和社会话题,即以前的拉玛模型不会。此外,该公司表示,Llama 4“更加平衡”,提示它无法娱乐。

“ [y] ou可以指望[Llama 4]提供有用的事实回应而无需判断,”发言人告诉TechCrunch。 “ [w] e继续使美洲驼更加响应,以便回答更多的问题,可以回答各种不同的观点……并且不支持其他观点。”

这些调整是因为一些白宫盟友指责AI聊天机器人在政治上“醒来”。

唐纳德·特朗普总统的许多亲密知己,包括亿万富翁埃隆·马斯克(Elon Musk),加密货币(Ai Czar)戴维·萨克斯(David Sacks),都声称流行的AI Chatbots审查机器人审查员保守派观点。萨克斯历史上将Openai的Chatgpt列为“编程为醒来”,对政治主题的真实感。

实际上,AI中的偏见是一个棘手的技术问题。马斯克自己的AI公司Xai一直在努力创建一个不认可其他政治观点的聊天机器人。

尚未阻止包括OpenAI在内的公司的adjus提出他们的AI模型,以回答比以前更多的问题,特别是与有争议的主题有关的问题。

avatar

知识博士 管理员

发布了:21112篇内容
查阅文章

发布评论

验证码

QQ交谈

在线咨询:QQ交谈

工作时间:每天9:00 - 18:00
若无特殊,节假日休息

我的微信