美国科技巨头Meta近日发布了其最新的开源人工智能(AI)模型Llama 4,这一模型被誉为是迄今为止最先进的多模态大模型。Llama 4有两个版本,分别为Scout和Maverick,它们可以处理和整合各种类型的数据,包括文本、视频、图像和音频,并在这些格式之间转换内容。
Llama 4系列首次采用了混合专家(MoE)架构的模型,该架构可以将模型划分为多个专注于特定任务的“专家”子模型,从而提高训练和回答用户查询时的效率。Scout拥有170亿个活跃参数、16个“专家”模型、1090亿个总参数,而Maverick也有170亿个活跃参数,但有128个“专家”模型,总参数量高达4000亿。
此外,Meta还在训练功能更强大的Behemoth,它被誉为是世界上最智能的大模型之一,被称为“新模型中的教师”。所有这些模型都经过了大量未标注的文本、图像和视频数据的训练,以使它们具备广泛的视觉理解能力。
Scout 和Maverick模型已在Llama.com网站以及Meta的合作伙伴处公开获取,也可以在WhatsApp、Messenger、Instagram Direct上获取。Meta的人工智能助手Meta AI已在40个国家更新为使用Llama 4模型,目前,多模态功能仅在美国以英语提供。
此次发布的Llama 4模型是Meta在Llama 3发布一年后的最新产品,其开发过程曾因技术基准未达到预期而延迟发布。据了解,Meta计划今年投入高达650亿美元扩大其人工智能基础设施。
评论
文明上网理性发言,请遵守新闻评论服务协议
登录参与评论
0/1000