Meta 正在构建新开源大模型,性能超越 Llama 2、比肩 GPT-4

人工智能
长期以来,Meta 一直在采用开源方法公开其大模型产品,是业内众所周知的最大贡献者之一。仅今年它就向人工智能社区发布了大量人工智能模型和训练数据集。

根据 Siliconangle 的报道,Meta 正在寻求在生成式 AI 领域与 OpenAI 展开竞争,将发布新的开源大模型,其性能或将与 GPT-4 不相上下。

报道称,这款新模型比 Llama 2 强大数倍,将提供文本、图像生成以及分析等功能。目前该模型正处于开发之中,最终功能尚不确定。

Meta 最终目标是加速开发下一代生成式人工智能模型,使其能够生成更多类似人类的表达。

长期以来,Meta 一直在采用开源方法公开其大模型产品,是业内众所周知的最大贡献者之一。仅今年它就向人工智能社区发布了大量人工智能模型和训练数据集。其中包括针对编程任务优化的 Code Llama 大语言模型; 可实现数百种语言通用按需翻译的 SeamlessM4T 模型; 用于创作音乐和声音的生成式人工智能模型 AudioCraft;语音生成人工智能模型 Voicebox。它还推出了 I-JEPA(一种可以像人类一样学习的计算机视觉模型)和 FACET(一种基准数据集,旨在帮助研究人员审核计算机视觉模型的偏差)。

但其模型性能一直在 ChatGPT 等产品之下,Meta 的新人工智能大模型能否赶上 OpenAI 还有待观察。因为它们的能力取决于训练的数据量。据了解,Meta 的 Llama 2 接受了 700 亿个训练数据参数的训练。 OpenAI 尚未公开透露 GPT-4 基于多少个参数,但其他人估计它可能比 Llama 大 20 倍,基于约 1.5 万亿个参数。

责任编辑:武晓燕 来源: OSCHINA
相关推荐

2023-09-07 13:25:00

AI模型

2024-04-19 14:52:13

MetaGPT-4模型

2023-09-11 13:28:00

AI模型

2024-04-19 09:17:33

AI模型

2023-03-14 13:45:14

模型AI

2023-07-25 09:23:23

Llama 2GPT-4

2024-04-19 07:55:57

Llama 3模型人工智能开源

2023-06-08 11:27:10

模型AI

2024-04-19 10:32:08

2024-01-19 12:51:00

AI数据

2024-01-22 08:50:00

AI训练

2023-11-13 19:35:12

训练数据

2023-12-11 12:46:42

GPT-4LLaMA2模型

2024-01-30 21:18:57

模型智能CMMLU

2023-08-27 14:08:17

开源代码Meta大模型

2023-07-12 16:10:48

人工智能

2024-03-08 13:18:44

模型训练

2024-02-22 17:19:26

谷歌模型PC

2023-10-11 13:09:52

训练模型

2023-08-25 13:12:59

AI开源
点赞
收藏

51CTO技术栈公众号