埃隆·马斯克的xAI公司开发的AI聊天机器人Grok-1现已开源。Grok-1的开放发布版本现已在Github上提供,供用户访问和构建。这一消息发布于马斯克在X(前身为Twitter)上宣布公司将很快向开发者提供聊天机器人访问权限几天后。xAI提到,他们将Grok-1这个大型语言模型的基础模型权重和网络架构作为开源AI平台提供。
对于那些不知道的人来说,开源意味着软件、其源代码和项目对所有人都是可访问的,无需任何许可费。这种模型的优势在于为公司和开发者提供灵活性,以提出新的解决方案,找到修复方法,甚至为不同的需求和用途重新目的化它。
根据博客文章,Grok-1是Grok-1预训练阶段的原始基础模型检查点,该阶段于2023年10月进行。它是一个由xAI使用自定义训练堆栈在JAX和Rust之上从头训练的314亿参数混合专家模型”。xAI进一步明确表示,他们正在“根据Apache 2.0许可证发布权重和架构”,该许可证允许商业使用,但不包括用于训练AI大型语言模型的数据或访问实时数据的权限。文章还指出,Grok-1模型没有针对任何特定应用程序或对话进行训练。
埃隆·马斯克一直在批评像OpenAI这样的公司没有将他们的AI语言模型作为开源提供。去年11月在一个播客中,马斯克提出了将AI语言模型作为开源平台提供的想法。他在播客中提到,“我通常倾向于开源,比如有偏向于开源的倾向。”他的评论是在xAI的Grok发布后不久发表的,Grok的训练花费了四个月的时间。也就是说,一开始,Grok与OpenAI的ChatGPT、微软的Copilot甚至谷歌的双子星相比,被认为是一个更加更新的AI聊天机器人。
同样,不是没有公司将AI模型作为开源提供。Mistral和Falcon是已经可用的开源AI平台。然而,从更广泛的角度来看,大多数AI平台都是封闭源代码的。公司只是将其作为开源或有限开源模型提供,以接收来自其他研究人员的反馈并对其进行改进。
下载:https://github.com/xai-org/grok-1