新加坡国立大学计划推出多模态大模型 NExT-GPT，突破输入限制

据品玩 9 月 12 日报道，新加坡国立大学下一代搜索技术联合研究中心（NExT++）近日公布一项新的计划，开发一款可以突破输入端多模态理解限制的大模型 NExT-GPT。

研究者表示，他们将大语言模型与多模态适配器和不同的扩散解码器连接起来，使 NExT-GPT 能够感知不同的输入形式，并以文本、图像、视频和音频的任意组合方式生成输出内容。通过利用现有训练有素的高性能编码器和解码器，NExT-GPT 仅使用某些投影层的少量参数（1%）进行调整，这不仅有利于低成本训练，而且有利于将该模型扩展到更多潜在模态。NExT++ 的研究者表示，他们的研究展示了建立一个能够模拟通用模态的人工智能代理的可能性。

原文链接

—-

编译者/作者：东寻

玩币族申明：玩币族作为开放的资讯翻译/分享平台，所提供的所有资讯仅代表作者个人观点，与玩币族平台立场无关，且不构成任何投资理财建议。文章版权归原作者所有。