提升生成性人工智能推理能力：谷歌DeepMind发布GenRM技术

Home AI News CN 提升生成性人工智能推理能力：谷歌DeepMind发布GenRM技术

谷歌DeepMind推出生成评估器GenRM，以增强AI推理能力

2023年8月27日，谷歌DeepMind团队在arXiv上发表了一篇论文，介绍了他们创新的生成评估器GenRM。这一新的奖励模型旨在显著提升生成AI的推理能力。

目前，改善大型语言模型（LLM）的主要方法是“最佳中的N”策略。该方法生成N个候选解决方案，随后由评估器对它们进行排名，以确定最佳选项。然而，传统的LLM评估器通常仅作为判别分类器，未能充分利用预训练LLM的文本生成能力。

为了解决这一限制，DeepMind团队训练了该评估器，使其能够预测下一个令牌，整合了验证和解决方案生成。GenRM相比于传统评估器具备以下几个显著优势：

- 无缝整合指令调整

- 支持链式推理

- 利用多数投票计算额外推理时间

在涉及算法和基础数学推理的任务中，GenRM在与Gemma基础的评估器测试时，其表现优于判别评估器和LLM作为评判者评估器，问题解决成功率提高了16%至64%。

谷歌DeepMind表示，GenRM标志着AI奖励系统的一次重要进化，特别是在新模型训练中提升预防潜在欺诈行为的能力。这一进展凸显了完善奖励模型的必要性，以确保AI输出符合社会责任标准。

20.6K

Freshly.ai通过将人工智能与人类协作相结合，充分发挥AI的潜力，提升工作效率，交付卓越成果。

人工智能大型语言模型（LLMs）

54.4K

使用XpressionCamera应用程序，您可以实时调整和改变您的外貌。

虚拟摄像头应用 AI头像生成器

16.8K

探索Google Play和App Store中的应用程序技术堆栈，以获取更深入的理解。

移动应用 AI Analytics助手

21.6K

通过人工智能助手提升Microsoft Office套件的工作效率，助您轻松完成任务。

人工智能助手人工智能

Find AI tools in YBX