生成AIの推論を強化：Google DeepMindがGenRMテクノロジーを発表

Home AIニュース生成AIの推論を強化：Google DeepMindがGenRMテクノロジーを発表

Google DeepMind、AIの推論能力を向上させる生成型評価モデル「GenRM」を発表

2023年8月27日、Google DeepMindのチームは、新しい生成型評価モデル「GenRM」をarXivに発表しました。このモデルは、生成系AIの推論能力を大幅に向上させることを目的としています。

現在、大規模言語モデル（LLM）の改善には「Best-of-N」アプローチが一般的に用いられています。この手法では、N個の候補解を生成し、評価者がそれらをランキングして最適な選択肢を決定します。しかし、従来のLLM評価者は、主に識別型分類器として機能し、事前学習されたLLMのテキスト生成能力を十分に活用することができていませんでした。

この制約を克服するため、DeepMindチームは次のトークンの予測を用いて評価者を訓練し、検証と解決策生成の両方を統合しました。GenRMは、従来の評価者に比べて以下のような明確な利点を提供します。

- 指示の調整がシームレスに統合

- 思考の連鎖を支持

- 過半数投票による追加推論時間の計算

アルゴリズムや基礎数学の推論を含むタスクにおいて、GenRMはGemmaベースの評価者を用いたテストで識別型評価者や「LLM-as-a-Judge」評価者を上回り、問題解決成功率が16%から64%向上しました。

Google DeepMindは、GenRMがAI報酬システムの重要な進化を示しており、特に新しいモデルのトレーニングにおける欺瞞行為の防止能力を強化することを強調しています。この進展は、AIの出力が社会的責任の基準を満たすために報酬モデルを洗練させる必要性を浮き彫りにしています。

OpenAI ChatGPT に追加された8種類の新しい自然な動物の鳴き声：よりリアルな鳴き声と動物の表現を体験しよう

クラーナ、従業員を半減—AI活用によるビジネス成長戦略の強化

Most people like

WindyBot

165.4K

WindyBotは、生産性を向上させ、創造性を引き出すために設計された最先端のAIツールを提供します。高度なライティング支援、アート生成、包括的な分析、インタラクティブなチャットボットソリューションなど、多彩な機能を備えています。WindyBotの革新的な技術で、あなたの可能性を引き出しましょう。

AIライター AI Chatbot

Minutes AI

自動化されたAIツールで会議管理を革新し、音声を明確で簡潔な会議議事録に変換します。スムーズなドキュメント作成を体験し、重要な詳細を見逃すことはありません！

ノートテイキング AI Meeting Assistant

Cliplama

109.3K

自動動画制作でソーシャルメディア戦略を合理化しましょう。今日の急速なデジタル環境では、魅力的な動画コンテンツがオーディエンスの関心を引くために不可欠です。自動化ツールは、動画制作の方法を革新し、魅力的なストーリーを共有し、製品を紹介し、フォロワーとつながることをより簡単かつ迅速にします。オンラインプレゼンスを強化したいブランドや、リーチを広げたい個人クリエイターにとって、自動動画制作がどのようにソーシャルメディアを向上させるかを見つけてみましょう。

AI動画作成 Text to Video

Effy.ai

55K

Effy.aiは、効果的なフィードバック、包括的なレビュー、戦略的な開発計画を通じて組織の成長を促進する最先端のパフォーマンス管理ソフトウェアです。使いやすいインターフェースを備えたEffy.aiは、チームがその可能性を最大限に発揮できるようサポートし、継続的な改善の文化を育みます。

パフォーマンス管理 Other

Find AI tools in YBX