생성적 AI 추론 향상: Google DeepMind, GenRM 기술 공개

Home AI 뉴스 생성적 AI 추론 향상: Google DeepMind, GenRM 기술 공개

구글 딥마인드, AI 추론 능력 향상을 위한 생성 평가기 GenRM 소개

2023년 8월 27일, 구글 딥마인드 팀은 arXiv에 혁신적인 생성 평가기 GenRM에 대한 논문을 발표했습니다. 이 새로운 보상 모델은 생성 AI의 추론 능력을 획기적으로 향상시키기 위해 설계되었습니다.

현재 대규모 언어 모델(LLM) 개선을 위한 주된 방법은 "최고의 N" 접근법입니다. 이 기술은 N개의 후보 솔루션을 생성하고, 평가자가 이를 평가하여 최상의 옵션을 결정하는 것입니다. 하지만 전통적인 LLM 평가자는 일반적으로 이분법적 분류기로 기능하며, 사전 훈련된 LLM의 텍스트 생성 능력을 완전히 활용하지 못합니다.

이러한 한계를 극복하기 위해 딥마인드 팀은 다음 토큰 예측을 사용하여 평가기를 훈련시켰으며, 검증과 솔루션 생성이 통합되었습니다. GenRM은 기존 평가기에 비해 여러 가지 뚜렷한 장점을 제공합니다:

- 지침 조정의 원활한 통합

- 사고의 연쇄를 지원하는 기능

- 다수결 투표를 통한 추가 추론 시간 계산

알고리즘 및 기초 수학 추론을 포함한 과제에서, GenRM은 Gemma 기반 평가기와 테스트했을 때 이분법적 평가자 및 LLM-재판관 평가자를 초 뛰어넘어 문제 해결 성공률이 16%에서 64% 향상되었습니다.

구글 딥마인드는 GenRM이 AI 보상 시스템의 중요한 진화를 나타내며, 특히 새로운 모델 훈련에서 잠재적인 사기 행위를 방지하는 능력을 강화한다고 주장합니다. 이 발전은 AI 출력이 사회적 책임 기준을 충족할 수 있도록 보상 모델을 정교화해야 할 필요성을 강조합니다.

OpenAI ChatGPT에 8개의 새로운 자연 동물 소리가 추가되었습니다: 보다 진 authentic한 짖는 소리와 동물의 표현을 경험해 보세요.

클라르나, 인력 절반 감축: AI 활용으로 사업 성장 전략 지속 추진

Most people like

Free 3D Animation

35.6K

창의력을 발휘하고 코딩 없이 매력적인 3D 애니메이션을 쉽게 제작하세요! 초보 애니메이터든 숙련된 전문가든, 우리 사용자 친화적인 도구로 누구나 애니메이션을 쉽게 만들 수 있습니다. 3D 디자인의 세계에 뛰어들어 오늘 바로 당신의 아이디어를 시각적으로 돋보이는 애니메이션으로 변환해 보세요!

3D 애니메이션 Other

Albato

202.5K

Albato의 노코드 통합 플랫폼을 활용하여 작업 흐름을 손쉽게 간소화하세요. 코딩 경험 없이도 작업을 자동화하고 생산성을 향상시킬 수 있습니다.

노코드 AI Code Generator

ChatAI

75.5K

AI 언어 모델과 매끄럽게 상호작용하며 멋진 AI 생성 이미지를 만들 수 있는 종합 플랫폼을 만나보세요.

AI 챗봇 AI Advertising Assistant

Amplemarket

144.7K

오늘날의 영업 팀을 위해 맞춤 설계된 궁극적인 AI 플랫폼을 소개합니다. 효율성을 높이고 생산성을 증대시키기 위해 설계된 이 혁신적인 솔루션은 인공지능을 활용하여 프로세스를 간소화하고, 워크플로를 최적화하며, 고객 참여를 강화합니다. 귀하의 팀이 뛰어난 성과를 달성할 수 있도록 지원하는 첨단 기술로 영업 전략을 혁신하세요.

AI 플랫폼 Sales Assistant

Find AI tools in YBX