메타 AI, 인공지능 에이전트의 '구현된 지능'을 향상시키기 위한 OpenEQA를 출시하다.

Home AI 뉴스 메타 AI, 인공지능 에이전트의 '구현된 지능'을 향상시키기 위한 OpenEQA를 출시하다.

메타 AI 연구진은 "구체적 질문 응답(Embodied Question Answering, EQA)" 능력을 평가하기 위해 설계된 혁신적인 오픈 소스 벤치마크 데이터셋인 OpenEQA를 공개했습니다. 이 기능은 AI가 실제 세계를 이해하고 다양한 환경에 대한 자연어 문의에 정확하게 응답할 수 있도록 합니다.

"구체적 AI" 분야의 핵심 자원으로 자리잡은 OpenEQA 데이터셋은 가정과 사무실 등 180개 이상의 실제 환경에 관한 1,600개 이상의 질문으로 구성되어 있습니다. 이 질문들은 객체 및 속성 인식, 공간 추론, 기능적 추론, 상식 지식 등 AI의 역량을 철저히 평가하기 위해 일곱 가지 유형으로 분류되어 있습니다.

연구자들은 "구체적 질문 응답은 AI 에이전트가 세계를 이해하는 방식을 평가하는 의미 있는 적용 사례이자 프레임워크"라고 강조했습니다. "EQA는 자연어로 질문에 답할 수 있을 만큼 환경을 충분히 이해하는 것을 포함합니다."

특히 GPT-4V와 같은 고급 모델조차 OpenEQA에서 인간 성과와 일치하는 데 어려움을 겪어, 이 벤치마크가 AI의 실제 질문 이해 및 응답 능력을 평가하는 rigor를 반영하고 있습니다.

AI의 다양한 분야 융합

OpenEQA 프로젝트는 컴퓨터 비전, 자연어 처리, 지식 표현, 로봇공학 등 여러 최신 인공지능 분야를 연결합니다. 궁극적인 목표는 주변을 인식하고 상호작용할 수 있는 인공지능 에이전트를 개발하여, 인간과 자연스러운 대화를 나누고 일상생활을 향상시키는 것입니다.

연구자들은 "구체적 지능"의 두 가지 주요 응용 분야를 구상하고 있습니다. 첫째, 증강 현실 안경이나 헤드셋에 통합된 AI 보조기는 비디오 및 센서 데이터를 활용하여 사용자에게 사진과 같은 기억을 제공하며, "내 열쇠를 어디에 두었지?"와 같은 질문에 답할 수 있습니다. 둘째, 이동 로봇은 환경을 자율적으로 탐색하며 "커피가 남아있나?"와 같은 정보를 수집할 수 있습니다.

철저한 평가 기준 수립

OpenEQA 데이터셋을 개발하기 위해 메타 연구진은 실제 환경의 비디오 영상 및 3D 스캔을 수집하는 것으로 시작했습니다. 그 후, 시각적 데이터에 접근할 수 있는 AI 보조기에게 제기할 질문을 작성할 수 있는 사람들을 초대했습니다.

이 데이터셋은 다양한 인식 및 추론 능력을 평가하는 1,636개의 질문을 포함하고 있습니다. 예를 들어, "식탁 주위에 의자가 몇 개 있나요?"라는 질문에 답하기 위해서는 AI가 객체를 식별하고 "주위"라는 공간 개념을 이해하며 해당 항목을 세어야 합니다. 다른 질문들은 객체의 용도와 속성에 대한 기본적인 이해를 필요로 합니다.

정확성을 높이기 위해 각 질문에는 여러 인간-generated 답변이 포함되어 있으며, 다양한 응답이 가능함을 인정합니다. AI 성능을 평가하기 위해 연구자들은 대형 언어 모델을 활용하여 AI가 생성한 답변과 인간의 응답 간 유사성을 자동으로 측정했습니다.

Snowflake Copilot: Mistral 대규모 AI 보조 도우미, 이제 공개 미리보기 제공

Buildbox 4, 노코드 AI 게임 개발 엔진 공개 - 손쉬운 게임 제작의 새로운 시대 열다

Most people like

Airstrip

5.6K

스타트업을 위한 AI 기반 법률 코파일럿을 소개합니다. 복잡한 법적 요구사항을 쉽게 이해하고 자신 있게 탐색하세요.

인공지능 Legal Assistant

APOB

222.2K

오늘날의 디지털 환경에서 AI 페르소나 생성 도구는 기업과 콘텐츠 제작자가 브랜드 아이덴티티를 개발하는 방식을 혁신하고 있습니다. 첨단 인공지능을 활용하여, 이러한 도구는 사용자가 목표 청중과 공명하는 상세하고 매력적인 페르소나를 만들 수 있도록 돕습니다. 마케팅 캠페인을 강화하고자 하는 마케터든, 공감할 수 있는 캐릭터를 만들고자 하는 작가든, AI 페르소나 생성 도구는 창의성과 데이터 기반 통찰력을 결합한 혁신적인 솔루션을 제공합니다. 이러한 강력한 도구가 페르소나 개발 접근 방식을 어떻게 변형하고 청중과의 연결을 강화할 수 있는지 알아보세요.

AI 제작 도구 AI Photo & Image Generator

AI Pet Photos

7.3K

당신이 사랑하는 반려동물을 25장의 좋아하는 사진만으로 만든 멋진 맞춤형 AI 생성 푹신한 예술 초상화로 변신시켜 보세요!

AI 반려동물 초상화 AI Art Generator

Rannkly

88.7K

Rannkly는 여러분의 온라인 평판을 향상하고 소셜 미디어 존재감을 최적화하기 위해 설계된 고급 AI 기반 플랫폼입니다. 이 혁신적인 도구가 여러분이 청중과 소통하는 방식과 긍정적인 브랜드 이미지를 유지하는 방법을 어떻게 변화시킬 수 있는지 알아보세요.

온라인 평판 관리 도구 AI Advertising Assistant

Find AI tools in YBX