OpenAI запустила GPT-4 Turbo с возможностью общего доступа через API и поддержкой визуальных функций.

Как и знают современные разработчики и бизнес-лидеры, интерфейс прикладного программирования (API) является ключевым элементом современного программного обеспечения, позволяя сторонним приложениям без проблем взаимодействовать с технологическими платформами. OpenAI недавно значительно улучшила свой API для мощной языковой модели GPT-4 Turbo.

Компания объявила на своих аккаунтах в X, что модель GPT-4 Turbo с возможностями зрения теперь «в общем доступе» через API. Функции зрения были введены наряду с загрузкой аудио в сентябре 2023 года, в то время как GPT-4 Turbo был представлен на конференции разработчиков OpenAI в ноябре. Эта версия обещает более быстрое обработку, большие окна контекста (до 128 000 токенов — примерно эквивалент 300-страничной книги) и экономичное использование.

Разработчики теперь могут использовать функции распознавания и анализа изображений модели в формате JSON и через вызовы функций, что позволяет автоматизировать различные действия в подключенных приложениях, такие как отправка электронных писем, публикация в сети или совершение покупок. OpenAI подчеркивает важность внедрения подтверждений от пользователей перед выполнением действий, влияющих на их окружение.

Представитель OpenAI отметил, что эти улучшения упрощают рабочие процессы разработчиков, поскольку ранее им приходилось использовать отдельные модели для текста и изображений. Теперь один запрос API позволяет выполнять аналитику и обработку изображений.

OpenAI демонстрирует несколько клиентов, использующих GPT-4 Turbo с Vision, включая Cognition, стартап, который использует модель для автономной генерации кода, и Healthify, приложение для здоровья и фитнеса, предоставляющее анализ рациона и рекомендации по питанию на основе фотографий, отправленных пользователями. Кроме того, основанный в Великобритании стартап TLDraw использует GPT-4 Turbo с Vision для улучшения своей виртуальной доски, преобразуя рисунки пользователей в функциональные веб-сайты.

Хотя GPT-4 Turbo столкнулась с конкуренцией со стороны новых моделей, таких как Claude 3 Opus от Anthropic, Command R+ от Cohere и Gemini Advanced от Google в тестах на производительность, внедрение GPT-4 Turbo с Vision направлено на привлечение большего числа корпоративных клиентов и разработчиков. Этот шаг делает модели OpenAI привлекательным выбором на фоне ожидания выхода следующей языковой модели на рынке.