Google AI Studioに2つのエキサイティングな新機能が登場します。これは、開発者からの重要な要望に応えるものです。このプラットフォームは、機械学習モデルのプロトタイピングと実験のために設計されており、今後はネイティブなビデオフレーム抽出機能とコンテキストキャッシングが実装されます。ビデオフレーム抽出機能は本日から利用可能で、コンテキストキャッシングは間もなくGemini APIに追加される予定です。
ビデオフレーム抽出により、開発者はアプリケーションにアップロードされたビデオを活用し、Geminiが個々のフレームや画像シーケンスをキャプチャできるようになります。この機能はAIのシーン解釈能力を強化し、簡潔な要約を生成し、ユーザーエクスペリエンスを向上させます。調整可能なビデオフレーム抽出機能は、Gemini API内でご利用いただけます。
コンテキストキャッシングは、大量の情報セットを管理する開発者にとって、頻繁にアクセスされるコンテキストを保存することを可能にし、コストを削減し、ワークフローを最適化します。ファイルをGeminiに何度も送信する代わりに、一度送信するだけで済みます。Googleは、コンテキストキャッシングの活用例として、コンテンツアイデアのブレインストーミング、複雑な文書の分析、研究論文や教材の要約を挙げています。この機能は、リリース時にGemini APIでサポートされる予定です。
これらのアップデートは、Googleの開発者会議での一連のGeminiに関する発表の一部であり、Gemini 1.5 Flashのローンチや新しいGemma 2モデル、そしてPaliGemmaという事前学習済みのバリアントも発表されます。