AIボイスアイソレーター:ElevenLabsの新しいツール
AI音声技術のパイオニアであるElevenLabsが、新たに「AIボイスアイソレーター」を発表しました。この革新的なツールは、映画、ポッドキャスト、YouTube動画などさまざまなコンテンツから不要な周囲の音を簡単に除去できる機能を提供します。
AIボイスアイソレーターの仕組み
周囲の雑音は、コンテンツの録音品質に大きな影響を与えることがあります。クリエイターは、会話、風、交通音などが話し手の声をかき消すという問題に直面しています。一部の人は環境音キャンセリング機能を備えたマイクを使用していますが、特に初心者クリエイターにはこのオプションが常に利用できるわけではありません。
そこで、ElevenLabsのAIボイスアイソレーターが登場します。このツールはポストプロダクション段階で使用され、ユーザーがコンテンツをアップロードすると、先進的なモデルがファイルを分析し、背景ノイズを検出・除去、最終的にクリアな対話を抽出します。ElevenLabsは、AIボイスアイソレーターがスタジオ録音に匹敵する音質を実現していると主張しています。デザイン責任者のアマール・レシによるデモでは、落ち葉を吹き飛ばす音を効果的に除去し、澄んだスピーチを実現しました。
実際のテスト
AIボイスアイソレーターの能力を評価するために、3つのテストを実施しました。最初に、さまざまな背景音で中断される3つの文を録音しました。このツールは数秒でオーディオを処理し、ドアの開閉、テーブルを叩く音、拍手、家庭内の動きからの干渉を取り除きました。壁を叩く音と指を鳴らす音のフィルタリングには苦労しました。
ElevenLabsの成長責任者であるサム・スカーによれば、現在のバージョンのツールは音楽ボーカルをサポートしていませんが、一部のトラックでは成功する可能性があるとのことです。
今後の改善
ボイスアイソレーターの周囲ノイズ処理能力は、平坦なノイズに特化した他のツールと一線を画していますが、さらなる改善の余地があります。ElevenLabsは、パフォーマンスを継続的に向上させることを目指しています。
ツールの背後にあるモデルやアップロードされた録音がトレーニングに使用されるかどうかについての詳細は公開されていませんが、ユーザーはプライバシーポリシーのリンクを通じて個人データのトレーニング使用を拒否することができます。
現在、ボイスアイソレーターはElevenLabsプラットフォームでのみ利用可能で、APIアクセスの提供が今後数週間内に始まる予定ですが、具体的な日時は未定です。ツールは無料で利用可能ですが、一部制限があります。
「ボイスアイソレーターのモデルは、1分あたり1,000文字の音声処理を必要とします。月に10,000文字の無料プランを提供しており、これにより10分の音声を無料で処理できます」とスカーは説明しました。大きな音声ファイルから背景音を除去したい場合、有料プランは月5ドルから利用できます。