音楽制作、DJ、リミックスのコミュニティに関わったことがあれば、「ステム」という言葉を聞いたことがあるでしょう。しかし、ステムとは正確には何で、ステム分離はどう機能するのでしょうか?このガイドでは、基本から現代のAIステム分離ツールの仕組みまで、知っておくべきことをすべて解説します。
オーディオステムとは?
音楽制作においてステムとは、サブミックスのことです。関連するトラックのグループを、1つのステレオ(またはモノラル)の音声ファイルにまとめたものです。ステムは、個々の録音トラックより一段上で、最終的なマスターより一段下に位置します。
典型的な曲は、次のようなステムとして提供されることがあります:
- ボーカルステム — リードボーカルとバックボーカルをまとめたもの
- ドラムステム — キック、スネア、ハイハット、タムをまとめたもの
- ベースステム — ベースギターまたはシンセベース
- 楽器ステム — ギター、キーボード、シンセ、ストリングス
すべてのステムを足し合わせると、完成したミックスの曲になります。ボーカルステムをミュートすると、インストゥルメンタル(カラオケ)版になります。
ステムはなぜ重要なのか?
ステムは、音楽における創造的なコラボレーションの通貨です。人々がステムを必要とする理由は次のとおりです:
DJとリミックスアーティストのために
DJやリミックスのプロデューサーは、ステムを使ってマッシュアップやリミックスを作ります。ある曲のボーカルステムと、別の曲のインストゥルメンタルステムを持っていれば、プロがミックスしたように聞こえる新しい組み合わせを作れます。ぎこちなく2つの曲を重ねるだけではありません。
音楽プロデューサーのために
プロデューサーが既存の録音とコラボレーションしたい場合、ステムがあれば、ミックス全体に影響を与えずに個々の要素を扱えます。元のドラムステムを残してベースを差し替えたり、ボーカルステムを残して音楽のアレンジ全体を組み直したりできます。
ライブパフォーマーのために
バンドやソロのパフォーマーは、ライブでバッキングステムを使います。例えば、ソロアーティストがドラムとベースのステムに乗せて、ギターをライブで弾くことができます。
映画とテレビのために
音楽監修者は、特定のシーンに曲を合わせる必要があるときにステムを使います。背景のシーンのためにボーカルを除去したり、レベルを調整したり、特定の楽器をループさせたりします。
問題:ほとんどの曲にはステムがない
課題はこうです。ステムは通常、元のプロデューサーやレーベルからしか直接入手できず、公開されることはほとんどありません。リミックスコンテストに参加したり、プロデューサーのパックを購入したり、アーティストと直接仕事をしたりすれば、ステムを見つけられるかもしれません。商業的にリリースされたほとんどの音楽については、公開されたステムは単純に存在しません。
ここでAIステム分離が役立ちます。
AIステム分離の仕組み
AIステムセパレーターは、ミックスされた音声ファイルを解析し、個々の成分を数学的に分離しようとします。元のマルチトラックに一切アクセスすることなく行います。
現代のAIステムセパレーターは、プロがレコーディングした大量のマルチトラック曲のデータセットで学習した深層ニューラルネットワークを使います。学習の過程で、モデルはボーカル、ドラム、ベース、楽器が音響的にどう「聞こえる」かを学びます。つまり、周波数パターン、タイミングの特徴、音色の質感です。
曲をアップロードすると、AIは次のことを行います:
- 音声を周波数表現(スペクトログラム)に変換する
- 学習済みのニューラルネットワークを適用し、各音源を識別して分離する
- 分離された成分から、分離された音声を再構成する
- 各ステムを別々の音声ファイルとして出力する
今日のAIステム分離はどれくらい良いのか?
AIステム分離の品質は、過去数年で劇的に向上しました。現代の深層学習モデルは、わずか3〜4年前には不可能だったボーカル分離の品質を実現しています。
FreeVocalRemoverが提供する2ステム分離(ボーカル+インストゥルメンタル)については、品質はリミックス、カラオケ、音楽分析に本当に役立つ水準です。4ステム分離(ドラムとベースを追加)はやや難しいですが、高度なAIツールではますます利用できるようになっています。
ステムとトラック:何が違うのか?
- トラック(マルチトラック) — 個々に録音されたチャンネル。ドラムキットは10以上の個別トラックになることがあります(マイクごとに1つ)。これらは録音セッションの生の構成要素です。
- ステム — まとめてミックスされたトラックのグループ。10個のドラムトラックを1つのステレオのドラムステムにミックスしたもの。
- マスター(ミックス) — すべてのステムをまとめて、最終的な曲にしたもの。