음악 제작, DJ, 리믹스 커뮤니티에서 시간을 보내 봤다면, "스템"이라는 단어를 들어 보셨을 겁니다. 그런데 스템이란 정확히 무엇이고, 스템 분리는 어떻게 작동할까요? 이 가이드는 기초부터 현대 AI 스템 분리기가 작동하는 방식까지, 알아야 할 모든 것을 다룹니다.
오디오 스템이란?
음악 제작에서 스템은 서브믹스입니다 — 관련된 트랙들의 그룹을 하나의 스테레오(또는 모노) 오디오 파일로 믹스다운한 것입니다. 스템은 개별 녹음 트랙보다 한 단계 위에 있지만, 최종 마스터 믹스보다는 한 단계 아래에 있습니다.
일반적인 노래는 다음과 같은 스템으로 전달될 수 있습니다:
- 보컬 스템 — 리드 보컬과 백킹 보컬을 함께 믹스한 것
- 드럼 스템 — 킥, 스네어, 하이햇, 탐을 함께 믹스한 것
- 베이스 스템 — 베이스 기타나 신디사이저 베이스
- 악기 스템 — 기타, 건반, 신스, 스트링
모든 스템을 다시 더하면 완성된 믹스 노래가 됩니다. 보컬 스템을 음소거하면 반주(가라오케) 버전이 됩니다.
스템이 중요한 이유
스템은 음악에서 창작 협업의 통화입니다. 사람들이 스템을 필요로 하는 이유는 다음과 같습니다:
DJ와 리믹스 아티스트를 위해
DJ와 리믹스 프로듀서는 스템을 사용해 매시업과 리믹스를 만듭니다. 한 노래의 보컬 스템과 다른 노래의 반주 스템을 가지고 있으면, 두 노래를 어색하게 겹쳐 놓은 것이 아니라 전문적으로 믹스된 것처럼 들리는 새로운 조합을 만들 수 있습니다.
음악 프로듀서를 위해
프로듀서가 기존 녹음과 협업하고 싶을 때, 스템을 쓰면 전체 믹스에 영향을 주지 않고 개별 요소를 다룰 수 있습니다. 원래 드럼 스템을 유지하고 베이스를 교체하거나, 보컬 스템을 유지하고 전체 편곡을 다시 짤 수도 있습니다.
라이브 퍼포머를 위해
밴드와 솔로 퍼포머는 라이브 공연에서 백킹 스템을 사용합니다. 예를 들어, 솔로 아티스트는 드럼과 베이스 스템을 틀어 두고 라이브로 기타를 연주할 수 있습니다.
영화와 TV를 위해
음악 감독은 특정 장면에 맞게 노래를 각색해야 할 때 스템을 사용합니다 — 배경 장면을 위해 보컬을 제거하거나, 레벨을 조정하거나, 특정 악기를 루프시키는 식입니다.
문제: 대부분의 노래에는 스템이 없다
문제는 이렇습니다: 스템은 보통 원래의 프로듀서나 레이블에게서만 직접 얻을 수 있고, 그들은 거의 공개하지 않습니다. 리믹스 콘테스트에 참가하거나, 프로듀서 팩을 구입하거나, 아티스트와 직접 작업하면 스템을 찾을 수 있을지도 모릅니다. 상업적으로 발매된 대부분의 음악에 대해서는, 공개적으로 이용할 수 있는 스템이 단순히 존재하지 않습니다.
바로 여기서 AI 스템 분리가 등장합니다.
AI 스템 분리는 어떻게 작동하나요
AI 스템 분리기는 믹스된 오디오 파일을 분석하고, 원래의 멀티트랙에는 전혀 접근하지 않고 개별 구성 요소를 수학적으로 분리하려고 시도합니다.
현대의 AI 스템 분리기는 전문적으로 녹음된 대규모 멀티트랙 노래 데이터셋으로 학습된 심층 신경망을 사용합니다. 학습 과정에서 모델은 보컬, 드럼, 베이스, 악기가 음향적으로 어떻게 "들리는지" — 즉, 주파수 패턴, 타이밍 특성, 음색적 질감을 학습합니다.
노래를 업로드하면 AI는 다음을 수행합니다:
- 오디오를 주파수 표현(스펙트로그램)으로 변환
- 학습된 신경망을 적용해 각 음원을 식별하고 분리
- 분리된 성분으로부터 분리된 오디오를 재구성
- 각 스템을 별도의 오디오 파일로 출력
오늘날 AI 스템 분리는 얼마나 좋은가요?
AI 스템 분리의 품질은 지난 몇 년간 극적으로 향상되었습니다. 현대 딥러닝 모델은 불과 3–4년 전에는 불가능했던 수준의 보컬 분리 품질을 달성합니다.
FreeVocalRemover가 제공하는 2스템 분리(보컬 + 반주)는 리믹스, 가라오케, 음악 분석에 정말로 유용할 만큼 품질이 높습니다. 4스템 분리(드럼과 베이스 추가)는 다소 더 어렵지만, 고급 AI 도구에서 점점 더 많이 이용할 수 있게 되고 있습니다.
스템 vs. 트랙: 무엇이 다른가요?
- 트랙(멀티트랙) — 개별적으로 녹음된 채널. 드럼 키트는 10개 이상의 개별 트랙(마이크당 하나)이 될 수 있습니다. 이것들이 녹음 세션의 원재료입니다.
- 스템 — 함께 믹스된 트랙들의 그룹. 10개의 드럼 트랙을 하나의 스테레오 드럼 스템으로 믹스한 것.
- 마스터(믹스) — 모든 스템을 함께 믹스해 완성한 최종 노래.