스튜디오원(Studio One) : 이머시브 오디오(Immersive-audio) StudioOne

몰입형 오디오를 생성하기 위해 스튜디오 전체에 스피커가 연결된 대규모 서라운드 시스템이 필요하지 않습니다. 서라운드를 원하든 Dolby® Atmos 믹스를 원하든 Studio One Professional 6.5는 스피커뿐만 아니라 이미 가지고 있는 헤드폰을 통해 몰입감 넘치는 사운드를 제공합니다. 귀에 밀착된 헤드폰이 몰입감 넘치는 오디오를 전달한다는 것은 직관에 어긋나지만 바이노럴 오디오가 이를 가능하게 합니다. 그 이유는 다음과 같습니다.

바이노럴 녹음은 실물과 같은 외이도가 있는 모형 인간의 머리를 사용하여 오디오를 캡처합니다. 각 귀에 하나씩 두 개의 마이크가 있습니다. 소리가 사람의 귀에 도달하든, 더미 귀에 있는 마이크에 도달하든, 측면이나 후면에서 나오는 소리는 앞에서 귀에 도달하는 소리와 비교할 때 레벨, 주파수 응답 및 지연 시간이 다릅니다. 헤드폰을 통해 재생되는 오디오에 이러한 차이를 통합하면 앞, 옆, 위, 뒤에서 오디오를 듣는 것처럼 들립니다. 즉, 헤드폰을 통해 바이노럴 녹음을 듣는 것은 실제 공간에서 소리를 듣는 것처럼 들립니다. 이는 우리에게…

둘러 싸다

헤드폰이 몰입형 오디오를 듣는 효과를 재현하려면 스튜디오에서 공간감을 제공하는 음악을 만들어야 합니다. 한 가지 옵션은 거의 반세기 동안 영화에 적용되어 온 서라운드 사운드입니다.

서라운드는 대화를 위한 중앙 채널, 왼쪽 후면, 오른쪽 후면 및 폭발, 지진 등 영화의 저음 요구 사항을 위한 서브우퍼 등 4개의 추가 스피커로 스테레오의 왼쪽 및 오른쪽 채널을 보완하여 주변의 사운드를 배치합니다. 서라운드용 음악을 믹싱할 때 중앙은 영화만큼 중요하지 않습니다. 왼쪽 및 오른쪽 채널에 동일한 오디오를 배치하면 유령 중앙이 생성되기 때문입니다. 또한 서브우퍼는 음을 재생하는 것보다 효과에 더 중점을 둡니다. 어쨌든 20Hz 이하의 음높이는 구별할 수 없습니다.  

서라운드 믹싱은 오디오 파일을 여러 스피커에 전달한다는 점을 제외하면 스테레오 믹싱과 비슷합니다. 따라서 팬포트는 이제 서라운드 패너입니다(그림 1).

그림 1: Studio One의 서라운드 패너.

Dolby Atmos를 입력하세요

Dolby Atmos는 스테레오 서라운드보다 서라운드에서 더 큰 도약을 이루었습니다. 먼저 Atmos는 높이라는 요소를 추가합니다. 이제 당신은 단지 소리에 둘러싸여 있는 것이 아니라 공간에 몰입되어 있습니다. 둘째, Atmos는 WAV 파일과 같은 오디오가 아닙니다. 사운드 배치 위치 선택이 스피커 수에 따라 제한되는 서라운드와 달리 Atmos는 가상 3D 세계에 모노 또는 스테레오 사운드를 배치하는 메타데이터 에 관한 것입니다.

Atmos를 경험하는 최적의 방법은 스피커를 사용하는 것입니다. 하지만 여기에는 약간의 복잡함과 보정이 필요합니다. 예를 들어, 위에서 소리를 들으려면 "높이" 스피커(종종 사운드바의 일부)가 천장에서 소리를 튕겨냅니다. 또한 여러 명의 스피커를 수용할 수 있는 공간이 필요합니다. 그러나 스피커를 대체할 수 있는 훌륭한 대안이 있습니다. 바로 헤드폰을 통한 바이노럴 사운드입니다. 바이노럴 오디오 덕분에 Atmos와 믹싱하고 헤드폰을 통해 결과를 들을 수 있으므로 복잡한 다중 채널 설정이 필요하지 않습니다. Atmos의 3D 공간에서 믹스를 만든 후 이를 바이노럴 오디오로 렌더링하면 됩니다. 그러면 헤드폰 을 통해 렌더링된 믹스를 듣는 사람들이 믹스 할 때 들었던 내용을 들을 수 있습니다.

헤드폰으로 들으면서 Dolby의 짧은 YouTube 데모를 확인 하면 Atmos 믹스가 헤드폰으로 공간감을 얼마나 잘 표현하는지 들을 수 있습니다.

Atmos 메타데이터가 정의하는 것

Atmos는 Bed와 Object를 구분합니다. 침대는 2.0(스테레오), 5.1 또는 7.1 서라운드와 같은 특정 채널 제한이 있는 기존의 채널 기반 믹스를 기반으로 하는 거대한 스템과 매우 유사합니다. (Atmos는 여러 개의 침대를 지원합니다.) 개념적으로 이는 침대용 믹스에 스테레오 이상의 요소가 포함될 수 있다는 점을 제외하면 이전 Studio One 버전의 콘솔을 사용하는 것과 다르지 않습니다. 여기에는 5.1 또는 7.1 서라운드를 위한 다중 채널 패닝과 다중 채널 친화적인 효과가 포함됩니다(그림 2).

그림 2: 새로운 서라운드 지연(Surround Delay)은 매우 다양합니다. 시도해 볼 때까지 기다리십시오.

공간적으로 말하면 침대는 공간 속에서 고정된 위치를 갖고 있다. 예를 들어, 캐릭터가 카지노에 앉아 있는 영화를 생각해 보세요. 침대는 배경의 카지노 소리, 사람들이 말하는 소리, 도박꾼, 기존의 서라운드 패닝을 기반으로 돌아다니는 직원 소리로 구성됩니다.

객체는 3D Atmos 공간 어디에든 배치할 수 있는 개별 모노 또는 스테레오 오디오입니다. 침대처럼 특정 채널에 얽매이는 것이 아니라 '공간에 떠 있는' 것입니다. 예를 들어 위의 카지노 예에서는 제임스 본드(James Bond)가 객체가 될 수 있습니다. 그는 카지노 뒤편의 계단을 내려와 앞쪽으로 어슬렁거리다가 바카라 테이블 한쪽으로 이동한 뒤 잠시 서서 동작을 관찰한 뒤 자리가 있는 곳으로 걸어간다. Atmos의 전용 개체 패닝을 사용하면 3D 공간에서 개체를 쉽게 이동할 수 있습니다(그림 3).

그림 3: 개체 패너는 3D 공간에서 개체를 이동할 수 있습니다. 이러한 변경 사항을 자동화할 수 있습니다.

침대와 물건을 생각하는 또 다른 방법은 무대에서 연주하는 밴드입니다. 드러머, 드러머 옆의 베이시스트, 키보드 연주자, 배경 가수는 무대 위의 자리에 그대로 남아 있습니다. 그것은 침대입니다. 뛰어다니는 리드 싱어와 무선 시스템을 이용해 군중 속으로 들어가는 리드 기타리스트가 그 대상이다.

메타데이터 및 트랙

Atmos는 공간 필드를 생성하기 위해 객체를 포함하여 최대 128개의 트랙을 정의합니다. 영화의 경우 일반적으로 9.1 서라운드 베드용 트랙 10개와 최대 118개의 개체를 믹싱하는 작업이 포함됩니다. 그러나 원하는 방식으로 128개 트랙을 배포할 수 있습니다. 여기서 메타데이터가 작용합니다. 개체가 움직이는 속도, 오디오 레벨 등을 포함하여 위치 또는 패닝 데이터를 지정합니다. 기본적으로 이는 오디오의 트래픽 디렉터이며 3D 사운드필드에서 오디오를 라우팅합니다.

Atmos를 사용한 렌더링

버전 6.5에 포함된 Dolby Atmos Renderer는 일반적인 작업 흐름을 대체하는 것이 아니라 보완하고 기능을 추가합니다. 믹스를 스테레오나 서라운드를 포함한 여러 형식으로 변환할 수 있습니다. 다중 채널 스피커 시스템이 없는 사람들을 위해 Binaural Rendering(그림 4)은 헤드폰을 사용하여 다중 채널 스피커 시스템을 통해 듣는 효과를 재현합니다.

그림 4: Dolby Atmos 렌더러가 믹스를 바이노럴로 렌더링하고 있습니다. 

그리고 우리는 시작했던 곳으로 돌아왔습니다. 바이노럴 재생이 실제 3D 공간의 공간감을 재현하는 것처럼 Atmos로 만든 3D 공간의 공간감을 쉽게 재현할 수 있습니다. Studio One 6.5와 헤드폰을 사용하면 이제 몰입형 오디오로 연주를 시작할 수 있습니다 .