Binaural Hearing (양이 청취)

Mark as In Progress

정의

인간이 좌우 두 개의 귀를 사용하여 소리가 발생하는 물리적인 위치와 거리 공간감을 3차원적으로 인지하는 청각 시스템의 근본적인 메커니즘이다.

설명

소리의 방향과 거리를 찾는 근본적인 원리는 1907년 영국의 물리학자 레일리 경이 발표한 이중 이론에서 처음 과학적인 체계를 갖추어 정립되었다. 그는 소리가 두 귀에 도달하는 시간의 차이와 음압 에너지의 차이가 방향을 결정하는 핵심적인 두 가지 물리 요소임을 증명해냈다.

과거 모노 시대의 음향 환경에서는 단순히 소리의 크기 자체만 존재했지만 2채널 스테레오 시스템이 발달하면서 인간의 청각적 특성을 전자적으로 모방하여 좌우 스피커 사이에 가상의 넓은 공간을 구축하게 되었다.

현대 오디오 파이프라인과 게임 사운드 디자인에서는 주로

📄

Headphone 청취 환경을 타겟으로 하여 평면적인 스테레오 소스를 360도 입체 음향으로 변환하는 공간 음향 기술의 가장 근본적인 바탕이 된다.

원리

시간차 인지 원리

소리가 발생하는 물리적 위치가 정중앙이 아닐 경우 한쪽 귀에 소리가 먼저 도달하고 다른 쪽 귀에는 두개골의 크기만큼 미세하게 늦게 도착하는 시간의 격차가 필연적으로 발생한다. 뇌는 이 수십에서 수백 마이크로초 단위의 짧은 지연 시간을 실시간으로 분석하여 좌우 방향을 매우 정밀하게 판별한다.

음압차 인지 원리

인간의 머리 형태 자체가 하나의 물리적인 장애물로 작용하여 소리가 반대쪽 귀로 회절하여 넘어갈 때 파장이 짧은 고주파 대역의 에너지가 흡수되거나 크게 감소하는 현상이 일어난다. 양쪽 귀에 도달하는 신호의 진폭 크기 차이를 통해 소리의 좌우 편향 정도를 정확히 계산한다.

머리 전달 함수 연산

어깨와 귓바퀴 그리고 머리통 전체 등 인간의 복잡한 신체 구조 표면에 소리가 반사되고 굴절되면서 발생하는 고유의 주파수 왜곡 패턴을 수학적으로 모델링한 수치다. 이를 통해 단순한 좌우 방향뿐만 아니라 상하의 높이와 앞뒤의 거리감을 입체적으로 인지하게 만든다.

스펙트럼 단서 해독

특정 방향에서 날아온 사운드가 귓바퀴의 복잡하고 굴곡진 연골 구조에 부딪히며 생성되는 미세한

📄

Frequency - Hz (주파수)

📄

Peak와 딥 현상을 뇌가 신경학적으로 해독하여 소리의 정확한 앙각과 고도 변화를 세밀하게 파악한다.

구조

양이기간 시간차 산출 물리적 모델

\text{ITD} = \frac{r}{c} (\theta + \sin\theta)

예시

3D Spatialization (3차원 공간화)

오디오 미들웨어나 게임 엔진 내부에서 개별 사운드 소스에 거리 감쇠 곡선과 공간화

📄

Plug-In을 적용한다. 플레이어의 메인 카메라 뷰를 기준으로 적 캐릭터의 발소리가 좌우 귀를 거쳐 들어오는 물리적 지연 현상을 연산하여 시야에 보이지 않는 타깃의 정확한 위치를 청각적으로 제시한다. 이 과정에서 각 오브젝트의 방위각 데이터를 오디오 엔진이 쉴 새 없이 갱신한다.

Dummy Head Recording (더미 헤드 레코딩)

실제 인간의 머리와 귓바퀴 구조를 똑같이 모방하고 내부에 고성능

📄

Microphone을 장착한 하드웨어 시스템을 사용하여 현장 소음을 수음한다. 믹싱 단계에서 별도의 패닝이나 공간계 플러그인을 거치지 않고 녹음된 원본 오디오 파일 자체만으로도 헤드폰 청취 시 완벽한 앞뒤 거리감과 고도의 입체적인 위상이 청취자의 뇌리에 맺힌다.

VR Audio Integration (가상현실 오디오 연동)

사용자의 헤드 마운트 디스플레이 트래킹 센서 데이터와 오디오 엔진을 실시간으로 연결하여 방대한 연산을 수행한다. 고개를 돌릴 때마다 양쪽 귀에 맺히는 위상차와 볼륨차를 초당 수십 번씩 재계산하여 시각적 렌더링 객체와 청각적 객체의 위치를 완벽하게 일치시킨다. 단 10밀리초의 지연만 발생해도 멀미를 유발하므로 시스템의 최적화가 필수적이다.

Mark as Done