📄

Soundfield Endpoint Submix

Pages List

List view

Summation

Devlog

Cropout Sample Project

Audio 전용 Game Instance Subsystem과 Audio Core

Cropout 리빌드 프로젝트

게임 사전 구조 파악

믹싱 데스크 구성

오디오 데이터 관리를 위한 Structure기반 Data Table

Sound Design

Knowledges

Animation Modifier - AN

Blueprint Interface - BPI

Control Bus Mix

Data Table - DT

Dialogue Voice - DV

Dialogue Wave - DW

A/B Spaced Pair

Additive Synthesis

Ampere - A (전류)

Amplitude (진폭)

Analog-to-Digital Converter - ADC

Auditory Illusion (청각 착시)

Binaural Hearing (양이 청취)

Bit Error Rate - BER

Cocktail Party Effect (칵테일 파티 효과)

Damping (감쇠)

Diaphragm (진동판)

Digital Audio Interface

Digital Audio Workstation - DAW

Digital-to-Analog Converter - DAC

Dipole Gain - dBd

Distortion (왜곡)

Dynamic Range - DR

Frequency - Hz (주파수)

Fundamental Frequency - F0 (기본 주파수)

Harmonics (배음)

Inharmonics (비배음)

Overtone (상음)

Fourier Transform (푸리에 변환)

Period - T (주기)

Phase - φ (위상)

In-Phase (동상)

Out-of-Phase (역상)

Polarity (극성)

Wavelength - λ (파장)

Power - W (전력)

Relative Average Loudness - RAL

Sound Pressure Level - dB SPL

Full Scale - dBFS

True Peak - dBTP

Hearing Level - dB HL

Weighting Filters - A / B / C Weighting

Loudness Units relative to Full Scale - LUFS

Loudness K-weighted relative to Full Scale - LKFS

Loudness Range - LRA

Isotropic Gain - dBi

Sound Power, Acustic Power (음향 파워)

Signal-to-Noise Ratio - SNR (신호 대 잡음비)

Total Harmonic Distortion - THD

Root Mean Square - RMS

Threshold (Parameter)

Resistance - R (저항)

Sine Wave (정현파)

Mode of Vibration (비조화 모드)

Fletcher-Munson Curve

Equal Loudness Contour (등청감곡선)

Nyquist Theorem (나이퀴스트 이론)

Effective Number of Bits - ENOB

Quantization (양자화)

Parameter (Parameter)

Amplifier (증폭기)

Gooseneck Microphone

Boom Microphone

Headset Microphone

Earset Microphone

Boundary / PZM Microphone

Parabolic Microphone

Wireless Microphone

Measurement Microphone

Auditory Masking (청각 마스킹)

Precedence Effect, Haas Effect (선행 효과)

Auditory Scene Analysis (청각 장면 분석)

Temporal Integration (시간적 적분)

Missing Fundamental (결손 기본주파수)

Recorder (녹음기)

Pitch Correction

Delay Time (Parameter)

Sync (Parameter)

Note Value (Parameter)

Offset (Parameter)

Feedback (Parameter)

Mix (Parameter)

Damping (Parameter)

Stereo Width (Parameter)

Pan (Parameter)

Ping-pong (Parameter)

Cross Feedback (Parameter)

Transmission Medium (매질)

Outer Ear (외이)

Middle Ear (중이)

Inner Ear (내이)

Ear Drum (고막)

Ossicles (이소골)

Cochlear Duct (달팽이관)

Phase Distortion

Electric Guitar

Digital Artifact

Low Frequency Oscillator - LFO

Subtractive Synthesis

Non-Destructive Editing (비파괴 편집)

Sound Effects - SFX

Granular Synthesis

Background Noise

Post Production

Dynamic Speaker

Dynamic Audio Processor - DSP

Fast Fourier Transform - FFT

Spherical Harmonics

Envelope Tracker

Envelope Follower

Peak Programme Meter - dBPPM

Speech Interference Level - SIL

Voltage - V (전압)

Linear (선형)

Timbre (음색)

Resonance (공진)

Fundamental RMS

Convolution Reverb

Ratio (Parameter)

Knee (Parameter)

Attack (Parameter)

Decay (Parameter)

Sustain (Parameter)

Release (Parameter)

Square Wave (사각파)

Saw Wave (톱니파)

Triangle Wave (삼각파)

White Noise (백색 잡음)

Frequency Response

Brownian Motion (브라운 운동)

Digital Signal Process

Dynamic Microphone

Condenser Microphone

Ribbon Microphone

Omni-Directional (무지향성)

Super Cardioid (초지향성)

Shotgun Microphone

Lavalier Microphone

High-pass Filter

Low-pass Filter

Band-pass Filter

Band-stop Filter

Shelving Filter

Cutoff Frequency

Center Frequency

Uni-Directional (단일지향성)

Bi-Directional (양지향성)

Proximity Effect (근접 효과)

Off-axis Coloration (오프축 착색)

Inverse-square Law (역제곱 법칙)

Polar Pattern (지향성 패턴)

Head-related Transfer Function

Distance Attenuation

Boundary Effect

Transient Reponse

Electret Condenser Microphone

Stereo Microphone

3:1 Microphone Rule

X/Y Coincident Pair

M/S Mid Side Technique

Electrodynamic Speaker Drive

Loudspeaker Enclosure

Nearfield Speaker

Full Range Speaker

Graphic Equalizer

Parametric Equalizer

Dynamic Equalizer

Variable-Mu Compressor

Optical Compressor

Digital Compressor

Hold (Parameter)

Gain Reduction Meter - GR

Make-up Gain (Parameter)

Stereo Compressor

Multiband Compressor

Hall (Parameter)

Plate (Parameter)

Room (Parameter)

Ambience (Parameter)

Chamber (Parameter)

Spring (Parameter)

Gate (Parameter)

Size (Parameter)

Pre-Delay (Parameter)

Early Reflection (Parameter)

Diffusion (Parameter)

Wet/Dry (Parameter)

Load more

Introduction

정의

Unreal Engine 내부에서 다채널 Audio Signal을

Ambisonics 같은 3차원 공간 구형 데이터로 인코딩한 뒤 기본 Master

Sound Submix를 거치지 않고 운영체제의 공간 음향 렌더러나 외부 3D Audio 디코더로 직접 송출하는 특수 라우팅 Asset이다.

설명

과거 5.1 채널이나 7.1 채널 기반의 평면적인 Surround Sound 시스템은 청취자의 머리 위나 아래에서 발생하는 소리를 정확하게 표현하는 것이 물리적으로 불가능했다.

가상현실 기기와 3D Audio 하드웨어가 발전함에 따라 Epic Games는 채널의 제약을 벗어나 소리가 구형의 공간 전체에 분포하는

SoundField 기술을 엔진 코어에 도입했다.

일반적인

Endpoint Submix가 단순한 채널 분리와 전송에 목적을 둔다면 이 Asset은 소리의 3차원 위치 정보와 방향성 데이터를 고스란히 보존하여 외부 하드웨어로 넘기는 것에 특화되어 있다.

현업 Pipeline에서는 Sony 3D Audio 플랫폼이나

Dolby Atmos 규격에 맞춰 게임의 최종 Audio를 출력하거나 복잡한 가상현실 환경에서 사실적인 정위감을 청취자에게 전달하는 최상위 공간 음향 믹싱 노드로 작동한다.

원리

Ambisonics 포맷 변환

입력된 Audio Signal을 좌우 채널 스피커 위치로 나누는 대신 가상의 구형 공간을 수학적으로 분할하는

Spherical Harmonics 체계를 사용하여 3차원 공간 지향성 데이터로 인코딩한다.

공간 메타데이터 보존

소리가 발생한 3D 좌표와 거리 감쇠 그리고 방향성 정보를 일반적인 오디오 파형과 결합하여 전송함으로써 외부 장치가 청취자의 머리 회전에 맞춰 소리를 실시간으로 재계산할 수 있게 돕는다.

운영체제 렌더러 직결

엔진 내부의 Master Submix를 물리적으로 우회하고 Windows Sonic이나 Apple Spatial Audio 같은 운영체제 단의 네이티브 공간 음향 디코더로 데이터를 찔러 넣어 하드웨어 가속을 유도한다.

서드파티 플러그인 확장

특정 회사의 독점적인 디코딩 기술에 종속되지 않고 다양한 제조사의 공간 음향

Plug-In을 이 Asset에 결합하여 출력 규격을 런타임에 자유롭게 교체하는 모듈형 아키텍처를 지원한다.

구조

예시

VR Headset 몰입형 오디오 연동

가상현실 Game 환경에서 Player가 머리를 돌릴 때마다 소리의 발생 위치가 실시간으로 변해야 한다. 헬리콥터 소리나 괴물의 울음소리를 이 Asset으로 라우팅하여 HMD 하드웨어에 내장된 공간 디코더로 직접 송출함으로써 Player의 시선 추적 데이터와 Audio 방향을 수학적으로 완벽히 동기화하여 멀미 현상을 방어한다.

Dolby Atmos 홈 시어터 출력

AAA 급 Console Game을 개발할 때 거실의 천장 스피커를 포함한 다채널 홈 시어터 환경을 지원하기 위해 사용한다. 비행기가 머리 위로 지나가는 Audio Event를 기존 서브믹스 대신 이 Asset으로 우회시키고 Dolby Atmos Plugin과 결합하여 천장 채널로 정확한 고도 데이터를 전송하는 하이엔드 믹싱 Pipeline을 구축한다.

360도 Cinematic 비디오 렌더링

Game 트레일러를 YouTube 360도 영상 포맷으로 추출할 때 평면적인 Stereo Audio를 입히면 공간감이 완전히 붕괴된다. 전체 Game Audio를 1차 혹은 3차 Ambisonics 규격으로 세팅된 이 Asset을 거쳐 오프라인으로 바운스하여 영상 파일과 결합함으로써 시청자가 스마트폰을 돌리는 방향에 맞춰 배경음악과 대사의 위치가 입체적으로 회전하는 결과물을 창출한다.

Mark as Publish

정의 설명 원리 구조 예시 VR Headset 몰입형 오디오 연동 Dolby Atmos 홈 시어터 출력 360도 Cinematic 비디오 렌더링

Made with Bullet