사운드 디자인 이란: 소리로 장면을 설계하는 일

사운드 디자인 이란 장면에 들어가는 모든 소리를 만들고, 녹음하고, 편집하고, 믹싱해서 소리가 이야기를 실제로 전달하도록 만드는 작업입니다. 대사, 효과음, 폴리, 배경음, 음악이 모두 여기에 포함되며, 영화, 게임, 앱, 팟캐스트, 그리고 점점 더 많이 쓰이는 합성 음성 작업까지 같은 원리로 움직입니다. 실무적으로 보면 "이 소리가 존재한다"와 "이 소리는 이 장면에, 이 음량으로, 이 질감으로 들어가야 한다" 사이에서 판단을 내리는 층입니다.

사운드 디자이너는 하루 동안 무엇을 할까요?

직함을 걷어내면 일은 세 가지 동사로 정리됩니다. 획득하고, 다듬고, 배치하는 것입니다. 소리를 직접 녹음하거나, 라이브러리에서 가져오거나, 합성해서 얻습니다. EQ, 피치 조정, 타임 스트레치, 레이어링, 이펙트 처리로 모양을 만듭니다. 그리고 그 소리가 정확한 프레임에, 적절한 음량과 음향 환경에 놓이도록 시간과 공간 속에 배치합니다.

이 직업의 타이틀 자체는 많은 사람이 생각하는 것보다 젊습니다. EBSCO 리서치 스타터의 사운드 디자인 항목에 따르면, 사운드 디자이너라는 역할이 공식 크레딧에 처음 등장한 것은 1979년 영화 《지옥의 묵시록》(Apocalypse Now)입니다. 그 전에는 같은 일이 편집자, 폴리 아티스트, 리레코딩 믹서 사이에 나뉘어 있었습니다. 이 크레딧이 중요했던 이유는 흩어진 부서들 대신 한 사람에게 작품 전체의 사운드 정체성에 대한 권한을 주었기 때문입니다.

작은 팀에서는 이 권한이 더 소박한 규모로 줄어듭니다. 인디 게임에서는 디자이너, 녹음 담당, 구현자, 그리고 발걸음 소리가 반복될 때 버그를 등록하는 사람까지 한 사람이 맡기도 합니다. 이건 흔한 일입니다. 전체 체인을 이해하고 있어야 문제를 가장 싼 지점에서 고칠 수 있습니다.

모든 사운드트랙을 이루는 다섯 개의 레이어

대부분의 설명은 "효과음과 음악"에서 멈춥니다. 실무에서 쓰는 분해법은 다섯 개의 레이어입니다. 이들은 같은 주파수 공간을 두고 경쟁하기 때문에 디자이너는 이들을 함께 생각합니다.

1. 대사와 음성. 명료도가 가장 먼저입니다. 말소리는 대략 100Hz에서 8kHz 사이에 분포하고, 자음 선명도 대부분은 2kHz에서 5kHz 부근에 있습니다. 그래서 나머지 소리는 이 대역을 피해 깎아 냅니다.

2. 하드 이펙트. 문, 충격, 무기, UI 클릭음처럼 짧고 과도(transient) 성분이 많으며, 보이는 동작에 맞춰 싱크되는 소리입니다.

3. 폴리. 사람이 직접 연기하는 움직임(천의 스침, 발걸음, 소품 다루기)입니다. 대사와 화면을 이어 붙이는 역할을 합니다.

4. 앰비언스와 분위기. 방의 룸톤, 바람, 멀리서 들리는 차량 소리나 기계의 웅웅거림처럼, 듣는 사람의 뇌에게 지금 어디에 있는지 알려 주는 소리입니다.

5. 음악. 속도와 감정을 정하지만, 나머지 네 레이어를 위해 헤드룸을 남겨야 합니다.

여섯 번째 레이어인 침묵은 빈 공간이 아니라 의도된 디자인 선택입니다. 폭발음을 더 크게 넣는 장면보다, 충격이 오기 직전 0.5초 동안 소리를 거의 0에 가깝게 떨어뜨리는 장면이 더 강하게 와닿는 경우가 많습니다.

폴리와 현장 녹음이 라이브러리를 여전히 이기는 이유

라이브러리는 빠르고, 배경 질감에는 그것만으로 충분한 경우가 많습니다. 하지만 장면의 표면과 다른 표면에서 녹음된 라이브러리 발걸음 소리는 잘못된 공명을 가지고 있으며, 귀는 그것에 이름을 붙이기 전에 먼저 알아챕니다. 폴리는 화면에 맞춰 소리를 직접 연기하는 방식으로 이 문제를 해결합니다. 자갈길에는 실제 자갈 위에서 부츠를 밟고, 뼈가 부러지는 소리에는 셀러리 줄기를 마이크 근처에서 꺾고, 불을 표현하려면 구겨진 셀로판지를 씁니다.

현장 녹음도 같은 논리를 배경음에 적용한 것입니다. 로케이션에서 대사를 녹음할 때 쓴 것과 같은 마이크 위치로 90초짜리 룸톤을 담아 두면, 어떤 일반적인 "사무실 앰비언스" 파일도 맞출 수 없는 방식으로 대사의 노이즈 플로어와 맞아떨어집니다. 앰비언스는 테이크 사이의 편집 지점을 가리는 역할도 하므로, 다시 녹음하는 것보다 비용이 적게 듭니다.

프로토타입 단계라면 이 작업은 건너뛰어도 됩니다. 첫 패스에서는 임시 사운드(placeholder)로 충분하고, 컷될지도 모르는 장면의 오디오를 다듬느라 시간을 쓰지 않게 해 주므로 오히려 나을 때도 있습니다. 화면 편집이 확정된 뒤에 투자할 가치가 있습니다.

세션 노트: 장소마다 최소 20초의 무음을 녹음하세요. 조용해 보여도 나중에 노이즈 프로파일링에 필요하고, 한 번 떠나면 다시 녹음할 수 없습니다.

작업이 흘러가는 방식: 스포팅부터 최종 믹스까지

사운드 디자인은 파이프라인이며, 도구가 달라도 영화, 게임, 앱에서 단계는 일관됩니다.

스포팅. 감독이나 리드와 함께 화면(또는 게임 빌드)을 보면서 소리가 무언가를 해야 하는 지점을 표시합니다. 충격, 전환, 분위기 변화 같은 것들입니다. 이 목록이 이후 모든 작업을 이끕니다.

수집과 제작. 녹음, 라이브러리 검색, 합성, 그리고 점점 더 늘어나는 생성형 도구를 씁니다. 파일은 들여올 때 이름을 붙이고 태그를 달아야 합니다. "whoosh_final_v3" 같은 이름이 붙은 4,000개짜리 파일 폴더는 나중에 몇 시간을 잡아먹습니다.

편집과 레이어링. 하나의 "펀치" 소리는 보통 세 개에서 다섯 개의 레이어로 이루어집니다. 저주파 덩어리, 중역대 바디, 고주파 스냅, 때로는 잔향 꼬리가 붙습니다. 각 레이어는 자기만의 EQ를 거쳐야 탁해지지 않고 쌓입니다.

믹싱. 레벨, 패닝, 컴프레션, 리버브 센드를 조정합니다. 여기서는 방송과 스트리밍의 목표 값이 중요합니다. 많은 플랫폼이 통합 라우드니스를 대략 -14에서 -16 LUFS 근처로 맞추고, 영화 믹스는 다른 기준 레벨을 따릅니다. 그래서 페이더를 움직이기 전에 목표 값을 먼저 정해야 합니다.

전달과 구현. 영화에는 스템을, 게임 엔진에는 에셋과 재생 규칙을 전달합니다.

게임 오디오는 규칙을 바꿉니다: 반응해야 하는 소리

선형 미디어는 매번 같은 순간에 같은 소리를 재생합니다. 게임은 그렇지 않습니다. 발걸음 소리는 한 세션에서 만 번 넘게 재생될 수 있고, 표면, 속도, 카메라 거리에 따라 달라집니다. 그래서 게임 사운드 디자인은 소리 작업이면서 동시에 시스템 설계이기도 합니다.

실무에서 나오는 결과는 다음과 같습니다.

• 변주. 발걸음 샘플 하나를 반복하면 기계처럼 들립니다. 6개에서 8개의 변형 샘플 풀에 약간의 무작위 피치(±2~3%)와 볼륨 변화를 주면 반복감이 사라집니다.

• 파라미터. 소리는 속도, 체력, 거리, 표면 유형 같은 게임 상태에 반응합니다. 디자이너는 에셋만이 아니라 규칙도 만듭니다.

• 보이스 예산. 엔진은 동시에 재생할 수 있는 음성 수를 제한합니다. 바쁜 장면에서 무엇이 들릴지는 우선순위와 컬링 규칙이 정합니다.

• 메모리. 압축 포맷과 스트리밍 방식은 로딩 시간과 플랫폼 인증에 영향을 줍니다.

그래서 엔진 미들웨어와 엔진 자체가 DAW만큼 중요합니다. Unity에서 작업한다면 오디오 믹서, 스냅샷, 노출된 파라미터에서 실제 설계의 대부분이 이루어집니다.

대사는 보통 예산이 깨지는 지점입니다. 중간 규모의 RPG에는 수만 줄의 음성 대사가 들어갈 수 있고, 스크립트가 바뀌면 다시 녹음하는 비용이 큽니다. 그래서 많은 팀이 이제 플레이스홀더와 프로토타입 대사에 합성 음성을 쓰고, 실제 성우가 녹음하기 전에 사운드 디자이너가 템포와 믹스를 미리 검증합니다.

AI 음성이 사운드 디자인 안에서 맡을 수 있는 역할과 맡지 않을 역할

이 사이트는 대부분의 시간을 음성에 씁니다. 합성 음성은 이제 사운드 디자이너의 체인에서 하나의 도구이며, 다른 소스와 마찬가지로 행동합니다. 게인 스테이징, EQ, 믹스 안의 자리가 필요합니다. 합성 음성이 디자인 결정을 대신하지는 않습니다.

잘 맞는 경우는 세 가지입니다.

• 임시 대사(temp dialogue). 애니메틱, 프로토타입, 레벨 테스트에서 타이밍과 믹스 문제를 일찍 드러냅니다.

• 배경과 군중 음성(walla). 개별 명료도가 중요하지 않고, 다양한 클론 음성을 쓰면 녹음 하루를 아낄 수 있습니다.

• 크리처와 가공된 음성. 합성의 아티팩트가 질감의 일부가 됩니다. 클론을 피치 시프터, 링 모듈레이터, 컨볼루션 리버브에 통과시키면, 실제로는 녹음할 수 없었을 소스를 얻게 됩니다.

맞지 않는 경우도 있습니다. 감정이 실린 핵심 대사에서는 연기 지시를 따를 수 있는 성우가 여전히 유리합니다. 도구가 억양 곡선을 세밀하게 조절하게 해 주지 않는다면 더욱 그렇습니다. 그래서 원본 클론의 충실도보다 감정 파라미터가 더 중요합니다. 억양 곡선을 직접 조정할 수 있다면, 모델이 주는 결과를 그대로 받아들이는 대신 연기를 장면에 맞출 수 있습니다.

효과음과 분위기를 만드는 생성형 도구는 별개의 범주입니다. 거친 아이디어나 텍스처 베드로는 유용하지만, 최종 믹스에 들어가기 전에 라우드니스, 루프 포인트, 아티팩트를 반드시 확인해야 합니다.

녹음된 음성, 특히 팟캐스트나 내레이션 소스를 정리할 때는 텍스트 기반 편집이 정당한 지름길입니다. 텍스트를 편집해서 숨소리와 군더더기 말을 제거한 뒤 DAW에서 마무리하면 됩니다.

처음부터 시작한다면 무엇을 먼저 배워야 할까요?

먼저 듣는 법을 배우세요. 나머지는 모두 여기에 의존합니다. 잘 아는 영화나 게임의 장면 하나를 골라 눈을 감고, 60초 동안 들리는 소리를 모두 적어 보세요. 초보자는 보통 네다섯 개를 적습니다. 훈련된 귀는 열다섯 개를 적습니다.

그다음에는 이 순서로 배우세요.

1. DAW 하나를 골라 깊이 익히세요. Reaper, Pro Tools, Logic, Ableton 모두 괜찮습니다. 기능 목록이 가장 긴 도구보다, 프로젝트를 끝까지 마치게 해 주는 도구가 낫습니다.

2. 신호 흐름과 게인 스테이징을 배우세요. 믹스 전에 생긴 클리핑은 믹스 후에 고칠 수 없습니다.

3. EQ를 깎는 도구로 배우세요. 먼저 깎고, 그다음에 올립니다.

4. 클립 하나를 다시 설계해 보세요. 30초짜리 영상을 가져와 오디오를 지우고 처음부터 다시 만듭니다. 튜토리얼 열 개보다 이 시도 열 번이 더 많이 가르쳐 줍니다.

5. 엔진에 올려 보세요. 게임에 관심이 있다면 같은 소리를 변주와 파라미터를 갖춘 엔진에 구현해 보세요.

괜찮은 입문 장비는 밀폐형 헤드폰, 깨끗한 프리앰프가 하나 이상 있는 오디오 인터페이스, 그리고 소형 다이어프램이나 카디오이드 콘덴서 마이크입니다. 전체 비용은 약 $300에서 $600 사이로 잡고, 나머지 관심은 듣기에 쓰세요.

다음 세션 전에 확인할 것

사운드 디자인은 효과음을 쌓아 두는 일이 아닙니다. 관객이 무엇을 듣고, 무엇을 듣지 않게 할지, 그리고 각 소리가 어떻게 자기 자리를 얻는지를 정하는 훈련입니다. 도구는 매년 바뀌지만 질문은 그대로입니다. 이 소리는 무엇을 위한 것인가, 어디에 놓이는가, 이 소리가 사라지면 무엇이 일어나는가?

음성 작업을 하고 있다면 합성 음성도 체인의 다른 소스처럼 다루세요. 라벨을 붙이고, 처리하고, 믹스하고, 어디까지 잘 맞는지 솔직하게 판단하세요. 이번 주에 짧은 장면 하나를 골라 오디오를 지우고 다시 만들어 보세요. 어떤 정의보다 빠르게 사운드 디자인이 무엇인지 알게 됩니다.