월 $20짜리 ChatGPT Plus 구독과 OpenAI의 Codex 데스크톱 앱만으로 mastering plugin(음원의 최종 음량과 음색을 다듬는 오디오 처리 도구) 하나를 설계부터 DSP(digital signal processing, 디지털 신호 처리) 코드 작성까지 약 4분 만에 끝내고, Logic Pro에서 쓸 수 있는 AU와 VST 형식으로 설치하는 과정입니다. 소프트웨어 개발 경험이 없어도 올바른 지시만 주면 가능하다는 것이 이 작업의 출발점입니다. 다만 결과는 두 갈래로 갈렸습니다. 새로 만든 plugin은 상용 제품과의 blind test(어느 것이 어느 제품인지 모른 채 듣고 평가하는 시험)에서 7개 중 6위에 그쳤고, 같은 방식으로 약 10분 만에 만들어 무료로 배포 중인 soft clipper(신호의 꼭대기를 부드럽게 깎아 음량을 올리는 도구)는 2위에 올라 상용 제품 여럿을 제쳤습니다. 코딩은 더 이상 걸림돌이 아니고, 무엇이 좋은 소리인지 아는 귀가 성패를 가른다는 결론으로 이어집니다.
준비물: ChatGPT Plus와 Codex 데스크톱 앱
작업 환경은 OpenAI의 Codex 데스크톱 앱입니다. 웹 챗과 달리 컴퓨터의 운영체제 위에서 직접 파일을 만들고 스크립트를 실행하며, 매번 허락을 구하지 않고 소프트웨어를 빌드할 수 있는 agent(스스로 도구를 써서 작업을 수행하는 AI) 환경입니다. OpenAI 데스크톱 앱에서 엔진을 ChatGPT에서 Codex로 바꾸고, 모델은 복잡한 설계 작업용 최상위 모델인 GPT-6 Astra를 골랐습니다. 대안으로 Anthropic의 Claude Code를 Claude Opus 5.5 High 모드로 쓰는 쪽이 현 시점 코딩 성능으로는 더 뛰어나다고 볼 수 있지만, 접근성이 더 보편적인 Codex로 진행했습니다. 모델 이름은 빠르게 바뀌므로 이 글을 읽는 시점에는 다른 버전이 보일 수 있습니다.
비용 관리를 위해 reasoning(모델이 답을 내기 전에 생각하는 단계)의 강도는 Light로 낮췄습니다. 하위 모델은 작은 일을 맡기는 신입 직원, 최상위 모델은 큰 설계를 맡기는 경영자에 비유할 수 있는데, 최상위 모델에 높은 reasoning 설정까지 얹으면 주간 사용량 token(AI가 처리하는 텍스트 단위)이 훨씬 빨리 소모됩니다. 초기 시제품 단계에서는 Light로도 충분하다는 판단입니다. reasoning을 Ultra로 올리면 더 깊이 스스로 탐색하지만 시스템 권한을 자주 요청합니다.
첫 prompt: 기능은 상용 plugin에서, 외관은 하드웨어에서
prompt(AI에 주는 지시문)는 글로 설명하는 대신 이미지 두 장을 붙여 넣는 방식으로 구성했습니다. 복잡한 오디오 구조를 말로 풀어 쓰는 것보다 참고 이미지를 주고 기능 블록을 뽑아내게 하는 편이 낫기 때문입니다.
| 재료 | 출처 | 지시 내용 |
|---|---|---|
| 기능 참고 | Musik Hack의 Master Plan 2 화면 캡처 | 들어 있는 mastering 구성 요소를 찾아내되, 그 원리를 새 구조로 다시 만들 것 |
| 외관 참고 | Drawmer MC3.1 모니터 컨트롤러 하드웨어 사진 | 비슷한 느낌의 손잡이, 질감, 색감으로 완전히 새로운 UI를 설계할 것 |
| 제약 | 직접 작성 | parameter 이름을 전부 새로 짓고, 외관이나 기능의 복제품을 만들지 말 것 |
| 제약 | 직접 작성 | 기존 내부 저장소의 코드를 가져오지 말고 처음부터 작성할 것 |
핵심은 복제가 아니라 재해석입니다. 상용 제품의 화면은 "mastering plugin에는 어떤 기능이 들어가는가"를 뽑아내는 용도로만 쓰고, 이름은 Plan B로 새로 붙였으며, 모든 parameter 이름을 다시 짓게 했습니다. 저작권 문제와 코드 유출을 피하려고 기존 저장소의 코드를 끌어오지 말라는 지시도 명시했습니다. 외관은 소프트웨어가 아니라 녹음실용 하드웨어의 묵직한 빈티지 손잡이와 색 배합에서 가져와 기능과 디자인의 출처를 분리했습니다. 한 분야의 기능 구조와 다른 분야의 시각 언어를 합치면 전혀 다른 제품이 나온다는 접근입니다.

▲ 기능과 외관의 출처 분리
첫 번째 걸림돌: 사용량 안전장치
작업을 시작하자마자 Codex가 멈췄습니다. 주간 사용량이 88%에 이르렀고, AGENTS.md(agent의 행동 규칙을 적어 두는 설정 파일)에 80%를 넘으면 지원 외 작업을 중단하도록 정해 두었기 때문입니다. 남은 할당량은 12%였습니다. 이런 안전장치는 agent가 실험적인 작업에 한 달치 사용량을 다 써 버리는 것을 막아 줍니다. 해결은 간단했습니다. 이번 단계에는 주간 사용량의 5%까지만 허용한다는 한도를 직접 적어 주고 계속 진행하게 했습니다. 상한을 명시한 override가 아무 제한 없는 허용보다 안전합니다.
4분 만에 나온 설계 문서와 DSP 코드
약 1분 20초 뒤 Codex는 UI 시안과 설계 문서(design.md)를 내놓았습니다. 숯빛 금속 전면판, 어두운 손잡이, 상아색 글자, 호박색 미터로 이루어진 외관에 기능은 네 블록으로 묶였습니다.
| 블록 | 들어간 기능 |
|---|---|
| Shape | multiband compression, 주파수 균형 EQ, 선명도 보정, 공진 제어 |
| Texture | 테이프 질감, saturation(배음을 더하는 포화), 응집감, 고역 배음 생성 |
| Space | 스테레오 폭 조절, 모노 확인 |
| Finish | 출력 레벨, density compression, loudness limiting, true peak 상한 보호 |
세부 parameter는 별도의 Detail 탭에 넣어 기본 화면을 깔끔하게 유지하도록 지정했습니다. 다만 이 시점의 결과물은 설계도일 뿐이고, 실제 소리를 처리하는 코드는 아직 없었습니다. 그래서 DSP 라이브러리를 처음부터 작성하라고 지시하면서 Space 블록에 작은 room reverb(공간 잔향)를 넣으라는 요구를 추가했습니다.
DSP 코드는 2분 38초 만에 완성되어 누적 작업 시간은 약 4분이 되었습니다. 6밴드 multiband 네트워크, 기본값은 bypass이고 0~25% 범위로 섞이는 room reverb, true peak 초과 보호, oversampling까지 들어갔고, 이 단계에서 쓴 주간 token은 1%에 불과했습니다. 같은 규모의 DSP를 사람이 직접 짜면 9개월에서 수년이 걸렸다는 점과 대비됩니다. 마지막 prompt는 "install vst / au so I can use in logic pro" 한 줄이었고, Codex가 로컬 빌드 도구를 설정해 macOS용 오디오 바이너리를 컴파일했습니다.
두 번째 걸림돌: 들어 보니 드러난 문제들
Logic Pro에 올려 하나씩 돌려 보자 AI가 만든 시제품에서 흔히 나타나는 문제가 모였습니다.
- Space의 Room Mix가 잔향을 병렬로 더하지 않고 원음과 crossfade로 섞어, 잔향을 올릴수록 원래 음량과 펀치가 줄었습니다. mastering에서 잔향은 반드시 병렬 경로에 두라고 지시했어야 하는 부분입니다.
- 화면에 깨진 글자가 섞여 있었고, 코드를 가져오지 말라고 했는데도 내부 프로젝트 폴더의 디자인 규칙에서 TX, KX 같은 버튼이 따라 들어왔습니다.
- Luster처럼 무엇을 하는지 알 수 없는 parameter 이름이 있었고, 실제로 돌려 봐도 변화가 거의 느껴지지 않았습니다.
- bypass가 켜고 끄는 스위치가 아니라 0~100% 다이얼로 구현되어 있었습니다.
- Texture의 Drive는 특별한 온기 없이 평범한 saturation이었고, Finish의 limiter를 밀어붙이면 상용 limiter의 매끈함과 여유 없이 거칠고 납작해졌습니다.
- 첫 빌드의 화면은 시안과 전혀 달랐습니다.
마지막 문제는 "this looks nothing like the reference"로 시작해 참고 이미지대로 다시 만들라는 prompt 하나로 해결됐습니다. 2분이 채 안 걸렸고 주간 사용량의 2%를 썼습니다. 다시 불러온 plugin은 Shape(Foundation, Focus, Brilliance), Texture(Drive, Density, Detail), Finish(Level, Ceiling), Space(Room Mix, Room Detail)로 구조가 정리되어 있었습니다. Logic Pro가 기본으로 보여 주는 장식 없는 슬라이더 목록과 비교하면, plugin이란 결국 코드 속 슬라이더 묶음이기 때문에 시각적 묶음과 위계가 있어야 복잡한 DSP를 다룰 수 있다는 점이 분명해집니다.

▲ 7개 plugin의 blind 비교
blind test: 새 plugin은 6위, 10분짜리 soft clipper는 2위
AI는 4분에 하나씩, 400분이면 mastering plugin 100개를 만들 수 있습니다. 그래서 상업적으로 내놓을 수 있는 기준은 하나뿐입니다. 최고 수준의 상용 제품과 blind A/B 비교에서 이기는가입니다. 사람은 자기가 만든 plugin이 대단하게 들린다고 쉽게 착각하므로, 확증 편향을 걷어내려면 이름을 가리고 들어야 합니다.
Logic Pro에서 HOFA 4U+ BlindTest를 써서 같은 힙합 트랙을 7개 처리 체인에 통과시키고, 무작위로 섞인 슬롯마다 들리는 대로 메모를 적었습니다. "transient 중심", "어둡고 너무 부드러움", "지나치게 거칠고 찌그러짐", "넓고 선명하고 꽉 차고 펀치 있고 더 큼" 같은 식입니다. 이어서 어둡고 부드러운 쪽, 깨끗하지만 안전하기만 한 쪽, 크고 펀치 있는 쪽의 세 등급으로 나눈 뒤 상위 3개를 다시 맞붙였습니다. 이 트랙에서는 transient(소리의 첫 타격)를 살리는 쪽을 선호한다는 기준을 미리 밝혀 두었습니다.
| 순위 | plugin | 메모 |
|---|---|---|
| 1 | 이전에 만들어 둔 AI mastering plugin | 넓은 스테레오, 선명함, 꽉 찬 밀도, 펀치 |
| 2 | ChatGPT로 약 10분 만에 만든 soft clipper(무료 배포) | 선명하고 펀치 있으나 1위보다 어둡고 고역 디테일 부족 |
| 3 | Master Plan 2 | 음량을 밀면 고역이 지나치게 거칠어짐 |
| 4 | Master Plan 1.5 | 너무 거침 |
| 5 | Apogee Limiter | transient는 좋으나 너무 안전하고 조용함 |
| 6 | Plan B(이번에 만든 plugin) | 지나치게 거칠고 찌그러지며 너무 부드러움 |
| 7 | 오픈소스 테스트 limiter | 최하위 |
1위와 2위의 차이는 "광년 단위"로 표현될 만큼 컸지만, 2위인 soft clipper가 개발에 3년이 걸렸다고 알려진 Master Plan 2를 비롯한 상용 제품을 제쳤다는 사실이 더 눈에 띕니다. 반대로 이번에 4분 만에 만든 Plan B는 6위였습니다. 같은 도구로 만들었는데 결과가 갈린 이유는 코드가 아니라 어떤 처리가 음악적으로 들리는지, parameter를 어떻게 조여야 하는지, DSP 경로를 어떻게 짜야 하는지를 아는 사람의 판단이 얼마나 들어갔느냐에 있다고 보는 것이 자연스럽습니다.
정리: 다른 분야에서 자기 도구를 만들 때
이 과정에서 코딩 지식이 필요한 순간은 없었습니다. 필요한 것은 무엇을 만들지 아는 분야 지식, 결과를 판별할 기준, 그리고 AI가 흔히 저지르는 실수를 미리 막는 지시였습니다. 음악이 아닌 분야에도 그대로 옮길 수 있는 절차로 정리하면 다음과 같습니다.
- 참고 자료를 이미지로 줍니다. 기능은 기존 소프트웨어 화면에서, 외관은 다른 출처에서 가져오고, 복제가 아니라 재해석임을 명시합니다.
- 상표를 베끼거나 기존 저장소 코드를 끌어오지 말라고 못 박습니다.
- 시제품 단계에서는 reasoning을 Light로 두고, AGENTS.md 같은 설정 파일이나 prompt에 사용량 상한을 적어 둡니다.
- 컨트롤의 종류를 구체적으로 지정합니다. bypass는 스위치, 잔향은 병렬 경로처럼 당연해 보이는 것도 적어야 합니다.
- 세부 설정은 별도 패널로 분리해 기본 화면을 단순하게 유지하게 합니다.
- 결과물은 반드시 그 분야 최고 제품의 체험판과 나란히 놓고, 가능하면 이름을 가린 채 7~10개를 한꺼번에 비교합니다. 1대1 비교보다 위치가 훨씬 정확히 보입니다.
- 같은 기준 자료(이 사례에서는 수개월간 써 온 한 트랙)를 반복해서 써야 작은 차이를 알아챌 수 있습니다.
오디오 plugin 개발에서 프로그래밍이라는 병목은 사라졌습니다. 남은 것은 소리를 듣고 판단하는 훈련된 귀이고, 이는 하루 만에 생기지 않습니다. ChatGPT Plus 구독이 있다면 오늘 당장 작은 도구 하나를 만들어 볼 수 있지만, 그 도구가 쓸 만한지는 만든 사람이 자기 분야에서 얼마나 정확히 판별할 수 있느냐에 달려 있습니다.


