시트 뮤직은 그냥 구조화된 데이터입니다. 에이전트에게 맡기세요.
연주자들은 악보를 읽고 쓰는 법을 익히는 데 수년을 보냅니다. 하지만 개발자의 관점에서 보면 시트 뮤직은 구조화된 데이터입니다. 음표가 시간, 음높이, 세기 값을 가진 격자 위에 놓여 있는 형태죠. 그리고 구조화된 데이터야말로 AI 에이전트가 가장 잘 다루는 영역입니다.
Cursor에서 AnyCap을 사용하면 에이전트가 오디오를 악보로 옮기고, 연습용 스코어를 대량 생성하고, 형식을 변환하고, 예전에는 전용 소프트웨어와 훈련된 작곡가가 필요했던 작곡 워크플로를 자동화할 수 있습니다. 방법은 다음과 같습니다.
AI 음악 작곡의 현황
기존의 음악 표기 도구는 이미 무엇을 해야 하는지 아는 사람을 위해 만들어졌습니다:
| 도구 | 유형 | 가장 적합한 용도 |
|---|---|---|
| MuseScore | 오픈소스 표기 | 전체 스코어, 커뮤니티 기반 |
| Sibelius | 전문 표기 | 오케스트라, 출판 수준 |
| Dorico | 현대적 표기 엔진 | 복잡한 현대 음악 스코어 |
| Noteflight | 웹 기반 표기 | 교육, 빠른 편곡 |
| ScoreCloud | AI 보조 전사 | 오디오 → 표기 변환 |
| AnthemScore | AI 전사 | 오디오를 MIDI로 자동 변환 |
이 도구들은 강력합니다. 하지만 흐름은 같습니다. 앱을 열고, 새 스코어를 만들고, 음표를 하나씩 배치한 뒤, 내보내기. 100개의 연습문제를 위한 시트 뮤직을 만들거나, 오디오 파일 20개를 전사하거나, 학교 밴드의 모든 악기를 위한 편곡을 만들어야 한다면 수작업 방식은 한계에 부딪힙니다.
AI 에이전트가 자동화할 수 있는 것
오디오를 악보로 전사하기
AnyCap 에이전트에 MP3를 넣으면 시트 뮤직을 돌려받을 수 있습니다. 에이전트는 오디오를 ScoreCloud나 AnthemScore 같은 전사 모델로 보내고, 결과를 MusicXML이나 PDF로 정리합니다:
agent prompt: "이 오디오 파일을 피아노용 시트 뮤직으로 전사해서 PDF로 출력해줘"
→ agent: [오디오 처리 → 표기 변환 → Piano_Transcription.pdf로 내보내기]
음악을 전사해주는 ai가 있나요는 월 1,600회의 검색량을 가진 키워드입니다. 사람들은 바로 이런 것을 찾고 있습니다.
배치 스코어 생성
교사, 콘텐츠 제작자, 교육 플랫폼은 음계, 아르페지오, 초견 연습 등 수백 개의 연습 스코어가 필요합니다. 에이전트는 이를 모두 프로그램적으로 생성합니다:
keys = ["C", "G", "D", "A", "E", "B", "F#", "Db", "Ab", "Eb", "Bb", "F"]
for key in keys:
agent.generate_score(
type="major_scale",
key=key,
instrument="piano",
output=f"./exercises/{key}_major_scale.pdf"
)
12개의 음계, 12개의 PDF, 수동 음표 배치 0회.
형식 변환
MIDI를 MusicXML로. MusicXML을 PDF로. 오디오를 MIDI로. 피아노 롤을 시트 뮤직으로. 이런 변환은 표기 소프트웨어에서 번거로운 수작업입니다. 에이전트는 이를 파일 변환 작업으로 처리합니다. 형식 A를 읽고 형식 B를 씁니다.
다중 악기 편곡
멜로디 하나만 주어지면 에이전트는 어떤 편성에도 맞는 편곡을 만들 수 있습니다:
agent prompt: "이 피아노 멜로디를 현악 4중주용으로 편곡해줘"
→ agent outputs: violin_I.pdf, violin_II.pdf, viola.pdf, cello.pdf, full_score.pdf
에이전트 기반 작곡 파이프라인
예전에는 세 가지 도구와 훈련된 연주자가 필요했던 완전한 워크플로입니다:
- 입력 — 멜로디 오디오 파일(MP3, WAV 또는 휴대폰 녹음)
- 전사 — 에이전트가 전사 모델을 통해 오디오를 MIDI로 변환
- 정리 — 에이전트가 타이밍을 양자화하고 명백한 음정 오류를 수정
- 편곡 — 에이전트가 대상 악기용 파트를 생성
- 표기 — 에이전트가 MusicXML로 렌더링한 뒤 PDF로 변환
- 전달 — 파일이 프로젝트 폴더에 이름과 함께 정리되어 저장
이 모든 과정은 AnyCap이 각 단계를 오케스트레이션하는 Cursor 안에서 일어납니다. 파이프라인을 한 번만 설명하면, 에이전트가 넣는 모든 파일에 대해 그대로 실행합니다.
작곡 워크플로에 AnyCap이 적합한 이유
단독 표기 도구는 사람이 직접 조작한다고 가정합니다. AnyCap은 에이전트가 조작한다고 가정합니다. 그리고 그 차이는 아키텍처를 바꿉니다:
| 작업 | 단독 도구 | AnyCap 에이전트 |
|---|---|---|
| 1개 트랙 전사 | 도구 열기, 오디오 가져오기, 대기, 내보내기 | 에이전트가 백그라운드에서 처리 |
| 20개 트랙 전사 | 위 과정을 20번 반복 | 에이전트가 20개 전부 순회 |
| 연습 스코어 생성 | 각 스코어를 수동으로 생성 | 템플릿에서 생성 |
| MIDI를 PDF로 변환 | 표기 도구에서 MIDI 열기, PDF로 인쇄 | 에이전트: MIDI 읽기, PDF 쓰기 |
| 앙상블용 편곡 | 각 파트를 수동으로 생성 | 에이전트가 모든 파트 생성 |
차이는 기능이 아니라 규모입니다. 전사 1개는 쉽습니다. 50개는 에이전트가 있을 때만 쉽습니다.
실제 활용 사례
음악 교육 플랫폼은 에이전트 기반 작곡으로 학생별 맞춤 연습지를 생성합니다. 초급자는 다장조 음계를 받고, 고급자는 변박의 반음계 연습을 받습니다. 둘 다 같은 에이전트 템플릿에서 생성됩니다.
콘텐츠 제작자는 로열티 프리 오디오를 전사해 시트 뮤직을 만들어 청중에게 제공합니다. 트랙을 업로드하면 표기본을 얻고, 게시까지 전부 자동화됩니다.
게임 개발자는 플레이어 행동에 따라 바뀌는 적응형 시트 뮤직을 생성합니다. 에이전트가 게임 상태를 모니터링하고, 렌더러가 실시간 오디오로 바꾸는 MusicXML을 출력합니다.
시작하기
AnyCap을 설치하고 Cursor를 연 다음, 이렇게 입력해 보세요:
transcribe this audio to sheet music for piano, output as PDF
에이전트가 전사, 표기, 내보내기를 처리합니다. PDF는 프로젝트에 나타납니다. 별도의 표기 소프트웨어는 필요 없습니다.
더 보기: programmatic music generation for developers | 8-bit music with AI agents | AI music APIs compared