오디오와 기호 음악의 차이
MusicBERT는 실제 파형을 듣는 모델이 아니라 MIDI 같은 기호 표현을 다룬다. 음높이와 악기, 템포 및 마디 위치처럼 구조화된 정보를 활용해 음악 이해 표현을 학습한다.
음악에 맞춘 사전 학습
100만 곡 이상의 기호 음악 코퍼스를 구성하고 OctupleMIDI 인코딩과 마디 단위 마스킹을 제안한다. 자연어 사전 학습 방식을 그대로 옮기기보다 음악의 구조적 성격을 반영하는 접근이다.
후속 과제의 비교
선율 완성과 반주 제안, 장르 분류와 스타일 분류의 네 과제를 평가한다. 인코딩 및 마스킹 요소를 바꿔 보는 실험으로 각 설계의 영향을 확인한다.
구조를 반영한 질문
한 음표의 높이가 같아도 마디 위치나 주변 화음이 다르면 역할이 달라질 수 있다. 기호를 개별 숫자로만 보는 것과 구조 안의 관계로 이해하는 것을 구분해야 한다.
관련 문서
Compound Word Transformer / Pop Music Transformer / POP909 / GiantMIDI-Piano / MSU-Bench / MERT