위키득계정 ↗
기술

MSU-Bench

MSU-Bench기술
질문 답변
생성형 1800쌍
입력 형식
ABC 표기와 PDF 악보
난도 체계
네 수준
평가 조건
예시 없는 평가와 미세 조정
MSU-Bench는 완전한 악보를 대상으로 음높이와 리듬, 화성과 큰 구조를 통합해 이해하는 능력을 평가하는 벤치마크다. 문자형 ABC 표기와 시각적 PDF 악보를 비교한다.

부분 기호에서 전체 악보로

개별 음표를 읽는 일과 전체 곡의 조직을 설명하는 일에는 다른 추론이 필요하다. MSU-Bench는 음높이와 리듬, 화성 및 큰 구조를 통합하는 악보 수준의 이해를 평가한다.

표현 형식과 난도

바흐와 베토벤, 쇼팽과 드뷔시 등의 작품에서 생성형 질문 답변 1800쌍을 구성한다. ABC 문자 표기와 PDF 악보를 사용하고 음의 시작 정보부터 짜임새와 형식까지 네 난도 수준을 둔다.

모달리티에 따른 성적

열다섯 개가 넘는 모델을 예시 없는 조건과 미세 조정 조건에서 평가한다. 입력 형식 사이의 격차와 수준별 성적의 불안정성, 여러 수준의 정답을 함께 유지하는 어려움을 분석한다.

기호와 구조의 예

반복 기호를 읽을 수 있어도 반복 전후의 악구가 전체 형식에서 어떤 역할을 하는지 설명하지 못할 수 있다. 낮은 수준의 기호 판독과 긴 범위의 구조 이해를 각각 확인해야 한다.

관련 문서

MuSP-Bench / MusTBench / GaMMA 음악 이해 / MuChoMusic / MuChin / MERT