생성 설명과 메타정보
캡셔닝 모델의 설명에 메타정보를 더해 음악 언어 연구에 활용할 자료를 구성한다. 사람이 모든 문장을 직접 쓴 음악 설명 자료와는 생성 과정이 다르다.
유사 곡을 이용한 보완
음악 특징과 메타정보를 함께 사용해 비슷한 곡을 검색한다. 검색한 곡의 정보를 로컬 대형 언어 모델에 활용해 빠진 메타정보를 채운다. 보완한 정보와 원래 관측한 정보는 구별할 필요가 있다.
연구 용도와 평가
다섯 측정 방식으로 접근을 정량적으로 검증하며 음악 검색과 멀티모달 표현 학습, 생성 음악 모델 등의 연구 용도를 제시한다. 자료의 규모만으로 모든 캡션과 보완 속성의 정확성을 보장하지는 않는다.
유사성과 동일성의 차이
비슷한 리듬과 악기를 가진 두 곡이라도 제작 시기나 의도까지 같지는 않을 수 있다. 유사 곡에서 정보를 얻는 방식에서는 음향적으로 비슷하다는 근거가 어떤 속성의 보완에 충분한지 따로 살펴야 한다.
관련 문서
Song Describer / MuChin / WavCaps / MusCALL / MuLan / MARBLE 음악 표현 평가