악보와 연주의 차이
악보의 음높이와 길이만으로 실제 연주의 모든 표현이 정해지지는 않는다. 표현적 연주 직접 생성은 음표와 연주 시점, 강약을 함께 예측하는 공간에서 음악 생성을 다룬다.
자료가 담아야 하는 정보
이런 목표에서는 음표 목록뿐 아니라 연주가 구현한 세밀한 시간과 강약 정보가 중요하다. 연구는 적합한 자료가 어떤 성질을 가져야 하는지와 생성 문제의 범위를 함께 논의한다.
순환 모델의 실험
LSTM 기반 순환 신경망으로 직접 연주 생성을 실험하고 생성 예시를 제시한다. 일부 결과에 대한 전문 작곡가와 음악가의 피드백도 포함하지만 주관적 인상이 모든 음악적 기준의 성능을 확정하지는 않는다.
같은 음표의 다른 표현
같은 선율도 특정 음을 조금 늦추거나 더 강하게 연주하면 느낌이 달라질 수 있다. 음표가 맞는지와 연주 표현이 어떻게 구성됐는지는 별도의 평가 대상이다.
관련 문서
Music Transformer / MAESTRO / GiantMIDI-Piano / POP909 / SongEval / PitchBench