위키득계정 ↗
기술

시점 회귀 기반 피아노 전사

시점 회귀 기반 피아노 전사기술
대상
피아노 음표와 서스테인 페달
핵심 학습
정확한 시작 끝 시점 회귀
추론 방식
시점의 해석적 계산
관심 문제
시간 해상도와 주석 어긋남
시점 회귀 기반 피아노 전사는 음표와 페달의 정확한 시작 및 끝 시점을 회귀하도록 학습하는 자동 전사 방식이다. 프레임 간격에만 의존하는 시간 해상도의 한계를 줄이려 한다.

프레임 간격의 제약

프레임별로 시작과 끝을 검출하는 시스템에서는 시간 해상도가 분석 간격에 제한될 수 있다. 이 연구는 정확한 시점을 회귀하는 목표를 사용해 더 세밀한 전사를 다룬다.

음표와 페달의 시점

추론에서는 음표와 페달 사건의 시작 및 끝을 해석적으로 계산하는 절차를 제안한다. 음표만이 아니라 서스테인 페달도 평가 범위에 포함해 피아노 표현을 더 폭넓게 다룬다.

어긋난 주석과 평가

음표의 시작이나 끝 주석이 오디오와 어긋나는 조건에서 기존 방식과의 강건성을 비교한다. MAESTRO에서 음표 및 페달 시작 성적을 보고하지만 개별 지표의 개선을 모든 음악과 녹음 환경의 완전한 전사로 확대할 수는 없다.

시간 오차의 예

실제 타격이 두 분석 프레임 사이에서 발생하면 어느 프레임에 배정하는지에 따라 시점 오차가 달라질 수 있다. 연속적인 시점을 추정하는 문제와 음이 존재하는 프레임을 분류하는 문제를 구분해야 한다.

관련 문서

Onsets and Frames / MAESTRO / GiantMIDI-Piano / MusicNet 데이터셋 / PitchBench / MuSP-Bench