큰 소리와 작은 소리
현실의 녹음에는 발화와 주변 소리가 함께 있고 상대적인 에너지도 달라진다. SSEU-Bench는 이런 차이를 명시적으로 고려해 특정 요소가 강하게 들리는 상황만으로 오디오 이해를 판단하지 않도록 한다.
독립 이해와 공동 이해
같은 오디오에서 발화와 장면, 사건을 각각 묻는 조건과 함께 이해하도록 묻는 조건을 둔다. 요소별 능력이 있어도 여러 조건을 동시에 다룰 때 성적이 달라질 수 있다.
추론 단계의 분해
연구는 일부 모델이 공동 이해 설정의 특정 과제에서 약해지는 현상을 보고한다. 복잡한 과제를 더 간단한 추론 단계로 나누는 방식을 적용해 개선을 살피지만 모든 과제에서의 보편적 해결을 의미하지는 않는다.
배경 사건을 놓치는 경우
큰 안내 방송 뒤로 낮은 문 닫힘 소리가 난다면 방송 내용의 정확한 전사만으로 배경 사건까지 이해했다고 할 수 없다. 말의 내용과 환경, 개별 사건을 구분해 확인하면 어떤 정보가 빠졌는지 드러난다.
관련 문서
AudioBench / ART 오디오 추론 평가 / MMAU / MMAR / MMSU / HalluAudio