위키득계정 ↗
기술

일관성 생성 모형

일관성 생성 모형기술
연구 공개
2023년
발표
ICML 2023
영문 명칭
Consistency Models
학습 방식
증류 또는 독립 학습
일관성 생성 모형은 잡음을 자료로 직접 대응시켜 한 단계 생성을 지원하는 모형 계열이다. 사전 학습 확산 모형에서 증류하거나 독립적으로 학습할 수 있으며, 여러 단계로 생성해 계산량과 품질을 조절할 수도 있다.

직접 대응을 통한 생성

반복 추출이 필요한 확산 모형의 생성 비용에 대응해 잡음에서 자료로 가는 직접적인 대응을 학습한다. 한 단계 생성을 기본적으로 지원하지만 다단계 추출도 허용한다.

두 가지 학습 경로

이미 학습된 확산 모형을 이용하는 증류와 별도 생성 모형으로 학습하는 경로를 구분한다. 일관성 생성 모형이라는 명칭이 항상 교사 확산 모형을 필요로 한다는 뜻은 아니다.

조건을 바꾸는 편집

원 연구는 손상 영역 복원과 색상화 및 초해상도 같은 자료 편집도 다뤘다. 해당 편집 작업별로 명시적으로 훈련하지 않는 설정을 평가했으며, 생성 단계 수에 따른 품질과 계산 비용도 비교했다.

관련 문서

DDPM / DDIM / 점수 기반 확률 미분 생성 / EDM 확산 설계 체계 / 지식 증류 / 초해상도