장치별 비용이 필요한 이유
같은 신경망 구조라도 배치 장치에 따라 효율이 달라질 수 있다. 하드웨어 인지 탐색은 정확도와 장치 비용을 함께 고려하지만 장치별 비용 모형이나 측정표를 마련하는 데 전문 지식이 필요하다.
측정값과 추정값의 모음
벤치마크는 두 탐색 공간의 구조들에 대해 여섯 장치의 하드웨어 성능을 수집했다. 자료에는 측정과 추정이 포함되므로 모든 값이 같은 방식의 실기기 측정이라고 해석해서는 안 된다.
장치에 맞는 구조 비교
저장된 정보를 조회하면서 탐색을 수행하는 사용 사례와 장치별 정확도 및 비용의 절충을 분석했다. 서로 다른 장치의 조건을 구분해 탐색 결과를 비교하는 데 목적이 있다.
관련 문서
NAS-Bench-Suite / NAS-Bench-201 / ProxylessNAS / BigNAS / AttentiveNAS / EfficientFormer