본 발명은 서로 다른 도메인에서 획득된 개별 스펙트럼 영상으로부터 각 스펙트럼 영상이 획득된 도메인에 무관한 특징을 나타내는 표현자를 추출하여 영상 사이의 대응 여부를 매우 정확하게 판별할 수 있고, 개별 스펙트럼 영상으로부터 다른 도메인의 스펙트럼 영상을 적대적 방식으로 생성하여 학습 데이터가 필요하지 않은 비지도 방식으로 학습될 수 있으며, 특정 도메인에서 획득된 개별 스펙트럼 영상으로부터 표현자로 지정되는 특징을 만족시키면서 쌍을 이루는 다른 도메인의 스펙트럼 영상을 생성할 수 있어 대량의 학습 데이터를 용이하게 획득할 수 있는 다중 스펙트럼 영상 매칭 장치 및 방법을 제공할 수 있다.