본 발명은 연산기능을 가진 제어서버(10) 및 데이터베이스(20)에 의해 수행되는 이미지 기반 실시간 암반상태 평가시스템으로서, 제어서버(10)는 현장의 터널막장면 이미지 및 암반상태 관찰지를 수집하는 데이터 수집부(100); 상기 현장 터널막장면 이미지를 전처리하고, 상기 암반상태 관찰지에서 RMR 측정값이 포함된 정보를 추출하는 데이터 전처리부(200); 및 백본 네트워크를 설정하고, 백본 네트워크에 회귀모델부가 결합된 딥러닝 모델을 학습시켜, RMR 예측값을 산출하는 딥러닝 모델 학습부(300);를 포함하는 것을 특징으로 하는 딥러닝을 이용한 터널막장면 이미지 기반 실시간 암반상태 평가시스템이다.