영상 데이터 처리 장치 및 제어 방법이 개시된다. 영상 데이터 처리 장치는 영상 데이터를 입력받는 입력부, 입력된 영상 데이터를 분할하고 위험 상황에 대한 시맨틱 정보를 추출하도록 학습하는 시맨틱 분할 네트워크 및 입력된 영상 데이터 및 추출된 시맨틱 정보에 기초하여 위험 상황을 예측하도록 학습하는 예측 네트워크를 포함하고, 예측 네트워크는 입력된 영상 데이터를 기 설정된 필터에 기초하여 입력된 영상 데이터의 특징을 포함하는 매트릭스 맵을 생성하는 컨벌루션 레이어를 포함하고, 시맨틱 분할 네트워크는 예측 네트워크의 컨벌루션 레이어를 공유한다.