요약본 발명의 인체 동작 인식 장치 이미지 데이터 증강과 어텐션을 사용한 폐색 이상 탐지 방법은 방향을 고려하여 폐색 데이터를 생성한 뒤, 다양한 이미지 데이터 증강 기법을 사용하여 입력 데이터의 양을 늘리고, grad-CAM의 어텐션 메커니즘을 통해 이미지 내의 특정 부분에 집중하게 하여, Mask R-CNN을 통해 폐색 및 이상 객 체를 탐지한다. grad-CAM에서 출력된 어텐션맵을 통해 생성된 히트맵을 통해 이상 객체가 어디에 위치하는지 설명 가능하게 한다.
대표 청구항하나 이상의 프로세서와, 상기 프로세서에 의해 실행 가능한 프로그램 명령어들을 저장하는 메모리를 포함하는 컴퓨팅 장치에서 수행되는 방법으로, 폐색되지 않은 제조공정의 이미지로부터 각도와 방향을 조정하여 폐색 데이터를 생성하는 전처리 단계; 이미지 데이터 증강 기법을 통해 생성된 폐색 데이터로부터 다양한 입력 이미지 데이터를 생성하는 입력 데이터 생성 단계; 생성된 입력 이미지 데이터에 대하여 어텐션 메커니즘을 사용하여 폐색 및 이상 객체 판별에 사용할 어텐션맵을 생성하는 어텐션맵 생성 단계; 어텐션맵을 이용하여 새로운 입력 이미지를 생성하는 새로운 입력 이미지 생성 단계; 새로운 입력 이미지를 Mask R-CNN 모델에 입력하여 폐색 또는 이상 객체 탐지하는 탐지 단계; 를 포함하는, 이미지 데이터 증강과 어텐션을 사용한 폐색 이상 탐지 방법.
