Passenger Dangerous Behavior Detection System in Subway Cars Based on Artificial Intelligence

• Main Authors: LEE, JUNG HYUN, HONG EUI SEOK
• Format: Patent
• Language: English; Korean
• Published: 01.06.2023
• Subjects: ALARM SYSTEMS; CALCULATING; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS; COMPUTING; COUNTING; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRIC DIGITAL DATA PROCESSING; ELECTRICITY; ORDER TELEGRAPHS; PHYSICS; PICTORIAL COMMUNICATION, e.g. TELEVISION; SIGNALLING; SIGNALLING OR CALLING SYSTEMS

One embodiment is a dangerous passenger behavior detection system. For a dangerous passenger behavior detection system in subway cars based on artificial intelligence (AI), the system comprises: an AI image recognition edge device which is connected to a plurality of CCTVs installed in a subway car, identifies dangerous passenger behavior from the plurality of CCTV images and detects a predetermined object; a 5G-based data transmitting module which transmits data related to the dangerous passenger behavior or the predetermined object to a control chamber management console; and a control chamber management console which displays information related to the data. For the dangerous passenger behavior, behavior of a passenger determined from a plurality of key points of the passenger, extracted from the image, is identified as dangerous behavior by the AI image recognition edge device, and the dangerous passenger behavior contains violent behavior or collapsing behavior. The predetermined object is an object localized by pixel unit in the image and corresponding to one of a collapsing passenger, a degree of passenger congestion, a stroller, and a wheelchair. According to the present invention, an immediate response to dangerous behavior can be done to improve passenger satisfaction and prevent accidents. 일 실시예는, 인공 지능 기반 지하철 객차 내 승객 위험 행동 감지 시스템에 있어서, 지하철 객차에 설치된 복수의 CCTV에 연결되고, 상기 복수의 CCTV의 영상으로부터 승객 위험 행동을 식별하고 소정 객체를 검출하는 AI(Artificial Intelligence) 영상인식 엣지 디바이스; 상기 승객 위험 행동 또는 상기 소정 객체에 관련된 데이터를 상황실 관제 콘솔로 전송하는 5G 기반 데이터 송신모듈; 및 상기 데이터에 관련된 정보를 표시하는 상황실 관제 콘솔을 포함하며, 상기 승객 위험 행동은, 상기 영상에서 추출된 승객의 복수의 키포인트에서 판단되는 승객의 행동이 상기 AI 영상인식 엣지 디바이스에 의해 위험 행동으로 식별되는 것이며, 상기 승객 위험 행동은 폭력 행동 또는 쓰러지는 행동을 포함하며, 상기 소정 객체는, 상기 영상에서 픽셀 단위로 localization된 객체가 쓰러진 승객, 승객 혼잡도, 유모차 또는 휠체어 중 하나에 해당하는 것인, 승객 위험 행동 감지 시스템이다.