A server for controlling a signal at an intersection to improve traffic flow comprises: a learning unit for training a reinforcement learning model using a reward function which determines an optimal signal to improve a traffic flow after controlling a signal at a target intersection under a simulation environment where the target intersection is modeled; and a signal controller for determining a green signal duration for each of at least two or more signal phases of the target intersection based on a real-time traffic volume at the target intersection using the trained reinforcement learning model. The learning unit comprises: an action information derivation unit for deriving a green signal duration for each of at least two signal phases as action information for a current state based on state information including an hourly traffic volume for each of the at least two signal phases; and a reward derivation unit for deriving a reward proportional to a green signal duration ratio and an hourly traffic volume ratio between at least two phases, or a green signal duration ratio and a saturation rate based on the action information for a current state using the reward function.
교통 흐름을 개선하기 위해 교차로의 신호를 제어하는 서버는 대상 교차로를 모델링한 시뮬레이션 환경 하에서 상기 대상 교차로의 신호를 제어한 후 교통 흐름이 개선되도록 하는 최적 신호를 판단하는 보상 함수를 이용하여 강화학습 모델을 학습시키는 학습부 및 상기 학습된 강화학습 모델을 이용하여 상기 대상 교차로의 실시간 교통량에 기초하여 상기 대상 교차로의 적어도 둘 이상의 현시 각각의 녹색 신호 시간을 결정하는 신호 제어부를 포함한다. 상기 학습부는 상기 적어도 둘 이상의 현시 각각의 시간당 교통량을 포함하는 상태 정보에 기초하여 현재 상태의 행동 정보로서 상기 적어도 둘 이상의 현시 각각의 녹색 신호 시간을 도출하는 행동 정보 도출부 및 상기 보상 함수를 이용하여 상기 현재 상태의 행동 정보에 기초하여 상기 적어도 둘 이상의 현시 간의 녹색 신호 시간 비율 및 시간당 교통량 비율 또는 상기 녹색 신호 시간 비율 및 포화도 비율에 비례하는 리워드를 도출하는 리워드 도출부를 포함한다.
SERVER METHOD AND COMPUTER PROGRAM FOR CONTROLLING SIGNAL OF INTERSECTION TO IMPROVE TRAFFIC FLOW
교통 흐름을 개선하기 위해 교차로의 신호를 제어하는 서버, 방법 및 컴퓨터 프로그램
2023-08-17
Patent
Electronic Resource
Korean
IPC: | G06Q Datenverarbeitungssysteme oder -verfahren, besonders angepasst an verwaltungstechnische, geschäftliche, finanzielle oder betriebswirtschaftliche Zwecke, sowie an geschäftsbezogene Überwachungs- oder Voraussagezwecke , DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTING PURPOSES / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS |
SERVER METHOD AND COMPUTER PROGRAM FOR OPTIMIZING TRAFFIC SIGNAL OF TARGET INTERSECTION
European Patent Office | 2023
|SERVER METHOD AND COMPUTER PROGRAM FOR OPTIMIZING TRAFFIC SIGNAL OF TARGET INTERSECTION
European Patent Office | 2023
|Traffic signal controlling method for network of intersection
European Patent Office | 2020
|Integrating Intersection Traffic Signal Data into a Traffic Monitoring Program
Transportation Research Record | 2016
|