A server for controlling a signal at an intersection to improve traffic flow comprises: a learning unit for training a reinforcement learning model using a reward function which determines an optimal signal to improve a traffic flow after controlling a signal at a target intersection under a simulation environment where the target intersection is modeled; and a signal controller for determining a green signal duration for each of at least two or more signal phases of the target intersection based on a real-time traffic volume at the target intersection using the trained reinforcement learning model. The learning unit comprises: an action information derivation unit for deriving a green signal duration for each of at least two signal phases as action information for a current state based on state information including an hourly traffic volume for each of the at least two signal phases; and a reward derivation unit for deriving a reward proportional to a green signal duration ratio and an hourly traffic volume ratio between at least two phases, or a green signal duration ratio and a saturation rate based on the action information for a current state using the reward function.

    교통 흐름을 개선하기 위해 교차로의 신호를 제어하는 서버는 대상 교차로를 모델링한 시뮬레이션 환경 하에서 상기 대상 교차로의 신호를 제어한 후 교통 흐름이 개선되도록 하는 최적 신호를 판단하는 보상 함수를 이용하여 강화학습 모델을 학습시키는 학습부 및 상기 학습된 강화학습 모델을 이용하여 상기 대상 교차로의 실시간 교통량에 기초하여 상기 대상 교차로의 적어도 둘 이상의 현시 각각의 녹색 신호 시간을 결정하는 신호 제어부를 포함한다. 상기 학습부는 상기 적어도 둘 이상의 현시 각각의 시간당 교통량을 포함하는 상태 정보에 기초하여 현재 상태의 행동 정보로서 상기 적어도 둘 이상의 현시 각각의 녹색 신호 시간을 도출하는 행동 정보 도출부 및 상기 보상 함수를 이용하여 상기 현재 상태의 행동 정보에 기초하여 상기 적어도 둘 이상의 현시 간의 녹색 신호 시간 비율 및 시간당 교통량 비율 또는 상기 녹색 신호 시간 비율 및 포화도 비율에 비례하는 리워드를 도출하는 리워드 도출부를 포함한다.


    Access

    Download


    Export, share and cite



    Title :

    SERVER METHOD AND COMPUTER PROGRAM FOR CONTROLLING SIGNAL OF INTERSECTION TO IMPROVE TRAFFIC FLOW


    Additional title:

    교통 흐름을 개선하기 위해 교차로의 신호를 제어하는 서버, 방법 및 컴퓨터 프로그램


    Contributors:

    Publication date :

    2023-08-17


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    G06Q Datenverarbeitungssysteme oder -verfahren, besonders angepasst an verwaltungstechnische, geschäftliche, finanzielle oder betriebswirtschaftliche Zwecke, sowie an geschäftsbezogene Überwachungs- oder Voraussagezwecke , DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTING PURPOSES / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS



    SERVER METHOD AND COMPUTER PROGRAM FOR OPTIMIZING TRAFFIC SIGNAL OF TARGET INTERSECTION

    KWON MIN CHEOL / CHOI KYU JIN / WON JONG HO et al. | European Patent Office | 2023

    Free access

    SERVER METHOD AND COMPUTER PROGRAM FOR OPTIMIZING TRAFFIC SIGNAL OF TARGET INTERSECTION

    KWON MIN CHEOL / CHOI KYU JIN / KIM IL MYUNG et al. | European Patent Office | 2023

    Free access

    Intersection traffic edge server

    LI PING / LU YANG | European Patent Office | 2024

    Free access

    Traffic signal controlling method for network of intersection

    LEE TAK SOO / PARK JIN WOO / SUNG SAM HYUN et al. | European Patent Office | 2020

    Free access

    Integrating Intersection Traffic Signal Data into a Traffic Monitoring Program

    Guin, Angshuman / Hunter, Michael / Rodgers, Michael et al. | Transportation Research Record | 2016