본 발명은 다중 개체 간 상호작용을 위한 오프라인 강화학습 기반 선견적 의사결정 방법 및 장치를 개시한다. 본 실시예에 따르면, 프로세서; 및 상기 프로세서에 연결되는 메모리를 포함하되, 상기 메모리는, 상기 다중 개체를 둘러싼 환경에 관한 원본 데이터 셋을 수집하고, 상기 원본 데이터 셋을 강화학습에서의 상태(state) 정보, 관측(observation) 정보 및 행동(action) 정보 중 적어도 하나를 포함하는 제1 데이터 셋으로 가공하고, 상기 상태 정보, 관측 정보 및 행동 정보 중 일부를 기반으로 상기 제1 데이터 셋으로부터 선견(episodic future) 데이터 셋을 생성하고, 상기 선견 데이터 셋을 이용하여 선견 데이터 예측 모델을 생성하고, 상기 생성된 선견 데이터 예측 모델 또는 상기 선견 데이터 셋을 이용하여 오프라인 강화학습을 통해 상기 다중 개체 각각의 의사결정을 위한 최적 정책을 학습하도록, 상기 프로세서에 의해 실행되는 프로그램 명령어들을 저장한 선견적 의사결정 장치가 제공된다.

    An offline reinforcement learning-based foresighted decision-making apparatus and method for interaction between multiple agents. The offline reinforcement learning-based foresighted decision-making apparatus comprises a processor; and a memory connected to the processor, wherein the memory comprises program instructions for performing steps comprising collecting a raw data set about environment surrounding the multiple agents, processing the raw data set into a first data set containing at least one of state information, observation information, and action information in reinforcement learning, generating an episodic future data set from the first data set based on some of the state information, observation information, and action information, generating an episodic future data prediction model using the episodic future data set, and learning an optimal policy for decision-making for each of the multiple agents through offline reinforcement learning using the generated episodic future data prediction model or the episodic future data set.


    Access

    Download


    Export, share and cite



    Title :

    Offline reinforcement learning based foresighted decision-making method and apparatus for multi-agents interaction


    Additional title:

    다중 개체 간 상호작용을 위한 오프라인 강화학습 기반 선견적 의사결정 방법 및 장치


    Contributors:
    KWON MIN HAE (author) / LEE DONG SU (author)

    Publication date :

    2025-03-07


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen / B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion




    The Foresighted Driver Model

    Eggert, Julian / Damerow, Florian / Klingelschmitt, Stefan | IEEE | 2015


    Foresighted People Finding and Following

    Bayoumi, AbdElMoniem | BASE | 2018

    Free access

    Automatic driving decision-making method based on offline and online fusion reinforcement learning

    ZHANG KAIXIN / YU SIJIU | European Patent Office | 2025

    Free access

    Communication Systems for Cooperative Foresighted Driving

    Schubert, E. / Reck, L. / Graf, J. et al. | British Library Conference Proceedings | 1994