PROBLEM TO BE SOLVED: To provide traffic signal control using a plurality of Q-learning categories.SOLUTION: History traffic data is clustered into a plurality of traffic pattern clusters to generate a plurality of Q-learning categories. Each Q-learning category corresponds to a certain traffic pattern cluster of the plurality of traffic pattern clusters. In addition, a first Q-learning category of the plurality of Q-learning categories to be used in controlling traffic signals at an intersection is determined at least partially on the basis of first traffic data of the intersection. The first Q-learning category corresponds to the first traffic pattern cluster, and the first traffic data corresponds to the first traffic pattern cluster. Furthermore, a first control action for the traffic signals at the intersection is generated at least partially on the basis of the first Q-learning category.SELECTED DRAWING: Figure 15

    【課題】複数のQ学習カテゴリーを使う交通信号制御を提供する。【解決手段】履歴交通データを複数の交通パターン・クラスターにクラスタリングし、複数のQ学習カテゴリーを生成する。各Q学習カテゴリーは複数の交通パターン・クラスターのうちのある交通パターン・クラスターに対応する。また、交差点における交通信号を制御する際に使う複数のQ学習カテゴリーのうちの第一のQ学習カテゴリーを、少なくとも部分的には交差点の第一の交通データに基づいて決定する。第一のQ学習カテゴリーは第一の交通パターン・クラスターに対応し、第一の交通データは第一の交通パターン・クラスターに対応する。さらに、少なくとも部分的には第一のQ学習カテゴリーに基づいて、交差点における交通信号についての第一の制御アクションを生成する。【選択図】図15


    Access

    Download


    Export, share and cite



    Title :

    TRAFFIC SIGNAL CONTROL USING PLURALITY OF Q-LEARNING CATEGORIES


    Additional title:

    複数のQ学習カテゴリーを使う交通信号制御


    Contributors:
    LIU YING (author) / LIU LEI (author) / CHEN WEI-PENG (author)

    Publication date :

    2018-09-20


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Japanese


    Classification :

    IPC:    G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen



    Traffic signal control using multiple Q-learning categories

    LIU LEI / CHEN WEI-PENG / LIU YING | European Patent Office | 2018

    Free access

    TRAFFIC SIGNAL CONTROL USING MULTIPLE Q-LEARNING CATEGORIES

    LIU YING / LIU LEI / CHEN WEI-PENG | European Patent Office | 2019

    Free access

    Traffic signal control using multiple Q-learning categories

    LIU YING / LIU LEI / CHEN WEI-PENG | European Patent Office | 2019

    Free access

    TRAFFIC SIGNAL CONTROL USING MULTIPLE Q-LEARNING CATEGORIES

    LIU YING / LIU LEI / CHEN WEI-PENG | European Patent Office | 2020

    Free access

    Urban traffic signal control using reinforcement learning agents

    Balaji, P.G. / German, X. / Srinivasan, D. | IET | 2010