The embodiments of the present application relate to the technical field of intelligent cabins, and particularly relate to a human-factor intelligent driving behavior prediction method and system, and a terminal device and a storage medium. The method comprises: acquiring a physiological signal of a driver; performing a fast Fourier transform on the physiological signal to solve an amplitude-frequency characteristic; then, performing multi-cycle decomposition on the physiological signal; next, performing dimension raising on decomposed data; importing the data into a multi-modal synchronous data fusion layer in combination with vehicle road scene video frame prediction data, so as to obtain a corresponding multi-scale three-dimensional feature; performing analysis processing on the multi-scale three-dimensional feature by means of a three-dimensional backbone network layer, and outputting a corresponding target feature; and finally, performing text generation on the target feature by means of a driving behavior interpretation layer and a driving behavior reasoning layer, so as to obtain interpretation information and reasoning information for predicting a human-factor intelligent driving behavior. The human-factor intelligent driving behavior prediction method and system, and the terminal device and the storage medium which are provided in the present application can improve the effect of predicting a driving behavior.
Les modes de réalisation de la présente demande concernent le domaine technique des cabines intelligentes, et concernent en particulier un procédé et un système de prédiction de comportement de conduite intelligent à facteur humain, ainsi qu'un dispositif terminal et un support de stockage. Le procédé comprend : l'acquisition d'un signal physiologique d'un conducteur ; l'exécution d'une transformée de Fourier rapide sur le signal physiologique afin de résoudre une caractéristique d'amplitude-fréquence ; puis la réalisation d'une décomposition à cycles multiples sur le signal physiologique ; ensuite, la réalisation d'une élévation de dimension sur les données décomposées ; l'importation des données dans une couche de fusion de données synchrones multimodales en combinaison avec des données de prédiction de trame vidéo de scène de route de véhicule, de façon à obtenir une caractéristique tridimensionnelle multi-échelle correspondante ; la réalisation d'un traitement d'analyse sur la caractéristique tridimensionnelle multi-échelle au moyen d'une couche de réseau fédérateur tridimensionnel, et la délivrance en sortie d'une caractéristique cible correspondante ; et, enfin, la réalisation d'une génération de texte sur la caractéristique cible au moyen d'une couche d'interprétation de comportement de conduite et d'une couche de raisonnement de comportement de conduite, de façon à obtenir des informations d'interprétation et des informations de raisonnement pour prédire un comportement de conduite intelligent à facteur humain. Le procédé et le système de prédiction de comportement de conduite intelligent à facteur humain et le dispositif terminal et le support de stockage qui sont prévus dans la présente demande peuvent améliorer l'effet de prédiction d'un comportement de conduite.
本申请实施例涉及智能座舱技术领域,尤其涉及一种人因智能驾驶行为预测方法、系统、终端设备及存储介质。其方法包括,获取驾驶人的生理信号,并对生理信号做快速傅里叶变换求解幅频特性,然后对生理信号进行多周期分解,其次将上述分解的数据进行升维,随即结合车辆道路场景视频帧预测数据导入多模态同步数据融合层,得到相应的多尺度三维特征,多尺度三维特征再次经过三维骨干网络层对上述多尺度三维特征进行分析处理并输出相应的目标特征,最后经驾驶行为解释层和驾驶行为推理层对上述目标特征进行文本生成,得到人因智能驾驶行为预测的解释和推理信息,本申请提供的人因智能驾驶行为预测方法、系统、终端设备及存储介质可提升驾驶行为的预测效果。
HUMAN-FACTOR INTELLIGENT DRIVING BEHAVIOR PREDICTION METHOD AND SYSTEM, AND TERMINAL DEVICE AND STORAGE MEDIUM
PROCÉDÉ ET SYSTÈME DE PRÉDICTION DE COMPORTEMENT DE CONDUITE INTELLIGENT À FACTEUR HUMAIN, ET DISPOSITIF TERMINAL ET SUPPORT DE STOCKAGE
人因智能驾驶行为预测方法、系统、终端设备及存储介质
13.02.2025
Patent
Elektronische Ressource
Chinesisch
IPC: | B60W CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION , Gemeinsame Steuerung oder Regelung von Fahrzeug-Unteraggregaten verschiedenen Typs oder verschiedener Funktion |
Europäisches Patentamt | 2023
Driving track prediction method and device, terminal and storage medium
Europäisches Patentamt | 2020
|Intelligent driving assistance method and device, terminal equipment and storage medium
Europäisches Patentamt | 2024
|Driving behavior monitoring method and device, terminal and storage medium
Europäisches Patentamt | 2020
|Intelligent driving system, vehicle control method, terminal equipment and storage medium
Europäisches Patentamt | 2023
|