人车交互的方法、装置、系统、车辆及存储介质与流程

本技术涉及车辆领域，并且更具体地，涉及车辆领域中的人车交互的方法、装置、系统、车辆及存储介质。

背景技术：

1、目前，车辆语音识别主要是指用户通过语音方式与车辆进行交互，车辆的语音识别系统对用户的语音指令进行识别并响应。例如，在一些场景下，用户可通过语音方式控制车辆打开后备箱，或，通过语音方式控制车辆播放音乐。

2、但是，现有技术中，用户在人车语音交互过程中的体验感有待提高。

3、因此，亟需一种人车交互的方法，以将车辆对语音指令进行响应的结果反馈给用户，提升用户在人车语音交互过程中的体验感。

技术实现思路

1、本技术提供了人车交互的方法、装置、系统、车辆及存储介质，该方法能够提升目标对象在人车语音交互过程中的体验感。

2、第一方面，提供了一种人车交互的方法，该方法包括：在车辆的车载显示屏被唤醒的情况下，响应于目标对象的语音信息，获取该目标对象的当前状态；基于该当前状态，确定该车载显示屏对应的虚拟语音形象；通过该虚拟语音形象输出对该语音信息进行响应的反馈结果。

3、上述技术方案中，车载显示屏被唤醒之后，该方法能够响应目标对象(用户)与车辆进行交互的语音信息，基于该用户的当前状态，确定该车载显示屏对应的虚拟语音形象。进一步地，通过该虚拟语音形象输出对该语音信息进行响应的反馈结果。虚拟语音形象与用户本身有关，在用户与车辆进行交互的过程中，通过该虚拟语音形象对语音信息进行响应，能够使得用户感到亲切感。此外，虚拟语音形象与用户的当前状态有关，通过该虚拟语音形象对语音信息进行响应时，虚拟语音现象能够反映该用户的当前状态，使得用户与车辆进行交互时更加专注，更加注意自身的当前状态。因此，该方法能够提升目标对象在人车语音交互过程中的参与感和体验感。

4、结合第一方面，在某些可能的实现方式中，基于该当前状态，确定该车载显示屏对应的虚拟语音形象，包括：基于该当前状态，确定该目标对象当前的情绪等级；将与该情绪等级匹配的语音形象，确定为该虚拟语音形象。

5、上述技术方案中，目标对象(用户)的当前状态能够反映用户的当前情绪，因此，该方法基于目标对象(用户)的当前状态，确定该用户当前的情绪等级。进一步地，该方法将与该情绪等级匹配的语音形象，确定为该虚拟语音形象。这样，在用户与车辆进行交互的过程中，不仅能够对语音信息进行响应，还以与用户的情绪等级匹配的虚拟语音形象对语音信息进行响应，能够共情该用户或让该用户感到舒适。

6、结合第一方面和上述实现方式，在某些可能的实现方式中，基于该当前状态，确定该目标对象当前的情绪等级，包括下述中的任一项：在该当前状态指示该目标对象的脸部特征为第一预设特征的情况下，将该情绪等级确定为快乐情绪，该第一预设特征为与快乐相关的脸部特征；在该当前状态指示该脸部特征为第二预设特征的情况下，将该情绪等级确定为悲伤情绪，该第二预设特征为与悲伤相关的脸部特征；在该当前状态指示该目标对象的讲话语气平和的情况下，将该情绪等级确定为平和情绪；在该当前状态指示该目标对象的语音特征为预设语音特征的情况下，将该情绪等级确定为生气情绪，该预设语音特征为与生气相关的语音特征。

7、上述技术方案中，在目标对象(用户)的脸部特征为与快乐相关的脸部特征时，用户是快乐的。因此，该方法在当前状态指示该目标对象的脸部特征为与快乐相关的脸部特征时，将用户的情绪等级确定为快乐情绪。在用户的脸部特征为与悲伤相关的脸部特征时，用户是悲伤的。因此，该方法在当前状态指示该目标对象的脸部特征为与悲伤相关的脸部特征时，将用户的情绪等级确定为悲伤情绪。在用户的语音特征为与生气相关的语音特征时，用户是生气的。因此，该方法在当前状态指示该目标对象的语音特征为与生气相关的语音特征时，将用户的情绪等级确定为生气情绪。在用户的当前情绪比较稳定(平和)时，其讲话语气是平和的。因此，该方法在当前状态指示该目标对象的讲话语气平和时，将用户的情绪等级确定为平和情绪。该方法对当前状态进行具体分析，通过不同用户特征能够准确地确定目标对象的情绪等级。

8、结合第一方面和上述实现方式，在某些可能的实现方式中，将与该情绪等级匹配的语音形象，确定为该虚拟语音形象，包括下述中的任一项：在该情绪等级为快乐情绪的情况下，将该虚拟语音形象确定为用于传达快乐情绪的语音形象；在该情绪等级为悲伤情绪或生气情绪的情况下，将该虚拟语音形象确定为讲话语气温和的语音形象；在该情绪等级为平和情绪的情况下，将该虚拟语音形象确定为用于营造舒适的语音氛围的语音形象。

9、上述技术方案中，在目标对象的情绪等级为快乐情绪时，将虚拟语音形象确定为用于传达快乐情绪的语音形象，这不仅能够提升目标对象在人车语音交互过程中的参与感和体验感，还能够共情目标对象，促使目标对象持续保持快乐的情绪状态，提升目标对象的用车体验。在该情绪等级为悲伤情绪或生气情绪时，将虚拟语音形象确定为讲话语气温和的语音形象，这能够促使目标对象的情绪状态由坏转好，使得目标对象保持良好的情绪状态，提升目标对象的用车体验。在该情绪等级为平和情绪时，将虚拟语音形象确定为用于营造舒适的语音氛围的语音形象，这能够共情目标对象，使得目标对象保持平稳的情绪状态。

10、结合第一方面和上述实现方式，在某些可能的实现方式中，通过该虚拟语音形象输出对该语音信息进行响应的反馈结果，包括：基于该语音信息，对该目标对象进行声源定位，确定该目标对象相对于该车载显示屏的位置；在该车载显示屏中的与该位置对应的显示区域上显示包括该虚拟语音形象的图像帧；通过该图像帧中的虚拟语音形象输出该反馈结果。

11、上述技术方案中，基于目标对象的语音信息，对该目标对象进行声源定位，能够明确目标对象的具体位置(相对于车载显示屏的位置)。这样，能够将反馈信息显示在该车载显示屏中的与该目标对象对应的显示区域，能够使得目标对象清晰地获知该反馈信息，提升目标对象在人车语音交互过程中的体验感。

12、结合第一方面和上述实现方式，在某些可能的实现方式中，该车载显示屏包括车外交互屏，在该车载显示屏中的与该位置对应的显示区域上显示包括该虚拟语音形象的图像帧，包括：在当前天气环境的光强度超过预设范围的情况下，对包括该虚拟语音形象的初始图像帧的对比度和细节进行增强，得到该图像帧并在该显示区域上显示；和/或；对该初始图像帧进行轮廓提取，得到第一图像帧；基于该显示区域的大小，对该第一图像帧的尺寸进行调整，得到该图像帧并在该显示区域上显示。

13、上述技术方案中，车辆中的车载显示屏可以安装在车外，称为车外交互屏，以供车外用户(车外的目标对象)与车辆(或车辆中的车辆用户)进行交互。通常情况下，车外交互屏的尺寸较小。因此，为了使得在车外交互屏上充分地显示图像帧中的信息，该方法对包括虚拟语音形象的初始图像帧进行轮廓提取，并对轮廓提取后的图像帧(第一图像帧)进行尺寸调整，最终将尺寸调整后的图像帧在显示区域上显示。此外，车外交互屏上显示的图像容易受外界环境的光强度的影响而造成较差的视觉效果。为了使得车外用户清晰地获知图像帧，该方法基于当前天气环境的光强度，对包括虚拟语音形象的初始图像帧的对比度和细节进行增强，并将增强后的图像帧在显示区域上显示。

14、结合第一方面和上述实现方式，在某些可能的实现方式中，在该车载显示屏中的与该位置对应的显示区域上显示包括该虚拟语音形象的图像帧，包括：确定该虚拟语音形象的目标状态，该目标状态包括行为状态、皮肤状态和所属的主题状态；在该显示区域上显示包括该目标状态的虚拟语音形象的图像帧。

15、上述技术方案中，进一步讨论虚拟语音形象的目标状态。这样，在目标对象(用户)与车辆进行交互的过程中，虚拟语音形象能够以目标状态对语音信息进行响应，有助于吸引目标对象的注意力，使得用户与车辆进行交互时更加专注。

16、第二方面，提供了一种人车交互的装置，该装置包括：获取模块，用于在车辆的车载显示屏被唤醒的情况下，响应于目标对象的语音信息，获取该目标对象的当前状态；确定模块，用于基于该当前状态，确定该车载显示屏对应的虚拟语音形象；输出模块，用于通过该虚拟语音形象输出对该语音信息进行响应的反馈结果。

17、结合第二方面，在某些可能的实现方式中，该确定模块，具体用于：基于该当前状态，确定该目标对象当前的情绪等级；将与该情绪等级匹配的语音形象，确定为该虚拟语音形象。

18、结合第二方面和上述实现方式，在某些可能的实现方式中，该确定模块，具体还用于下述中的任一项：在该当前状态指示该目标对象的脸部特征为第一预设特征的情况下，将该情绪等级确定为快乐情绪，该第一预设特征为与快乐相关的脸部特征；在该当前状态指示该脸部特征为第二预设特征的情况下，将该情绪等级确定为悲伤情绪，该第二预设特征为与悲伤相关的脸部特征；在该当前状态指示该目标对象的讲话语气平和的情况下，将该情绪等级确定为平和情绪；在该当前状态指示该目标对象的语音特征为预设语音特征的情况下，将该情绪等级确定为生气情绪，该预设语音特征为与生气相关的语音特征。

19、结合第二方面和上述实现方式，在某些可能的实现方式中，该确定模块，具体还用于下述中的任一项：在该情绪等级为快乐情绪的情况下，将该虚拟语音形象确定为用于传达快乐情绪的语音形象；在该情绪等级为悲伤情绪或生气情绪的情况下，将该虚拟语音形象确定为讲话语气温和的语音形象；在该情绪等级为平和情绪的情况下，将该虚拟语音形象确定为用于营造舒适的语音氛围的语音形象。

20、结合第二方面和上述实现方式，在某些可能的实现方式中，该确定模块，具体还用于基于该语音信息，对该目标对象进行声源定位，确定该目标对象相对于该车载显示屏的位置；该输出模块，具体用于：在该车载显示屏中的与该位置对应的显示区域上显示包括该虚拟语音形象的图像帧；通过该图像帧中的虚拟语音形象输出该反馈结果。

21、结合第二方面和上述实现方式，在某些可能的实现方式中，该车载显示屏包括车外交互屏，该输出模块，具体还用于：在当前天气环境的光强度超过预设范围的情况下，对包括该虚拟语音形象的初始图像帧的对比度和细节进行增强，得到该图像帧并在该显示区域上显示；和/或；对该初始图像帧进行轮廓提取，得到第一图像帧；基于该显示区域的大小，对该第一图像帧的尺寸进行调整，得到该图像帧并在该显示区域上显示。

22、结合第二方面和上述实现方式，在某些可能的实现方式中，该确定模块，具体还用于确定该虚拟语音形象的目标状态，该目标状态包括行为状态、皮肤状态和所属的主题状态；该输出模块，具体还用于在该显示区域上显示包括该目标状态的虚拟语音形象的图像帧。

23、第三方面，提供了一种人车交互的系统，该系统包括：车外显示屏模块、车外显示屏控制模块、声音模块和车内显示屏模块，该车内显示屏模块包括语音识别模块、播报模块和语音形象模块，该车外显示屏模块通过该车外显示屏控制模块与该车内显示屏模块连接，该声音模块与该车内显示屏模块连接，该播报模块分别与该语音识别模块和该语音形象模块连接；

24、其中，该语音形象模块用于内置多种虚拟语音形象，该语音识别模块用于识别目标对象的语音信息，该车外显示屏控制模块用于：

25、获取该车外显示屏模块上显示的虚拟语音形象的开关状态；

26、在该开关状态为开启状态的情况下，获取该车内显示屏模块基于车外的目标对象的当前状态，从该多种虚拟语音形象中确定的虚拟语音形象；

27、显示该虚拟语音形象，并通过该虚拟语音形象基于该车外显示屏模块或该声音模块或播报模块输出对该语音信息进行响应的反馈结果；

28、在该开关状态为关闭状态的情况下，控制该车外显示屏模块维持之前设定的状态。

29、第四方面，提供了一种车辆，包括存储器和处理器。该存储器用于存储可执行程序代码，该处理器用于从存储器中调用并运行该可执行程序代码，使得该车辆执行上述第一方面或第一方面任意一种可能的实现方式中的方法。

30、第五方面，提供了一种计算机可读存储介质，该计算机可读存储介质存储有可执行程序代码，当该可执行程序代码在计算机上运行时，使得该计算机执行上述第一方面或第一方面任意一种可能的实现方式中的方法。