1.本发明涉及智能驾驶技术领域,尤其涉及一种车内宠物的交互方法、装置、汽车及存储介质。
背景技术:
2.随着车辆技术的飞速发展,各大主机厂对于车内智能座舱的集成功能不断丰富。新的技术变革也引发了更多的用户与车的交互场景。不同车型为了适应更多用户群体,打造人车的生态链,开始深度思考多种维度的场景组合。
3.随着智能汽车用户趋于年轻化,宠物成为了陪伴许多年轻车主群体的情感寄托对象,在用户调研过程中也逐渐发现宠物场景对车内智能座舱开发的重要性。
技术实现要素:
4.针对上述技术问题,本发明提供了一种车内宠物的交互方法、装置、汽车及存储介质,为车载系统丰富了交互场景,为用户提供更好的驾驶体验。
5.本发明的第一方面,提供一种车内宠物的交互方法,包括:通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。
6.可选地,所述基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:a.根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;b.根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;c.获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。
7.可选地,所述分析内容a、b、c中任一种确定宠物的交互需求后,至少利用另两种进行确认或联合分析;或者至少结合所述分析内容a、b、c中至少两个确定宠物的交互需求。
8.可选地,所述确定宠物的交互需求后启动相应的交互模式,包括:根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;安抚模式,用于通过车载扬声器播放舒缓音乐、动画,缓解宠物情绪;沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频
或与宠物主人主动音视频通讯。
9.可选地,所述基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的情绪状态或情绪变化,基于所述情绪状态或情绪变化确定宠物的交互需求,根据宠物的情绪状态或情绪变化确定交互模式,其中交互模式包括游戏模式、安抚模式、沟通模式。
10.可选地,当处于游戏模式时,车载显示屏显示鱼群并播放水泡声音;或者当处于游戏模式时,车载显示屏显示老鼠动画,宠物触摸到老鼠显示位置时播放老鼠叫声;其中所述游戏模式执行过程中监控宠物的情绪变化,若宠物的情绪区域稳定则停止游戏模式。
11.可选地,当根据声音数据及车内外环境数据分析出宠物发出呼噜声且车外有降雨,确定宠物处于无聊的情绪状态,启动游戏模式。
12.可选地,所述宠物佩戴有可穿戴设备,所述交互方法还包括:获取宠物的心率数据,根据所述心率数据确定交互模式。
13.可选地,所述方法还包括构建基于宠物表情、声音、体态的宠物元数据以及构建车内外环境信息的环境元数据,将所述宠物元数据与所述环境元数据结合,分析宠物的交互需求。
14.可选地,当宠物低声吠、呲牙并突发鸣笛声,进入安抚模式;当宠物长时间趴着不动,且情绪低落时进入游戏模式;当宠物发出低声鸣叫且身体蜷缩,进入沟通模式。
15.本发明的第二方面,提供一种车内宠物的交互装置,包括:采集模块,用于通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;处理模块,用于基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;交互模块,用于确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。
16.可选地,所述处理模块,包括以下分析内容:第一处理单元,用于根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;第二处理单元,用于根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;第三处理单元,用于获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。
17.可选地,所述交互模式还用于根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;安抚模式,用于通过车载扬声器播放舒缓音乐、动画,缓解宠物情绪;
沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频或与宠物主人主动音视频通讯。
18.本发明的第三方面,提供一种汽车,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如本发明的第一方面所述的车内宠物的交互方法的步骤。
19.本发明的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如本发明的第一方面提供所述的车内宠物的交互方法的步骤。
20.本发明通过车载设备采集宠物的行为数据,分析宠物的需求后确定采用何种模式进行交互,并在特定交互模式下可以智能控制车载功能。解决了现有技术中车载系统中对于宠物交互功能的缺失问题,甚至可以舒缓宠物心理,防止在车内因为车外界或车内的刺激对宠物造成伤害。
附图说明
21.图1为本发明实施例中一种车内宠物的交互方法的流程示意图;图2为本发明实施例中又一种车内宠物的交互方法的流程示意图;图3为本发明实施例中车内宠物的交互装置的模块示意图。
具体实施方式
22.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
23.目前针对车机系统的场景研究成为了智能汽车的发展趋势,但针对宠物而开发的车机系统模式很少。随着用户对汽车功能的不断增加,车内宠物监控与游戏协同交互系统设计的ota系统叠加包将在智能座舱不断丰富的未来有着非常重要的需求。将车内生态环境针对不同用户,将成为被主机厂家普遍研究的领域。基于此,发明人致力于提出符合车内智能化的发展趋势,以与年轻化用户共情的宠物为出发点,设计出更人性化、合理化的车内宠物监控与游戏协同交互系统设计。
24.目前市面上针对车内宠物交互系统设计的研究非常少,大部分针对宠物的系统设计停留在用移动终端例如手机app,或ipad与宠物互动。监控系统则以视频监控为主,可以让宠物与主人语音沟通,缺乏系统内针对宠物其他状态时对宠物的互动和引导。但基于app的宠物系统和基于视频摄像头的监控系统缺乏整合。在车内这种特殊环境下,对宠物也缺乏具有针对性的关注。
25.发明人在对于智能座舱的场景化设计中:针对希望携带宠物一起出行的用户,设置有专门的叠加包。但这种叠加包与整车的交互设计系统相对分裂,针对希望携带宠物用户一起出行的场景,缺乏可以和车机系统整合的宠物模式车机系统设计。并且,现有市面上的研究成果存在一定的聚焦问题,车内智能产品的设计重点放在车辆驾驶的过程中。但因为在驾驶过程中,车主是可以全程陪伴监护宠物的,所以对宠物的安全隐患威胁相对较小。
不过当用户与宠物出行的过程中,会遇到车主不得不离开宠物的时间段,这段时间车主对宠物的安全是缺少掌控权的,尤其当宠物需要较长时间独自在车内等待主人返回时的宠物安全的问题,是目前车载系统继续增加的功能。
26.在智能座舱与车机系统飞速发展的时代大背景下。合理利用监控识别与交互大屏界面等科技优势,解决带宠物出行的用户当需要把宠物独自放于车内的安全与安抚问题。本发明通过联动车内监控系统和交互屏幕的方式,用麦克风、摄像头监测宠物的健康状态。针对宠物的表情及体态变化,确定宠物的交互需求,可以分为三个不同模式:安抚模式、沟通模式、游戏模式。例如,当位于中控屏幕上方的监控摄像头检测到宠物不同的表情状态时,会联动中控屏幕以及整车音响触发不同宠物场景模式。通过引导宠物进行互动游戏,播放主人安抚视频,或者启动整车音响系统播放音乐的方式安抚宠物的情绪。从而丰富宠物场景中人、宠物与车机系统交互的全流程,保证宠物在车内独处时的安全及情绪稳定。
27.如图1所示,本发明提供一种车内宠物的交互方法,包括以下步骤:步骤110:通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据。
28.基于车载系统的功能配置,可任意通过车载麦克风、车载摄像头采集宠物的声音、图像数据。可选择的是利用dms摄像头(driver monitor system,用于在行驶的过程当中,监测驾驶员疲劳状态、危险驾驶行为的信息),采集宠物图像,当然也可以使用其他摄像设备或车载摄像头。
29.由于车内外的环境也可能影响宠物,令宠物害怕、焦虑等,比如车外的人声、鸣笛声,车内的温度、氧气量等。汽车的智能控制系统可通过车载传感器获取车内外环境声音、车外天气情况等可能影响宠物的环境数据。
30.基于上述数据信息可以用于判断宠物的需求,该过程中可以忽略宠物的情绪,直接采用较为合适的交互功能与宠物交互,而无需进行宠物的特定情绪识别或数据计算;也考虑目前车载场景的局限性,在某些特殊情况下不能充分安抚宠物情绪,因此可以选择最有效的交互方式使汽车的智能功能代替车主陪伴宠物。
31.步骤120:基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求。
32.在该步骤中可以基于任一采集得到的上述数据对宠物的交互需求进行分析,通过有限的数据即可以确定宠物是否有交互需求(因仅判断宠物需求),这是因为宠物在无主人陪伴过程中并不会立刻产生交互需求,随着时间的推移可以根据宠物的状态变化进行分析。同时也考虑车内空间问题、以及车型配置问题,例如车内的车载摄像头是否存在、宠物是否能够被拍摄到等,不能及时获取宠物的交互需求。
33.进一步地,显然多种类数据的分析可以更好的确定宠物的交互需求,因此可以通过上述多种数据进行分析,或者通过多种数据融合进行分析。
34.现有技术可用的技术中,以声音识别、图像识别、模式识别等人工智能技术为代表,可以进行识别、分析训练从而达到分析目的,训练过程在此不再赘述。
35.但显然利用人工智能技术进行训练时,并不对于宠物的具体情绪或某状态识别,而是针对于宠物的行为、声音、外界环境进行分析,从而确定出如何采用正确的交互模式满足宠物的交互需求。
36.步骤130:确定宠物的交互需求后启动相应的交互模式;相应地,所述交互模式状态下至少部分车载功能处于被调用状态。
37.在该步骤中,由宠物的交互需求启动交互模式,通过交互模式的启动从而自动控制汽车内各种车载功能,以满足宠物的交互需求。显然交互模式有多种,以对应不同的交互需求。与现有技术所不同的是,该交互模式下,是由车载控制系统控制,可实现车载功能的调用,并非独立于车载控制系统。车载功能中包括有车载音响、车外摄像头、车外雷达、车内外麦克风、车内外温湿度传感器,当然不限于此。
38.本发明通过车载设备采集宠物的行为数据,分析宠物需要采用何种模式进行交互,并在特定交互模式下可以智能控制车载功能,与车载系统融合,解决了现有技术中车载系统中对于宠物交互功能的缺失问题;采用不同的陪护模式可以舒缓宠物心理,同时监控车内外环境,防止在车内因为车外界或车内的刺激对宠物造成伤害。
39.在上述步骤120中,对于宠物的交互需求分析可以参考以下方式分析。具体的,基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:第一种通过图像分析:根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求。
40.图像识别可以做到微观识别,一种高于人观察的微变化图像处理及时,因此可以基于此对宠物的表情状态做识别,但不作情绪识别;具体可体现在宠物的表情更适合哪种陪护模式。同样的,宠物的体态变化也可以分析出宠物的需求,例如宠物长时间趴着不动,若不是休息则需要有交互需求。
41.在其他的实施例中,也可以通过获取宠物的表情、体态变化识别宠物的情绪,若宠物有情绪则必然需要安抚。例如宠物毛发竖立,显然处于炸毛状态,常见于猫咪,通过图像识别可以直接应对宠物的突然状态,从而判断为宠物处于有交互需求的状态。当然也可以判断为宠物处于某种情绪,具体可见下文描述。
42.第二种通过声音分析:根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求。
43.除了宠物的动作产生的行为,宠物表达需求时会通过声音实现。常见于宠物狗的吠,宠物猫的呜呜呜声。具体可以利用宠物的声音频率进行识别,在此过程中可以对宠物声音频率进行归类,对于某类或数个类声音频率做出交互响应。当然,不同宠物类型的声音频率不同,可针对不同宠物做不同的模型训练。
44.在一种场景中,通常宠物狗受到某种刺激,会对某物、某人、某方向吠,不论何种原因引起宠物的吠,显然宠物需要进行交互,受到相应的安抚。该过程中宠物可能不会产生太多情绪,而是单纯的做出应急行为。因此,相对于通过识别宠物情绪并提供交互,通过宠物的声音、行为分析并提供交互将会更好,并提供多种交互模式。
45.第三种通过环境分析:获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。
46.外部环境的变化会引起宠物的交互需求,或者转移注意力,尤其是在陌声的环境中尤其需要对宠物进行安抚。车辆的振动、其他车辆的鸣笛声、暴雨天气中的雷鸣声、雨声、风声、有人靠近车辆、车内温度、车外温度等。例如车外温度较高,但车内温度不高,可以预
测的是随着时间的推移车内温度将会变高,过程中需要对宠物进行交互,同时控制车内空调(车载)维持温度稳定。
47.对于三种分析结果,确定宠物的交互需求后启动相应的交互模式,可根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;对于不同宠物可以设计不同得的游戏或者显示内容界面。安抚模式,用于通过车载扬声器播放舒缓音乐,或者播放动画,缓解宠物情绪。沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频或与宠物主人主动音视频通讯;其中播放沟通视频时可以设置播放时间或循环播放时间,例如90秒后结束播放,退出沟通模式;若播放视频作用不大,或宠物急需沟通时可利用车载通讯系统主动拨通宠物主人的视频进行通话。
48.进一步地,上述三种分析内容的一种可以确定宠物的需求后,若有其他数据,可以进行辅助确认或联合分析。
49.在一种场景中,车辆振动,引起了宠物狗的警觉,宠物狗由休息状态变为警觉状态并低声吠,判断宠物狗有交互需求。得知监测到有人靠近车辆,通过分析是由车外环境变化引起,可以根据车外环境的结束后确定是否对宠物狗进行交互,做需求分析。若车外人离去、周围区域平静,宠物狗依然处于警觉状态,则启动例如安抚模式,通过车载扬声器播放舒缓音乐,缓解宠物情绪。
50.当然,对于上述三种分析内容,可以结合至少两种确定宠物的交互需求,可参考上段描述内容,例如宠物声音、车外环境图像的识别,车外环境声音与宠物图像等组合方式。
51.举例而言,当处于游戏模式时,可控制车载显示屏显示鱼群并播放水泡声音;通过车载显示屏显示的内容吸引宠物猫,使其进行游戏玩耍。或者当处于游戏模式时,控制车载显示屏显示老鼠动画,宠物猫触摸到老鼠显示位置时播放老鼠叫声。在所述游戏模式执行过程中监控宠物的情绪变化,若宠物的情绪区域稳定则停止游戏模式。宠物游戏过程中对宠物的状态以及周围环境(车内外)分析,当监测到宠物不再需要游戏引导时退出游戏模式,自动关闭画面。
52.或者在一些场景中,当宠物低声吠、呲牙并突发鸣笛声,进入安抚模式;当宠物长时间趴着不动,且情绪低落时进入游戏模式;当宠物发出低声鸣叫且身体蜷缩,进入沟通模式。
53.当然,还可以根据声音数据及车内外环境数据分析出宠物发出呼噜声且车外有降雨,确定宠物处于无聊的情绪状态,启动游戏模式。该过程中可以通过下述交互方法进行识别交互需求。
54.如图2所示,本发明还提供一种车内宠物的交互,包括以下步骤:步骤210:通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据。
55.与图1所示实施例相同,通过车载各种功能部件采集可用的宠物的声音、图像、车内外环境的数据,用于判断宠物的情绪状态。与仅通过宠物的声音、图像的数据判断宠物的情绪,显然识别不太准,尤其对于车内的空间小、封闭、周围环境复杂等场景,车内外环境是一个重要的参考因素。
56.步骤220:基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据
中的至少一种分析宠物的情绪状态或情绪变化,基于所述情绪状态或情绪变化确定宠物的交互需求。
57.在该步骤中,可以基于宠物的情绪状态或者情绪变化确定宠物的交互需求,宠物的情绪可以是宠物在车内滞留时间长引起的,也可以是由车内外环境引起的可以随着车内外环境的改变为消除宠物的情绪变化,从而减少交互次数,真正确定宠物的交互需求。宠物的情绪包括生气、无聊、难过等,每一种情绪可以设置对应的交互模式。
58.步骤230:根据宠物的情绪状态或情绪变化确定交互模式,其中交互模式包括游戏模式、安抚模式、沟通模式,所述交互模式状态下至少部分车载功能处于被调用状态。
59.例如,宠物低声吠、呲牙,表示宠物生气,启动安抚模式,并控制车载功能的显示屏显示动画、播放舒缓音乐。当宠物长时间趴着不动,表示宠物情绪低落处于无聊状态,启动游戏模式,自动开启游戏或显示内容画面(类似于游戏的画面,可无交互过程)。宠物发出“呜呜呜”的声音并且蜷缩在角落里,表示宠物有些难过,启动沟通模式,播放宠物主人提前录制好的视频,并于90秒后自动退出,或者直接拨打宠物主人的视频进行通讯,可以催促宠物主人的同时增强交互自由。
60.通过分析宠物情绪去对应启动交互模式,可以使得用户清楚宠物在滞留期间的状态;同时依据获取车内外环境,确定宠物交互需求或短暂外界刺激引起宠物情绪变化,防止在车内因为车外界或车内的刺激对宠物造成伤害。
61.更进一步地,基于图1及图2所示的实施例,本发明还提供另外一种数据对宠物的交互需求进行分析。在一些场景中,宠物佩戴有可穿戴设备,用于定位宠物位置、获取宠物生理状态等;因此可以获取宠物的心率数据,根据所述心率数据确定交互模式。
62.例如当宠物发出呼噜声,并检测到车外有降雨,通过宠物的可穿戴设备获取的心率数据,分析心率平稳没有过快现象,确定宠物当前会处于无聊状态,启动游戏模式。
63.本发明提供的所述方法还可以通过构建元数据的方式对宠物的需求进行分析。例如构建宠物元数据和环境元数据,宠物元数据的构建基于宠物表情、声音、体态的宠物元数据;例如低声吠、趴着不动、发出呜呜呜声,低吼哈气、蜷缩、呲牙、舔毛、竖耳朵等。以及构建车内外环境信息的环境元数据,例如开关门、温度、鸣笛、车体振动、有人靠近、大风、下雨、雷鸣等。将所述宠物元数据与所述环境元数据结合,分析宠物的交互需求。具体结合分析可以参考图1及图2中所述分析实施例,计算过程中可以采用宠物状态与环境影响的关系概率实现,例如宠物的低声吠是否与环境变化有影响。
64.如图3所示,本发明还提供一种车内宠物的交互装置包括:采集模块310,用于通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;处理模块320,用于基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;交互模块330,用于确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。
65.所述处理模块320,包括以下分析内容:第一处理单元,用于根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;
第二处理单元,用于根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;第三处理单元,用于获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。
66.其中,基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:a.根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;b.根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;c.获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。所述分析内容a、b、c中任一种确定宠物的交互需求后,至少利用另两种进行确认或联合分析;或者至少结合所述分析内容a、b、c中至少两个确定宠物的交互需求。
67.另外,还可以基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的情绪状态或情绪变化,基于所述情绪状态或情绪变化确定宠物的交互需求,根据宠物的情绪状态或情绪变化确定交互模式,其中交互模式包括游戏模式、安抚模式、沟通模式。
68.所述交互模式330还用于根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;安抚模式,用于通过车载扬声器播放舒缓音乐、动画,缓解宠物情绪;沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频或与宠物主人主动音视频通讯。
69.当处于游戏模式时,车载显示屏显示鱼群并播放水泡声音;或者当处于游戏模式时,车载显示屏显示老鼠动画,宠物触摸到老鼠显示位置时播放老鼠叫声;其中所述游戏模式执行过程中监控宠物的情绪变化,若宠物的情绪区域稳定则停止游戏模式。当根据声音数据及车内外环境数据分析出宠物发出呼噜声且车外有降雨,确定宠物处于无聊的情绪状态,启动游戏模式。当宠物低声吠、呲牙并突发鸣笛声,进入安抚模式;当宠物长时间趴着不动,且情绪低落时进入游戏模式;当宠物发出低声鸣叫且身体蜷缩,进入沟通模式。
70.所述宠物佩戴有可穿戴设备时,所述交互模式还用于:获取宠物的心率数据,根据所述心率数据确定交互模式。
71.本发明还提供一种汽车,其包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上述的车内宠物的交互方法的步骤。
72.本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上述的车内宠物的交互方法的步骤。
73.可以理解,计算机可读存储介质可以包括:能够携带计算机程序的任何实体或装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器 (rom ,read-only memory)、随机存取存储器(ram,random access memory)、以及软件分发介质等。计算机程序包括计算机程序代码。计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读存储介质可以包括:能够携带计算机程序代码的任何实体或
装置、记录介质、u盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(rom,read-only memory)、随机存取存储器(ram,random access memory)、以及软件分发介质等。
74.在本发明的某些实施方式中,自动泊车装置可以包括控制器,控制器是一个单片机芯片,集成了处理器、存储器,通讯模块等。处理器可以是指控制器包含的处理器。处理器可以是中央处理单元(central processing unit,cpu),还可以是其他通用处理器、数字信号处理器(digital signal processor,dsp)、专用集成电路(application specific integrated circuit,asic)、现成可编程门阵列(field-programmable gatearray,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
75.流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
76.在流程图中表示或在此以其他方式描述的逻辑或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。
77.以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
技术特征:
1.一种车内宠物的交互方法,其特征在于,包括:通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。2.根据权利要求1所述的交互方法,其特征在于,所述基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:a.根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;b.根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;c.获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。3.根据权利要求2所述的交互方法,其特征在于,所述分析内容a、b、c中任一种确定宠物的交互需求后,至少利用另两种进行确认或联合分析;或者至少结合所述分析内容a、b、c中至少两个确定宠物的交互需求。4.根据权利要求3所述的交互方法,其特征在于,所述确定宠物的交互需求后启动相应的交互模式,包括:根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;安抚模式,用于通过车载扬声器播放舒缓音乐、动画,缓解宠物情绪;沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频或与宠物主人主动音视频通讯。5.根据权利要求1所述的交互方法,其特征在于,所述基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的交互需求,包括以下分析内容:基于所述声音数据、图像数据以及通过车载传感器获取车内外环境数据中的至少一种分析宠物的情绪状态或情绪变化,基于所述情绪状态或情绪变化确定宠物的交互需求,根据宠物的情绪状态或情绪变化确定交互模式,其中交互模式包括游戏模式、安抚模式、沟通模式。6.根据权利要求4或5所述的交互方法,其特征在于,当处于游戏模式时,车载显示屏显示鱼群并播放水泡声音;或者当处于游戏模式时,车载显示屏显示老鼠动画,宠物触摸到老鼠显示位置时播放老鼠叫声;其中所述游戏模式执行过程中监控宠物的情绪变化,若宠物的情绪区域稳定则停止游戏模式。7.根据权利要求4或5所述的交互方法,其特征在于,当根据声音数据及车内外环境数
据分析出宠物发出呼噜声且车外有降雨,确定宠物处于无聊的情绪状态,启动游戏模式。8.根据权利要求1所述的交互方法,其特征在于,所述宠物佩戴有可穿戴设备,所述交互方法还包括:获取宠物的心率数据,根据所述心率数据确定交互模式。9.根据权利要求1所述的交互方法,其特征在于,所述方法还包括构建基于宠物表情、声音、体态的宠物元数据以及构建车内外环境信息的环境元数据,将所述宠物元数据与所述环境元数据结合,分析宠物的交互需求。10.根据权利要求9所述的交互方法,其特征在于,当宠物低声吠、呲牙并突发鸣笛声,进入安抚模式;当宠物长时间趴着不动,且情绪低落时进入游戏模式;当宠物发出低声鸣叫且身体蜷缩,进入沟通模式。11.一种车内宠物的交互装置,其特征在于,包括:采集模块,用于通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;处理模块,用于基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;交互模块,用于确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。12.根据权利要求11所述的交互装置,其特征在于,所述处理模块,包括以下分析内容:第一处理单元,用于根据所述图像数据获取宠物的表情与体态变化,基于所述表情与体态变化分析宠物的交互需求;第二处理单元,用于根据所述声音数据分析声音频率,基于所述声音频率分析宠物的交互需求;第三处理单元,用于获取车内和/或车外的环境数据,判断所述环境数据是否可能造成宠物情绪变化,基于判断结果分析宠物的交互需求。13.根据权利要求11所述的交互装置,其特征在于,所述交互模式还用于根据分析宠物的交互需求相应地启动以下交互模式:游戏模式,用于通过显示屏显示游戏界面,引导宠物游戏;安抚模式,用于通过车载扬声器播放舒缓音乐、动画,缓解宠物情绪;沟通模式,用于通过车载扬声器播放舒缓音乐、动画,并播放宠物主人的沟通视频或与宠物主人主动音视频通讯。14.一种汽车,其特征在于,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至10中任一项所述的车内宠物的交互方法的步骤。15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至10中任一项所述的车内宠物的交互方法的步骤。
技术总结
本发明公开了一种车内宠物的交互方法、装置、汽车及存储介质,所述方法包括:通过车载麦克风、车载摄像头分别采集宠物的声音数据、图像数据以及通过车载传感器获取车内外环境数据;基于所述声音数据、图像数据以及车内外环境数据中的至少一种分析宠物的交互需求;确定宠物的交互需求后启动相应的交互模式,所述交互模式状态下至少部分车载功能处于被调用状态。态。态。
技术研发人员:孙思洋 张子良 甄溢军 杨朔 蒋琪 蔡志伟 贾儒 耿艺嘉 金心娴 张宗胜
受保护的技术使用者:智己汽车科技有限公司
技术研发日:2022.06.02
技术公布日:2022/10/17
相关知识
车内宠物服务方法、装置、车辆及存储介质与流程
宠物养育方法、装置、存储介质及电子设备与流程
一种智能宠物训导、陪伴方法、装置、设备及存储介质与流程
管理宠物活动的方法、装置、宠物玩具及存储介质与流程
基于AR眼镜的宠物互动方法、装置、存储介质及电子设备与流程
鸟类声音识别方法,装置,计算机设备和存储介质
宠物和设备的交互方法、装置和电子设备与流程
一种多轮对话方法及装置与流程
宠物语言识别方法、装置、电子设备及可读存储介质
一种宠物吠叫的识别方法及装置与流程
网址: 一种车内宠物的交互方法、装置、汽车及存储介质与流程 https://m.mcbbbk.com/newsview320707.html
上一篇: 宠物猫有哪些品种好养? |
下一篇: 猪舍环境对猪的影响及环境控制参数 |