一种基于AR辅助车辆近距离调整姿态的方法及系统与流程
2021-02-03 15:02:25|539|起点商标网
一种基于ar辅助车辆近距离调整姿态的方法及系统
技术领域
[0001]
本发明涉及车联网、高精度ar增强现实等技术领域,具体涉及一种基于ar辅助车辆近距离调整姿态的方法及系统。
背景技术:
[0002]
目前无人驾驶车辆大多通过车辆方向盘进行人工调控,或者对车辆进行程序设定,对没有驾照不懂程序的普通乘客并不友好,普通乘客与无人驾驶车辆之间还没有一个合理的交互系统,导致最终精细的车辆调整不得不借助人工驾驶员,并不能达到无人驾驶的效果。
[0003]
obu、车载大屏、车载ar转动摄像头、激光雷达等智能车载装置可以准确记录获取车辆的车牌、车型、速度、位置及周边环境等多种信息,并且可以与用户进行友好的交互,但这些设施未被充分的利用,解决无人驾驶中车辆近距离的车辆姿态调整问题。
技术实现要素:
[0004]
针对上述不足,本发明提供一种基于ar辅助无人驾驶车辆近距离调整姿态的方法及系统,降低普通乘客的与调整车辆交互难度,提高调整车辆姿态的精度,能够有效的提高车辆的推广率。
[0005]
本发明通过以下技术方案实现:
[0006]
一种基于ar辅助车辆近距离调整姿态的系统,包括:ar转动摄像头、车载obu设备、车载大屏和车载计算单元;
[0007]
ar转动摄像头,可通过用户调整其方向,获取车辆周围不同角度的环境图像数据,所述环境图像数据包括经纬度信息;
[0008]
车载obu设备,通过标准的obu接口与车辆接口相连,读取车辆信息,并将所述的车辆信息与所述环境图像数据进行融合,通过usb或者其它数据接口传输到车载大屏上,获得融合后的视频画面;当用户完成目标车辆姿态设置操作后,将目标车辆虚拟三维模型与所述环境图像数据进行融合计算,获取在所述视频画面上的目标车辆的经纬度及角度,并通过can总线传输给车载计算单元;
[0009]
车载计算单元,通过通信协议接收车辆调度调整指令,并根据所述指令、目标车辆的经纬度及角度,自动进行路径规划及车辆姿态调整;
[0010]
车载大屏,为用户操作提供交互渠道及各类信息集中展示。
[0011]
优选的,所述的车辆信息包括车辆角度、实时gps位置以及车辆行驶状态信息。
[0012]
优选的,所述车载obu设备用于存储系统运行所需的所有数据,包括定制的各类车型的虚拟三维模型。
[0013]
优选的,基于用户设定的虚拟三维模型的角度计算虚拟三维模型相对于ar转动摄像头的第一相对角度;获取ar转动摄像头与目标车辆的实际相对角度;基于第一相对角度和实际相对角度,计算虚拟三维模型相对目标车辆的实际偏差角度;基于该实际偏差角度
以及车辆本身传感器的角度朝向,计算得到目标车辆的角度。
[0014]
优选的,还包括车载雷达,用于采集车辆周围立体环境障碍物情况,对车辆行驶进行安全监控。
[0015]
本发明还涉及一种基于ar辅助车辆近距离调整姿态的方法,包括如下步骤:
[0016]
用户通过调整ar转动摄像头方向,获取车辆周围不同角度的环境图像数据,所述环境图像数据包括经纬度信息;
[0017]
通过车载obu设备读取车辆信息,并将所述的车辆信息与所述环境图像数据进行融合,通过usb或者其它数据接口传输到车载大屏上,获得融合后的视频画面;当用户完成目标车辆姿态设置操作后,将目标车辆虚拟三维模型与所述环境图像数据进行融合计算,获取在所述视频画面上的目标车辆的经纬度及角度;
[0018]
通过通信协议接收车辆调度调整指令,并根据所述指令、目标车辆的经纬度及角度,自动进行路径规划及车辆姿态调整。
[0019]
进一步地,所述的车辆信息包括车辆角度、实时gps位置以及车辆行驶状态信息。
[0020]
进一步地,所述车载obu设备用于存储系统运行所需的所有数据,包括定制的各类车型的虚拟三维模型。
[0021]
进一步地,基于用户设定的虚拟三维模型的角度计算虚拟三维模型相对于ar转动摄像头的第一相对角度;获取ar转动摄像头与目标车辆的实际相对角度;基于第一相对角度和实际相对角度,计算虚拟三维模型相对目标车辆的实际偏差角度;基于该实际偏差角度以及车辆本身传感器的角度朝向,计算得到目标车辆的角度。
[0022]
进一步地,采集车辆周围立体环境障碍物情况,对车辆行驶进行安全监控。
[0023]
本发明结合ar摄像头、激光雷达、obu、车载计算单元、高精度车载地图、3d虚拟模型、车载大屏等车载设备和技术,使得没有技术经验和驾驶技术的普通乘客可以与车辆进行需求交互,进一步降低无人驾驶中运营人工成本。能够充分利用现有新兴技术和已有车载设备,通过ar技术、3d虚拟技术、高精度地图、激光雷达等技术,模拟出贴近现实的需求表达形式,通过车载大屏方便用户表达对车辆调正的需求,推进车联网无人驾驶人性化进程。
具体实施方式
[0024]
下面对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0025]
一种基于ar辅助无人驾驶车辆近距离调整姿态的方法及系统。该系统所需设备包括:车载obu设备、高精度ar转动摄像头、车载大屏、车载计算单元。
[0026]
车载obu设备:基于ar辅助车辆近距离调整姿态的方法及系统的实际载体,通过标准的obu接口与汽车接口相连,能够读取车辆信息、实时高精度gps位置以及车辆行驶状态信息等,并将这些信息与ar摄像头采集到的周围环境信息进行融合,通过usb或者其它数据接口传输到车载大屏上,并且当用户完成目标车辆姿态设置操作后,将目标车辆三维模型与高精度ar摄像头提供的带经纬度信息的摄影图像进行融合计算,将获取到的用户所需的目标车辆所处的经纬度及车辆姿态,通过can总线传输给车载计算单元。obu存储着基于ar辅助车辆近距离调整姿态的方法及系统运行所需的所有数据,包括定制的各类车型的虚拟
三维模型。
[0027]
高精度ar转动摄像头:通过用户调整摄像头方向,获取到不同角度的环境图像数据,通过摄像头自带的算法及高精度地图数据将图像数据赋予位置信息。
[0028]
车载大屏:为用户操作提供交互渠道及各类信息集中展示,用户使用定制手势动作,如:拖动,两指顺/逆时针旋转等对3d虚拟模型进行操作,或者使用按钮对车辆微调,如平移、角度微调等。由用户对3d虚拟模型的角度设定可得到,3d虚拟模型在ar地图中的角度,通过3d虚拟模型在ar地图中的角度可计算出3d虚拟模型相对于ar摄像头的相对角度,综合ar摄像头本身设置的相对与车辆的相对角度,即可得到3d虚拟模型相对真实车辆实际偏差角度。结合车辆本身传感器角度朝向,可得目标车辆角度。
[0029]
车载计算单元:无人驾驶车辆控制中心,通过通信协议接收车辆调度调整指令,并根据指令的目标车辆经纬度及角度朝向,自动进行路径规划车辆角度调整,并根据无人驾驶车辆自身激光雷达及摄像头,对车辆行驶进行安全监控。
[0030]
车载雷达:采集车辆周围立体环境障碍物情况。
[0031]
优选的,高精度ar转动摄像头通过obu获取车辆的高精度地图、车辆雷达点云图及车辆当前经纬度,通过摄像头自带ar算法将高精度地图与视频画面进行融合。并将融合后的视频画面传输给obu。
[0032]
obu将融合后的视频画面及车辆本身信息显示在地图上,待用户使用3d虚拟车辆模型确定车辆在画面中的位置。
[0033]
用户通过车载大屏调整系统自带的3d虚拟车辆模型,在ar摄像头可视范围内进行拖动、调整角度等操作,设置目标车辆状态、位置、角度等信息。由用户对3d虚拟模型的角度设定可得到,3d虚拟模型在ar地图中的角度,通过3d虚拟模型在ar地图中的角度可计算出3d虚拟模型相对于ar摄像头的相对角度,综合ar摄像头本身设置的相对与车辆的相对角度,即可得到3d虚拟模型相对真实车辆实际偏差角度。结合车辆本身传感器角度朝向,可得目标车辆角度。
[0034]
3d模型与车辆车型为1:1尺寸且在拖动中会根据与车辆的相对距离调整模型大小,使模型满足距离远模型小,距离近模型近的视觉原理,且模型视觉大小与周围环境缩放程度一致,车辆移动范围不能超过ar摄像头生成的ar视频经纬度范围。
[0035]
待用户确定目标车辆及位置后,obu根据车辆3d模型的记录尺寸及与车辆的相对距离、角度,与ar影像进行融合计算,确定3d车辆虚拟所处经纬度、车辆角度等信息。用户可通过车辆页面设置车辆其它目标状态。计算后若车辆所处位置与周围环境有碰撞冲突,则生成冲撞警告反馈至车辆大屏由用户重选目标位置。若计算没有问题,obu将目标车辆所处经纬度、角度及其它信息输入车载计算单元。
[0036]
无人驾驶车载计算根据obu所需车辆经纬度、角度及其它信息进行姿态调整方案计算,并且智能进行执行。执行过程中使用激光雷达,及车辆自带摄像头进行实时安全监测。若有碰撞冲突则停止执行计划。
[0037]
本发明通过车载ar摄像头、obu等设备获取,车辆所处的位置环境及车辆自身各项数据,包括周围环境的ar影像及所处高精度经纬度,车辆速度、位置、所处角度等数据。并通过车载大屏进行展示。
[0038]
本发明通过让用户使用系统提供的车辆虚拟3d模型来在车载大屏上进行目标姿
态的设定,车辆的虚拟3d模型可以根据所设置的目标位置的经纬度与车辆本身的经纬度所相差的距离来改变车辆的大小,使得虚拟模型随着距离边远变小,距离变近变大,符合视觉效果。用户可通过触摸屏进行特定手势操作或按钮选择,来调整目标车辆角度、目标车轮角度等细节。
[0039]
本发明通过obu计算转换出用户所需的目标车辆经纬度及目标车辆状态,并通过can总线传递给车辆计算单元,由车辆计算单元计算车辆所需进行的调整步骤及路径规划。
[0040]
本发明还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中所述处理器执行所述程序时实现近距离调整姿态的方法的步骤。
[0041]
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围。在不脱离本发明之精神和范围内,所做的任何修改、等同替换、改进等,同样属于本发明的保护范围之内。
技术领域
[0001]
本发明涉及车联网、高精度ar增强现实等技术领域,具体涉及一种基于ar辅助车辆近距离调整姿态的方法及系统。
背景技术:
[0002]
目前无人驾驶车辆大多通过车辆方向盘进行人工调控,或者对车辆进行程序设定,对没有驾照不懂程序的普通乘客并不友好,普通乘客与无人驾驶车辆之间还没有一个合理的交互系统,导致最终精细的车辆调整不得不借助人工驾驶员,并不能达到无人驾驶的效果。
[0003]
obu、车载大屏、车载ar转动摄像头、激光雷达等智能车载装置可以准确记录获取车辆的车牌、车型、速度、位置及周边环境等多种信息,并且可以与用户进行友好的交互,但这些设施未被充分的利用,解决无人驾驶中车辆近距离的车辆姿态调整问题。
技术实现要素:
[0004]
针对上述不足,本发明提供一种基于ar辅助无人驾驶车辆近距离调整姿态的方法及系统,降低普通乘客的与调整车辆交互难度,提高调整车辆姿态的精度,能够有效的提高车辆的推广率。
[0005]
本发明通过以下技术方案实现:
[0006]
一种基于ar辅助车辆近距离调整姿态的系统,包括:ar转动摄像头、车载obu设备、车载大屏和车载计算单元;
[0007]
ar转动摄像头,可通过用户调整其方向,获取车辆周围不同角度的环境图像数据,所述环境图像数据包括经纬度信息;
[0008]
车载obu设备,通过标准的obu接口与车辆接口相连,读取车辆信息,并将所述的车辆信息与所述环境图像数据进行融合,通过usb或者其它数据接口传输到车载大屏上,获得融合后的视频画面;当用户完成目标车辆姿态设置操作后,将目标车辆虚拟三维模型与所述环境图像数据进行融合计算,获取在所述视频画面上的目标车辆的经纬度及角度,并通过can总线传输给车载计算单元;
[0009]
车载计算单元,通过通信协议接收车辆调度调整指令,并根据所述指令、目标车辆的经纬度及角度,自动进行路径规划及车辆姿态调整;
[0010]
车载大屏,为用户操作提供交互渠道及各类信息集中展示。
[0011]
优选的,所述的车辆信息包括车辆角度、实时gps位置以及车辆行驶状态信息。
[0012]
优选的,所述车载obu设备用于存储系统运行所需的所有数据,包括定制的各类车型的虚拟三维模型。
[0013]
优选的,基于用户设定的虚拟三维模型的角度计算虚拟三维模型相对于ar转动摄像头的第一相对角度;获取ar转动摄像头与目标车辆的实际相对角度;基于第一相对角度和实际相对角度,计算虚拟三维模型相对目标车辆的实际偏差角度;基于该实际偏差角度
以及车辆本身传感器的角度朝向,计算得到目标车辆的角度。
[0014]
优选的,还包括车载雷达,用于采集车辆周围立体环境障碍物情况,对车辆行驶进行安全监控。
[0015]
本发明还涉及一种基于ar辅助车辆近距离调整姿态的方法,包括如下步骤:
[0016]
用户通过调整ar转动摄像头方向,获取车辆周围不同角度的环境图像数据,所述环境图像数据包括经纬度信息;
[0017]
通过车载obu设备读取车辆信息,并将所述的车辆信息与所述环境图像数据进行融合,通过usb或者其它数据接口传输到车载大屏上,获得融合后的视频画面;当用户完成目标车辆姿态设置操作后,将目标车辆虚拟三维模型与所述环境图像数据进行融合计算,获取在所述视频画面上的目标车辆的经纬度及角度;
[0018]
通过通信协议接收车辆调度调整指令,并根据所述指令、目标车辆的经纬度及角度,自动进行路径规划及车辆姿态调整。
[0019]
进一步地,所述的车辆信息包括车辆角度、实时gps位置以及车辆行驶状态信息。
[0020]
进一步地,所述车载obu设备用于存储系统运行所需的所有数据,包括定制的各类车型的虚拟三维模型。
[0021]
进一步地,基于用户设定的虚拟三维模型的角度计算虚拟三维模型相对于ar转动摄像头的第一相对角度;获取ar转动摄像头与目标车辆的实际相对角度;基于第一相对角度和实际相对角度,计算虚拟三维模型相对目标车辆的实际偏差角度;基于该实际偏差角度以及车辆本身传感器的角度朝向,计算得到目标车辆的角度。
[0022]
进一步地,采集车辆周围立体环境障碍物情况,对车辆行驶进行安全监控。
[0023]
本发明结合ar摄像头、激光雷达、obu、车载计算单元、高精度车载地图、3d虚拟模型、车载大屏等车载设备和技术,使得没有技术经验和驾驶技术的普通乘客可以与车辆进行需求交互,进一步降低无人驾驶中运营人工成本。能够充分利用现有新兴技术和已有车载设备,通过ar技术、3d虚拟技术、高精度地图、激光雷达等技术,模拟出贴近现实的需求表达形式,通过车载大屏方便用户表达对车辆调正的需求,推进车联网无人驾驶人性化进程。
具体实施方式
[0024]
下面对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0025]
一种基于ar辅助无人驾驶车辆近距离调整姿态的方法及系统。该系统所需设备包括:车载obu设备、高精度ar转动摄像头、车载大屏、车载计算单元。
[0026]
车载obu设备:基于ar辅助车辆近距离调整姿态的方法及系统的实际载体,通过标准的obu接口与汽车接口相连,能够读取车辆信息、实时高精度gps位置以及车辆行驶状态信息等,并将这些信息与ar摄像头采集到的周围环境信息进行融合,通过usb或者其它数据接口传输到车载大屏上,并且当用户完成目标车辆姿态设置操作后,将目标车辆三维模型与高精度ar摄像头提供的带经纬度信息的摄影图像进行融合计算,将获取到的用户所需的目标车辆所处的经纬度及车辆姿态,通过can总线传输给车载计算单元。obu存储着基于ar辅助车辆近距离调整姿态的方法及系统运行所需的所有数据,包括定制的各类车型的虚拟
三维模型。
[0027]
高精度ar转动摄像头:通过用户调整摄像头方向,获取到不同角度的环境图像数据,通过摄像头自带的算法及高精度地图数据将图像数据赋予位置信息。
[0028]
车载大屏:为用户操作提供交互渠道及各类信息集中展示,用户使用定制手势动作,如:拖动,两指顺/逆时针旋转等对3d虚拟模型进行操作,或者使用按钮对车辆微调,如平移、角度微调等。由用户对3d虚拟模型的角度设定可得到,3d虚拟模型在ar地图中的角度,通过3d虚拟模型在ar地图中的角度可计算出3d虚拟模型相对于ar摄像头的相对角度,综合ar摄像头本身设置的相对与车辆的相对角度,即可得到3d虚拟模型相对真实车辆实际偏差角度。结合车辆本身传感器角度朝向,可得目标车辆角度。
[0029]
车载计算单元:无人驾驶车辆控制中心,通过通信协议接收车辆调度调整指令,并根据指令的目标车辆经纬度及角度朝向,自动进行路径规划车辆角度调整,并根据无人驾驶车辆自身激光雷达及摄像头,对车辆行驶进行安全监控。
[0030]
车载雷达:采集车辆周围立体环境障碍物情况。
[0031]
优选的,高精度ar转动摄像头通过obu获取车辆的高精度地图、车辆雷达点云图及车辆当前经纬度,通过摄像头自带ar算法将高精度地图与视频画面进行融合。并将融合后的视频画面传输给obu。
[0032]
obu将融合后的视频画面及车辆本身信息显示在地图上,待用户使用3d虚拟车辆模型确定车辆在画面中的位置。
[0033]
用户通过车载大屏调整系统自带的3d虚拟车辆模型,在ar摄像头可视范围内进行拖动、调整角度等操作,设置目标车辆状态、位置、角度等信息。由用户对3d虚拟模型的角度设定可得到,3d虚拟模型在ar地图中的角度,通过3d虚拟模型在ar地图中的角度可计算出3d虚拟模型相对于ar摄像头的相对角度,综合ar摄像头本身设置的相对与车辆的相对角度,即可得到3d虚拟模型相对真实车辆实际偏差角度。结合车辆本身传感器角度朝向,可得目标车辆角度。
[0034]
3d模型与车辆车型为1:1尺寸且在拖动中会根据与车辆的相对距离调整模型大小,使模型满足距离远模型小,距离近模型近的视觉原理,且模型视觉大小与周围环境缩放程度一致,车辆移动范围不能超过ar摄像头生成的ar视频经纬度范围。
[0035]
待用户确定目标车辆及位置后,obu根据车辆3d模型的记录尺寸及与车辆的相对距离、角度,与ar影像进行融合计算,确定3d车辆虚拟所处经纬度、车辆角度等信息。用户可通过车辆页面设置车辆其它目标状态。计算后若车辆所处位置与周围环境有碰撞冲突,则生成冲撞警告反馈至车辆大屏由用户重选目标位置。若计算没有问题,obu将目标车辆所处经纬度、角度及其它信息输入车载计算单元。
[0036]
无人驾驶车载计算根据obu所需车辆经纬度、角度及其它信息进行姿态调整方案计算,并且智能进行执行。执行过程中使用激光雷达,及车辆自带摄像头进行实时安全监测。若有碰撞冲突则停止执行计划。
[0037]
本发明通过车载ar摄像头、obu等设备获取,车辆所处的位置环境及车辆自身各项数据,包括周围环境的ar影像及所处高精度经纬度,车辆速度、位置、所处角度等数据。并通过车载大屏进行展示。
[0038]
本发明通过让用户使用系统提供的车辆虚拟3d模型来在车载大屏上进行目标姿
态的设定,车辆的虚拟3d模型可以根据所设置的目标位置的经纬度与车辆本身的经纬度所相差的距离来改变车辆的大小,使得虚拟模型随着距离边远变小,距离变近变大,符合视觉效果。用户可通过触摸屏进行特定手势操作或按钮选择,来调整目标车辆角度、目标车轮角度等细节。
[0039]
本发明通过obu计算转换出用户所需的目标车辆经纬度及目标车辆状态,并通过can总线传递给车辆计算单元,由车辆计算单元计算车辆所需进行的调整步骤及路径规划。
[0040]
本发明还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中所述处理器执行所述程序时实现近距离调整姿态的方法的步骤。
[0041]
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围。在不脱离本发明之精神和范围内,所做的任何修改、等同替换、改进等,同样属于本发明的保护范围之内。
起点商标作为专业知识产权交易平台,可以帮助大家解决很多问题,如果大家想要了解更多知产交易信息请点击 【在线咨询】或添加微信 【19522093243】与客服一对一沟通,为大家解决相关问题。
此文章来源于网络,如有侵权,请联系删除
热门咨询
tips