CN112689114B - 对车辆的目标位置进行确定的方法、装置、设备和介质 - Google Patents
对车辆的目标位置进行确定的方法、装置、设备和介质 Download PDFInfo
- Publication number
- CN112689114B CN112689114B CN202110263865.7A CN202110263865A CN112689114B CN 112689114 B CN112689114 B CN 112689114B CN 202110263865 A CN202110263865 A CN 202110263865A CN 112689114 B CN112689114 B CN 112689114B
- Authority
- CN
- China
- Prior art keywords
- video
- target
- information
- vehicle
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
Abstract
本申请涉及一种对车辆的目标位置进行确定的方法,包括:建立用于进行视频通话的视频通话链路,通过移动终端的摄像头对目标车辆进行视频采集,通过视频通话链路将采集的目标视频传输至参与视频通话的远程终端;通过视频展示界面展示采集到的目标视频;在展示目标视频的过程中,当发生作用于视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息;根据位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息;指示信息用于指示目标车辆中的目标位置;当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对指示信息的显示位置进行更新。采用本方法能够提高对目标位置的定位准确性。
Description
技术领域
本申请涉及车险业务领域,特别是涉及一种对车辆的目标位置进行确定的方法、装置、计算机设备和存储介质。
背景技术
随着计算机技术的发展,出现了视频技术,通过视频技术可以实时查看通信双方的视频数据。现如今,视频技术已在日常生活中广泛使用,比如,通信的一方通过视频实时将周围的环境或事物实时展示给通信的另一方,以使得视频通信的另一方可以远程查看对方周边环境或事物的实时状况。
当周围的环境或事物发生状况时,通信的一方可以通过视频技术向另一方实时展示发生状况的环境或事物的视频。因而,视频技术可应用于对目标位置的定位,比如,车辆受损位置的定位,房屋塌陷位置的定位、以及栏杆受损位置的定位等。比如,将视频技术应用于对车辆受损的位置进行定位的方式,通常是通过远程客服与车主建立视频连接,远程客服可通过视频实时查看车辆发生事故后的受损情况。远程客服通过对车主传送过来的视频画面进行语音指导,从而帮助车主对实际的车辆受损处位置进行准确定位。
然而,在常用的对目标车辆的目标位置进行定位的方式中,视频通信的一方需要对另一方传送过来的语音信息进行处理和辨认,但在处理和辨认过程中,由于通信双方可能处于嘈杂的环境或者通信过程中出现难以理解的专业术语,导致通信双方长时间无法定位实际的受损位置,因而存在对车辆中的目标位置的定位准确性低的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高对车辆的目标位置的定位准确性的对车辆的目标位置进行确定的方法、装置、计算机设备和存储介质。
一种对车辆的目标位置进行确定的方法,由移动终端执行,所述方法包括:
建立用于进行视频通话的视频通话链路,通过所述移动终端的摄像头对目标车辆进行视频采集,并通过所述视频通话链路将采集的目标视频传输至参与所述视频通话的远程终端;
通过视频展示界面展示采集到的所述目标视频;
在展示所述目标视频的过程中,当发生作用于所述视频展示界面的第一触发操作时,确定与所述第一触发操作对应的位置信息;
根据所述位置信息,在所述视频展示界面所展示的目标视频上叠加显示指示信息;所述指示信息用于指示所述目标车辆中的目标位置;
当通过所述视频通话链路接收到所述远程终端发送的位置更新信息时,根据所述位置更新信息对所述指示信息的显示位置进行更新。
一种对车辆的目标位置进行确定的装置,所述装置包括:
传输模块,用于建立用于进行视频通话的视频通话链路,通过移动终端的摄像头对目标车辆进行视频采集,并通过所述视频通话链路将采集的目标视频传输至参与所述视频通话的远程终端;
展示模块,用于通过视频展示界面展示采集到的所述目标视频;
确定模块,用于在展示所述目标视频的过程中,当发生作用于所述视频展示界面的第一触发操作时,确定与所述第一触发操作对应的位置信息;
叠加模块,用于根据所述位置信息,在所述视频展示界面所展示的目标视频上叠加显示指示信息;所述指示信息用于指示所述目标车辆中的目标位置;
更新模块,用于当通过所述视频通话链路接收到所述远程终端发送的位置更新信息时,根据所述位置更新信息对所述指示信息的显示位置进行更新。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述对车辆的目标位置进行确定的方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述对车辆的目标位置进行确定的方法大步骤。
上述对车辆的目标位置进行确定的方法、装置、计算机设备和存储介质,移动终端通过建立的视频通话链路将采集的目标视频传输至参与视频通话的远程终端,并将目标视频在视频展示界面中进行展示。其中,目标视频是对目标车辆进行采集所得到的视频。在目标视频的展示过程中,当发生作用于目标视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息,并根据位置信息在目标视频上面叠加显示指示信息。当通过视频通话链路接收到位置更新信息时,根据位置更新信息对指示信息的位置进行更新。通过这样的方式,沟通的双方均可通过指示信息的显示和调整来标记目标车辆中的目标位置,避免了在视频过程中沟通不畅而导致信息传递有误差,提高了信息传递的准确性和及时性。并且,通过增加指示信息以及移动指示信息,提高了对目标车辆的目标位置进行定位的准确性,从而提高了目标位置进行定位的效率。
附图说明
图1为一个实施例中对车辆的目标位置进行确定的方法的应用环境图;
图2为一个实施例中对车辆的目标位置进行确定的方法的流程示意图;
图3(a)为一个实施例中根据移动终端与目标位置的距离调整指示图标的大小的示意图;
图3(b)为另一个实施例中对车辆的目标位置进行确定的方法的流程示意图;
图3(c)为又一个实施例中对车辆的目标位置进行确定的方法的流程示意图;
图3(d)为一个实施例中三维空间的坐标系的示意图;
图3(e)为一个实施例中对目标视频进行缩放显示的具体步骤;
图4(a)为一个实施例中对车辆的目标位置进行确定的方法的时序图;
图4(b)为一个实施例中场景空间坐标系的构建原理图;
图4(c)为一个实施例中进行三维建图的原理示意图;
图5为一个实施例中对车辆的目标位置进行确定的装置的结构框图;
图6为另一个实施例中对车辆的目标位置进行确定的装置的结构框图;
图7为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的目标位置定位方法,可以应用于如图1所示的应用环境中。其中,移动终端110通过网络与服务器120进行通信,服务器120通过网络与远程终端130进行通信。其中,移动终端110可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器120可以用独立的服务器或者是多个服务器组成的服务器集群来实现,远程终端130可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。
可以理解,移动终端110建立用于与远程终端130进行视频通话的视频通话链路,移动终端110通过视频通话链路将采集的目标视频传输至服务器120,服务器120通过视频通话链路将目标视频传输至参与视频通话的远程终端130,目标视频中包括有目标车辆。移动终端110通过视频展示界面展示采集到的目标视频,并在展示目标视频的过程中,当发生作用于视频展示界面的第一触发操作时,移动终端110确定与第一触发操作对应的位置信息。移动终端110根据位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息,指示信息用于指示目标车辆中的目标位置。当移动终端110通过视频通话链路接收到服务器120转发的远程终端130发送的位置更新信息时,移动终端110根据位置更新信息对指示信息的显示位置进行更新。
需要说明的是,在具体应用场景中,比如车险出事故后的视频查勘定损,现有的视频勘察通常都是事故现场人员(一般是车主、查勘员、或修理厂人员等)手持移动终端通过视频传输技术将事故现场画面以视频的方式传输到远程终端,一般是查勘员通过远程电脑与事故现场人员进行视频会话。在传输画面的同时,现场人员和远程查勘员进行语音交互,这时就可能存在画面传输问题、语音传输断续问题或当有一方为听力障碍人士的情况,就会导致对车辆受损的具体位置进行定位的困难。并且,在网络环境不佳的情况下,网络速率也会影响视频查勘。比如,当前网络状况不佳导致视频或语音链路不稳定,则会存在沟通不畅通的情况。还比如,当处于地下室或偏远山区,网络条件不佳时,这时需要车主或查勘员线下进行拍照或录像处理,拍照的图片或录像带转移到网络条件较好处时,进行反复的沟通和确认,需花费大量的人力和时间。
基于此,本申请提出了一种对车辆的目标位置进行确定的方法,其详细内容如下描述。需要说明的是,上述仅示出的其中一个具体应用场景,本申请的方案还可以适用于其他的应用场景,对此不作限定。
在一个实施例中,如图2所示,提供了一种对车辆的目标位置进行确定的方法,以该方法应用于图1中的移动终端110为例进行说明,该对车辆的目标位置进行确定的方法包括以下步骤:
S202,建立用于进行视频通话的视频通话链路,通过移动终端的摄像头对目标车辆进行视频采集,并通过视频通话链路将采集的目标视频传输至参与视频通话的远程终端。
其中,视频通话链路是用于传输数据的链路,如用于传输视频数据、音频数据、以及文本数据等数据。目标车辆是一个可视化的对象,如房屋、交通工具或者栏杆等物体。目标视频是包括目标车辆的视频,比如当目标车辆是一辆汽车时,目标视频是围绕这辆汽车所拍摄的视频。
参与视频通话的双方分别是移动终端和远程终端。其中,移动终端是用户通过账号登录的终端,比如用户登录的手机端;远程终端是远程用户通过账号登录的终端,比如远程用户登录的WEB(Website,网页)端。
具体地,移动终端与远程终端之间建立视频通话链路,以用于与远程终端进行视频通话。移动终端采集包括目标车辆的目标视频,并通过视频通话链路将采集的目标视频传输至远程终端,以使得远程终端可接收移动终端所采集的目标视频。
在一个实施例中,移动终端上运行有应用程序,该应用程序可用于发起和/或接受视频通话。该应用程序具体可以是视频应用程序,比如查勘APP(Application,应用程序)。用户通过账号登录查勘APP,并在查勘APP上与远程终端建立视频连接。其中,查勘APP是一款安装于手机终端上的应用程序,该查勘APP中嵌有SDK(Software Development Kit,软件开发工具包)。其中,SDK是集成了AR(Augmented Reality,增强现实)空间技术,可实现在视频空间中进行定位的功能。
在一个实施例中,可将实现本申请的计算机程序以SDK形式嵌入至查勘APP中,当用户倾向使用移动终端中的APP时,可以下载已嵌入的AR能力SDK的APP,APP的功能丰富且齐全。当然,本申请还可以提供API接口,当用户倾向使用H5web页面使用系统功能时,此时则以API接口形式接入H5展示页面,使用AR远程视频功能,灵活方便。
在一个实施例中,移动终端通过图像采集设备,比如摄像头,对目标车辆实时进行图像采集,以得到采集的目标视频。移动终端通过视频通话链路将实时采集的目标视频传输至参与视频通话的远程终端,以使得远程用户可通过登录远程终端来查看目标视频。
在一个实施例中,移动终端通过音频采集设备,比如麦克风,对目标车辆实时进行声音采集,以得到采集的目标音频。移动终端通过视频通话链路将实时采集的目标音频传输至参与视频通话的远程终端,以使得远程用户可通过登录远程终端来与登录移动终端的用户进行语音沟通。
在一个实施例中,移动终端将采集到的目标视频以及目标音频通过视频通话链路实时传输至服务器,服务器再将所接收的目标视频以及目标音频转发至参与视频通话的远程终端,以使得远程用户可通过远程终端查看目标视频并听见目标音频。
S204,通过视频展示界面展示采集到的目标视频。
其中,视频显示界面是移动终端上用于显示视频画面的界面,可由移动终端上的显示屏实现。可以理解,视频显示界面可以是显示屏的全部界面或者部分界面,本申请实施例对此不作限定。
显示屏具体可以是LCD屏(Liquid Crystal Display,液晶显示)或OLED屏(Organic Light-Emitting Diode,有机发光二极管)等显示屏,本申请实施例对此不作限定。
具体地,移动终端上安装有显示屏,并通过显示屏上的视频展示界面展示采集到的目标视频。
在一个实施例中,当移动终端是智能手机时,智能手机可通过内置的摄像头实时采集目标视频,通过显示屏实时展示视频显示界面,并在该视频显示界面中显示所采集的目标视频。因而,用户可通过智能手机查看到视频显示界面中所展示的目标视频。
S206,在展示目标视频的过程中,当发生作用于视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息。
其中,触发操作具体可以是触摸操作、光标操作或者按键操作等操作,第一触发操作是作用于视频展示界面的预设的触发操作,比如单击、双击或长按等操作。
位置信息是触发操作所触发的视频展示界面中具体位置的信息,具体可以是该位置的横纵坐标、或者该位置相对与整个视频展示界面的位置坐标,本申请实施例对此不作限定。
具体地,在移动终端通过视频展示界面展示采集到的目标视频的过程中,移动终端实时对作用于视频展示界面的第一触发操作进行检测,第一触发操作比如是单击操作。当移动终端检测到作用于视频展示界面的单击操作时,移动终端获取与该单击操作所对应的位置的横纵坐标、或者该位置相对与整个视频展示界面的位置坐标。
在一个实施例中,位置信息还可以是视频展示界面中所触发的具体位置的空间三维坐标信息。可以理解,当发生作用于视频展示界面的第一触发操作,比如单击操作时,移动终端获取该第一触发操作所触发的位置的空间三维坐标信息,此时,视频展示界面展示的目标视频中的目标车辆与触发位置的三维坐标信息建立对应关系。因此,当移动终端的镜头发生晃动,使得视频展示界面展示的目标视频发生变化时,移动终端获取到的三维坐标信息也不会发生改变,因而保证了定位的准确性。
在一个实施例中,移动终端的视频展示界面可以是一个有限的大小,如可看作70*90。第一触发操作所触发的位置可以是相对与整个视频展示界面的一个具体的坐标点,如(20,20),表示第一触发操作所触发的位置相对与整个视频展示界面的(20,20)位置处;第一触发操作所触发的位置也可以是具体位置的空间三维坐标信息,如(20,20,20),表示第一触发操作所触发的位置相对与整个视频展示界面所在三维空间的(20,20,20)位置处。
在一个实施例中,视频展示界面中可展示有空间标记功能开关(比如AR功能开关)。当用户点击该空间标记功能开关后,在接下来的视频展示过程中,可开启AR定位标记功能,否则采用常用的平面标记功能。AR定位标记功能就是指基于触发位置所对应的视频画面在真实场景中的三维位置信息,而进行标记定位的功能。相应的三维标记定位功能会在后面的实施例中进行详细的说明。
S208,根据位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息;指示信息用于指示目标车辆中的目标位置。
其中,指示信息是用于标记位置的信息,具体可以是文字、图标或者图像等信息。目标位置是目标车辆中所要标记的特定位置。其中,指示信息每次只能标记目标车辆中的一个特定位置,即一个指示信息对应一个目标位置。
具体地,当移动终端检测到作用于视频展示界面的第一触发操作时,移动终端获取第一触发操作在视频展示界面中所触发的坐标位置,并在视频展示界面中该坐标位置处叠加显示一个指示信息。
在一个实施例中,当指示信息为指标图标时,具体可以是箭头、矩形或者圆形等指示图标,本申请实施例对此不作限定。比如,当目标位置为一个具体的位置点时,移动终端可采用箭头图标作为指示图标,并且,将箭头图标的指示点作为所指示的目标位置;当目标位置是一个区域时,移动终端可采用矩形或者圆形图标作为指示图标,并且,将矩形或者圆形图标内的区域作为所指示的目标位置。
在一个实施例中,当移动终端的镜头发生晃动,使得视频展示界面展示的目标视频发生变化时,由于该目标视频中的目标车辆与触发位置的三维坐标信息建立了对应关系,因此,目标车辆中的目标位置与所对应的指示信息始终保持对应关系,也就是说,该指示信息会随着目标位置的改变而对应改变,因而可达到精准定位的效果。
在一个实施例中,指示图标的大小可根据移动终端与目标车辆中的目标位置的距离适应调整。具体地,移动终端获取用户所触发的视频展示界面中位置的三维空间信息,并根据该三维空间信息的改变,来确定对应的指示图标的大小。比如,当三维空间中的移动终端与目标车辆中的目标位置的距离小于预设距离时,也就是当移动终端上的镜头逐渐靠近目标车辆中的目标位置时,移动终端通过视频展示界面所展示的指示图标会逐渐变大;当三维空间中的移动终端与目标车辆中的目标位置的距离大于等于预设距离时,也就是当移动终端上的镜头逐渐远离目标车辆中的目标位置时,移动终端通过视频展示界面所展示的指示图标会逐渐变小。
在一个实施例中,参考图3(a),图3(a)为一个实施例中根据移动终端与目标位置的距离调整指示图标的大小的示意图。可以理解,移动终端上的镜头与目标车辆上的目标位置距离远,则对应的指示图标小;移动终端上的镜头与目标车辆上的目标位置距离近,则对应的指示图标大。
在一个实施例中,移动终端每次在视频展示界面所展示的目标视频上叠加显示一个指示信息。当移动终端首次检测到作用于视频展示界面的第一触发操作时,移动终端获取第一触发操作在视频展示界面中所触发的坐标位置,并在视频展示界面中该坐标位置处叠加显示一个指示信息。
在一个实施例中,当移动终端再次检测到作用于视频展示界面的第一触发操作时,移动终端获取最新一次的第一触发操作在视频展示界面中所触发的新的坐标位置。移动终端清除上一次的坐标位置处的指示信息,并将指示信息显示在视频展示界面中新的坐标位置处。
举例说明,移动终端首次检测到的第一触发操作所对应的位置信息是视频展示界面中的A1(10,10),移动终端在视频展示界面中显示一个3D(three-dimensional,三维)箭头,其中,箭头的头部位于A1(10,10)处正上方,如B1(10,12),且箭头指向A1(10,10)。当移动终端再次检测到作用于视频展示界面的第一触发操作时,新的第一触发操作所对应的位置信息是视频展示界面中的A2(15,15),则移动终端将B1(10,12)处的3D箭头移动到B2(15,17)处,也就是A2(15,15)的正上方,且箭头指向A2(15,15)。
在一个实施例中,移动终端确定在展示目标视频时目标视频所处的图层,并将指示信息置于该图层上方的图层中。移动终端通过对展示目标视频的图层以及展示指示信息的图层进行叠加渲染,从而将指示信息叠加显示在目标视频之上,以使得用户通过移动终端的视频展示界面,可查看到包含指示信息的目标视频。
在一个实施例中,移动终端获取第一触发操作在视频展示界面中所触发的坐标位置,并根据该坐标位置,生成对应的二进制流数据,并将生成的二进制流数据发送至参与视频通话的远程终端。
S210,当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对指示信息的显示位置进行更新。
其中,位置更新信息是触发操作所触发的具体位置的更新信息,表示远程终端上的触发操作所触发的具体位置的信息,具体可以是更新后的位置的横纵坐标或者更新后的位置相对与整个界面的位置坐标。
在一个实施例中,移动终端将采集的目标视频以及生成的二进制流数据一同发送至服务器,并由服务器转发至参与视频通话的远程终端,以使得远程终端可接收移动终端采集的目标视频以及二进制流数据。远程终端将接收到的二进制流数据转换成对应的位置信息,并根据位置信息在视频展示界面上生成与视频展示界面中的目标视频相匹配的指示信息。
在一个实施例中,当远程终端在视频展示界面展示接收的目标视频以及相应的指示信息时,登录远程终端的远程用户可对指示信息的位置进行判定。当远程用户判定指示信息的位置不正确时,远程用户可以通过视频通话链路与登录移动终端的用户进行语音沟通,以调整指示信息的位置。
在一个实施例中,当登录远程终端的远程用户与登录移动终端的用户进行语音沟通后,远程用户确认指示信息的实际位置,并将远程终端上的指示信息移动到新的位置,从而远程终端得到指示信息的位置更新信息。
在一个实施例中,远程终端生成二进制流形式的位置更新信息,并将生成的二进制流形式的位置更新信息发送至服务器,并由服务器转发至参与视频通话的移动终端,以使得移动终端可以接收远程终端生成的二进制流形式的位置更新信息。
在一个实施例中,移动终端接收远程终端发送的二进制流形式的位置更新信息。移动终端根据接收的位置更新信息,对视频展示界面所展示的目标视频上叠加显示指示信息的位置进行修改,将指示信息移动到视频展示界面中与位置更新信息相对应的位置处。
在一个实施例中,移动终端将指示信息移动到视频展示界面中与位置更新信息相对应的位置处,也就是对目标视频中的目标位置进行了准确的定位。比如,当移动终端是用户手机,且目标视频是发生事故的车辆时,车主可通过手机上的指示信息更新的位置,对实际的车辆受损处位置进行准确定位;当目标视频是发生事故的房屋时,用户可通过手机上的指示信息更新的位置,对实际的房屋塌陷位置进行准确定位;当目标视频是发生事故的栏杆时,用户可通过手机上的指示信息更新的位置,对实际的栏杆受损位置进行准确定位。
在一个实施例中,以移动终端显示区域的左上角为原点,当任意一方标注屏幕位置,AR指示信息则会定位当前的标注位置的空间坐标信息并显示。随着屏幕的移动,指示信息仍处于开始标注位置不会随着屏幕的移动而移动。待下次标注屏幕另一位置时则更新指示信息的空间坐标信息。
在一个实施例中,移动终端可通过不限于AR眼镜、H5网页、应用程序等不同的前端形式,并通过网络接入到系统,实现实时标注功能;远程服务人员使用包括但不限于H5网页的前端形式通过网络接入到系统,实现实时标注的功能。
在一个实施例中,视频展示界面中可展示有标注区域。当标注区域需要特别说明具体的零部件时,这时可现实用户输入的AR标注信息,用以说明多个物件中具体的零部件某个物件。当标注区域为明显的平面区域时,这是不需要AR标注信息,可不进行显示。也就是说,AR标注信息的显示有无则可以通过开关进行控制。
在一个实施例中,无论是用户的移动终端还是远程服务人员的远程终端,都可以通过触发各自设备上的系统功能按钮对已确认位置进行的进行拍照或录像的采集。
上述对车辆的目标位置进行确定的方法,移动终端通过建立的视频通话链路将采集的目标视频传输至参与视频通话的远程终端,并将目标视频在视频展示界面中进行展示。其中,目标视频是对目标车辆进行采集所得到的视频。在目标视频的展示过程中,当发生作用于目标视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息,并根据位置信息在目标视频上面叠加显示指示信息。当通过视频通话链路接收到位置更新信息时,根据位置更新信息对指示信息的位置进行更新。通过这样的方式,沟通的双方均可通过指示信息的显示和调整来标记目标车辆中的目标位置,避免了在视频过程中沟通不畅而导致信息传递有误差,提高了信息传递的准确性和及时性。并且,通过增加指示信息以及移动指示信息,提高了对目标车辆的目标位置进行定位的准确性,从而提高了目标位置进行定位的效率。
在一个实施例中,步骤S208,也就是根据位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息的步骤,具体包括:确定在展示目标视频时目标视频所处的第一图层;确定在第一图层之上的第二图层,并将预设置的指示信息置于第二图层中;通过对第一图层和第二图层进行叠加渲染,以将指示信息叠加显示在目标视频之上。
在一个实施例中,移动终端在视频展示界面上展示目标视频,所展示的目标视频处于移动终端的第一图层上。其中,图层中可增加文本、图片、表格或插件等元素。并且,以图层为单位,对不同图层叠加渲染,从而显示出各图层中对应添加的元素。其中,第一图层是用于显示目标视频的图层。
在一个实施例中,当移动终端确定目标视频所处的第一图层后,可将第一图层上方的图层作为第二图层,并在第二图层中增加预设置的指示信息,以在第二图层中展示所增加的指示信息。其中,第二图层是用于显示指示信息的图层。
在一个实施例中,移动终端将显示目标视频的第一图层和显示指示信息的第二图层按先后顺序进行叠加渲染,以使得指示信息叠加显示在目标视频之上。
上述实施例中,移动终端确定在展示目标视频时目标视频所处的图层,并将指示信息置于该图层上方的图层中。移动终端通过对展示目标视频的图层以及展示指示信息的图层进行叠加渲染,从而将指示信息叠加显示在目标视频之上。通过这样的方式,用户通过移动终端的视频展示界面,可查看到包含指示信息的目标视频,从而可直观的标记目标视频中的目标位置,提高了对目标位置进行定位的准确性和便捷性。
在一个实施例中,该对车辆的目标位置进行确定的方法还包括传输目标视频的步骤,该传输目标视频的步骤具体包括:获取与目标视频对应的视频尺寸,并通过视频通话链路将视频尺寸传输至远程终端;视频尺寸和目标视频用于指示远程终端在视频通话界面展示目标视频,并在与视频通话界面不同的预设区域展示与视频尺寸同等大小的功能界面,当在功能界面检测到第二触发操作时,根据第二触发操作确定位置更新信息。
其中,视频通话界面是远程终端上用于显示视频画面的界面,可由远程终端上的显示屏实现。可以理解,视频通话界面可以是显示屏的全部界面或者部分界面,本申请实施例对此不作限定。其中,显示屏具体可以是LCD屏或OLED屏等显示屏,本申请实施例对此不作限定。
功能界面是远程用户进行第二触发操作的界面。其中,第二触发操作是作用于功能界面的预设操作。远程终端检测到第二触发操作将确定对应的位置更新信息。触发操作具体可以是触摸操作、光标操作或者按键操作等,第二触发操作比如光标双击。
具体地,远程终端通过视频通话链路获取目标视频以及与目标视频对应的视频尺寸,基于该视频尺寸和目标视频,远程终端在视频通话界面中展示对应的目标视频。并且,远程终端在与视频通话界面不同的预设区域展示与视频尺寸同等大小的功能界面,当在功能界面检测到第二触发操作时,远程终端根据第二触发操作确定位置更新信息。
在一个实施例中,移动终端将目标视频以及与目标视频对应的视频尺寸通过视频通话链路一起传输至远程终端,以使得远程终端可接收到目标视频以及与目标视频对应的视频尺寸。远程终端将接收到的目标视频等比例调整到与视频展示界面相匹配的尺寸大小,并将调整后的目标视频展示于视频通话界面中。其中,调整处理可以是放大或者缩小处理。比如,当远程终端接收的目标视频的视频尺寸小于视频通话界面的尺寸时,远程终端将接收到的目标视频放大至与该视频通话界面相匹配的尺寸,比如将目标视频的视频尺寸放大至视频通话界面的尺寸的一半或者三分之二,本申请实施例对此不作限定。
在一个实施例中,远程终端接收到与目标视频对应的视频尺寸,如视频尺寸为5英寸,则远程终端将5英寸的目标视频展示在视频通话界面中。并且,远程终端将显示屏上除视频通话界面以外的区域作为预设区域,并在预设区域中展示与接收到的视频尺寸同等大小的功能界面。比如,远程终端将视频通话界面右侧的区域作为预设区域,并在该预设区域中展示5英寸的功能界面。
在一个实施例中,移动终端根据确定的与视频展示界面的第一触发操作对应的位置信息生成二进制流数据,并将生成的二进制流数据发送至远程终端。当远程终端接收到移动终端发送的二进制流数据时,将该二进制流数据转换为对应的位置信息,并根据位置信息在视频通话界面上增加与其中的目标视频相匹配的指示信息。
在一个实施例中,远程终端确定在视频通话界面上展示目标视频时,目标视频所处的图层,并将指示信息置于该图层之上的图层中。远程终端通过对不同图层进行叠加渲染,从而将指示信息叠加显示在目标视频之上,以使得远程用户可通过远程终端查看到目标视频以及对应的指示信息。
在一个实施例中,当登录远程终端的远程用户与登录移动终端的用户语音沟通后,远程用户可根据沟通结果重新选择目标视频中的目标位置。当远程终端在预设区域的功能界面中检测到第二触发操作时,确定与第二触发操作相对应的位置更新信息。远程终端根据与第二触发操作相对应的位置更新信息,将视频通话界面上的指示信息移动到相应的位置处,并在视频通话界面所展示的目标视频上更新所叠加的指示信息的位置。
上述实施例中,移动终端将目标视频以及与目标视频相对应的视频尺寸发送至远程终端,使得远程终端将目标视频按照视频通话界面的尺寸大小展示在视频通话界面中,并在预设区域展示与视频尺寸同等大小的功能界面,以根据在功能界面中检测到的第二触发操作来确定位置更新信息。通过这样的方式,远程终端上可以在功能界面对指示信息进行位置更新,以提高对目标车辆的目标位置进行定位的准确性。
在一个实施例中,该对车辆的目标位置进行确定的方法还包括传输目标视频的步骤,该传输目标视频的步骤具体包括:获取与目标视频对应的视频尺寸,并通过视频通话链路将视频尺寸传输至远程终端;视频尺寸和目标视频用于指示远程终端在视频通话界面展示与视频尺寸同等大小的目标视频,并在视频通话界面检测到第三触发操作时,根据第三触发操作确定位置更新信息。
其中,第三触发操作是作用于视频通话界面的预设操作。远程终端检测到第三触发操作将确定对应的位置更新信息。触发操作具体可以是触摸操作、光标操作或者按键操作等,第三触发操作比如光标双击。
具体地,远程终端通过视频通话链路获取目标视频以及与目标视频对应的视频尺寸,基于该视频尺寸和目标视频,远程终端在视频通话界面中展示与视频尺寸同等大小的目标视频。并且,当在视频通话界面检测到第三触发操作时,远程终端根据第三触发操作确定位置更新信息。
在一个实施例中,移动终端将目标视频以及与目标视频对应的视频尺寸通过视频通话链路一起传输至远程终端,以使得远程终端可接收到目标视频以及与目标视频对应的视频尺寸,并在视频通话界面中展示与视频尺寸同等大小的目标视频。比如视频尺寸为5英寸,则远程终端在视频通话界面中展示5英寸的目标视频。
在一个实施例中,移动终端根据确定的与视频展示界面的第一触发操作对应的位置信息生成二进制流数据,并将生成的二进制流数据发送至远程终端。远程终端接收到移动终端发送的二进制流数据,将二进制流数据转换为对应的位置信息,并根据位置信息在视频通话界面上生成与视频通话界面中的目标视频相匹配的指示信息。
在一个实施例中,远程终端确定在视频通话界面上展示目标视频时,目标视频所处的图层,并将指示信息置于该图层之上的图层中。远程终端通过对不同图层进行叠加渲染,从而将指示信息叠加显示在目标视频之上,以使得远程用户可在远程终端上查看到目标视频以及对应的指示信息。
在一个实施例中当登录远程终端的远程用户与登录移动终端的用户语音沟通后,远程用户可根据沟通结果重新选择目标视频中的目标位置。当远程终端在视频通话界面中检测到第三触发操作时,确定与第三触发操作相对应的位置更新信息。远程终端根据与第三触发操作相对应的位置更新信息,将视频通话界面上的指示信息移动到与该位置更新信息相对应的位置处,从而在视频通话界面所展示的目标视频上更新所叠加的指示信息的位置。
在一个实施例中,本申请可兼容不同型号的移动终端、远程终端,以及对应的屏幕大小。比如,移动终端或远程终端包括但不限于移动端、PC端,不同的设备品牌,以及不同的屏幕大小,如4.0寸、4.1寸、4.2寸、4.3寸、4.5寸,5.0寸,5.5寸,6.0寸,6.4寸、17寸、19寸、21寸、22寸等不同尺寸。移动终端与远程终端不同尺寸的屏幕等比例缩放,使两端的显示内容保持一致。
上述实施例中,移动终端将目标视频以及与目标视频相对应的视频尺寸发送至远程终端,使得远程终端将目标视频按照视频尺寸展示在视频通话界面中,并根据视频通话界面中检测到的第二触发操作来确定位置更新信息。通过这样的方式,远程终端上可以在视频通话界面中对指示信息进行位置更新,以提高对目标车辆的目标位置进行定位的准确性。
在一个实施例中,步骤S210,也就是当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对指示信息的显示位置进行更新的步骤,具体包括:接收二进制流更新数据;二进制流更新数据是远程终端根据位置更新信息而生成的;清空视频展示界面中的指示信息;根据二进制流更新数据,在视频展示界面所展示的目标视频上对指示信息的显示位置进行更新。
具体地,远程终端根据位置更新信息,生成对应的二进制流更新数据,并将二进制流更新数据发送至移动终端。移动终端接收到远程终端发送的二进制流更新数据后,将二进制流更新数据转换为对应的位置更新信息,并根据该位置更新信息,将视频展示界面上的指示信息移动到与位置更新信息相对应的位置处。
在一个实施例中,当远程终端检测到作用于功能界面中的第二触发操作时,确定与第二触发操作相对应的位置更新信息。并根据该位置更新信息,生成相应的二进制流更新数据。远程终端将二进制流更新数据发送至移动终端,以使得用户可通过移动终端查看到远程用户对指示信息的修改。
在一个实施例中,当远程终端检测到作用于视频通话界面中的第三触发操作时,确定与第三触发操作相对应的位置更新信息。并根据该位置更新信息,生成相应的二进制流更新数据。远程终端将二进制流更新数据发送至终端,以使得用户可通过终端查看到远程用户对指示信息的修改。
在一个实施例中,移动终端接收到远程终端发送的二进制流更新数据,将二进制流更新数据转换为对应的位置更新信息。移动终端清空原有的位置信息,并将转换后的位置更新信息作为新的位置信息,并根据新的位置信息,将视频展示界面上的指示信息移动到与新的位置信息相对应的位置处,从而在视频展示界面所展示的目标视频上更新所叠加的指示信息的位置。
上述实施例中,移动终端接收到远程终端发送的二进制流更新数据,并根据二进制流更新数据,在视频展示界面所展示的目标视频上对指示信息的显示位置进行更新。通过这样的方式,移动终端的视频展示界面中可以实时展示目标视频以及更新位置后的指示信息,以提高对目标车辆的目标位置进行定位的准确性。
在一个实施例中,该对车辆的目标位置进行确定的方法中的目标视频包括发生事故的受损车辆的视频;目标车辆包括受损车辆;目标位置包括受损车辆的受损位置。
在一个实施例中,当目标视频为发生事故的受损车辆的视频,目标车辆为受损车辆,目标位置为受损车辆的受损位置时,移动终端建立用于进行视频通话的视频通话链路,并通过视频通话链路将采集的目标视频传输至参与视频通话的远程终端,其中,发生事故的受损车辆的视频中包括受损车辆。移动终端通过视频展示界面展示采集到的发生事故的受损车辆的视频。在展示发生事故的受损车辆的视频的过程中,当发生作用于视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息,并根据位置信息,在视频展示界面所展示的发生事故的受损车辆的视频上叠加显示一个3D箭头,3D箭头用于指示受损车辆中的受损位置,当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对3D箭头的显示位置进行更新。
上述实施例中,当目标视频为发生事故的受损车辆的视频,目标车辆为受损车辆,目标位置为受损车辆的受损位置时,通过对车辆的目标位置进行确定的方法,可以对受损车辆的受损位置进行定位,提高对受损车辆的受损位置定位的准确性。
在一个实施例中,该对车辆的目标位置进行确定的方法还包括:基于最终确定的受损车辆中的受损位置,对受损车辆进行图片拍摄,得到受损位置照片;获取与受损车辆对应的车辆信息;根据车辆信息和受损位置照片,执行与受损车辆相应的车险理赔操作。
其中,车险理赔操作是当购买车险的车辆发生交通事故后,保险公司对该车辆进行赔偿的操作。具体可以是进行理算复核、审批以及赔付结案等流程。
在一个实施例中,用户通过移动终端与远程终端上的客服进行语音确认,从而确定最终的受损车辆中的受损位置。移动终端基于最终确定的受损车辆中的受损位置,通过移动终端上的图像采集设备,比如摄像头,对受损车辆进行图片采集,得到受损位置照片。
在一个实施例中,用户在移动终端上填报与受损车辆对应的车辆信息。移动终端将所填报的车辆信息以及对应的受损位置照片发送至远程终端,远程终端的客服根据接收到的车辆信息以及对应的受损位置照片,执行与受损车辆相应的理算复核、审批以及赔付结案等流程。
上述实施例中,移动终端通过对受损车辆进行图片拍摄,得到受损位置照片,并根据与受损车辆对应的车辆信息和受损位置照片,执行与受损车辆相应的车险理赔操作。通过这样的方式,用户可以在手机的查勘APP上及时对受损车辆进行车险理赔,无需经历到保险公司递交资料等流程,从而减少了时间成本,提高了车险理赔的效率。
参考图3(b),在一个具体的实施例中,该对车辆的目标位置进行确定的方法的流程示意图包括以下步骤:用户登录手机端的查勘APP,并与远程客服的WEB端建立视频连接。用户通过手机拍摄发生事故的受损车辆的视频,当用户点击手机上的视频展示界面时,视频展示界面上出现一个可标记的AR箭头,AR箭头用于指引正确的受损车辆的受损位置,同时,手机上的视频展示界面同步到远程客服的WEB端。远程客服可在WEB端的视频通话界面中查看受损车辆的受损位置,当远程客服判断所AR箭头所标记的受损位置不正确时,远程客服调整AR箭头的位置,WEB端将调整后的位置更新信息同步到APP端。远程客服通过与客户的语音沟通,最终确定受损车辆的受损位置。当双方确认一致时,客户拍照上传包括受损车辆受损位置的图片至查勘APP,以完成后续的理赔操作。
参考图3(c),在一个具体的实施例中,该对车辆的目标位置进行确定的方法的流程示意图包括以下步骤:首先,用户通过手机端的查勘APP与WEB端的远程客服建立视频连接。当用户点击查勘APP所呈现的视频画面时,查勘APP启动AR功能,也就是说,查勘APP上实时呈现对应的指示信息(比如图中的AR箭头),并且,用户所点击的目标视频中的位置信息以二进制的形式,通过网络传输至服务器,服务器再通过视频通话链路将位置信息传输至远程客服所在的WEB端,以使得远程客服可在WEB端查看到用户所触发的位置信息。
可以理解,用户与远程客服建立了视频连接,因此在整个视频传输过程中,用户与远程客服可以进行语音交流,也就是说,通过语音辅助来确定实际的车辆受损位置。以及,在整个视频传输过程中,可以由用户或者远程客服中的任意一方来首先启动AR功能,以确定车辆受损位置,本申请实施例对顺序并不做限定。
在一个实施例中,本申请中的指示信息的定位可通过三维空间的定位方式来实现。比如,以终端设备(移动终端或远程终端中的任一终端)显示区域的左上角为原点,设定此时的空间直角坐标点为(0,0,0),如图3(d)所示,图3(d)为一个实施例中三维空间的坐标系的示意图。如图3(d)中的原点O(0,0,0)对应终端显示区域的左上角,即为原点,则此时AR指示信息不显示,只有对应坐标的x,y.z轴任意一个方向数值大于0则显示AR指示信息。面XOZ相当于终端显示区域,在面XOZ上标注一个位置,例如标注的位置为P(20,20),此时AR标注的位置为P1(20,20,20),当终端设备向右移动30单位距离,则此时屏幕上对应的标注位置为P’(-10,20),则此时的AR标注位置为P1’(-10,20,20),移动屏幕后,AR指示消失在屏幕所见范围内,但是并没有彻底消失。当终端设备向左移动30单位距离,即移回原处,此时AR指示信息出现在原来的位置。这样就达到了定位的功能,不随屏幕的移动而移动。当对终端显示区域重新进行标注时,则此时会以终端设备的左上角为原点O(0,0,0)重新进行定位和指示。
在其中一个实施例中,参考图3(e),图3(e)为一个实施例中对目标视频进行缩放显示的具体步骤。本申请可兼容不同终端设备及屏幕大小,以实现不同终端设备及屏幕大小的情况下显示内容一致。比如,当现场用户的移动终端如手机的屏幕大小为5英寸,远程服务人员的远程终端如PC电脑的屏幕为20英寸,则此时的屏幕比=源屏幕大小/目的屏幕大小(其中,源屏幕大小为5英寸,目的屏幕大小为20英寸),那么相应的屏幕比=5/20=1/4。通过换算,此时目的屏幕显示的数据所占屏幕大小为:目的屏幕大小=源屏幕大小/屏幕比,即目的屏幕显示的数据所占屏幕大小=5/(1/4)=20。通过不同设备间的屏幕比,将不同终端的显示内容等比例的进行缩放,保持显示数据的一致性,确保任一终端看到的标注和指示正确。
在一个实施例中,当任一终端设备对屏幕进行标注时,此时显示的标注信息大小为预设的大小,并且终端设备会记录屏幕和目标位置的垂直距离,即y轴的距离。假设此时的距离为20,当屏幕与标识信息距离增大到40时,此时的距离比=移动后的距离/原始比例,即距离比=40/20=2,代表此时标注信息按照原来的大小进行2倍的放大。即当摄像头离目标区域较近时,指示信息则会放大,指示更加清晰;当摄像头离目标区域较远时,指示信息则会缩小,指示的区域更加明确,确保指示信息的大小不影响指示信息的定位和标注。
需要说明的是,指示信息具体可以是指示图标,指示图标在不同场景下有2D和3D的形态。2D的形态主要为平面区域的指示信息,可以很好的在平面图形中进行标注和指示,比如,当用户需要在一张集体照中找出某个人时,可通过2D指示信息进行标注。3D的形态为立体空间中的指示信息,比如在一个露天的大型停车场,需要找出用户的车辆,可以通过3D形态指示信息,随着寻找位置的移动,但指示的信息不动,这样可以快速的找到用户的车辆。
指示图标的形状可以是箭头、矩形或圆圈等形状。其中,箭头形状的指示图标指示平面区域内具体的零部件物件,比如,当用户进行代买服务时,代买员不知代买物品如螺丝的实际大小,当使用AR箭头标注,则用户可以让代买员通过AR标注,清楚具体螺丝大小。矩形形状的指示图像用于指示区域,比如,当用户的车辆发生追尾时,AR远程查勘可以使用AR矩形指示图标,该图标可以指示受损区域位置,清晰明了。圆圈形状的指示图标用于指示空间内的某块区域或物件;当房产中介人员需要进行区域内房屋资料收集查询时,远程工作人员可以使用圆圈AR标注信息标注所工作区域。
在一个实施例中,本申请中的指示信息的数量可以是一个,也可以是多个。其中,单个的指示信息可应用于标注定位,多个指示信息可用于GPS信号弱的室内或偏远地区的导航指引、及需要多个标注定位的场景如房屋检修的场景,本申请对此不作限定。
在一个实施例中,当任一终端设备进行标注操作,此时终端设备采集已标注视频信息和AR指示信息,通过图层分层技术将视频信息和AR指示信息图层分开,并将AR指示信息的坐标信息与视频图层垂直对应点像素特征值信息建立绑定关系并记录,随后终端设备使用h.264/h.265编码打包成需要的格式,如按照rtmp或rtsp打包并发送数据,通过网络传输,由服务器转发到其他接收的终端。接收的终端通过rtsp或者rtmp协议,获取到数据,并进行音视频数据解析,然后进行解码,解码后的原始数据,根据两个不同终端的屏幕比进行数据等比例缩放。目的是不同终端及屏幕大小显示的内容一致。再根据视频图层的信息、AR标注信息及两者之间建立的绑定数据,当显示的视频内容中无绑定AR标注的信息,则此时不显示AR标注信息。反之,则显示对应的AR标注信息。从而保证了多端内容显示的一致性。
在一个实施例中,当目标视频中的指示信息已协商好具体的显示位置后,移动终端可导出对应的显示图像。移动终端可以选择最终显示图像中是否显示AR指示信息,以适应不同的业务场景。比如,用户可自主选择最终的显示图像中是否显示AR指示信息。比如,当用户需要远程查勘自己追尾车辆,追尾区域明显且无其他需要注意或明确的地方,远程服务人员的意见也一致,此时只需拍照上传图片即可,无需指示信息进行辅助。需要说明的是,最终显示图像中有AR指示信息,这种情况下,指示信息是一个永久指示,同时也是痕迹的保留。比如,当用户的汽车发动机故障时,由于发送机部位的零件过多且密集,当损坏的零件为点火线圈出现故障时,用AR进行标注,后续的业务上传操作需保留AR标注信息,以便后续的审核人员可进行快速审核。
在一个实施例中,当网络环境恶劣时,如在地下室,偏远的山区。这时现场用户可以对现场进行离线录像。待转移到网络环境良好的区域,现场用户与远程服务人员建立视频连接,对录像文件进行AR指示信息标记,对之前已生成好的录像文件进行AR指示信息的标记。其操作过程与网络环境好的条件下的实时操作相同,用户同远程服务人员在语音辅助下共同定位所需标注位置,完成后续的业务上传等操作,提升业务操作效率,解决网络环境差的查勘业务人力和时间投入大的难题。
参考图4(a),在一个具体的实施例中,该对车辆的目标位置进行确定的方法的时序图包括以下步骤:用户通过输入手机密码登录手机。当用户通过账号登录手机上的查勘APP时,查勘APP可发送反馈信息给用户,反馈信息用于表明已成功登录查勘APP。用户的查勘APP端与远程客服的WEB端建立视频连接,用户通过手机上的摄像头拍摄发生事故的受损车辆的受损位置的视频,并将拍摄的视频展示在手机终端的视频展示界面以及WEB端的视频通话界面中。当用户点击视频展示界面时,视频展示界面上出现一个可标记的AR箭头,AR箭头用于指引正确的受损车辆的受损位置。手机终端捕捉到客户的第一触发操作时,确定与第一触发操作对应的位置信息,手机终端根据位置信息,生成对应的二进制流数据,并将此二进制流数据传输至远程客服所在的WEB端。
远程客服所在的WEB端接收二进制流数据,并将二进制流数据转换为对应的位置信息,从而将正确的位置信息更新到WEB端的视频通话界面中。当远程客服通过WEB端看到客户点击的AR箭头位置时,判断受损的位置是否为准确的位置,并通过语音与客户进行沟通。如若无误,可通过语音告知客户完成后续的车险理赔操作。如若位置不正确,则远程客服可通过鼠标在WEB端的视频通话界面上点击正确的位置,此时WEB端捕捉到远程客服的第二触发操作,确定与第二触发操作对应的位置更新信息。将AR箭头的位置调整到远程客服触发的位置。同时,WEB端根据位置更新信息,生成对应的二进制流更新数据,并将此二进制流更新数据传输至客户所在的手机终端。使得手机端对查勘APP中的AR箭头进行位置更新。
用户与远程客服经过语音沟通,双方最终确定的受损车辆中的受损位置,此时远程客服通过语音告知客户拍照上传包括受损车辆受损位置的图片至查勘APP,以完成后续的理赔操作。
在一个实施例中,该位置信息包括第一触发操作作用在视频展示界面中的界面位置信息,根据所述位置信息,在所述视频展示界面所展示的目标视频上叠加显示指示信息之前,该方法还包括:确定移动终端的摄像头当前的采集视角;基于移动终端的摄像头的摄像头参数信息、采集视角,建立场景空间坐标系;根据建立的场景空间坐标系,将视频展示界面中第一触发操作所作用的界面位置信息,映射为空间场景中的三维目标位置信息。根据所述位置信息,在所述视频展示界面所展示的目标视频上叠加显示指示信息,包括:根据所述三维目标位置信息,在所述视频展示界面所展示的目标视频上叠加显示指示信息,并且当移动终端发生移动时,根据所述三维目标位置信息,在所述目标车辆中的目标位置处跟踪显示所述指示信息。
需要说明的是,在对目标车辆中的目标部件进行定位时,可实现对目标部件的三维空间定位。用户手持移动终端对目标车辆中的某个受损部件进行视频采集,在视频展示的过程中,用户可开启AR定位标记功能。用户可在视频展示界面中点击受损部位所对应显示的屏幕位置,从而移动终端可采集到该界面位置信息。移动终端可记录摄像头当前的采集视角,然后再基于摄像头的摄像头参数信息建立场景空间坐标系。其中,摄像头参数信息具体包括镜头的焦距(f)、视场角和光圈等信息。参考图4(b),图4(b)为一个实施例中场景空间坐标系的构建原理图。如图4(b)所示,图4(b)中的O点对应摄像头的位置,f表征摄像头镜头的焦距,二维平面XO1Y为移动终端采集视频所呈现的画面所在的平面,也就是视频展示界面所在的平面。移动摄像头的相机模型公式如下矩阵:
也就是说,基于上述的相机模型矩阵,当移动终端获取到视频展示界面中的某个具体位置坐标时,可对应计算出其在实际的三维空间场景中的三维位置坐标。
进一步的,移动终端可基于上述图4(b)中所建立的场景空间坐标系,将视频展示界面中第一触发操作所作用的界面位置信息,映射为空间场景中的三维目标位置信息,从而实现对用户在视频展示界面中标记的位置进行三维标记定位。也就是,移动终端可根据三维目标位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息,该指示信息用于标记目标车辆中的目标位置,具体可以是受损部件的位置。这样,当移动终端发生移动时,由于移动终端捕获到目标车辆的目标受损部件在实际的三维场景中的三维目标位置信息,进而每当移动终端发生移动时,则可基于相应移动至的更新的采集视角,以及摄像头的摄像头参数信息,并基于前述的相机模型公式,计算得到该目标位置在移动后所呈现的视频展示界面中更新的界面位置信息,从而在更新的界面位置信息处更新显示指示信息。这样就可以实现对目标车辆中的目标位置的一个跟踪指示显示。
在一个具体的实施例中,O点(0,0,0)对应移动终端显示区域的左上角,即为原点。当对屏幕无任何操作时,AR指示信息不显示。面XO1Y相当于终端显示区域,Z轴方向背向用户。用户可在移动终端的屏幕所显示的大致的受损区域进行点击,屏幕上出现AR定位标注,即面XO1Y上标注一个位置,例如标注的位置为m(20,20),AR标注的位置可通过相机模型得到空间坐标系映射地址为为M(20,20,-20),如上述图4(b)所示。
当终端设备向右平行移动30单位距离,则此时屏幕上对应的标注位置为m’(-10,20),则此时的AR标注位置为M’(50,20,-20),在移动屏幕前,收集了三维目标位置信息和视频展示界面的像素信息,移动屏幕后,结合VSLAM(Visual Simultaneous Localizationand Mapping,场景三维地图技术)和IMU(惯性传感器)的数据进行融合计算,恢复真实的物理尺度,用户看到AR指示信息消失在屏幕所见范围内。当终端设备即移回原处后,用户可以在屏幕上看到原先的AR指示信息。也就是说,该AR标记信息,实质上是与用户在二维平面上所选中的目标部件的目标位置相关联匹配了,不管该目标部件出现在当前显示屏幕中的哪个位置,其相关联的AR标记信息就会关联显示在相应个屏幕位置处。
上述实施例中,通过对用户在视频展示界面中触发的定位操作,将其映射至实际的三维场景中,得到对应的三维目标位置信息。进而可根据三维目标位置信息来对目标位置进行精准的定位和跟踪显示。特别在车辆受损的情况下,对受损位置进行定位时,可在复杂的车辆零部件的场景中,精准的对受损位置进行定位。
在一个实施例中,当移动终端将包括有AR指示信息的目标视频分享至远程终端,而远程终端的客服人员基于沟通发现需要对目标位置进行调整时,客服人员可基于显示界面所显示的画面进行点击或触摸操作所确定的位置更新信息。远程终端也可基于当前所展示的画面信息,以及移动终端的摄像头的摄像头参数信息等,构建对应的场景空间坐标系,从而根据构建的场景空间坐标系,和该位置更新信息,确定对应的三维目标位置更新信息。这样,移动终端接收到远程终端发送的三维目标位置更新信息,并基于与该三维目标位置更新信息,实时地确定在当前采集的图像画面中所对应的界面位置更新信息,进而可根据该界面位置更新信息来实现指示信息的更新显示。
也就是说,移动终端和远程终端都可以实现AR指示信息的显示和更新,这样,用户和客服人员在进行沟通时可以调整AR指示信息的显示位置,使得用户可以准确快速地查找到对应的目标位置,也就是车辆的受损位置,以进行拍照取证,完成整个的车险业务流程。
在一个实施例中,移动终端可基于构建的场景空间坐标系进行三维建图,得到三维场景图,从而在三维场景图中确定相匹配的三维目标位置信息。参考图4(c),图4(c)为一个实施例中进行三维建图的原理示意图。移动终端可通过视觉惯性同步定位和建图(VSLAM)技术,计算移动设备相对于真实空间的位姿关系。在移动设备移动的过程中,通过识别相机图像中显著特征点并跟踪其位置变化,结合设备的IMU数据信息,实时计算当前移动设备相对于真实世界的位置和姿态,保证指示信息和真实场景实时对齐于同一坐标系。
参考图4(c),其中传感器数据主要是将光信号转换为电信号,目的将图像进行呈现;前端的视觉里程计计算移动中图像相似性,为镜头切换和运动提供依据;后端工作主要是对视觉前端得到的不够准确的相机位姿和重建地图进行优化微调;回环检测主要将移动前后的图像数据进行关联,提高精度;最终实现建图,将现实世界和虚拟信息关联,实现定位跟踪。
在一个实施例中,该方法还包括多方位精准定位的步骤,该步骤具体包括当检测到精准定位指令时,启动精准定位模式;在精准定位模式下,对目标车辆的目标部件进行第一方位的视频采集,获取在展示第一方位的视频时触发的第三触发操作所对应的第一屏幕标记范围;基于第一屏幕标记范围、在进行第一方位的视频采集时所对应的第一方位采集视角、以及移动终端的摄像头参数信息,确定候选三维目标区域;对目标车辆的目标部件进行多个第二方位的视频采集,获取在展示每个第二方位的视频时触发的第四触发操作所对应的第二屏幕标记范围;基于各第二屏幕标记范围,依次对候选三维目标区域的区域范围进行缩小,并基于最后缩小所得到的三维目标区域,确定三维精准位置信息;确定移动终端的摄像头当前所采集的视频画面中,与三维精准位置信息对应的屏幕标记位置信息,并在屏幕标记位置信息所对应的位置处更新显示指示信息。
具体地,用户可通过移动终端启动精准定位模式,并在精准定位模式下对目标部件进行不同方位的定位标记,以综合各个方位的定位标记实现对目标部件的目标位置的精准定位标记。在精准定位模式下,用户通过移动终端对目标部件进行第一方位的视频采集,其中,第一方位,具体可以是正面。进而用户在所展示的视频节目中确定第一屏幕标记范围,具体可以是标记出目标位置所在区域的一个大致的标记范围。移动终端可采用与上述场景空间坐标系相同的创建方式,建立当前的场景空间坐标系,并基于当前的场景空间坐标系确定与第一屏幕标记范围相对应的候选三维目标区域。可以理解,移动终端可基于当前的场景空间坐标系,将第一屏幕标记范围所对应的预设个范围点进行三维映射,得到对应的三维位置点,从而基于映射得到的三维位置点确定候选三维目标区域。
进而用户可调整摄像头至其他的第二方位对目标部件进行拍摄,比如调整到左视图或者右视图等,在每调整一次方位进行视频采集后,用户可在展示的第二方位的视频中点击或选中与目标位置相对应的第二屏幕标记范围,此时可以是一个第二屏幕标记点,或者多个第二屏幕标记点。移动终端可采用相同的方式将第二屏幕标记范围映射至对应的场景空间坐标系中,以基于相应映射的三维结果来缩小候选三维目标区域的范围。在每一次调整方位后,均可基于用户的主动选中不断地缩小候选三维目标区域,直至定位到一个更准确的范围内。移动终端可将最后缩小所得到的三维目标区域的中心或重心所对应的位置信息,作为三维精准位置信息。这样,移动终端在展示所采集的视频画面时,可基于三维精准位置信息,并通过前述所建立的场景空间坐标系,将三维精准位置信息映射回屏幕标记位置信息,从而在屏幕标记位置信息所对应的位置处更新显示标记信息,以实现对目标位置的精准标记。
可以理解,上述的精准定位模式还可在一开始进行视频采集时开启,这样,用户在展示目标视频的过程中,可通过不同方位的视频采集与触发操作,以实现对目标车辆的目标部件中的目标位置进行精准定位。
这样可通过对目标位置进行不同方位的视频采集和标记,从而基于各个方位的标记结果来最终对目标位置进行实际场景中的三维定位,后续可基于三维定位所得到的三维精准位置信息,显示标记信息,可保障该标记信息准确地指向目标位置,特别对于车辆内部结构复杂的定位场景,可以大大提高定位精准性。
在一个实施例中,当对移动终端显示区域重新进行标注时,则此时会关闭上个AR标注功能流程、存储的最终确定的视频界面图画和指示信息,并以点击后的屏幕画面的右上角为原点O(0,0,0)重新进行显示、AR流程。
在一个具体的实施例中,该方法包括以下步骤:
建立用于进行视频通话的视频通话链路,通过所述移动终端的摄像头对目标车辆进行视频采集,并通过所述视频通话链路将采集的目标视频传输至参与所述视频通话的远程终端。
通过视频展示界面展示采集到的目标视频。
在展示目标视频的过程中,当检测到精准定位指令时,启动精准定位模式。
在精准定位模式下,对目标车辆的目标部件进行第一方位的视频采集,获取在展示第一方位的视频时触发的触发操作所对应的第一屏幕标记范围。
确定移动终端的摄像头当前的采集视角,基于移动终端的摄像头的摄像头参数信息、当前的采集视角,建立场景空间坐标系。
根据建立的场景空间坐标系,将第一屏幕标记范围映射为空间场景中的候选三维目标区域。
对目标车辆的目标部件进行多个第二方位的视频采集,获取在展示每个第二方位的视频时触发的触发操作所对应的第二屏幕标记范围。
基于各第二屏幕标记范围,并根据场景空间坐标系,依次对候选三维目标区域的区域范围进行缩小,并基于最后缩小所得到的三维目标区域,确定空间场景中的三维精准位置信息。
确定移动终端的摄像头当前所采集的视频画面中,与三维精准位置信息对应的屏幕标记位置信息,并在屏幕标记位置信息所对应的位置处叠加显示指示信息,指示信息用于指示目标车辆中的目标位置。
当移动终端发生移动时,根据三维精准位置信息,在目标车辆中的目标位置处跟踪显示该指示信息。
当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对该指示信息的显示位置进行更新。
根据场景空间坐标系,将位置更新信息映射为三维场景中的三维目标位置更新信息,当移动终端发生移动时,根据三维目标位置更新信息,在目标车辆中的目标位置处跟踪显示该指示信息。
获取最终确定的目标位置,并将该目标位置作为受损位置进行拍照得到车辆受损位置照片,根据目标车辆的车辆信息和受损位置照片,执行与目标车辆对应的车险理赔操作。
上述对车辆的目标位置进行确定的方法,移动终端通过建立的视频通话链路将采集的目标视频传输至参与视频通话的远程终端,并将目标视频在视频展示界面中进行展示。其中,目标视频是对目标车辆进行采集所得到的视频。在目标视频的展示过程中,可从各个方位综合实现对目标位置的三维精准定位。通过这样的方式,沟通的双方均可通过指示信息的显示和调整来标记目标车辆中的目标位置,避免了在视频过程中沟通不畅而导致信息传递有误差,提高了信息传递的准确性和及时性。并且,通过增加指示信息以及移动指示信息,提高了对目标车辆的目标位置进行定位的准确性,从而提高了目标位置进行定位的效率。
应该理解的是,虽然图2的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种对车辆的目标位置进行确定的装置500,包括:传输模块501、展示模块502、确定模块503、叠加模块504和更新模块505,其中:
传输模块501,建立用于进行视频通话的视频通话链路,通过移动终端的摄像头对目标车辆进行视频采集,并通过视频通话链路将采集的目标视频传输至参与视频通话的远程终端。
展示模块502,用于通过视频展示界面展示采集到的目标视频。
确定模块503,用于在展示目标视频的过程中,当发生作用于视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息。
叠加模块504,用于根据位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息;指示信息用于指示目标车辆中的目标位置。
更新模块505,用于当通过视频通话链路接收到远程终端发送的位置更新信息时,根据位置更新信息对指示信息的显示位置进行更新。
在一个实施例中,叠加模块504还用于确定在展示目标视频时目标视频所处的第一图层;确定在第一图层之上的第二图层,并将预设置的指示信息置于第二图层中;通过对第一图层和第二图层进行叠加渲染,以将指示信息叠加显示在目标视频之上。
在一个实施例中,传输模块501还用于获取与目标视频对应的视频尺寸,并通过视频通话链路将视频尺寸传输至远程终端;展示模块502还用于视频尺寸和目标视频用于指示远程终端在视频通话界面展示目标视频,并在与视频通话界面不同的预设区域展示与视频尺寸同等大小的功能界面,当在功能界面检测到第二触发操作时,根据第二触发操作确定位置更新信息。
在一个实施例中,传输模块501还用于获取与目标视频对应的视频尺寸,并通过视频通话链路将视频尺寸传输至远程终端;展示模块502还用于视频尺寸和目标视频用于指示远程终端在视频通话界面展示与视频尺寸同等大小的目标视频,并在视频通话界面检测到第三触发操作时,根据第三触发操作确定位置更新信息。
在一个实施例中,更新模块505还用于接收二进制流更新数据;二进制流更新数据是远程终端根据位置更新信息而生成的;清空视频展示界面中的指示信息;根据二进制流更新数据,在视频展示界面所展示的目标视频上对指示信息的显示位置进行更新。
在一个实施例中,目标视频包括发生事故的受损车辆的视频;目标车辆包括受损车辆;目标位置包括受损车辆的受损位置。
参考图6,在一个实施例中,该对车辆的目标位置进行确定的装置500还包括执行模块506,用于基于最终确定的受损车辆中的受损位置,对受损车辆进行图片拍摄,得到受损位置照片;获取与受损车辆对应的车辆信息;根据车辆信息和受损位置照片,执行与受损车辆相应的车险理赔操作。
在一个实施例中,位置信息包括第一触发操作作用在视频展示界面中的界面位置信息,确定模块503还用于确定移动终端的摄像头当前的采集视角;基于移动终端的摄像头的摄像头参数信息、采集视角,建立场景空间坐标系;根据建立的场景空间坐标系,将视频展示界面中第一触发操作所作用的界面位置信息,映射为空间场景中的三维目标位置信息。叠加模块504还用于根据三维目标位置信息,在视频展示界面所展示的目标视频上叠加显示指示信息,并且当移动终端发生移动时,根据三维目标位置信息,在目标车辆中的目标位置处跟踪显示指示信息。
在一个实施例中,确定模块503还用于当检测到精准定位指令时,启动精准定位模式;在精准定位模式下,对目标车辆的目标部件进行第一方位的视频采集,获取在展示第一方位的视频时触发的第三触发操作所对应的第一屏幕标记范围;基于第一屏幕标记范围、在进行第一方位的视频采集时所对应的第一方位采集视角、以及移动终端的摄像头参数信息,确定候选三维目标区域;对目标车辆的目标部件进行多个第二方位的视频采集,获取在展示每个第二方位的视频时触发的第四触发操作所对应的第二屏幕标记范围;基于各第二屏幕标记范围,依次对候选三维目标区域的区域范围进行缩小,并基于最后缩小所得到的三维目标区域,确定三维精准位置信息;确定移动终端的摄像头当前所采集的视频画面中,与三维精准位置信息对应的屏幕标记位置信息,并在屏幕标记位置信息所对应的位置处更新显示指示信息。
上述对车辆的目标位置进行确定的装置,移动终端通过建立的视频通话链路将采集的目标视频传输至参与视频通话的远程终端,并将目标视频在视频展示界面中进行展示。其中,目标视频是对目标车辆进行采集所得到的视频。在目标视频的展示过程中,当发生作用于目标视频展示界面的第一触发操作时,确定与第一触发操作对应的位置信息,并根据位置信息在目标视频上面叠加显示指示信息。当通过视频通话链路接收到位置更新信息时,根据位置更新信息对指示信息的位置进行更新。通过这样的方式,沟通的双方均可通过指示信息的显示和调整来标记目标车辆中的目标位置,避免了在视频过程中沟通不畅而导致信息传递有误差,提高了信息传递的准确性和及时性。并且,通过增加指示信息以及移动指示信息,提高了对目标车辆的目标位置进行定位的准确性,从而提高了目标位置进行定位的效率。
关于对车辆的目标位置进行确定的装置的具体限定可以参见上文中对于对车辆的目标位置进行确定的方法的限定,在此不再赘述。上述目标位置定位装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是上述图1中的移动终端,其内部结构图可以如图7所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI(Wireless Fidelity,无线局域网)、运营商网络、NFC(Near FieldCommunication,近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种对车辆的目标位置进行确定的方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述对车辆的目标位置进行确定的方法的步骤。此处对车辆的目标位置进行确定的方法的步骤可以是上述各个实施例的对车辆的目标位置进行确定的方法中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述对车辆的目标位置进行确定的方法的步骤。此处对车辆的目标位置进行确定的方法的步骤可以是上述各个实施例的对车辆的目标位置进行确定的方法中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (14)
1.一种对车辆的目标位置进行确定的方法,其特征在于,由移动终端执行,所述方法包括:
建立用于进行视频通话的视频通话链路,通过所述移动终端的摄像头对目标车辆进行视频采集,并通过所述视频通话链路将采集的目标视频传输至参与所述视频通话的远程终端;
通过视频展示界面展示采集到的所述目标视频;
在展示所述目标视频的过程中,当检测到精准定位指令时,启动精准定位模式;
在所述精准定位模式下,对所述目标车辆的目标部件进行第一方位的视频采集,获取在展示第一方位的视频时触发的触发操作所对应的第一屏幕标记范围;
基于所述第一屏幕标记范围、在进行第一方位的视频采集时所对应的第一方位采集视角、以及所述移动终端的摄像头参数信息,确定候选三维目标区域;
对所述目标车辆的目标部件进行多个第二方位的视频采集,获取在展示每个第二方位的视频时触发的触发操作所对应的第二屏幕标记范围;
基于各所述第二屏幕标记范围,依次对所述候选三维目标区域的区域范围进行缩小,并基于最后缩小所得到的三维目标区域,确定三维精准位置信息;
确定所述移动终端的摄像头当前所采集的视频画面中,与所述三维精准位置信息对应的屏幕标记位置信息,并在所述屏幕标记位置信息所对应的位置处叠加显示指示信息;所述指示信息用于指示目标车辆中的目标位置;
当移动终端发生移动时,根据所述三维精准位置信息,在所述目标车辆中的目标位置处跟踪显示该指示信息;
当通过所述视频通话链路接收到所述远程终端发送的位置更新信息时,根据所述位置更新信息对所述指示信息的显示位置进行更新;
根据场景空间坐标系,将位置更新信息映射为三维场景中的三维目标位置更新信息,当移动终端发生移动时,根据三维目标位置更新信息,在目标车辆中的目标位置处跟踪显示该指示信息;
获取最终确定的目标位置,并将该目标位置作为受损位置进行拍照得到车辆受损位置照片,根据目标车辆的车辆信息和受损位置照片,执行与目标车辆对应的车险理赔操作。
2.根据权利要求1所述的方法,其特征在于,叠加显示指示信息,包括:
确定在展示所述目标视频时所述目标视频所处的第一图层;
确定在所述第一图层之上的第二图层,并将预设置的指示信息置于所述第二图层中;
通过对所述第一图层和所述第二图层进行叠加渲染,以将所述指示信息叠加显示在所述目标视频之上。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取与所述目标视频对应的视频尺寸,并通过所述视频通话链路将所述视频尺寸传输至所述远程终端;
所述视频尺寸和所述目标视频用于指示所述远程终端在视频通话界面展示所述目标视频,并在与所述视频通话界面不同的预设区域展示与视频尺寸同等大小的功能界面,当在所述功能界面检测到第二触发操作时,根据所述第二触发操作确定位置更新信息。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取与所述目标视频对应的视频尺寸,并通过所述视频通话链路将所述视频尺寸传输至所述远程终端;
所述视频尺寸和所述目标视频用于指示所述远程终端在视频通话界面展示与所述视频尺寸同等大小的目标视频,并在所述视频通话界面检测到第三触发操作时,根据所述第三触发操作确定位置更新信息。
5.根据权利要求1所述的方法,其特征在于,所述当通过所述视频通话链路接收到所述远程终端发送的位置更新信息时,根据所述位置更新信息对所述指示信息的显示位置进行更新,包括:
接收二进制流更新数据;所述二进制流更新数据是所述远程终端根据位置更新信息而生成的;
清空所述视频展示界面中的指示信息;
根据所述二进制流更新数据,在所述视频展示界面所展示的目标视频上对所述指示信息的显示位置进行更新。
6.根据权利要求1所述的方法,其特征在于,基于所述第一屏幕标记范围、在进行第一方位的视频采集时所对应的第一方位采集视角、以及所述移动终端的摄像头参数信息,确定候选三维目标区域,包括:
确定所述移动终端的摄像头当前的采集视角;
基于所述移动终端的摄像头的摄像头参数信息、所述采集视角,建立场景空间坐标系;
根据建立的所述场景空间坐标系,将所述第一屏幕标记范围映射为空间场景中的候选三维目标区域。
7.一种对车辆的目标位置进行定位的装置,其特征在于,所述装置包括:
传输模块,建立用于进行视频通话的视频通话链路,通过移动终端的摄像头对目标车辆进行视频采集,并通过所述视频通话链路将采集的目标视频传输至参与所述视频通话的远程终端;
展示模块,用于通过视频展示界面展示采集到的所述目标视频;
确定模块,用于在展示所述目标视频的过程中,当检测到精准定位指令时,启动精准定位模式;在所述精准定位模式下,对所述目标车辆的目标部件进行第一方位的视频采集,获取在展示第一方位的视频时触发的触发操作所对应的第一屏幕标记范围;基于所述第一屏幕标记范围、在进行第一方位的视频采集时所对应的第一方位采集视角、以及所述移动终端的摄像头参数信息,确定候选三维目标区域;对所述目标车辆的目标部件进行多个第二方位的视频采集,获取在展示每个第二方位的视频时触发的触发操作所对应的第二屏幕标记范围;基于各所述第二屏幕标记范围,依次对所述候选三维目标区域的区域范围进行缩小,并基于最后缩小所得到的三维目标区域,确定三维精准位置信息;确定所述移动终端的摄像头当前所采集的视频画面中,与所述三维精准位置信息对应的屏幕标记位置信息;
叠加模块,用于在所述屏幕标记位置信息所对应的位置处叠加显示指示信息;所述指示信息用于指示目标车辆中的目标位置;当移动终端发生移动时,根据所述三维精准位置信息,在所述目标车辆中的目标位置处跟踪显示该指示信息;
更新模块,用于当通过所述视频通话链路接收到所述远程终端发送的位置更新信息时,根据所述位置更新信息对所述指示信息的显示位置进行更新;
所述更新模块,还用于根据场景空间坐标系,将位置更新信息映射为三维场景中的三维目标位置更新信息,当移动终端发生移动时,根据三维目标位置更新信息,在目标车辆中的目标位置处跟踪显示该指示信息;
执行模块,用于获取最终确定的目标位置,并将该目标位置作为受损位置进行拍照得到车辆受损位置照片,根据目标车辆的车辆信息和受损位置照片,执行与目标车辆对应的车险理赔操作。
8.根据权利要求7所述的装置,其特征在于,所述叠加模块还用于确定在展示所述目标视频时所述目标视频所处的第一图层;确定在所述第一图层之上的第二图层,并将预设置的指示信息置于所述第二图层中;通过对所述第一图层和所述第二图层进行叠加渲染,以将所述指示信息叠加显示在所述目标视频之上。
9.根据权利要求7所述的装置,其特征在于,所述传输模块,还用于获取与所述目标视频对应的视频尺寸,并通过所述视频通话链路将所述视频尺寸传输至所述远程终端;所述视频尺寸和所述目标视频用于指示所述远程终端在视频通话界面展示所述目标视频,并在与所述视频通话界面不同的预设区域展示与视频尺寸同等大小的功能界面,当在所述功能界面检测到第二触发操作时,根据所述第二触发操作确定位置更新信息。
10.根据权利要求7所述的装置,其特征在于,所述传输模块,还用于获取与所述目标视频对应的视频尺寸,并通过所述视频通话链路将所述视频尺寸传输至所述远程终端;所述视频尺寸和所述目标视频用于指示所述远程终端在视频通话界面展示与所述视频尺寸同等大小的目标视频,并在所述视频通话界面检测到第三触发操作时,根据所述第三触发操作确定位置更新信息。
11.根据权利要求7所述的装置,其特征在于,所述更新模块,还用于接收二进制流更新数据;所述二进制流更新数据是所述远程终端根据位置更新信息而生成的;清空所述视频展示界面中的指示信息;根据所述二进制流更新数据,在所述视频展示界面所展示的目标视频上对所述指示信息的显示位置进行更新。
12.根据权利要求7所述的装置,其特征在于,所述确定模块,还用于确定所述移动终端的摄像头当前的采集视角;基于所述移动终端的摄像头的摄像头参数信息、所述采集视角,建立场景空间坐标系;根据建立的所述场景空间坐标系,将所述第一屏幕标记范围映射为空间场景中的候选三维目标区域。
13.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110263865.7A CN112689114B (zh) | 2021-03-11 | 2021-03-11 | 对车辆的目标位置进行确定的方法、装置、设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110263865.7A CN112689114B (zh) | 2021-03-11 | 2021-03-11 | 对车辆的目标位置进行确定的方法、装置、设备和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112689114A CN112689114A (zh) | 2021-04-20 |
CN112689114B true CN112689114B (zh) | 2021-06-22 |
Family
ID=75458408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110263865.7A Active CN112689114B (zh) | 2021-03-11 | 2021-03-11 | 对车辆的目标位置进行确定的方法、装置、设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112689114B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB904683A (en) * | 1957-10-01 | 1962-08-29 | Int Photon Corp | Improvements in or relating to photographic type composing apparatus |
US6359617B1 (en) * | 1998-09-25 | 2002-03-19 | Apple Computer, Inc. | Blending arbitrary overlaying images into panoramas |
CN107358596A (zh) * | 2017-04-11 | 2017-11-17 | 阿里巴巴集团控股有限公司 | 一种基于图像的车辆定损方法、装置、电子设备及系统 |
WO2018139419A1 (ja) * | 2017-01-26 | 2018-08-02 | タナベウィルテック株式会社 | 微粒子製造装置および微粒子製造方法 |
CN110057368A (zh) * | 2019-05-22 | 2019-07-26 | 合肥工业大学 | 一种新型室内定位与导航方法 |
CN111504331A (zh) * | 2020-04-29 | 2020-08-07 | 杭州环峻科技有限公司 | 一种由粗到细的全景智能车辆定位方法和装置 |
CN111880164A (zh) * | 2020-07-22 | 2020-11-03 | 北京嘀嘀无限科技发展有限公司 | 一种激光雷达校准装置和方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008024723A2 (en) * | 2006-08-21 | 2008-02-28 | Sling Media, Inc. | Capturing and sharing media content and management of shared media content |
CN103517029B (zh) * | 2012-06-26 | 2017-04-19 | 华为技术有限公司 | 可视通话的数据处理方法、终端和系统 |
US9538131B2 (en) * | 2013-10-25 | 2017-01-03 | National Institute Of Advanced Industrial Science And Technology | Remote behavior navigation system and processing method thereof |
CN103813127B (zh) * | 2014-03-04 | 2018-07-06 | 腾讯科技(深圳)有限公司 | 一种视频通话方法、终端及系统 |
CN106101803B (zh) * | 2016-06-13 | 2020-06-02 | Tcl移动通信科技(宁波)有限公司 | 一种智能电视的显示屏控制方法及系统 |
KR101977332B1 (ko) * | 2018-08-03 | 2019-05-10 | 주식회사 버넥트 | 증강현실 원격화상통신환경에서 직관적인 가이드를 위한 테이블탑 시스템 |
CN110266992A (zh) * | 2019-06-24 | 2019-09-20 | 苏芯物联技术(南京)有限公司 | 一种基于增强现实的远程视频交互系统以及方法 |
-
2021
- 2021-03-11 CN CN202110263865.7A patent/CN112689114B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB904683A (en) * | 1957-10-01 | 1962-08-29 | Int Photon Corp | Improvements in or relating to photographic type composing apparatus |
US6359617B1 (en) * | 1998-09-25 | 2002-03-19 | Apple Computer, Inc. | Blending arbitrary overlaying images into panoramas |
WO2018139419A1 (ja) * | 2017-01-26 | 2018-08-02 | タナベウィルテック株式会社 | 微粒子製造装置および微粒子製造方法 |
CN107358596A (zh) * | 2017-04-11 | 2017-11-17 | 阿里巴巴集团控股有限公司 | 一种基于图像的车辆定损方法、装置、电子设备及系统 |
CN110057368A (zh) * | 2019-05-22 | 2019-07-26 | 合肥工业大学 | 一种新型室内定位与导航方法 |
CN111504331A (zh) * | 2020-04-29 | 2020-08-07 | 杭州环峻科技有限公司 | 一种由粗到细的全景智能车辆定位方法和装置 |
CN111880164A (zh) * | 2020-07-22 | 2020-11-03 | 北京嘀嘀无限科技发展有限公司 | 一种激光雷达校准装置和方法 |
Also Published As
Publication number | Publication date |
---|---|
CN112689114A (zh) | 2021-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220375123A1 (en) | Method for Representing Virtual Information in a View of a Real Environment | |
US11250631B1 (en) | Systems and methods for enhancing and developing accident scene visualizations | |
US11164379B2 (en) | Augmented reality positioning method and apparatus for location-based service LBS | |
US9699375B2 (en) | Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system | |
JP4236372B2 (ja) | 空間情報利用システムおよびサーバシステム | |
JP5255595B2 (ja) | 端末位置特定システム、及び端末位置特定方法 | |
US11875309B2 (en) | Asynchronous virtual collaboration environments | |
US11757947B2 (en) | Asymmetric collaborative virtual environments | |
US11758090B1 (en) | Virtual environment generation for collaborative building assessment | |
JP2018132528A (ja) | 画像処理装置、画像処理方法及びプログラム | |
KR102022912B1 (ko) | 혼합현실을 이용한 정보 공유 시스템 | |
US10956981B1 (en) | Systems and methods for visualizing an accident scene | |
CN112689114B (zh) | 对车辆的目标位置进行确定的方法、装置、设备和介质 | |
CN117115244A (zh) | 云端重定位方法、装置及存储介质 | |
WO2019127320A1 (zh) | 信息处理方法、装置、云处理设备及计算机程序产品 | |
JP2016133701A (ja) | 情報提供システム、及び情報提供方法 | |
KR102458559B1 (ko) | 휴대용 단말기를 이용한 건설 분야 시공 관리 시스템 및 방법 | |
CN108062786B (zh) | 以三维信息模型为基础的综合感知定位技术应用系统 | |
JP4673861B2 (ja) | 情報表示システム及び情報表示方法 | |
CN112577488B (zh) | 导航路线确定方法、装置、计算机设备和存储介质 | |
JP2006178804A (ja) | 被写体オブジェクト情報提供方法および被写体オブジェクト情報提供サーバ | |
TWM439180U (en) | Moving object tracking system | |
WO2020058642A1 (fr) | Procede et systeme de visualisation en realite augmentee | |
KR20130137075A (ko) | 이미지 데이터 저장 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |