CN111813317A - 交互显示方法、系统、电子设备及存储介质 - Google Patents
交互显示方法、系统、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111813317A CN111813317A CN202010620673.2A CN202010620673A CN111813317A CN 111813317 A CN111813317 A CN 111813317A CN 202010620673 A CN202010620673 A CN 202010620673A CN 111813317 A CN111813317 A CN 111813317A
- Authority
- CN
- China
- Prior art keywords
- preset
- target
- position information
- display
- interactive
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 100
- 238000000034 method Methods 0.000 title claims abstract description 64
- 230000003993 interaction Effects 0.000 claims abstract description 92
- 230000008569 process Effects 0.000 claims abstract description 30
- 238000006073 displacement reaction Methods 0.000 claims description 50
- 230000015654 memory Effects 0.000 claims description 18
- 238000004364 calculation method Methods 0.000 claims description 15
- 239000004020 conductor Substances 0.000 claims description 5
- 230000008859 change Effects 0.000 abstract description 37
- 238000013519 translation Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000005070 sampling Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000011810 insulating material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种交互显示方法、系统、电子设备、存储介质,其中交互显示方法包括:获取目标识别器的预设触点对应的预设位置信息;根据所述预设位置信息确定预设交互模型,根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息;根据所述预设位置信息和所述目标位置信息计算得到相对位置信息;根据所述相对位置信息控制切换显示屏的显示内容。通过上述交互显示方法,能够稳定识别交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
Description
技术领域
本发明涉及人机交互技术领域,尤其是涉及一种交互显示方法、系统、电子设备及存储介质。
背景技术
AR(Augmented Reality)技术,是一种全新的人机交互技术。AR类产品的出现,是第一次实现虚拟世界与现实世界相互“融合”,完成屏幕的“跨越”,人机交互设计也开始从二维平面迈向三维世界。然而,由于市场和技术的因素,AR产品的人机交互界面仍然处于早期阶段,各种理念和方法仍处于初步形成与试验阶段。AR市场在短期内主要分为基于手机等移动设备的移动AR和基于头显设备的AR眼镜,但也包括车载HUD、商超大屏互动等等。
目前,一些AR产品由于硬件缺陷,致使无法流畅地完成用户输入的交互指令,严重影响了用户的使用体验感。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。为此,本发明提出一种交互显示方法,能够稳定识别交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
本发明还提出一种交互显示系统。
本发明还提出一种AR平台。
本发明还提出一种交互显示的电子设备。
本发明还提出一种交互显示的计算机存储介质。
根据本发明的第一方面实施例的交互显示方法,包括:
获取目标识别器的预设触点对应的预设位置信息;
根据所述预设位置信息确定预设交互模型,根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息;
根据所述预设位置信息和所述目标位置信息计算得到相对位置信息;
根据所述相对位置信息控制切换显示屏的显示内容。
根据本发明实施例的交互显示方法,至少具有如下有益效果:通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,并根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
根据本发明的一些实施例,所述获取目标识别器的预设触点对应的预设位置信息,包括:分别获取多个所述预设触点对应的点坐标信息;根据所述点坐标信息得到多个所述预设触点之间的相对位置关系,根据所述相对位置关系确定所述预设触点对应的预设位置信息。
根据本发明的一些实施例,所述目标位置信息包括:目标位移信息;所述根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息,包括:在所述预设交互模型下,获取所述目标识别器在移动过程中对应的多个目标位移状态;根据所述多个目标位移状态确定所述目标识别器的位移情况,根据所述位移情况计算得到所述目标位移信息。
根据本发明的一些实施例,所述目标位置信息包括:目标角度信息;所述根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息,包括:在所述预设交互模型下,获取所述目标识别器在移动过程中对应的多个目标角度参数;根据所述多个目标角度参数确定所述目标识别器的旋转情况,根据所述旋转情况计算得到所述目标角度信息。
根据本发明的一些实施例,所述根据所述相对位置信息控制显示屏的显示内容,包括:获取所述显示屏对应的预设分辨率,获取所述显示屏对应的实际分辨率;根据所述预设分辨率和所述实际分辨率计算得到显示偏差;根据所述显示偏差调整所述显示屏的显示内容,控制输出所述显示内容。
根据本发明的第二方面实施例的交互显示系统,包括:
识别模块,用于获取目标识别器的预设触点对应的预设位置信息;
交互模块,用于根据所述预设位置信息确定预设交互模型,根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息;
计算模块,用于根据所述预设位置信息和所述目标位置信息计算得到相对位置信息;
显示模块,用于根据所述相对位置信息控制切换显示屏的显示内容。
根据本发明实施例的交互显示系统,至少具有如下有益效果:通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,可以根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
根据本发明的一些实施例,所述目标识别器设置在所述交互模块上。
根据本发明的一些实施例,所述目标识别器包括多个预设触点;所述多个预设触点之间通过导体连通。
根据本发明的一些实施例,所述显示模块包括多个显示屏。
根据本发明的一些实施例,所述交互模块还包括:触控操作屏;所述触控操作屏用于获取所述预设交互模型的交互操作。
根据本发明的一些实施例,所述显示模块还包括:延时装置;所述延时装置用于控制所述显示内容的延时显示。
根据本发明的一些实施例,所述显示模块还包括:投影装置;所述投影装置用于控制所述显示内容的投影显示。
根据本发明第三方面实施例的AR平台,包括本发明第二方面实施例提出的交互显示系统。
根据本发明第三方面实施例的AR平台,至少具有如下有益效果:通过利用本发明第二方面提出的交互显示系统,通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,并根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
根据本发明第四方面实施例的交互显示电子设备,包括:至少一个处理器,以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器执行所述指令时实现第一方面所述的交互显示方法。
根据本发明实施例的交互显示电子设备,至少具有如下有益效果:通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,并根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
根据本发明第五方面实施例的交互显示存储介质,所述存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行第一方面所述的交互显示方法。
根据本发明第五方面实施例的交互显示存储介质,至少具有如下有益效果:通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,并根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例的交互显示方法的流程图;
图2为本发明实施例的获取预设位置信息的流程图;
图3为本发明实施例的交互显示系统的结构示意图;
图4为本发明实施例的目标识别器的结构示意图;
图5为本发明实施例的电子设备的功能模块图。
附图标记:
识别模块3000、目标识别器3010、第一预设触点3011、第二预设触点3012、第三预设触点3013、第四预设触点3014、交互模块3100、计算模块3200、显示模块3300、处理器500、存储器510、数据传输模块520、摄像头530、显示屏540。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
本发明的描述中,除非另有明确的限定,设置、安装、连接等词语应做广义理解,所属技术领域技术人员可以结合技术方案的具体内容合理确定上述词语在本发明中的具体含义。
参照图1,根据本发明第一方面实施例的交互显示方法,包括:
步骤S100,获取目标识别器的预设触点对应的预设位置信息。
其中,目标识别器可以是用于识别位置的器件;预设触点可以是目标识别器上预先设置的若干导体触点,预设触点可以根据需求设置多个;预设位置信息可以是多个预设触点对应的点坐标信息或角度信息。可选的,假设一个目标识别器上设有4个预设触点,假设该4个预设触点对应的预设位置信息为p1,则可以得到预设位置信息为p1。
步骤S110,根据预设位置信息确定预设交互模型,根据预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息。
其中,预设交互模型可以是预先设置的用于交互的模型,预设交互模型可以根据需求设置;预设交互模型的交互操作可以是利用预设交互模型来控制目标识别器实现人机交互的操作,不同的预设交互模型对应不同的交互操作;目标位置信息可以是进行交互操作后得到的目标识别器的预设触点对应的点坐标信息。可选的,可以根据预设位置信息确定预设交互模型,例如,假设预设位置信息为p1,则可以根据p1确定预设交互模型为Q1(假设Q1为沙发模型),在显示屏上加载该沙发模型Q1;假设预设位置信息为p2,则可以根据p2确定预设交互模型为Q2(假设Q2为床模型),在显示屏上加载该床模型Q2。继而可以根据Q1的交互操作,例如利用沙发模型来控制目标识别器进行平移操作,获取平移后的目标识别器的预设触点对应的目标位置信息为p2。
步骤S120,根据预设位置信息和目标位置信息计算得到相对位置信息。
其中,相对位置信息可以是目标识别器的相对位移变化信息。可选的,相对位置信息可以根据预设位置信息和目标位置信息计算得到,例如,假设预设位置信息为p1,假设进行交互操作后的所得的目标位置信息为p2,则可以根据p1和p2计算目标识别器的相对位置变化量,得到相对位置信息p3。
步骤S130,根据相对位置信息控制切换显示屏的显示内容。
其中,显示内容可以是投影显示的各种交互场景内容。当移动或改变目标识别器的放置位置后,可以控制显示屏中的预设交互模型进行相应的参数改变,实现交互显示,因而可以根据相对位置信息控制切换显示屏的显示内容。可选的,假设相对位置信息为p3,则可以根据p3控制显示屏上的场景内容进行显示切换,从而可以实现人机交互的场景内容的显示。例如,可以根据p3控制显示屏上沙发模型的显示内容进行切换,假设p3为位移信息,则可以相应控制显示屏上沙发模型的显示内容根据p3进行平移;假设p3为角度信息,则可以相应控制显示屏上沙发模型的显示内容根据p3进行旋转;假设p3为位移信息和角度信息,则可以相应控制显示屏上沙发模型的显示内容根据p3进行平移和旋转。
上述交互显示方法,通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,可以根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
上述交互显示方法,可以应用于AR技术领域(移动应用增强现实AugmentedReality,简称AR),实现在显示屏上把虚拟世界套在现实世界,并进行人机互动,通过上述交互显示方法,可以稳定识别到人机交互过程的位置变化参数,准确地对人机交互操作进行显示。
参照图2,图2为获取目标识别器的预设触点对应的预设位置信息的流程示意图,包括:
步骤S200,分别获取多个预设触点对应的点坐标信息。
其在,点坐标信息可以是某个预设触点对应的坐标信息。可选的,目标识别器可以对应若干预设触点,假设目标识别器对应三个预设触点,则可以分别获取这三个预设触点对应的点坐标信息,可以得到:第一个预设触点对应的点坐标信息为a(x1,y1),第二个预设触点对应的点坐标信息为b(x2,y2),第三个预设触点对应的点坐标信息为c(x3,y3),则可以分别得到三个预设触点对应的点坐标信息为a(x1,y1)、b(x2,y2)、c(x3,y3)。
步骤S210,根据点坐标信息得到多个预设触点之间的相对位置关系,根据相对位置关系确定预设触点对应的预设位置信息。
其中,相对位置关系可以是多个预设触点之间的点坐标位置关系。可选的,假设目标识别器包括三个预设触点,三个预设触点分别对应的点坐标信息分别为a(x1,y1)、b(x2,y2)、c(x3,y3),则可以根据上述点坐标信息确定三个预设触点之间的点坐标位置关系,例如,可以对a(x1,y1)、b(x2,y2)、c(x3,y3)进行坐标归化,坐标原点归化到三个预设触点的重心,得到三个预设触点之间的点坐标位置关系为p1,p1={a(x1,y1),b(x2,y2),c(x3,y3)},则可以得到目标识别器的预设触点对应的预设位置信息为p1。通过获取目标识别器中每个预设触点分别对应的点坐标信息,然后根据这些点坐标信息确定多个预设触点之间的相对位置关系,最后根据相对位置关系可以得到准确的预设触点对应的预设位置信息,可以稳定识别到在进行交互前的目标识别器的位置信息。
在本发明的一些实施例中,目标位置信息包括:目标位移信息。其中,目标位移信息可以是控制目标识别器进行平移的交互操作后得到的预设触点对应的位置移动信息。可选的,可以是控制目标识别器进行各个方向的平移得到的目标位移信息。例如,假设预设位置信息为p1,p1={a(x1,y1),b(x2,y2),c(x3,y3)},控制目标识别器沿水平正方向移动距离d1后,得到目标位置信息为目标位移信息p2,假设p2={a(x1+d1,y1),b(x2+d2,y2),c(x3+d3,y3)},由此可以得到目标位移信息p2。
根据预设交互模型的交互操作获取目标识别器的预设触点对应的目标位置信息,包括:
在预设交互模型下,获取目标识别器在移动过程中对应的多个目标位移状态。其中,目标位移状态可以是单位时间内目标识别器在平移过程中的移动状态,例如,目标识别器在移动过程中是否存在丢点的状态,多个目标位移状态可以通过采样得到。可选的,假设在单位时间T1内,采样得到多个目标位移状态分别为:(x1,y1,t1)、(x2,y2,t2)、(x3,y3,t3)和(x4,y4,t4)。
根据多个目标位移状态确定目标识别器的位移情况,根据位移情况计算得到目标位移信息。其中,目标识别器的位移情况,可以是目标识别器在移动过程中是否丢点的情况。由于在控制目标识别器的平移过程中,因电容变化或用户撤下目标识别器的情况,会导致识别过程中的丢点问题。为解决丢点问题,可以通过获取目标识别器在移动过程中对应的多个目标位移状态,来确定目标识别器的位移情况,进而可以判断是否存在丢点问题。可选的,当采集得到的多个目标位移状态为连续的状态时,可以确定不存在丢点问题时,可以直接根据多个位移状态和位移情况计算得到目标识别器的目标位移信息。例如,假设在单位时间T1内,采样得到多个目标位移状态分别为:(x1,y1,t1)、(x2,y2,t2)、(x3,y3,t3)和(x4,y4,t4),则可以计算得到目标位移信息为(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)。
可选的,当采集得到的多个目标位移状态为不连续的状态时,存在丢点问题时,可以根据该丢点的位移情况进行计算,修正目标识别器的移动轨迹,从而可以得到目标位移信息。例如,假设在单位时间T内的4个时刻(t1,t2,t3和t4)采样得到多个目标位移状态分别为:(x1,y1,t1)、(x2,y2,t2)、(x4,y4,t4),则可以判断t3时刻对应的坐标点上不存在该目标识别器,可以根据t1时刻和t2时刻的目标位移状态,即可以根据(x1,y1,t1)、(x2,y2,t2)计算得到t1至t2时间内的平均移动速度v1,继而可以根据(x1,y1,t1)、(x2,y2,t2)和平均移动速度v1计算出(x3,y3,t3),从而可以得到目标位移信息为(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)。还可以根据上述三个目标位移状态(x1,y1,t1)、(x2,y2,t2)、(x3,y3,t3)计算得到t4时刻对应的目标位移状态(x4,y4,t4),则可以得到目标位移信息为(x1,y1)、(x2,y2)、(x3,y3)和(x4,y4)。通过获取目标识别器在平移过程中的多个目标位移状态,并根据多个目标位移状态确定目标识别器是否存在丢点情况,及时修复错漏的移动轨迹,可以稳定识别目标识别器在进行交互时的位移变化。
在本发明的一些实施例中,目标位置信息包括:目标角度信息。其中,目标角度信息可以是控制目标识别器进行旋转的交互操作后得到的预设触点对应的位置旋转信息。可选的,可以是控制目标识别器进行旋转得到的目标角度信息。例如,假设预设位置信息为p1,p1对应的角度为0°,控制目标识别器沿顺时针旋转90°后,得到目标位置信息为目标角度信息p3,假设p3对应的角度为90°,则可以得到目标角度信息p3=90°。
根据预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息,包括:
在预设交互模型下,获取目标识别器在移动过程中对应的多个目标角度参数。其中,目标角度参数可以是控制目标识别器进行旋转过程中的旋转角度信息,例如,目标识别器进行旋转的旋转角度值和/或目标识别器的角速度值,多个目标角度参数可以通过采样得到。可选的,假设目标角度参数为旋转角度信息,则可以获取旋转过程中目标识别器在多个时刻对应的旋转角度值,例如,t1时刻目标识别器对应的旋转角度值为30°,t2时刻目标识别器对应的旋转角度值为-15°,t3时刻目标识别器对应的旋转角度值为45°;可选的,假设目标角度参数为角速度值,则可以获取旋转过程中目标识别器在多个时刻对应的角速度值,例如,t1时刻的角速度值为ω1,t2时刻的角速度值为ω2,t3时刻的角速度值为ω3;可选的,假设目标角度参数为旋转角度值和角速度值,则可以获取旋转过程中目标识别器在多个时刻对应的旋转角度值和角速度值,例如,t1时刻目标识别器对应的旋转角度值为10°、角速度值为ω1,t2时刻目标识别器对应的旋转角度值为110°、角速度值为ω2,t3时刻目标识别器对应的旋转角度值为-20°、角速度值为ω3。
根据多个目标角度参数确定目标识别器的旋转情况,根据旋转情况计算得到目标角度信息。其中,目标识别器的旋转情况,可以是目标识别器在旋转过程中,角度变化是否稳定的状态信息。由于目标识别器的多个预设触点之间的物理距离可能相当接近,或因计算方向指定不稳定,致使目标识别器所得的多个目标角度参数不稳定,增大识别点误差的可能进而导致目标识别器的角度变化不稳定,例如,获取到的角度值为跳跃的角度值。为解决角度变化不稳定的问题,可以通过获取目标识别器在旋转过程中对应的多个目标角度参数,来确定目标识别器的旋转情况,进而可以判断是否存在角度变化不稳定的问题。可选的,当多个目标角度参数直接没有跳跃状态时,可以确定不存在角度变化不稳定的状态,因而可以直接根据多个目标角度参数得到目标角度信息,例如,多个目标角度参数分别为t1时刻目标识别器对应的旋转角度值为30°、t2时刻目标识别器对应的旋转角度值为-15°、t3时刻目标识别器对应的旋转角度值为45°,则可以直接得到目标角度信息为30°、-15°和45°。
可选的,多个目标角度参数之间出现跳跃状态时,可以确定存在角度变化不稳定的状态,可以根据该角度变化不稳定的情况进行计算,修正目标识别器的移动轨迹,从而可以得到目标角度信息。例如,假设单位时间T内的3个时刻获取的多个目标角度参数分别为t1时刻的角速度值为ω1、t2时刻的角速度值为ω2、t3时刻的角速度值为ω3,ω2>>ω1>ω3,则可以确定存在角度变化不稳定的状态。可以对该角度变化不稳定的情况进行修正计算:例如,可以预先设置目标识别器对应的旋转误差范围ω0,当ω1<ω0、ω3<ω0,而ω2>ω0时,可以将ω2修正为ω1,即,保持原有角度ω1作为目标角度信息,因此所得的目标角度信息为ω1、ω3;当ω1<ω0、ω2<ω0,而ω3>ω0时,则可以不使用ω3,而是根据ω1和ω2进行预测计算得到新的ω3,记为ω31,因此所得的目标角度信息为ω1、ω2、ω31。通过获取多个目标角度参数,并根据多个目标角度参数判断是否存在目标识别器的旋转角度跳跃的旋转情况,当出现上述旋转情况时,可以及时修正旋转角度误差,可以稳定识别目标识别器在进行交互时的角度变化。
在本发明的一些实施例中,根据相对位置信息控制显示屏的显示内容,包括:
获取显示屏对应的预设分辨率,获取显示屏对应的实际分辨率。其中,预设分辨率可以是预先设置的显示屏的显示分辨率;实际分辨率可以是实际应用的显示屏的显示分辨率。可选的,假设预设分辨率可以为1980*1080的分辨率,假设实际分辨率可以为1280*720的分辨率,则可以分别获取上述预设分辨率和实际分辨率。
根据预设分辨率和实际分辨率计算得到显示偏差。其中,显示偏差可以是预设分辨率和实际分辨率之间的显示误差值。由于预设分辨率和实际分辨率之间可能不一致,所以当二者不一致时,为避免显示屏的显示内容显示异常问题,可以计算得到二者之间的显示偏差,并根据该显示偏差对显示屏的显示内容进行调整。可选的,假设预设分辨率可以为1980*1080的分辨率,实际分辨率可以为1280*720的分辨率,根据二者计算得到显示偏差f1=0.43。
根据显示偏差调整显示屏的显示内容,控制输出所述显示内容。可选的,假设显示偏差为f1,则可以根据f1调整显示屏的显示内容。例如,可以根据显示偏差对预设分辨率下的显示内容进行截取,忽略超过实际分辨率的部分坐标,仅控制输出实际分辨率之内的显示内容透射到实际应用的显示屏上,而将超过实际分辨率的部分坐标投射到实际应用的显示屏的边界上,由此可以控制显示内容的等比例输出;又如,可以根据显示偏差对预设分辨率下的显示内容进行缩放,使得实际应用的显示屏可以显示所有显示内容,以保证显示内容的完整性。通过显示屏对应的预设分辨率和实际分辨率,可以计算得到显示偏差,根据显示偏差调整显示内容并控制输出调整后的显示内容,可以解决显示屏的显示内容显示异常问题。
参照图3,根据本发明第二方面提出的交互显示系统,包括:
识别模块3000,用于获取目标识别器的预设触点对应的预设位置信息。
可选的,识别模块3000包括目标识别器3010。识别模块3010可以通过识别目标识别器上的预设触点的位置关系,得到预设位置信息,该预设位置信息可以包括位移信息和/或角度信息。预设触点可以根据需求设置为多个。可选的,假设识别到目标识别器上的三个预设触点对应的位置坐标分别为(x1,y1),(x2,y2),(x3,y3),则可以得到预设位置信息为p1={(x1,y1),(x2,y2),(x3,y3)}。
交互模块3100,用于根据预设位置信息确定预设交互模型,根据预设交互模型的交互操作获取目标识别器的预设触点对应的目标位置信息。
可选的,交互模块3100可以根据预设位置信息p1={(x1,y1),(x2,y2),(x3,y3)}确定预设交互模型为沙发模型Q1,在显示屏上加载该沙发模型Q1;可以根据预设位置信息p2={(x3,y3),(x4,y4),(x5,y5)}确定预设交互模型为床模型Q2,在显示屏上加载该床模型Q2。当确定预设交互模型后,可以获取根据预设交互模型控制目标识别器进行交互操作,得到进行交互操作后的目标识别器的预设触点对应的目标位置信息。假设得到的目标位置信息为p3={(x6,y6),(x7,y7),(x8,y8)},获取上述目标位置信息。
计算模块3200,用于根据预设位置信息和目标位置信息计算得到相对位置信息。
可选的,假设预设位置信息为p2={(x3,y3),(x4,y4),(x5,y5)},假设目标位置信息为p3={(x6,y6),(x7,y7),(x8,y8)},则计算模块3200可以根据p2和p3计算得到相对位置信息为p4={(x6-x3,y6-y3),(x7-x4,y7-y4),(x8-x5,y8-x5)}。可选的,假设预设位置信息为p5=0°,假设目标位置信息为p6=-35°,则可以计算得到相对位置信息为p7=-35°。
显示模块3300,用于根据相对位置信息控制切换显示屏的显示内容。
可选的,当移动或改变目标识别器3010的放置位置后,可以控制显示屏中的预设交互模型进行相应的参数改变。例如,假设相对位置信息为p7=-35°,显示模块3300可以根据p7控制显示屏上的显示内容进行切换。例如,假设预设交互模型为椅子模型,则可以控制显示屏上椅子模型的显示内容进行逆时针35°的旋转,实现交互显示。
上述交互显示系统,通过目标识别器的预设触点对应的预设位置信息,可以确定目标识别器对应的预设交互模型,可以根据预设交互模型获取用户进行交互操作时所产生的目标位置信息,并根据预设位置信息和目标位置信息计算得到相对位置信息,最后可以根据相对位置信息控制切换显示屏的显示内容,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
请继续参照图3,在本发明的一些实施例中,目标识别器3010设置在交互模块3100上。可选的,将目标识别器3010设置在交互模块3100上,使得交互模块3100可以获取目标识别器3010的预设触点对应的预设位置信息,并根据该预设位置信息确定预设交互模型。将目标识别器设置在交互模块上,可以直接得到准确的预设位置信息。
请一并参照图3与图4,在本发明的一些实施例中,目标识别器3010包括多个预设触点。如图4所示,假设目标识别器3010包括四个预设触点,分别为第一预设触点3011、第二预设触点3012、第三预设触点3013和第四预设触点3014。
多个预设触点之间通过导体连通。如图4所示,第一预设触点3011、第二预设触点3012、第三预设触点3013和第四预设触点3014之间可以通过导体连通,假设该导体为导电胶或石墨烯。可选的,目标识别器3010除第一预设触点3011、第二预设触点3012、第三预设触点3013和第四预设触点3014之外的部分,可以用绝缘材料(例如绝缘胶)进行封装成圆柱体,便于用户持拿目标识别器。通过目标识别器上的多个连通的预设触点,可以稳定识别得到预设位置信息。
在本发明的一些实施例中,显示模块3300包括多个显示屏。可选的,假设显示模块3300可以包括4块显示屏,上述4块显示屏可以连在一起,也可以外接。通过设置显示模块3300的多块显示屏,可以使得显示屏上的显示内容更完整。
在本发明的一些实施例中,交互模块3100还包括:触控操作屏。触控操作屏用于获取预设交互模型的交互操作。可选的,触控操作屏可以是电容屏,触控操作屏上可以放置若干目标识别器3010,触控操作屏可以实现80个的预设触点的识别。例如,假设目标识别器3010共三个,假设预设交互模型的交互操作为控制第一个目标识别器沿竖直正方向平移距离d1、控制第二个目标识别器沿水平负方向平移距离d2、控制第三个目标识别器旋转180°,则可以通过触控操作屏获取上述三次交互操作。通过触控操作屏获取预设交互模型的交互操作,可以得到准确的预设交互模型的参数变化情况。
在本发明的一些实施例中,显示模块3300还包括:延时装置。延时装置用于控制显示内容的延时显示。由于显示模块3300在根据相对位置信息控制显示内容的切换时,可能因传输延迟导致显示内容不流畅,所以可以通过设置延时装置来控制显示内容的延时显示,使得显示内容可以连续、流畅地显示。
在本发明的一些实施例中,显示模块3300还包括:投影装置。投影装置用于控制显示内容的投影显示。可选的,投影装置可以将预设交互模型加载到显示屏上,例如,当预设交互模型为沙发模型时,可以将该沙发模型加载投影到显示屏上。投影装置还可以将根据相对位置控制切换后的显示内容投影到显示屏上进行显示,例如,当控制沙发模型进行90°旋转后,可以将旋转后的沙发模型加载投影到显示屏上进行显示。通过设置投影装置对显示内容进行投影显示,使得用户得到更佳的视觉体验。
根据本发明第三方面实施例提出的AR平台,包括如本发明第二方面实施例的交互显示系统。通过本发明第三方面实施例的AR平台,可以稳定识别到交互过程中的位置变化参数,并可以根据该位置变化参数准确实现交互操作。
参照图5,本发明第四方面实施例还提供了一种交互显示电子设备内部结构图,包括:至少一个处理器500,以及与所述至少一个处理器500通信连接的存储器510;还可以包括数据传输模块520、摄像头530、显示屏540。
其中,所述处理器500通过调用存储器510中存储的计算机程序,用于执行第一方面实施例中的交互显示方法。
存储器作为一种非暂态存储介质,可用于存储非暂态软件程序以及非暂态性计算机可执行程序,如本发明第一方面实施例中的交互显示方法。处理器通过运行存储在存储器中的非暂态软件程序以及指令,从而实现上述第一方面实施例中的交互显示方法。
存储器可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储执行上述第一方面实施例中的交互显示方法。此外,存储器可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施方式中,存储器可选包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至该终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
实现上述第一方面实施例中的交互显示方法所需的非暂态软件程序以及指令存储在存储器中,当被一个或者多个处理器执行时,执行上述第一方面实施例中的交互显示方法。
第五方面,本发明实施例还提供了交互显示存储介质,存储有计算机可执行指令,所述计算机可执行指令用于:执行第一方面实施例中的交互显示方法。
在一些实施例中,该存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个控制处理器执行,例如,被第二方面实施例的电子设备中的一个处理器执行,可使得上述一个或多个处理器执行上述第一方面实施例中的交互显示方法。
以上所描述的电子设备实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统可以被实施为软件、固件、硬件及其适当的组合。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示意性实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。
Claims (10)
1.交互显示方法,其特征在于,包括:
获取目标识别器的预设触点对应的预设位置信息;
根据所述预设位置信息确定预设交互模型,根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息;
根据所述预设位置信息和所述目标位置信息计算得到相对位置信息;
根据所述相对位置信息控制切换显示屏的显示内容。
2.根据权利要求1所述的方法,其特征在于,所述获取目标识别器的预设触点对应的预设位置信息,包括:
分别获取多个所述预设触点对应的点坐标信息;
根据所述点坐标信息得到多个所述预设触点之间的相对位置关系,根据所述相对位置关系确定所述预设触点对应的预设位置信息。
3.根据权利要求1所述的方法,其特征在于,所述目标位置信息包括:目标位移信息;
所述根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息,包括:
在所述预设交互模型下,获取所述目标识别器在移动过程中对应的多个目标位移状态;
根据所述多个目标位移状态确定所述目标识别器的位移情况,根据所述位移情况计算得到所述目标位移信息。
4.根据权利要求1或3所述的方法,其特征在于,所述目标位置信息包括:目标角度信息;
所述根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息,包括:
在所述预设交互模型下,获取所述目标识别器在移动过程中对应的多个目标角度参数;
根据所述多个目标角度参数确定所述目标识别器的旋转情况,根据所述旋转情况计算得到所述目标角度信息。
5.根据权利要求1所述的方法,其特征在于,所述根据所述相对位置信息控制显示屏的显示内容,包括:
获取所述显示屏对应的预设分辨率,获取所述显示屏对应的实际分辨率;
根据所述预设分辨率和所述实际分辨率计算得到显示偏差;
根据所述显示偏差调整所述显示屏的显示内容,控制输出所述显示内容。
6.交互显示系统,其特征在于,包括:
识别模块,用于获取目标识别器的预设触点对应的预设位置信息;
交互模块,用于根据所述预设位置信息确定预设交互模型,根据所述预设交互模型的交互操作获取所述目标识别器的预设触点对应的目标位置信息;
计算模块,用于根据所述预设位置信息和所述目标位置信息计算得到相对位置信息;
显示模块,用于根据所述相对位置信息控制切换显示屏的显示内容。
7.根据权利要求6所述的系统,其特征在于,所述识别模块包括目标识别器,所述目标识别器设置在所述交互模块上。
8.根据权利要求7所述的系统,其特征在于,所述目标识别器包括多个预设触点;
所述多个预设触点之间通过导体连通。
9.交互显示电子设备,其特征在于,包括:
至少一个处理器,以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器执行所述指令时实现如权利要求1至5任一项所述的交互显示方法。
10.交互显示存储介质,其特征在于,所述计算机存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行如权利要求1至5任一项所述的交互显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010620673.2A CN111813317A (zh) | 2020-06-30 | 2020-06-30 | 交互显示方法、系统、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010620673.2A CN111813317A (zh) | 2020-06-30 | 2020-06-30 | 交互显示方法、系统、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111813317A true CN111813317A (zh) | 2020-10-23 |
Family
ID=72856613
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010620673.2A Pending CN111813317A (zh) | 2020-06-30 | 2020-06-30 | 交互显示方法、系统、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111813317A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112445378A (zh) * | 2020-11-23 | 2021-03-05 | 深圳市中视典数字科技有限公司 | 触摸点位置更新方法、电子设备及计算机可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105549725A (zh) * | 2016-02-03 | 2016-05-04 | 深圳市中视典数字科技有限公司 | 一种三维场景互动展示装置及方法 |
CN109445518A (zh) * | 2018-09-25 | 2019-03-08 | 深圳市中视典数字科技有限公司 | 一种场景展示装置及展示方法 |
CN109683718A (zh) * | 2019-01-16 | 2019-04-26 | 深圳市中视典数字科技有限公司 | 一种交互显示装置及方法 |
CN109783181A (zh) * | 2019-01-31 | 2019-05-21 | 掌阅科技股份有限公司 | 屏幕适配显示方法、电子设备及计算机存储介质 |
US20200051339A1 (en) * | 2017-11-23 | 2020-02-13 | Tencent Technology (Shenzhen) Company Ltd | Image processing method, electronic apparatus, and storage medium |
CN212433748U (zh) * | 2020-06-30 | 2021-01-29 | 深圳市中视典数字科技有限公司 | 交互显示系统及ar平台 |
-
2020
- 2020-06-30 CN CN202010620673.2A patent/CN111813317A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105549725A (zh) * | 2016-02-03 | 2016-05-04 | 深圳市中视典数字科技有限公司 | 一种三维场景互动展示装置及方法 |
US20200051339A1 (en) * | 2017-11-23 | 2020-02-13 | Tencent Technology (Shenzhen) Company Ltd | Image processing method, electronic apparatus, and storage medium |
CN109445518A (zh) * | 2018-09-25 | 2019-03-08 | 深圳市中视典数字科技有限公司 | 一种场景展示装置及展示方法 |
CN109683718A (zh) * | 2019-01-16 | 2019-04-26 | 深圳市中视典数字科技有限公司 | 一种交互显示装置及方法 |
CN109783181A (zh) * | 2019-01-31 | 2019-05-21 | 掌阅科技股份有限公司 | 屏幕适配显示方法、电子设备及计算机存储介质 |
CN212433748U (zh) * | 2020-06-30 | 2021-01-29 | 深圳市中视典数字科技有限公司 | 交互显示系统及ar平台 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112445378A (zh) * | 2020-11-23 | 2021-03-05 | 深圳市中视典数字科技有限公司 | 触摸点位置更新方法、电子设备及计算机可读存储介质 |
CN112445378B (zh) * | 2020-11-23 | 2023-08-29 | 深圳市中视典数字科技有限公司 | 触摸点位置更新方法、电子设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10147398B2 (en) | Display control method and device | |
JP7005091B2 (ja) | 仮想オブジェクトを操縦する方法、装置およびコンピュータプログラム | |
CN102012740A (zh) | 人机交互方法及系统 | |
CN111773709A (zh) | 场景地图的生成方法及装置、计算机存储介质、电子设备 | |
US11902662B2 (en) | Image stabilization method and apparatus, terminal and storage medium | |
CN105488833A (zh) | 一种对2d控件实现3d转场动画的方法和装置 | |
CN212433748U (zh) | 交互显示系统及ar平台 | |
WO2022222510A1 (zh) | 交互控制方法、终端设备及存储介质 | |
CN108664226A (zh) | 一种显示方法及系统 | |
WO2024037415A1 (zh) | 投屏内容显示方法、装置、设备及存储介质 | |
CN115797535A (zh) | 一种三维模型纹理贴图方法及相关装置 | |
CN114928673A (zh) | 拍摄画面的显示方法、终端及存储介质 | |
CN111813317A (zh) | 交互显示方法、系统、电子设备及存储介质 | |
CN110825242B (zh) | 一种用于输入的方法与设备 | |
CN105068653A (zh) | 确定虚拟空间中触摸事件的方法及装置 | |
WO2022217433A1 (zh) | 多端协同的显示更新方法及装置 | |
CN112506465A (zh) | 全景漫游中场景切换的方法和装置 | |
CN105468432A (zh) | 一种基于机器人可视化交互式仿真环境的实现方法 | |
WO2024077872A1 (zh) | 显示位置调整方法、装置、存储介质与电子设备 | |
CN115660941A (zh) | 图像搬移方法、装置、电子设备和计算机可读存储介质 | |
CN112445378B (zh) | 触摸点位置更新方法、电子设备及计算机可读存储介质 | |
KR20240116856A (ko) | 포그라운드 및 백그라운드 분리 시스템에 사용되는 모듈 처리 방법, 장치 및 저장매체 | |
CN113457117B (zh) | 游戏中的虚拟单位选取方法及装置、存储介质及电子设备 | |
CN114445604A (zh) | 虚拟对象处理方法、装置、设备及存储介质 | |
CN112802198A (zh) | 二维图像立体交互设计方法、终端以及存储装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |