CN106250074B - 交互方法、交互装置及用户设备 - Google Patents

交互方法、交互装置及用户设备 Download PDF

Info

Publication number
CN106250074B
CN106250074B CN201610079951.1A CN201610079951A CN106250074B CN 106250074 B CN106250074 B CN 106250074B CN 201610079951 A CN201610079951 A CN 201610079951A CN 106250074 B CN106250074 B CN 106250074B
Authority
CN
China
Prior art keywords
shape
interaction area
effective interaction
area
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610079951.1A
Other languages
English (en)
Other versions
CN106250074A (zh
Inventor
于魁飞
徐然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhigu Ruituo Technology Services Co Ltd
Original Assignee
Beijing Zhigu Ruituo Technology Services Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhigu Ruituo Technology Services Co Ltd filed Critical Beijing Zhigu Ruituo Technology Services Co Ltd
Priority to CN201610079951.1A priority Critical patent/CN106250074B/zh
Publication of CN106250074A publication Critical patent/CN106250074A/zh
Priority to US15/414,757 priority patent/US10824243B2/en
Application granted granted Critical
Publication of CN106250074B publication Critical patent/CN106250074B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images

Abstract

本申请实施例公开了一种交互方法、交互装置及用户设备,所述方法包括:确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。本申请实施例的技术方案可以根据可形变设备的形变特性给用户带来新的体验。

Description

交互方法、交互装置及用户设备
技术领域
本申请涉及交互技术领域,尤其涉及一种交互方法、交互装置及用户设备。
背景技术
随着技术的发展,柔性设备等可形变设备越来越多的出现在人们的视野中。可形变设备由于其形状可以变化,给用户带来了很多新的用户体验,例如:更容易满足用户对可穿戴设备符合不同人体曲线的需求;以及对设备使用时尺寸变大、携带时尺寸缩小的需求等等。在利用可形变交互设备进行交互时,也会给用户带来不同体验。
发明内容
本申请实施例可能的目的是:提供一种基于可形变图像传感面的交互方案。
第一方面,本申请的一可能的实施方案提供了一种交互方法,包括:
确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
结合第一方面,在第二种可能的实施方式中,所述形状相关信息包括:
所述第一形状的第一形状信息。
结合第一方面的上述任一种可能的实施方式,在第三种可能的实施方式中,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
结合第一方面的上述任一种可能的实施方式,在第四种可能的实施方式中,
至少根据一形变控制指令确定所述形状相关信息;
其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
结合第一方面的上述任一种可能的实施方式,在第五种可能的实施方式中,
至少根据针对所述可形变图像传感面的形变传感信息确定所述形状相关信息。
结合第一方面的上述任一种可能的实施方式,在第六种可能的实施方式中,所述至少根据所述形状相关信息确定所述多个有效交互区域包括:
至少根据所述可形变图像传感面获取的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
结合第一方面的上述任一种可能的实施方式,在第七种可能的实施方式中,所述至少根据所述形状相关信息确定所述多个有效交互区域包括:
根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
至少根据所述多个折边区域确定所述多个有效交互区域。
结合第一方面的上述任一种可能的实施方式,在第八种可能的实施方式中,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
所述多个有效交互区域为所述多个折边区域。
结合第一方面的上述任一种可能的实施方式,在第九种可能的实施方式中,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
结合第一方面的上述任一种可能的实施方式,在第十种可能的实施方式中,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
结合第一方面的上述任一种可能的实施方式,在第十一种可能的实施方式中,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
结合第一方面的上述任一种可能的实施方式,在第十二种可能的实施方式中,所述至少根据所述第一相对位置将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面包括:
根据所述第一相对位置对所述多个有效交互区域进行拼接形成所述交互区域。
结合第一方面的上述任一种可能的实施方式,在第十三种可能的实施方式中,所述至少根据所述第一相对位置将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面包括:
确定与所述交互区域对应的第二图像传感信息。
结合第一方面的上述任一种可能的实施方式,在第十四种可能的实施方式中,所述确定所述图像传感信息包括:
确定与所述多个有效交互区域对应的多个图像传感子信息;
至少根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到所述第二图像传感信息。
第二方面,本申请的一可能的实施方案提供了一种交互装置,包括:
信息确定模块,用于确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
区域确定模块,用于至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
图像传感界面提供模块,用于至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
结合第二方面,在第二种可能的实施方式中,所述形状相关信息包括:
所述第一形状的第一形状信息。
结合第二方面的上述任一种可能的实施方式,在第三种可能的实施方式中,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
结合第二方面的上述任一种可能的实施方式,在第四种可能的实施方式中,
所述信息确定模块包括:
第一信息确定单元,用于至少根据一形变控制指令确定所述形状相关信息;
其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
结合第二方面的上述任一种可能的实施方式,在第五种可能的实施方式中,
所述信息确定模块包括:
第二信息确定单元,用于至少根据针对所述可形变图像传感面的形变传感信息确定所述形状相关信息。
结合第二方面的上述任一种可能的实施方式,在第六种可能的实施方式中,所述区域确定模块包括:
第一区域确定单元,用于至少根据所述可形变图像传感面对应的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第七种可能的实施方式中,所述区域确定模块包括:
折边区域确定单元,用于根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
第二区域确定单元,用于至少根据所述多个折边区域确定所述多个有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第八种可能的实施方式中,所述第二区域确定单元包括:
第一确定子单元,用于确定所述多个折边区域为所述多个有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第九种可能的实施方式中,所述第二区域确定单元包括:
第二确定子单元,用于至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第十种可能的实施方式中,所述第二区域确定单元包括:
第三确定子单元,用于根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第十一种可能的实施方式中,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
结合第二方面的上述任一种可能的实施方式,在第十二种可能的实施方式中,所述图像传感界面提供模块包括:
区域拼接单元,用于根据所述第一相对位置对所述多个有效交互区域进行拼接形成所述交互区域。
结合第二方面的上述任一种可能的实施方式,在第十三种可能的实施方式中,所述图像传感界面提供模块包括:
信息确定单元,用于确定与所述交互区域对应的第二图像传感信息。
结合第二方面的上述任一种可能的实施方式,在第十四种可能的实施方式中,所述信息确定单元包括:
信息确定子单元,用于确定与所述多个有效交互区域对应的多个图像传感子信息;
信息映射子单元,用于根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到所述第二图像传感信息。
第三方面,本申请的一可能的实施方案提供了一种用户设备,所述用户设备包括:
存储器,用于存放程序;
处理器,用于执行所述存储器存储的程序,所述程序使得所述处理器执行以下操作:
确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
本申请实施例的至少一个实施方案将一可形变图像传感面发生一形变后在空间位置上邻接的多个有效交互区域进行重组,构成一个新的交互区域用于向交互对象提供图像传感界面,从而通过可形变设备的形变特性给用户带来新的体验。
附图说明
图1为本申请实施例的一种交互方法的流程示意图;
图2a~2e为本申请实施例一种交互方法的应用场景示意图;
图3a~3b为本申请实施例一种交互方法中可形变图像传感面折叠后的两种形状示意图;
图4a~4b为本申请实施例一种交互方法将多个图像传感子信息从多个有效交互区域向与所述多个有效交互区域对应的交互区域映射的示意图;
图5为本申请实施例的一种交互装置的结构示意框图;
图6a~6f为本申请实施例的六种交互装置的结构示意框图;
图7为本申请实施例的一种用户设备的结构示意框图。
具体实施方式
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例,对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请,但不用来限制本申请的范围。
本领域技术人员可以理解,本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
本申请的发明人发现,由于可形变图像传感面的形状可变,因此,在发生了一形变后,形变前的一些有效交互区域在形变后可能变得无法与交互对象进行有效交互,例如:形变后被覆盖、遮挡的区域;而一些原本离散分布的多个交互区域在形变后却有可能变成在空间位置上相邻接的多个有效交互区域,对所述多个有效交互区域的有效利用可以使可形变设备给用户带来更好的用户体验。
在本申请的下述描述中:
所述可形变图像传感面的一交互对象可以是一被拍摄对象,例如一用户等。
有效交互区域为可以与交互对象进行有效交互的区域。在一种可能的实施方式中,所述有效交互区域可以为可以拍摄到交互对象的区域。在一些可能的实施方式中,例如,可以设定所述有效交互区域朝向的一侧在设定距离范围内没有遮挡物;和/或设定所述有效交互区域朝向所述交互对象所在的一侧等。或者,进一步的,在另一种可能的实施方式中,除了可以拍摄到交互对象以外,还需要所述交互满足设定的交互条件,使得与交互对象之间的交互达到预期的交互效果。例如,所述交互条件可以包括:通过所述有效交互区域获取的图像符合设定标准,例如形变标准、清晰度标准等。
一区域在可形变图像传感面上的位置为:以所述可形变图像传感面为坐标面,所述区域在所述坐标面上对应的坐标区域的位置。其中,无论所述可形变图像传感面的形状如何弯曲、折叠变化,一区域对应的坐标区域是不会变化的。
一区域的空间位置为该区域在一空间坐标系中的位置。
如图1所示,本申请实施例提供了一种交互方法,包括:
S110确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
S120至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
S130至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
举例来说,本申请提供的交互装置作为本实施例的执行主体,执行S110~S130。具体地,所述交互装置可以以软件、硬件或软硬件结合的方式设置在用户设备中,或者,所述交互装置本身就是所述用户设备;所述用户设备包括但不限于具有可折叠形变的可形变图像传感面的:手机、电脑、电视以及可穿戴设备等。
本申请实施例的实施方式将一可形变图像传感面发生一形变后在空间位置上邻接的多个有效交互区域进行重组,得到一个新的交互区域用于向交互对象提供图像传感界面,从而通过可形变设备的形变特性给用户带来新的体验。
通过下面的实施方式进一步说明本申请实施例的方法。
在一种可能的实施方式中,一可形变图像传感面200展开的形状为如图2a所示的矩形。在进行一折叠形变时,从图2a所示的矩形经过图2b所示的波浪状态最终变成如图2c所示的折叠收拢状态。图2d为所述图2c的右视图。
由图2a~2d可以看出,在一可形变图像传感面200发生一折叠形变后,一部分交互区域(例如翼面区域212~215)由于折叠被遮挡,不再是有效交互区域。在一些可能的实施方式中,还有一部分交互区域(例如翼面区域211、216)可能会因为朝向问题(例如交互对象对所述可形变图像传感面200的交互方向D为正对图2a~2c所示的可形变图像传感面200的方向),也不再是有效交互区域。
在图2a~2d所示的实施方式中,仍然可以用于与交互对象进行有效交互的有效交互区域只剩下几个外转折端面所在的几个折边区域221~225。
在本申请实施例中,一折边区域为褶皱结构中连接相背的两个翼面的转折端所对应的区域。例如,一折边区域221为连接折叠后相背的两个翼面区域211、212的一转折端所对应的区域。
传统的,在对所述可形变图像传感面200进行了上面所述的折叠形变后,对于剩下的有效交互区域,一种可能的方式是:整个可形变图像传感面200的交互功能都被关闭,不再与交互对象交互;另一种可能的方式是:所述剩下的有效交互区域仍然作为变形前的图像传感界面的一部分,与交互对象进行不完整的交互。
本申请的发明人发现,一些场合下,在可形变图像传感面发生折叠形变后,可能形成在空间位置上相邻接的多个有效交互区域,虽然一个有效交互区域的面积可能较小,难以作为单独的图像传感界面与交互对象进行交互,但是多个有效交互区域可能会重组成一个较大的交互区域,可以重新利用。
本申请实施例通过确定与一折叠形变后所述可形变图像传感面的第一形状对应的形状相关信息,再根据所述形状相关信息来确定所述多个有效交互区域。
在一种可能的实施方式中,可选地,所述形状相关信息可以包括:
所述第一形状的第一形状信息。
例如,在图2a~2d所示的实施方式中,可以获取图2c和2d所示的折叠后的可形变图像传感面的形状信息作为所述形状相关信息。
在另一种可能的实施方式中,可选地,所述形状相关信息也可以不是所述第一形状信息,而是可以间接得到所述第一形状信息的其它信息,例如,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
这里,所述形变信息可以是形状变化参数、或者可以是与形变相关的其它参数。例如,在所述可形变图像传感面为热致形变材料时,所述形变信息可以包括各区域的温度变化信息等;或者,例如,所述形变信息还可以通过与所述可形变图像传感面对应的加速度传感阵列、陀螺仪阵列等获取的所述可形变图像传感面上各区域的位移信息。
本领域的技术人员可以知道,根据所述第二形状信息和所述形变信息也可以确定所述第一形状。
在一种可能的实施方式中,所述可形变图像传感面为形变可控的交互面,用于根据不同的形变控制指令进行不同的形变。其中,所述形变控制指令可以是响应于交互对象的交互操作生成的。在一种可能的实施方式中,根据预先的设置,每个形变控制指令可以对应于一形变后的形状信息;或者可以对应于一形变信息。因此,所述S110可以至少根据一形变控制指令确定所述形状相关信息,其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
例如如图2a~2d所示的实施方式中,可以响应于用户点击一“折叠收拢”按键的操作,得到第一形变控制指令,该第一形变控制指令对应于图2c所示的形状,此时不管折叠形变前所述可形变图像传感面为什么形状,一旦获取所述第一形变控制指令后,就自动控制所述可形变图像传感面形变为图2c所示的形状。
在其他可能的实施方式中,例如,在所述形变控制指令对应于形变信息时,所述S110还需要获取所述第二形状信息才能得到所述形状相关信息。
除了上面所述的形变控制指令外,还可以通过用于根据所述可形变图像传感面的形变获取对应的形变传感信息的形变传感器来得到所述形变相关信息。所述形变传感器例如可以根据所述可形变图像传感面的形变生成对应的电压或电流参数值,所述形变传感信息即为所述电压或电流参数值。
在一种可能的实施方式中,在所述可形变图像传感面发生所述折叠形变后,可以至少根据这些形变传感信息确定所述形状相关信息。
本申请实施例的方法在获取了所述形状相关信息后,就可以至少根据所述形状相关信息确定所述多个有效交互区域。
在本申请实施例中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接。
这里,所述多个有效交互区域在第一形状下、在空间位置上相邻接,因此才可以重组成一个交互区域。
本申请实施例中,如果两个有效交互区域在所述可形变图像传感面上的位置相邻、在所述第一形状下的所述空间位置上相邻接,就可以将所述两个有效交互区域作为一个有效交互区域看待。
在一可能的实施方式中,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
在一种可能的实施方式中,两个有效交互区域在空间位置上相邻接可以为这两个有效交互区域相互靠近的边缘之间的距离基本为0,例如图2c和2d所示的实施方式,相邻的两个有效交互区域相接。
或者,在另一种可能的实施方式中,两个有效交互区域在空间位置上相邻接也可以为这两个交互区域相互靠近的边缘之间的距离小于设定值。例如:图2a所示的可形变图像传感面也可能折叠变形为如图2e所示的形状,在相邻的两个有效交互区域226、227之间还有一间隙区域231,本实施方式中,在所述间隙区域231的宽度(图2e中上下方向的宽度)小于设定值时,可以认为所述两个有效交互区域226、227相邻接。
在一些可能的实施方式中,可以根据所述距离的大小对与交互对象交互的影响来确定所述设定值。例如,在相邻的两个有效交互区域之间的距离大到分别获取的两个图像传感子信息无法进行拼接(包括无法通过图像处理方法对所述两个图像传感子信息对应的两个图像区域进行拼接、以及用户看到所述两个图像区域无法将其拼接的情况),则所述两个有效交互区域之间的距离大于所述设定值。
在一种可能的实施方式中,所述S120可以包括:至少根据所述可形变图像传感面获取的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
这里,例如可以利用图像边缘分析、图像拼接等图像处理技术对所述第一图像传感信息进行处理,可以用于辅助确定所述有效交互区域和其他交互区域之间的边界。
在一种可能的实施方式中,所述S120可以包括:
根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
至少根据所述多个折边区域确定所述多个有效交互区域。
在一种可能的实施方式中,所述多个有效交互区域即为所述多个折边区域。
如图2a和2c所示,多个折边区域221~225中的每两个在所述可形变图像传感面上的位置被至少一其它交互区域隔开,互不相邻;在形变后的空间位置上,所述多个折边区域221~225相邻接。因此,在图2a~2d所示的实施方式中,可以确定所述多个折边区域221~225为所述多个有效交互区域。
在一些可能的实施方式中,除了上面所述的多个折边区域外,所述多个有效交互区域可能还包括在折叠形变后与所述多个折边区域在空间位置上相邻或相连的其它区域。
例如,在一种可能的实施方式中,如图2a~2d所示,相连的折边区域221和翼面区域211可以作为一个有效交互区域;相连的折边区域224和翼面区域216可以作为一个有效交互区域。
又,例如图3a所示的实施方式中,在考虑交互方向的情况下,除了四个折边区域311~314外,一展开区域321(褶皱结构中一翼面所在的区域)也是朝向交互对象的有效交互区域,并且在空间位置上与所述四个折边区域311~314相邻接,因此,所述多个有效交互区域还包括所述展开区域321。
因此,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
如上面所述的,在一种可能的实施方式中,可以结合所述第一图像传感信息来确定所述多个有效交互区域,因此,所述至少根据所述多个折边区域确定所述多个有效交互区域可以包括:
根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
例如,在一种可能的实施方式中,还要考虑交互的特点来确定所述多个折边区域是否都是有效的交互区域。例如,在一种可能的实施方式中,图2a所示的可形变图像传感面200在一折叠形变后的第一形状也可以如图3b所示,根据所述第一形状可以确定四个折边区域315~318。这里,在图3b所示的形状下,相邻的两个折边区域相互靠近的部分获取的图像区域之间可能会有重复的部分、和/或无法相互拼接的部分,因此可以对所述第一图像传感信息进行处理,确定有效交互区域与其他区域之间的边界,从而确定所述四个折边区域315~318上的有效交互部分,得到四个有效交互区域315a~318a。这里,例如,所述四个有效交互区域315a~318a得到的四个图像传感子信息可以拼接得到一基本完整的图像。
当然,除了上面几个需要考虑的因素外,在其它一些可能的实施方式中,在至少根据所述多个折边区域确定所述多个有效交互区域时,可能还要考虑其它因素。
本申请实施例中,在确定了所述多个有效交互区域之后,就可以将所述多个有效交互区域作为一个新的交互区域向交互对象提供图像传感界面。
在一种可能的实施方式中,所述至少根据所述第一相对位置将所述多个有效交互区域作为一个交互区域可以为:根据所述第一相对位置将所述多个有效交互区域拼接成所述交互区域。
在一种可能的实施方式中,所述可形变图像传感面是由包含多个交互单元(这里,所述交互单元为图像传感单元)的交互单元阵列实现与交互对象的交互的,每个有效交互区域对应于多个交互单元。
在一种可能的实施方式中,所述拼接可以是将所述多个有效交互区域中各交互单元的地址进行重新编址,得到与所述交互区域匹配的新的地址。
例如:假设图2a所示的实施方式中,在所述折叠形变前,折边区域221和折边区域222包含的各交互单元的第一地址(x,y)(其中x为第一行地址,y为第一列地址,在一种可能的实施方式中,该第一地址也可以作为各交互单元在所述可形变图像传感面上的位置坐标)如表一和表二所示:
表一:折边区域221包含的30个交互单元的第一地址
13,1 13,2 13,3 13,4 13,5 13,6 13,7 13,8 13,9 13,10
14,1 14,2 14,3 14,4 14,5 14,6 14,7 14,8 14,9 14,10
15,1 15,2 15,3 15,4 15,5 15,6 15,7 15,8 15,9 15,10
表二:折边区域222包含的30个交互单元的第一地址
40,1 40,2 40,3 40,4 40,5 40,6 40,7 40,8 40,9 40,10
41,1 41,2 41,3 41,4 41,5 41,6 41,7 41,8 41,9 41,10
42,1 42,2 42,3 42,4 42,5 42,6 42,7 42,8 42,9 42,10
在本实施方式中,如果根据这两个折边区域221、222在如图2c所示的折叠形变后的第一形状下在空间上的相对位置对所述两个折边区域221、222中各交互单元的地址进行重新编址,则可以得到如表三和表四所示的所述各交互单元的第二地址(x1,y1):
表三:折边区域221包含的30个交互单元的第二地址
1,1 1,2 1,3 1,4 1,5 1,6 1,7 1,8 1,9 1,10
2,1 2,2 2,3 2,4 2,5 2,6 2,7 2,8 2,9 2,10
3,1 3,2 3,3 3,4 3,5 3,6 3,7 3,8 3,9 3,10
表四:折边区域222包含的30个交互单元的第二地址
可以看出,在对所述两个折边区域221、222中各交互单元的地址进行重新编址后,在折叠形变后相邻的所述两个折边区域221、222,其中分别包含的多个交互单元的第二地址也是相邻连续的。
在另一种可能的实施方式中,所述拼接也可以不对所述多个有效交互区域中各交互单元的地址进行重新编址,即保持所述各交互单元的地址不变,但是对地址之间的关联进行修改。
例如,在与交互对象的交互中对各交互单元进行行扫描的场景下,将所述折边区域221的最后一个交互单元的第一地址(15,10)与所述折边区域222的第一个交互单元的第一地址(40,1)进行关联,使得在与交互对象进行交互信息的交互时,在所述折边区域221的最后一个交互单元被扫描之后,接下来扫描所述折边区域222的第一个交互单元,不再扫描所述两个折边区域221、222之间的其它区域。
在一种可能的实施方式中,可选地,所述S130可以包括:
确定与所述交互区域对应的第二图像传感信息。
在一种可能的实施方式中,所述确定与所述交互区域对应的第二图像传感信息还可以包括:
确定与所述多个有效交互区域对应的多个图像传感子信息;例如,获取所述多个有效交互区域对应的图像传感数据,得到所述多个图像传感子信息;
根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到与所述第二图像传感信息。
在一种可能的实施方式中,如图4a和4b所示,图2a中所示的所述五个折边区域221~224(其中有一个折边区域未示出)得到的五个图像传感子信息分别对应五个图像区域411~415,将所述五个图像传感子信息映射到一交互区域410,得到的第二图像传感信息对应于如图4b所示的笑脸图像。
这里,根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到与所述第二图像传感信息可以通过多种方式实现,例如:
a)在应用层实现:通过一个照相应用或者视频拍摄应用获取所述第一相对位置,根据所述第一相对位置对从底层获取的第一图像传感信息(例如图4a所示的图像对应的传感信息)进行映射处理。删去所述多个有效交互区域以外的其它区域的图像传感信息,并对所述多个有效交互区域对应的多个图像传感子信息进行映射和拼接即可获取所述第二图像传感信息。
其中,在应用层上进行的实现比较灵活,每个应用都可以有自己的实现方法,然而却也增加了工作量:每个应用都要实现自己的处理方法。
b)在图像传感器驱动上实现:
b1)一种可以类似于在应用层的实现,只是所有的应用将会共享同一种处理方式。图像传感器驱动程序维护第一相对位置对应的分区参数,并对采集到的数据(即第一图像传感信息)直接进行映射处理,并把处理后的数据(即第二图像传感信息)交给上层应用。
b2)另一种实现可以为通过图像传感器驱动来对可形变图像传感面的硬件进行控制实现。例如:通过图像传感器驱动设置所述可形变图像传感面相关的控制寄存器的值来实现。例如通过上面的设置,所述控制寄存器禁止所述多个有效交互区域以外的其它区域的数据读取或采集,则所述从所述可形变图像传感面输出的图像传感数据就是所述第二图像传感信息。
本领域技术人员可以知道,在一些可能的实施方式中,一设备可以通过上面所述的三种方式中的任一种来实现所述映射,这里,设备可以根据需要灵活的进行选择。当然,对于一实时选择多个层面中的一个进行映射的设备,每一帧待捕获的数据可以标注其是否已经做过映射、以及其期望在那个层面上进行映射。
在另一种可能的实施方式中,在所述交互装置不包括所述可形变图像传感面时,所述确定所述第二图像传感信息还可以为通过通信的方式,从至少一外部设备获取所述第二图像传感信息。
本领域技术人员可以理解,在本申请具体实施方式的上述方法中,各步骤的序号大小并不意味着执行顺序的先后,各步骤的执行顺序应以其功能和内在逻辑确定,而不应对本申请具体实施方式的实施过程构成任何限定。
如图5所示,本申请实施例还提供了一种交互装置500,包括:
信息确定模块510,用于确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
区域确定模块520,用于至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
图像传感界面提供模块530,用于至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
本申请实施例的实施方式将一可形变图像传感面发生一形变后在空间位置上邻接的多个有效交互区域进行重组,得到一个新的交互区域用于向交互对象提供图像传感界面,从而通过可形变设备的形变特性给用户带来新的体验。
通过下面的实施方式进一步说明本申请实施例的各模块、单元。
在一种可能的实施方式中,可选地,所述形状相关信息可以包括:
所述第一形状的第一形状信息。
在另一种可能的实施方式中,可选地,所述形状相关信息也可以不是所述第一形状信息,而是可以间接得到所述第一形状信息的其它信息,例如,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
这里,所述形变信息可以是形状变化参数、或者可以是与形变相关的其它参数。例如,在所述可形变图像传感面为热致形变材料时,所述形变信息可以包括各区域的温度变化信息等;或者,例如,所述形变信息还可以通过与所述可形变图像传感面对应的加速度传感阵列、陀螺仪阵列等获取的所述可形变图像传感面上各区域的位移信息。
本领域的技术人员可以知道,根据所述第二形状信息和所述形变信息也可以确定所述第一形状。
在一种可能的实施方式中,所述可形变图像传感面为形变可控的交互面,用于根据不同的形变控制指令进行不同的形变。其中,所述形变控制指令可以是响应于交互对象的交互操作生成的。在一种可能的实施方式中,根据预先的设置,每个形变控制指令可以对应于一形变后的形状信息;或者可以对应于一形变信息。因此,在一种可能的实施方式中,如图6a所示,所述信息确定模块510包括:
第一信息确定单元511,用于至少根据一形变控制指令确定所述形状相关信息;
其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
在一种可能的实施方式中,所述第一信息确定单元511例如可以根据所述形变控制指令,从存储有至少一形变控制指令与至少一形变相关信息之间的对应关系的存储模块获取所述对应关系,再得到与所述形变控制指令对应的形变相关信息。
除了上面所述的形变控制指令外,还可以通过用于根据所述可形变图像传感面的形变获取对应的形变传感信息的形变传感器来得到所述形变相关信息。所述形变传感器例如可以根据所述可形变图像传感面的形变生成对应的电压或电流参数值,所述形变传感信息即为所述电压或电流参数值。因此,在一种可能的实施方式中,如图6b所示,所述信息确定模块510可以包括:
第二信息确定单元512,用于至少根据针对所述可形变图像传感面的形变传感信息确定所述形状相关信息。
在一可能的实施方式中,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
在一种可能的实施方式中,两个有效交互区域在空间位置上相邻接可以为这两个有效交互区域相互靠近的边缘之间的距离基本为0。
或者,在另一种可能的实施方式中,两个有效交互区域在空间位置上相邻接也可以为这两个交互区域相互靠近的边缘之间的距离小于设定值。
在一些可能的实施方式中,可以根据所述距离的大小对与交互对象交互的影响来确定所述设定值。例如,在相邻的两个有效交互区域之间的距离大到分别获取的两个图像传感子信息无法进行拼接(包括无法通过图像处理方法对所述两个图像传感子信息对应的两个图像区域进行拼接、以及用户看到所述两个图像区域无法将其拼接的情况),则所述两个有效交互区域之间的距离大于所述设定值。
在一种可能的实施方式中,如图6b所示,所述区域确定模块520包括:
第一区域确定单元523,用于至少根据所述可形变图像传感面对应的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
这里,例如可以利用图像边缘分析、图像拼接等图像处理技术对所述第一图像传感信息进行处理,可以用于辅助确定所述有效交互区域和其他交互区域之间的边界。
在一种可能的实施方式中,如图6a所示,所述区域确定模块520包括:
折边区域确定单元521,用于根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
第二区域确定单元522,用于至少根据所述多个折边区域确定所述多个有效交互区域。
在一种可能的实施方式中,所述多个有效交互区域即为所述多个折边区域。因此,在本实施方式中,如图6a所示,所述第二区域确定单元522包括:
第一确定子单元5221,用于确定所述多个折边区域为所述多个有效交互区域。
在一些可能的实施方式中,除了上面所述的多个折边区域外,所述多个有效交互区域可能还包括在折叠形变后与所述多个折边区域在空间位置上相邻或相连的其它区域。因此,在本实施方式中,如图6c所示,所述第二区域确定单元522包括:
第二确定子单元5222,用于至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
在一种可能的实施方式中,如图6d所示,所述第二区域确定单元522包括:
第三确定子单元5223,用于根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
在一种可能的实施方式中,如图6e所示,可选地,所述图像传感界面提供模块530可以包括:
区域拼接单元531,用于根据所述第一相对位置对所述多个有效交互区域进行拼接形成所述交互区域。具体的拼接方式参见上面方法实施例中对应的描述。
在一种可能的实施方式中,如图6e所示,可选地,所述图像传感界面提供模块530可以包括:
信息确定单元532,用于确定与所述交互区域对应的第二图像传感信息。
在所述交互装置包括所述可形变图像传感面的场景中:
在一种可能的实施方式中,所述信息确定单元532可以进一步用于:
根据所述交互区域对应的多个图像传感单元(即所述多个有效交互区域包含的多个图像传感单元)之间关联关系对所述多个图像传感单元进行图像传感扫描,得到所述第二图像传感信息。
在另一种可能的实施方式中,如图6f所示,可选地,所述信息确定单元532包括:
信息确定子单元5321,用于确定与所述多个有效交互区域对应的多个图像传感子信息;例如,获取所述多个有效交互区域对应的图像传感数据,得到所述多个图像传感子信息;
信息映射子单元5322,用于根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到所述第二图像传感信息。
在所述交互装置不包括所述可形变图像传感面的场景中,所述信息确定单元532还可以包括:
通信子单元,用于通过通信的方式,从至少一外部设备(例如包含所述可形变图像传感面的外部设备)获取所述第二图像传感信息。
本申请实施例各模块、单元功能的进一步描述参见上面方法实施例中对应的描述。
图7为本申请实施例提供的一种用户设备700的结构示意图,本申请具体实施例并不对用户设备700的具体实现做限定。如图7所示,该用户设备700可以包括:
处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730、以及通信总线740。其中:
处理器710、通信接口720、以及存储器730通过通信总线740完成相互间的通信。
通信接口720,用于与比如客户端等的网元通信。
处理器710,用于执行程序732,具体可以执行上述方法实施例中的相关步骤。
具体地,程序732可以包括程序代码,所述程序代码包括计算机操作指令。
处理器710可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器730,用于存放程序732。存储器730可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。程序732具体可以用于使得所述用户设备700执行以下操作:
确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
至少根据所述形状相关信息,确定所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
程序732中各步骤的具体实现可以参见上述实施例中的相应步骤和单元中对应的描述,在此不赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本申请,而并非对本申请的限制,有关技术领域的普通技术人员,在不脱离本申请的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本申请的范畴,本申请的专利保护范围应由权利要求限定。

Claims (29)

1.一种交互方法,其特征在于,包括:
确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
至少根据所述形状相关信息,确定所述折叠形变后所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
2.如权利要求1所述的方法,其特征在于,所述形状相关信息包括:
所述第一形状的第一形状信息。
3.如权利要求1所述的方法,其特征在于,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
4.如权利要求1所述的方法,其特征在于,
至少根据一形变控制指令确定所述形状相关信息;
其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
5.如权利要求1所述的方法,其特征在于,
至少根据针对所述可形变图像传感面的形变传感信息确定所述形状相关信息。
6.如权利要求1所述的方法,其特征在于,所述至少根据所述形状相关信息确定所述多个有效交互区域包括:
至少根据所述可形变图像传感面获取的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
7.如权利要求1所述的方法,其特征在于,所述至少根据所述形状相关信息确定所述多个有效交互区域包括:
根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
至少根据所述多个折边区域确定所述多个有效交互区域。
8.如权利要求7所述的方法,其特征在于,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
所述多个有效交互区域为所述多个折边区域。
9.如权利要求7所述的方法,其特征在于,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
10.如权利要求7所述的方法,其特征在于,所述至少根据所述多个折边区域确定所述多个有效交互区域包括:
根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
11.如权利要求1所述的方法,其特征在于,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
12.如权利要求1所述的方法,其特征在于,所述至少根据所述第一相对位置将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面包括:
根据所述第一相对位置对所述多个有效交互区域进行拼接形成所述交互区域。
13.如权利要求1或12所述的方法,其特征在于,所述至少根据所述第一相对位置将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面包括:
确定与所述交互区域对应的第二图像传感信息。
14.如权利要求13所述的方法,其特征在于,所述确定所述图像传感信息包括:
确定与所述多个有效交互区域对应的多个图像传感子信息;
至少根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到所述第二图像传感信息。
15.一种交互装置,其特征在于,包括:
信息确定模块,用于确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
区域确定模块,用于至少根据所述形状相关信息,确定所述折叠形变后所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
图像传感界面提供模块,用于至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
16.如权利要求15所述的装置,其特征在于,所述形状相关信息包括:
所述第一形状的第一形状信息。
17.如权利要求15所述的装置,其特征在于,所述形状相关信息包括:
在所述折叠形变前所述可形变图像传感面的第二形状的第二形状信息、以及所述折叠形变对应的形变信息。
18.如权利要求15所述的装置,其特征在于,
所述信息确定模块包括:
第一信息确定单元,用于至少根据一形变控制指令确定所述形状相关信息;
其中,所述形变控制指令用于控制所述可形变图像传感面进行所述折叠形变。
19.如权利要求15所述的装置,其特征在于,
所述信息确定模块包括:
第二信息确定单元,用于至少根据针对所述可形变图像传感面的形变传感信息确定所述形状相关信息。
20.如权利要求15所述的装置,其特征在于,所述区域确定模块包括:
第一区域确定单元,用于至少根据所述可形变图像传感面对应的第一图像传感信息以及所述形状相关信息确定所述多个有效交互区域。
21.如权利要求15所述的装置,其特征在于,所述区域确定模块包括:
折边区域确定单元,用于根据所述形状相关信息,确定所述可形变图像传感面在所述第一形状下、在所述空间位置上相邻接的多个外转折端面所在的多个折边区域;
第二区域确定单元,用于至少根据所述多个折边区域确定所述多个有效交互区域。
22.如权利要求21所述的装置,其特征在于,所述第二区域确定单元包括:
第一确定子单元,用于确定所述多个折边区域为所述多个有效交互区域。
23.如权利要求21所述的装置,其特征在于,所述第二区域确定单元包括:
第二确定子单元,用于至少根据所述多个折边区域和所述第一形状确定所述多个有效交互区域。
24.如权利要求21所述的装置,其特征在于,所述第二区域确定单元包括:
第三确定子单元,用于根据所述可形变图像传感面对应的第一图像传感信息以及所述多个折边区域确定所述多个有效交互区域。
25.如权利要求15所述的装置,其特征在于,所述多个有效交互区域在所述空间位置上相邻接包括:
对于所述多个有效交互区域中的第一有效交互区域,存在至少一个其他有效交互区域与所述第一有效交互区域在所述空间位置上相邻接;
其中,所述第一有效交互区域为所述多个有效交互区域中的任一有效交互区域。
26.如权利要求15所述的装置,其特征在于,所述图像传感界面提供模块包括:
区域拼接单元,用于根据所述第一相对位置对所述多个有效交互区域进行拼接形成所述交互区域。
27.如权利要求15或26所述的装置,其特征在于,所述图像传感界面提供模块包括:
信息确定单元,用于确定与所述交互区域对应的第二图像传感信息。
28.如权利要求27所述的装置,其特征在于,所述信息确定单元包括:
信息确定子单元,用于确定与所述多个有效交互区域对应的多个图像传感子信息;
信息映射子单元,用于根据所述第一相对位置,将所述多个图像传感子信息从所述多个有效交互区域映射到所述交互区域,得到所述第二图像传感信息。
29.一种用户设备,其特征在于,所述用户设备包括:
存储器,用于存放程序;
处理器,用于执行所述存储器存储的程序,所述程序使得所述处理器执行以下操作:
确定一可形变图像传感面的形状相关信息;其中,所述形状相关信息与所述可形变图像传感面一折叠形变后的第一形状对应;
至少根据所述形状相关信息,确定所述折叠形变后所述可形变图像传感面上的多个有效交互区域;其中,所述多个有效交互区域满足以下条件:在所述可形变图像传感面上的位置互不相邻;在所述第一形状下,在空间位置上相邻接;
至少根据所述第一形状下所述多个有效交互区域在所述空间位置上的第一相对位置,将所述多个有效交互区域作为一个交互区域向至少一交互对象提供图像传感界面。
CN201610079951.1A 2016-02-04 2016-02-04 交互方法、交互装置及用户设备 Active CN106250074B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610079951.1A CN106250074B (zh) 2016-02-04 2016-02-04 交互方法、交互装置及用户设备
US15/414,757 US10824243B2 (en) 2016-02-04 2017-01-25 Interaction method, interaction apparatus, and user equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610079951.1A CN106250074B (zh) 2016-02-04 2016-02-04 交互方法、交互装置及用户设备

Publications (2)

Publication Number Publication Date
CN106250074A CN106250074A (zh) 2016-12-21
CN106250074B true CN106250074B (zh) 2019-09-10

Family

ID=57627012

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610079951.1A Active CN106250074B (zh) 2016-02-04 2016-02-04 交互方法、交互装置及用户设备

Country Status (2)

Country Link
US (1) US10824243B2 (zh)
CN (1) CN106250074B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102150095A (zh) * 2008-09-08 2011-08-10 高通股份有限公司 具有可配置接口的多重折叠式移动装置
CN102857592A (zh) * 2011-06-01 2013-01-02 Lg电子株式会社 移动终端及其3d图像显示方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10234902B2 (en) * 2010-08-10 2019-03-19 Lepton Computing Llc Reconfigurable touch screen computing device
US10169534B2 (en) * 2013-09-30 2019-01-01 Toshiba Medical Systems Corporation Medical image display system and method
KR102511325B1 (ko) * 2014-04-18 2023-03-20 가부시키가이샤 한도오따이 에네루기 켄큐쇼 표시 장치 및 그 동작 방법
KR102304461B1 (ko) * 2015-02-24 2021-09-24 삼성디스플레이 주식회사 폴더블 디스플레이 장치
KR102287583B1 (ko) * 2015-04-08 2021-08-09 삼성디스플레이 주식회사 표시 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102150095A (zh) * 2008-09-08 2011-08-10 高通股份有限公司 具有可配置接口的多重折叠式移动装置
CN102857592A (zh) * 2011-06-01 2013-01-02 Lg电子株式会社 移动终端及其3d图像显示方法

Also Published As

Publication number Publication date
US10824243B2 (en) 2020-11-03
US20170228045A1 (en) 2017-08-10
CN106250074A (zh) 2016-12-21

Similar Documents

Publication Publication Date Title
CN106503671B (zh) 确定人脸姿态的方法和装置
CN107395958B (zh) 一种图像处理方法、装置、电子设备及存储介质
CN109509146B (zh) 图像拼接方法及装置、存储介质
CN106503684B (zh) 一种人脸图像处理方法和装置
CN107610131A (zh) 一种图像裁剪方法和图像裁剪装置
CN107103613A (zh) 一种三维手势姿态估计方法
CN109660783A (zh) 虚拟现实视差校正
CN107665506A (zh) 实现增强现实的方法及系统
CN111192223B (zh) 人脸纹理图像的处理方法、装置、设备及存储介质
CN104103051B (zh) 一种图像拼接方法和设备
CN114119607B (zh) 基于深度神经网络的酒瓶缺陷样本生成方法及系统
CN106610926A (zh) Echarts图表的数据显示方法及装置
CN106249864B (zh) 交互方法、交互装置及用户设备
CN111583381A (zh) 游戏资源图的渲染方法、装置及电子设备
CN106250074B (zh) 交互方法、交互装置及用户设备
CN111339969B (zh) 人体姿势估计方法、装置、设备及存储介质
CN106325588B (zh) 交互方法、交互装置及用户设备
CN107562886A (zh) 一种生成相片地图的方法及装置
CN105574926B (zh) 生成三维图像的方法和装置
CN106249861B (zh) 交互方法、交互装置及用户设备
CN106249862B (zh) 交互方法、交互装置及用户设备
CN107742316A (zh) 图像拼接点获取方法及获取装置
CN109472741A (zh) 三维拼接方法及装置
CN103077396B (zh) 一种彩色图像的向量空间特征点提取方法及装置
KR101113197B1 (ko) 추출된 부분 이미지의 방향 결정을 이용한 효율적인 captcha 시스템 및 부분 이미지 제공방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant