CN108108136A - 显示装置和图像处理装置 - Google Patents

显示装置和图像处理装置 Download PDF

Info

Publication number
CN108108136A
CN108108136A CN201710546048.6A CN201710546048A CN108108136A CN 108108136 A CN108108136 A CN 108108136A CN 201710546048 A CN201710546048 A CN 201710546048A CN 108108136 A CN108108136 A CN 108108136A
Authority
CN
China
Prior art keywords
display
unit
image
display device
deformation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710546048.6A
Other languages
English (en)
Inventor
得地贤吾
山内昭人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN108108136A publication Critical patent/CN108108136A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0266Details of the structure or mounting of specific components for a display module assembly
    • H04M1/0268Details of the structure or mounting of specific components for a display module assembly including a flexible display panel

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

显示装置和图像处理装置。一种显示装置包括形状可变形的显示器、获取与显示器的变形有关的信息的获取单元以及响应于所获取的信息改变显示器上的显示内容的描绘单元。

Description

显示装置和图像处理装置
技术领域
本发明涉及显示装置和图像处理装置。
背景技术
日本特开No.2014-161009公开了一种柔性便携式终端装置,该终端装置包括在其纵向方向上设置在该装置的中心的折叠部。该折叠部可向前或向后折叠。
在显示图像的显示装置当中,一些显示装置具有形状可变形的显示屏。这些显示装置据推测没有响应于显示屏的变形而修改显示内容。
发明内容
本发明的目的在于与没有响应于显示屏的变形改变显示内容的情况相比,增加具有可变形的显示屏的显示装置的用户友好度。
根据本发明的第一方面,提供一种显示装置。该显示装置包括:形状可变形的显示器;获取与显示器的变形有关的信息的获取单元;以及响应于所获取的信息改变显示器上的显示内容的描绘单元。
根据本发明的第二方面,鉴于第一方面,描绘单元响应于关于显示器的弯曲位置的信息来改变显示器上的显示内容。
根据本发明的第三方面,鉴于第二方面,描绘单元在弯曲位置处将显示器的显示面分割成多个画面,并且分别在不同的画面上显示不同的图像。
根据本发明的第四方面,鉴于第三方面,描绘单元响应于画面的形状来确定要显示在该画面上的图像。
根据本发明的第五方面,鉴于第二方面,描绘单元利用关于弯曲位置的信息来对显示图像执行编辑操作。
根据本发明的第六方面,鉴于第五方面,描绘单元在编辑操作中在显示图像上增加特殊效果。
根据本发明的第七方面,鉴于第六方面,该显示装置还包括音频再现单元,该音频再现单元响应于显示图像的变形而生成声音。
根据本发明的第八方面,鉴于第一方面,该显示装置还包括引导单元,该引导单元引导如何使显示器变形。
根据本发明的第九方面,鉴于第八方面,引导单元在显示器的画面上显示弯曲位置。
根据本发明的第十方面,提供一种图像处理装置。该图像处理装置包括描绘单元,该描绘单元响应于关于形状可变形的显示器的变形的信息来改变显示器上的显示内容。
根据本发明的第十一方面,鉴于第十方面,描绘单元将显示内容投影到与图像处理装置分离的显示器。
根据本发明的第十二方面,鉴于第十方面,描绘单元将显示内容显示到作为空中图像显示器的显示器上。
根据本发明的第一方面,与没有响应于显示屏的变形改变显示内容时相比,具有可变形的显示屏的显示装置的用户友好度增加。
根据本发明的第二方面,与没有使用关于显示器的弯曲位置的信息时相比,可变形显示装置的用户友好度增加。
根据本发明的第三方面,与没有在弯曲位置处将显示器的显示面分割成多个画面时相比,可变形显示装置的用户友好度增加。
根据本发明的第四方面,与没有响应于画面的形状确定要显示在画面上的图像时相比,可变形显示装置的用户友好度增加。
根据本发明的第五方面,与没有使用关于弯曲位置的信息来执行对显示图像的编辑操作时相比,可变形显示装置的用户友好度增加。
根据本发明的第六方面,与没有使用关于弯曲位置的信息来执行对显示图像的编辑操作时相比,可变形显示装置的用户友好度增加。
根据本发明的第七方面,与没有响应于显示图像的变形使用关于弯曲位置的信息来生成声音时相比,可变形显示装置的用户友好度增加。
根据本发明的第八方面,与没有提供如何使显示器变形的引导时相比,用户的误操作的可能性降低。
根据本发明的第九方面,与没有向用户提供如何使显示器变形的引导时相比,用户的误操作的可能性降低。
根据本发明的第十方面,与没有响应于显示屏的变形改变显示内容时相比,具有可变形的显示屏的显示装置的用户友好度增加。
根据本发明的第十一方面,与没有响应于显示屏的变形改变显示内容时相比,具有可变形的显示屏的显示装置的用户友好度增加。
根据本发明的第十二方面,与没有响应于显示屏的变形改变显示内容时相比,具有可变形的显示屏的显示装置的用户友好度增加。
附图说明
将基于以下附图详细描述本发明的示例性实施方式,附图中:
图1是形状可变形的显示装置的外观图;
图2示出显示装置的硬件配置;
图3示出变形检测单元的布局示例;
图4是示出用于响应于显示器的变形而改变显示内容的功能的控制器的功能框图;
图5A、图5B、图5C、图5D、图5E示出变形的检测位置与弯曲位置之间的关系;
图6示出精确输入弯曲位置的操作;
图7是示出由控制器执行的处理的流程图;
图8示出仅在检测到弯曲状态的同时改变在显示器上选择的显示内容的显示模式的情况下显示内容的转变;
图9示出贯穿从弯曲状态的检测开始到下一弯曲状态的检测的时间周期改变在显示器上选择的显示内容的显示模式的情况下显示内容的转变;
图10示出贯穿从弯曲状态的检测结束到下一弯曲状态的检测的时间周期改变在显示器上选择的显示内容的显示模式的情况下显示内容的转变;
图11示出在编辑图像时使用指定的弯曲位置的使用示例;
图12示出在编辑另一图像时使用指定的弯曲位置的使用示例;
图13A和图13B示出当从容器拉出的薄基板沿着与拉出方向垂直的两条线弯曲时用户观看形成在薄基板的同一侧的三个分区画面的显示模式(如果从上方看,则三个分区画面形成U形构造);
图14A和图14B示出当从容器拉出的薄基板沿着与拉出方向垂直的两条线弯曲时用户从远离容器在弯曲位置斜上方的点观看三个分区画面的显示模式(如果从上方看,则三个分区画面形成U形构造);
图15A和图15B示出当从容器拉出的薄基板沿着与拉出方向垂直的两条线弯曲时用户从三个不同方向观看三个分区画面的显示模式(如果从上方看,则三个分区画面形成U形构造);
图16示出当在不同于当前显示的分区画面的位置处检测到新的弯曲位置时执行的显示内容的切换控制操作;
图17是大致示出执行显示位置的切换控制操作的控制器的处理的流程图;
图18示出就用户所指定的显示模式或者适合于再现显示画面的显示器的形状引导用户的画面示例;以及
图19是大致示出在操作上引导用户的控制器的处理的流程图。
具体实施方式
参照附图详细描述本发明的示例性实施方式。
第一示例性实施方式
图1是形状可变形的显示装置1的外观图。根据示例性实施方式,显示装置1的变形包括在任意的线或预定的线弯曲显示装置1。图1示出显示装置1在变形前的外观图。设置在平坦表面上的显示装置1具有如图1所示的平面形状。根据示例性实施方式,平面形状的显示装置1被称作处于变形之前的状态。
显示装置1通过在柔性薄塑料基板上安装显示图像的显示器2和总体上控制显示装置1的控制器3来制造。显示装置1也被称作柔性显示器。根据示例性实施方式,描述具有显示功能的显示装置1。示例性实施方式的显示装置1包括具有显示功能的电子装置,只要该电子装置的形状可变形即可。例如,显示装置1可包括便携式终端装置。
显示器2包括有机电致发光(EL)装置或液晶装置作为发光装置。显示器2通过驱动电路(未示出)来驱动。如果发光装置是液晶装置,则还包括光源(未示出)。
示例性实施方式的显示装置1包括用于输出声音的扬声器4和装置(未示出)。参照图1,成对的右扬声器和左扬声器4被布置在显示装置1的下侧底部拐角上。可能未必安装扬声器4。代替扬声器4或除了扬声器4之外,可安装音频端口或耳机插孔。可在显示装置1与外部装置之间无线地发送音频数据。
显示装置1的显示面(安装有显示器2的面)具有矩形形状。根据示例性实施方式,沿着显示装置1的短边的方向被称作纵向方向V,而沿着显示装置1的长边的方向被称作水平方向H。因此,示例性实施方式的显示装置1的长边在水平方向H上。另选地,显示装置1的长边可在纵向方向V上。
图2示出显示装置1的硬件配置。除了上面所述的装置以外,显示装置1包括:存储器14,其存储各种数据;操作接收单元15,其接收由用户执行的操作;多个变形检测单元16,用于检测显示器2的变形;通信单元17,其用于与外部装置通信;以及电源单元18,其向显示装置1中的各个单元供电。这些部件互连至总线19,并且经由总线19交换这些部件的数据。
控制器3是计算机。控制器3包括:中央处理单元(CPU)11,其执行程序;只读存储器(ROM)12,其存储包括基本输入和输出系统(BIOS)的程序以及固件;以及随机存取存储器(RAM)13,其用作各个程序的工作区域。示例性实施方式的控制器3用作图像处理装置的示例。
存储器14包括利用打印技术制造的可变形存储装置或半导体存储器。示例性实施方式的操作接收单元15包括检测用户的手指触摸的位置的触摸面板传感器。因此,操作接收单元15覆盖在显示器2的前表面上。
变形检测单元16是应变传感器。应变传感器响应于弯曲的量(角度)输出传感器输出。因此,应变传感器是检测结合的构件的变形的装置。变形检测单元16还检测折叠状态之前的弯曲所导致的变形。图3示出变形检测单元16的布局示例。参照图3,多个变形检测单元16沿着显示器2的各条边布局。变形检测单元16的布局位置和布局间隔(布局密度)根据应变传感器的大小和规格来确定。在一种布置方式中,变形检测单元16可覆盖在显示器2上。.
如下面将详细描述的,控制器3根据变形检测单元16所检测的折叠的位置关系来估计显示器2的弯曲位置(即,折叠位置)。根据示例性实施方式,变形检测单元16被布置在显示器2的一面(例如,前侧表面)上。另选地,变形检测单元16可被布置在薄基板的两侧表面上。通信单元17包括通信接口。电源单元18包括电源集成电路。
描述控制器3的功能配置。图4是示出响应于显示器2的变形而改变显示内容的控制器3的功能框图。图4所示的功能由执行程序的CPU 11实现。
控制器3包括变形信息获取单元21、弯曲位置识别单元22、描绘单元23、音频再现单元24和引导单元25。变形信息获取单元21从变形检测单元16获取传感器输出,并且检测变形的发生。弯曲位置识别单元22响应于检测到变形的位置的位置关系来识别显示器2的弯曲位置。描绘单元23响应于所识别的弯曲位置向显示内容增加变化。音频再现单元24从扬声器4输出语音或音乐。引导单元25就显示器2的折叠操作引导用户。
根据示例性实施方式,如果在传感器输出中出现超出预定阈值的变化,则变形信息获取单元21确定在响应于传感器输出的变形检测单元16的位置处发生变形。如果传感器输出中出现返回到预定阈值以下的值的变化,则变形信息获取单元21确定在响应于传感器输出的变形检测单元16的位置处的变形状态被解除。
可密集地布置传感器尺寸较小的变形检测单元16,并且检测到变形的变形检测单元16可在空间上连续。在这种情况下,变形信息获取单元21可将获取从连续的变形检测单元16获得的传感器信号的最大传感器输出的位置确定为变形位置。
弯曲位置识别单元22根据检测到变形的变形检测单元16的位置关系来识别显示器2的弯曲位置。图5A、图5B、图5C、图5D、图5E和图6示出变形的检测位置与弯曲位置之间的关系。弯曲位置识别单元22和变形信息获取单元21是获取单元的示例。
图5A示出当位于显示装置1的短边的中心点处或附近的两个变形检测单元16检测到变形时由弯曲位置识别单元22识别的弯曲位置。参照图5A,弯曲位置识别单元22确定显示器2沿着充当与显示装置1的长边平行的折叠线的线L1折叠成两部分(水平折叠)。
图5B示出当在位于显示装置1的长边的中心点处或附近的两个变形检测单元16的传感器输出中检测到变形时由弯曲位置识别单元22识别的弯曲位置。参照图5B,弯曲位置识别单元22确定显示器2沿着充当与显示装置1的短边平行的折叠线的线L2折叠成两部分(纵向折叠)。
图5C示出当在位于显示装置1的右上角部处的变形检测单元16和左下角部处的变形检测单元16的传感器输出中检测到变形时由弯曲位置识别单元22识别的弯曲位置。参照图5C,弯曲位置识别单元22确定显示器2沿着充当对角地向右上升的折叠线的线L3折叠成两部分(对角折叠)。
图5D示出当在位于显示装置1的右上角部处的变形检测单元16以及从左上角部开始的第二个变形检测单元16的传感器输出中检测到变形时由弯曲位置识别单元22识别的弯曲位置。参照图5D,弯曲位置识别单元22确定显示器2沿着充当作为具有显示装置1的左上角部处的直角的直角三角形的斜边的折叠线的线L4折叠成两部分(斜向折叠)。
图5E示出当在位于沿着显示装置1的顶边的三个点处的三个变形检测单元16以及沿着底边的三个点处的三个变形检测单元16的传感器输出中检测到变形时由弯曲位置识别单元22识别的弯曲位置。参照图5E,弯曲位置识别单元22确定显示器2以横截面为倒V形状沿着线L5、以横截面为V形状沿着线L6并且以横截面为倒V形状沿着线L7折叠成三部分。
图6示出精确地输入弯曲位置的操作。可仅利用检测到变形的变形检测单元16的位置来检测弯曲位置。如果所布置的变形检测单元16的数量较少(变形检测单元16的密度较小),则存在所识别的弯曲位置偏离实际弯曲位置的可能性。在这种情况下,如图6所示,充当操作接收单元15的示例的触摸面板的传感器输出被用作弯曲位置的输出。如果在变形检测单元16检测到变形的情况下从触摸面板传感器接收到传感器输出,则弯曲位置识别单元22将沿着显示装置1的脊移动的手指30的移动轨迹识别为弯曲位置。
转向图4,描绘单元23在显示器2上显示响应于弯曲位置识别单元22所识别的弯曲位置而改变的图像。例如,描绘单元23将显示器2分割成由所识别的弯曲位置勾勒出的多个分区画面,并且在不同的分区画面上显示不同的图像。另外,在显示在显示器2上的图像当中,描绘单元23在显示器2上显示在所识别的弯曲位置处的区域方面进行了编辑的图像。弯曲位置不仅包括实时识别的弯曲位置,而且包括所存储的弯曲位置(变形历史)。任何弯曲位置都是与变形有关的信息的示例。下面详细描述与这些操作有关的处理。
音频再现单元24具有向扬声器4输出响应于显示在显示器2上的图像的音频信号的功能。引导单元25具有引导用户如何对显示器2执行弯曲操作以建立实现用户所期望的显示模式的弯曲状态的功能。引导技术基于使用图像的方法或使用声音的方法。
下面描述由示例性实施方式的控制器3执行的处理。图7是示出由控制器3执行的处理的流程图。控制器3监测来自布置在显示器2上的变形检测单元16的传感器输出,并且确定显示器2是否变形(步骤S101)。变形信息获取单元21执行所述监测操作。在步骤S101中的确定操作中重复否定答案的同时,变形信息获取单元21重复步骤S101中的确定操作。如果传感器输出中出现导致阈值以上的值的变化,则变形信息获取单元21获得对步骤S101中的确定操作的肯定回答,并且前进至步骤S102。
控制器3利用检测到变形的变形检测单元16的位置信息来识别显示器2的弯曲位置(步骤S102)。弯曲位置识别单元22用于识别弯曲位置。控制器3确定是否在画面分区处理中使用所识别的弯曲位置(步骤S103)。在该确定操作中使用描绘单元23。可取地,所识别的弯曲位置用于何种处理由用户预先输入。
如果在步骤S103中的确定操作中获得肯定回答,则描绘单元23分别向分区画面输出数量与通过所识别的弯曲位置确定的画面分区的数量对应的图像(步骤S104)。在这种情况下,描绘单元23基于诸如以所识别的弯曲位置作为边界的各个分区画面的尺寸和形状以及各个分区画面的纵横比和像素数的参数来确定要输出至各个分区画面的各个图像的内容。
描绘单元23在以下时段中的各个时段期间执行图像切换。
(1)检测当前弯曲状态的时段
(2)从检测到当前弯曲状态开始延伸到检测到下一弯曲状态的时段(还使用变形的历史信息)
(3)从检测到当前弯曲状态结束延伸到检测到下一弯曲状态的时段(仅使用变形的历史信息)
图像切换的结束不限于检测下一弯曲状态。例如,在用户预定的显示时间逝去之后或者响应于来自用户的结束命令,图像切换可结束。
图8示出仅在检测到弯曲状态的同时选择改变显示器2的显示内容的显示模式的情况下显示内容的转变。参照图8,在显示器2变形之前的时间点T1,显示器2显示苹果的图片(以下称作“图像A”)。
参照图8,在时间点T2,显示器2沿着与显示器2的短边平行的两条折叠线弯曲成两折。当显示器2沿着与显示器2的长边垂直的两条折叠线向内弯曲时,显示器2的画面被分割成三个分区画面。描绘单元23根据分区画面的尺寸、形状等来确定要显示在这三个分区画面上的图像。在图8的示例中,图像A被显示在中心分区画面上,正方形的图像(以下称作“图像B”)被显示在左分区画面上,三角形的图像(以下称作“图像C”)被显示在右分区画面上。
在随后的时间点T3,显示器2还原回原本的平坦状态。在这种状态下,描绘单元23将显示器2视为单个画面,从而仅显示图像A。在此显示方法中,显示器2被用户弯曲的时段与显示内容的转变周期匹配。
图9示出贯穿从检测到弯曲状态开始到检测到下一弯曲状态的时段期间在显示器上选择改变显示内容的显示模式的情况下显示内容的转变。参照图9,在显示器2变形之前的时间点T1,显示器2仅显示图像A。在此状态下,显示器2现在可按照与图8中相同的方式来弯曲。更具体地,在时间点T2,显示器2的画面被分割成三个分区画面。按照与图8的示例中相同的方式,描绘单元23将图像A显示在中心分区画面上,将图像B显示在左分区画面上,将图像C显示在右分区画面上。
当显示器2在随后的时间点T3还原回平坦状态时,如图9所示,描绘单元23维持恰好之前的显示内容。更具体地,当不再检测到弯曲状态时,检测到变形的信息(历史信息)用于将图像A显示在中心分区画面上,将图像B显示在左分区画面上,将图像C显示在右分区画面上。在此显示方法中,显示内容不仅在用户正弯曲显示器2的时段期间继续显示,而且显示内容在弯曲结束之后利用历史信息继续显示。
图10示出贯穿从检测到弯曲状态结束到检测到下一弯曲状态的时段在显示器上选择改变显示内容的显示模式的情况下显示内容的转变。与图9相比,在时间点T1,图10的显示内容保持不变。然而,在图10的情况下,在显示器2弯曲之后显示器2的显示画面不被分割,仍然仅显示图像A。
在时间点T3,当显示器2从弯曲状态还原回平坦状态时以及随后,显示器2被分割成三个分区画面,并且执行响应于各个分区画面的图像显示。更具体地,描绘单元23将图像A显示在中心分区画面上,将图像B显示在左分区画面上,将图像C显示在右分区画面上。参照图10,用户弯曲显示器2仅为了输入分区画面之间的边界,并且在显示器2还原回平坦状态之后执行图像的观看。
返回图7,如果在步骤S103中的确定操作中得到肯定回答,则描绘单元23改变至将所识别的弯曲位置用于图像编辑的模式(步骤S105)。更具体地,描绘单元23改变至使用所识别的弯曲位置来编辑正在显示的图像的模式。图11示出所指定的弯曲位置被用于编辑图像的使用示例。如图11所示,在显示器2变形之前的时间点T1,在显示器2上仅显示图像A。在下一时间点T2,显示器2沿着相对于画面的中心线更靠右的线向内弯曲。在此时间点,图像A中没有发生变化。
在下一时间点T3,显示器2还原回平坦状态。与时间点T2的图像A中的弯曲位置(折叠线位置)对应地在苹果图像上增加线段41。如图11所示,输入弯曲位置作为增加线段41的操作。参照图11,在检测到弯曲状态之后,开始显示线段41。作为操作示例,如图8中的时间点T2所示,可仅在检测到弯曲状态的同时显示线段41。作为另一操作示例,如图9所示,可在检测到弯曲状态时的时间点T2或者在完成弯曲状态的检测时的时间点T3显示线段41。
图12示出在编辑另一图像时使用所指定的弯曲位置的使用示例。如图12所示,同样,按照时间点T1、T2和T3的顺序对显示器2执行与图11的弯曲操作相似的弯曲操作。然而,图12示出在时间点T3沿着所识别的弯曲线切割的苹果的图像。更具体地,如图12所示,用户所执行的显示器2的弯曲操作用于输入应用特殊效果(切割操作)的区域。
图12仅示出切割操作之后的图像。另选地,可将从切割操作开始到切割操作完成的过程显示为运动图像。可显示苹果的切割面(图12中未示出)。所显示的切割面给与用户图像处理的更逼真的感觉。根据示例性实施方式,要应用的特殊效果的内容由用户预先指定。根据示例性实施方式,描述了切割操作作为特殊效果的示例。如果显示器2在通过手的变形中变圆并且弯曲位置识别单元22响应于变形检测单元16的传感器输出而检测到变形位置,则可以显示如同在图像处理中被褶皱的苹果图像。
在图像编辑期间,可提供响应于图像编辑的内容的声音效果。例如,在图12的情况下,可从扬声器4发出诸如切割苹果的声音的声音效果。声音效果的使用给与用户图像处理的更逼真的感觉。
根据第一示例性实施方式,显示器2的变形在不同的分区画面上显示不同的图像,并且在所显示的图像上赋予特殊效果。具有可变形显示器2的显示装置1的用户友好度增加。生成响应于特殊效果的内容的声音给与用户应用了特殊效果的图像的更逼真的感觉。
第二示例性实施方式
第二示例性实施方式涉及响应于用户的眼球位置(观察位置)的图像的输出位置的切换技术。参照图13A至图15B来描述第二示例性实施方式。如图13A至图15B所示,可变形的显示装置1从容器50中的收起状态被拉出以便于使用。图13A至图15B利用XYZ坐标系来表示。Z轴与高度方向对准,X轴和Y轴是限定水平面的两个方向。参照图13A至图15B,按照到容器50从远到近的顺序,将三个分区画面指定为第一分区画面(#1)、第二分区画面(#2)和第三分区画面(#3)。
图13A和图13B示出当被从容器50拉出的显示器2沿着与拉出方向垂直的两条线弯曲时用户观看形成在薄基板的同一面的三个分区画面51、52和53的显示模式(如果从上方看,则三个分区画面51、52和53形成U形构造)。如图13A和图13B所示,用户的眼球由用户的观察位置54表示。在图13A和图13B中,显示器2在拉出方向上成直角弯曲两次。由弯曲位置处的两个相邻表面所成的角度未必为直角。两个相邻表面所成的角度可为钝角。
参照图13A和图13B,在显示器2弯曲的同时,不同的图像分别显示在不同的分区画面51、52和53上。例如,正面场景被显示在用户正面的分区画面52上,右侧场景被显示在右分区画面51上,并且左侧场景被显示在左分区画面53上。当显示器2被设置在形成显示装置1的薄基板的一个表面或两个表面上时,可设置图13A和图13B的观察位置54。根据示例性实施方式,用户预先在显示装置1上设置观察位置54。如果检测用户的视线的视线传感器被设置在容器50或显示装置1的部分中,则可利用检测结果来识别观察位置54。
图14A和图14B示出当被从容器50拉出的显示器2沿着与拉出方向垂直的两条线弯曲时用户从远离容器50在弯曲位置斜上方的点观看三个分区画面51、52和53的显示模式(如果从上方看,则三个分区画面51、52和53形成U形构造)。
如果显示器2被设置在形成显示装置1的薄基板的两个表面上,则可设置图14A和图14B的观察位置54。参照图14A和图14B,用户可观看布置在弯曲的薄基板的外侧表面上的显示器2的两个分区画面(分区画面51和52)以及布置在弯曲的薄基板的内侧表面上的显示器2的一个分区画面(分区画面53)。参照图14A和图14B,显示器2在拉出方向上(即,沿着两条线)成直角弯曲两次。由弯曲线处的两个相邻表面所成的角度未必为直角。
在图14A和图14B的情况下,用户预先在显示装置1上设置观察位置54。如果检测用户的视线的视线传感器被设置在容器50或显示装置1的部分中,则可利用检测结果来识别观察位置54。在图14A和图14B中,同样,在显示器2弯曲的同时,不同的图像分别被显示在分区画面51、52和53上。
图15A和图15B示出当被从容器50拉出的显示器2沿着与拉出方向垂直的两条线弯曲时用户从三个不同的点观看三个分区画面51、52和53的显示模式(如果从上方看,则三个分区画面51、52和53形成U形构造)。
不管显示器2被设置在形成显示装置1的薄基板的一个表面还是两个表面上,设置图15A和图15B的观察位置54。参照图15A和图15B,用户观看布置在薄基板的同一面(在显示器2的弯曲状态下包括外侧表面)的显示器2的三个分区画面51、52和53。参照图15A和图15B,显示器2在拉出方向上(即,沿着两条线)成直角弯曲两次。由弯曲线处的两个相邻表面所成的角度未必为直角。
参照图15A和图15B,专用于与观察位置54对应的三个人的图像可分别显示在三个分区画面51、52和53上。例如,频道A的电视图像被显示在与观察位置54A对应的分区画面51上,个人计算机的操作画面被显示在与观察位置54B对应的分区画面52上,并且频道C的电视图像被显示在与观察位置54C对应的分区画面53上。
在图15A和图15B的情况下,用户预先在显示装置1上设置观察位置54。如果检测用户的视线的视线传感器被设置在容器50或显示装置1的部分中,则可利用检测结果来识别观察位置54。在图15A和图15B中,同样,在显示器2弯曲的同时,不同的图像分别被显示在分区画面51、52和53上。
根据第二示例性实施方式,响应于显示器2的变形而出现的三个分区画面51、52和53上的图像输出响应于各个分区画面与观察位置54之间的位置关系而改变。具有可变形显示器2的显示装置1的用户友好度增加。
第三示例性实施方式
第三示例性实施方式涉及通过显示器2的变形触发的分区画面之间的显示内容的切换。图16示出当在不同于当前显示的分区画面的位置处检测到新的弯曲位置时执行的显示内容的切换控制操作。如图16的上部所示,图像A被显示在左分区画面上,图像B被显示在右分区画面上。在这种情况下,充当两个分区画面之间的边界的线L11与显示器2的短边平行。另一方面,图16在其下部示出检测到沿着与线L11不同的新的线绘制的L12的显示内容。在图16的下部,图像B被显示在左分区画面上,图像A被显示在右分区画面上。这样,响应于新的弯曲位置的检测在右分区画面与左分区画面之间切换显示内容。
图17是示出执行显示位置的切换控制操作的控制器3的处理的流程图。控制器3监测设置在显示器2上的变形检测单元16的传感器输出,并且确定显示器2是否变形(步骤S201)。变形信息获取单元21用于此监测操作。在步骤S201中连续地重复否定回答的同时,变形信息获取单元21重复步骤S201中的确定操作。如果传感器输出中出现导致超过阈值的值的变化,则变形信息获取单元21在步骤S201中得出肯定回答并前进至步骤S202。
控制器3利用检测到变形的变形检测单元16的位置信息来识别显示器2的弯曲位置(步骤S202)。在此识别操作中,使用弯曲位置识别单元22的功能。控制器3确定所识别的弯曲位置是否不同于正好前一个弯曲位置(步骤S203)。使用描绘单元23的功能来执行此确定操作。如果在步骤S203中的确定操作中得到肯定回答,则描绘单元23在由新的弯曲位置勾勒出的分区画面之间切换图像(步骤S204)。如果在确定操作中得到否定回答,则描绘单元23继续执行当前显示。
根据第三示例性实施方式,显示器2的简单变形切换了显示器2上的图像的显示位置。具有可变形显示器2的显示装置1的用户友好度增加。
第四示例性实施方式
第四示例性实施方式涉及用户所期望的显示模式(用户所期望的在图像显示中使用的分区画面的数量和布局)以及就显示器2的变形操作引导用户以提供适合于用户所选择的图像的显示的功能。图18示出就适合于用户所指定的显示模式的显示器2的形状来引导用户的画面示例。
图18的画面示例指示意图在显示器2的上部和下部之间显示不同的图像的操作示例。根据第四示例性实施方式,沿着与显示器2的长边平行延伸的近似中心线显示虚线61,并且显示引导消息62以指示用户的工作内容。图18没有阐明显示器2是按照横截面V形状还是倒V形状弯曲。当显示引导消息62时,可取地,以音频声音输出引导消息62的内容。
图19是大致示出控制器3在操作上引导用户所执行的处理的流程图。该处理由引导单元25执行。引导单元25确定是否请求了针对弯曲位置的引导(步骤S301)。如果重复地获得否定回答,则引导单元25重复步骤S301中的确定操作。
如果获得肯定回答,引导单元25识别显示模式以进行引导(步骤S302)。例如,引导单元25从显示在显示器2上的多个显示模式当中识别用户所指定的显示模式。引导单元25在显示器2上显示指示响应于所识别的显示模式的弯曲位置的引导画面(参见图18)(步骤S303)。
引导画面可直观地识别。通过就适合于所显示的图像的内容的弯曲位置引导用户,用户可在短时间内将显示器2按照适合于观察图像的形状变形。
其它示例性实施方式
根据上述示例性实施方式,要显示在显示器2上的图像根据显示器2的变形操作发生变化。可针对显示在特定位置处的分区画面上的图像再现伴随音。如果扬声器4被布置在分区画面上的相应位置处,则可通过响应于分区画面的扬声器4来再现显示在分区画面上的图像的伴随音。更具体地,可在不同的分区画面上再现不同的声音。
根据示例性实施方式,仅描述了显示画面的输出形式。显示器2所形成的多个分区画面当中的特定位置处的分区画面(例如,左、中、右分区画面当中的中心分区画面)的显示画面的再现速度可被修改。例如,显示在中心分区画面上的图像按照两倍速播放、按照慢动作速度播放、或者逐帧播放。
根据示例性实施方式,显示器2和控制器3被集成为单一模块。另选地,显示器2(包括通信单元)可以是与控制器3分离的投影仪式装置。在此配置中,显示器2可以是投影仪画面或空中图像显示。
如果显示器2是投影仪屏幕,则在片状屏幕上安装多个变形检测单元16和通信单元。显示器2的通信单元用于将变形检测单元16的传感器输出发送至控制器3。另一方面,如果显示器2是空中图像显示器,则显示器2被实现为镜像。更具体地,作为空中图像显示的显示器2垂直于视觉感知中,而非物理存在。充当空中图像显示器的显示器2中所使用的变形检测单元16围绕显示器2布置作为对弯曲显示画面的用户的手势进行图像捕获的成像相机或者作为检测响应于手势而发生的波动(例如,空气波动或风)的传感器。变形检测单元16的传感器输出经由通信单元被输出至控制器3。
在上述示例性实施方式中,控制器3被包括在被配置在单独壳体中的图像处理装置中。先前示例性实施方式的描绘单元23控制包括在图像处理装置中的投光器(包括光源和光学系统),从而改变要投影到显示器2的表面(投影面)上的图像的内容。图像处理装置提供与先前示例性实施方式相似的效果。
为了例示和描述的目的提供了本发明的示例性实施方式的以上描述。其并不旨在穷举或者将本发明限于所公开的精确形式。显然,对于本领域技术人员而言许多修改和变化将是显而易见的。选择并描述实施方式以便最佳地说明本发明的原理及其实际应用,从而使得本领域技术人员能够理解本发明的各种实施方式以及适合于可以想到的具体用途的各种改型。本发明的范围旨在由以下权利要求书及其等同物限定。

Claims (12)

1.一种显示装置,该显示装置包括:
显示器,该显示器的形状能够变形;
获取单元,该获取单元获取与所述显示器的变形有关的信息;以及
描绘单元,该描绘单元响应于所获取的信息来改变所述显示器上的显示内容。
2.根据权利要求1所述的显示装置,其中,所述描绘单元响应于关于所述显示器的弯曲位置的信息来改变所述显示器上的所述显示内容。
3.根据权利要求2所述的显示装置,其中,所述描绘单元在弯曲位置处将所述显示器的显示面分割成多个画面,并且在不同的画面上分别显示不同的图像。
4.根据权利要求3所述的显示装置,其中,所述描绘单元响应于所述画面的形状来确定要显示在该画面上的图像。
5.根据权利要求2所述的显示装置,其中,所述描绘单元利用关于所述弯曲位置的信息来对显示图像执行编辑操作。
6.根据权利要求5所述的显示装置,其中,所述描绘单元在所述编辑操作中在所述显示图像上增加特殊效果。
7.根据权利要求6所述的显示装置,该显示装置还包括音频再现单元,该音频再现单元响应于所述显示图像的变形生成声音。
8.根据权利要求1所述的显示装置,该显示装置还包括引导单元,该引导单元引导如何将所述显示器变形。
9.根据权利要求8所述的显示装置,其中,所述引导单元在所述显示器的所述画面上显示所述弯曲位置。
10.一种图像处理装置,该图像处理装置包括描绘单元,该描绘单元响应于关于形状能够变形的显示器的变形的信息来改变所述显示器上的显示内容。
11.根据权利要求10所述的图像处理装置,其中,所述描绘单元将所述显示内容投影到与所述图像处理装置分离的所述显示器上。
12.根据权利要求10所述的图像处理装置,其中,所述描绘单元将所述显示内容显示到作为空中图像显示器的所述显示器上。
CN201710546048.6A 2016-11-25 2017-07-06 显示装置和图像处理装置 Pending CN108108136A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016228648A JP6187668B1 (ja) 2016-11-25 2016-11-25 表示装置、画像処理装置及びプログラム
JP2016-228648 2016-11-25

Publications (1)

Publication Number Publication Date
CN108108136A true CN108108136A (zh) 2018-06-01

Family

ID=59720474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710546048.6A Pending CN108108136A (zh) 2016-11-25 2017-07-06 显示装置和图像处理装置

Country Status (3)

Country Link
US (1) US20180150110A1 (zh)
JP (1) JP6187668B1 (zh)
CN (1) CN108108136A (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019045144A1 (ko) * 2017-08-31 2019-03-07 (주)레벨소프트 의료용 항법 장치를 위한 의료 영상 처리 장치 및 의료 영상 처리 방법
TWI652529B (zh) * 2018-03-07 2019-03-01 緯創資通股份有限公司 可撓式顯示裝置與劃分可撓式顯示器的方法
JP7229689B2 (ja) * 2018-07-23 2023-02-28 キヤノン株式会社 電子機器及びその制御方法、プログラム
JP2020197818A (ja) * 2019-05-31 2020-12-10 コニカミノルタ株式会社 画像形成装置
CN110719351B (zh) * 2019-09-30 2021-05-28 维沃移动通信有限公司 一种折叠屏分界点确定方法及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140049464A1 (en) * 2012-08-20 2014-02-20 Samsung Electronics Co., Ltd. Flexible display apparatus and controlling method thereof
US8988381B1 (en) * 2014-02-14 2015-03-24 Lg Electronics Inc. Mobile terminal and method for controlling the same
WO2015167128A1 (ko) * 2014-04-30 2015-11-05 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2016052814A1 (en) * 2014-09-30 2016-04-07 Lg Electronics Inc. Mobile terminal and method of controlling the same
CN105938426A (zh) * 2015-03-05 2016-09-14 三星显示有限公司 显示装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070247422A1 (en) * 2006-03-30 2007-10-25 Xuuk, Inc. Interaction techniques for flexible displays
JP2010157060A (ja) * 2008-12-26 2010-07-15 Sony Corp 表示装置
JP5640365B2 (ja) * 2009-12-07 2014-12-17 ソニー株式会社 表示装置及び表示装置の制御方法
JP5099158B2 (ja) * 2010-03-24 2012-12-12 コニカミノルタビジネステクノロジーズ株式会社 画像表示装置
US9812074B2 (en) * 2011-03-18 2017-11-07 Blackberry Limited System and method for foldable display
JP2013196623A (ja) * 2012-03-22 2013-09-30 Sharp Corp ディスプレイ装置、ディスプレイシステム、およびディスプレイ制御方法、ならびにそのプログラム。
KR101721046B1 (ko) * 2012-04-08 2017-03-29 삼성전자주식회사 디스플레이 장치 및 그에 대한 제어 방법
KR101864620B1 (ko) * 2012-05-09 2018-06-07 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101919848B1 (ko) * 2012-08-23 2018-11-19 삼성전자주식회사 플렉서블 장치 및 플렉서블 장치의 제어 방법
JP5815071B2 (ja) * 2012-09-27 2015-11-17 シャープ株式会社 表示装置および表示方法
JPWO2014142269A1 (ja) * 2013-03-14 2017-02-16 京セラ株式会社 電子機器
KR102432511B1 (ko) * 2013-08-02 2022-08-12 가부시키가이샤 한도오따이 에네루기 켄큐쇼 표시 장치
JP2015228207A (ja) * 2014-05-02 2015-12-17 株式会社半導体エネルギー研究所 電子機器、及び記録媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140049464A1 (en) * 2012-08-20 2014-02-20 Samsung Electronics Co., Ltd. Flexible display apparatus and controlling method thereof
US8988381B1 (en) * 2014-02-14 2015-03-24 Lg Electronics Inc. Mobile terminal and method for controlling the same
WO2015167128A1 (ko) * 2014-04-30 2015-11-05 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2016052814A1 (en) * 2014-09-30 2016-04-07 Lg Electronics Inc. Mobile terminal and method of controlling the same
CN105938426A (zh) * 2015-03-05 2016-09-14 三星显示有限公司 显示装置

Also Published As

Publication number Publication date
US20180150110A1 (en) 2018-05-31
JP6187668B1 (ja) 2017-08-30
JP2018084729A (ja) 2018-05-31

Similar Documents

Publication Publication Date Title
CN108108136A (zh) 显示装置和图像处理装置
US20210366449A1 (en) Computer vision and mapping for audio applications
US10203764B2 (en) Systems and methods for triggering actions based on touch-free gesture detection
WO2022005693A1 (en) Augmented reality experiences using speech and text captions
GB2590208A (en) Face-based special effect generation method and apparatus, and electronic device
CN115720651A (zh) 利用对象操纵的增强现实体验
CN116724285A (zh) 用于控制虚拟和图形元素的微手势
US20240160342A1 (en) Object detection device, object detection method, and recording medium
JPWO2018003861A1 (ja) 表示装置および制御装置
CN109155821A (zh) 相机的可移动用户界面快门按钮
CN108038726B (zh) 物品展示方法及装置
CN104808923B (zh) 一种屏幕控制方法和电子设备
US11734920B2 (en) Object detection device, object detection method, and recording medium
JP2016004541A (ja) 車両用操作入力装置
US10409446B2 (en) Information processing apparatus and method for manipulating display position of a three-dimensional image
WO2022005726A1 (en) Augmented reality eyewear 3d painting
JP2018192230A (ja) 眉形状ガイド装置およびその方法
CN107608508B (zh) 一种信息处理方法及电子设备
CN106527915A (zh) 一种信息处理方法及电子设备
CN111914693A (zh) 一种人脸姿态调整方法、系统、装置、设备及介质
CN108833779A (zh) 拍摄控制方法及相关产品
JP6731896B2 (ja) リップ・グロス案内装置及びその方法
EP3660636A1 (en) Information processing device, information processing method, and program
CN105808129A (zh) 一种利用手势快速开启软件功能的方法和装置
JP6399158B2 (ja) 画像処理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Tokyo, Japan

Applicant after: Fuji film business innovation Co.,Ltd.

Address before: Tokyo, Japan

Applicant before: Fuji Xerox Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180601