CN102203702A - 电子设备、菜单的选择方法、菜单的选择程序 - Google Patents

电子设备、菜单的选择方法、菜单的选择程序 Download PDF

Info

Publication number
CN102203702A
CN102203702A CN2009801435506A CN200980143550A CN102203702A CN 102203702 A CN102203702 A CN 102203702A CN 2009801435506 A CN2009801435506 A CN 2009801435506A CN 200980143550 A CN200980143550 A CN 200980143550A CN 102203702 A CN102203702 A CN 102203702A
Authority
CN
China
Prior art keywords
mentioned
menu
electronic equipment
selection portion
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009801435506A
Other languages
English (en)
Other versions
CN102203702B (zh
Inventor
木村满秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN102203702A publication Critical patent/CN102203702A/zh
Application granted granted Critical
Publication of CN102203702B publication Critical patent/CN102203702B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

电子设备(100)包括:用于储存多个菜单的存储部(430)、能多点输入的显示一体型图形输入板(410)、用于将包括多个菜单的显示画面显示在显示一体型图形输入板的显示控制部(452)、用于在向显示一体型图形输入板输入期间输出与输入对应的指示位置的输入处理部(454)、用于基于同时输出的多个指示位置选择菜单的选择部(456)、以及用于输出所选择的菜单的输出部(240)。

Description

电子设备、菜单的选择方法、菜单的选择程序
技术领域
本发明涉及具备显示一体型触摸面板的电子设备及根据电子设备的菜单的选择方法以及菜单的选择程序。
背景技术
现在,个人计算机等电子设备广泛流通。通常,电子设备具备受理来自外部的指示的输入装置和显示装置。以往,作为输入装置广泛使用鼠标、触摸面板等。在专利文献1(日本特开2004-5105号公报)、专利文献2(日本特开2004-5212号公报)、专利文献3(日本特开2004-234504号公报)、专利文献4(日本特开2000-339097号公报)中公开了具备与显示装置组合的触摸面板的信息处理装置。
电子设备有时在该显示装置显示多个菜单,例如,图像的缩略图、指令菜单等。用户使用输入装置能够从显示的多个菜单中同时选择多个菜单。
例如,在Windows(注册商标)的应用程序中,用户用以下那样的操作能够同时选择多个菜单。
(1)一边按ctrl键,一边一个一个地选择菜单。通过该操作,按压ctrl键期间选择的菜单同时被选择。
(2)一边按shift键,一边选择开始菜单和结束菜单。通过该操作,夹在开始菜单和结束菜单间的菜单被选择。
(3)使用鼠标或者触摸面板拖动。根据该操作,拖动区域内的菜单被选择。
现有技术文献
专利文献
专利文献1:日本特开2004-5105号公报
专利文献2:日本特开2004-5212号公报
专利文献3:日本特开2004-234504号公报
专利文献4:日本特开2000-339097号公报。
发明内容
发明要解决的问题
在现有的电子设备中,用户在选择多个菜单时,需要进行用于将输入模式切换为同时菜单选择模式的操作。即,用户需要进行按键盘的ctrl键、shift键等繁琐的操作。
本发明是为了解决上述那样的问题而做成的,其课题在于提供一种使用户通过直觉的操作同时选择多个菜单成为可能的电子设备。
用于解决问题的方案
根据本发明的一个方面,提供一种电子设备。电子设备具备:用于储存多个菜单的存储部;能多点输入的显示一体型图形输入板(tablet);用于在显示一体型图形输入板显示包含多个菜单的显示画面的显示控制部;用于在进行向显示一体型图形输入板的输入的期间,输出与输入对应的指示位置的输入处理部;用于基于同时输出的多个指示位置来选择菜单的选择部;以及用于输出所选择的菜单的输出部。
优选是,选择部选择被同时输出的2个指示位置夹持的菜单。
更优选是,选择部选择以同时输出的2个指示位置为对角的顶点的矩形内的菜单。
更优选是,选择部选择处于以同时输出的2个指示位置为端点的线段上的菜单。
更优选是,存储部储存各输入的开始定时,选择部基于与各端点对应的输入的开始定时的顺序,对选择的菜单从一方的端点向另一方的端点依次给予选择编号,输出部基于选择编号输出菜单。
优选是,存储部储存各输入的开始定时,选择部选择将同时输出的多个指示位置按照与各指示位置对应的输入的开始定时的顺序连接起来的折线上的菜单。
更优选是,选择部对选择的菜单从折线的一方的端点向折线的另一方的端点依次给予选择编号,输出部基于选择编号输出菜单。
优选是,存储部储存显示画面中的各菜单的显示顺序,选择部选择以与同时输入的2个指示位置分别对应的菜单为两端、拥有连续的显示顺序多个菜单。
更优选是,选择部伪选择由多个指示位置同时指定的一个菜单,选择以伪选择的2个菜单为两端、拥有连续的显示顺序的多个菜单。
更优选是,显示控制部根据指示位置的连续的移动来滚动显示画面。
更优选是,输出部基于显示顺序输出菜单。
优选是,输出部包含监视器。
更优选是,监视器为光传感器内置的液晶面板。
优选是,显示一体型图形输入板为光传感器内置的液晶面板。
根据本发明的另一个方面,提供一种根据具有能多点输入的显示一体型图形输入板的电子设备的菜单的选择方法。菜单的选择方法具备:在显示一体型图形输入板显示包含多个菜单的显示画面的步骤;用于在进行向显示一体型图形输入板的输入的期间,输出与输入对应的指示位置的步骤;以及基于同时输出的多个指示位置选择菜单的步骤。
根据本发明的再另一个方面,提供一种菜单的选择程序,使具有显示多个菜单并能多点输入的显示一体型图形输入板的电子设备选择菜单。电子设备包含用于在进行向显示一体型图形输入板的输入的期间,输出与输入对应的指示位置的输入处理部。菜单的选择程序具备:使电子设备判断输入处理部是否同时输出多个指示位置的步骤;以及在电子设备判断为输入处理部同时输出多个指示位置的情况下,使电子设备基于同时输出的多个指示位置从显示于显示一体型图形输入板的多个菜单中选择菜单。
发明效果
本发明的电子设备在显示多个菜单的显示一体型触摸面板同时受理多个输入后,能够基于同时指定的多个输入位置选择菜单。其结果是,根据本发明,用户能够通过直觉的操作同时选择多个菜单。
附图说明
图1是表示本实施方式的电子设备的外观的概略图。
图2是表示电子设备的硬件构成的框图。
图3是表示液晶面板的构成和该液晶面板的周边电路的图。
图4是液晶面板和背光源的剖视图。
图5是表示使光传感器电路动作时的时序图的图。
图6是表示扫描时光电二极管接受来自背光源的光的构成的剖视图。
图7是表示指令的概略结构的图。
图8是用于说明种类“000”的指令的图。
图9是用于说明种类“001”的指令的图。
图10是用于说明种类“010”的指令的图。
图11是用于说明种类“011”的指令的图。
图12是用于说明种类“100”的指令的图。
图13是用于说明种类“101”的指令的图。
图14是表示响应数据的概略结构的图。
图15是表示通过扫描手指得到图像(扫描图像)的图。
图16是光传感器内置的液晶面板140A的电路图。
图17是表示扫描时光电二极管接受外部光的构成的剖视图。
图18是表示电子设备的变形例的硬件构成的框图。
图19是以框图形式表示本实施方式的电子设备100的功能构成的图。
图20是说明第一实施方式的电子设备100的动作的概要的图。
图21是说明电子设备100选择横向排列的菜单的动作的图。
图22是说明电子设备100选择纵向排列的菜单的动作的图。
图23是说明电子设备100选择跨纵3行横3列的菜单的动作的图。
图24是用于对单选择进行说明的图。
图25是用于对单一菜单的连续选择进行说明的图。
图26是用于说明解除对一个菜单的伪选择的图。
图27是用于对解除多个菜单中的特定的菜单的伪选择进行说明的图。
图28是用于对复合选择进行说明的图。
图29是以流程图形式表示第一实施方式的菜单选择部456所进行的处理的流程的图。
图30是以流程图形式表示第一实施方式的菜单选择部456所进行的内容选择处理的流程的图。
图31是用于对第二实施方式的菜单选择进行说明的图。
图32是用于说明在博客制作中使用第二实施方式的菜单选择方法的情况的图。
图33是以流程图形式表示第二实施方式的菜单选择部456所进行的处理的流程的图。
图34是以流程图形式表示第二实施方式的菜单选择部456所进行的内容选择处理的流程的图。
图35A是用于对第三实施方式的菜单选择进行说明的第一图。
图35B是用于对第三实施方式的菜单选择进行说明的第二图。
图35C是用于对第三实施方式的菜单选择进行说明的第三图。
图36是以流程图形式表示第三实施方式的菜单选择部456所进行的内容选择处理的流程的图。
图37是用于对锚(anchor)设定进行说明的图。
图38是用于对滚动进行说明的图。
图39是用于对组合了锚设定和滚动的菜单选择进行说明的第一图。
图40是用于对组合了锚设定和滚动的菜单选择进行说明的第二图。
图41是用于对组合了锚设定和滚动的菜单选择进行说明的第三图。
图42是以流程图形式表示第四实施方式的菜单选择部456所进行的内容选择处理的流程的图。
图43是用于对确定顺序的转换进行说明的图。
图44是用于对利用了确定顺序的转换的菜单选择进行说明的第一图。
图45是用于对利用了确定顺序的转换的菜单选择进行说明的第二图。
具体实施方式
下面,一边参照附图一边对本发明的实施方式进行说明。在以下的说明中,对相同的部分附加相同的附图标记。它们的名称以及功能也相同。因此,不重复对它们的详细说明。
[第一实施方式]
<电子设备的外观>
图1是表示本实施方式的电子设备100的外观的图。参照图1,电子设备100包括第一壳体100A和第二壳体100B。
第一壳体100A和第二壳体100B通过铰链100C可折叠地连接。第一壳体100A具有光传感器内置的液晶面板140。第二壳体100B具有光传感器内置的液晶面板240。这样,电子设备100具有2个光传感器内置的液晶面板。
此外,电子设备100作为PDA(Personal Digital Assistant:个人数字助理)、笔记本式个人计算机、便携式电話机、电子辞典等具有显示功能的便携式装置而构成。
<关于硬件构成>
接下来,参照图2,对电子设备100的具体构成的一个方式进行说明。图2是表示电子设备100的硬件构成的框图。
电子设备100包括第一单元1001和第二单元1002。第二单元1002可从电子设备100拆装地与第一单元1001连接。第一单元1001包含主体装置101和显示装置102。第二单元1002包含显示装置103和主体装置104。
第一壳体100A包含显示装置102。第二壳体100B包含主体装置101。此外,第二壳体100B包含第二单元1002。
(关于第一单元)
主体装置101包括CPU(Central Processing Unit:中央处理器)110、RAM(Random Access Memory:随机存取存储器)171、ROM(Read-Only Memory:只读存储器)172、存储卡读写器173、外部通信部174、传声器175、扬声器176、操作键177、电源开关191、电源电路192、电源检测部193、USB(Universal Serial Bus:通用串行总线)连接器194、天线195、LAN(Local Area Network:局域网)连接器196。各构成要素(110、171~177、193)相互由数据总线DB1连接。在存储卡读写器173安装存储卡1731。
CPU110执行程序。操作键177接受源于电子设备100的使用者的指示的输入。RAM171易失地储存源于CPU110的程序的执行所生成的数据、或者经操作键177输入的数据。ROM172非易失地储存数据。另外,ROM172是EPROM(Erasable Programmable Read-Only Memory:可擦可编程序只读存储器)或闪存等可写入及擦除数据的ROM。
外部通信部174与其他电子设备进行通信。具体地说,外部通信部174经USB连接器194与例如第二单元1002进行通信。另外,外部通信部174经天线195与例如第二单元1002进行无线通信。还有,外部通信部174经LAN连接器196与其他电子设备间进行有线通信。
此外,主体装置101也可以通过蓝牙(Bluetooth(注册商标))以外的无线通信与其他电子设备进行通信,例如外部通信部174也可以经未图示的无线LAN天线与LAN连接的其他电子设备间进行无线通信,或者,也可以经未图示的红外线端口与其他电子设备间进行无线通信。
电源开关191为用于使电子设备100启动的开关。
如果电源开关191接通,则电源电路192经电源检测部193对连接于数据总线DB1的各构成要素和显示装置102提供电力。而且,如果电源开关191接通,则电源电路192不经电源检测部193对外部通信部174提供电力。
电源检测部193检测来自电源电路192的输出。而且,电源检测部193将与该检测到的输出有关的信息(例如电压值、电流值)发送给CPU110。
USB连接器194用于将第一单元1001与第二单元1002连接。此外,主体装置101除USB连接器194外也可以具有其他USB连接器。
第一单元1001经USB连接器194将数据发送给第二单元1002。另外,第一单元1001经USB连接器194从第二单元1002接收数据。另外,第一单元1001经USB连接器194给第二单元1002提供电力。
天线195用于在第一单元1001和其他通信装置(例如第二单元1002)间按照蓝牙(Bluetooth(注册商标))标准进行通信。LAN连接器196用于将电子设备100连接到LAN。
显示装置102包括驱动器130、光传感器内置的液晶面板140(以下称“液晶面板140”)、内部IF178、背光源179、图像处理引擎180。
驱动器130是用于驱动液晶面板140以及背光源179的驱动电路。关于驱动器130所包含的各种的驱动电路将在后述。
液晶面板140是具有液晶显示器的功能和光传感器的功能的装置。即,液晶面板140能够进行使用了液晶的图像的显示和使用了光传感器的感测,关于液晶面板140的详细情况将在后述。
内部IF(Interface:接口)178在主体装置101和显示装置102间调遣数据的交换。
背光源179是配置于液晶面板140的背面的光源。背光源179对于该背面照射均匀的光。
图像处理引擎180经驱动器130控制液晶面板140的动作。这里,该控制基于经内部IF178由主体装置101发送来的各种数据进行。此外,该各种数据包括后述的指令。另外,图像处理引擎180处理从液晶面板140输出的数据,将处理后的数据经内部IF178发送给主体装置101。进而,图像处理引擎180包括驱动器控制部181、定时器182、信号处理部183。
驱动器控制部181通过对驱动器130发送控制信号控制驱动器130的动作。另外,驱动器控制部181解析从主体装置101发送来的指令。而且,驱动器控制部181将基于该解析的结果的控制信号发送给驱动器130。对驱动器130动作的详细情况将在后述。
定时器182生成时刻信息,对信号处理部183发送时刻信息。
信号处理部183受理从上述光传感器输出的数据。这里,由于从上述光传感器输出的数据为模拟数据,所以信号处理部183首先将该模拟数据变换为数字数据。进而,信号处理部183对于该数字数据进行与从主体装置101发送来的指令的内容对应的数据处理。而且,信号处理部183将包含进行了上述数据处理后的数据和从定时器182取得的时刻信息的数据(以下称响应数据)发送给主体装置101。另外,信号处理部183具有能够连续储存多个后述的扫描数据的RAM(未图示)。
上述指令包含通过上述光传感器指示感测的感测指令。关于该感测指令的详细情况以及上述响应数据的详细情况将在后述(图7、图8以及图14)。
此外,定时器182未必配备于图像处理引擎180中。例如,定时器182也可以配备于显示装置102内的、图像处理引擎180之外部。或者,定时器182也可以配备于主体装置101。另外,传声器175以及扬声器176并非是电子设备100常备,根据电子设备100的实施例不同,也可以是不具有传声器175及扬声器176的任一者或者两者的结构。
这里,显示装置102包含系统液晶。而所谓系统液晶就是将液晶面板140的周边设备一体形成在该液晶面板140的玻璃基板上而得到的装置。在本实施方式中,驱动器130(除驱动背光源179的电路)、内部IF178、图像处理引擎180一体形成在液晶面板140的玻璃基板上。此外,显示装置102未必使用系统液晶构成,也可以在上述玻璃基板以外的基板构成驱动器130(除驱动背光源179的电路)、内部IF178、图像处理引擎180。
(关于第二单元)
第二单元1002从第一单元1001接受电力的提供。具体地说,通过连接后述的USB连接器294和第一单元1001的USB连接器194,第二单元1002从第一单元1001的电源电路192接受电力的提供。
主体装置104包含CPU210、RAM271、ROM272、外部通信部274、电源检测部293、USB连接器294、天线295、信号强度检测部297。各构成要素(210,271,272,274,293)相互由数据总线DB2连接。
CPU210执行程序。RAM271易失地储存源于CPU210的程序的执行所生成的数据。ROM272非易失地存储数据。另外,ROM272是EPROM(Erasable Programmable Read-Only Memory)或闪存等可进行数据的写入及擦除的ROM。
外部通信部274与其他电子设备间进行通信。具体地说,外部通信部274经USB连接器294与例如第一单元1001进行通信。另外,外部通信部274经天线295与例如第一单元1001进行通信。
此外,主体装置104也可以通过蓝牙(Bluetooth(注册商标))以外的无线通信与其他电子设备(例如,第一单元1001)进行通信。例如,外部通信部274也可以经未图示的红外线端口与其他电子设备间进行无线通信。
信号强度检测部297检测经天线295接收的信号的强度。而且,信号强度检测部297将检测的强度发送给外部通信部274。
USB连接器294用于将第二单元1002连接到第一单元1001。
第二单元1002经USB连接器294将数据发送给第一单元1001。另外,第二单元1002经USB连接器294从第一单元1001接收数据。还有,第二单元1002如上所述,经USB连接器294从第一单元1001接受电力的提供。此外,第二单元1002将从第一单元1001提供的电力蓄电到未图示的电池。
天线295用于在第二单元1002与例如第一单元1001间按照Bluetooth(注册商标)标准进行的通信。
电源检测部293检测经USB连接器294供电的电力。另外,电源检测部293将与该检测了的电力相关的信息发送给CPU210。
另外,主体装置104也可以具有进行红外线通信的功能。
显示装置103包含驱动器230、光传感器内置的液晶面板240(以下称“液晶面板240”)、内部IF278、背光源279、图像处理引擎280。图像处理引擎280包含驱动器控制部281、定时器282、信号处理部283。
显示装置103具有与显示装置102相同的构成。即,驱动器230、液晶面板240、内部IF278、背光源279以及图像处理引擎280分别与显示装置102中的驱动器130、液晶面板140、内部IF178、背光源179、图像处理引擎180具有相同的构成。驱动器控制部281、定时器282以及信号处理部283分别与显示装置102中的驱动器控制部181、定时器182、信号处理部183具有相同的构成。因此,关于显示装置103所包含的各功能模块不再重复说明。
另外,电子设备100中的处理通过各硬件以及由CPU110执行的软件实现。这样的软件有些情况下预先存储在ROM172。另外,也有软件储存在存储卡1731等其他存储介质作为程序产品而流通的情况。或者,也存在软件由所谓的连接于因特网的信息提供企业作为可下载的程序产品而提供的情况。这样的软件通过存储卡读写器173等其他读取装置从该存储介质读取,或者经通信部174或者通信IF(未图示)下载后,暂时存储在ROM172。该软件由CPU110从ROM172读出,在RAM171以可执行程序的形式储存。CPU110执行该程序。
构成图2所示的电子设备100的主体装置101的各构成要素为通常要素。因此,可以说本发明的本质的部分是RAM171、ROM172、存储在存储卡173等其他存储介质的软件,或者可经网络下载的软件。此外,电子设备100的主体装置101的硬件的动作为公知,所以其详细说明不再重复。
此外,作为存储介质,不限于存储卡,也可以是CD-ROM、FD(Flexible Disk:软盘)、硬盘、磁带、盒带、光盘(MO(Magnetic Optical Disc:磁光盘)/MD(Mini Disc:迷你盘)/DVD(Digital Versatile Disc:数字多功能光盘)),IC(Integrated Circuit:集成电路)卡(除存储卡)、光卡、掩模ROM、EPROM、EEPROM(Electronically Erasable Programmable Read-Only Memory:电可擦可编程只读存储器)、闪存ROM等半导体存储器等的固定储存程序的介质。
这里所谓程序不只是由CPU可直接执行的程序,也包含源程序形式的程序、被压缩处理的程序、被加密的程序等。
<关于光传感器内置的液晶面板的构成以及驱动>
接下来,对液晶面板140的构成和该液晶面板140的周边电路的构成进行说明。图3是表示了液晶面板140的构成和该液晶面板140的周边电路的图。
参照图3,液晶面板140包括像素电路141、光传感器电路144、扫描信号线Gi、数据信号线SRj、数据信号线SGj、数据信号线SBj、传感器信号线SSj、传感器信号线SDj、读出信号线RWi、复位信号线RSi。其中,i、j是自然数,满足1≤i≤m、1≤j≤n。
另外,图2所示的显示装置102的驱动器130作为液晶面板140的周边电路包括扫描信号线驱动电路131、数据信号线驱动电路132、光传感器驱动电路133、开关134、放大器135。
扫描信号线驱动电路131从图2所示的驱动器控制部181接受控制信号TC1。而且,扫描信号线驱动电路131基于控制信号TC1从扫描信号线G1顺序对于各扫描信号线(G1~Gm)施加预定的电压。更详细地,扫描信号线驱动电路131每单位时间从扫描信号线(G1~Gm)中依次选择1个扫描信号线,对于该选择了的扫描信号线施加仅能使后述的TFT(Thin Film Transistor:薄膜晶体管)142的栅极导通的电压(以下称为高电平电压)。此外,对于没被选择的扫描信号线不施加高电平电压,维持施加的低电平电压。
数据信号线驱动电路132从图2所示的驱动器控制部181接受图像数据(DR、DG、DB)。而且,数据信号线驱动电路132对于3n个数据信号线(SR1~SRn、SG1~SGn、SB1~SBn)每上述单位时间依次施加与1行图像数据对应的电压。
此外,这里使用所谓的被称为线依次方式的驱动方式进行了说明,但是驱动方式并不限于此。
像素电路141是用于设定一个像素的亮度(透过率)的电路。另外,像素电路141矩阵状地配置m×n个。具体而言,像素电路141被配置成图3的纵向m个、横向n个。
像素电路141由R子像素电路141r、G子像素电路141g、B子像素电路141b构成。这3个电路(141r、141g、141b)各自包括TFT142、由像素电极和对置电极构成的1组电极对143、未图示的电容。
此外,由于能够实现制作n型晶体管和p型晶体管的CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)、载流子(电子或者空穴)的移动速度比非晶硅薄膜晶体管(a-Si TFT)快数百倍等,所以在显示装置102作为TFT142使用多晶硅薄膜晶体管(p-Si TFT)。此外,TFT142以n沟道型场效应晶体管进行说明。但是,TFT142也可以是p沟道型场效应晶体管。
R子像素电路141r内的TFT142的源极与数据信号线SRj连接。另外,该TFT142的栅极与扫描信号线Gi连接。还有,该TFT142的漏极与电极对143的像素电极连接。而且,在像素电极和对置电极间配置液晶。此外,关于G子像素电路141g以及B子像素电路141b也是除连接各TFT142的源极的数据信号线不同以外,结构与R子像素电路141r相同。因此,关于这些2个电路(141g、141b)的说明不再重复。
这里,对像素电路141中的亮度的设定进行说明。首先,在扫描信号线Gi施加上述高电平电压。通过施加该高电平电压,TFT142的栅极导通。这样,在TFT142的栅极导通了的状态,对于各数据信号线(SRj、SGj、SBj)分别施加指定的电压(与1像素的图像数据对应的电压)。据此,基于该指定的电压的电压被施加到像素电极。其结果是,在像素电极和对置电极间产生电位差。基于该电位差,液晶响应,像素的亮度被设定为预定的亮度。此外,该电位差由上述未图示的电容(辅助电容)保持到在下一帧期间扫描信号线Gi被选择。
光传感器驱动电路133从图2所示的驱动器控制部181接受控制信号TC2。
而且,光传感器驱动电路133基于控制信号TC2,每单位时间从复位信号线(RS1~RSm)中依次选择一个信号线,对该选择了的信号线在预定的定时施加电平比通常高的电压VDDR。此外,对于没有被选择的复位信号线维持施加比施加于选择了的复位信号线的电压低的电压VSSR。例如,可以将电压VDDR设定为0V、将电压VSSR设定为-5V。
另外,光传感器驱动电路133基于控制信号TC2,单每位时间从读出信号线(RW1~RWm)中依次选择一个信号线,对于该选择了的信号线在预定的定时施加电平比通常高的电压VDD。此外,对于没有被选择的读出信号线维持施加的上述电压VSSR。例如,可以将VDD的值设定为8V。
此外,关于施加电压VDDR的定时以及施加电压VDD的定时将在后述。
光传感器电路144包括光电二极管145、电容146、TFT147。此外,以下,TFT147以n沟道型场效应晶体管进行说明。但是,TFT147也可以是p沟道型场效应晶体管。
光电二极管145的阳极与复位信号线RSi连接。另外,光电二极管145的阴极与电容146的一方电极连接。另外,电容146的另一方电极与读出信号线RWi连接。此外,以下,将光电二极管145和电容146的连接点称为“节点N”。
TFT147的栅极与节点N连接。另外,TFT147的漏极与传感器信号线SDj连接。还有,TFT147的源极与传感器信号线SSj连接。关于使用了光传感器电路144的感测的详细情况将在后述。
开关134是用于切换是否对传感器信号线(SD1~SDn)施加预定的电压而设定的开关。开关134的切换动作通过光传感器驱动电路133进行。此外,关于在开关134成为导通状态的情况下施加于传感器信号线(SD1~SDn)的电压将在后述。
放大器135放大从各传感器信号线(SS1~SSn)输出的电压。此外,放大的电压被发送到图2所示的信号处理部183。
此外,关于利用像素电路141使图像在液晶面板140显示的定时、利用光传感器电路144进行感测的定时,由图像处理引擎180控制。
图4是液晶面板140和背光源179的剖视图。参照图4,液晶面板140包括有源矩阵基板151A、对置基板151B、液晶层152。对置基板151B与有源矩阵基板151A对置配置。液晶层152夹在有源矩阵基板151A和对置基板151B间。背光源179关于有源矩阵基板151A配置在与液晶层152相反的一侧。
有源矩阵基板151A包括偏振滤光器161、玻璃基板162、构成电极对143的像素电极143a、光电二极管145、数据信号线157、取向膜164。还有,图4未示出,有源矩阵基板151A包括图3所示的电容146、TFT147、TFT142、扫描信号线Gi。
另外,在有源矩阵基板151A中,从背光源179侧按照下述顺序配置偏振滤光器161、玻璃基板162、像素电极143a以及取向膜164。光电二极管145和数据信号线157形成于玻璃基板162的液晶层152侧。
对置基板151B包括偏振滤光器161、玻璃基板162、遮光膜163、滤色器(153r、153g、153b)、构成电极对143的对置电极143b、取向膜164。
另外,在对置基板151B中,从液晶层152侧按照下述顺序配置取向膜164、对置电极143b、滤色器(153r、153g、153b)、玻璃基板162以及偏振滤光器161。遮光膜163形成于与滤色器(153r、153g、153b)相同的层。
滤色器153r是使红色波长的光透过的滤色器。滤色器153g是使绿色波长的光透过的滤色器。滤色器153b是使蓝色波长的光透过的滤色器。这里,光电二极管145配置在与滤色器153b对置的位置。
液晶面板140通过使有外部光、背光源179等光源发射的光遮蔽或者透过从而进行图像的显示。具体地说,液晶面板140通过在像素电极143a和对置电极143b间施加电压使液晶层152的液晶分子的取向变化而使上述光或者遮蔽或者透过。但是,由于只用液晶不能使光完全遮蔽,所以配置只使确定的偏振方向的光透过的偏振滤光器161。
此外,光电二极管145的位置并不限于上述的位置,也可以设置在与滤色器153r对置的位置或与滤色器153g对置的位置。
这里,对光传感器电路144的动作进行说明。图5是表示了使光传感器电路144动作时的时序图。在图5中,电压VINT表示光传感器电路144内的节点N的电位。另外,电压VPIX是从图3所示的传感器信号线SSj输出的电压,表示由放大器135放大前的电压。
以下,分为用于复位光传感器电路144的复位期间、用于使用光传感器电路144感测光的感测期间、读出感测的结果的读出期间进行说明。
首先,对复位期间进行说明。在复位期间,将施加于复位信号线RSi的电压瞬间地从低电平(电压VSSR)切换到高电平(电压VDDR)。另外,施加于读出信号线RWi的电压维持低电平(电压VSSR)不变。这样,通过在复位信号线RSi施加上述高电平的电压,光电二极管145开始流有正向(从阳极侧到阴极侧)的电流。其结果是,作为节点N的电位的电压VINT成为下式(1)所示的值。此外,在式(1)中,设光电二极管145正向压降为Vf。
VINT=VSSR+|VDDR-VSSR|-Vf … (1)
因此,节点N的电位如图5所示那样,成为比电压VDDR小Vf的值。
这里,电压VINT为使TFT147的栅极轮流导体的阈值以下,所以无来自传感器信号线SSj的输出。因此,电压VPIX不变化。另外,在电容146的电极间产生上述电压VINT部分之差。因此,在电容146积蓄与该差对应的电荷。
接下来,对感测期间进行说明。在继复位期间的感测期间,施加于复位信号线RSi的电压被瞬间地从高电平(电压VDDR)切换到低电平(电压VSSR)。另外,施加于读出信号线RWi的电压维持低电平(电压VSSR)不变。
这样,通过使施加于复位信号线RSi的电压变化为低电平,节点N的电位变成比复位信号线RSi的电压以及读出信号线RWi的电压高。因此,在光电二极管145阴极侧的电压比阳极侧的电压高。即,光电二极管145成为逆偏压状态。在这样的逆偏压状态,如果光电二极管145受光来自光源的光,则从光电二极管145的阴极侧向阳极侧开始流有电流。其结果是,如图5所示那样,节点N的电位(即,电压VINT)随时间变低。
此外,这样由于电压VINT持续降低,所以TFT147的栅极不会成为导通的状态。因此,无来自传感器信号线SSj的输出。因此,电压VPIX不变化。
接下来,对读出期间进行说明。在继感测期间的读出期间,维持施加于复位信号线RSi的电压为低电平(电压VSSR)不变。另外,施加于读出信号线RWi的电压瞬间地从低电平(电压VSSR)切换为高电平(电压VDD)。这里,电压VDD是比电压VDDR高的值。
这样,通过在读出信号线RWi瞬间施加高电平的电压,如图5所示那样,经电容146节点N的电位被上拉。此外,节点N的电位的上升幅度成为与施加于读出信号线RWi的电压对应的值。这里,由于节点N的电位(即,电压VINT)被上拉到使TFT147的栅极导通的阈值以上,所以TFT147的栅极导通。
此时,如果在与TFT147的漏极侧连接的传感器信号线SDj(图3参照)预先施加恒定电压,那么如图5的VPIX图所示那样,从与TFT147的源极侧连接的传感器信号线SSj输出与节点N的电位对应的电压。
这里,如果光电二极管145受光的光量(以下称受光量)少,则如图5的VINT图所示的直线的倾斜变缓。其结果是,电压VPIX与受光量多的情况比变高。这样,光传感器电路144根据光电二极管145的受光量使输出到传感器信号线SSj的电压的值发生变化。
然而,上述内容是着眼于具有m×n个光传感器电路中的一个光传感器电路144就其动作所做的说明。以下,对液晶面板140的各光传感器电路的动作进行说明。
首先,光传感器驱动电路133对于n个传感器信号线(SD1~SDn)的全部施加预定的电压。接下来,光传感器驱动电路133对于复位信号线RS1施加比通常电平高的电压VDDR。此外,关于其他复位信号线(RS2~RSm)以及读出信号线(RW1~RWm)维持施加低电平的电压的状态不变。据此,图3中的第一行的n个光传感器电路进入上述的复位期间。然后,第一行的n个光传感器电路进入感测期间。再然后,第一行的n个光传感器电路进入读出期间。
此外,对于n个传感器信号线(SD1~SDn)的全部施加预定的电压的定时不限于上述的定时,只要是至少在读出期间前施加的定时就行。
如果第一行的n个光传感器电路的读出期间结束,则光传感器驱动电路133对于复位信号线RS2施加比通常电平高的电压VDDR。即,进入第二行的n个光传感器电路的复位期间。如果复位期间结束,则第二行的n个光传感器电路进入感测期间,之后进入读出期间。
以下,上述的处理,依次对第三行的n个光传感器电路、第四行的n个光传感器电路,…第m行的n个光传感器电路进行。其结果是,从传感器信号线(SS1~SSn)顺次输出第一行的感测结果、第二行的感测结果,…,第m行的感测结果。
此外,在显示装置102,如上述那样按每行进行感测,同时按每行从液晶面板140输出感测结果。因此,以下,相对于与从液晶面板140输出的第一行到第m行的m行部分的电压相关的数据,将信号处理部183进行了上述的数据处理后的数据称为“扫描数据”。即,所谓扫描数据是指通过将扫描对象物(例如,用户的手指)扫描得到的图像数据。另外,将基于该扫描数据显示的图像称为“扫描图像”。还有,以下,将感测称为“扫描”。
另外,上述内容中,是以使用全部m×n个光传感器电路进行扫描的构成为例,但是不限于此。也可以采用使用预先选择的光传感器电路,针对液晶面板140的表面的一部分区域进行扫描的构成。
以下,设定电子设备100中两构成的任一结构都采用。还有,设定该构成间的切换通过由基于经操作键177的输入等的主体装置101发送来的指令进行。此外,针对液晶面板140的表面的一部分的区域进行扫描的情况下,由图像处理引擎180进行扫描对象区域的设定。此外,也可以将该区域的设定做成可由用户经操作键177指定的构成。
这样,在针对液晶面板140的表面的一部分区域进行扫描的情况下,关于图像的显示有以下那样的利用形式。第一个是在上述一部分区域(以下称扫描区域)以外的表面的区域显示图像的形式。第二个是在上述扫描区域以外的表面的区域不显示图像的形式。采用哪种形式,基于从主体装置101发送到图像处理引擎180的指令决定。
图6是液晶面板140和背光源179的剖视图,表示了扫描时光电二极管145受光来自背光源179的光的构成。
参照图6,在用户的手指900正在接触液晶面板140的表面的情况下,从背光源179发射的光的一部分在该接触的区域由用户的手指900(大致平面)反射。而且,光电二极管145受光该反射的光。
另外,在手指900没有接触的区域,从背光源179发射的光的一部分也由用户的手指900反射。在这种情况下光电二极管145也受光该反射的光。但是,由于在该区域手指900没有接触到液晶面板140的表面,所以与手指900接触的区域比,光电二极管145的受光量少。此外,从背光源179发射的光中,几乎全部未到达用户的手指900光,不能由光电二极管145受光。
这里,通过使背光源179至少在感测期间点亮,光传感器电路144能够将与用户的手指900反射的光的光量对应的电压从传感器信号线SSj输出。这样,通过控制背光源179的点亮和熄灭,在液晶面板140,根据手指900的接触位置、手指900的接触的范围(由手指900的按压力决定)、手指900相对于液晶面板140的表面的方向等,从传感器信号线(SS1至SSn)输出的电压将发生变化。
通过以上所述,显示装置102能够扫描通过由手指900反射光获得的像(以下也称为反射像)。
此外,作为手指900以外的扫描对象物可以列举手写笔等。
然而,在本实施方式中,作为电子设备100的显示装置以液晶面板为例进行了说明,但是也可以代替液晶面板使用有机EL(Electro-Luminescence:电致发光)面板等其他面板。
<关于数据>
接下来,对在第一单元1001和第二单元1002间交换的指令以及在第一单元1001内的主体装置101和显示装置102间交换的指令进行说明。
图7是表示了指令的概略结构的图。参照图7,指令包括头部DA01、第一场DA02、第二场DA03、第三场DA04、第四场DA05、第五场DA06、预备的数据区域DA07。
图8是用于说明种类“000”的指令(即,感测指令)的图。CPU110将种类“000”的指令(以下称“第一指令”)从第一单元1001的主体装置101发送给第二单元1002。或者,CPU110将第一指令从主体装置101发送给显示装置102。此外,以下,以CPU110将第一指令从第一单元1001的主体装置101发送给第二单元1002的情况为例进行说明。
CPU110在头部DA01写入指令的种类(“000”)、指令的发送目的地等。CPU110在第一场DA02写入编号为“1”的时间的值。CPU110在第二场DA03写入编号为“2”的数据种类的值。CPU110在第三场DA04写入编号为“3”的读取方式的值。CPU110在第四场DA05写入编号为“4”的图像灰度的值。CPU110在第五场DA06写入编号为“5”的分辨率的值。
在第一场DA02设定了“00”的第一指令对于图像处理引擎280请求发送当时的扫描数据。即,感测第一指令请求在图像处理引擎280接收了该第一指令后发送通过使用液晶面板240的光传感器电路扫描得到的扫描数据。另外,在第一场DA02设定了“01”的第一指令请求发送扫描结果存在变化时的扫描数据。还有,在第一场DA02设定了“10”的第一指令请求每一定周期发送扫描数据。
在第二场DA03设定了“001”的第一指令请求发送部分图像的中心坐标的坐标值。另外,在第二场DA03设定了“010”的第一指令请求只发送扫描结果变化了的部分图像。此外,所谓扫描结果变化了是指这次的扫描结果与前次的扫描结果不同。还有,在第二场DA03设定了“100”的第一指令请求发送整体图像。
这里,所谓“整体图像”是使用m×n个光传感器电路进行了扫描时,基于从各光传感器电路输出的电压,由图像处理引擎280生成的图像。另外,所谓“部分图像”是整体图像的一部分。关于部分图像,有关采用请求只发送扫描结果变化了的部分图像的构成的理由将在后述。
此外,也可以采用同时请求上述坐标值和上述部分图像或者上述整体图像的构成。另外,在采用有关在液晶面板240的表面的一部分区域进行扫描的构成的情况下,上述整体图像成为与进行扫描区域对应的图像。
在第三场DA04设定了“00”的感测第一指令请求点亮背光源279进行扫描。另外,在第三场DA04设定了“01”的第一指令请求熄灭背光源279进行扫描。此外,关于熄灭背光源279进行扫描的构成后述(图17)。还有,在第三场DA04设定了“10”的第一指令请求同时采用反射和透射进行扫描。此外,所谓同时采用反射和透射是指切换点亮背光源279进行扫描的方式、熄灭背光源进行扫描的方式进行扫描对象物的扫描。
在第四场DA05设定了“00”的第一指令请求黑白2值的图像数据。另外,在第四场DA05设定了“01”的第一指令请求多灰度的图像数据。还有,在第四场DA05设定了“10”的第一指令请求RGB彩色的图像数据。
在第五场DA06设定了“0”的第一指令请求分辨率高的图像数据。另外,在第五场DA06设定了“1”的第一指令请求分辨率低的图像数据。
另外,在上述第一指令除记载了图8所示的数据以外,还记载了进行了扫描的区域(驱动光传感器电路144的像素的区域)的指定、进行扫描的时间、背光源179的点亮的时间等。
此外,图像处理引擎280解析第一指令的内容,将源于该解析的结果的数据(即,响应数据)送还给主体装置101。
图9是用于说明种类“001”的指令(以下称“第二指令”)的图。CPU110将第二指令从第一单元1001的主体装置101发送给第二单元1002。
CPU110在头部DA01写入指令的种类(“001”)、指令的发送目的地等。CPU110在第一场DA02写入编号为“1”的显示请求的值。CPU110在第二场DA03写入编号为“2”的个数/种类有关的信息。CPU110在第三场DA04写入编号为“3”的显示范围的值。CPU110在第四场DA05写入编号为“4”的图像数据有关的信息。
在第一场DA02设定了“001”的第二指令对图像处理引擎280请求在液晶面板240(子画面)显示图像。另外,在第一场DA02设定了“010”的第二指令对图像处理引擎280请求在液晶面板240显示图标。还有,在第一场DA02设定了“011”的第二指令对图像处理引擎280请求在液晶面板240显示手写区域。
在第二场DA03储存有使液晶面板240显示的图像的个数以及指定手写语言的种类的编号。图像处理引擎280进行与该图像的个数或者语言的种类对应的处理。
在第三场DA04设定了“01”的第二指令对图像处理引擎280请求将液晶面板240中的显示范围以坐标指定。另外,在第三场DA04设定了“10”的第二指令对图像处理引擎280请求将液晶面板240中的显示范围作为全体显示区域。
在第四场DA05储存有使液晶面板240显示的图像数据、显示该图像数据的位置信息。图像处理引擎280进行如下处理:在以该位置信息确定的位置显示该图像数据。
图10是用于说明种类“010”的指令(以下称“第三指令”)的图。CPU110将第三指令从第一单元1001的主体装置101发送给第二单元1002。或者,CPU210将第三指令从第二单元1002的主体装置104发送给第一单元1001。
CPU110、210在头部DA01写入指令的种类(“010”)、指令的发送目的地等。CPU110、210在第一场DA02写入编号为“1”的OS(Operating System)处理请求的值。CPU110、210在第二场DA03写入编号为“2”的OS信息的值。
在第一场DA02设定了“01”或“10”的第三指令从第二单元1002发送给第一单元1001。
在第一场DA02设定了“01”的第三指令对第一单元1001请求发送表示了该第一单元1001(主装置)的OS的种类的信息。另外,在第一场DA02设定了“10”的第三指令对第一单元1001请求启动由OS信息指定的OS。
在第二场DA03设定了“000”、”001”或者“010”的第三指令从第二单元1002发送给第一单元1001。
在第二场DA03设定了“000”的第三指令不请求启动第一单元1001的OS。另外,在第二场DA03设定了“001”的第三指令表示第二单元1002选择了启动第一OS。还有,在第二场DA03设定了“010”的第三指令表示第二单元1002选择了启动第二OS。
图11是用于说明种类“011”的指令(以下称“第四指令”)的图。CPU210将第四指令从第二单元1002的主体装置104发送给第一单元1001。
CPU210在头部DA01写入指令的种类(“011”)、指令的发送目的地等。CPU210在第一场DA02写入编号为“1”的启动应用有关的信息。CPU210在第二场DA03写入编号为“2”的启动时间信息。
在第一场DA02储存有在第一单元1001指定启动应用的信息。在第二场DA03储存有启动设定时使用的信息以及启动后使用的信息。
图12是用于说明种类“100”的指令(以下称“第五指令”)的图。CPU210将第五指令从第二单元1002的主体装置104发送给第一单元1001。
CPU210在头部DA01写入指令的种类(“100”)、指令的发送目的地等。CPU210在第一场DA02写入编号为“1”的接收请求有关的信息。CPU210在第二场DA03写入编号为“2”的个数有关的信息。CPU210在第三场DA04写入编号为“3”的文件有关的信息。
在第一场DA02设定了“01”的第五指令对第一单元1001请求接收文件。另外,在第二场DA03储存有第二单元1002发送给第一单元1001的文件的个数。还有,在第三场DA04储存有第二单元1002发送给第一单元1001的文件。
图13是用于说明种类“101”的指令(以下称“第六指令”)的图。CPU110将第六指令从第一单元1001的主体装置101发送给第二单元1002。或者,CPU210将第六指令从第二单元1002的主体装置104发送给第一单元1001。
CPU110、210在头部DA01写入指令的种类(“101”)、指令的发送目的地等。CPU110、210在第一场DA02写入编号为“1”的通信种类的值。CPU110、210在第二场DA03写入编号为“2”的连接目的地的值。CPU110、210在第三场DA04写入编号为“3”的传送目的地的值。CPU110、210在第四场DA05写入编号为“4”的信号强度的取得定时的值。
在第一场DA02设定了“001”的第六指令请求对对象侧的装置进行红外线通信。另外,在第一场DA02设定了“010”的第六指令请求对对象侧的装置进行源于Bluetooth(注册商标)的无线通信。还有,在第一场DA02设定了“011”的第六指令请求对对象侧的装置进行LAN通信。
在第二场DA03设定了“000”的第六指令表示不具有指定通信的连接目的地的信息。
另外,在第二场DA03设定了“001”的第六指令由第一单元1001发送给该第一单元1001的连接目的地的装置。这样的第六指令请求发送与第一单元1001连接的装置有关的信息。
还有,在第二场DA03设定了“010”的第六指令由第二单元1002发送给该第二单元1002的连接目的地的第一单元1001。这样的第六指令请求发送与第二单元1002连接的第一单元1001有关的信息。
另外,在第二场DA03设定了“011”的第六指令由第二单元1002发送给该第二单元1002的连接目的地第一单元1001。这样的第六指令请求将与第二单元1002有关的信息作为连接目的地的设备信息进行设定。
还有,在第二场DA03设定了“100”的第六指令由第一单元1001发送给该第一单元1001的连接目的地的装置(例如,第二单元1002)。这样的第六指令请求将与第一单元1001有关的信息作为连接目的地的设备信息进行设定。
在第三场DA04设定了“000”的第六指令表示不具有指定数据(例如,文件)的传送目的地的信息。
另外,在第三场DA04设定了“001”的第六指令由第一单元1001发送给数据传送目的地的装置。这样的第六指令请求发送与数据传送目的地的装置有关的信息。
还有,在第三场DA04设定了“010”的第六指令由第二单元1002发送给数据传送目的地的第一单元1001。这样的第六指令请求发送与数据传送目的地的第一单元1001有关的信息。
另外,在第三场DA04设定了“011”的第六指令由第二单元1002发送给数据传送目的地的第一单元1001。这样的第六指令请求将与第二单元1002有关的信息作为数据传送源的设备信息进行设定。
还有,在第三场DA04设定了“100”的第六指令由第一单元1001发送给数据传送目的地的装置(例如,第二单元1002)。这样的第六指令请求将与第一单元1001有关的信息作为数据传送源的设备信息进行设定。
在第四场DA05设定了“00”、“01”、“10”或者“11”的第六指令由第一单元1001发送给第二单元1002。
在第四场DA05设定了“00”的第六指令不请求对第二单元1002发送表示了信号强度的数据。另外,在第四场DA05设定了“01”的第六指令请求对信号强度检测部297发送表示了当时的信号强度的数据。还有,在第四场DA05设定了“10”的第六指令请求发送表示了信号强度发生了变化时的信号强度的数据。另外,第四场DA05设定了“11”的第六指令请求每一定周期发送表示了信号强度的数据。
图14是表示了响应数据的概略结构的图。响应数据是对应于第一指令(感测指令)的内容的数据。
在第一指令从主体装置101发送给第二单元1002的情况下,CPU210将响应数据从显示装置103发送给第一单元1001。另外,在第一指令从主体装置101发送给第一单元1001的显示装置102的情况下,图像处理引擎180将响应数据从图像处理引擎180发送给主体装置101。此外,以下,以第一指令从主体装置101发送给第二单元1002的情况为例进行说明。
参照图14,响应数据包括头部的数据区域DA11、表示坐标的数据区域DA12、表示时刻的数据区域DA13、表示图像的数据区域DA14。这里,在表示坐标的数据区域DA12写入部分图像的中心坐标的值。另外,在表示时刻的数据区域写入从图像处理引擎280的定时器282取得的时刻信息。还有,在表示图像的数据区域写入由图像处理引擎280处理后的图像数据(即,扫描数据)。
图15是表示了通过扫描手指900得到的图像(即,扫描图像)的图。参照图15,以粗实线围起的区域W1的图像是全体图像,以虚线围起的区域P1的图像是部分图像。另外,以粗线表示的十字的中心点C1为中心坐标。
在本实施方式中,是矩形的区域,并且以包含下述像素的区域作为部分图像的区域,所述像素是来自传感器信号线SSj的输出电压成为预定的值以上的光传感器电路所具有的全部像素(即,预定的灰度或者预定的亮度以上的像素)。
另外,中心坐标是考虑部分图像的区域中的各像素的灰度而决定的坐标。具体地说,中心坐标与部分图像内的各像素相关,基于像素的灰度、该像素与上述矩形的中心点(即图心)的距离,通过进行加权处理而决定。即,中心坐标未必与部分图像的图心一致。
但是,中心坐标的位置不限于如上所述,也可以将中心坐标设为上述图心的坐标或者图心的附近的坐标。
在表示第一指令的数据种类的数据区域设定“001”的情况下,图像处理引擎280在表示坐标的数据区域DA12写入上述中心坐标的值。在这种情况下,图像处理引擎280不在表示图像的数据区域DA14写入图像数据。图像处理引擎280写入了上述中心坐标的值后,将包含该中心坐标的值的响应数据发送给主体装置104。主体装置104将包含该中心坐标的值的响应数据发送给第一单元1001的主体装置101。这样,在表示数据种类的数据区域设定“001”的情况下,第一指令不请求输出图像数据,而请求输出中心坐标的值。
另外,在表示第一指令的数据种类的数据区域设定“010”的情况下,图像处理引擎280在表示图像的数据区域DA14写入扫描结果发生变化了的部分图像的图像数据。在这种情况下,图像处理引擎280不在表示坐标的数据区域DA12写入中心坐标的值。图像处理引擎280写入了上述扫描结果发生变化了的部分图像的图像数据后,将包含该部分图像的图像数据的响应数据发送给主体装置104。主体装置104将包含该部分图像的图像数据的响应数据发送给第一单元1001的主体装置101。这样,在表示数据种类的数据区域设定“010”的情况下,第一指令不请求输出中心坐标的值,而请求输出扫描结果发生变化了的部分图像的图像数据。
此外,如上述那样,采用只请求发送扫描结果发生变化了的部分图像的构成的理由为,扫描数据中部分图像的区域的扫描数据是比该区域以外的扫描数据重要度高的数据,以及,根据与手指900等的扫描对象物的接触状态,扫描数据中与部分图像的区域相当的区域的扫描数据易发生变化。
另外,在表示第一指令的数据种类的数据区域设定“011”的情况下,图像处理引擎280在表示坐标的数据区域DA12写入中心坐标的值,同时在表示图像的数据区域DA14写入扫描结果发生变化了的部分图像的图像数据。然后,图像处理引擎28将包含该中心坐标的值和该部分图像的图像数据的响应数据发送给主体装置104。主体装置104将包含该中心坐标的值和该部分图像的图像数据的响应数据发送给第一单元1001的主体装置101。这样,在表示数据种类的数据区域设定“011”的情况下,第一指令请求输出中心坐标的值、输出扫描结果发生变化了的部分图像的图像数据。
另外,在表示第一指令的数据种类的数据区域设定“100”的情况下,图像处理引擎280在表示图14所示的响应数据的图像的数据区域DA14写入全体图像的图像数据。在这种情况下,图像处理引擎280不将中心坐标的值写入表示坐标的数据区域DA12。图像处理引擎280写入了上述全体图像的图像数据后,将包含该全体图像的图像数据的响应数据发送给主体装置104。主体装置104将包含该全体图像的图像数据的响应数据发送给第一单元1001的主体装置101。这样,在表示数据种类的数据区域设定“100”的情况下,第一指令不请求输出中心坐标的值,而请求输出全体图像的图像数据。
另外,在表示第一指令的数据种类的数据区域设定“101”的情况下,图像处理引擎280在表示坐标的数据区域DA12写入中心坐标的值,同时在表示图像的数据区域DA14写入全体图像的图像数据。然后,图像处理引擎280将包含该中心坐标的值和该全体图像的图像数据的响应数据发送给主体装置104。主体装置104将包含该中心坐标的值和该全体图像的图像数据的响应数据发送给第一单元1001的主体装置101。这样,在表示数据种类的数据区域设定“101”的情况下,第一指令请求输出中心坐标的值、输出全体图像的图像数据。
<关于构成的第一变形例>
然而,液晶面板140的构成不限于图3所示的构成。以下,对与图3不同方式的液晶面板进行说明。
图16是上述不同方式的光传感器内置的液晶面板140A的电路图。参照图16,光传感器内置的液晶面板140A(以下称液晶面板140A)在1个像素内包含3个光传感器电路(144r、144g、144b)。这样,在液晶面板140A在1个像素内具有3个光传感器电路(144r、144g、144b)这一点,与液晶面板140A在1个像素内具有一个光传感器电路的液晶面板140不同。此外,光传感器电路144的构成、3个各光传感器电路(144r、144g、144b)的构成相同。
另外,1个像素内的3个光电二极管(145r、145g、145b)分别配置在与滤色器153r、滤色器153g、滤色器153b对置的位置。因此,光电二极管145r受光红色的光,光电二极管145g受光绿色的光,光电二极管145b受光蓝色的光。
另外,由于液晶面板140在1个像素内只包含一个光传感器电路144,所以配设在1个像素内的TFT147用的数据信号线为传感器信号线SSj和传感器信号线SDj共2条。然而,由于液晶面板140A在1个像素内包含3个光传感器电路(144r、144g、144b),所以配设于1个像素内的TFT(147r、147g、147b)用的数据信号线共6条。
具体地说,与连接于配置在与滤色器153r对置的位置的光电二极管145r的阴极的TFT147r对应,配设传感器信号线SSRj和传感器信号线SDRj。另外,与连接于配置在与滤色器153g对置的位置的光电二极管145g的阴极的TFT147g对应,配设传感器信号线SSGj和传感器信号线SDGj。还有,与连接于配置在与滤色器153b对置的位置的光电二极管145b的阴极的TFT147b对应,配设传感器信号线SSBj和传感器信号线SDBj。
在这样的液晶面板140A,从背光源179照射的白色光透过3个滤色器(153r、153g、153b),在液晶面板140A的表面,成为混合了红绿蓝的白色光。这里,如果通过扫描对象物反射白色光,则在扫描对象物的表面的色素吸收白色光的一部分,并反射一部分。于是,反射的光再度透过3个滤色器(153r、153g、153b)。
此时,滤色器153r透过红色波长的光,光电二极管145r受光该红色波长的光。另外,滤色器153g透过绿色波长的光,光电二极管145g受光该绿色波长的光。另外,滤色器153b透过蓝色波长的光,光电二极管145b受光该蓝色波长的光。即,由扫描对象物反射的光由3个滤色器(153r、153g、153b)将其色分解为3原色(R,G,B),各光电二极管(145r、145g、145b)受光对应各自颜色的光。
在扫描对象物的表面的色素吸收白色光的一部分后,各光电二极管(145r、145g、145b)的受光量在各光电二极管(145r、145g、145b)将不同。因此,传感器信号线SSRj、传感器信号线SSGj、传感器信号线SSBj的输出电压相互不同。
因此,根据各输出电压,图像处理引擎180通过决定R的灰度、G的灰度、B的灰度,能够将RGB彩色图像发送给主体装置101。
如以上所述,通过采用电子设备100具有液晶面板140A的构成,能够以彩色扫描被扫描对象物。
接下来,参照图17,对与上述的扫描的方法(即,图6的扫描反射像的方法)不同的扫描方法进行说明。
图17是表示了扫描时光电二极管受光外部光的构成的剖视图。如同图所示那样,外部光的一部分因手指900被遮蔽。因此,配置在与手指900接触的液晶面板140的表面区域的下部的光电二极管几乎不能受光外部光。另外,虽然配置在手指900的影形成的表面区域的下部的光电二极管能够受光某程度的外部光,但是与没有形成影的表面区域比外部光的受光量很少。
这里,通过使背光源179至少在感测期间熄灭,光传感器电路144能够从传感器信号线SSj输出与手指900对着液晶面板140的表面的位置相对应的电压。这样,通过控制背光源179的点亮和熄灭,在液晶面板140,根据手指900的接触位置、手指900的接触范围(由手指900的按压力决定),手指900对着液晶面板140的表面的方向等,从传感器信号线(SS1到SSn)输出的电压将发生变化。
按以上内容,显示装置102能够扫描因手指900遮蔽外部光而得到的像(以下也称为影像)。
还有,也可以使显示装置102采用在使背光源179点亮进行扫描后,使背光源179熄灭进行再度扫描的构成。或者,也可以使显示装置102采用使背光源179熄灭进行扫描后,使背光源179点亮进行再度扫描的构成。
此时由于同时采用2个扫描方式,所以能够获得2个扫描数据。因此,与只是有一个扫描方式进行扫描的情况相比,能够获得精度高的结果。
<关于显示装置>
显示装置103的动作与显示装置102的动作相同,根据来自主体装置101的指令(例如,第一指令)控制。显示装置103具有与显示装置102相同的构成。因此,显示装置103与显示装置102一样,在从主体装置101受理指令的情况下,显示装置103进行与显示装置102相同的动作。因此,关于显示装置103的构成或动作的说明不再重复。
此外,主体装置101能够对显示装置102和显示装置103发送命令不同的指令。在这种情况下,显示装置102和显示装置103进行各自的动作。另外,主体装置101也可以对显示装置102以及显示装置103任1个发送指令。在这种情况下,只有一个显示装置进行与指令对应的动作。另外,主体装置101也可以对显示装置102和显示装置103发送命令相同的指令。在这种情况下,显示装置10和显示装置103进行相同的动作。
此外,显示装置102的液晶面板140的尺寸和显示装置103的液晶面板240的尺寸既可以相同或者也可以不同。另外,液晶面板140的分辨率和液晶面板240的分辨率既可以相同或者也可以不同。
<关于构成的第二变形例>
在本实施方式中,对电子设备100具有在液晶面板140和液晶面板240各自内置了光传感器的液晶面板的构成进行说明,但是采用只有一方的液晶面板内置了光传感器的构成也可以。
图18使表示电子设备1300的硬件构成的框图。电子设备1300与电子设备100相同,包括第一壳体100A、第二壳体100B。另外,参照图18,电子设备1300包括第一单元1001A、第二单元1002。第一单元1001A包括主体装置101、显示装置102A。第二单元1002包括主体装置104、显示装置103。
显示装置102A包括未内置光传感器的液晶面板(即,只具有显示功能的液晶面板)。电子设备1300在包括第一单元1001A未内置光传感器的液晶面板这一点,与包含第一单元1001内置了光传感器的液晶面板240的电子设备100不同。这样的电子设备1300使用第二单元1002的显示装置103进行上述的感测。
另外,第一单元1001也可以代替内置了光传感器的液晶面板140,而具有例如电阻膜式或静电电容式的触摸面板。
另外,在本实施方式中,以显示装置102具有定时器182,显示装置103具有定时器282的构成进行说明,但是也可以采用显示装置102和显示装置103共有一个定时器的构成。
另外,在本实施方式中,电子设备100以折畳型的设备进行说明,但是电子设备100不限于折畳型。例如,电子设备100也可以是第一壳体100A相对第二壳体100B 滑动构成的滑动式的设备。
本实施方式的电子设备100如上述那样构成,所以第二单元1002能够经USB连接器194、294从第一单元1001自如装卸。
然后,本实施方式的电子设备100例如在电源接通时,能够发挥以下那样的功能。首先,用户按下第一单元1001的电源开关191后,第一单元1001利用来自电源电路192的电力使BIOS(Basic Input/Output System:基本输入/输出系统)启动。
第二单元1002经USB连接器194,294从第一单元1001取得电力。第二单元1002利用该电力能够与第一单元1001间收发数据。此时,第二单元1002的CPU210使用来自USB连接器194、294的电力,在液晶面板240可选择地显示OS(Operation System:操作系统)的种类。
用户经液晶面板240选择想启动的OS。CPU210根据用户的选择,经USB连接器194、294向第一单元1001发送指定应启动的OS的指令(例如,图10所示的“第一OS”指令)。第一单元1001根据该指令启动OS。
另外,例如,第二单元1002经天线295与外部的移动电话等间进行数据的收发。第二单元1002的CPU210经天线295从外部的移动电话取得照片图像数据或对应的缩略图数据,将该照片图像数据或对应的缩略图数据存储在RAM271等。CPU210从RAM271读出缩略图数据,在液晶面板240可选择地显示照片的缩略图图像。
然后,根据来自外部的选择命令,CPU210在液晶面板240显示照片图像。或者,CPU210经USB连接器294使照片图像在液晶面板140或者显示装置102A显示。
<功能的构成>
参照图19来说明本实施方式的电子设备100的功能的构成。参照图19,电子设备100如已说明的那样,具有第一单元1001、第二单元1002。
第一单元1001包括输入部310、输出部320、存储部330、接口部340、控制部350。
输入部310受理来自外部的指示。在本实施方式中,操作键177起输入部310的功能。另外,内置光传感器的液晶面板140也起输入部310的功能。
输出部320将第一单元1001内部的信息输出到外部。输出部320包括显示图像的显示部322。在本实施方式中,液晶面板140起显示部322的功能。但是,作为显示部322,也可以使用其他显示装置,例如LCD(Liquid Crystal Display:液晶显示器)等显示器。
存储部330储存多个菜单332等的信息。各菜单332可基于输入部310受理的指示进行选择。菜单332包括例如图像的缩略图、指令菜单。
接口部340与第二单元100两侧的接口部440间进行信息的授受。在本实施方式中,在第一单元1001和第二单元1002直接连接的情况下,USB连接器194作为接口部340发挥作用。在第一单元1001和第二单元1002未直接连接的情况下,天线195作为接口部340发挥作用。但是,源于接口部340的信息的授受方法并不限于此。
控制部350基于输入部310受理的指示等控制输出部320、存储部330以及接口部340的动作。
第二单元1002包括显示/输入部410、存储部430、接口部440、控制部450。
显示/输入部410将第二单元1002内部的信息在外部显示。另外,显示/输入部410受理来自外部的指示。在本实施方式中,光传感器内置的液晶面板240以及背光源279起显示/输入部410的功能。但是,显示/输入部410的构成并不限于此。也能够使用其他显示装置,例如LCD(Liquid Crystal Display)等显示器与能多点输入的输入装置的组合物作为显示/输入部410。
存储部430储存多个菜单432以及在显示/输入部410显示的显示数据434等的信息。菜单432与第一单元1001的存储部330存储的菜单332一样,包括例如图像的缩略图、指令菜单。
接口部440与第一单元1001侧的接口部340间进行信息的授受。在本实施方式中,在第一单元1001和第二单元1002直接连接的情况下,USB连接器294作为接口部440发挥作用。在第一单元1001和第二单元1002未直接连接的情况下,天线295作为接口部440发挥作用。但是,源于接口部440的信息的授受方法并不限于此。
控制部450基于显示/输入部410受理的指示等,控制显示/输入部410、存储部430以及接口部440的动作。控制部450包括显示控制部452、位置计算部454、菜单选择部456。
显示控制部452控制液晶面板240以及背光源279,将基于显示数据434的图像在液晶面板240显示。特别是,显示控制部452做成包括多个菜单432的显示数据434,将基于显示数据434的图像在液晶面板240显示。这里,包括多个菜单432的显示数据434包括各菜单432的显示位置信息。
位置计算部454计算来自外部的指示位置。具体地说,位置计算部454例如基于源于液晶面板240的感测结果求部分图像的区域,计算部分图像的区域的中心坐标作为指示位置。在本实施方式中,位置计算部454在具有向液晶面板240的输入的期间,输出指示位置。即,位置计算部454在手指900等的外部物体接触或者接近液晶面板240期间,不断地输出指示位置。
菜单选择部456基于位置计算部454计算了的指示位置,从液晶面板240显示的菜单中选择菜单。关于源于菜单选择部456的菜单的选择方法的详细情况后述。另外,菜单选择部456将选择了的菜单交给接口部440。
<动作>
(概要)
电子设备100使用时,有时需要指定多个文件。电子设备100容易指定源于用户的多个文件。参照图20说明电子设备100的动作的概要。在图20中,作为一例,表示在电子邮件中添加多个文件时的电子设备100的动作。
图20(a)是表示启动电子邮件应用程序时电子设备100显示的画面的图。参照图20(a),第一单元1001侧的液晶面板140显示包括邮件地址(发送至(To))栏、标题(Title)栏、正文栏、添加按钮的画面。第二单元100两侧的液晶面板240什么也不显示。但是,液晶面板240显示任何画面也没有关系。
图20(b)是表示在选择了图20(a)所示的添加按钮时电子设备100显示的画面的图。参照图20(b),液晶面板204显示包括多个菜单(在此为缩略图图像)的画面。这里,液晶面板204显示的菜单既可以是预先存储在第二单元1002,也可以是在选择了添加按钮时从第一单元1001发送给第二单元1002。
用户能够通过以手指900或者手指900#接触液晶面板24选择各缩略图图像。此外,用户也可以代替手指900或者900#,使用手写笔等输入装置选择缩略图图像。
图20(c)是表示同时触摸图20(b)所示的液晶面板240内的图像abc、图像ghi时电子设备100显示的画面的图。2个菜单被同时触摸后,夹在被触摸的图像间的图像作为伪选择图像被提取。液晶面板240以框包围被提取的伪选择图像并显示。但是,液晶面板240也可以将这些候选图像以其他方法突出(highlight)显示。
还有,电子设备100受理确定选择被提取的伪选择图像的指示(称为选择确定指示)后,将伪选择图像确定为选择图像。电子邮件应用程序将被确定的选择图像,即图像abc、图像def以及图像ghi添加到制作中的电子邮件。液晶面板140将添加的图像的文件名显示在添加按钮旁边。
此外,在本实施方式中,电子设备100将向在液晶面板240显示的确定按钮(图20未图示)的触摸视为选择确定指示。然而,选择确定指示不限于此。电子设备100也可以根据2个菜单同时被触摸,无选择确定指示而是将夹在被触摸的图像间的图像作为选择图像进行选择。但是,在使用选择确定指示的本实施方式中,具有防止用户因误选引起的误动作的优点。
如以上说明的那样,电子设备100将包括多个候选的菜单的画面显示在第二单元1002的液晶面板240。因此,电子设备100能够在确保了液晶面板140上的操作空间的状态下,使用户选择菜单。
(多个菜单的选择)
关于本实施方式的电子设备100根据向液晶面板240的输入选择菜单的规则,进行更详细地说明。
在本实施方式中,菜单选择部456将2个指示位置的同时输入视为向多个菜单选择模式的切换指示。即,菜单选择部456从位置计算部454受理2个指示位置的输入后,将以2个指示位置为对角的顶点形成的矩形内的菜单进行伪选择。这里,矩形的各边的方向与显示画面的水平方向或者垂直方向的任一者一致。此外,在2个指示位置的水平坐标或垂直坐标一致的情况下,菜单选择部456将连接2个指示位置的线段上的菜单进行伪选择。
在菜单被伪选择的状态,显示/输入部410受理选择确定指示后,菜单选择部456将被伪选择的菜单确定为选择菜单。在此,菜单选择部456将在液晶面板240显示的确定键的按压视为选择确定指示。
菜单选择部456将选择菜单向接口部440输出。受理选择菜单的接口部440将选择菜单发送给第一单元1001侧的接口部340。第一单元1001侧的控制部350对于选择菜单进行规定的处理。在图20所示例的情况下,控制部350将与选择的缩略图对应的内容添加到电子邮件。
以下,参照图21到图23,说明电子设备100的动作例。
图21是说明电子设备100选择横向排列的菜单的动作的图。参照图21,电子设备100的用户同时用手指900和手指900#分别按压左上缩略图上的区域以及右上缩略图上的区域。此时,位置计算部454同时输出2个指示位置。因此,菜单选择部456将在2个指示位置指定的矩形区域或者线段上的缩略图进行伪选择。
菜单选择部456将伪选择的缩略图进行特定显示。在本实施方式中,菜单选择部456如图21所示那样,以框包围被伪选择了的缩略图进行显示。但是,菜单选择部456也可以以其他方法将被伪选择了的缩略图进行特定显示。
在菜单选择部456将缩略图进行了伪选择的状态下,位置计算部454输出确定按钮500内的指示位置后,菜单选择部456将伪选择了的缩略图进行选择。另外,菜单选择部456将选择了的菜单向接口部440输出。
受理了选择的菜单的接口部440将选择的菜单发送给第一单元1001侧的接口部340。第一单元1001侧的控制部350对选择的菜单进行规定的处理(与选择的缩略图对应的内容)。
图22是说明电子设备100选择纵向排列的菜单的动作的图。参照图22,电子设备100的用户同时用手指900和手指900#分别按压左上缩略图上的区域以及左下缩略图上的区域。
此时,通过与如上说明的相同的处理,菜单选择部456将图22的用框围起的3个缩略图进行伪选择。确定按钮500被按下后,菜单选择部456将伪选择了的缩略图进行选择、输出。第一单元1001侧的控制部350对选择的菜单进行规定的处理。
图23是说明电子设备100选择跨纵3行横3列的菜单的动作的图。参照图23,电子设备100的用户同时用手指900和手指900#分别按压左上缩略图上的区域以及右下缩略图上的区域。
此时,通过与如上说明的相同的处理,菜单选择部456将图23的用框围起的9个缩略图进行伪选择。确定按钮500被按下后,菜单选择部456将伪选择了的缩略图进行选择并输出。第一单元1001侧的控制部350对选择了的菜单进行规定的处理。
(单一菜单的选择)
以上,对菜单选择部456选择多个菜单的规则以及动作例进行了说明。下面,对菜单选择部456选择单一的菜单的规则以及动作例进行说明。
本实施方式的菜单选择部456,向对应一个菜单的区域的一个输入(第一输入)在向对应其他菜单的区域的输入(第二输入)开始前,第一输入结束时,将对应第一输入的菜单进行伪选择。将这样的一个菜单的伪选择称为单选择。以下,参照图24就单选择进行说明。
图24(a)是表示用户的手指900下压一个菜单时的液晶面板240的显示画面的图。此时,菜单选择部456还未进行菜单的伪选择。根据其后的液晶面板240的输入,菜单选择部456确定进行单选择或者多个菜单的伪选择的某一者。
图24(b)是表示在图24(a)所示的状态后,手指900从液晶面板240离开时的液晶面板的显示画面的图。此时,菜单选择部456提取被下压的菜单。在本实施方式中,显示控制部452控制液晶面板240,将被单选择的菜单进行突出显示。菜单选择部456在确定按钮500被下压后,将被单选择的菜单向接口部440输出。
还有,菜单选择部456根据单选择操作的重复,能够连续选择单一菜单。关于单一菜单的连续选择参照图25进行说明。
图25(a)是表示在一个菜单被提取的状态下,用户的手指900按压另一个菜单时的液晶面板240的显示画面的图。此时,菜单选择部456还未提取被下压的菜单。
图25(b)是表示在图25(a)所示的状态后,手指900从液晶面板240离开时的液晶面板的显示画面的图。此时,菜单选择部456将下压的菜单进行伪选择。菜单选择部456在如图25(a)所示时就被伪选择的菜单继续进行伪选择。菜单选择部456在确定按钮500被下压、如图25(a)所示时将被伪选择的菜单以及被新伪选择的菜单进行选择,将选择了的菜单向接口部440输出。
此外,与多个菜单的选择时相同,菜单选择部456也可以不下压确定按钮500就将菜单向接口部440输出。但是,用户为了进行单一菜单的连续选择,如本实施方式那样,优选是菜单选择部456将菜单进行伪选择,根据确定按钮500的按压,进行伪选择了的菜单的选择及输出。
(选择解除)
还有,菜单选择部456根据向伪选择的菜单的再度下压,解除菜单的伪选择。由此,用户在按压了不希望的菜单的情况下,能够解除下压的菜单的伪选择。
参照图26,对对于一个菜单的伪选择的解除进行说明。图26(a)是表示手指900下压了伪选择的菜单时的液晶面板240的显示画面的图。图26(b)是表示在图26(a)所示的状态后,手指900从液晶面板240离开时的液晶面板240的显示画面的图。手指900从伪选择的菜单离开后,菜单选择部456解除用手指900下压的菜单的伪选择。还有,菜单选择部456将伪选择的菜单的显示方式返回到通常的显示方式。
菜单选择部456也可以从伪选择的多个菜单中解除特定的菜单的伪选择。参照图27说明这样的动作例。
图27(a)是表示手指900下压被伪选择的2个菜单中的一个菜单时的液晶面板240的显示画面的图。图27(b)是表示在图27(a)所示的状态后,手指900从液晶面板240离开时的液晶面板240的显示画面的图。手指900从伪选择的菜单离开后,菜单选择部456解除手指900下压的菜单的伪选择。还有,菜单选择部456将伪选择的菜单的显示方式返回到通常的显示方式。
根据这样的选择解除,用户在伪选择了多个菜单后,能够解除其一部分菜单的伪选择。因此,用户能够用各种各样的选择方法选择菜单。例如,用户能够伪选择矩形内的菜单、解除其中的一个菜单的伪选择等。
(复合选择)
在本实施方式中,菜单选择部456使用伪选择处理、选择确定指示进行菜单的选择。因此,菜单选择部456在进行了多次伪选择后,通过发出选择确定指示,能够以各种选择方法选择菜单。将这样的选择方法称为复合选择。
参照图28就复合选择进行说明。图28(a)是表示通过手指900的下压,菜单选择部456伪选择了一个菜单时的液晶面板240的显示画面的图。
图28(b)是表示在图28(a)所示的状态后,手指900触摸一个菜单、手指900#触摸另一个菜单时的液晶面板240的显示画面的图。在图28(b)所示的状态下,菜单选择部456除在图28(a)所示的状态下伪选择的菜单外,也将夹在手指900的指示位置以及手指900#的指示位置间的菜单进行伪选择。
这样,若使用复合选择,则用户能够以各种模式选择菜单。
(处理流程)
下面,参照图29说明菜单选择部456进行的处理的流程。这里,对图20等所示的例,关于缩略图图像等的内容的选择处理进行说明,但是该说明也适合一般的菜单的选择处理。
在步骤S101,菜单选择部456判断是否从位置计算部454受理了第一选择指示。这里,所谓“选择指示”是指与菜单的显示区域对应的指示位置。另外,在此,将菜单选择部456在没有受理其他选择指示时受理的选择指示称为第一选择指示。
在判断没有受理第一选择指示的情况下(步骤S101中“否”),菜单选择部456重复步骤S101的处理。
在判断为受理了第一选择指示的情况下(步骤S101中“是”),在步骤S103,菜单选择部456判断第一选择指示是否已结束。具体而言,菜单选择部456在位置计算部454中止了第一选择指示的指示位置的输出时,判断为第一选择指示已结束。
在判断为第一选择指示已结束的情况下(步骤S103中“是”),菜单选择部456在步骤S104,将与第一选择指示的指示位置对应的菜单进行伪选择。
在步骤S105,菜单选择部456将伪选择了的内容突出显示。这里的所谓突出显示是指以框包围内容等的内容的特定显示。之后,菜单选择部456重复从步骤S101的处理。
在步骤S103,在判断为第一选择指示还未结束的情况下(步骤S104中“否”),菜单选择部456在步骤S107,判断是否受理了第二选择指示。所谓第二选择指示是与第一选择指示不同的选择指示。
在判断为没有受理第二选择指示的情况下(步骤S107中“否”),菜单选择部456重复从步骤S103的处理。
在判断为第二选择指示已结束的情况下(步骤S107中“是”),菜单选择部456在步骤S109,基于第一选择指示的指示位置以及第二选择指示的指示位置将内容进行伪选择。关于步骤S109处理的详细情况后述。
在步骤S111,菜单选择部456将在步骤S109伪选择的内容突出显示。
在步骤S113,菜单选择部456判断有无取消伪选择的指示。在本实施方式中,菜单选择部456将伪选择的内容的再下压视为伪选择的取消指示。
在有取消指示的情况下(步骤S113中“是”),菜单选择部456根据取消指示解除伪选择,重复从步骤S101的处理。
在无取消指示的情况下(步骤S113中“否”),在步骤S115,菜单选择部456判断有无选择确定指示。在本实施方式中,菜单选择部456在位置计算部454输出的指示位置位于确定按钮500的显示区域内的情况下,判断为已有选择确定指示。
此外,取消指示以及选择确定指示不限于此。例如,菜单选择部456也可以将第一选择指示以及第二选择指示的结束视为取消指示。在这种情况下,用户指示液晶面板240上的2个位置,同时下压确定按钮500后,能够选择菜单。
或者,也可以是显示控制部452将取消键显示在液晶面板240,菜单选择部456将下压取消键视为取消指示。在这种情况下,例如,菜单选择部456将第一选择指示以及第二选择指示的结束视为选择决定指示。
在无决定指示的情况下(步骤S115中“否”),菜单选择部456重复从步骤S113的处理。
在有确定指示的情况下(步骤S115中“是”),在步骤S117,菜单选择部456将伪选择了的内容确定为选择内容,将选择内容向第一单元1001输出。具体地说,菜单选择部456将选择内容输出给接口部440。接口部440将选择内容输出给第一单元100两侧的接口部340。接口部340将选择内容交给控制部350。控制部350对选择内容进行规定的处理。
参照图30说明图29的步骤S109中菜单选择部456进行的处理的详细情况。
在步骤S201,菜单选择部456从位置计算部454取得第一选择指示所指示的坐标(第一指示坐标)。以下,将第一指示坐标称为(X1,Y1)。
在步骤S203,菜单选择部456从位置计算部454取得第二选择指示所指示的坐标(第二指示坐标)。以下,将第二指示坐标称为(X2,Y2)。
在步骤S205,菜单选择部456求出:Xmin=Min(X1,X2),Xmax=Max(X1,X2),Ymin=Min(Y1,Y2),以及Ymax=Max(Y1,Y2)。
在步骤S207,菜单选择部456选择i=1的内容(i为特定内容的编号)。以下,将与i=i的内容对应的显示图像称为第i图像。
在步骤S209,菜单选择部456判断第i图像的显示区域是否包含满足Xmin≤xi≤Xmax的水平坐标xi。
在第i图像的显示区域不含满足Xmin≤xi≤Xmax的x坐标xi的情况下(步骤S209中“否”),菜单选择部456将处理推进到步骤S215。
在第i图像的显示区域包含满足Xmin≤xi≤Xmax的x坐标xi的情况下(步骤S209中“是”),菜单选择部456在步骤S211判断第i图像的显示区域是否包含满足Ymin≤yi≤Ymax的垂直坐标yi。
在第i图像的显示区域不含满足Ymin≤yi≤Ymax的垂直坐标yi的情况下(步骤S211中“否”),菜单选择部456将处理推进到步骤S215。
在第i图像的显示区域包含满足Ymin≤yi≤Ymax的垂直坐标yi的情况下(步骤S211中“是”),菜单选择部456将与第i图像对应的内容进行伪选择。
在步骤S215,菜单选择部456就全部的i判断是否进行了从步骤S209的处理。
在对某i未进行这些处理的情况下(步骤S209中“否”),菜单选择部456在步骤S217,将i加1(i=i+1),重复从步骤S209的处理。
在对全部的i进行了从步骤S209的处理的情况下(步骤S209中“是”),菜单选择部456结束内容的选择处理。
此外,在此,在步骤S209以及步骤S211中,对包含于第i图像的任一坐标(xi,yi)是否满足Xmin≤xi≤Xmax以及Ymin≤yi≤Ymax进行了判断。然而,判断所使用的坐标(xi,yi)不限于此。(xi,yi)可以是与第i图像的显示区域存在对应的坐标。例如,菜单选择部456也可以将第i图像的中心坐标作为(xi,yi),进行步骤S209以及步骤S211的判断。
[第二实施方式]
第二实施方式的电子设备100具有与第一实施方式的电子设备100相同的硬件构成以及功能构成。但是,菜单选择部456所进行的处理不同。
第二实施方式的菜单选择部456在同时受理2个指示位置的输入时,选择以输入的2个指示位置为两端点的线段上的菜单。
还有,菜单选择部456将各指示位置的输入的开始定时存储在存储部430。菜单选择部456在受理3个以上的指示位置的输入时,选择将各指示位置按照与各指示位置对应的输入的开始定时的顺序连接的折线上的菜单。
参照图31说明关于第二实施方式的菜单选择。
图31(a)是表示手指900按压了第一菜单(图中附加了(1)的菜单)时的液晶面板240的显示画面的图。参照图31(a),菜单选择部456更新显示数据434,将下压的菜单用框包围进行显示。这样,通过改变菜单的显示方式,用户容易把握到下压了哪个菜单。此外,菜单选择部456也可以采用将菜单用框包围以外的方法来更新显示数据434:下压的菜单被特定显示。
图31(b)是表示在手指900按压第一菜单期间,手指900#按压第二菜单(图中附加了(2)的菜单)时的液晶面板240的显示画面的图。参照图31(b),菜单选择部456更新显示数据434,将以第一菜单和第二菜单为两端的一列状的菜单用框包围进行显示。
图31(c)是表示手指900按压第一菜单、手指900#按压第二菜单期间,手指900##按压第三菜单(图中附加了(3)的菜单)时的液晶面板240的显示画面的图。参照图31(c),菜单选择部456更新显示数据434,将以第一菜单和第二菜单为两端的一列状的菜单以及以第二菜单和第三菜单为两端的一列状的菜单用框包围进行显示。
此外,在图31表示了菜单选择部456选择在水平方向或者垂直方向排列的菜单例。然而,本实施方式的菜单选择部456也可以根据指示位置选择倾斜方向排列的菜单。
这样,按照本实施方式的电子设备100,用户能够选择L字型等图形上的菜单。特别是,本实施方式的电子设备100,用户容易将在直线上排列的菜单进行统一选择。
还有,在本实施方式中,菜单选择部456在伪选择的各菜单按照从折线一方的端点向另一方的端点的顺序附加编号。在图31(c)所示的例中,菜单选择部456按照附加了(1)的菜单→…→附加了(2)的菜单→…→附加了(3)的菜单的顺序对各菜单附加编号。
在图31(c)的任意一个都是,菜单选择部456在确定按钮500被按压后,选择以框围起的菜单,将选择的菜单与编号一同输出。第一单元1001侧的控制部350经接口部440以及接口部340受理输出的菜单。
第一单元1001侧的控制部350根据编号的形式将各菜单输出到输出部320。例如,包含于控制部350的显示控制部352按编号顺序在显示部322显示各菜单。
用户通过在液晶面板240显示的菜单的选择顺序,能够确定输出部320的菜单的输出形式。因此,能够提高用户选择菜单的便利性。
参照图32说明输出部320的菜单的输出形式的一个例子。图32是表示用于说明博客制作中使用本实施方式的菜单选择方法的情况的图。
图32(a)是表示插入博客的文件的选择画面的图。液晶面板240显示多个图像文件的缩略图图像。用户按压2个缩略图图像后,菜单选择部456基于用户按压的位置将多个缩略图图像进行伪选择。这里,菜单选择部456基于输入的开始定时,在最上段左端的图像附加编号1,在最上段中央的图像附加编号2,在最上段右端的图像附加编号3。
图32(b)是表示在图32(a)中伪选择了多个缩略图图像的状态下,确定按钮被按下时的、第一单元1001侧的显示部322(即,液晶面板140)的显示画面的图。博客制作应用程序在博客内根据编号按从左上的顺序,埋入选择的缩略图图像。液晶面板140显示作成的博客。
参照图33说明第二实施方式的菜单选择部456所进行的处理的流程。在此,虽然就内容的选择处理进行说明,但该说明也适合一般的菜单的选择处理。
从步骤S301到步骤S307的处理与在第一实施方式中说明的图29中的从步骤S101到步骤S107的处理相同,这些说明不再重复。通过这些处理或者判断,菜单选择部456能够进行单选择。
在步骤S309,菜单选择部456将内容进行伪选择。关于步骤S309的详细情况后述。
在步骤S311,菜单选择部456将由步骤S109伪选择的内容突出显示。
在步骤S313,菜单选择部456判断是否已有伪选择的取消指示。例如,菜单选择部456将再按压伪选择的内容视为伪选择的取消指示。或者,菜单选择部456也可以将第二以下(含第二)的选择指示的结束视为该选择指示的取消指示。
在已有取消指示的情况下(步骤S313中“是”),菜单选择部456按照取消指示解除伪选择,重复从步骤S301的处理。
在步骤S314,菜单选择部456判断是否还受理了选择指示。
在还受理了选择指示的情况下(步骤S314中“是”),菜单选择部456重复从步骤S309的处理。
在未受理进一步的选择指示的情况下(步骤S314中“否”),在步骤S315,菜单选择部456判断是否有了选择确定指示。在本实施方式中,菜单选择部456在位置计算部454输出的指示位置位于确定按钮500的显示区域内的情况下,判断为有了选择决定指示。
但是,与第一实施方式相同,取消指示以及选择确定指示不限于此。
在无确定指示的情况下(步骤S315中“否”),菜单选择部456重复从步骤S313的处理。
在有确定指示的情况下(步骤S315中“是”),在步骤S317,菜单选择部456将伪选择了的内容确定为选择内容,将选择内容向第一单元1001输出。具体地说,菜单选择部456将选择内容输出到接口部440。接口部440将选择内容输出到第一单元100两侧的接口部340。接口部340将选择内容交给控制部350。控制部350对选择内容进行规定的处理。
参照图34说明关于图33的步骤S309中菜单选择部456所进行的处理的详细情况。
在步骤S401,菜单选择部456取得最新的指示坐标(Xn+1,Yn+1)。这里,n是表示指示坐标的顺序的1以上的整数。
在步骤S403,菜单选择部456求出连接(Xn,Yn)和(Xn+1,Yn+1)的线段Ln。
在步骤S405,菜单选择部456按照从(Xn,Yn)到(Xn+1,Yn+1)的顺序检索线段Ln上的内容。具体地说,菜单选择部456,例如,检索与内容对应的显示图像所包含的任意坐标(xi,yi)与线段Ln上的坐标相一致的内容,将其作为线段Ln上的内容。
在步骤S407,菜单选择部456将附加了与检索顺序对应的流水编号的线段Ln上的内容进行伪选择。菜单选择部456将伪选择的内容与此前伪选择的内容组合,作为新的伪选择内容。
[第三实施方式]
第三实施方式的电子设备100具有与第一实施方式的电子设备100相同的硬件构成以及功能构成。但是,显示数据434的内容以及菜单选择部456所进行的处理不同。
在第三实施方式中,显示数据434包括菜单的显示顺序有关的数据。菜单选择部456同时受理2个指示位置的输入时,以与输入的2个指示位置分别对应的菜单为两端,选择具有连续的显示顺序的菜单。
参照图35A~图35C说明关于第三实施方式的菜单选择。
图35A是表示手指900按压第一菜单时的液晶面板240的显示画面的图。参照图35A,菜单选择部456更新显示数据434,将按压的菜单用框包围进行显示。
图35A也示出了表示菜单的显示顺序的流程的箭头。显示顺序从箭头的一端向另一端,顺序增加或者减少。此外,在此,显示顺序沿着横向,但是显示顺序并不限于此,例如,显示顺序也可以沿着纵向。
图35B是表示在手指900按压第一菜单期间,手指900#按压第二菜单时的液晶面板240的显示画面的图。参照图35B,菜单选择部456更新显示数据434,以第一菜单和第二菜单为两端,将显示顺序连续的菜单用框包围进行显示。
还有,菜单选择部456从第一菜单向第二菜单,对各内容附加沿着显示顺序的流程的编号(图中1~6)。此外,菜单选择部456从对应的选择指示的开始定时早的菜单向另一菜单,对各内容附加编号。例如,在图35B中,在手指900的输入开始定时和手指900#的输入开始定时相反的情况下,图中的编号从1到6各自变成从6到1。
这样,通过考虑指示的开始定时附加编号,菜单选择部456能够更符合用户的意图地选择菜单。因为希望多数情况下用户最初选择的菜单就是用户想优先选择的菜单。
图35C是表示手指900按压第一菜单、手指900#按压第二菜单期间,手指900##按压确定按钮500时的、液晶面板140、液晶面板240的显示画面的图。此外,在图35A、图35B中省略了确定按钮500的显示区域来表示液晶面板240。
菜单选择部456将伪选择的菜单确定为选择菜单,将选择菜单输出给接口部440。受理了选择菜单的接口部440将选择菜单发送给第一单元1001侧的接口部340。
第一单元1001侧的控制部350对选择菜单进行规定的处理。这里,控制部350进行与各选择菜单所附加的编号对应的处理。在图35A~图35C中,表示了控制部350按照与编号对应顺序将选择菜单显示在显示部322的例子。
下面,说明菜单选择部456所进行的处理的流程。在此,虽然就内容的选择处理进行说明,但该说明也适用一般的菜单的选择处理。
菜单选择部456进行处理的大致流程与在第一实施方式使用图29说明的内容相同,所以不再重复。但是,菜单选择部456在图29的步骤S109(内容的选择)所进行的处理与第一实施方式不同。
参照图36说明关于第三实施方式的菜单选择部456进行的内容选择处理的详细情况。
在步骤S501,菜单选择部456取得第一指示坐标(X1,Y1)。
在步骤S503,菜单选择部456取得第二指示坐标(X2,Y2)。
在步骤S505,菜单选择部456确定与第一指示坐标对应的第一选择图像。具体地说,菜单选择部456例如,将与包括和第一指示坐标(X1,Y1)一致的坐标(xi,yi)的显示图像对应的内容确定为选择图像。
在步骤S507,菜单选择部456确定与第二指示坐标对应的第二选择图像。具体地说,菜单选择部456例如,将与包括和第二指示坐标(X2,Y2)一致的坐标(xi,yi)的显示图像对应的内容确定为选择图像。
在步骤S509,菜单选择部456以第一选择图像以及第二选择图像为两端,将显示顺序连续的整体显示图像确定为选择图像。
在步骤S511,菜单选择部456对选择图像施加沿显示顺序的流程的编号。特别是,在本实施方式中,菜单选择部456从输入开始定时早的第一选择图像向第二选择图像顺序地对各选择图像施加编号。
[第四实施方式]
第四实施方式的电子设备100能够设定用于选择多个菜单的锚。另外,第四实施方式的电子设备100能够滚动画面。以下,对这些动作进行详细说明。此外,第四实施方式的电子设备100的硬件构成以及功能构成(菜单选择部456的功能除外)与第一实施方式相同,所以不再重复。
菜单选择部456基本上与第三实施方式的菜单选择部456相同地进行菜单的选择。即,在向2个不同菜单的选择指示同时存在的情况下,以指示的2个菜单为两端,将显示顺序连续的菜单进行伪选择。但是,本实施方式的菜单选择部456在以下点与第三实施方式的菜单选择部456不同。
菜单选择部456在一个菜单的显示区域内同时包含多个指示位置的情况下,在该菜单设定锚。菜单选择部456在不同的2个菜单设定了锚时,以设定了锚的2个菜单为两端,将具有连续的显示顺序的多个菜单进行伪选择。
关于使用了锚的菜单的选择,参照图37进行说明。图37(a)是表示手指900以及手指900#触摸液晶面板240显示的一个菜单的状态的图。根据该操作,菜单选择部456在菜单设定锚。
图37(b)是表示菜单选择部456在菜单设定了锚后的液晶面板240的显示画面的图。菜单选择部456更新显示数据434,设定了锚的菜单被特定显示。在此,设定了锚的菜单用虚线围起并在菜单上描画箭头。菜单选择部456即使手指900以及手指900#从设定了锚的菜单离开,也不解除对菜单的锚设定。
图37(c)是表示手指900以及手指900#触摸在液晶面板240显示的没有设定锚的一个菜单的状态的图。根据该操作,菜单选择部456以设定了锚的2个菜单为两端,将具有连续的显示顺序的多个菜单进行伪选择。菜单选择部456伪选择的菜单示于图37(d)。在这种情况下,菜单选择部456将在液晶面板240显示的全部菜单进行伪选择。此外,菜单选择部456与第三实施方式相同,对伪选择了的菜单附加与显示顺序对应的编号。
另外,菜单选择部456如果有指示位置的连续的移动,即所谓的范围划定操作,则滚动显示画面。即,菜单选择部456在从位置计算部454实时连续地受理了指示位置的输入的情况下,基于输入的指示位置的位移使显示画面滚动一个移动量。
关于滚动,参照图38进行说明。图38(a)是用于说明手指900按压一个菜单(图中用框包围表示)时的液晶面板240的显示画面的图。手指900正在按压液晶面板240内的图38下面一方的菜单。
图38(b)是用于说明用户将手指900从图38(a)的位置到图38(a)内的虚线所示的位置在液晶面板240上滑动时的、液晶面板240的显示画面的图。按照手指900向上的移动,菜单选择部456使显示画面向下滚动。即,菜单选择部456更新显示数据434,显示比液晶面板240在图38(a)显示的菜单靠下的菜单。对用户而言,感觉手指900按压的菜单伴随手指900的移动被上拉。
相同地,如果手指900向下移动,则菜单选择部456使显示画面向上滚动。另外,菜单选择部456也可以进行左右方向的滚动。
根据本实施方式的电子设备100,即使是菜单不完全进入液晶面板240的情况下,用户也能通过滚动,选择合适的菜单。
还有,菜单选择部456能够将锚设定和滚动组合来执行。参照图39~图41说明这样的菜单的选择动作的一个例子。
图39(a)是表示用户将手指900从液晶面板240的显示画面下方向上方划定范围的状况的图。图39(b)是表示图39(a)划定范围后的显示画面的图。显示画面向下滚动。图39(c)是表示用户将滚动后的显示画面内的一个菜单用手指900按压状况的图。图39(d)是表示用户将手指900从菜单离开时的显示画面的图。菜单选择部456将一个菜单进行单选择。
图40(a)是表示在图39(d)所示的状态,用户将手指900从液晶面板240的显示画面的上方向下方划定范围的状况的图。图40(b)是表示图40(a)的划定范围后的显示画面的图。显示画面向上滚动。图40(c)是表示用户将滚动后的显示画面内的一个菜单用手指900以及手指900#按压的状况的图。图40(d)是表示用户用手指900以及手指900#按压菜单后的显示画面的图。菜单选择部456在用手指900以及手指900#按压了的菜单设定锚。
图41(a)是表示在图40(d)所示的状态,用户将手指900从液晶面板240的显示画面的下方向上方划定范围的状况的图。图41(b)是表示图41(a)的划定范围后的显示画面的图。显示画面向下滚动。图41(c)是表示用户将滚动后的显示画面内的一个菜单(未设定锚)用手指900以及手指900#按压的状况的图。图41(d)是表示用户用手指900以及手指900#按压了菜单后的显示画面的图。菜单选择部456将被设定了锚的菜单夹持的菜单进行伪选择。
通过这样的锚设定和滚动的组合,用户能够同时选择未纳入液晶面板240的一个画面的范围的菜单。
下面,参照图42说明菜单选择部456进行的处理的流程。
在此,虽然就缩略图图像等的内容的选择处理进行说明,但是该说明也适用于一般的菜单的选择处理。
在步骤S601,菜单选择部456判断是否从位置计算部454受理了第一选择指示(为简单起见,图中只有第一输入)。
在判断为未受理第一选择指示的情况下(步骤S601中“否”),菜单选择部456重复步骤S601的处理。
在判断为受理了第一选择指示的情况下(步骤S601中“是”),在步骤S603,菜单选择部456将与第一选择指示对应的内容突出显示。
在步骤S605,菜单选择部456判断是否有划定范围操作。菜单选择部456在位置计算部454输出的指示位置实时连续并且指示位置移动的情况下,判断为有划定范围操作。
在判断为有划定范围操作的情况下(步骤S605中“是”),菜单选择部456在步骤S607,将显示画面滚动基于指示位置变动的移动量。
在判断为无划定范围操作的情况下(步骤S605中“否”),菜单选择部456在步骤S609,判断是否已有第二选择指示(图中为第二输入)。
在判断为无第二选择指示的情况下(步骤S609中“否”),菜单选择部456在步骤S611,判断第一选择指示是否已结束。
在判断为第一选择指示未结束的情况下(步骤S611中“否”),菜单选择部456重复从步骤S605的处理。
在判断为第一选择指示已结束的情况下(步骤S611中“是”),菜单选择部456在步骤S613,将与第一选择指示对应的内容进行伪选择。之后,菜单选择部456进入步骤S615以下的处理。关于步骤S615以下的处理后述。
相反,在判断为有第二选择指示输入的情况下(步骤S609中“是”),菜单选择部456在步骤S623,判断与一个内容对应的显示区域(1区域)是否被2点触摸。即,菜单选择部456判断第一选择指示以及第二选择指示的指示位置是否包含在共同的1区域。
在判断为1区域被2点触摸的情况下(步骤S623中“否”),菜单选择部456在步骤S625将内容进行伪选择。在步骤S625,菜单选择部456进行与在第三实施方式使用图36说明的内容相同的处理。之后,菜单选择部456进入步骤S615以下的处理。关于步骤S615以下的处理后述。
相反,在判断为1区域被2点触摸的情况下(步骤S623中“是”),菜单选择部456在步骤S627,判断是否在与2点触摸了的区域对应的内容以外的内容设定锚。
在其他内容无锚设定的情况下(步骤S627中“否”),菜单选择部456在步骤S629,在与2点触摸的区域对应的内容设定锚。以下,菜单选择部456重复步骤S601的处理。
在其他内容有锚设定的情况下(步骤S627中“是”),菜单选择部456在步骤S631,将夹在已经设定锚的内容、与2点触摸了的区域对应的内容间的内容进行伪选择。之后,菜单选择部456进入步骤S615以下的处理。
在步骤S615,菜单选择部45将伪选择了的内容突出显示。
在步骤S617,菜单选择部456判断是否有了伪选择的取消指示。例如,菜单选择部456将再下压伪选择了的内容视为伪选择的取消指示。
在有了取消指示的情况下(步骤S617中“是”),菜单选择部456按照取消指示解除伪选择,重复从步骤S601的处理。
在无取消指示的情况下(步骤S617中“否”),在步骤S619,菜单选择部456判断是否有了选择确定指示。例如,菜单选择部456在位置计算部454输出的指示位置位于确定按钮500的显示区域内的情况下,判断为已有选择决定指示。
在无确定指示的情况下(步骤S619中“否”),菜单选择部456重复从步骤S617的处理。
在有确定指示的情况下(步骤S619中“是”),在步骤S621,菜单选择部456将伪选择了的内容确定为选择内容,将选择内容向第一单元1001输出。具体地说,菜单选择部456将选择内容输出给接口部440。接口部440将选择内容输出给第一单元100两侧的接口部340。接口部340将选择内容交给控制部350。控制部350对选择内容进行规定的处理。这里,控制部350也可以按照与附加于选择内容的显示顺序对应的编号,对选择内容进行处理。
[第五实施方式]
在第三实施方式以及第四实施方式中,确定在显示画面内的菜单选择的确定顺序为固定进行了说明。与此相对,第五实施方式的电子设备100能够变换该确定顺序。
第五实施方式的电子设备100的硬件构成以及功能构成(菜单选择部456除外)与其他实施方相同,所以不再重复。
参照图43,对确定顺序的变换进行说明。参照图43,菜单选择部456在液晶面板240显示变换按钮600。在变换按钮600表示现在的确定顺序。
图43(a)是确定顺序为“横选择”的情况下的、关于确定顺序进行说明的图。此时,确定顺序与图35A所示的内容相同。
图43(b)是确定顺序为“纵选择”的情况下的、关于确定顺序进行说明的图。在纵选择时,菜单选择部456沿图43(b)的箭头对选择菜单附加编号。
在图43(a)所示的状态(横选择时),手指900按压变换按钮600后,确定顺序变换为纵选择。在图43(b)所示的状态(纵选择时),手指900按压变换按钮600后,确定顺序变换为横选择。
按照本实施方式的电子设备100,通过确定顺序的变换,能够以各种图形选择菜单。关于此,参照图44以及图45进行说明。
图44(a)是表示用户用手指900按压液晶面板240内的一个菜单的状态的图。
图44(b)是表示用户用手指900#按压了液晶面板240内的图44(a)中被按压的菜单以外的菜单的状态的图。由于同时按压了2个菜单,所以菜单选择部456将以按压的菜单为两端的菜单进行伪选择。此时,确定顺序为横选择,所以图44(b)的斜线所示的菜单被伪选择。
图44(c)是表示图44(b)的伪选择后,用户用手指按压变换按钮600的状态的图。通过该操作,菜单选择部456将确定顺序变换为纵选择。图44(d)是表示确定顺序变换后的显示画面的图。
图45(a)是表示在图44(d)所示的状态,用户用手指900按压液晶面板240内未被伪选择的一个菜单的状态的图。
图44(b)是表示用户用手指900#按压液晶面板240内未被伪选择且图45(a)中未被按压的菜单的状态的图。由于同时按压2个菜单,所以菜单选择部456将以按压了的菜单为两端的菜单进行伪选择。此时,确定顺序为纵选择,所以图45(b)的斜线所示的菜单被伪选择。
图45(c)表示在图45(b)的伪选择后,用户用手指900按压确定按钮500的状态。对应该操作,菜单选择部456将伪选择了的菜单确定为选择菜单,输出所选择菜单。
还有,通过将在第四实施方式中说明那样的锚设定以及滚动组合,用户能够以更多样的图形选择菜单。例如,在纵向菜单显示不完的情况下,用户通过将确定顺序设定为纵选择,通过使用锚以及滚动,能够选择纵长的区域内的菜单。
[其他]
将上述的各实施方式适当地组合而成的方案也可被视为本发明的一个方式。
应该认为,这次公开的实施方式不是以全部的点例示而限定的。可以想到,本发明的范围并非上述的说明内容,而是由权利请求明示,包含在与权利请求等同的含义以及范围内的全部变更。
附图标记说明
100 电子设备,100A 壳体,100B 壳体,100C 铰链,101 主体装置,102 显示装置,102A 显示装置,103 显示装置,104 主体装置,130 驱动器,131 扫描信号线驱动电路,132 数据信号线驱动电路,133 光传感器驱动电路,134 开关,135 放大器,140 光传感器内置的液晶面板,140A 光传感器内置的液晶面板,141 像素电路,141b 子像素电路,141g 子像素电路,141r 子像素电路,143 电极对,143a 像素电极,143b 对置电极,144 光传感器电路,145 光电二极管,145b 光电二极管,145g 光电二极管,145r 光电二极管,146 电容,151A 有源矩阵基板,151B 对置基板,152 液晶层,153b 滤色器,153g 滤色器,153r 滤色器,157 数据信号线,161 偏振滤光器,162 玻璃基板,163 遮光膜,164 取向膜,173 存储卡读写器,174 外部通信部,175 传声器,176 扬声器,177 操作键,179 背光源,180 图像处理引擎,181 驱动器控制部,182 定时器,183 信号处理部,191 电源开关,192 电源电路,193 电源检测部,194 连接器,195 天线,196 连接器,230 驱动器,240 光传感器内置的液晶面板,274 外部通信部,279 背光源,280 图像处理引擎,281 驱动器控制部,282 定时器,283 信号处理部,293 电源检测部,294 连接器,295 天线,297 信号强度检测部,310 输入部,320 输出部,322 显示部,330 存储部,332 菜单,340 接口部,350 控制部,352 显示控制部,410 显示/输入部,430 存储部,432 菜单,434 显示数据,440 接口部,450 控制部,452 显示控制部,454 位置计算部,456 菜单选择部,500 确定按钮,600 变换按钮,900 手指,1001 第一单元,1002 第二单元。

Claims (16)

1.一种电子设备(100),其具备:
存储部(430),用于储存多个菜单;
能多点输入的显示一体型图形输入板(410);
显示控制部(452),用于在上述显示一体型图形输入板显示包含上述多个菜单的显示画面;
输入处理部(454),用于在进行向上述显示一体型图形输入板的输入的期间,输出与上述输入对应的指示位置;
选择部(456),用于基于同时输出的多个上述指示位置来选择上述菜单;以及
输出部(240),用于输出所选择的上述菜单。
2.根据权利要求1所述的电子设备,其中,上述选择部选择被同时输出的2个上述指示位置夹持的上述菜单。
3.根据权利要求2所述的电子设备,其中,上述选择部选择以同时输出的2个上述指示位置为对角的顶点的矩形内的上述菜单。
4.根据权利要求2所述的电子设备,其中,上述选择部选择处于以同时输出的2个上述指示位置为端点的线段上的上述菜单。
5.根据权利要求4所述的电子设备,其中,
上述存储部储存各上述输入的开始定时,
上述选择部基于与各上述端点对应的上述输入的上述开始定时的顺序,对所选择的上述菜单从一方的上述端点向另一方的上述端点依次给予选择编号,
上述输出部基于选择编号输出上述菜单。
6.根据权利要求1所述的电子设备,其中,
上述存储部储存各上述输入的开始定时,
上述选择部选择折线上的上述菜单,其中该折线是将同时输出的多个上述指示位置按照与各上述指示位置对应的上述输入的上述开始定时的顺序连接起来的折线。
7.根据权利要求6所述的电子设备,其中,
上述选择部对所选择的上述菜单从上述折线的一方的端点向上述折线的另一方的端点依次给予选择编号,
上述输出部基于上述选择编号输出上述菜单。
8.根据权利要求1所述的电子设备,其中,
上述存储部储存上述显示画面中的各上述菜单的显示顺序,
上述选择部选择以与同时输入的2个上述指示位置分别对应的上述菜单为两端、拥有连续的上述显示顺序的多个上述菜单。
9.根据权利要求8所述的电子设备,其中,上述选择部伪选择由多个上述指示位置同时指定的一个上述菜单,选择以伪选择的2个上述菜单为两端、拥有连续的上述显示顺序的多个上述菜单。
10.根据权利要求9所述的电子设备,其中,上述显示控制部根据上述指示位置的连续的移动,使上述显示画面滚动。
11.根据权利要求8所述的电子设备,其中,上述输出部基于上述显示顺序输出上述菜单。
12.根据权利要求1所述的电子设备,其中,上述输出部包含监视器。
13.根据权利要求12所述的电子设备,其中,上述监视器为光传感器内置的液晶面板。
14.根据权利要求1所述的电子设备,其中,上述显示一体型图形输入板为光传感器内置的液晶面板。
15.一种菜单的选择方法,其是根据具有能多点输入的显示一体型图形输入板的电子设备的菜单的选择方法,具备:
在上述显示一体型图形输入板显示包含多个上述菜单的显示画面的步骤;
在进行向上述显示一体型图形输入板的输入的期间,输出与上述输入对应的指示位置的步骤;以及
基于同时输出的多个上述指示位置选择上述菜单的步骤。
16.一种菜单的选择程序,使具有显示多个菜单并能多点输入的显示一体型图形输入板的电子设备选择菜单,其中,
上述电子设备包含用于在进行向上述显示一体型图形输入板的输入的期间,输出与上述输入对应的指示位置的输入处理部,
该菜单的选择程序具备:
使上述电子设备判断上述输入处理部是否同时输出多个上述指示位置的步骤;以及
在上述电子设备判断为上述输入处理部同时输出多个上述指示位置的情况下,使上述电子设备基于同时输出的多个上述指示位置从显示于上述显示一体型图形输入板的上述多个菜单中选择菜单的步骤。
CN2009801435506A 2008-10-30 2009-10-29 电子设备、菜单的选择方法、菜单的选择程序 Expired - Fee Related CN102203702B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008-280100 2008-10-30
JP2008280100A JP5540344B2 (ja) 2008-10-30 2008-10-30 電子機器、メニューの選択方法、メニューの選択プログラム
PCT/JP2009/068571 WO2010050547A1 (ja) 2008-10-30 2009-10-29 電子機器、メニューの選択方法、メニューの選択プログラム

Publications (2)

Publication Number Publication Date
CN102203702A true CN102203702A (zh) 2011-09-28
CN102203702B CN102203702B (zh) 2013-09-11

Family

ID=42128906

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801435506A Expired - Fee Related CN102203702B (zh) 2008-10-30 2009-10-29 电子设备、菜单的选择方法、菜单的选择程序

Country Status (4)

Country Link
US (1) US9015625B2 (zh)
JP (1) JP5540344B2 (zh)
CN (1) CN102203702B (zh)
WO (1) WO2010050547A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104298440A (zh) * 2013-07-18 2015-01-21 富士施乐株式会社 信息处理装置
CN108897420A (zh) * 2012-05-09 2018-11-27 苹果公司 用于响应于手势在显示状态之间过渡的设备、方法和图形用户界面
US11010027B2 (en) 2012-05-09 2021-05-18 Apple Inc. Device, method, and graphical user interface for manipulating framed graphical objects
US11023116B2 (en) 2012-05-09 2021-06-01 Apple Inc. Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
US11054990B2 (en) 2015-03-19 2021-07-06 Apple Inc. Touch input cursor manipulation
US11112957B2 (en) 2015-03-08 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11182017B2 (en) 2015-08-10 2021-11-23 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US11221675B2 (en) 2012-05-09 2022-01-11 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
US11231831B2 (en) 2015-06-07 2022-01-25 Apple Inc. Devices and methods for content preview based on touch input intensity
US11240424B2 (en) 2015-06-07 2022-02-01 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11314407B2 (en) 2012-05-09 2022-04-26 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
US11327648B2 (en) 2015-08-10 2022-05-10 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11354033B2 (en) 2012-05-09 2022-06-07 Apple Inc. Device, method, and graphical user interface for managing icons in a user interface region
US11921975B2 (en) 2015-03-08 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD701880S1 (en) 2010-12-28 2014-04-01 Sony Corporation Display panel or screen with graphical user interface
EP2708995A4 (en) 2011-05-12 2014-10-01 Nec Casio Mobile Comm Ltd ELECTRONIC DEVICE, METHOD FOR CONTROLLING IT AND PROGRAM THEREFOR
US20130239051A1 (en) 2012-03-06 2013-09-12 Apple Inc. Non-destructive editing for a media editing application
US9569078B2 (en) 2012-03-06 2017-02-14 Apple Inc. User interface tools for cropping and straightening image
US20130239031A1 (en) * 2012-03-06 2013-09-12 Apple Inc. Application for viewing images
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
JP6032794B2 (ja) * 2012-06-08 2016-11-30 株式会社ジャパンディスプレイ 液晶表示装置
JP2014048840A (ja) * 2012-08-30 2014-03-17 Sharp Corp 表示装置、表示装置の制御方法、プログラムおよび記録媒体
TWI461896B (zh) * 2012-11-07 2014-11-21 Chih Chung Lin 具光電轉換之觸控面板
JP5865856B2 (ja) * 2013-02-27 2016-02-17 京セラドキュメントソリューションズ株式会社 画像処理装置及びこれを備えた画像形成装置
USD749125S1 (en) 2013-03-29 2016-02-09 Deere & Company Display screen with an animated graphical user interface
USD741343S1 (en) * 2013-09-06 2015-10-20 Microsoft Corporation Display screen with graphical user interface
USD752599S1 (en) * 2013-09-06 2016-03-29 Microsoft Corporation Display screen with graphical user interface
JP6264997B2 (ja) * 2014-03-27 2018-01-24 株式会社島津製作所 自動分析装置用制御装置
USD777783S1 (en) * 2015-02-05 2017-01-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
USD777208S1 (en) * 2015-02-27 2017-01-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD776156S1 (en) * 2015-02-27 2017-01-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
KR20160148771A (ko) * 2015-06-16 2016-12-27 엔에이치엔엔터테인먼트 주식회사 파일 일괄 처리 방법 및 이에 따른 프로그램을 수행하는 디지털 디바이스
USD847308S1 (en) * 2016-12-15 2019-04-30 Spectrum Brands, Inc. Faucet with a set of icons
JP6959015B2 (ja) * 2017-02-17 2021-11-02 積水化学工業株式会社 非水電解質二次電池
CN108664080A (zh) * 2017-03-31 2018-10-16 华硕电脑股份有限公司 控制方法、电子装置及非瞬时电脑可读取记录介质
CN107122077B (zh) * 2017-05-02 2020-06-02 上海天马微电子有限公司 一种触控显示装置
KR102413936B1 (ko) 2018-02-21 2022-06-28 삼성전자주식회사 스위치를 갖는 디스플레이를 포함하는 전자장치
JP7081964B2 (ja) * 2018-04-12 2022-06-07 シャープ株式会社 情報処理装置、情報処理方法、及びプログラム
JP1661812S (ja) 2019-05-16 2020-06-15 内視鏡用プロセッサ
USD925568S1 (en) * 2019-05-16 2021-07-20 Hoya Corporation Display screen with transitional graphical user interface
USD925567S1 (en) * 2019-05-16 2021-07-20 Hoya Corporation Display screen with transitional graphical user interface
USD924914S1 (en) 2019-05-16 2021-07-13 Hoya Corporation Display screen with transitional graphical user interface
USD959481S1 (en) * 2020-10-01 2022-08-02 Botrista Technology, Inc. Display screen or portion thereof with graphical user interface
USD959480S1 (en) * 2020-10-01 2022-08-02 Botrista Technology, Inc. Display screen or portion thereof with animated graphical user interface
USD938475S1 (en) * 2020-10-01 2021-12-14 Botrista Technology, Inc. Display screen or portion thereof with graphical user interface
USD980856S1 (en) * 2021-04-08 2023-03-14 Botrista Technology, Inc. Display screen or portion thereof with animated graphical user interface
USD949919S1 (en) * 2021-04-12 2022-04-26 Xiamen Sienluo Trading Co., Ltd. Display screen or portion thereof with graphical user interface

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07261932A (ja) * 1994-03-18 1995-10-13 Hitachi Ltd センサ内蔵型液晶表示装置及びこれを用いた情報処理システム
JP2001356878A (ja) * 2000-06-14 2001-12-26 Hitachi Ltd アイコン制御方法
EP1195673A1 (de) * 2000-10-04 2002-04-10 Siemens Aktiengesellschaft Kraftfahrzeug-Multimediasystem mit animierter Anzeigefunktion
JP2008191779A (ja) * 2007-02-01 2008-08-21 Sony Corp 表示制御装置および方法、並びにプログラム
US20080229232A1 (en) * 2007-03-16 2008-09-18 Apple Inc. Full screen editing of visual media

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000339097A (ja) 1998-12-16 2000-12-08 Sony Corp 情報処理装置およびその制御方法、並びに記録媒体
US6560612B1 (en) * 1998-12-16 2003-05-06 Sony Corporation Information processing apparatus, controlling method and program medium
US7469381B2 (en) * 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
DE10207185A1 (de) * 2002-02-21 2003-09-04 Kid Systeme Gmbh Verfahren zur Selektion und Darstellung von Objekten in der Ebene und im N-dimensionierten Raum
JP4039660B2 (ja) 2002-05-31 2008-01-30 株式会社東芝 情報処理装置
JP3892760B2 (ja) * 2002-05-31 2007-03-14 株式会社東芝 情報処理装置
JP4217051B2 (ja) * 2002-10-31 2009-01-28 キヤノンイメージングシステムズ株式会社 情報処理装置、オブジェクト選択方法、及びオブジェクト選択プログラム
JP3811128B2 (ja) 2003-01-31 2006-08-16 株式会社東芝 情報処理装置およびポインタの操作方法
JP4163713B2 (ja) * 2005-12-07 2008-10-08 株式会社東芝 情報処理装置およびタッチパッド制御方法
KR100672605B1 (ko) * 2006-03-30 2007-01-24 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US7936341B2 (en) * 2007-05-30 2011-05-03 Microsoft Corporation Recognizing selection regions from multiple simultaneous inputs

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07261932A (ja) * 1994-03-18 1995-10-13 Hitachi Ltd センサ内蔵型液晶表示装置及びこれを用いた情報処理システム
JP2001356878A (ja) * 2000-06-14 2001-12-26 Hitachi Ltd アイコン制御方法
EP1195673A1 (de) * 2000-10-04 2002-04-10 Siemens Aktiengesellschaft Kraftfahrzeug-Multimediasystem mit animierter Anzeigefunktion
JP2008191779A (ja) * 2007-02-01 2008-08-21 Sony Corp 表示制御装置および方法、並びにプログラム
US20080229232A1 (en) * 2007-03-16 2008-09-18 Apple Inc. Full screen editing of visual media

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11221675B2 (en) 2012-05-09 2022-01-11 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
CN108897420A (zh) * 2012-05-09 2018-11-27 苹果公司 用于响应于手势在显示状态之间过渡的设备、方法和图形用户界面
US10996788B2 (en) 2012-05-09 2021-05-04 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to a gesture
US11010027B2 (en) 2012-05-09 2021-05-18 Apple Inc. Device, method, and graphical user interface for manipulating framed graphical objects
US11023116B2 (en) 2012-05-09 2021-06-01 Apple Inc. Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
CN108897420B (zh) * 2012-05-09 2021-10-22 苹果公司 用于响应于手势在显示状态之间过渡的设备、方法和图形用户界面
US11947724B2 (en) 2012-05-09 2024-04-02 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
US11354033B2 (en) 2012-05-09 2022-06-07 Apple Inc. Device, method, and graphical user interface for managing icons in a user interface region
US11314407B2 (en) 2012-05-09 2022-04-26 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
CN104298440A (zh) * 2013-07-18 2015-01-21 富士施乐株式会社 信息处理装置
US11977726B2 (en) 2015-03-08 2024-05-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11112957B2 (en) 2015-03-08 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11921975B2 (en) 2015-03-08 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11550471B2 (en) 2015-03-19 2023-01-10 Apple Inc. Touch input cursor manipulation
US11054990B2 (en) 2015-03-19 2021-07-06 Apple Inc. Touch input cursor manipulation
US11240424B2 (en) 2015-06-07 2022-02-01 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11681429B2 (en) 2015-06-07 2023-06-20 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11835985B2 (en) 2015-06-07 2023-12-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11231831B2 (en) 2015-06-07 2022-01-25 Apple Inc. Devices and methods for content preview based on touch input intensity
US11327648B2 (en) 2015-08-10 2022-05-10 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11740785B2 (en) 2015-08-10 2023-08-29 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11182017B2 (en) 2015-08-10 2021-11-23 Apple Inc. Devices and methods for processing touch inputs based on their intensities

Also Published As

Publication number Publication date
JP5540344B2 (ja) 2014-07-02
US9015625B2 (en) 2015-04-21
CN102203702B (zh) 2013-09-11
US20110202875A1 (en) 2011-08-18
JP2010108277A (ja) 2010-05-13
WO2010050547A1 (ja) 2010-05-06

Similar Documents

Publication Publication Date Title
CN102203702B (zh) 电子设备、菜单的选择方法、菜单的选择程序
CN102197358A (zh) 具有2个显示装置的电子设备、其控制方法以及记录介质
JP5278948B2 (ja) オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
CN102301352A (zh) 电子设备、服务器、通信系统、显示控制方法、数据通信方法、电子设备的控制方法以及程序
JP2010134625A (ja) 電子機器、表示制御方法、およびプログラム
JP2011008424A (ja) 電子機器、動作モード設定方法、およびプログラム
JP5526397B2 (ja) コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラム
JP5303785B2 (ja) 表示装置、表示方法、および表示プログラム
JP5344555B2 (ja) オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
JP5707029B2 (ja) 電子機器、電子機器の制御方法および電子機器の制御プログラム
JP5126895B2 (ja) 電子機器、および表示制御方法
JP5617120B2 (ja) 電子機器、表示制御方法、およびプログラム
JP5334171B2 (ja) 電子機器、および表示制御方法
JP2010204729A (ja) テキスト表示装置、テキスト表示方法、およびテキスト表示プログラム
CN102017595A (zh) 图像显示/像检测设备及其控制方法、控制程序,以及记录该控制程序的计算机可读记录媒体
JP5380729B2 (ja) 電子機器、表示制御方法、およびプログラム
WO2010103888A1 (ja) コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムを記録するコンピュータ読取可能な記録媒体
WO2010050567A1 (ja) データ送信支援装置、電子機器、及びデータ送信支援装置の制御方法
JP5289889B2 (ja) 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム
JP2010108373A (ja) 電子機器、アプリケーションプログラム、情報処理端末およびその制御プログラム
JP2011008425A (ja) 電子機器、動作モード設定方法、およびプログラム
JP2010152696A (ja) 電子機器、画面切替方法および画面切替プログラム
JP2010117768A (ja) 電子機器、その制御方法およびその制御プログラム
WO2010050473A1 (ja) 電子機器、通信システム、通信方法および通信プログラム
JP2010108287A (ja) 電子機器、通信システム、表示制御方法、データ通信方法、およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130911

Termination date: 20161029

CF01 Termination of patent right due to non-payment of annual fee