CN102597926A - 移动信息终端、处理方法、程序 - Google Patents

移动信息终端、处理方法、程序 Download PDF

Info

Publication number
CN102597926A
CN102597926A CN201080049098XA CN201080049098A CN102597926A CN 102597926 A CN102597926 A CN 102597926A CN 201080049098X A CN201080049098X A CN 201080049098XA CN 201080049098 A CN201080049098 A CN 201080049098A CN 102597926 A CN102597926 A CN 102597926A
Authority
CN
China
Prior art keywords
touch
points
predetermined touch
touch operation
display screens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201080049098XA
Other languages
English (en)
Inventor
富森博幸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Innovations Co ltd Hong Kong
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN102597926A publication Critical patent/CN102597926A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1615Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)

Abstract

一种移动信息终端包括显示单元、触摸面板式输入单元和处理单元,显示单元具有两个或更多个显示屏幕,触摸面板式输入单元对与各个显示屏幕的触摸进行感测,处理单元把对两个相邻的显示屏幕执行的预定触摸操作识别成由对这两个显示屏幕执行的预定触摸操作所触摸的两个点之间的预定区域中的组件进行的指定。

Description

移动信息终端、处理方法、程序
技术领域
本发明涉及装有触摸面板单元的移动信息终端,所述触摸面板单元被构造成与显示单元形成一体。
背景技术
移动信息终端(移动电话、PDA(个人数字助理)和电子笔记本是其代表)通常装有显示单元和输入单元,显示单元通过显示屏幕(例如液晶)来显示文本和图像,输入单元接收通过用户的操作而作为输入的命令和数据。
在一些移动信息终端中,采用触摸面板作为输入单元。例如,专利文献1公开了一种信息终端,该终端在其输入单元中采用触摸面板。与使显示单元和输入单元被布置在不同位置的构造相比,利用触摸面板使得屏幕尺寸相对于设备尺寸能够更大。
在输入单元中采用触摸面板的移动信息终端中,通过对触摸面板的操作来指定UI(用户接口)组件(例如显示器上显示的图标)。通常,当UI组件是图标时,通过单一的触摸操作来选择该UI组件,并由与双击相对应的连续触摸操作来执行根据该UI组件的处理。或者,当UI组件是网页链接或程序按钮时,通过单一的触摸操作来执行根据该UI组件的处理。在下文的说明中,UI组件的选择和执行被称为“指定”。
在显示器上显示的图像中包含UI组件并且通过对触摸面板的触摸操作来指定UI组件这种构造的移动信息终端中,UI组件通常是通过对该UI组件的一点触摸来指定的,该UI组件是控制对象。替代地,也有一种技术通过由两点触摸造成的剪切(clip)来指定控制对象。
另外,一些移动信息终端装有多个显示屏幕作为显示单元。例如,专利文献3公开了具有下述构型的移动信息终端:该构型具有多个壳体的开关折叠构造,多个壳体中的每一者装有显示屏幕。专利文献3中公开的移动信息终端在开启状态下能够提供大的屏幕,而在关闭状态下紧凑便携。
现有技术文献:
专利文献:
专利文献1:JP2009-522669A,公布文本
专利文献2:JP2002-304256A,公布文本
专利文献1:JP2009-076038A,公布文本
发明内容
[本发明要解决的问题]
但是在装有多个显示屏幕并装有对这些屏幕中的每一者的接触进行感测的触摸面板输入装置的移动信息终端中,显示屏幕与显示屏幕之间存在边界。结果,当一个原始图像被划分并显示在多个显示屏幕上时,UI组件(例如图标)有时可能会位于多个显示屏幕的边界处。在这些情形下,用于指定UI组件的触摸操作变得困难,并且操作容易度变差。
本发明的一个目的是提供一种技术,以在具有多个显示屏幕并具有对这些屏幕中的每一者的接触进行感测的触摸面板输入装置的移动信息终端上,改善对显示屏幕与显示屏幕之间的边界处的UI组件进行指定的操作容易度。
为了实现上述目的,本发明的移动信息终端包括:显示单元,其具有两个或更多个显示屏幕;触摸面板输入单元,其对与每个显示屏幕的接触进行感测;处理单元,当对这两个相邻的显示屏幕执行预定的触摸操作时,处理单元识别出在对这两个相邻的显示屏幕执行所述预定的触摸操作时受到触摸的两个点之间的预定区域中的组件已被指定。
另外,为了实现上述目的,本发明的处理方法是一种应用于移动信息终端中的处理方法,该移动信息终端具有两个或更多个显示屏幕并具有对与这些显示屏幕中的每一者的接触进行感测的触摸面板输入装置,该方法包括下列步骤:检测对两个相邻的显示屏幕执行的预定触摸操作;把在对所述两个显示屏幕执行的预定触摸操作中受到触摸的两个点之间的预定区域中的组件识别成被指定。
另外,为了实现上述目的,本发明的程序使计算机执行下列处理:检测对移动信息终端的两个相邻的显示屏幕执行的预定触摸操作,所述移动信息终端具有两个或更多个显示屏幕并具有对与每个显示屏幕的接触进行感测的触摸面板输入装置;把在对所述两个显示屏幕执行的预定触摸操作中受到触摸的两个点之间的预定区域中的组件识别成被指定。
[本发明的效果]
根据本发明,在具有多个显示屏幕并具有对与每个屏幕的接触进行感测的触摸面板输入装置的移动信息终端中对显示屏幕与显示屏幕之间的边界处的UI组件进行指定时,能够改善操作的容易度。
附图说明
图1是描述移动信息终端中指定UI组件的方法示例的示意图。
图2是示出了第一示例性实施例中的移动信息终端配置的框图。
图3是描述用于计算所指定的坐标的方法示例的示意图。
图4的示意图中,触摸面板310和320上的点由触摸面板310的坐标系代表。
图5的流程图示出了用于图2所示处理单元100的同时操作的处理。
图6A的示意图中,触摸面板310和320上的点由触摸面板310的坐标系代表。
图6B的示意图中,触摸面板310和320上的点由触摸面板310的坐标系代表。
图7的示意图中,触摸面板310和320上的点由触摸面板310的坐标系代表。
图8是示出了第四示例性实施例中的移动信息终端配置的框图。
图9A的示意图示出了具有两个水平排列的显示屏幕的移动信息终端上图像的显示示例。
图9B的示意图示出了当在图9A所示移动信息终端上预定区域受到拷贝和显示时图像的显示示例。
图10的示意图描述第七示例性实施例的坐标系中以两个点A和B的中点的坐标作为被指定的坐标的示例。
图11的示意图描述第七示例性实施例的坐标系中以线AB与屏幕边界之间的交点处的坐标作为被指定的坐标的示例。
具体实施方式
下面将参考附图详细描述本发明。
[第一示例性实施例]
第一示例性实施例的移动信息终端具有两个显示屏幕和两个触摸面板,每个触摸面板布置在相应的显示屏幕上。当对两个显示屏幕上的触摸面板同时执行触摸操作时,受到对每个触摸面板的触摸操作的那两个点的中点处的UI组件(例如图标、按钮、或者通往网页的链接)被识别为已被指定。
图1的示意图描述了在具有两个显示屏幕并在每个显示屏幕上具有触摸面板的移动信息终端中指定UI组件的方法的示例。在图1所示的示例中,图标呈现在显示屏幕与显示屏幕之间的边界(下文种称为屏幕边界)部分处,从而干扰了用于指定该图标的触摸操作。在这样的时候,当用户同时触摸图1所示的两个黑点时,移动信息终端把受到该触摸操作的两个点的中点识别成已被指定。
图2的框图示出了第一示例性实施例的移动信息终端的配置。
如图2所示,第一示例性实施例中的移动信息终端具有处理单元100、显示单元200和输入单元300。处理单元100具有触摸事件检测单元110、同时触摸事件控制单元120、触摸事件处理单元130和显示控制单元140。同时触摸事件控制单元120具有触摸事件判定单元121、坐标转换单元122和伪触摸事件生成单元123。
显示单元200是具有两个显示屏幕的显示设备。这种示例性实施例的显示单元200具有彼此相邻地布置的显示器210和显示器220。
输入单元300是具有触摸面板的输入设备,这些触摸面板各自布置在相应的显示屏幕上。这种示例性实施例的输入单元300具有触摸面板310和触摸面板320。触摸面板310布置在显示器210的屏幕上,触摸面板320布置在显示器220的屏幕上。每个触摸面板被赋予了触摸面板ID,该ID是用于对各个触摸面板进行标识的数字。
每个触摸面板检测来自用户的触摸操作,并向触摸事件检测单元110报告触摸信息,触摸信息表明该触摸操作的状态。触摸操作是由触摸笔、或者由用户的手或手指对触摸面板来实现的预定操作。触摸信息包括各个触摸面板的触摸面板ID、表明是否已发生了触摸的信息、以及受到触摸的坐标的信息。
处理单元100对移动信息终端的全部操作进行控制。
触摸事件检测单元110从输入单元300的各个触摸面板接收触摸信息,并基于接收到的触摸信息而生成触摸事件信息。触摸事件信息包括作为触摸来源的那个触摸面板的触摸面板ID、该触摸面板上的坐标、事件发生时间、事件类型。事件类型是表明事件的类型的信息,例如触摸事件、拖动事件和释放事件,触摸事件表明用户的手、手指或触笔已经触摸了触摸面板,拖动事件表明在保持接触的同时发生了滑动,释放事件表明从触摸面板分离。
在两个触摸面板上同时执行的触摸操作被称为同时触摸操作。另外,在各个触摸面板上通过同时触摸操作而受到触摸的两个点维持触摸的同时滑动的操作被称为同时拖动操作。此外,在各个触摸面板上通过同时触摸操作而受到触摸的两个点同时解除触摸的操作被称为同时释放操作。同时触摸操作、同时拖动操作和同时释放操作统称为同时操作。
触摸事件检测单元110向触摸事件判定单元121报告所生成的触摸事件信息。
当从触摸事件检测单元10接收的触摸事件信息不是同时操作的结果时,同时触摸事件控制单元120生成由这些同时事件所指定的新的触摸事件信息,并通知触摸事件处理单元130。
触摸事件判定单元121从触摸事件检测单元110接收触摸事件信息,并对所接收的触摸事件信息进行分析。
在接收到两条触摸事件信息且事件来源是不同的触摸面板、事件发生时间的差异在预定时间间隔以内、并且事件类型都是触摸事件的时候,触摸事件判定单元121判定为已经执行了同时触摸操作。
另外,一旦触摸事件判定单元121判定了已经执行了同时触摸操作,触摸事件判定单元121就判定这些同时触摸操作一直在继续,直到接收到下述触摸事件信息为止:在该信息中,事件来源是这些触摸面板中的任一者,并且事件类型是释放事件。当同时触摸操作在继续、并且接收到的事件信息中事件来源是这些触摸面板中的任一者而事件类型是释放事件时,触摸事件判定单元121判定为同时触摸操作已被取消。
或者,当同时触摸操作在继续、并且接收到的事件信息中事件来源是这些触摸面板中的任一者而事件类型是拖动事件时,触摸事件判定单元121判定为已经执行了同时拖动操作。
当同时触摸操作在继续、且接收到两条触摸事件信息,这两条信息中事件来源是不同的触摸面板、事件发生时间的差异在预定事件间隔以内并且事件类型都是释放事件的时候,触摸事件判定单元121判定为已经执行了同时释放操作。此时,触摸事件判定单元121判定为同时触摸操作已被取消。
当触摸事件判定单元121判定了从触摸事件检测单元110接收的触摸事件信息不是同时操作的结果时,触摸事件判定单元121不加改变地向触摸事件处理单元130传送所接收的触摸事件信息。
另一方面,当触摸事件判定单元121判定为从触摸事件检测单元110接收的触摸事件信息是同时操作的结果时,触摸事件判定单元121向坐标转换单元122发送所接收的触摸事件信息。
在从触摸事件判定单元121接收到触摸事件信息时,坐标转换单元122基于所接收的触摸事件信息中包括的触摸面板上的坐标,来计算由各个操作指定的被指定坐标。
当触摸事件信息是同时触摸操作的结果时,这种示例性实施例的坐标转换单元122把在两个触摸面板处生成、并从触摸事件判定单元121接收的两条触摸事件信息中包括的各个触摸面板上的坐标的中点的坐标当作被指定坐标。
当触摸事件信息是同时拖动操作的结果时,坐标转换单元122把针对两个触摸面板从触摸事件判定单元121接收的各个最新触摸事件信息中包括的触摸面板上的坐标的中点的坐标当作被指定坐标。
当触摸事件信息是同时释放操作的结果时,坐标转换单元122把两个触摸面板中生成、并从触摸事件判定单元121接收的两条触摸事件信息中包括的各个触摸面板上的坐标的中点的坐标当作被指定坐标。
图3的示意图描述了计算被指定坐标的方法的示例。在图3所示的示例中,触摸面板310和触摸面板320彼此相邻地布置,在触摸面板310中,沿与屏幕边界相同的方向的像素数目是H而沿与屏幕边界垂直的方向的像素数目是W1;在触摸面板320中,沿与屏幕边界相同的方向的像素数目是H而沿与屏幕边界垂直的方向的像素数目是W2。
下面的说明使用了下述坐标系:在该坐标系中,与屏幕边界垂直的方向是X轴,与屏幕边界相同的方向是Y轴。该坐标系中的每个点代表触摸面板上的像素,触摸面板上的最左下方的像素的坐标被假定为(0,0)。触摸面板310的像素的坐标范围被假定为0≤X<W1和0≤Y<H。触摸面板320的像素的坐标范围被假定为0≤X<W2和0≤Y<H。
在这种移动信息终端中,假定触摸面板310的坐标(X1,Y1)处的点A和触摸面板320的坐标(X2,Y2)处的点B同时受到触摸。
在这种示例性实施例中,当一个原始图像被显示成在两个显示器210和220之间划分时,与两个显示器210和220相对应的触摸面板310和320的坐标被看作集成在一个坐标系中。这里假定触摸面板320的坐标系与触摸面板310的坐标系集成。因而,触摸面板310中的坐标由触摸面板310的坐标系不加修改地代表,而触摸面板320中的坐标被表示成转换到触摸面板310的坐标系。
在图4的示意图中,触摸面板310和320上的点由触摸面板310的坐标系来代表。尽管实际上,触摸面板310和触摸面板320之间通常存在实体间隙,但是在包括两个触摸面板310和320的坐标系中,触摸面板310和触摸面板320被看作沿着边界而毗连。在图4中,假定触摸面板320的左侧的边界线与触摸面板310的右侧的边界线毗连,触摸面板320上的点B被看作转换到触摸面板310的坐标系。
点B的坐标(X2,Y2)被转换到触摸面板310的坐标系中的点B’(W1+X2,Y2)。
如果点A和点B’的中点是C’(X3’,Y3’),则X3’由式(1)表示,而Y3’由式(2)表示。
X3’=(X1+W1+X2)/2    (1)
Y3’=(Y1+Y2)/2       (2)
这里,当式(3)成立时,中点C’存在于触摸面板320上。另一方面,当式(3)不成立时,中点C’存在于触摸面板310上。
X3’≥W1    (3)
当式(3)成立时,中点C’存在于触摸面板320上;如果触摸面板320上的指定坐标是C(X3,Y3),则X3由式(4)表示,而Y3由式(5)表示。
X3=(X1+W1+X2)/2-W1    (4)
Y3=(Y1+Y2)/2          (5)
另一方面,当式(3)不成立时,中点C’存在于触摸面板310上;如果触摸面板310上的指定坐标是C(X3,Y3),则X3由式(6)表示,而Y3由式(7)表示。
X3=(X1+W1+X2)/2    (6)
Y3=(Y1+Y2)/2       (7)
坐标转换单元122使用式(3)来区分中点C’存在于触摸面板310和触摸面板320中的哪一者上,并使用式(4)-(7)来计算指定坐标C。
坐标转换单元122向伪触摸事件生成单元123报告包含被指定的坐标的那个触摸面板的触摸面板ID、这些指定坐标、同时操作的发生时间、同时操作的事件类型(下文中,包含被指定的坐标的那个触摸面板的触摸面板ID、被指定的坐标、发生同时操作的时间、以及同时操作的事件类型统称为“转换坐标信息”)。当触摸事件信息是同时触摸操作的结果时,同时操作的事件类型是触摸事件;当触摸事件信息是同时拖动操作的结果时,该事件类型是拖动事件;当触摸事件信息是同时释放操作的结果时,该事件类型是释放事件。
伪触摸事件生成单元123从坐标转换单元122接收转换坐标信息。然后,伪触摸事件生成单元123基于所接收的转换坐标信息,针对这些同时操作而生成伪触摸事件信息。
像触摸事件信息一样,伪触摸事件信息包括事件来源的触摸面板的触摸面板ID、该触摸面板上的坐标、事件发生时间、事件类型。这里,包含了指定坐标的那个触摸面板的触摸面板ID被指定为事件来源触摸面板的触摸面板ID,被指定的坐标被指定为该触摸面板上的坐标,同时操作发生的时间被指定为事件发生时间,同时操作的事件类型被指定为事件类型。
伪触摸事件生成单元123向触摸事件处理单元130传送所生成的伪触摸事件信息。
触摸事件处理单元130向下述坐标的UI组件通知所接收到的触摸事件信息:这些坐标是从触摸事件判定单元121接收到的触摸事件信息中指定的,或者是从伪触摸事件生成单元123接收的伪触摸事件信息中指定的。
显示控制单元140把移动信息终端的输出图像显示在显示单元200的各个显示器上。
下面将描述图2所示处理单元100对同时操作进行的处理。
图5的流程图示出了由图2所示处理单元100对同时操作的处理。
触摸事件检测单元110待机,直到从输入单元300的各个触摸面板接收到触摸信息。在接收触摸信息后,触摸事件检测单元110基于所接收的触摸信息来生成触摸事件信息,并向触摸事件判定单元121报告所生成的触摸事件信息(步骤S1)。
在从触摸事件检测单元110接收触摸事件信息后,触摸事件判定单元121判定所接收的触摸事件信息是否是同时操作的结果(步骤S2)。
如果触摸事件判定单元121确定从触摸事件检测单元110接收的触摸事件信息不是同时操作的结果,则触摸事件判定单元121向触摸事件处理单元130传送所接收到的触摸事件信息,该处理前进到步骤S5。
另一方面,如果触摸事件判定单元121确定从触摸事件检测单元110接收的触摸事件信息是同时操作的结果,则触摸事件判定单元121向坐标转换单元122传送所接收的触摸事件信息。
在从触摸事件判定单元121接收到作为同时操作的结果的触摸事件信息后,坐标转换单元122基于所接收的触摸事件信息中包括的触摸面板上的坐标,来计算由各个操作所指定的被指定坐标(步骤S3)。
在计算由同时操作所指定的被指定坐标时,坐标转换单元122向伪触摸事件生成单元123通知转换坐标信息。
在从坐标转换单元122接收转换坐标信息后,伪触摸事件生成单元123基于所接收的转换坐标信息,来针对这些同时操作生成伪触摸事件信息(步骤S4)。
在针对同时触摸操作生成了伪触摸事件信息后,伪触摸事件生成单元123向触摸事件处理单元130传送所生成的伪触摸事件信息。
在从触摸事件判定单元121接收触摸事件信息后,触摸事件处理单元130向该触摸事件信息所指定的坐标的UI组件通知所接收的触摸事件信息(步骤S5)。
另一方面,在从伪触摸事件生成单元123接收到伪触摸事件信息时,触摸事件处理单元130向该伪触摸事件信息中指定的坐标的UI组件通知所接收的伪触摸事件信息(步骤S5)。
在完成了与触摸事件信息或伪触摸事件信息相对应的处理后,触摸事件处理单元130再次前进到步骤S1。
尽管在这种示例性实施例所示的示例中,当对两个显示屏幕上的触摸面板同时执行触摸操作时,移动信息终端识别出对两个点(在这两个点处执行了触摸操作)的中点的指定,但是本发明不限于这种形式。同时触摸操作所指定的点可以是把两个点(在这两个点处执行了触摸操作)相连的线上的点,或者例如可以是把这两个点相连的线上的点,还可以是离这两个点的距离处于预定比率的点。
尽管在这种示例性实施例所示的示例中,触摸事件判定单元121在检测到同时(事件发生时间的差异在预定事件间隔以内)发生的两个触摸事件时判定为已经执行了同时触摸操作,但是本发明不限于这种形式。例如,当在感测到同时发生的两个触摸事件之后预定的时间间隔中触摸事件判定单元121没有感测到释放事件时,触摸事件判定单元121可以判定为已经执行了同时触摸操作。
另外,在这种示例性实施例的移动信息终端中,示出了这样的示例:当对两个显示屏幕上的触摸面板执行同时触摸操作时,两个点(在这两个点处对各个触摸面板执行了这些触摸操作)的中点处的UI组件被识别成已被指定。不过本发明不限于这种形式。当对两个显示屏幕上的触摸面板执行同时触摸操作时,移动信息终端也可以把两个点(在这两个点处对各个触摸面板执行了这些触摸操作)之间的预定区域中的UI组件识别为已被指定。
或者,当对两个显示屏幕上的触摸面板执行同时触摸操作时,移动信息终端也可以把将两个点(在这两个点处对各个触摸面板执行了这些触摸操作)相连的线附近的UI组件识别为已被指定。在此情形下,移动信息终端把离开线(该线把这两个点相连)预定距离内存在的UI组件识别为已被指定。
或者,当对两个显示屏幕上的触摸面板执行同时触摸操作时,移动信息终端可以把与两个点(在这两个点处对各个触摸面板执行了这些触摸操作)相连的线相交的UI组件识别为已被指定。
另外,尽管在这种示例性实施例所示的示例中,显示单元200具有两个显示屏幕,输入单元300具有两个输入面板,但是本发明不限于这种形式,显示单元200可以具有三个或更多个显示屏幕,输入单元300可以具有三个或更多个输入面板。
尽管在这种示例性实施例所示的示例中,移动信息终端的输入单元被配置成把各个触摸面板布置在显示屏幕上,但是本发明不限于这种形式。移动信息终端的输入单元可以是对与显示屏幕的接触进行感测的任何形式,并可以是包含在显示面板中并能够区分出接触的传感器。
根据本申请中所述的这种示例性实施例,当对两个显示屏幕上的触摸面板执行同时触摸操作时,移动信息终端把两个点(在这两个点处对各个触摸面板执行了这些触摸操作)之间的预定区域中的UI组件识别为已被指定。因而,用户能够在UI组件跨在屏幕边界时也容易地指定该UI组件(例如图标、按钮、或者通往网页的链接)。从而改善了对屏幕边界上的UI组件进行指定的操作的容易度。
另外,当对两个显示屏幕的触摸面板执行同时触摸操作时,这种示例性实施例的移动信息终端把与把两个点(在这两个点处对各个触摸面板执行了这些触摸操作)相连的线相交的UI组件识别为已被指定。用户从而能够更合适地指定UI组件。
当对两个显示屏幕上的触摸面板执行同时触摸操作时,这种示例性实施例的移动信息终端把两个点(在这两个点处对各个触摸面板执行了这些触摸操作)的中点处的UI组件识别为已被指定。用户从而能够合适并且可视地指定UI组件。
另外,这种示例性实施例的移动信息终端实现了在相连的坐标系上指定UI组件的操作,该坐标系使得两个显示屏幕沿着边界毗连。这样,用户能够像两个显示屏幕之间不存在实体间隙一样指定UI组件。
尽管这种示例性实施例中示出了同时触摸操作、同时拖动操作和同时释放操作作为对两个触摸面板的同时操作的示例,但是本发明不限于这些形式。对两个触摸面板的同时操作例如可以是与双击等效的操作。当在这些情形下对两个触摸面板同时执行与双击等效的操作时,移动信息终端把两个点(在这两个点处执行了这些操作)之间的预定区域中的UI组件识别为已受到双击。例如,当对两个触摸面板执行与双击等效的操作时,移动信息终端把两个点(在这两个点处执行了这些操作)的中点处的UI组件识别为已受到双击。用户从而能够即使在UI组件跨在屏幕边界上的时候也容易地对该UI组件执行双击。
另外,对两个触摸面板同时执行的操作例如也可以是拖放(drag anddrop)。在这些情形下,用户首先同时触摸两个点,于是移动信息终端选择受到触摸的两个点之间的预定区域中的UI组件。然后用户在维持接触的同时滑动这两个点,于是移动信息终端使所选择的UI组件随着这两个点的滑动而一起移动。最后,在该UI组件处于所需位置处时,用户把这两个点的接触同时释放,于是移动信息终端在该位置处解除对该UI组件的选择。例如,移动信息终端选择由用户触摸的两个点的中点处的UI组件,并使该UI组件移动到与正被用户滑动的两个点的中点相匹配。这样,即使UI组件跨在屏幕边界上,用户也能够容易地对UI组件执行拖放操作。这种拖放操作可以用来进行拷贝和粘贴,或者用来改变平面边界处的UI组件的显示位置。
[第二示例性实施例]
在第一示例性实施例的移动信息终端中,示出了这样的示例:对两个显示屏幕上的触摸面板执行同时触摸操作,受到对各个触摸面板的触摸操作的两个点的中点处的UI组件被识别为已被指定。
但是,本发明不限于这种形式。例如,可以把屏幕边界与线(该线把受到触摸操作的两个点相连)的交点处的UI组件当作控制对象,来更加合适地指定跨在平面边界上的UI组件。这样,在第二示例性实施例中,描述了这样的示例:当对两个显示屏幕上的触摸面板实施同时触摸操作时,屏幕边界与线(该线把受到对各个触摸面板的触摸操作的两个点相接)的交点处的UI组件被识别为已被指定。
第二示例性实施例的移动信息终端的基本配置与第一示例性实施例的移动信息终端的配置相同。
但是,当触摸事件信息是同时触摸操作的结果时,第二示例性实施例的坐标转换单元122把屏幕边界与下述线的交点的坐标当作被指定坐标:该线把两条触摸事件信息(这些信息是在两个触摸面板上产生并从触摸事件判定单元121接收的)中包括的各个触摸面板上的坐标相接。
下面将描述图3所示触摸面板310和320中的屏幕边界与线(该线把受到同时触摸操作的两个点相接)之间的交点的计算。
在图3所示的触摸面板310和320中,触摸面板310的坐标(X1,Y1)处的点A和触摸面板320的坐标(X2,Y2)处的点B同时受到触摸。
图6A示出了由触摸面板310的坐标系代表的触摸面板310和320上的点。尽管触摸面板310与触摸面板320之间实际上通常存在实体间隙,但是在包括两个触摸面板310和320的坐标系中,触摸面板310和320被看作在边界处毗连。在图6A中,触摸面板320的左边缘处的边界线被看作与触摸面板310的右边缘的边界线毗连,触摸面板320上的点B被转换到触摸面板310的坐标系。
点B的坐标(X2,Y2)被转换到触摸面板310的坐标系中的点B’(W1+X2,Y2)。
假定线AB’与线X=W1的交点是C(W1,Y3),则从下述两个直角三角形之间的相似比可以得出式(8):由点B’、点A和由坐标(X1,Y2)代表的点D这三个点所代表的直角三角形;由点B’、点C和由坐标(W1,Y2)代表的点E这三个点所代表的直角三角形。
Y1-Y2∶Y3-Y2=W1+X2-X1∶X2    (8)
通过对式(8)求解,交点C的Y坐标Y3由式(9)表示。
Y3=(W1×Y2-2-X1×Y2+X2×Y1)/(W1-X1+X2)    (9)
另外,图6B示出的示意图中,当点B’的Y坐标Y2的值大于点A的Y坐标Y1时,触摸面板310和320上的点由触摸面板310的坐标系代表。
假定线AB’与线X=W1的交点是C(W1,Y3),则从下述两个直角三角形之间的相似比可以得出式(10):由点A、点B’和由坐标(W1+X2,Y1)代表的点F这三个点所代表的直角三角形;由点A、点C和由坐标(W1,Y1)代表的点G这三个点所代表的直角三角形。
Y2-Y1∶Y3-Y1=W1+X2-X1∶W1-X1    (10)
通过对式(10)求解,当点B’的Y坐标Y2的值大于点A的Y坐标Y1时,交点C的Y坐标Y3由式(9)表示。
坐标转换单元122使用式(9)来计算Y3,并向伪触摸事件生成单元123报告转换坐标信息,在所述转换坐标信息中,触摸面板320上坐标为(0,Y3)的点是被指定坐标。
这样,当对两个显示屏幕上的触摸面板同时执行触摸操作时,第二示例性实施例的触摸事件处理单元130向屏幕边界与下述线的交点处的UI组件通知触摸事件信息:该线把受到对各个触摸面板的触摸操作的两个点相连。
如上所述,根据这种示例性实施例,当对两个显示屏幕上的触摸面板执行同时触摸操作时,移动信息终端识别出屏幕边界与线(该线把对两个触摸面板执行触摸操作处的两个点相连)的交点处的UI组件已被指定。这样,即使用户进行的触摸操作中发生分歧,移动信息终端也能够更加精确地指定跨在屏幕边界上的UI组件。
[第三示例性实施例]
在第一和第二示例性实施例中,描述了这样的示例:当在移动信息终端中对两个显示屏幕上的触摸面板执行同时触摸操作时,把两个点(这两个点受到了对各个触摸面板的触摸操作)相连的线上的UI组件被识别成已被指定。
不过,本发明不限于这种形式。例如,可以通过把与预定区域相交的UI组件当作控制对象,来更加合适地指定跨在屏幕边界上的UI组件,所述预定区域由受到触摸操作的这两个点来确定。在第三示例性实施例中,描述了这样的示例:当对两个显示屏幕上的触摸面板同时执行触摸操作时,与预定区域相交的UI组件被识别成已被指定,该预定区域由对各个触摸面板执行的触摸操作所确定。
第三示例性实施例的移动信息终端的基本配置与第一示例性实施例的移动信息终端的配置相同。
但是,当坐标转换单元122从触摸事件判定单元121接收到两条触摸事件信息、这些信息是同时触摸操作的结果时,第三示例性实施例的坐标转换单元122把与下述矩形区域相交的UI组件的中心坐标作为被指定坐标:该矩形区域以这两条触摸事件信息中包括的各个触摸面板上的坐标为两个对角的顶点。
下面将描述与图3所示触摸面板310和320中对屏幕边界与线(该线把受到同时触摸操作的两个点相连)的交点进行计算有关的示例。
在图3所示的触摸面板310和320中,触摸面板310的坐标(X1,Y1)处的点A和触摸面板320的坐标(X2,Y2)处的点B同时受到触摸。
图7示出了触摸面板310的坐标系中触摸面板310和320上的点。尽管触摸面板310与触摸面板320之间实际上通常存在实体间隙,但是在包括两个触摸面板310和320的坐标系中,触摸面板310和320被看作在边界处毗连。在图7中,触摸面板320的左边缘的边界线被假定与触摸面板310的右边缘的边界线毗连,触摸面板320上的点B被转换到触摸面板310的坐标系。
点B的坐标(X2,Y2)被转换到触摸面板310的坐标系中的点B’(W1+X2,Y2)。
此时,坐标转换单元122搜索与下述矩形区域相交的UI组件:该区域由触摸面板310的坐标系中坐标为(X1,Y1)、(X1,Y2)、(W1+X2,Y1)和(W1+X2,Y2)的四个点所包围。在检测到与该矩形区域相交的UI组件时,坐标转换单元122向伪触摸事件生成单元123报告转换坐标信息,所述转换坐标信息把该UI组件的中心坐标当作被指定坐标。
这样,当执行同时触摸操作时,触摸事件处理单元130能够向与下述矩形区域相交的UI组件通知触摸事件信息:该区域以受到对各个触摸面板的触摸操作的两个点为对角顶点。
当与该矩形区域相交的UI组件不存在时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123通知转换坐标信息。
或者,当存在多个UI组件与该矩形区域相交时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123通知转换坐标信息。当移动信息终端以此方式工作时,可以防止下述错误操作:即用户无意中执行了指定多个UI组件的触摸操作。
或者,当存在多个UI组件与该矩形区域相交时,坐标转换单元122可以向伪触摸事件生成单元123通知转换坐标信息,该转换坐标信息把对于该矩形区域中存在的每个UI组件的每个UI组件的中心坐标当作被指定坐标。当移动信息终端以此方式工作时,用户能够同时指定多个UI组件作为一组。
根据上述这种示例性实施例,当执行同时触摸操作时,移动信息终端把与预定区域相交的UI组件识别成已被指定,该区域由受到触摸操作的两个点来确定。这样,即使用户为指定UI组件而进行的触摸中发生某个量的分歧,移动信息终端也能够指定所需的UI组件,从而能够改善操作的容易度。
另外,当用户执行拖放操作时,这种示例性实施例的移动信息终端可以不仅使UI组件移动,而且使由同时触摸操作所指定的整个区域移动。
[第四示例性实施例]
在第一至第三示例性实施例中,示出了这样的示例:当执行同时触摸操作时,移动信息终端指定UI组件;但是本发明不限于这种形式。例如,如果移动信息终端显示光标(例如箭头)以示出执行同时触摸操作时的操作对象,则可以改善操作的容易度。下面将描述一种示例,在该示例中,在执行同时触摸操作时,第四示例性实施例的移动信息终端显示光标。
图8的框图示出了第四示例性实施例的移动信息终端的配置。
如图8所示,第四示例性实施例的移动信息终端的基本配置与第一示例性实施例的移动信息终端的配置相同。但是,第四示例性实施例的移动信息终端的处理单元100包括图像处理单元150。
在由坐标转换单元122请求把光标显示或移动到被指定坐标时,图像处理单元150在当前正显示的图像的被指定坐标处绘制光标并向显示控制单元140提供此结果。
另外,在从触摸事件判定单元121接收了因同时触摸操作而造成的两条触摸事件信息时,第四示例性实施例的坐标转换单元122从这两条触摸事件信息计算对光标进行显示的被指定坐标。然后,坐标转换单元122请求图像处理单元150在所计算出的被指定坐标处显示该光标。此时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123通知转换坐标信息。
另外,当光标正被显示时,在从触摸事件判定单元121接收到因同时拖动操作而造成的两条触摸事件信息时,坐标转换单元122从这两条触摸事件信息计算用于移动光标的被指定坐标。然后,坐标转换单元122请求图像处理单元150把光标移动到所计算出的被指定坐标。此时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123通知转换坐标信息。
当光标正被显示时,在从触摸事件判定单元121接收到因同时释放操作而造成的两条触摸事件信息时,坐标转换单元122从这两条触摸事件信息计算被指定坐标。然后,坐标转换单元122生成转换坐标信息并向伪触摸事件生成单元123通知转换坐标信息,所述转换坐标信息表明在所计算出的被指定坐标处发生了触摸事件。
下面将描述当把受到同时触摸操作的两个点的中点作为被指定坐标时,移动信息终端的显示与用户的操作之间的关系。首先,用户同时触摸两个点,于是移动信息终端在受到触摸的这两个点的中点处显示光标。接着,用户在维持接触的同时滑动这两个点,于是移动信息终端使光标移动,以与这两个点的中点匹配。最后,当光标处在表明所需UI组件的位置时,用户同时解除与这两个点的接触,于是移动信息终端指定该UI组件。
如上所述,根据这种示例性实施例,当执行同时触摸操作时,移动信息终端显示光标。这样,用户能够在通过光标对由同时触摸操作所指定的点进行目视检查的同时执行操作。
另外,当在显示着光标的被指定坐标处存在UI组件时,这种示例性实施例的坐标转换单元122可以把该UI组件显示成使该UI组件能够与其他组件区分开来。这样,即使光标跨在屏幕边界上并因而难以看到,用户也能够容易地检查正被指定的UI组件。
[第五示例性实施例]
在第五示例性实施例中,为了减少屏幕边界处的观看难度,移动信息终端在初始触摸操作中把被显示成跨在屏幕边界上的图像的一部分拷贝并显示在两个显示屏幕中的任一者上,然后在下一触摸操作中指定所拷贝和显示的UI组件。
图9A是具有水平布置的两个显示屏幕的移动信息终端中图像的显示示例。在图9A所示的示例中,在两个显示屏幕的间隙处显示的图标被分割开并难以看到。如果图9A所示的两个黑点受到用户同时触摸,然后使这两个受到同时触摸的点向左滑动,则移动信息终端把跨在屏幕边界上的预定区域(图9A中由对角阴影线所示的部分)拷贝并显示在左侧的显示屏幕上。图9B是当图9A所示移动信息终端上拷贝和显示了该预定区域时图像的显示示例。如图9B所示,只有图9A中由对角阴影线所示的部分被拷贝并显示在左侧的显示屏幕上。
通过基于在这种拷贝并显示的状态下向左滑动了的两个受到触摸的点的进一步运动,使表明操作对象的光标移动,能够改善操作的容易度。
第五示例性实施例的移动信息终端的基本配置与第一示例性实施例的移动信息终端的配置相同。
但是,在从触摸事件判定单元121接收到因同时触摸操作而造成的两条触摸事件信息、然后接收到因同时拖动操作而造成的两条触摸事件信息时,第五示例性实施例的坐标转换单元122向图像处理单元150发出请求以进行拷贝和显示。坐标转换单元122还基于从触摸事件判定单元121接收的触摸事件信息来计算用于显示光标的被指定坐标。然后,坐标转换单元122请求图像处理单元150把光标显示在所计算出的被指定坐标处。此时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123报告转换坐标信息。
在由坐标转换单元122请求进行拷贝和显示时,图像处理单元150确定作为拷贝和显示的源的区域(下文中称为拷贝源区域)以及用于拷贝和显示的目标区域(下文中称为拷贝目标区域)。首先,图像处理单元150从显示控制单元140获得显示器210和显示器220上当前正在显示的图像。然后,图像处理单元150把所获得的图像中拷贝源区域的图像拷贝到拷贝目标区域,并向显示控制单元140提供该结果。
另外,在拷贝和显示的时候,当从坐标转换单元122请求图像处理单元150把光标显示在被指定坐标处时,图像处理单元150把光标绘制在正被拷贝和显示的图像的被指定坐标处,并向图像控制单元140提供该结果。当被指定坐标表明拷贝源区域时,图像处理单元150把光标绘制在与被指定坐标相对应的拷贝目标区域的坐标处。当被指定坐标表明拷贝源区域时,图像处理单元150也可以简单地在被指定坐标处绘制光标。是简单地把光标绘制在被指定坐标处,还是把光标绘制在与被指定坐标相对应的拷贝目标区域的坐标处,这种选项可以是移动信息终端中预先设定的。
或者,在拷贝和显示的时候,在从触摸事件判定单元121接收到因同时拖动操作而造成的两条触摸事件信息时,坐标转换单元122基于这两条触摸事件信息来计算使光标移动的被指定区域。然后,坐标转换单元122请求图像处理单元150把光标移动到所计算出的被指定坐标。此时,坐标转换单元122丢弃从触摸事件判定单元121接收的触摸事件信息,而不向伪触摸事件生成单元123通知转换坐标信息。
在拷贝和显示的时候,在由坐标转换单元122请求把光标移动到被指定坐标时,图像处理单元150把光标绘制在正被拷贝和显示的图像的被指定坐标处,并向显示控制单元140提供该结果。
或者,在在拷贝和显示的时候,在从触摸事件判定单元121接收到因同时释放操作而造成的两条触摸事件信息时,坐标转换单元122基于这两条触摸事件信息来计算被指定坐标。然后,坐标转换单元122生成转换坐标信息并向伪触摸事件生成单元123通知该信息,该信息表明在所计算出的被指定坐标处发生了触摸事件。
在从触摸事件判定单元121接收到触摸事件信息或者从伪触摸事件生成单元123接收到伪触摸事件信息时,第五示例性实施例的触摸事件处理单元130判定拷贝和显示当前是否生效。如果处在拷贝和显示的状态中,则触摸事件处理单元130把所接收到的触摸事件信息或伪触摸事件信息中包括的触摸面板上的坐标转换成拷贝源区域中的坐标。然后,触摸事件处理单元130向对触摸事件信息中指定的UI组件进行管理的应用通知已受到坐标转换的触摸事件信息。
在拷贝和显示的时候,当用户实施用于结束拷贝和显示的预定触摸操作时,坐标转换单元122请求图像处理单元150终止拷贝和显示。
在由坐标转换单元122请求终止拷贝和显示时,图像处理单元150向显示控制单元140提供在拷贝和显示之前正被显示的图像。
根据上述这种示例性实施例,移动信息终端把跨在屏幕边界上的预定部分的显示拷贝和显示到两个显示屏幕中的任一者上,使得用户能够在进行了拷贝和显示的显示屏幕上指定UI组件。这样,用户能够在通过光标对正被拷贝和显示的UI组件进行目视确认的同时操作移动信息终端。
[第六示例性实施例]
在第五示例性实施例中,描述了这样的示例:当在拷贝和显示的时候执行同时拖动操作时,通过使光标移动来便于对正被拷贝和显示的UI组件进行指定。但是,本发明不限于这种形式。例如,移动信息终端可以在拷贝和显示的同时,一个接一个地相继显示正被拷贝和显示的UI组件,并在执行同时释放操作时指定UI组件。在第六示例性实施例中,描述了这样的示例:当在拷贝和显示的时候同时触摸操作正在继续时,正被拷贝和显示的UI组件被一次一个地依次显示。
第六示例性实施例的移动信息终端的基本配置与第五示例性实施例的移动信息终端的配置相同。
但是,在拷贝和显示的时候同时触摸操作正在继续的时候,第六示例性实施例的坐标转换单元122请求图像处理单元150一次一个地相继显示正被拷贝和显示的UI组件。
在由坐标转换单元122请求一个接一个地相继显示正被拷贝和显示的UI组件时,图像处理单元150向显示控制单元140相继提供下述图像:这些图像一次一个地绘制拷贝目标区域中的UI组件。
在拷贝和显示的时候从触摸事件判定单元121接收到因同时释放操作而造成的两条触摸事件信息时,坐标转换单元122计算当时正被显示的UI组件的中心坐标。然后,坐标转换单元122生成转换坐标信息并向伪触摸事件生成单元123提供通知,所述转换坐标信息表明在所计算出的坐标处发生了触摸事件。接着,坐标转换单元122终止对正在被拷贝和显示的UI组件进行的一个接一个的相继显示,并请求图像处理单元150像正常情况一样作为一组进行显示。
根据上述这种示例性实施例,在把跨在屏幕边界上的预定部分的显示拷贝和显示在两个显示屏幕中的任一者上时,同时触摸操作在继续的时候,移动信息终端一个接一个地相继显示正被拷贝和显示的UI组件。此时,用户能够在执行同时释放操作的时候指定UI组件。这样,能够改善移动信息终端的操作容易度。
[第七示例性实施例]
在第一至第三示例性实施例中,描述了这样的示例:在相连的坐标系(使得触摸面板310和320在边界处毗连)中执行用于指定UI组件的操作;但是实际上,触摸面板310与触摸面板320之间通常存在实体间隙。结果,把两个点(触摸面板310上的点和触摸面板320上的点)相接的线有时候在下述两个情形之间彼此不匹配:该线在两个触摸面板毗连的坐标系中把两个点相接的情形、用户实际看到的两个点由实体线相接的情形。
在这种示例性实施例中,描述了这样的示例:考虑到触摸面板310与触摸面板320之间存在的实体间隙,被指定的UI组件处在把受到用户触摸的两个点实体相连的线上。在这种示例性实施例中,用于指定UI组件的操作是在下述坐标系中执行的:在该坐标系中,触摸面板310上的坐标和触摸面板320上的坐标被布置成实体地位于触摸面板310和触摸面板320上。
假定在触摸面板310和320中,触摸面板310的坐标(X1,Y1)处的点A和触摸面板320的坐标(X2,Y2)处的点B同时受到触摸。
首先描述这样的示例:这两个点A和B的中点的坐标被当作这种示例性实施例的坐标系上的被指定坐标。
图10示出的示意图用于描述这样的示例:这种示例性实施例的坐标系上的两个点A和B的中点的坐标被当作被指定坐标。在图10所示的示例中,假定触摸面板310的右边缘的边界线与触摸面板320的左边缘的边界线之间存在相当于这些触摸面板的L个像素的间距。假定触摸面板310的右边缘的边界线与这两个触摸面板之间的间隙的左边缘的边界线接触,并假定触摸面板320的左边缘的边界线与这两个触摸面板之间的间隙的右边缘的边界线接触。
点B的坐标(X2,Y2)被转换到下述坐标系中的点B’(W1+L+X2,Y2):在该坐标系中,触摸面板310上的坐标和触摸面板320上的坐标按照触摸面板310和触摸面板320的实体位置关系来布置。
此时,点A和点B’的中点C’(X3’,Y3’)的X3’由式(11)表示,中点C’(X3’,Y3’)的Y3’由式(12)表示。
X3’=(X1+L+W1+X2)/2    (11)
Y3’=(Y1+Y2)/2    (12)
这里,当式(13)成立时,中点C’处在触摸面板310上。
X3’<W1           (13)
另一方面,当式(14)成立时,中点C1’处在触摸面板320上。
W1+L≤X3’         (14)
另外,当式(15)成立时,中点C’处在触摸面板310与触摸面板320之间的间隙中。
W1≤X3’≤W1+L     (15)
当式(13)成立时,中点C’处在触摸面板310上,假定触摸面板310上的被指定坐标是C(X3,Y3),则X3由式(16)表示,Y3由式(17)表示。
X3=(X1+L+W1+X2)/2    (16)
Y3=(Y1+Y2)/2         (17)
另一方面,当式(14)成立时,中点C’处在触摸面板320上,当触摸面板320上的被指定坐标是C(X3,Y3)时,X3由式(18)表示,Y3由式(19)表示。
X3=(X1+L+W1+X2)/2-(W1+L)    (18)
Y3=(Y1+Y2)/2                (19)
当式(15)成立时,中点C’处在触摸面板310与触摸面板320之间的间隙中。在此情形中,与中点C’最接近的那个触摸面板上的点被当作被指定坐标。换言之,当式(20)成立时,触摸面板310上的点成为被指定坐标。如果假定触摸面板310上的被指定坐标是C(X3,Y3),则X3由式(21)表示,Y3由式(22)表示。
X3<W1+L/2       (20)
X3=W1-1         (21)
Y3=(Y1+Y2)/2    (22)
另一方面,当式(20)不成立时,触摸面板320上的点成为被指定坐标。如果假定触摸面板320上的被指定坐标是C(X3,Y3),则X3由式(23)表示,Y3由式(24)表示。
X3=0            (23)
Y3=(Y1+Y2)/2    (24)
下面将描述这样的示例:屏幕边界与这种示例性实施例的坐标系上的线AB的交点处的坐标被假定为被指定坐标。
图11示出的示意图用于说明这样的示例:屏幕边界与这种示例性实施例的坐标系中的线AB的交点处的坐标被当作被指定坐标。在图11所示的示例中,与图10所示的示例一样,假定触摸面板310的右边缘的边界线与触摸面板320的左边缘的边界线之间存在相当于L个像素间距。假定触摸面板310的右边缘的边界线与这两个触摸面板之间的间隙的左边缘的边界线接触,并假定触摸面板320的左边缘的边界线与这两个触摸面板之间的间隙的右边缘的边界线接触。
在触摸面板310上的坐标和触摸面板320上的坐标按照触摸面板310和触摸面板320的实体位置关系来布置的坐标系中,线AB与触摸面板320的左边缘的边界线的交点位置有时候大大不同于线AB与触摸面板310的右边缘的边界线的交点位置。在这种示例性实施例的坐标系中计算被指定坐标时,假定线AB与触摸面板320的左边缘的边界线的交点以及线AB与触摸面板310的右边缘的边界线的交点被同时指定。
点B的坐标(X2,Y2)被转换到下述坐标系中的点B’(W1+L+X2,Y2):在该坐标系中,触摸面板310上的坐标和触摸面板320上的坐标按照触摸面板310和触摸面板320的实体位置关系来布置。
首先计算线AB’与触摸面板320的左边缘的边界线的交点。
如果假定线AB’与线X=W1+L(该线表明触摸面板320的左边缘的边界线)的交点为C’(W1+L,Y3’),则基于下述两个直角三角形之间的相似比可以得出式(25):由点B’、点A和由坐标(X1,Y2)代表的点D这三个点所代表的直角三角形;由点B’、点C’和由坐标(W1+L,Y2)代表的点E’这三个点所代表的直角三角形。
Y1-Y2∶Y3’-Y2=W1+L+X2-X1∶X2    (25)
通过对式(25)求解,可以计算Y3’,并可以计算线AB’与触摸面板320的左边缘的边界线的交点。
下面计算线AB’与触摸面板310的右边缘的边界线的交点。
如果假定线AB’与线X=W1-1(该线表明触摸面板310的右边缘的边界线)的交点为C(W1-1,Y3),则基于下述两个直角三角形之间的相似比可以得出式(26):由点B’、点A和由坐标(X1,Y2)代表的点D这三个点所代表的直角三角形;由点B’、点C和由坐标(W1-1,Y2)代表的点E这三个点所代表的直角三角形。
Y1-Y2∶Y3-Y2=W1+L+X2-X1∶L+X2+1    (26)
通过对式(26)求解,可以计算Y3,并可以计算线AB’与触摸面板310的右边缘的边界线的交点。
如上所述,这种示例性实施例的移动信息终端在下述坐标系中执行用于指定UI组件的操作:在该坐标系中,触摸面板310上的坐标和触摸面板320上的坐标按照触摸面板310和触摸面板320的实体位置关系来布置。这样,通过指定跨在这两个触摸面板之间存在的实体间隙上的实体直线,用户能够指定该线上的UI组件,并因而能够更容易地实施UI组件的可视指定。
本发明的移动信息终端上执行的方法也可以应用于由计算机执行的程序。该程序也可以储存在储存介质上并可以通过网络而提供给外部。
尽管上文已经参考示例性实施例描述了本申请的发明,但是本发明不限于上述示例性实施例。本申请的发明的范围对于本领域普通技术人员是清楚的,在该范围内,本申请的发明的配置和细节对于各种变更形式是开放的。
本申请基于2009年10月28日提交的日本专利申请No.2009-248066而要求优先权,该申请的全部公开内容通过引用方式结合于此。

Claims (27)

1.一种移动信息终端,包括:
显示单元,其具有两个或更多个显示屏幕;
触摸面板输入单元,其对与每个所述显示屏幕的接触进行感测;以及
处理单元,当对这两个相邻的显示屏幕执行预定的触摸操作时,所述处理单元识别出在对这两个相邻的显示屏幕执行所述预定的触摸操作时受到触摸的两个点之间的预定区域中的组件已被指定。
2.根据权利要求1所述的移动信息终端,其中,当执行所述预定的触摸操作时,所述处理单元识别出与把在所述预定的触摸操作中受到触摸的两个点相连的线相交的组件已被指定。
3.根据权利要求2所述的移动信息终端,其中,当执行所述预定的触摸操作时,所述处理单元识别出在所述预定的触摸操作中受到触摸的两个点的中点处的组件已被指定。
4.根据权利要求2所述的移动信息终端,其中,当执行所述预定的触摸操作时,所述处理单元识别出处在所述两个显示屏幕的边界与把在所述预定的触摸操作中受到触摸的两个点相连的线的交点处的组件已被指定。
5.根据权利要求2至4中任一项所述的移动信息终端,其中,把所述两个点相连的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕连在一起从而在其边界处毗连。
6.根据权利要求2至4中任一项所述的移动信息终端,其中,把所述两个点相接的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕上的坐标被布置成实体地处在所述两个显示屏幕中的每一者上。
7.根据权利要求1至6中任一项所述的移动信息终端,其中,所述预定的触摸操作是对所述两个显示屏幕执行的同时触摸操作。
8.根据权利要求1至6中任一项所述的移动信息终端,其中,所述预定的触摸操作是同时对所述两个显示屏幕进行的双击操作。
9.根据权利要求1至6中任一项所述的移动信息终端,其中,当通过所述预定的触摸操作受到触摸的两个点在仍然被触摸的同时移动时,所述处理单元使通过所述预定的触摸操作而被指定的组件按照所述两个点的移动而移动,并且当对所述两个点进行触摸的操作被解除时,所述处理单元使对所述组件的选择在下述位置处被取消:所述组件当时正被显示在该位置处。
10.一种应用于移动信息终端中的处理方法,所述移动信息终端具有两个或更多个显示屏幕并具有对与这些显示屏幕中的每一者的接触进行感测的触摸面板输入装置,所述处理方法包括下列步骤:
检测对两个相邻的显示屏幕执行的预定触摸操作;以及
把在对所述两个显示屏幕执行的所述预定触摸操作中受到触摸的两个点之间的预定区域中的组件识别成被指定。
11.根据权利要求10所述的方法,还包括下列步骤:当检测到所述预定触摸操作时,把与把所述预定触摸操作中受到触摸的两个点相连的线相交的组件识别成被指定。
12.根据权利要求11所述的方法,还包括下列步骤:当检测到所述预定触摸操作时,把所述预定触摸操作中受到触摸的两个点的中点处的组件识别成被指定。
13.根据权利要求11所述的方法,还包括下列步骤:当检测到所述预定触摸操作时,把所述两个显示屏幕的边界与把所述预定触摸操作中受到触摸的两个点相连的线的交点处的组件识别成被指定。
14.根据权利要求10至13中任一项所述的方法,其中,把两个点相连的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕连在一起从而在其边界处毗连。
15.根据权利要求10至13中任一项所述的方法,其中,把所述两个点相接的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕的坐标被布置成实体地处在所述两个显示屏幕中的每一者上。
16.根据权利要求10至15中任一项所述的方法,其中,所述预定的触摸操作是对所述两个显示屏幕执行的同时触摸操作。
17.根据权利要求10至15中任一项所述的方法,其中,所述预定的触摸操作是同时对所述两个显示屏幕进行的双击操作。
18.根据权利要求10至15中任一项所述的方法,其中,当所述预定的触摸操作中受到触摸的两个点在仍然被触摸的同时移动时,使所述预定的触摸操作中被指定的组件按照所述两个点的移动而移动,并且当对所述两个点进行触摸的操作被解除时,使对所述组件的选择在下述位置处被取消:所述组件当时正被显示在该位置处。
19.一种程序,用于使计算机执行下列处理:
检测对移动信息终端的两个相邻的显示屏幕执行的预定触摸操作,所述移动信息终端具有两个或更多个显示屏幕并具有对与每个所述显示屏幕的接触进行感测的触摸面板输入装置;以及
把在对所述两个显示屏幕执行的所述预定触摸操作中受到触摸的两个点之间的预定区域中的组件识别成被指定。
20.根据权利要求19所述的程序,其中,当检测到所述预定触摸操作时,与把所述预定触摸操作中受到触摸的两个点相接的线相交的组件被识别成被指定。
21.根据权利要求20所述的程序,其中,当检测到所述预定触摸操作时,所述预定触摸操作中受到触摸的两个点的中点处的组件被识别成被指定。
22.根据权利要求20所述的程序,其中,当检测到所述预定触摸操作时,所述两个显示屏幕的边界与把所述预定触摸操作中受到触摸的两个点相接的线的交点处的组件被识别成被指定。
23.根据权利要求20至22中任一项所述的程序,其中,把两个点相连的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕连在一起从而在其边界处毗连。
24.根据权利要求20至22中任一项所述的程序,其中,把所述两个点相接的所述线是下述坐标系上的线:在该坐标系中,所述两个显示屏幕上的坐标被布置成实体地处在所述两个显示屏幕中的每一者上。
25.根据权利要求19至24中任一项所述的程序,其中,所述预定的触摸操作是对所述两个显示屏幕执行的同时触摸操作。
26.根据权利要求19至24中任一项所述的程序,其中,所述预定的触摸操作是同时对所述两个显示屏幕进行的双击操作。
27.根据权利要求19至24中任一项所述的程序,其中,当所述预定的触摸操作中受到触摸的两个点在仍然被触摸的同时移动时,使所述预定的触摸操作中被指定的所述组件按照所述两个点的移动而移动,并且当对所述两个点进行触摸的操作被解除时,使对所述组件的选择在下述位置处被取消:所述组件当时正被显示在该位置处。
CN201080049098XA 2009-10-28 2010-09-28 移动信息终端、处理方法、程序 Pending CN102597926A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009248066 2009-10-28
JP2009-248066 2009-10-28
PCT/JP2010/066759 WO2011052324A1 (ja) 2009-10-28 2010-09-28 携帯情報端末、処理方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN102597926A true CN102597926A (zh) 2012-07-18

Family

ID=43921752

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080049098XA Pending CN102597926A (zh) 2009-10-28 2010-09-28 移动信息终端、处理方法、程序

Country Status (5)

Country Link
US (1) US20120212443A1 (zh)
EP (1) EP2495638A4 (zh)
JP (2) JPWO2011052324A1 (zh)
CN (1) CN102597926A (zh)
WO (1) WO2011052324A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102929503A (zh) * 2012-10-30 2013-02-13 华为终端有限公司 选择文件的方法和终端
CN105204677A (zh) * 2014-06-04 2015-12-30 义隆电子股份有限公司 触控面板的感测数据处理方法和触控装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5572397B2 (ja) * 2010-01-06 2014-08-13 京セラ株式会社 入力装置、入力方法および入力プログラム
JP5229289B2 (ja) * 2010-09-24 2013-07-03 日本電気株式会社 表示装置、座標通知方法およびプログラム
JP5595943B2 (ja) * 2011-01-26 2014-09-24 株式会社日立製作所 植物由来ポリカーボネート樹脂及びその製造方法
JP6125271B2 (ja) * 2013-02-26 2017-05-10 京セラ株式会社 電子機器
JP5973405B2 (ja) * 2013-09-25 2016-08-23 京セラドキュメントソリューションズ株式会社 入力装置及び電子機器
JP2015194987A (ja) * 2014-03-25 2015-11-05 パナソニックIpマネジメント株式会社 入力装置および表示装置
US10656719B2 (en) 2014-09-30 2020-05-19 Apple Inc. Dynamic input surface for electronic devices
US11900469B2 (en) 2015-02-03 2024-02-13 State Farm Mutual Automobile Insurance Company Point-of-service tool for entering claim information
US10409412B1 (en) * 2015-09-30 2019-09-10 Apple Inc. Multi-input element for electronic device
US10318065B2 (en) 2016-08-03 2019-06-11 Apple Inc. Input device having a dimensionally configurable input area
US10871860B1 (en) 2016-09-19 2020-12-22 Apple Inc. Flexible sensor configured to detect user inputs
US10732676B2 (en) 2017-09-06 2020-08-04 Apple Inc. Illuminated device enclosure with dynamic trackpad
KR101986660B1 (ko) * 2017-12-13 2019-06-07 (주)아바비젼 터치 센서가 구비된 곡면 디스플레이 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694150A (en) * 1995-09-21 1997-12-02 Elo Touchsystems, Inc. Multiuser/multi pointing device graphical user interface system
US20060026521A1 (en) * 2004-07-30 2006-02-02 Apple Computer, Inc. Gestures for touch sensitive input devices
EP1775925A2 (en) * 2005-10-14 2007-04-18 LG Electronics Inc. Method for displaying multimedia contents and mobile communications terminal capable of implementing the same
EP1780994A2 (en) * 2005-10-28 2007-05-02 LG Electronics Inc. Mobile terminal with a plurality of input units
US20090167696A1 (en) * 2007-12-31 2009-07-02 Sony Ericsson Mobile Communications Ab Mobile terminals including multiple user interfaces on different faces thereof configured to be used in tandem and related methods of operation

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04326152A (ja) * 1991-04-25 1992-11-16 Hitachi Ltd パーソナル情報機器
JP4686886B2 (ja) 2001-04-06 2011-05-25 ソニー株式会社 情報処理装置
AU2006332488A1 (en) * 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
JP4260215B1 (ja) 2007-08-29 2009-04-30 任天堂株式会社 撮像装置
JP2009211547A (ja) * 2008-03-05 2009-09-17 Seiko Epson Corp 表示システム、表示装置及びプログラム
JP2009248066A (ja) 2008-04-11 2009-10-29 Tiyoda Electric Co Ltd 超音波洗浄装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694150A (en) * 1995-09-21 1997-12-02 Elo Touchsystems, Inc. Multiuser/multi pointing device graphical user interface system
CN1200189A (zh) * 1995-09-21 1998-11-25 埃罗接触系统公司 多用户/多定位设备图形用户接口系统
US20060026521A1 (en) * 2004-07-30 2006-02-02 Apple Computer, Inc. Gestures for touch sensitive input devices
EP1775925A2 (en) * 2005-10-14 2007-04-18 LG Electronics Inc. Method for displaying multimedia contents and mobile communications terminal capable of implementing the same
EP1780994A2 (en) * 2005-10-28 2007-05-02 LG Electronics Inc. Mobile terminal with a plurality of input units
US20090167696A1 (en) * 2007-12-31 2009-07-02 Sony Ericsson Mobile Communications Ab Mobile terminals including multiple user interfaces on different faces thereof configured to be used in tandem and related methods of operation

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102929503A (zh) * 2012-10-30 2013-02-13 华为终端有限公司 选择文件的方法和终端
WO2014067421A1 (zh) * 2012-10-30 2014-05-08 华为终端有限公司 选择文件的方法和终端
CN102929503B (zh) * 2012-10-30 2016-03-30 华为终端有限公司 选择文件的方法和终端
US9507451B2 (en) 2012-10-30 2016-11-29 Huawei Device Co., Ltd. File selection method and terminal
CN105204677A (zh) * 2014-06-04 2015-12-30 义隆电子股份有限公司 触控面板的感测数据处理方法和触控装置
CN105204677B (zh) * 2014-06-04 2017-12-12 义隆电子股份有限公司 触控面板的感测数据处理方法和触控装置

Also Published As

Publication number Publication date
JPWO2011052324A1 (ja) 2013-03-21
EP2495638A1 (en) 2012-09-05
WO2011052324A1 (ja) 2011-05-05
EP2495638A4 (en) 2013-05-15
US20120212443A1 (en) 2012-08-23
JP2015018585A (ja) 2015-01-29

Similar Documents

Publication Publication Date Title
CN102597926A (zh) 移动信息终端、处理方法、程序
CN101667058B (zh) 在多系统间切换焦点的交互方法
JP5754376B2 (ja) 携帯情報端末
JP5580694B2 (ja) 情報処理装置、その制御方法、プログラム及び記憶媒体
US8286078B2 (en) Apparatus and method for efficiently displaying web contents
US9582903B2 (en) Display terminal device connectable to external display device and method therefor
US20170123573A1 (en) Electronic device, information processing method, program, and electronic device system
US10664122B2 (en) Apparatus and method of displaying windows
CN103207750B (zh) 图标缩放的方法及装置
US20030227423A1 (en) Multi-display control system and image display apparatus
US20100005427A1 (en) Systems and Methods of Touchless Interaction
JP2010238148A (ja) ユーザインタフェース装置及び携帯端末装置
KR20140108993A (ko) 페이지 운용 방법 및 그 전자 장치
CN103324329A (zh) 一种触摸控制方法和装置
JP2011118857A (ja) 車両のマルチメディアシステム操作用ユーザーインターフェース装置
JP2009104268A (ja) 座標検出装置、及びタッチパネルを用いた操作方法
CN102722324A (zh) 触控屏操作方法及装置
CN104346085A (zh) 一种对控件对象的操作方法、装置及终端设备
US9146667B2 (en) Electronic device, display system, and method of displaying a display screen of the electronic device
KR20140070745A (ko) 디스플레이 장치 및 이의 구동 방법
JP4166767B2 (ja) 情報処理装置及びポインタの移動表示方法、プログラム並びに記録媒体
CN112947825A (zh) 显示控制方法、装置、电子设备及介质
CN103140826A (zh) 信息终端装置以及触控面板的显示方法
US20120242605A1 (en) Electronic device
US7391413B2 (en) Positional information outputting device, positional information outputting method, and signal processing method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: LENOVO INNOVATION CO., LTD. (HONGKONG)

Free format text: FORMER OWNER: NEC CORP.

Effective date: 20141203

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; TO: HONG KONG, CHINA

TA01 Transfer of patent application right

Effective date of registration: 20141203

Address after: Hongkong, China

Applicant after: LENOVO INNOVATIONS Co.,Ltd.(HONG KONG)

Address before: Tokyo, Japan

Applicant before: NEC Corp.

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120718