JP2015219743A - Information processing device and computer program - Google Patents
Information processing device and computer program Download PDFInfo
- Publication number
- JP2015219743A JP2015219743A JP2014103109A JP2014103109A JP2015219743A JP 2015219743 A JP2015219743 A JP 2015219743A JP 2014103109 A JP2014103109 A JP 2014103109A JP 2014103109 A JP2014103109 A JP 2014103109A JP 2015219743 A JP2015219743 A JP 2015219743A
- Authority
- JP
- Japan
- Prior art keywords
- screen display
- coordinates
- display area
- screen
- coordinate input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
本発明は、表示装置に複数の表示オブジェクトを表示する情報処理装置において、タッチパネルを用いた座標入力を受け付ける技術に関するものである。 The present invention relates to a technique for receiving coordinate input using a touch panel in an information processing apparatus that displays a plurality of display objects on a display device.
表示装置に複数の表示オブジェクトを表示する情報処理装置において、タッチパネルを用いた座標入力を受け付ける技術としては、隣接して配置された複数の表示オブジェクトの境界に不感領域を設け、当該不感領域内へのタッチについては、これを無効化する技術が知られている（たとえば、特許文献１、２）。 In an information processing apparatus that displays a plurality of display objects on a display device, as a technique for receiving coordinate input using a touch panel, a dead area is provided at a boundary between a plurality of adjacent display objects, and the dead area is entered. A technique for invalidating the touch is known (for example, Patent Documents 1 and 2).
上述のように隣接して配置された複数の表示オブジェクトの境界に不感領域を設け、当該不感領域内へのタッチを無効化する技術によれば、目的とする表示オブジェクトに隣接する表示オブジェクトへの誤操作を抑止することができるが、ユーザが目的とする座標の座標入力を行うためには、タッチの無効化後に、再度、目的とする座標にタッチする操作を行わなければならない。 As described above, according to the technique of providing a dead area at the boundary between a plurality of display objects arranged adjacent to each other and invalidating the touch in the dead area, the display object adjacent to the target display object is displayed. Although erroneous operations can be suppressed, in order for the user to input the coordinates of the target coordinates, after the touch is invalidated, an operation of touching the target coordinates must be performed again.
しかしながら、自動車に搭載される情報処理装置においては、自動車の走行中には振動や揺れが発生するために、精緻なタッチは自動車の走行中常態的に困難であり、再度のタッチにおいても目的とする座標を正しくタッチできないことがある。 However, in an information processing apparatus mounted on a car, vibration and shaking occur during the running of the car, so precise touch is normally difficult during the running of the car, and the purpose of the touch again You may not be able to touch the correct coordinates.
よって、このような場合、上述した不感領域内へのタッチを無効化する技術によっては、目的とする座標の座標入力を充分に容易化することはできない。
そこで、本発明は、隣接する表示オブジェクトへの誤操作を抑止しつつ、目的とする座標の座標入力を容易化することを課題とする。
Therefore, in such a case, it is not possible to sufficiently facilitate the coordinate input of the target coordinates by the technique for invalidating the touch in the insensitive area described above.
Accordingly, an object of the present invention is to facilitate coordinate input of target coordinates while suppressing erroneous operations on adjacent display objects.
前記課題達成のために、本発明は、タッチされた位置の座標を検出座標として出力するタッチパネルと、表示装置とを備えた情報処理装置に、前記表示装置の表示画面を複数の画面表示領域に分割して、各画面表示領域に異なる画面を表示する画面表示手段と、ユーザから座標入力を受け付ける座標入力受付手段とを設け、前記座標入力受付手段において、前記タッチパネルから出力された検出座標が、前記画面表示領域同士の境界周辺に設定した境界領域内の座標でない場合に、当該検出座標の座標入力を受け付け、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、ユーザからいずれか一つの画面表示領域の指定を受け付け、指定された画面表示領域内の、前記検出座標に近接した位置の座標の座標入力を受け付けるようにしたものである。 In order to achieve the above object, the present invention provides an information processing device including a touch panel that outputs coordinates of a touched position as detection coordinates and a display device, and displays the display screen of the display device in a plurality of screen display areas. A screen display unit that divides and displays a different screen in each screen display area, and a coordinate input reception unit that receives a coordinate input from the user are provided. In the coordinate input reception unit, the detected coordinates output from the touch panel are: When the coordinates within the boundary area set around the boundary between the screen display areas are not received, the coordinate input of the detected coordinates is accepted, and when the detected coordinates output from the touch panel are the coordinates within the boundary area, Accepts the designation of any one screen display area from the user, and inputs the coordinates of the coordinates of the position close to the detected coordinates in the designated screen display area Is that to accept.
ここで、このような情報処理装置において、前記座標入力受付手段は、前記画面表示領域の指定を、ユーザのタッチパネルへの、指定する画面表示領域の前記境界領域を除く部分内の任意の位置に対するタッチによって受け付けるようにしてもよいし、前記画面表示領域の指定を、ユーザの、指定する画面表示領域の前記境界領域を除く部分内の任意の位置への、タッチパネルへのタッチ位置のスライドによって受け付けるようにしてもよいし、前記画面表示領域の指定を、ユーザの、指定する画面表示領域を表す文言の音声入力によって受け付けるようにしてもよい。 Here, in such an information processing apparatus, the coordinate input accepting unit is configured to specify the screen display area with respect to an arbitrary position in a portion excluding the boundary area of the screen display area to be specified on the touch panel of the user. The screen display area may be designated by touching, or the user may accept designation of the screen display area by sliding the touch position on the touch panel to an arbitrary position within the portion of the designated screen display area excluding the boundary area. Alternatively, the designation of the screen display area may be received by the user's voice input of a word representing the designated screen display area.
なお、以上の情報処理装置は、前記座標入力受付手段において、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、所定の警告音を出力するように構成することも好ましい。 The information processing apparatus described above may be configured to output a predetermined warning sound when the detected coordinates output from the touch panel are coordinates in the boundary area in the coordinate input receiving unit. preferable.
また、以上の情報処理装置は、前記座標入力受付手段において、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、ユーザがタッチを意図した位置が属する一つの画面表示領域を推定し、所定期間内にユーザからいずれの画面表示領域の指定も受け付けなかった場合には、前記推定した画面表示領域内の、前記検出座標に近接した位置の座標の座標入力を受け付けるように構成してもよい。 In the information processing apparatus described above, in the coordinate input receiving unit, when the detected coordinates output from the touch panel are coordinates in the boundary region, one screen display to which a position intended by the user belongs is displayed. If an area is estimated and no screen display area is specified from the user within a predetermined period, coordinate input of a position close to the detected coordinates in the estimated screen display area is received. You may comprise.
また、この場合には、前記座標入力受付手段において、過去直近に座標入力を受け付けた座標が属する画面表示領域を、前記ユーザがタッチを意図した位置が属する一つの画面表示領域として推定するようにしてもよいし、前記座標入力受付手段において、過去に座標入力を受け付けた座標が属する頻度が最大の画面表示領域を、前記ユーザがタッチを意図した位置が属する一つの画面表示領域として推定するようにしてもよい。 In this case, the coordinate input receiving means estimates the screen display area to which the coordinates for which the coordinate input has been received most recently belong as one screen display area to which the position intended by the user belongs. Alternatively, the coordinate input accepting unit may estimate a screen display area having the highest frequency to which coordinates that have received coordinate input in the past belong as one screen display area to which the position intended by the user belongs. It may be.
また、以上のように画面表示領域を推定する情報処理装置においては、前記座標入力受付手段が、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、前記推定した画面表示領域を表す音を出力するようにしてもよい。 Further, in the information processing apparatus that estimates the screen display area as described above, the estimated input screen when the coordinate input reception unit outputs the detected coordinates output from the touch panel as coordinates in the boundary area. A sound representing the display area may be output.
以上のように、本発明に係る情報処理装置によれば、画面表示領域同士の境界周辺に設定した境界領域内の位置のタッチが発生した場合には、タッチされた位置の座標入力を直ちに受け付けずに、ユーザから画面表示領域の指定を受け付け、タッチされた位置の座標に近接する、指定された画面表示領域内の座標の座標入力を受け付ける。よって、ユーザが入力を意図した座標が含まれる画面表示領域と異なる画面領域内の位置の座標入力受け付けてしまうことを排除することができる。また、ユーザは、目的とする座標に正確にタッチしなくても、目的とする座標が属する画面表示領域を指定するだけで、ユーザが入力を意図した座標が含まれる画面表示領域内の、入力を意図した座標またはその近傍の位置の座標を座標入力することができる。 As described above, according to the information processing apparatus of the present invention, when a touch at a position in the boundary area set around the boundary between the screen display areas occurs, the coordinate input of the touched position is immediately accepted. Instead, the designation of the screen display area is received from the user, and the coordinate input of the coordinates in the designated screen display area close to the coordinates of the touched position is accepted. Therefore, it is possible to eliminate the reception of coordinate input at a position in a screen area different from the screen display area including the coordinates that the user intends to input. In addition, even if the user does not touch the target coordinates accurately, the user simply specifies the screen display area to which the target coordinates belong, and the input in the screen display area including the coordinates that the user intended to input is included. It is possible to input the coordinates of the position intended for the position or the coordinates of the position in the vicinity thereof.
以上のように、本発明によれば、隣接する表示オブジェクトへの誤操作を抑止しつつ、目的とする座標の座標入力を容易化することができる。 As described above, according to the present invention, it is possible to facilitate coordinate input of target coordinates while suppressing erroneous operations on adjacent display objects.
以下、本発明の実施形態について説明する。
図１に、本実施形態に係る情報処理装置の構成を示す。
図示するように、情報処理装置は、ディスプレイ１、タッチパネル２、他の周辺装置３、ディスプレイ１を駆動するディスプレイコントローラ４、ユーザによってタッチされたタッチパネル２上のX座標とY座標を検出し検出座標として出力するタッチパネルコントローラ５、オペレーティングシステム６、オペレーティングシステム６上で稼働する各種のアプリケーション７とを備えている。
Hereinafter, embodiments of the present invention will be described.
FIG. 1 shows the configuration of the information processing apparatus according to this embodiment.
As shown in the figure, the information processing device detects the X coordinate and the Y coordinate on the display 1, the touch panel 2, another peripheral device 3, the display controller 4 that drives the display 1, and the touch panel 2 touched by the user. Are output as a touch panel controller 5, an operating system 6, and various applications 7 running on the operating system 6.
また、オペレーティングシステム６は、ディスプレイコントローラ４を介してディスプレイ１の表示を制御するディスプレイドライバ６１を備えている。また、オペレーティングシステム６は、タッチパネルコントローラ５が出力する検出座標からユーザの入力した座標を入力座標として受け付け、その時点で入力座標に重なるディスプレイ１の表示領域を表示に用いているアプリケーション７に出力するタッチパネルドライバ６２を備えている。また、オペレーティングシステム６は、他の周辺装置３の制御を行う他周辺装置用ドライバ６３も備えている。 The operating system 6 includes a display driver 61 that controls display on the display 1 via the display controller 4. Further, the operating system 6 accepts the coordinates input by the user from the detected coordinates output by the touch panel controller 5 as input coordinates, and outputs the display area of the display 1 that overlaps the input coordinates to the application 7 used for display at that time. A touch panel driver 62 is provided. The operating system 6 also includes another peripheral device driver 63 that controls the other peripheral devices 3.
ここで、他の周辺装置３としては、音声を出力する音声出力装置や、音声を入力する音声入力装置や、ＴＶチューナや、ＧＰＳ受信機などを備える。
また、アプリケーション７としては、ＧＰＳ受信機を利用して算出した現在位置や目的地までのルート案内を行うナビゲーションアプリケーションや、ＴＶチューナを利用して情報処理装置をＴＶとして機能させるＴＶアプリケーションなどを備える。
Here, the other peripheral devices 3 include a sound output device that outputs sound, a sound input device that inputs sound, a TV tuner, a GPS receiver, and the like.
The application 7 includes a navigation application that provides route guidance to the current position and destination calculated using a GPS receiver, and a TV application that allows the information processing apparatus to function as a TV using a TV tuner. .
但し、以上のような情報処理装置は、ハードウエア的には、ＣＰＵやメモリなどを備えたコンピュータを用いて構成されるものであり、オペレーティングシステム６や、アプリケーション７などは、当該コンピュータが、所定のコンピュータプログラムを実行することにより実現されるものである。 However, the information processing apparatus as described above is configured by using a computer having a CPU, a memory, and the like in hardware. The operating system 6 and the application 7 are specified by the computer. This is realized by executing the computer program.
このような構成において、オペレーティングシステム６のディスプレイドライバ６１は、各アプリケーション７のＧＵＩを構成する画面であるアプリケーション画面の、ディスプレイ１への設定された表示モードによる表示を制御する。 In such a configuration, the display driver 61 of the operating system 6 controls display of an application screen, which is a screen constituting the GUI of each application 7, on the display 1 according to the set display mode.
アプリケーション画面の表示モードとしては、図２ａ、ｂに示すような、ディスプレイ１の表示画面の全体を一つの画面表示領域２０１として、画面表示領域２０１に一つのアプリケーション画面を表示する全表示モードと、図２ｃに示すようなディスプレイ１の表示画面を左右に二つの画面表示領域２０１に二分割し、各画面表示領域２０１に、異なるアプリケーション画面を表示する二分割表示モードと、図２ｄに示すように、ディスプレイ１の表示画面の一部を子画面状の画面表示領域２０１として一つのアプリケーション画面を表示し、ディスプレイ１の表示画面の残りの領域をもう一つの画面表示領域２０１として、当該画面表示領域２０１に、他のアプリケーション画面の、子画面状の画面表示領域２０１と重なる部分を除く部分を表示する子画面表示モードがある。 As the display mode of the application screen, as shown in FIGS. 2A and 2B, the entire display screen of the display 1 is set as one screen display area 201, and the entire display mode in which one application screen is displayed in the screen display area 201; A display screen of the display 1 as shown in FIG. 2c is divided into two screen display areas 201 on the left and right, and a different application screen is displayed in each screen display area 201, as shown in FIG. 2d. A part of the display screen of the display 1 is displayed as a sub-screen-like screen display area 201 to display one application screen, and the remaining area of the display screen of the display 1 is set as another screen display area 201 to display the screen display area. 201 is a portion excluding a portion of another application screen that overlaps the sub-screen-like screen display area 201 There is a sub-screen display mode for displaying a.
なお、図２ａは、全画面表示モードでＴＶアプリケーションのアプリケーション画面を表示したようすを表し、図２ｂは、全画面表示モードでナビゲーションアプリケーションのアプリケーション画面を表示したようすを表す。 Note that FIG. 2a shows that the application screen of the TV application is displayed in the full screen display mode, and FIG. 2b shows that the application screen of the navigation application is displayed in the full screen display mode.
また、図２ｃは、二分割表示モードで、左側の画面表示領域２０１にナビゲーションアプリケーションのアプリケーション画面を、右側の画面表示領域２０１にＴＶアプリケーションのアプリケーション画面を表示したようすを表している。また、図２ｄは、子画面表示モードで、子画面状の画面表示領域２０１に、ナビゲーションアプリケーションのアプリケーション画面を、ディスプレイ１の表示画面の子画面状の画面表示領域２０１を除く部分である、もう一つの画面表示領域２０１にＴＶアプリケーションのアプリケーション画面を表示したようすを表している。 Further, FIG. 2c shows that the application screen of the navigation application is displayed in the left screen display area 201 and the application screen of the TV application is displayed in the right screen display area 201 in the two-split display mode. Further, FIG. 2d shows a part other than the sub-screen-like screen display area 201 of the display screen of the display 1 in the sub-screen display mode. It shows a state where an application screen of a TV application is displayed in one screen display area 201.
なお、ＴＶアプリケーションのアプリケーション画面は、ＴＶチューナで受信したＴＶ番組の動画の表示と、ユーザのＴＶアプリケーションに対する各種操作受け付け用の各種ボタンを含むものである。また、ナビゲーションアプリケーションのアプリケーション画面は、地図上に現在位置やルートを表した案内画像の表示と、ナビゲーションアプリケーションに対する各種操作受け付け用の各種ボタンを含むものである。 Note that the application screen of the TV application includes display of a moving image of a TV program received by the TV tuner and various buttons for accepting various operations for the user's TV application. The application screen of the navigation application includes a display of a guide image representing the current position and route on the map, and various buttons for receiving various operations for the navigation application.
以下、このような構成においてタッチパネルドライバ６２が行う座標入力受付処理について説明する。
図３に、この座標入力受付処置の手順を示す
図示するように、この処理では、タッチパネル２へのタッチの発生を監視する（ステップ３０２）。なお、タッチの発生の検出は、タッチパネルコントローラ５からの検出座標の入力の発生時にタッチが発生したものと判定することにより行う。
Hereinafter, the coordinate input reception process performed by the touch panel driver 62 in such a configuration will be described.
FIG. 3 shows the procedure of the coordinate input acceptance procedure. As shown in FIG. 3, in this process, occurrence of a touch on the touch panel 2 is monitored (step 302). The detection of the occurrence of touch is performed by determining that a touch has occurred when an input of detected coordinates from the touch panel controller 5 is generated.
そして、タッチパネル２へのタッチが発生したならば（ステップ３０２）、現在の表示モードが全画面表示モードであるかどうかを調べ（ステップ３０４）、全画面表示モードであれば、タッチパネルコントローラ５から入力した検出座標を、そのまま入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ３０８）。そして、ステップ３０２に戻り次のタッチの発生を待つ。 If a touch on the touch panel 2 occurs (step 302), it is checked whether the current display mode is the full screen display mode (step 304). The detected coordinates are received as input coordinates as they are, and the screen display area 201 including the position on the display screen that overlaps the input coordinates at that time is output to the application 7 used for display (step 308). Then, the process returns to step 302 and waits for the next touch to occur.
一方、現在の表示モードが全画面表示モードでなく二分割表示モードや子画面表示モードであれば（ステップ３０４）、タッチパネルコントローラ５から入力した検出座標が境界領域内の座標であるかどうかを調べる（ステップ３０６）。 On the other hand, if the current display mode is not the full-screen display mode but the two-split display mode or the sub-screen display mode (step 304), it is checked whether or not the detected coordinates input from the touch panel controller 5 are the coordinates in the boundary region. (Step 306).
ここで、境界領域は、画面表示領域２０１の境界線から距離ｎ以内の領域を境界領域とすることにより設定する。
すなわち、図４ａに示すように、現在の表示モードが二分割表示モードであれば、左右二つの画面表示領域２０１の境界線を左右方向の中心とする幅２ｎの灰色で示した領域を境界領域４００に設定する。
Here, the boundary area is set by setting an area within a distance n from the boundary line of the screen display area 201 as the boundary area.
That is, as shown in FIG. 4a, if the current display mode is the two-split display mode, the gray area having a width of 2n with the boundary line between the two left and right screen display areas 201 as the center in the horizontal direction Set to 400.
また、図４ｂに示すように、現在の表示モードが子画面表示モードであれば、子画面状の画面表示領域２０１の外枠を成す四角形と中心を等しくする、画面表示領域２０１の外枠よりも縦横双方の辺が２ｎ長い四角形と、子画面状の画面表示領域２０１の外枠を成す四角形と中心を等しくする、画面表示領域２０１の外枠よりも縦横双方の辺が２ｎ短い四角形との間の灰色で示した領域を境界領域４００に設定する。 Also, as shown in FIG. 4b, if the current display mode is the sub-screen display mode, the center of the quadrangle forming the outer frame of the sub-screen-like screen display area 201 is made equal to the center of the outer frame of the screen display area 201. Also, a rectangle whose both sides are 2n long and a rectangle whose center is the same as the rectangle forming the outer frame of the sub-screen-like screen display area 201, and whose both sides are 2n shorter than the outer frame of the screen display area 201. A region indicated by gray in between is set as a boundary region 400.
さて、図３に戻り、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標でなければ（ステップ３０６）、タッチパネルコントローラ５から入力した検出座標を、そのまま入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ３０８）。そして、ステップ３０２に戻り次のタッチの発生を待つ。 Returning to FIG. 3, if the detected coordinates input from the touch panel controller 5 are not coordinates within the boundary region 400 (step 306), the detected coordinates input from the touch panel controller 5 are accepted as input coordinates and input at that time. The screen display area 201 including the position on the display screen overlapping the coordinates is output to the application 7 used for display (step 308). Then, the process returns to step 302 and waits for the next touch to occur.
一方、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標であれば（ステップ３０６）、音声出力装置から所定の警告音を出力する（ステップ３１０）。ただし、ステップ３１０では、警告音の出力に代えて、画面表示領域２０１の指定を行うよう促す所定のメッセージをディスプレイ１に表示するようにしてもよい。 On the other hand, if the detected coordinates input from the touch panel controller 5 are coordinates within the boundary region 400 (step 306), a predetermined warning sound is output from the audio output device (step 310). However, in step 310, instead of outputting a warning sound, a predetermined message that prompts the user to specify the screen display area 201 may be displayed on the display 1.
そして、ユーザの画面表示領域２０１の指定を受け付ける（ステップ３１０）。
ここで、ユーザの画面表示領域指定は、境界領域４００外の画面表示領域２０１内の座標のタッチや、境界領域４００外の画面表示領域２０１内へのタッチ位置のスライド操作や、特定の画面表示領域２０１を指定する音声の音声入力によって受け付けることができる。
Then, the user's designation of the screen display area 201 is accepted (step 310).
Here, the user's screen display area designation may be performed by touching coordinates within the screen display area 201 outside the boundary area 400, sliding operation of the touch position within the screen display area 201 outside the boundary area 400, or a specific screen display. The area 201 can be received by voice input for designating the area 201.
すなわち、たとえば、表示モードが二分割表示モードであるときに、図５ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、図５ｂに示すように、左側の画面表示領域２０１内の境界領域４００外の位置のタッチ(検出座標)が発生したならば、左側の画面表示領域２０１の指定を受け付ける。 That is, for example, when the display mode is the two-division display mode, as shown in FIG. 5A, after the touch (detected coordinates) to the position in the boundary region 400 occurs, the left side as shown in FIG. If a touch (detected coordinate) at a position outside the boundary area 400 in the screen display area 201 occurs, designation of the left screen display area 201 is accepted.
または、たとえば、表示モードが二分割表示モードであるときに、図５ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、図５ｃに示すように、左側の画面表示領域２０１内の境界領域４００外の位置へ、タッチ位置(検出座標)を連続的に移動するスライド操作が発生したならば、左側の画面表示領域２０１の指定を受け付ける。 Or, for example, when the display mode is the two-divided display mode, as shown in FIG. 5A, after the touch (detected coordinates) to the position in the boundary region 400 occurs, If a slide operation for continuously moving the touch position (detected coordinates) to a position outside the boundary area 400 in the screen display area 201 occurs, designation of the left screen display area 201 is accepted.
また、たとえば、表示モードが二分割表示モードであるときに、図５ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、音声入力装置から入力する音声を音声認識し、音声認識した音声が「左」/「右」や左側の画面表示領域２０１にアプリケーション画面を表示しているアプリケーション７の名称であった場合に、音声で指定された方の画面表示領域２０１の指定を受け付ける。なお、「左」/「右」の音声で画面表示領域２０１の指定を受け付ける場合には、音声認識した音声が「左」であれば左側の画面表示領域２０１の指定を受け付け、「右」であれば右側の画面表示領域２０１の指定を受け付ける。また、アプリケーション７の名称の音声で画面表示領域２０１の指定を受け付ける場合には、音声認識した名称のアプリケーション７のアプリケーション画面を表示している画面表示領域２０１の指定を受け付ける。 Further, for example, when the display mode is the two-divided display mode, as shown in FIG. 5A, after the touch (detected coordinates) to the position in the boundary region 400 occurs, the voice input from the voice input device is voiced. When the recognized and recognized voice is the name of the application 7 displaying the application screen in the screen display area 201 on the left or right or the left, the screen display area specified by the voice 201 is accepted. When the designation of the screen display area 201 is accepted with “left” / “right” voice, if the voice recognized is “left”, the designation of the left screen display area 201 is accepted. If there is, designation of the screen display area 201 on the right side is accepted. When the designation of the screen display area 201 is received with the voice of the name of the application 7, the designation of the screen display area 201 displaying the application screen of the application 7 with the recognized name is accepted.
また、たとえば、表示モードが子画面表示モードであるときに、図６ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、図６ｂに示すように、子画面状の画面表示領域２０１内の境界領域４００外の位置のタッチ(検出座標)が発生したならば、子画面状の画面表示領域２０１の指定を受け付ける。 Further, for example, when the display mode is the small screen display mode, as shown in FIG. 6A, after the touch (detected coordinates) to the position in the boundary region 400 occurs, the small screen is displayed as shown in FIG. 6B. If a touch (detected coordinate) at a position outside the boundary area 400 in the screen-like display area 201 occurs, designation of the screen display area 201 in the sub-screen shape is accepted.
また、たとえば、表示モードが子画面表示モードであるときに、図６ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、図６ｃに示すように、子画面状の画面表示領域２０１内の境界領域４００外の位置へ、タッチ位置(検出座標)を連続的に移動するスライド操作が発生したならば、子画面状の画面表示領域２０１の指定を受け付ける。 Further, for example, when the display mode is the small screen display mode, as shown in FIG. 6A, after a touch (detected coordinates) to a position in the boundary region 400 occurs, the small screen is displayed as shown in FIG. 6C. If a slide operation for continuously moving the touch position (detected coordinates) to a position outside the boundary region 400 in the screen-like screen display region 201 occurs, the designation of the sub-screen-like screen display region 201 is accepted.
また、たとえば、表示モードが子画面表示モードであるときに、図６ａに示すように、境界領域４００内の位置へのタッチ(検出座標)が発生した後に、音声入力装置から入力する音声を音声認識し、音声認識した音声が「子画面」/「親画面」や左側の画面表示領域２０１にアプリケーション画面を表示しているアプリケーション７の名称であった場合に、音声で指定された方の画面表示領域２０１の指定を受け付ける。なお、「子画面」/「親画面」の音声で画面表示領域２０１の指定を受け付ける場合には、音声認識した音声が「子画面」であれば子画面状の画面表示領域２０１の指定を受け付け、「親画面」であれば、ディスプレイ１の表示画面の子画面状の画面表示領域２０１を除く部分である画面表示領域２０１の指定を受け付ける。また、アプリケーション７の名称の音声で画面表示領域２０１の指定を受け付ける場合には、音声認識した名称のアプリケーション７のアプリケーション画面を表示している画面表示領域２０１の指定を受け付ける。 Further, for example, when the display mode is the small-screen display mode, as shown in FIG. 6A, after the touch (detected coordinates) to the position in the boundary area 400 occurs, the voice input from the voice input device is voiced. If the recognized and voice-recognized voice is the name of the application 7 displaying the application screen in the “sub-screen” / “parent screen” or the screen display area 201 on the left side, the screen designated by voice The designation of the display area 201 is accepted. In addition, when the designation of the screen display area 201 is accepted with the voice of “child screen” / “parent screen”, the designation of the child screen-like screen display area 201 is accepted if the voice recognized is “child screen”. In the case of “parent screen”, designation of the screen display area 201 which is a portion excluding the child-screen-like screen display area 201 of the display screen of the display 1 is accepted. When the designation of the screen display area 201 is received with the voice of the name of the application 7, the designation of the screen display area 201 displaying the application screen of the application 7 with the recognized name is accepted.
さて、図３に戻り、以上のようなユーザの画面表示領域指定操作を受け付けたならば、指定された画面表示領域２０１に応じて、タッチパネルコントローラ５から入力した検出座標を補正し、補正後の検出座標を入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ３１２）。そして、ステップ３０２に戻り次のタッチの発生を待つ。 Now, returning to FIG. 3, when the user's screen display area designation operation as described above is accepted, the detected coordinates input from the touch panel controller 5 are corrected according to the designated screen display area 201, and the corrected The detected coordinates are received as input coordinates, and the screen display area 201 including the position on the display screen that overlaps the input coordinates at that time is output to the application 7 used for display (step 312). Then, the process returns to step 302 and waits for the next touch to occur.
ここで、ステップ３１２の検出座標の補正と入力座標の受け付けは、補正後の検出座標が、指定された画面表示領域２０１内の補正前の検出座標に近接した位置の座標となるように補正を行って、補正後の検出座標を入力座標として受け付けることにより行う。
すなわち、たとえば、表示モードが二分割表示モードであるときには、検出座標の補正と入力座標の受け付けは、タッチパネルコントローラ５から入力した検出座標を、左右方向のうちの、指定された画面表示領域２０１が配置されている側の方向に距離ｎ移動した座標を補正後の検出座標とし、補正後の検出座標を入力座標として受け付けることにより行う。
Here, the correction of the detected coordinates and the acceptance of the input coordinates in step 312 are performed so that the corrected detected coordinates become the coordinates of the position close to the detected coordinates before correction in the designated screen display area 201. The detection coordinates after correction are received as input coordinates.
That is, for example, when the display mode is the two-split display mode, the detection coordinate correction and the input coordinate reception are performed by using the detection coordinate input from the touch panel controller 5 in the designated screen display area 201 in the left-right direction. The coordinates moved by the distance n in the direction of the arranged side are set as corrected detection coordinates, and the corrected detection coordinates are received as input coordinates.
具体的には、たとえば、表示モードが二分割表示モードであるときに、図５ａに示すように、ユーザが左側の画面表示領域２０１下部の一番右側のボタン５０１を操作しようとして、タッチパネル２にタッチした結果、タッチパネルコントローラ５から入力した検出座標が右側の画面表示領域２０１中の境界領域４００内の座標（ｘ０、ｙ０）となり、その後、ユーザが、タッチで意図した操作が左側の画面領域に対する操作であることより、たとえば図５ｂ、ｃに示す操作で、左側の画面表示領域２０１を指定した場合には、検出座標（ｘ０、ｙ０）を左方向にｎ移動した座標検出座標（ｘ０-ｎ、ｙ０）を補正後の検出座標とし、補正後の検出座標を入力座標として受け付け、左側の画面表示領域２０１にアプリケーション画面を表示しているアプリケーション７に受け付けた入力座標が出力する。結果、受け付けた入力座標は、ユーザが本来意図した左側の画面表示領域２０１下部の一番右側のボタン５０１内の座標となり、ユーザが本来意図した操作がアプリケーション７によって実行される。 Specifically, for example, when the display mode is the two-split display mode, the user tries to operate the rightmost button 501 at the bottom of the left screen display area 201 as shown in FIG. As a result of the touch, the detected coordinates input from the touch panel controller 5 become the coordinates (x0, y0) in the boundary area 400 in the right screen display area 201, and then the operation intended by the user is performed on the left screen area. For example, when the left screen display area 201 is designated by the operations shown in FIGS. 5B and 5C, the coordinate detection coordinates (x0-n) obtained by moving the detection coordinates (x0, y0) by n in the left direction. , Y0) are detected coordinates after correction, the detected coordinates after correction are accepted as input coordinates, and an application screen is displayed in the screen display area 201 on the left side. The received input coordinates are output to the existing application 7. As a result, the received input coordinates become coordinates in the rightmost button 501 below the left screen display area 201 originally intended by the user, and the operation intended by the user is executed by the application 7.
同様に、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標（ｘ０、ｙ０）であって、その後に、右側の画面表示領域２０１が指定された場合には、検出座標（ｘ０、ｙ０）を右方向にｎ移動した座標検出座標（ｘ０+ｎ、ｙ０）を補正後の検出座標とし、入力座標として受け付ける。なお、座標の原点はディスプレイ１の表示画面の左上角であり、+ｘ方向は右方向、+ｙ方向は下方向である。 Similarly, when the detected coordinates input from the touch panel controller 5 are the coordinates (x0, y0) in the boundary area 400 and the right screen display area 201 is designated thereafter, the detected coordinates (x0, y0) are specified. ) Is the coordinate detection coordinate (x0 + n, y0) moved n in the right direction as the corrected detection coordinate, and is accepted as the input coordinate. The origin of the coordinates is the upper left corner of the display screen of the display 1, the + x direction is the right direction, and the + y direction is the lower direction.
ただし、タッチパネルコントローラ５から入力した境界領域４００内の検出座標が、その後に指定された画面表示領域２０１内の座標である場合には、タッチパネルコントローラ５から入力した境界領域４００内の検出座標をそのまま入力座標として受け付けるようにしてもよい。 However, when the detected coordinates in the boundary area 400 input from the touch panel controller 5 are the coordinates in the screen display area 201 specified thereafter, the detected coordinates in the boundary area 400 input from the touch panel controller 5 are used as they are. You may make it accept as an input coordinate.
または、たとえば、表示モードが二分割表示モードであるときには、検出座標の補正は、タッチパネルコントローラ５から入力した検出座標との距離が最小となる、指定された画面表示領域２０１内の座標を入力座標として受け付けることにより行うようにしてもよい。 Alternatively, for example, when the display mode is the two-divided display mode, the correction of the detected coordinates is performed by using the coordinates in the designated screen display area 201 where the distance from the detected coordinates input from the touch panel controller 5 is the minimum input coordinates. You may make it carry out by accepting as.
また、表示モードが子画面表示モードであるときには、タッチパネルコントローラ５から入力した検出座標の補正は、タッチパネルコントローラ５から入力した検出座標との距離が最小となる、指定された画面表示領域２０１内の座標を補正後の検出座標とし、補正後の検出座標を入力座標として受け付けることにより行う。 When the display mode is the sub-screen display mode, the correction of the detected coordinates input from the touch panel controller 5 is within the designated screen display area 201 where the distance from the detected coordinates input from the touch panel controller 5 is minimized. The coordinates are used as corrected detection coordinates, and the corrected detection coordinates are received as input coordinates.
または、たとえば、表示モードが子画面表示モードであるときには、検出座標の補正は、タッチパネルコントローラ５から入力した検出座標の上下左右方向のうちのいずれか１方向に、入力した検出座標との距離がｎとなる指定された画面表示領域２０１内の位置が存在する場合には、当該存在した位置を補正後の検出座標とし、入力座標として受け付けるようにすることにより行うようにしてもよい。 Alternatively, for example, when the display mode is the small-screen display mode, the detection coordinates are corrected by the distance from the input detection coordinates in one of the upper, lower, left, and right directions of the detection coordinates input from the touch panel controller 5. If there is a position in the designated screen display area 201 that is n, the existing position may be set as a corrected detection coordinate and accepted as an input coordinate.
すなわち、具体的には、たとえば、図６ａに示すようにタッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標（ｘ０、ｙ０）であって、その後、図６ｂ、ｃに示すように、子画面状の画面表示領域２０１が指定されたならば、検出座標（ｘ０、ｙ０）を上方向にｎ移動した座標が子画面状の画面表示領域２０１内の位置となるので、検出座標（ｘ０、ｙ０-ｎ）を補正後の検出座標とし、入力座標として受け付けるようにする。 Specifically, for example, as shown in FIG. 6a, the detected coordinates input from the touch panel controller 5 are the coordinates (x0, y0) in the boundary region 400, and thereafter, as shown in FIGS. If the sub-screen-like screen display area 201 is designated, the coordinates obtained by moving the detected coordinates (x0, y0) n times upward are the positions in the sub-screen-like screen display area 201, so that the detected coordinates (x0 , Y0-n) are detected coordinates after correction and are accepted as input coordinates.
なお、図６ｄのように検出座標の補正を行う場合において、入力した検出座標の上下左右方向のうちのいずれか１方向に、入力した検出座標との距離がｎとなる指定された画面表示領域２０１内の位置が存在しないときには、上下方向のうちのいずれか１方向と、左右方向のうちのいずれか１方向とのそれぞれについて、入力した検出座標との距離がｎとなる指定された画面表示領域２０１内の位置を補正後の検出座標とし、入力座標として受け付けるか、入力した検出座標との距離が最小となる、指定された画面表示領域２０１内の座標を補正後の検出座標とし、入力座標として受け付けるようにする。 In the case of correcting the detected coordinates as shown in FIG. 6d, the designated screen display area in which the distance from the input detected coordinates is n in any one of the upper, lower, left, and right directions of the input detected coordinates. When the position in 201 does not exist, the designated screen display in which the distance from the input detected coordinate is n in each of one of the vertical directions and one of the horizontal directions The position in the area 201 is set as a detected coordinate after correction and is accepted as an input coordinate, or the coordinate in the designated screen display area 201 that has the smallest distance from the input detection coordinate is set as a corrected detection coordinate and input. Accept as coordinates.
以上、タッチパネルドライバ６２が行う座標入力受付処理について説明した。
以上、本発明の実施形態について説明した。
本実施形態によれば、画面表示領域２０１の境界周辺に設定した境界領域４００内の位置のタッチが発生した場合には、タッチされた位置の座標を入力座標として直ちに受け付けずに、ユーザから画面表示領域２０１の指定を受け付け、タッチされた位置の座標に近接する、指定された画面表示領域２０１内の座標を入力座標として受け付ける。よって、ユーザが入力を意図した座標が含まれる画面表示領域２０１と異なる画面領域内の座標を入力座標として受け付けてしまうことを排除することができる。また、ユーザは、目的とする座標に正確にタッチしなくても、目的とする座標が属する画面表示領域２０１を指定するだけで、ユーザが入力を意図した座標が含まれる画面表示領域２０１内の、入力を意図した座標またはその近傍の位置を座標入力することができる。
The coordinate input reception process performed by the touch panel driver 62 has been described above.
The embodiment of the present invention has been described above.
According to the present embodiment, when a touch of a position in the boundary area 400 set around the boundary of the screen display area 201 occurs, the user does not immediately accept the coordinates of the touched position as the input coordinates, and the screen from the user. The designation of the display area 201 is accepted, and the coordinates in the designated screen display area 201 that are close to the coordinates of the touched position are accepted as input coordinates. Therefore, it can be excluded that coordinates in a screen area different from the screen display area 201 including coordinates intended by the user are received as input coordinates. In addition, even if the user does not touch the target coordinates accurately, the user simply specifies the screen display area 201 to which the target coordinates belong, and the user can input the coordinates in the screen display area 201 including the coordinates that the user intended to input. , It is possible to input coordinates that are intended to be input or positions in the vicinity thereof.
ところで、以上のようなタッチパネルドライバ６２が行う座標入力受付処理としては、図５に示す処理に代えて、図７に示す処理を行うようにしてもよい。
すなわち、図７に示す座標入力受付処理において、タッチパネルドライバ６２は、タッチパネル２へのタッチの発生を監視する（ステップ７０２）。
そして、タッチパネル２へのタッチが発生したならば（ステップ７０２）、現在の表示モードが全画面表示モードであるかどうかを調べ（ステップ７０４）、全画面表示モードであれば、タッチパネルコントローラ５から入力した検出座標を、そのまま入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ７０８）。そして、ステップ７０２に戻り次のタッチの発生を待つ。
By the way, as a coordinate input reception process performed by the touch panel driver 62 as described above, the process illustrated in FIG. 7 may be performed instead of the process illustrated in FIG.
That is, in the coordinate input reception process shown in FIG. 7, the touch panel driver 62 monitors the occurrence of a touch on the touch panel 2 (step 702).
If a touch on the touch panel 2 occurs (step 702), it is checked whether or not the current display mode is the full screen display mode (step 704). The detected coordinates are received as input coordinates as they are, and the screen display area 201 including the position on the display screen that overlaps the input coordinates at that time is output to the application 7 used for display (step 708). Then, the process returns to step 702 to wait for the next touch.
一方、現在の表示モードが全画面表示モードでなく二分割表示モードや子画面表示モードであれば（ステップ７０４）、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標であるかどうかを調べる（ステップ７０６）。 On the other hand, if the current display mode is not the full screen display mode but the two-split display mode or the sub-screen display mode (step 704), it is determined whether or not the detected coordinates input from the touch panel controller 5 are the coordinates in the boundary region 400. Check (step 706).
そして、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標でなければ（ステップ７０６）、タッチパネルコントローラ５から入力した検出座標を、そのまま入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ７０８）。そして、ステップ３０２に戻り次のタッチの発生を待つ。 If the detected coordinates input from the touch panel controller 5 are not coordinates in the boundary region 400 (step 706), the detected coordinates input from the touch panel controller 5 are accepted as input coordinates, and the display screen overlaps the input coordinates at that time. The screen display area 201 including the upper position is output to the application 7 used for display (step 708). Then, the process returns to step 302 and waits for the next touch to occur.
一方、タッチパネルコントローラ５から入力した検出座標が境界領域４００内の座標であれば（ステップ７０６）、ユーザがタッチを意図した画面表示領域２０１を推定する（ステップ７１０）。 On the other hand, if the detected coordinate input from the touch panel controller 5 is a coordinate in the boundary region 400 (step 706), the screen display region 201 intended by the user to touch is estimated (step 710).
ユーザがタッチを意図した画面表示領域２０１の推定は、前回受け付けた入力座標が含まれる画面表示領域２０１と同じ画面表示領域２０１が、ユーザがタッチを意図した画面表示領域２０１であると推定することにより行う。または、ユーザがタッチを意図した画面表示領域２０１の推定は、入力座標が含まれる画面表示領域２０１であった過去所定期間中の頻度が最も大きい画面表示領域２０１が、ユーザがタッチを意図した画面表示領域２０１であると推定することにより行う。なお、表示モードが子画面表示モードのときは、常に、子画面状の画面表示領域２０１を、ユーザがタッチを意図した画面表示領域２０１であると推定するようにしてもよい。 The estimation of the screen display area 201 intended by the user is to estimate that the same screen display area 201 as the screen display area 201 including the input coordinates received last time is the screen display area 201 intended for the user to touch. To do. Alternatively, the screen display area 201 that the user intended to touch is estimated based on the screen display area 201 that is the screen display area 201 including the input coordinates and has the highest frequency during the past predetermined period. This is performed by estimating the display area 201. When the display mode is the sub-screen display mode, the sub-screen-like screen display area 201 may always be estimated as the screen display area 201 that the user intends to touch.
そして、音声出力装置から、推定した画面表示領域２０１に応じた音声を出力する（ステップ７１２）。
ここで、音声としては、推定した画面表示領域２０１に応じて異なった音声を出力する。たとえば、二分割表示モードにおいて、左側の画面表示領域２０１を推定したときには、「左画面をタッチしました」といった音声や、「ピピピ」といった音声や、左側の画面表示領域２０１のアプリケーション画面を表示しているアプリケーション７の名称を読み上げる音声を出力し、右側の画面表示領域２０１を推定したときには、「右画面をタッチしました」といった音声や、「ポポポ」といった音声や、右側の画面表示領域２０１にアプリケーション画面を表示しているアプリケーション７の名称を読み上げる音声を出力する。
And the audio | voice according to the estimated screen display area 201 is output from an audio | voice output apparatus (step 712).
Here, as the sound, different sound is output according to the estimated screen display area 201. For example, when the left screen display area 201 is estimated in the two-split display mode, a voice such as “I touched the left screen”, a voice such as “Beep”, and an application screen in the left screen display area 201 are displayed. When the right screen display area 201 is estimated by outputting a voice that reads out the name of the application 7 that is being touched, a voice such as “I touched the right screen”, a voice such as “Popopo”, and the right screen display area 201 A sound that reads the name of the application 7 displaying the application screen is output.
また、子画面表示モードにおいて、子画面状の画面表示領域２０１を推定したときには、「子画面をタッチしました」といった音声や、「ピピピ」といった音声や、子画面状の画面表示領域２０１のアプリケーション画面を表示しているアプリケーション７の名称を読み上げる音声を出力し、子画面状の画面表示領域２０１でない方の画面表示領域２０１を推定したときには、「親画面をタッチしました」といった音声や、「ポポポ」といった音声や、子画面状の画面表示領域２０１でない方の画面表示領域２０１にアプリケーション画面を表示しているアプリケーション７の名称を読み上げると音声を出力する。 Further, in the sub-screen display mode, when the sub-screen-like screen display area 201 is estimated, a voice such as “touching the sub-screen”, a voice such as “pippi”, and an application of the sub-screen-like screen display area 201 When a voice that reads the name of the application 7 displaying the screen is output and the screen display area 201 that is not the sub-screen-like screen display area 201 is estimated, a voice such as “Touch the parent screen” or “ When a voice such as “poppopo” or the name of the application 7 displaying the application screen in the screen display area 201 that is not the sub-screen-like screen display area 201 is read out, the voice is output.
そして、所定のタイムアウト時間（たとえば、２秒）を設定したタイマをスタートし（ステップ３１４）、ユーザの画面表示領域２０１の指定を受け付けの発生と（ステップ７１６）、タイマのタイムアウトの発生（ステップ７１８）を監視する。 Then, a timer set with a predetermined timeout time (for example, 2 seconds) is started (step 314), the designation of the user's screen display area 201 is accepted (step 716), and the timer timeout occurs (step 718). ).
そして、ユーザの画面表示領域２０１の指定を受け付けが発生したならば（ステップ７１６）、指定された画面表示領域２０１に応じて、タッチパネルコントローラ５から入力した検出座標を補正し、補正後の検出座標を入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ７２２）。そして、ステップ７０２に戻り次のタッチの発生を待つ。ここで、ステップ７１６の画面表示領域２０１の指定の受け付けや、ステップ７２２の検出座標の補正は、図３に示した座標入力受付処理と同様に行う。 If acceptance of the user's designation of the screen display area 201 occurs (step 716), the detected coordinates input from the touch panel controller 5 are corrected according to the designated screen display area 201, and the corrected detected coordinates are corrected. Is input as an input coordinate, and the screen display area 201 including the position on the display screen that overlaps the input coordinate at that time is output to the application 7 used for display (step 722). Then, the process returns to step 702 to wait for the next touch. Here, the designation of the screen display area 201 in Step 716 and the correction of the detected coordinates in Step 722 are performed in the same manner as the coordinate input acceptance process shown in FIG.
一方、タイマのタイムアウトが発生した場合には（ステップ７１８）、推定した画面表示領域２０１に応じて、タッチパネルコントローラ５から入力した検出座標を補正し、補正後の検出座標を入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力する（ステップ７２０）。そして、ステップ７０２に戻り次のタッチの発生を待つ。 On the other hand, when the timer has timed out (step 718), the detected coordinates input from the touch panel controller 5 are corrected according to the estimated screen display area 201, and the corrected detected coordinates are accepted as input coordinates. The screen display area 201 including the position on the display screen that overlaps the input coordinates at the time is output to the application 7 used for display (step 720). Then, the process returns to step 702 to wait for the next touch.
ここで、ステップ７２０の検出座標の補正は、補正後の検出座標が、推定した画面表示領域２０１内の補正前の検出座標に近接した位置の座標となるように行う。すなわち、推定した画面表示領域２０１を指定された画面表示領域２０１と見なして、上述のように検出座標の補正を行う。 Here, the correction of the detected coordinates in step 720 is performed so that the corrected detected coordinates become the coordinates of the position close to the estimated coordinates before correction in the estimated screen display area 201. That is, the estimated screen display area 201 is regarded as the designated screen display area 201 and the detected coordinates are corrected as described above.
以上、図７に示した座標検出処理によれば、図５に示した座標検出処理に比べ、多くの場合において、ユーザが一回のタッチで所望の操作を完了できるようになることが期待できる。 As described above, according to the coordinate detection process illustrated in FIG. 7, in many cases, it can be expected that the user can complete a desired operation with a single touch as compared to the coordinate detection process illustrated in FIG. 5. .
なお、以上の実施形態は、子画面表示モードにあるときに、子画面状の画面表示領域２０１でない方の画面表示領域２０１に表示されるアプリケーション画面が、子画面状の画面表示領域２０１周辺の位置にボタンなどが表示されないアプリケーション画面である場合には、境界領域４００内の検出座標が発生したときには、無条件に子画面状の画面表示領域２０１を指定された画面表示領域２０１と見なして、上述の検出座標の補正を行って、補正後の検出座標を入力座標として受け付け、その時点で入力座標に重なる表示画面上の位置を含む画面表示領域２０１を表示に用いているアプリケーション７に出力するようにしてもよい。 In the above-described embodiment, the application screen displayed in the screen display area 201 that is not the sub-screen-like screen display area 201 when the sub-screen display mode is in the sub-screen-like screen display area 201 In the case of an application screen in which no button or the like is displayed at a position, when a detection coordinate in the boundary region 400 occurs, the child screen-like screen display region 201 is unconditionally regarded as the designated screen display region 201, and The detected coordinates are corrected as described above, the corrected detected coordinates are accepted as input coordinates, and the screen display area 201 including the position on the display screen that overlaps the input coordinates at that time is output to the application 7 that is used for display. You may do it.
１…ディスプレイ、２…タッチパネル、３…周辺装置、４…ディスプレイコントローラ、５…タッチパネルコントローラ、６…オペレーティングシステム、７…アプリケーション、６１…ディスプレイドライバ、６２…タッチパネルドライバ、６３…他周辺装置用ドライバ、２０１…画面表示領域、４００…境界領域。 DESCRIPTION OF SYMBOLS 1 ... Display, 2 ... Touch panel, 3 ... Peripheral device, 4 ... Display controller, 5 ... Touch panel controller, 6 ... Operating system, 7 ... Application, 61 ... Display driver, 62 ... Touch panel driver, 63 ... Driver for other peripheral devices, 201 ... screen display area, 400 ... boundary area.
Claims (10)
前記表示装置の表示画面を複数の画面表示領域に分割して、各画面表示領域に異なる画面を表示する画面表示手段と、
ユーザから座標入力を受け付ける座標入力受付手段とを有し、
前記座標入力受付手段は、
前記タッチパネルから出力された検出座標が、前記画面表示領域同士の境界周辺に設定した境界領域内の座標でない場合に、当該検出座標の座標入力を受け付け、
前記タッチパネルから出力された検出座標が前記境界領域内の座標である場合に、ユーザからいずれか一つの画面表示領域の指定を受け付け、指定された画面表示領域内の、前記検出座標に近接した位置の座標の座標入力を受け付けることを特徴とする情報処理装置。 An information processing device including a touch panel that outputs coordinates of a touched position as detection coordinates, and a display device,
Screen display means for dividing the display screen of the display device into a plurality of screen display areas and displaying different screens in the respective screen display areas;
Coordinate input receiving means for receiving coordinate input from the user,
The coordinate input receiving means
When the detected coordinates output from the touch panel are not coordinates in the boundary area set around the boundary between the screen display areas, coordinate input of the detected coordinates is accepted,
When the detected coordinates output from the touch panel are coordinates in the boundary area, the designation of any one of the screen display areas is accepted from the user, and the position in the designated screen display area close to the detected coordinates An information processing apparatus that accepts coordinate input of coordinates.
前記座標入力受付手段は、前記画面表示領域の指定を、ユーザのタッチパネルへの、指定する画面表示領域の前記境界領域を除く部分内の任意の位置に対するタッチによって受け付けることを特徴とする情報処理装置。 The information processing apparatus according to claim 1,
The coordinate input accepting unit accepts designation of the screen display area by touching a user's touch panel with respect to an arbitrary position in a portion excluding the boundary area of the designated screen display area. .
前記座標入力受付手段は、前記画面表示領域の指定を、ユーザの、指定する画面表示領域の前記境界領域を除く部分内の任意の位置への、タッチパネルへのタッチ位置のスライドによって受け付けることを特徴とする情報処理装置。 The information processing apparatus according to claim 1,
The coordinate input receiving means receives the designation of the screen display area by sliding the touch position on the touch panel to any position within the portion of the screen display area to be designated, excluding the boundary area. Information processing apparatus.
前記座標入力受付手段は、前記画面表示領域の指定を、ユーザの、指定する画面表示領域を表す文言の音声入力によって受け付けることを特徴とする情報処理装置。 The information processing apparatus according to claim 1,
The information processing apparatus according to claim 1, wherein the coordinate input receiving unit receives the designation of the screen display area by voice input of a word representing a screen display area to be designated by a user.
前記座標入力受付手段は、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、所定の警告音を出力することを特徴とする情報処理装置。 The information processing apparatus according to claim 1, 2, 3 or 4,
The information processing apparatus according to claim 1, wherein the coordinate input receiving unit outputs a predetermined warning sound when the detected coordinates output from the touch panel are coordinates in the boundary region.
前記座標入力受付手段は、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、ユーザがタッチを意図した位置が属する一つの画面表示領域を推定し、所定期間内にユーザからいずれの画面表示領域の指定も受け付けなかった場合には、前記推定した画面表示領域内の、前記検出座標に近接した位置の座標の座標入力を受け付けることを特徴とする情報処理装置。 The information processing apparatus according to claim 1, 2, 3 or 4,
The coordinate input accepting unit estimates one screen display region to which a position intended by the user belongs when the detected coordinates output from the touch panel are coordinates in the boundary region, and within a predetermined period. An information processing apparatus, wherein when no designation of any screen display area is received from a user, a coordinate input of a position close to the detected coordinates in the estimated screen display area is received.
前記座標入力受付手段は、過去直近に座標入力を受け付けた座標が属する画面表示領域を、前記ユーザがタッチを意図した位置が属する一つの画面表示領域として推定することを特徴とする情報処理装置。 An information processing apparatus according to claim 6,
The information processing apparatus according to claim 1, wherein the coordinate input receiving unit estimates a screen display area to which a coordinate for which a coordinate input has been received most recently belongs, as a single screen display area to which a position intended by the user belongs.
前記座標入力受付手段は、過去に座標入力を受け付けた座標が属する頻度が最大の画面表示領域を、前記ユーザがタッチを意図した位置が属する一つの画面表示領域として推定することを特徴とする情報処理装置。 An information processing apparatus according to claim 6,
The coordinate input receiving means estimates a screen display area having the highest frequency to which coordinates that have received coordinate input in the past belong as one screen display area to which a position to which the user intends to touch belongs. Processing equipment.
前記座標入力受付手段は、前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、前記推定した画面表示領域を表す音を出力することを特徴とする情報処理装置。 An information processing apparatus according to claim 6, 7 or 8,
The coordinate input receiving unit outputs a sound representing the estimated screen display area when the detected coordinates output from the touch panel are coordinates in the boundary area.
前記コンピュータを、
前記表示装置の表示画面を複数の画面表示領域に分割して、各画面表示領域に異なる画面を表示する画面表示手段と、
ユーザから座標入力を受け付ける座標入力受付手段として機能させ、
前記座標入力受付手段は、
前記タッチパネルから出力された検出座標が、前記画面表示領域同士の境界周辺に設定した境界領域内の座標でない場合に、当該検出座標の座標入力を受け付け、
前記タッチパネルから出力された検出座標が、前記境界領域内の座標である場合に、ユーザからいずれか一つの画面表示領域の指定を受け付け、指定された画面表示領域内の、前記検出座標に近接した位置の座標の座標入力を受け付けることを特徴とするコンピュータプログラム。 A computer program that is read and executed by a computer including a touch panel that outputs coordinates of a touched position as detection coordinates and a display device,
The computer,
Screen display means for dividing the display screen of the display device into a plurality of screen display areas and displaying different screens in the respective screen display areas;
Function as a coordinate input receiving means for receiving coordinate input from the user,
The coordinate input receiving means
When the detected coordinates output from the touch panel are not coordinates in the boundary area set around the boundary between the screen display areas, coordinate input of the detected coordinates is accepted,
When the detected coordinates output from the touch panel are coordinates in the boundary area, the designation of any one of the screen display areas is accepted from the user, and the detected coordinates in the designated screen display area are close to the detected coordinates A computer program that accepts coordinate input of position coordinates.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014103109A JP6285799B2 (en) | 2014-05-19 | 2014-05-19 | Information processing apparatus and computer program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014103109A JP6285799B2 (en) | 2014-05-19 | 2014-05-19 | Information processing apparatus and computer program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015219743A true JP2015219743A (en) | 2015-12-07 |
| JP6285799B2 JP6285799B2 (en) | 2018-02-28 |
Family
ID=54779054
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014103109A Active JP6285799B2 (en) | 2014-05-19 | 2014-05-19 | Information processing apparatus and computer program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6285799B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017123126A (en) * | 2016-01-08 | 2017-07-13 | キヤノン株式会社 | Display control device and method for controlling the same, program, and recording medium |
| JP2017224195A (en) * | 2016-06-16 | 2017-12-21 | パイオニア株式会社 | Input device |
| WO2019010828A1 (en) * | 2017-07-10 | 2019-01-17 | 广州视源电子科技股份有限公司 | Smart device and operation method therefor, apparatus and computer storage medium |
| JP2021093177A (en) * | 2021-02-10 | 2021-06-17 | パイオニア株式会社 | Input device |
| KR102504325B1 (en) * | 2022-10-25 | 2023-02-28 | (주) 아하 | Method of processing touch input on in-cell type touch screen and interactive flat panel display thereof |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10312475A (en) * | 1997-05-12 | 1998-11-24 | Nippon Signal Co Ltd:The | Ticket vending machine |
| JP2000081933A (en) * | 1998-09-04 | 2000-03-21 | Minolta Co Ltd | Picture inputting processor |
| JP2002268788A (en) * | 2001-01-16 | 2002-09-20 | Samsung Electronics Co Ltd | Information communication system equipped with close-up function of web document and close-up method for the same web document using the same system and recording medium with the same method recorded |
| WO2003027826A1 (en) * | 2001-09-21 | 2003-04-03 | International Business Machines Corporation | Input apparatus, computer apparatus, method for identifying input object, method for identifying input object in keyboard, and computer program |
| JP2005208991A (en) * | 2004-01-23 | 2005-08-04 | Canon Inc | Position information output device and signal processing method |
| JP2006127488A (en) * | 2004-09-29 | 2006-05-18 | Toshiba Corp | Input device, computer device, information processing method, and information processing program |
| US20090259963A1 (en) * | 2008-04-15 | 2009-10-15 | Dell Products L.P. | Display Area Navigation |
| JP2011076173A (en) * | 2009-09-29 | 2011-04-14 | Nec Access Technica Ltd | Character input device, character input method and character input program |
| JP2012008743A (en) * | 2010-06-23 | 2012-01-12 | Denso Corp | Display device for vehicle |
| JP2012133719A (en) * | 2010-12-24 | 2012-07-12 | Sharp Corp | Input display device and heating cooker |
-
2014
- 2014-05-19 JP JP2014103109A patent/JP6285799B2/en active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10312475A (en) * | 1997-05-12 | 1998-11-24 | Nippon Signal Co Ltd:The | Ticket vending machine |
| JP2000081933A (en) * | 1998-09-04 | 2000-03-21 | Minolta Co Ltd | Picture inputting processor |
| JP2002268788A (en) * | 2001-01-16 | 2002-09-20 | Samsung Electronics Co Ltd | Information communication system equipped with close-up function of web document and close-up method for the same web document using the same system and recording medium with the same method recorded |
| WO2003027826A1 (en) * | 2001-09-21 | 2003-04-03 | International Business Machines Corporation | Input apparatus, computer apparatus, method for identifying input object, method for identifying input object in keyboard, and computer program |
| JP2005208991A (en) * | 2004-01-23 | 2005-08-04 | Canon Inc | Position information output device and signal processing method |
| JP2006127488A (en) * | 2004-09-29 | 2006-05-18 | Toshiba Corp | Input device, computer device, information processing method, and information processing program |
| US20090259963A1 (en) * | 2008-04-15 | 2009-10-15 | Dell Products L.P. | Display Area Navigation |
| JP2011076173A (en) * | 2009-09-29 | 2011-04-14 | Nec Access Technica Ltd | Character input device, character input method and character input program |
| JP2012008743A (en) * | 2010-06-23 | 2012-01-12 | Denso Corp | Display device for vehicle |
| JP2012133719A (en) * | 2010-12-24 | 2012-07-12 | Sharp Corp | Input display device and heating cooker |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017123126A (en) * | 2016-01-08 | 2017-07-13 | キヤノン株式会社 | Display control device and method for controlling the same, program, and recording medium |
| JP2017224195A (en) * | 2016-06-16 | 2017-12-21 | パイオニア株式会社 | Input device |
| WO2019010828A1 (en) * | 2017-07-10 | 2019-01-17 | 广州视源电子科技股份有限公司 | Smart device and operation method therefor, apparatus and computer storage medium |
| JP2021093177A (en) * | 2021-02-10 | 2021-06-17 | パイオニア株式会社 | Input device |
| KR102504325B1 (en) * | 2022-10-25 | 2023-02-28 | (주) 아하 | Method of processing touch input on in-cell type touch screen and interactive flat panel display thereof |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6285799B2 (en) | 2018-02-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6285799B2 (en) | Information processing apparatus and computer program | |
| KR102348947B1 (en) | Method and apparatus for controlling display on electronic devices | |
| CN106687905B (en) | Tactile sensation control system and tactile sensation control method | |
| US20180232139A1 (en) | Window control method, information processing apparatus, and control method and control program of information processing apparatus | |
| US9594448B2 (en) | Input device, control method and portable terminal device | |
| JP6258513B2 (en) | Tactile sensation control system and tactile sensation control method | |
| US9575620B2 (en) | Method, apparatus and computer program product for graphically enhancing the user interface of a device | |
| JP2011169621A (en) | Map display device | |
| US8744127B2 (en) | Image processing apparatus and method for improving frame rate while maintaining natural movement of object on images | |
| US9910556B2 (en) | Mouse cursor control method and apparatus | |
| WO2015141089A1 (en) | Information processing device, information processing method, and information processing program | |
| JP5719325B2 (en) | Display system, display system control method, control device, control device control method, program, and information storage medium | |
| JP6033465B2 (en) | Display control device | |
| JP2014149778A (en) | Operation menu control program, operation menu control device and operation menu control method | |
| US20160253088A1 (en) | Display control apparatus and display control method | |
| JP2010049318A (en) | Movement control program | |
| JP2012003376A (en) | Information processing device, information processing method and information processing program | |
| JP2017027422A (en) | Display device and display processing method | |
| CN111142994A (en) | Data display method and device, storage medium and electronic equipment | |
| JP2012123441A (en) | Multi-language selection device | |
| US20200013377A1 (en) | Information processing system, information processing apparatus, and information processing method | |
| JP2017116354A (en) | Traffic information output system and traffic information output method | |
| US20170032496A1 (en) | Display control system and display control method | |
| KR20110121932A (en) | Apparatus and method displaying menu icon of navigation using proximity sensor | |
| EP2696316A1 (en) | Method for providing schedule management function and electronic device thereof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170302 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171128 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171130 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180115 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180130 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180202 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6285799 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |