JP5184570B2 - Information terminal and display switching method - Google Patents

Information terminal and display switching method Download PDF

Info

Publication number
JP5184570B2
JP5184570B2 JP2010068740A JP2010068740A JP5184570B2 JP 5184570 B2 JP5184570 B2 JP 5184570B2 JP 2010068740 A JP2010068740 A JP 2010068740A JP 2010068740 A JP2010068740 A JP 2010068740A JP 5184570 B2 JP5184570 B2 JP 5184570B2
Authority
JP
Japan
Prior art keywords
display
face
vertical direction
content
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010068740A
Other languages
Japanese (ja)
Other versions
JP2011203860A (en
Inventor
和久 岡山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Priority to JP2010068740A priority Critical patent/JP5184570B2/en
Publication of JP2011203860A publication Critical patent/JP2011203860A/en
Application granted granted Critical
Publication of JP5184570B2 publication Critical patent/JP5184570B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephone Function (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報端末及び表示切替方法に関する。   The present invention relates to an information terminal and a display switching method.

従来から、情報端末の動きを検出して、画面に表示されているコンテンツの表示を自動的に切り替える機能を備えた情報端末が存在する。例えば、下記特許文献１には、端末内の加速度センサーにより検出された移動通信端末の動きに応じて、画面におけるコンテンツの表示対象領域を変化させる技術が開示されている。   2. Description of the Related Art Conventionally, there are information terminals that have a function of detecting movement of an information terminal and automatically switching display of content displayed on a screen. For example, Patent Document 1 below discloses a technique for changing a content display target area on a screen in accordance with the movement of a mobile communication terminal detected by an acceleration sensor in the terminal.

特開２００８−２６７９８号公報JP 2008-26798 A

しかしながら、上記特許文献１に記載の端末では、画面の切り替えは、あくまで端末に内蔵された加速度センサーと連動して実行されるだけなので、情報端末の持ち方や置き方に依存して、ユーザが意図しない方向で画面が表示されてしまうことがある。例えば、ユーザが横向きで寝る体勢で画面を見ている時に、表示中のコンテンツの上下方向が重力方向と一致するように表示が切り替わってしまうと、画面の表示態様がユーザの期待しないものになってしまう。   However, in the terminal described in Patent Document 1, since the screen switching is only performed in conjunction with the acceleration sensor built in the terminal, the user may depend on how the information terminal is held or placed. The screen may be displayed in an unintended direction. For example, if the display is switched so that the vertical direction of the content being displayed coincides with the direction of gravity when the user is looking at the screen in a posture of sleeping sideways, the display mode of the screen is not expected by the user. End up.

本発明は、上記課題を解決するためになされたものであり、ユーザが意図する表示方向でコンテンツを表示することが可能な情報端末及び表示切替方法を提供することを目的とする。   The present invention has been made to solve the above-described problems, and an object thereof is to provide an information terminal and a display switching method capable of displaying content in a display direction intended by a user.

上記課題を解決するため、本発明の情報端末は、コンテンツの上下方向を規定する方向情報が埋めこまれたコンテンツデータを記憶手段から読み出し、該方向情報と、自手段の上下方向とに基づいて、コンテンツの上下方向と自手段の上下方向とが一致するようにコンテンツを表示する表示手段と、表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得手段と、表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得手段と、顔データ取得手段により取得された画像データに基づいて顔の上下方向を判定する第１判定手段と、表示情報取得手段により取得された表示情報と、第１判定手段により判定された顔の上下方向とに基づいて、表示手段に表示されているコンテンツの上下方向と顔の上下方向とが一致しているか否かを判定する第２判定手段と、第２判定手段により二つの上下方向が一致していないと判定された場合に、コンテンツの上下方向が顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替手段と、情報端末の傾きの変化を検出する傾き検出手段と、を備え、傾き検出手段により情報端末の傾きの変化が検出された場合に、表示情報取得手段が表示情報を取得し、傾き検出手段により情報端末の傾きの変化が検出された場合に、顔データ取得手段が前記顔の画像データを取得する。 In order to solve the above-mentioned problem, the information terminal of the present invention reads content data in which direction information defining the vertical direction of content is embedded from the storage means, and based on the direction information and the vertical direction of its own means. Display means for displaying the content so that the vertical direction of the content matches the vertical direction of the means, display information acquisition means for acquiring display information indicating the display direction of the content displayed on the display means, and display means Face data acquisition means for acquiring image data of the face of the user facing the direction of the user, first determination means for determining the vertical direction of the face based on the image data acquired by the face data acquisition means, and display information acquisition Based on the display information acquired by the means and the vertical direction of the face determined by the first determination means, the vertical direction and face of the content displayed on the display means A second determination unit that determines whether or not the vertical direction matches the vertical direction; and when the second determination unit determines that the two vertical directions do not match, the vertical direction of the content is the vertical direction of the face A display switching means for switching the display direction of the content so as to match, and an inclination detection means for detecting a change in the inclination of the information terminal, and when a change in the inclination of the information terminal is detected by the inclination detection means, acquires the display information display information acquisition unit, when a change in the inclination of the information terminal is detected by the inclination detection means, the face data acquiring means you get the image data of the face.

また、本発明の表示切替方法は、コンテンツを表示する表示手段を備える情報端末により実行される表示切替方法であって、表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得ステップと、表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得ステップと、顔データ取得ステップにおいて、取得された画像データに基づいて顔の上下方向を判定する第１判定ステップと、表示情報取得ステップにおいて取得された表示情報と、第１判定ステップにおいて、判定された顔の上下方向とに基づいて、表示手段に表示されているコンテンツの上下方向と顔の上下方向とが一致しているか否かを判定する第２判定ステップと、第２判定ステップにおいて、二つの上下方向が一致していないと判定された場合に、コンテンツの上下方向が顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替ステップと、情報端末の傾きの変化を検出する傾き検出ステップと、を含み、傾き検出ステップにおいて情報端末の傾きの変化が検出された場合に、表示情報取得ステップにおいて表示情報を取得し、傾き検出ステップにおいて情報端末の傾きの変化が検出された場合に、顔データ取得ステップにおいて顔の画像データを取得する。 The display switching method of the present invention, there is provided a display switching method performed by an information terminal comprising a display means for displaying the content and display of acquiring display information indicating the display direction of the content displayed on Viewing means An information acquisition step, a face data acquisition step for acquiring image data of a user's face facing the display means, and a face data acquisition step for determining the vertical direction of the face based on the acquired image data 1 based on the display information acquired in the determination step, the display information acquisition step, and the vertical direction of the face determined in the first determination step, the vertical direction of the content displayed on the display means and the vertical direction of the face In the second determination step for determining whether or not the directions match, and in the second determination step, it is determined that the two vertical directions do not match. If it is, includes a display switching step of vertical content switches the display direction of the content to match the vertical direction of the face, and the inclination detecting step of detecting a change in inclination of the information terminal, a tilt detection When a change in the inclination of the information terminal is detected in the step, display information is acquired in the display information acquisition step, and when a change in the inclination of the information terminal is detected in the inclination detection step, the face data acquisition step Get image data.

このような情報端末及び表示切替方法によれば、コンテンツを視聴するユーザの顔の上下方向とコンテンツの上下方向とが一致していないと判定された場合に、コンテンツの表示方向が切り替えられる。このように、ユーザの顔の上下方向に合わせてコンテンツの表示態様を切り替えることで、ユーザが意図する方向でコンテンツを表示できる。   According to such an information terminal and display switching method, when it is determined that the vertical direction of the face of the user viewing the content does not match the vertical direction of the content, the content display direction is switched. In this way, the content can be displayed in the direction intended by the user by switching the display mode of the content in accordance with the vertical direction of the user's face.

また、本発明の情報端末は、コンテンツを表示する表示手段と、表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得手段と、表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得手段と、顔データ取得手段により取得された画像データに基づいて顔の上下方向を判定する第１判定手段と、表示情報取得手段により取得された表示情報と、第１判定手段により判定された顔の上下方向とに基づいて、表示手段に表示されているコンテンツの上下方向と顔の上下方向とが一致しているか否かを判定する第２判定手段と、第２判定手段により二つの上下方向が一致していないと判定された場合に、コンテンツの上下方向が顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替手段と、情報端末の傾きの変化を検出する傾き検出手段と、を備え、傾き検出手段により情報端末の傾きの変化が検出された場合に、表示情報取得手段が表示情報を取得し、傾き検出手段により情報端末の傾きの変化が検出された場合に、顔データ取得手段が顔の画像データを取得する。 Also, the information terminal of the present invention includes display means for displaying the content, and the display information acquisition unit that acquires display information indicating the display direction of the content displayed on the display unit, the user facing the direction of the display unit Face data acquisition means for acquiring image data of the face, first determination means for determining the vertical direction of the face based on the image data acquired by the face data acquisition means, and display information acquired by the display information acquisition means And a second determination unit that determines whether the vertical direction of the content displayed on the display unit matches the vertical direction of the face based on the vertical direction of the face determined by the first determination unit When the second determination unit determines that the two vertical directions do not match, the content display direction is switched so that the vertical direction of the content matches the vertical direction of the face. A display switching means and an inclination detection means for detecting a change in the inclination of the information terminal, and when the change in the inclination of the information terminal is detected by the inclination detection means, the display information acquisition means acquires the display information, When a change in the inclination of the information terminal is detected by the inclination detection means, the face data acquisition means acquires face image data .

この場合、情報端末の傾きの変化が検出された場合に限り、表示情報や顔の画像データを取得する。このため、常に表示情報や顔の画像データを取得して上記の判定処理や表示切替処理を実行する場合と比べて情報端末の消費電力を抑えられる。   In this case, display information and face image data are acquired only when a change in the tilt of the information terminal is detected. For this reason, the power consumption of the information terminal can be suppressed as compared with the case where display information and face image data are always acquired and the above-described determination processing and display switching processing are executed.

このような情報端末及び表示切替方法によれば、コンテンツを視聴するユーザの顔の上下方向とコンテンツの上下方向とが一致していないと判定された場合に、コンテンツの表示方向が切り替えられる。このように、ユーザの顔の上下方向に合わせてコンテンツの表示態様を切り替えることで、ユーザが意図する方向でコンテンツを表示できる。   According to such an information terminal and display switching method, when it is determined that the vertical direction of the face of the user viewing the content does not match the vertical direction of the content, the content display direction is switched. In this way, the content can be displayed in the direction intended by the user by switching the display mode of the content in accordance with the vertical direction of the user's face.

実施形態に係る情報端末の機能構成を示す図である。It is a figure which shows the function structure of the information terminal which concerns on embodiment. 図１に示す情報端末のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of the information terminal shown in FIG. コンテンツの上下方向とユーザの顔の上下方向とが一致するように、コンテンツの表示方向を切り替える例を示す図である。It is a figure which shows the example which switches the display direction of a content so that the up-down direction of a content and the up-down direction of a user's face may correspond. 図１に示す情報端末の処理を示すフローチャートである。It is a flowchart which shows the process of the information terminal shown in FIG.

以下、添付画面を参照しながら本発明の実施形態を詳細に説明する。なお、図面の説明において同一又は同等の要素には同一の符号を付し、重複する説明を省略する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the attached screen. In the description of the drawings, the same or equivalent elements are denoted by the same reference numerals, and redundant description is omitted.

図１は、本発明の一実施形態に係る情報端末１０の機能ブロック図である。情報端末１０は、ウェブ上のコンテンツを表示できるブラウザ機能を備える端末である。情報端末１０の例としては携帯電話機や通話機能を有する携帯情報端末が挙げられるが、情報端末１０の種類はこれらに限定されない。図１に示すように、情報端末１０は、機能的構成要素としてコンテンツ記憶部１１、表示部１２、傾き検出部１３、表示情報取得部１４、顔データ取得部１５、第１判定部１６、第２判定部１７、及び表示切替部１８を備えている。   FIG. 1 is a functional block diagram of an information terminal 10 according to an embodiment of the present invention. The information terminal 10 is a terminal having a browser function that can display content on the web. Examples of the information terminal 10 include a mobile phone and a mobile information terminal having a call function, but the type of the information terminal 10 is not limited to these. As shown in FIG. 1, the information terminal 10 includes a content storage unit 11, a display unit 12, a tilt detection unit 13, a display information acquisition unit 14, a face data acquisition unit 15, a first determination unit 16, a first functional unit as functional components. 2 determination unit 17 and display switching unit 18.

情報端末１０は、図２に示すように、オペレーティングシステムやアプリケーションプログラムなどを実行するＣＰＵ１０１と、ＲＯＭ及びＲＡＭで構成される主記憶部１０２と、メモリなどで構成される補助記憶部１０３と、データ通信を行う通信制御部１０４と、文字入力用のキーで構成される操作部１０５と、液晶モニタ及びスピーカで構成される出力部１０６とを備えている。図１に示す情報端末１０の各機能は、ＣＰＵ１０１及び主記憶部１０２の上に所定のソフトウェアを読み込ませ、ＣＰＵ１０１の制御の下で、通信制御部１０４を動作させ、主記憶部１０２及び補助記憶部１０３に対してデータの読み書きを実行することで実現される。   As shown in FIG. 2, the information terminal 10 includes a CPU 101 that executes an operating system, application programs, and the like, a main storage unit 102 that includes a ROM and a RAM, an auxiliary storage unit 103 that includes a memory, and data A communication control unit 104 that performs communication, an operation unit 105 configured by keys for character input, and an output unit 106 configured by a liquid crystal monitor and a speaker are provided. Each function of the information terminal 10 shown in FIG. 1 reads predetermined software on the CPU 101 and the main storage unit 102, operates the communication control unit 104 under the control of the CPU 101, and operates the main storage unit 102 and the auxiliary storage. This is realized by reading / writing data from / to the unit 103.

コンテンツ記憶部１１は、情報端末１０に表示するコンテンツのデータを記憶する部分である。コンテンツデータには、コンテンツが画面に表示された際の当該コンテンツの表示方向（上下方向及び左右方向）を規定する方向情報が埋め込まれている。コンテンツデータは、例えば図示しないサーバから受信したり、ＣＤ−ＲＯＭ等の記憶媒体から読み出されたりした上でコンテンツ記憶部１１に記憶されるが、コンテンツデータの取得方法はこれらに限定されない。   The content storage unit 11 is a part that stores data of content to be displayed on the information terminal 10. In the content data, direction information defining the display direction (vertical direction and horizontal direction) of the content when the content is displayed on the screen is embedded. For example, the content data is received from a server (not shown) or read from a storage medium such as a CD-ROM and then stored in the content storage unit 11. However, the content data acquisition method is not limited thereto.

表示部１２は、コンテンツ記憶部１１から読み出したコンテンツデータに基づいてコンテンツを表示する部分である。例えば、ユーザがブラウザアプリケーションをして特定のコンテンツを表示するための操作を行うと、ブラウザを起動し、当該コンテンツのデータをコンテンツ記憶部１１から読み出して表示する。この際に表示部１２は、読み出したコンテンツデータから方向情報を抽出すると共に、表示部１２自体の現在の上下方向を取得する。そして表示部１２は、コンテンツデータの方向情報と取得した表示部１２の上下方向とに基づいて、表示部１２自体の上下方向と表示コンテンツの上下方向とが一致するようにコンテンツを表示する。表示部１２は、表示したコンテンツの表示方向を示す表示情報を生成し保持する。   The display unit 12 is a part that displays content based on content data read from the content storage unit 11. For example, when the user performs an operation for displaying a specific content using a browser application, the browser is activated, and the data of the content is read from the content storage unit 11 and displayed. At this time, the display unit 12 extracts direction information from the read content data and acquires the current vertical direction of the display unit 12 itself. The display unit 12 displays the content based on the direction information of the content data and the acquired vertical direction of the display unit 12 so that the vertical direction of the display unit 12 itself matches the vertical direction of the display content. The display unit 12 generates and holds display information indicating the display direction of the displayed content.

傾き検出部１３は、情報端末１０の傾きの変化を検出する部分である。傾き検出部１３は、情報端末１０に内蔵された加速度センサーを含んで構成され、情報端末１０が地面に対してどの程度傾いているかを測定する。傾き検出部１３は、情報端末１０の傾きが９０°以上変化したことを検出すると、その変化を示す変化情報を表示情報取得部１４及び顔データ取得部１５に出力する。   The inclination detection unit 13 is a part that detects a change in the inclination of the information terminal 10. The inclination detection unit 13 includes an acceleration sensor built in the information terminal 10 and measures how much the information terminal 10 is inclined with respect to the ground. When the inclination detection unit 13 detects that the inclination of the information terminal 10 has changed by 90 ° or more, the inclination detection unit 13 outputs change information indicating the change to the display information acquisition unit 14 and the face data acquisition unit 15.

表示情報取得部１４は、表示部１２に表示されるコンテンツの表示方向を示す表示情報を取得する部分である。傾き検出部１３から変化情報が入力されると、表示情報取得部１４は、表示部１２が保持している表示情報を取得し、その表示情報を第２判定部１７に出力する。   The display information acquisition unit 14 is a part that acquires display information indicating the display direction of the content displayed on the display unit 12. When the change information is input from the tilt detection unit 13, the display information acquisition unit 14 acquires the display information held by the display unit 12 and outputs the display information to the second determination unit 17.

顔データ取得部１５は、表示部１２の方向を向いているユーザの顔の画像データを取得する部分である。顔データ取得部１５は、情報端末１０の表示部１２と同じ面に設けられたカメラを含んで構成され、傾き検出部１３から変化情報が入力されると、そのカメラによりユーザの顔を撮影する。そして顔データ取得部１５は撮影画像のデータを第１判定部１６に出力する。   The face data acquisition unit 15 is a part that acquires image data of a user's face facing the display unit 12. The face data acquisition unit 15 includes a camera provided on the same surface as the display unit 12 of the information terminal 10. When change information is input from the tilt detection unit 13, the face data acquisition unit 15 captures the user's face with the camera. . Then, the face data acquisition unit 15 outputs the captured image data to the first determination unit 16.

第１判定部１６は、顔データ取得部１５により取得された画像データに基づいてユーザの顔の上下方向を判定する部分である。顔の上下方向の判定は、画像データを解析することで抽出した顔のパーツの位置情報に基づいて判定する。例えば、第１判定部１６は取得した画像データからユーザの目や口の位置情報を検出した後に、双方の位置情報を比較し、例えば、画像において目が口よりも左側に位置していれば、画像の左方向を顔の上方向と判定する。但し、顔の上下方向の判定はこれに限定されない。例えば、第１判定部１６は顔の他のパーツの位置関係に基づいて上下方向を判定してもよい。第１判定部１６は、顔の上下方向を示す顔方向情報を第２判定部１７に出力する。   The first determination unit 16 is a part that determines the vertical direction of the user's face based on the image data acquired by the face data acquisition unit 15. The determination of the vertical direction of the face is made based on the position information of the facial parts extracted by analyzing the image data. For example, after detecting the position information of the user's eyes and mouth from the acquired image data, the first determination unit 16 compares both pieces of position information. For example, if the eye is located on the left side of the mouth in the image. The left direction of the image is determined as the upward direction of the face. However, the determination of the vertical direction of the face is not limited to this. For example, the first determination unit 16 may determine the vertical direction based on the positional relationship of other parts of the face. The first determination unit 16 outputs face direction information indicating the vertical direction of the face to the second determination unit 17.

第２判定部１７は、表示情報取得部１４により取得された表示情報と、第１判定部１６から入力された顔方向情報とに基づいて、コンテンツの上下方向と顔の上下方向とが一致しているか否かを判定する部分である。第２判定部１７は、二つの上下方向が一致していないと判定した場合、そのことを示す不一致情報を表示切替部１８に出力する。一方、第２判定部１７は、二つの上下方向が一致していると判定した場合、表示切替部１８に上記情報を出力することなく、処理を終了する。   The second determination unit 17 matches the vertical direction of the content with the vertical direction of the face based on the display information acquired by the display information acquisition unit 14 and the face direction information input from the first determination unit 16. It is a part to determine whether or not. If the second determination unit 17 determines that the two vertical directions do not match, the second determination unit 17 outputs mismatch information indicating that to the display switching unit 18. On the other hand, if the second determination unit 17 determines that the two vertical directions match, the second determination unit 17 ends the processing without outputting the information to the display switching unit 18.

表示切替部１８は、第２判定部１７によりコンテンツの上下方向と顔の上下方向とが一致していないと判定された場合に、表示部１２に表示されているコンテンツの上下方向がユーザの顔の上下方向と一致するようにコンテンツの表示方向を切り替える部分である。第２判定部１７からの不一致情報が入力されると、表示切替部１８は表示部１２に表示されているコンテンツの表示方向を切り替える。   When the second determination unit 17 determines that the vertical direction of the content does not match the vertical direction of the face, the display switching unit 18 determines that the vertical direction of the content displayed on the display unit 12 is the user's face This is a part for switching the display direction of the content so as to coincide with the vertical direction. When mismatch information is input from the second determination unit 17, the display switching unit 18 switches the display direction of the content displayed on the display unit 12.

コンテンツの表示方向を切り替える例を図３に示す。図３に示すように、情報端末１０の表示部１２には、ブラウザ画面にニュースが表示されている。表示部１２と同じ面には、顔データ取得手段１５の一部であるカメラ１５ａが設けられている。図３中の矢印Ａは、このカメラ１５ａにより取得された顔の画像データに基づいて第１判定部１６によって判定されたユーザの顔の上方向を指している。   An example of switching the content display direction is shown in FIG. As shown in FIG. 3, news is displayed on the browser screen on the display unit 12 of the information terminal 10. On the same surface as the display unit 12, a camera 15a which is a part of the face data acquisition unit 15 is provided. An arrow A in FIG. 3 indicates the upward direction of the user's face determined by the first determination unit 16 based on the face image data acquired by the camera 15a.

図３に示すように、コンテンツの表示方向を切り替える前は、表示部１２に表示されているニュース画面の上下方向とそのニュース画面を閲覧するユーザの顔の上下方向とが一致していない。このため、ユーザが意図する方向でコンテンツが表示されていない。一方、コンテンツの表示方向を切り替えた後は、ニュース画面の上下方向とそのニュース画面を閲覧する顔の上下方向とが一致する。このように、ユーザの顔の上下方向に合わせてコンテンツの表示態様を切り替えることで、ユーザが意図する方向でコンテンツを表示できる。なお、表示部１２に表示されるコンテンツは何ら限定されず、ニュース以外に、例えば動画コンテンツであってもよい。   As shown in FIG. 3, before the content display direction is switched, the vertical direction of the news screen displayed on the display unit 12 does not match the vertical direction of the face of the user viewing the news screen. For this reason, the content is not displayed in the direction intended by the user. On the other hand, after switching the content display direction, the vertical direction of the news screen matches the vertical direction of the face browsing the news screen. In this way, the content can be displayed in the direction intended by the user by switching the display mode of the content in accordance with the vertical direction of the user's face. In addition, the content displayed on the display part 12 is not limited at all, For example, a moving image content other than news may be sufficient.

以下、図４に示すフローチャートを用いて、情報端末１０において実行される処理を説明すると共に、本実施形態に係る表示切替方法について説明する。図４は、本実施形態の情報端末１０での処理を示すフローチャートである。なお、コンテンツ記憶部１１には、情報端末１０の表示部１２に表示されるコンテンツのデータが予め記憶されている。   Hereinafter, the process performed in the information terminal 10 will be described using the flowchart illustrated in FIG. 4, and the display switching method according to the present embodiment will be described. FIG. 4 is a flowchart showing processing in the information terminal 10 of the present embodiment. The content storage unit 11 stores content data displayed on the display unit 12 of the information terminal 10 in advance.

情報端末１０の向きが変化すると、傾き検出部１３により、情報端末１０の傾きの変化が検知され（Ｓ０１、傾き変化検出ステップ）、傾きが変化したことを示す情報が表示情報取得部１４及び顔データ取得部１５に出力される。   When the orientation of the information terminal 10 changes, the inclination detection unit 13 detects a change in the inclination of the information terminal 10 (S01, inclination change detection step), and information indicating that the inclination has changed is displayed in the display information acquisition unit 14 and the face. The data is output to the data acquisition unit 15.

表示情報取得部１４は、傾き検出部１３からの情報が入力されると、コンテンツ記憶部１１から表示部１２が保持している表示情報を取得し、その表示情報を第２判定部１７に出力する（Ｓ０２、表示情報判定ステップ）。   When the information from the inclination detection unit 13 is input, the display information acquisition unit 14 acquires the display information held by the display unit 12 from the content storage unit 11 and outputs the display information to the second determination unit 17. (S02, display information determination step).

一方、顔データ取得部１５は、傾き検出部１３からの情報が入力されると、カメラの電源を入れてユーザの顔を撮影し、取得した撮影画像を第１判定部１６に出力する（Ｓ０３、顔データ取得ステップ）。そして第１判定部１６は、顔データ取得部１５からの撮影画像に基づいてユーザの顔の上下方向を判定し、その上下方向を示す顔方向情報を第２判定部１７に出力する（Ｓ０４、第１判定ステップ）。   On the other hand, when the information from the tilt detection unit 13 is input, the face data acquisition unit 15 turns on the camera to capture the user's face, and outputs the acquired captured image to the first determination unit 16 (S03). , Face data acquisition step). Then, the first determination unit 16 determines the vertical direction of the user's face based on the captured image from the face data acquisition unit 15, and outputs face direction information indicating the vertical direction to the second determination unit 17 (S04, First determination step).

第２判定部１７は、表示情報取得部１４からの表示情報と第１判定部１６からの顔方向情報とに基づいて、コンテンツの上下方向と顔の上下方向が一致しているか否かを判定する（Ｓ０５、第２判定ステップ）。第２判定部１７が二つの表示方向が一致していないと判定した場合（Ｓ０５；ＮＯ）、表示切替部１８は表示部１２に表示されているコンテンツの上下方向がユーザの顔の上下方向と一致するようにコンテンツの表示方向を切り替える（Ｓ０６、表示切替ステップ）。一方、第２判定部１７が二つの表示方向が一致していると判定した場合（Ｓ０５；ＹＥＳ）、表示切替部１８は処理を終了する。   The second determination unit 17 determines whether the vertical direction of the content matches the vertical direction of the face based on the display information from the display information acquisition unit 14 and the face direction information from the first determination unit 16. (S05, second determination step). When the second determination unit 17 determines that the two display directions do not match (S05; NO), the display switching unit 18 determines that the vertical direction of the content displayed on the display unit 12 is the vertical direction of the user's face. The display direction of the content is switched so as to match (S06, display switching step). On the other hand, when the second determination unit 17 determines that the two display directions match (S05; YES), the display switching unit 18 ends the process.

以上説明したように、本実施形態の情報端末及び表示切替方法によれば、コンテンツを視聴するユーザの顔の上下方向とコンテンツの上下方向とが一致していないと判定された場合に、ユーザの顔の上下方向に合わせてコンテンツの表示方向が切り替えられる。このように、コンテンツの表示態様を切り替えることで、ユーザが意図する方向でコンテンツを表示できる。   As described above, according to the information terminal and the display switching method of the present embodiment, when it is determined that the vertical direction of the face of the user viewing the content does not match the vertical direction of the content, The content display direction can be switched according to the vertical direction of the face. In this way, the content can be displayed in the direction intended by the user by switching the display mode of the content.

特に、本発明の情報端末は、情報端末の傾きの変化を検出する傾き検出部１３を更に備え、傾き検出手段１３により情報端末１０の傾きの変化が検出された場合に、表示情報取得部１４が表示情報を取得し、傾き検出手段１３により情報端末１０の傾きの変化が検出された場合に、顔データ取得部１５が顔の画像データを取得する。この場合、情報端末１０の傾きの変化が検出された場合に限り、表示情報や顔の画像データを取得する。このため、常に表示情報や顔の画像データを取得して上記判定処理や表示切替処理を実行する場合と比べて情報端末の消費電力を抑えられる。   In particular, the information terminal of the present invention further includes an inclination detection unit 13 that detects a change in the inclination of the information terminal. When the inclination detection unit 13 detects a change in the inclination of the information terminal 10, the display information acquisition unit 14. Acquires the display information, and when the inclination detection unit 13 detects a change in the inclination of the information terminal 10, the face data acquisition unit 15 acquires the face image data. In this case, display information and face image data are acquired only when a change in the tilt of the information terminal 10 is detected. For this reason, the power consumption of the information terminal can be suppressed as compared with the case where display information and face image data are always acquired and the determination process and the display switching process are executed.

以上、本発明のその実施形態に基づいて詳細に説明した。しかし、本発明は上記実施形態に限定されるものではない。本発明は、その要旨を逸脱しない範囲で以下のような様々な変形が可能である。   In the above, it explained in detail based on the embodiment of the present invention. However, the present invention is not limited to the above embodiment. The present invention can be modified in various ways as described below without departing from the scope of the invention.

本実施形態の情報端末は、情報端末１０の傾きが変化したことを傾き検出部１３が検知すると、第２判定部１７がユーザの顔とコンテンツの上下方向が一致しているか否かを判定し、必要に応じてコンテンツの表示方向の切替を実行するが、情報端末１０の傾きの変化を検出せずに、上記判定や表示方向の切替を実行してもよい。また、傾き検出部１３が検出する情報端末１０の傾きの変化は、９０°以上に限定されない。情報端末１０の傾きの変化がユーザの設定した任意の角度以上になったときに、上記の判定や表示方向の切替を実行するようにしてもよい。   In the information terminal according to the present embodiment, when the inclination detection unit 13 detects that the inclination of the information terminal 10 has changed, the second determination unit 17 determines whether or not the user's face matches the vertical direction of the content. The content display direction is switched as necessary. However, the determination and the display direction switching may be performed without detecting a change in the tilt of the information terminal 10. Further, the change in the inclination of the information terminal 10 detected by the inclination detection unit 13 is not limited to 90 ° or more. When the change in the inclination of the information terminal 10 exceeds an arbitrary angle set by the user, the above determination and display direction switching may be executed.

１０…情報端末、１２…表示部、１３…傾き検出部（傾き検出手段）、１４…表示情報取得部（表示情報取得手段）、１５…顔データ取得部（顔データ取得手段）、１６…第１判定部（第１判定手段）、１７…第２判定部（第２判定手段）、１８…表示切替部（表示切替手段）。
DESCRIPTION OF SYMBOLS 10 ... Information terminal, 12 ... Display part, 13 ... Tilt detection part (tilt detection means), 14 ... Display information acquisition part (display information acquisition means), 15 ... Face data acquisition part (face data acquisition means), 16 ... 1 determining unit (first determining unit), 17 ... second determining unit (second determining unit), 18 ... display switching unit (display switching unit).

Claims (3)

コンテンツの上下方向を規定する方向情報が埋めこまれたコンテンツデータを記憶手段から読み出し、該方向情報と、自手段の上下方向とに基づいて、前記コンテンツの上下方向と前記自手段の上下方向とが一致するように前記コンテンツを表示する表示手段と、
前記表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得手段と、
前記表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得手段と、
前記顔データ取得手段により取得された前記画像データに基づいて前記顔の上下方向を判定する第１判定手段と、
前記表示情報取得手段により取得された前記表示情報と、前記第１判定手段により判定された前記顔の上下方向とに基づいて、前記表示手段に表示されているコンテンツの上下方向と前記顔の上下方向とが一致しているか否かを判定する第２判定手段と、
前記第２判定手段により二つの前記上下方向が一致していないと判定された場合に、前記コンテンツの上下方向が前記顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替手段と、
情報端末の傾きの変化を検出する傾き検出手段と、を備え、
前記傾き検出手段により情報端末の傾きの変化が検出された場合に、前記表示情報取得手段が前記表示情報を取得し、
前記傾き検出手段により情報端末の傾きの変化が検出された場合に、前記顔データ取得手段が前記顔の画像データを取得する、情報端末。 Content data in which direction information defining the vertical direction of the content is embedded is read from the storage means, and based on the direction information and the vertical direction of the own means, the vertical direction of the content and the vertical direction of the self means Display means for displaying the content so that they match,
Display information acquisition means for acquiring display information indicating a display direction of content displayed on the display means;
Face data acquisition means for acquiring image data of the face of the user facing the direction of the display means;
First determination means for determining the vertical direction of the face based on the image data acquired by the face data acquisition means;
Based on the display information acquired by the display information acquisition unit and the vertical direction of the face determined by the first determination unit, the vertical direction of the content displayed on the display unit and the vertical direction of the face Second determination means for determining whether or not the direction matches,
Display switching means for switching the display direction of the content so that the vertical direction of the content matches the vertical direction of the face when the second determination means determines that the two vertical directions do not match. ,
An inclination detecting means for detecting a change in the inclination of the information terminal,
When a change in the inclination of the information terminal is detected by the inclination detection means, the display information acquisition means acquires the display information,
An information terminal, wherein the face data acquisition means acquires the image data of the face when a change in the inclination of the information terminal is detected by the inclination detection means. コンテンツを表示する表示手段と、
前記表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得手段と、
前記表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得手段と、
前記顔データ取得手段により取得された前記画像データに基づいて前記顔の上下方向を判定する第１判定手段と、
前記表示情報取得手段により取得された前記表示情報と、前記第１判定手段により判定された前記顔の上下方向とに基づいて、前記表示手段に表示されているコンテンツの上下方向と前記顔の上下方向とが一致しているか否かを判定する第２判定手段と、
前記第２判定手段により二つの前記上下方向が一致していないと判定された場合に、前記コンテンツの上下方向が前記顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替手段と、
情報端末の傾きの変化を検出する傾き検出手段と、を備え、
前記傾き検出手段により情報端末の傾きの変化が検出された場合に、前記表示情報取得手段が前記表示情報を取得し、
前記傾き検出手段により情報端末の傾きの変化が検出された場合に、前記顔データ取得手段が前記顔の画像データを取得する、情報端末。 Display means for displaying content;
Display information acquisition means for acquiring display information indicating a display direction of content displayed on the display means;
Face data acquisition means for acquiring image data of the face of the user facing the direction of the display means;
First determination means for determining the vertical direction of the face based on the image data acquired by the face data acquisition means;
Based on the display information acquired by the display information acquisition unit and the vertical direction of the face determined by the first determination unit, the vertical direction of the content displayed on the display unit and the vertical direction of the face Second determination means for determining whether or not the direction matches,
Display switching means for switching the display direction of the content so that the vertical direction of the content matches the vertical direction of the face when the second determination means determines that the two vertical directions do not match. ,
An inclination detecting means for detecting a change in the inclination of the information terminal,
When a change in the inclination of the information terminal is detected by the inclination detection means, the display information acquisition means acquires the display information,
An information terminal, wherein the face data acquisition means acquires the image data of the face when a change in the inclination of the information terminal is detected by the inclination detection means. コンテンツを表示する表示手段を備える情報端末により実行される表示切替方法であって、
前記表示手段に表示されるコンテンツの表示方向を示す表示情報を取得する表示情報取得ステップと、
前記表示手段の方向を向いているユーザの顔の画像データを取得する顔データ取得ステップと、
前記顔データ取得ステップにおいて、取得された前記画像データに基づいて前記顔の上下方向を判定する第１判定ステップと、
前記表示情報取得ステップにおいて取得された前記表示情報と、前記第１判定ステップにおいて判定された顔の上下方向とに基づいて、前記表示手段に表示されているコンテンツの上下方向と前記顔の上下方向とが一致しているか否かを判定する第２判定ステップと、
前記第２判定ステップにおいて、二つの前記上下方向が一致していないと判定された場合に、前記コンテンツの上下方向が前記顔の上下方向と一致するように該コンテンツの表示方向を切り替える表示切替ステップと、
情報端末の傾きの変化を検出する傾き検出ステップと、を含み、
前記傾き検出ステップにおいて情報端末の傾きの変化が検出された場合に、前記表示情報取得ステップにおいて前記表示情報を取得し、
前記傾き検出ステップにおいて情報端末の傾きの変化が検出された場合に、前記顔データ取得ステップにおいて前記顔の画像データを取得する、表示切替方法。 A display switching method executed by an information terminal including display means for displaying content,
A display information acquisition step of acquiring display information indicating a display direction of content displayed on the display means;
A face data acquisition step of acquiring image data of a user's face facing the display means;
A first determination step of determining a vertical direction of the face based on the acquired image data in the face data acquisition step;
Based on the display information acquired in the display information acquisition step and the vertical direction of the face determined in the first determination step, the vertical direction of the content displayed on the display means and the vertical direction of the face A second determination step for determining whether or not and match,
A display switching step of switching the display direction of the content so that the vertical direction of the content matches the vertical direction of the face when it is determined in the second determination step that the two vertical directions do not match. When,
An inclination detection step of detecting a change in inclination of the information terminal,
When a change in the tilt of the information terminal is detected in the tilt detection step, the display information is acquired in the display information acquisition step,
A display switching method for acquiring image data of the face in the face data acquisition step when a change in inclination of the information terminal is detected in the inclination detection step.
JP2010068740A 2010-03-24 2010-03-24 Information terminal and display switching method Expired - Fee Related JP5184570B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010068740A JP5184570B2 (en) 2010-03-24 2010-03-24 Information terminal and display switching method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010068740A JP5184570B2 (en) 2010-03-24 2010-03-24 Information terminal and display switching method

Publications (2)

Publication Number Publication Date
JP2011203860A JP2011203860A (en) 2011-10-13
JP5184570B2 true JP5184570B2 (en) 2013-04-17

Family

ID=44880463

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010068740A Expired - Fee Related JP5184570B2 (en) 2010-03-24 2010-03-24 Information terminal and display switching method

Country Status (1)

Country Link
JP (1) JP5184570B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016088493A1 (en) * 2014-12-03 2016-06-09 株式会社タカラトミー Motion-controlled video game device

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8593558B2 (en) * 2010-09-08 2013-11-26 Apple Inc. Camera-based orientation fix from portrait to landscape
JPWO2012108273A1 (en) * 2011-02-09 2014-07-03 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 Image display device, image display method, and program
WO2012120799A1 (en) * 2011-03-04 2012-09-13 パナソニック株式会社 Display device and method of switching display direction
EP2701046A4 (en) * 2011-04-20 2014-10-29 Nec Casio Mobile Comm Ltd Information display device, control method, and program
JP6146307B2 (en) * 2011-11-10 2017-06-14 株式会社ニコン Electronic device, information system, server, and program
KR101969931B1 (en) * 2012-01-10 2019-04-17 삼성전자주식회사 Apparatus and method for controlling rotation of display image
JP5662359B2 (en) * 2012-02-07 2015-01-28 Ｎｅｃプラットフォームズ株式会社 Terminal device, screen control method, program
JP2013197625A (en) * 2012-03-15 2013-09-30 Omron Corp Terminal, display screen drawing direction correction method and program, and computer readable recording medium
JP5974613B2 (en) * 2012-04-27 2016-08-23 富士通株式会社 Mobile communication device, antenna device, and antenna control method
JP6201282B2 (en) * 2012-06-28 2017-09-27 日本電気株式会社 Portable electronic device, its control method and program
JP6227234B2 (en) * 2012-09-12 2017-11-08 シャープ株式会社 Terminal device
CN104992103B (en) * 2015-08-10 2019-01-15 联想(北京)有限公司 A kind of control method and device
TWI820194B (en) * 2018-08-31 2023-11-01 日商索尼半導體解決方案公司 Electronic equipment and solid-state imaging devices
KR20200091522A (en) * 2019-01-22 2020-07-31 삼성전자주식회사 Method for controlling display orientation of content and electronic device thereof

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005100084A (en) * 2003-09-25 2005-04-14 Toshiba Corp Image processor and method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016088493A1 (en) * 2014-12-03 2016-06-09 株式会社タカラトミー Motion-controlled video game device
JP2016106715A (en) * 2014-12-03 2016-06-20 株式会社タカラトミー Hands-on video game apparatus

Also Published As

Publication number Publication date
JP2011203860A (en) 2011-10-13

Similar Documents

Publication Publication Date Title
JP5184570B2 (en) Information terminal and display switching method
JP5397081B2 (en) Mobile device
CN113557495B (en) Method for providing image using foldable display and electronic device supporting the same
US8405626B2 (en) Image projection apparatus and control method for same
JP5857257B2 (en) Display device and display direction switching method
EP2713242B1 (en) Smart screen rotation based on user orientation
US20140043231A1 (en) Information display device, control method, and program
EP2551758A1 (en) Information processing device, display switching method, program, and recording medium
US9535604B2 (en) Display device, method for controlling display, and recording medium
JP2012058847A (en) Mobile terminal device and program
US20150161767A1 (en) Image transmitting apparatus, image presentation system and control method
US9582169B2 (en) Display device, display method, and program
JP2015194992A (en) Portable terminal and control method
JP2019117378A (en) Electronic apparatus, information system, server and program
US8941745B2 (en) Mobile communication apparatus for controlling imaging based on facial recognition
JP2012058332A (en) Mobile terminal device and program
CN105991903B (en) Electronic device and information processing method
US20160132993A1 (en) Screen control method and communication device
JP6201282B2 (en) Portable electronic device, its control method and program
JP2006040046A (en) Information processing system and information processing method
US20230154148A1 (en) Image capturing apparatus capable of suppressing detection of subject not intended by user, control method for image capturing apparatus, and storage medium
JP6039325B2 (en) Imaging device, electronic device, and touch panel control method
JP2018019305A (en) Portable terminal device and image recording system
US9886192B2 (en) Terminal device, control method for terminal device, program, and information storage medium
KR20120040320A (en) Apparatus and method for display of terminal

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120427

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121023

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121203

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20121225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130116

R150 Certificate of patent or registration of utility model

Ref document number: 5184570

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160125

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees