JP2014130494A - Mobile terminal device and display control method - Google Patents
Mobile terminal device and display control method Download PDFInfo
- Publication number
- JP2014130494A JP2014130494A JP2012288107A JP2012288107A JP2014130494A JP 2014130494 A JP2014130494 A JP 2014130494A JP 2012288107 A JP2012288107 A JP 2012288107A JP 2012288107 A JP2012288107 A JP 2012288107A JP 2014130494 A JP2014130494 A JP 2014130494A
- Authority
- JP
- Japan
- Prior art keywords
- display
- unit
- information processing
- motion
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明の実施形態は、携帯端末装置および表示制御方法に関する。 Embodiments described herein relate generally to a mobile terminal device and a display control method.
スマートフォンやタブレット端末等の携帯端末装置が、テレビジョン放送表示装置等の外部機器から発せられた番組の音声を録音するとともに当該録音した音声をサーバに送信し、サーバが、マスターデータと録音した音声とを比較して当該録音した音声の番組を特定するとともに特定した番組に関連する番組関連情報を携帯端末装置に表示させるサービスがある。また、外部機器に表示された番組の映像を視聴しながら、携帯端末装置において、Twitter等のネットワークを介したコミュニケーションツールを用いる視聴スタイルもある。 A mobile terminal device such as a smartphone or a tablet terminal records the sound of a program issued from an external device such as a television broadcast display device and transmits the recorded sound to the server. There is a service in which the recorded audio program is specified by comparing with the program and information related to the specified program is displayed on the portable terminal device. In addition, there is a viewing style in which a mobile terminal device uses a communication tool via a network such as Twitter while viewing a video of a program displayed on an external device.
ところで、携帯端末装置には、当該携帯端末装置をテレビジョン放送表示装置等の外部機器の近くに配置したクレードルに収めて当該携帯端末装置の表示画面を外部機器のセカンドモニタとして利用する場合に、番組関連情報等の表示サイズを大きくする遠隔用表示に切り替え、ユーザが携帯端末装置を手元で利用する場合に、番組関連情報等の表示サイズを小さくする近接用表示に切り替えることが可能なものがある。 By the way, in the portable terminal device, when the portable terminal device is housed in a cradle arranged near an external device such as a television broadcast display device and the display screen of the portable terminal device is used as a second monitor of the external device, What can be switched to remote display that increases the display size of program-related information, etc., and can be switched to proximity display that reduces the display size of program-related information when the user uses the mobile terminal device at hand is there.
この場合において、遠隔用表示は、携帯端末装置の表示画面から離れた位置のユーザが見易いように番組関連情報等の表示サイズを大きくしているため、携帯端末装置が外部機器の近くに置かれたセカンドモニタとしての使用には適しているが、表示サイズを大きくした分、表示画面に表示される情報が省略され、ユーザが携帯端末装置に近接した位置（言い換えると、携帯端末装置が外部機器から離れた位置）での携帯端末装置の使用には適さない。 In this case, since the remote display has a larger display size of program-related information and the like so that a user at a position away from the display screen of the portable terminal device can easily see, the portable terminal device is placed near the external device. Although it is suitable for use as a second monitor, the information displayed on the display screen is omitted as the display size is increased, and the user is close to the mobile terminal device (in other words, the mobile terminal device is an external device). It is not suitable for use of a portable terminal device at a position away from the mobile phone.
一方、近接用表示は、携帯端末装置に近接した位置のユーザが番組関連情報等を見易いように表示サイズを小さくしかつ携帯端末装置のタッチパネルで操作可能なユーザインターフェース等を表示しているため、ユーザが携帯端末装置に近接した位置（言い換えると、携帯端末装置が外部機器から離れた位置）での使用には適しているが、ユーザが携帯端末装置から離れた位置（言い換えると、携帯端末装置が外部機器の近くに置かれた位置）での使用には適さない。 On the other hand, the proximity display displays a user interface that can be operated with the touch panel of the mobile terminal device with a small display size so that a user in the vicinity of the mobile terminal device can easily view program-related information, etc. Although the user is suitable for use at a position close to the mobile terminal device (in other words, a position where the mobile terminal device is away from the external device), the user is away from the mobile terminal device (in other words, the mobile terminal device). Is not suitable for use in a location near the external device.
そのため、携帯端末装置とテレビジョン放送表示装置等の外部機器との位置関係に応じて、携帯端末装置の表示画面に表示された情報の表示態様を自動的に変更可能として、携帯端末装置の利便性を向上させることが望まれている。 Therefore, the display mode of information displayed on the display screen of the mobile terminal device can be automatically changed according to the positional relationship between the mobile terminal device and an external device such as a television broadcast display device. It is desired to improve the performance.
本発明は、上記に鑑みてなされたものであって、携帯端末装置の利便性を向上させることができる携帯端末装置および表示制御方法を提供することを目的とする。 The present invention has been made in view of the above, and an object thereof is to provide a mobile terminal device and a display control method capable of improving the convenience of the mobile terminal device.
実施形態の携帯端末装置は、入力部と、動き検出部と、表示部と、表示制御部と、を備える。入力部は、外部機器から発せられる音声を入力可能である。動き検出部は、自装置の動きを検出する。表示部は、情報を表示する。表示制御部は、動き検出部により動きが検出されかつ入力部に入力された音声の音量が変化した場合に、自装置と外部機器との位置関係を検出し、この検出した位置関係に応じて情報の表示態様を変更する。 The mobile terminal device of the embodiment includes an input unit, a motion detection unit, a display unit, and a display control unit. The input unit can input a sound emitted from an external device. The motion detection unit detects the motion of the own device. The display unit displays information. The display control unit detects the positional relationship between the device itself and the external device when the motion is detected by the motion detection unit and the volume of the sound input to the input unit changes, and the display control unit Change the display mode of information.
以下に添付図面を参照して、本実施形態にかかる携帯端末装置および表示制御方法について説明する。 A mobile terminal device and a display control method according to the present embodiment will be described below with reference to the accompanying drawings.
（第１の実施形態）
図１は、第１の実施形態にかかる情報処理装置の構成を示すブロック図である。本実施形態にかかる情報処理装置１００は、スマートフォンやタブレット端末等の携帯端末装置の一例である。
(First embodiment)
FIG. 1 is a block diagram illustrating the configuration of the information processing apparatus according to the first embodiment. The
本実施形態にかかる情報処理装置１００は、テレビジョン放送表示装置３００（図３等参照）などの外部機器から発せされた音声を入力可能な音声入力部１０１と、入力された音声を記録する音声記録部１０２と、音声記録部１０２に記録された音声をネットワークを介してサーバ２００へ送信する音声送信部１０３と、サーバ２００から受信した番組関連情報（後述する）を受信する番組関連情報受信部１０４と、受信した番組関連情報などの各種情報を表示する画面表示部１０５と、情報処理装置１００（自装置）の動きを検出する動き検出部１０６と、検出された動きを記録する動き記録部１０７と、画面表示部１０６に対する各種情報の表示を制御する表示制御部１０８と、を備えている。
The
本実施形態では、表示制御部１０８は、動き検出部１０６により検出された動きおよび音声入力部１０１から入力された音声の音量の変化に基づいて、情報処理装置１００とテレビジョン放送表示装置３００（図３等参照）との位置関係を検出する位置関係検出部１０８ａを備えている。そして、表示制御部１０８は、位置関係検出部１０８ａにより検出された、情報処理装置１００とテレビジョン放送表示装置３００との位置関係に応じて、画面表示部１０５に表示された各種情報の表示態様を変更する。具体的には、表示制御部１０８は、情報処理装置１００とテレビジョン放送表示装置３００との位置関係に応じて、画面表示部１０５に表示された情報の表示サイズおよび表示内容を変更する。
In the present embodiment, the display control unit 108 and the
図２は、第１の実施形態にかかる情報処理装置において音声を記録する処理の流れを示すフローチャートである。情報処理装置１００とテレビジョン放送表示装置３００との位置関係に応じて画面表示部１０５に表示された情報の表示態様を変更する表示制御アプリケーションが起動されると、音声記録部１０２は、音声入力部１０１から入力された音声の記録を開始する（ステップＳ２１）。
FIG. 2 is a flowchart illustrating a flow of processing for recording sound in the information processing apparatus according to the first embodiment. When a display control application that changes the display mode of the information displayed on the
音声記録部１０２は、音声の記録を開始してから、サーバ２００における音紋照合処理（後述する）を実行可能な最短の時間以上の時間である所定時間Ｔ１経過したか否かを判断する（ステップＳ２２：Ｎｏ）。そして、音声記録部１０２は、音声の記録を開始してから所定時間Ｔ１経過すると（ステップＳ２２：Ｙｅｓ）、音声の記録を終了する（ステップＳ２３）。音声記録部１０２は、表示制御アプリケーションが終了するまで、ステップＳ２１〜ステップＳ２３に示す処理を繰り返す。
The
ここで、図３を用いて、サーバ２００において実行される音紋照合処理（情報処理装置１００から受信した音声の音のパターンである音紋を解析し、解析した音紋と、予め記憶されたマスター音声の音紋とを比較する処理）について説明する。図３は、第１の実施形態にかかるサーバにおいて実行される音紋照合処理を説明するための図である。テレビジョン放送表示装置３００のスピーカ３０１から発せられた音声が、音声記録部１０２により所定時間Ｔ１分記録されると、情報処理装置１００の音声送信部１０３は、最後に記録された所定時間Ｔ１分の音声を、ネットワークを介してサーバ２００に送信する。
Here, with reference to FIG. 3, a voiceprint matching process executed in the server 200 (a voiceprint that is a voice pattern received from the
サーバ２００は、情報処理装置１００から所定時間Ｔ１分の音声を受信すると、当該サーバ２００が有するデータベースに予め記憶されたマスター音声と、受信した音声とを比較する。ここで、マスター音声は、テレビジョン放送表示装置３００（図３参照）などに放送された番組の音声である。本実施形態では、サーバ２００は、現在から所定時間前までに放送された全てのチャンネルの番組の音声、または放送中の番組の音声のうち現在から所定時間前までに放送された音声を、マスター音声としてデータベースに記憶させている。
When the
次に、サーバ２００は、受信した音声と一致するマスター音声の番組を、テレビジョン放送表示装置３００に放送されている番組（言い換えると、テレビジョン放送表示装置３００においてユーザが視聴している番組）として特定する。そして、サーバ２００は、特定した番組に関連する番組関連情報を取得し、取得した番組関連情報をネットワークを介して情報処理装置１００に送信する。ここで、番組関連情報は、例えば、特定した番組に関してツイートされた情報へのリンク情報（ツイートされた情報に割り当てられた固有のＵＲＬ）、特定した番組を示すキーワード（例えば、番組名）などである。
Next, the
情報処理装置１００の番組関連情報受信部１０４は、番組関連情報を受信すると、当該受信した番組関連情報を画面表示部１０５に転送して、当該受信した番組関連情報を画面表示部１０５に表示させる。例えば、番組関連情報受信部１０４は、リンク情報を番組関連情報として受信した場合、当該リンク情報を用いてツイートされた情報を取得し、取得した情報を画面表示部１０５に表示させる。また、番組関連情報受信部１０４は、キーワードを番組関連情報として受信した場合、当該受信したキーワードに関してツイートされた情報を取得し、取得した情報を画面表示部１０５に表示させても良い。
When receiving the program related information, the program related
次に、図４〜６を用いて、本実施形態にかかる情報処理装置１００において画面表示部１０５に表示された各種情報の表示態様を変更する処理について説明する。図４は、第１の実施形態にかかる情報処理装置において画面表示部に表示された各種情報の表示態様を変更する処理の流れを示すフローチャートである。
Next, a process for changing the display mode of various information displayed on the
動き記録部１０７は、表示制御アプリケーションが起動されると、動き検出部１０６により検出された動きの記録を開始する（ステップＳ４１）。本実施形態では、動き検出部１０６は、情報処理装置１００の加速度を検出して、検出した加速度が所定量以上変化した場合に、情報処理装置１００の動きとして検出する。そして、動き記録部１０７は、検出された動きを記録している。動き検出部１０６は、ジャイロセンサにより検出される３軸方向における自装置の傾斜や回転を利用して自装置の動きを検出しても良い。
When the display control application is activated, the motion recording unit 107 starts recording the motion detected by the motion detection unit 106 (step S41). In the present embodiment, the
動き記録部１０７は、動きの記録を開始してから、情報処理装置１００の動きの検出処理を実行可能な最短の時間以上の時間である所定時間Ｔ２経過したか否かを判断する（ステップＳ４２：Ｎｏ）。そして、動き記録部１０７は、動きの記録を開始してから所定時間Ｔ２経過すると（ステップＳ４２：Ｙｅｓ）、動きの記録を終了する（ステップＳ４３）。動き記録部１０７は、表示制御アプリケーションが終了するまで、ステップＳ４１〜ステップＳ４３に示す処理を繰り返す。
The motion recording unit 107 determines whether or not a predetermined time T2, which is a time equal to or longer than the shortest time in which the motion detection process of the
位置関係検出部１０８ａは、動き記録部１０７に最後に記録された所定時間Ｔ２内に情報処理装置１００の動きが検出された否かを判断する（ステップＳ４４）。そして、位置関係検出部１０８ａは、動き記録部１０７に動きが記録されていなかった場合（ステップＳ４４：Ｎｏ）、情報処理装置１００の動きが検出されなかったと判断して、画面表示部１０５に表示された情報の表示態様を変更する処理を終了する。
The positional relationship detection unit 108a determines whether or not the movement of the
一方、位置関係検出部１０８ａは、動き記録部１０７に動きが記録されていた場合（ステップＳ４４：Ｙｅｓ）、情報処理装置１００の動きが検出されたと判断して、音声記録部１０２に最後に記録された所定時間Ｔ１内の音声の音量が基準音量である閾値ｓより小さいか否かを判断する（ステップＳ４５）。
On the other hand, when the motion recording unit 107 has recorded a motion (step S44: Yes), the positional relationship detection unit 108a determines that the motion of the
ここで、基準音量である閾値ｓの設定方法の一例について説明する。本実施形態では、ユーザは、情報処理装置１００を操作して近接基準音量Ｖｍａｘを設定するモードに切り替えた後、情報処理装置１００をテレビジョン放送表示装置３００の近くに置き、テレビジョン放送表示装置３００から音声（ユーザがテレビジョン放送表示装置３００を視聴する際の音量の音声）を発するよう操作する。その際、ユーザは、少なくとも情報処理装置１００が音声の音量を検出可能な一定時間、テレビジョン放送表示装置３００が音声を発するよう操作する。そして、情報処理装置１００は、音声入力部１０１から入力された音声の音量を、情報処理装置１００がテレビジョン放送表示装置３００の近くに置かれた際に情報処理装置１００に入力される近接基準音量Ｖｍａｘに設定する。
Here, an example of a method for setting the threshold s, which is the reference volume, will be described. In the present embodiment, the user operates the
次いで、ユーザは、情報処理装置１００を操作して遠隔基準音量Ｖｍｉｎを設定するモードに切り替えた後、情報処理装置１００をテレビジョン放送表示装置３００から離れた位置（ユーザがテレビジョン放送表示装置３００を視聴する位置）に置き、テレビジョン放送表示装置３００から音声を発するよう操作する。その際、ユーザは、少なくとも情報処理装置１００が音声の音量を検出可能な一定時間、テレビジョン放送表示装置３００が音声を発するよう操作する。そして、情報処理装置１００は、音声入力部１０１から入力された音声の音量を、情報処理装置１００がテレビジョン放送表示装置３００から離れた位置に置かれた際に情報処理装置１００に入力される遠隔基準音量Ｖｍｉｎに設定する。
Next, the user operates the
近接基準音量Ｖｍａｘおよび遠隔基準音量Ｖｍｉｎが設定されると、情報処理装置１００は、以下に示す式（１）を用いて、基準音量としての閾値ｓを設定する。
ｓ＝Ｖｍｉｎ＋（Ｖｍａｘ−Ｖｍｉｎ）／２・・・（１）
When the proximity reference volume Vmax and the remote reference volume Vmin are set, the
s = Vmin + (Vmax−Vmin) / 2 (1)
本実施形態では、近接基準音量Ｖｍａｘおよび遠隔基準音量Ｖｍｉｎを用いて、閾値ｓを設定しているが、これに限定するものではない。例えば、情報処理装置１００は、音声記録部１０２に最後に記録された所定時間Ｔ１内の音声の直前に記録された所定時間Ｔ１内の音声の音量を、閾値ｓとして取得しても良い。
In the present embodiment, the threshold s is set using the proximity reference volume Vmax and the remote reference volume Vmin, but the present invention is not limited to this. For example, the
図４に戻り、位置関係検出部１０８ａは、音声記録部１０２に記録された音声の音量が閾値ｓより小さい場合、当該音声記録部１０２に記録された音声の音量が小さくなったと判断して（ステップＳ４５：Ｙｅｓ）、情報処理装置１００がテレビジョン放送表示装置３００から離れたことを検出する。そして、表示制御部１０８は、情報処理装置１００がテレビジョン放送表示装置３００から離れたことが検出されると（言い換えると、情報処理装置１００がユーザの手元に移動して、情報処理装置１００とユーザとが近接状態になったことが検出されると）、画面表示部１０５に表示された情報を近接用表示に変更する（ステップＳ４６）。近接用表示の詳細について後述する。
Returning to FIG. 4, when the sound volume recorded in the
例えば、テレビジョン放送表示装置３００の近くに置かれた情報処理装置１００をユーザが手に取って移動した場合、動き検出部１０６により動きが検出されかつ音声入力部１０１に入力された音声の音量が小さくなるため、位置関係検出部１０８ａは、情報処理装置１００とテレビジョン放送表示装置３００とが離れていることを検出する。この場合、ユーザと情報処理装置１００とが近接状態にあると考えられるため、表示制御部１０８は、画面表示部１０５に表示された情報を近接用表示に変更する。
For example, when the user picks up and moves the
なお、位置関係検出部１０８ａは、動き検出部１０６により動きが検出されずかつ音声入力部１０１に入力された音声の音量が小さくなった場合、情報処理装置１００とテレビジョン放送表示装置３００との位置関係が変化しておらず、テレビジョン放送表示装置３００から発せられた音声の音量のみが変化したものと判断する。この場合、表示制御部１０８は、画面表示部１０５に表示された情報の表示態様の変更は行わない。
Note that the positional relationship detection unit 108a determines whether the
一方、位置関係検出部１０８ａは、音声記録部１０２に記録された音声の音量が閾値ｓより大きい場合、当該音声記録部１０２に記録された音声の音量が大きくなったと判断して（ステップＳ４５：Ｎｏ）、情報処理装置１００がテレビジョン放送表示装置３００に近づいたことを検出する。そして、表示制御部１０８は、情報処理装置１００がテレビジョン放送表示装置３００に近づいたことが検出されると（言い換えると、情報処理装置１００がユーザから離れて、情報処理装置１００とユーザとが遠隔状態になったことが検出されると）、画面表示部１０５に表示された情報を遠隔用表示に変更する（ステップＳ４７）。遠隔用表示の詳細について後述する。情報処理装置１００は、所定時間Ｔ２分の動きの検出結果が動き記録部１０７に記録される度に、ステップＳ４４〜ステップＳ４７に示す処理を繰り返す。
On the other hand, when the sound volume recorded in the
例えば、テレビジョン放送表示装置３００から離れた位置に置かれた情報処理装置１００をユーザが手に取ってテレビジョン放送表示装置３００に近づいた場合、動き検出部１０６により動きが検出されかつ音声入力部１０１に入力された音声の音量が大きくなるため、位置関係検出部１０８ａは、情報処理装置１００とテレビジョン放送表示装置３００とが近づいていることを検出する。この場合、ユーザが情報処理装置１００をテレビジョン放送表示装置３００の近くにおいてセカンドモニタとして使用することが考えられるため、表示制御部１０８は、画面表示部１０５に表示された情報を遠隔用表示に変更する。
For example, when the user picks up the
なお、位置関係検出部１０８ａは、動き検出部１０６により動きが検出されずかつ音声入力部１０１に入力された音声の音量が大きくなった場合、情報処理装置１００とテレビジョン放送表示装置３００との位置関係が変化しておらず、テレビジョン放送表示装置３００から発せられた音声の音量のみが変化したものと判断する。この場合、表示制御部１０８は、画面表示部１０５に表示された情報の表示態様の変更は行わない。
Note that the positional relationship detection unit 108a detects that the movement between the
次に、図５および図６を用いて、遠隔用表示および近接用表示について説明する。図５は、第１の実施形態にかかる情報処理装置とテレビジョン放送表示装置との位置関係を説明するための図である。図６は、第１の実施形態にかかる情報処理装置に表示される情報の表示態様を説明するための図である。 Next, the remote display and the proximity display will be described with reference to FIGS. 5 and 6. FIG. 5 is a diagram for explaining the positional relationship between the information processing apparatus and the television broadcast display apparatus according to the first embodiment. FIG. 6 is a diagram for explaining a display mode of information displayed on the information processing apparatus according to the first embodiment.
表示制御部１０８は、図５（ａ）に示すように、位置関係検出部１０８ａにより情報処理装置１００がテレビジョン放送表示装置３００から離れたことが検出され、情報処理装置１００とユーザとが近接状態になると、画面表示部１０５に表示される情報を近接用表示に切り替える。本実施形態では、表示制御部１０８は、情報処理装置１００とユーザとが近接状態になると、画面表示部１０５に表示される情報の表示サイズを小さくするとともに当該情報の表示内容を近接用表示に変更する。
As shown in FIG. 5A, the display control unit 108 detects that the
より具体的には、表示制御部１０８は、情報処理装置１００とユーザとが近接状態になると、図６（ａ）に示すように、画面表示部１０５に表示される情報（例えば、番組関連情報など）が含む文字情報６０１および画像６０２を小さい表示サイズ（情報処理装置１００を手元に置くユーザが見易い表示サイズ）で表示するとともに、画面表示部１０５に表示する表示対象の情報すべてを表示する近接用表示に変更する。また、表示制御部１０８は、情報処理装置１００とユーザとが近接状態になると、図６（ａ）に示すように、ユーザが情報処理装置１００の画面表示部１０５の表示画面に積層配置されたタッチパネル（図示しない）を利用して、情報処理装置１００を操作することが考えられるため、情報処理装置１００を操作するためのＧＵＩ６０３を表示して、その表示内容を変更しても良い。
More specifically, the display control unit 108 displays information (for example, program-related information) displayed on the
表示制御部１０８は、図５（ｂ）に示すように、位置関係検出部１０８ａにより情報処理装置１００がテレビジョン放送表示装置３００に近づいたことが検出され、情報処理装置１００とユーザとが遠隔状態になると、画面表示部１０５に表示される情報を遠隔用表示に切り替える。本実施形態では、表示制御部１０８は、情報処理装置１００とユーザとが遠隔状態になると、情報処理装置１００はテレビジョン放送表示装置３００のセカンドモニタとして利用されることが考えられるため、画面表示部１０５に表示された情報の表示サイズを大きくして遠隔用表示に変更する。
As shown in FIG. 5B, the display control unit 108 detects that the
より具体的には、表示制御部１０８は、情報処理装置１００とユーザとが遠隔状態になると、図６（ｂ）に示すように、画面表示部１０５に表示される情報（例えば、番組関連情報など）が含む文字情報６０１および画像６０２を大きい表示サイズ（情報処理装置１００から離れたユーザが視認可能な表示サイズ）で表示する遠隔用表示に変更する。また、表示制御部１０８は、情報処理装置１００とユーザとが遠隔状態になった場合、画面表示部１０５に表示される情報のうち、離れた位置からでも視認し易い情報（例えば、画像６０２など）の数を、文字情報６０１よりも増やしても良い。さらに、表示制御部１０８は、情報処理装置１００とユーザとが遠隔状態となっている状態において文字情報６０１を表示する場合、画面表示部１０５に表示される情報に含まれる全ての文字情報６０１を一画面で表示するのではなく、文字情報６０１の一部を文頭から切り替えながら大きい表示サイズで表示しても良い。
More specifically, the display control unit 108 displays information (for example, program related information) displayed on the
このように、第１の実施形態の情報処理装置１００によれば、テレビジョン放送表示装置３００などの外部機器から発せされる音声を入力可能な音声入力部１０１と、自装置の動きを検出する動き検出部１０６と、情報を表示する画面表示部１０５と、動き検出部１０６により動きが検出されかつ音声入力部１０１に入力された音声の音量が変化した場合に、自装置と外部機器との位置関係を検出し、この検出した位置関係に応じて情報の表示態様を変更する表示制御部１０８と、を備えることにより、情報処理装置１００とテレビジョン放送表示装置３００等の外部機器との位置関係に応じて画面表示部１０５に表示された情報の表示態様が自動的に変更されるので、情報処理装置１００の利便性を向上させることができる。
As described above, according to the
（第２の実施形態）
本実施形態は、遠隔用表示に変更された状態で情報処理装置１００の動きが検出された場合、音量に関係なく近接用表示に変更するとともに、近接用表示に変更した後、情報処理装置１００の動きが検出されずに予め設定された時間経過しかつ入力された音声の音量が大きい場合、遠隔用表示に変更する例である。以下の説明では、第１の実施形態と異なる箇所について説明する。
(Second Embodiment)
In the present embodiment, when the movement of the
図７は、第２の実施形態にかかる情報処理装置において画面表示部に表示された各種情報の表示態様を変更する処理の流れを示すフローチャートである。本実施形態では、表示制御部１０８は、動き記録部１０７に最後に記録された所定時間Ｔ２内の自装置の動きが検出された場合、ユーザが情報処理装置１００を手に取ったものと判断して、音量に関係なく（音量の変化に関わらず）、画面表示部１０５に表示された情報を近接用表示に変更する。
FIG. 7 is a flowchart illustrating a flow of processing for changing the display mode of various information displayed on the screen display unit in the information processing apparatus according to the second embodiment. In the present embodiment, the display control unit 108 determines that the user has picked up the
そして、位置関係検出部１０８ａは、画面表示部１０５に表示された情報が近接用表示に変更された後、近接用表示に変更されてから経過時間を計測する経過時間カウンタ（図示しない）を初期化して（経過時間カウンタにより計測された時間を「０」にして）、近接用表示に変更されてからの経過時間の計測を開始する（ステップＳ７１）。
Then, after the information displayed on the
その後、位置関係検出部１０８ａは、動き記録部１０７に最後に記録された所定時間Ｔ２内に動きが検出されているか否かを判断する（ステップＳ７２）。動き記録部１０７に動きが記録されていると判断された場合（ステップＳ７２：Ｙｅｓ）、表示制御部１０８は、情報処理装置１００が未だユーザの手元にあり、情報処理装置１００とユーザとが近接状態にあると判断して、画面表示部１０５に表示された情報を近接用表示に維持する。
Thereafter, the positional relationship detection unit 108a determines whether or not a motion is detected within a predetermined time T2 last recorded in the motion recording unit 107 (step S72). When it is determined that a motion is recorded in the motion recording unit 107 (step S72: Yes), the display control unit 108 is in the proximity of the
また、位置関係検出部１０８ａは、動き記録部１０７に動きが記録されていないと判断した場合（ステップＳ７２：Ｎｏ）、画面表示部１０５に表示したＧＵＩ６０３などを介してユーザが情報処理装置１００を操作しているか否かを判断する（ステップＳ７３）。ユーザが情報処理装置１００を操作していると判断された場合（ステップＳ７３：Ｙｅｓ）、表示制御部１０８は、情報処理装置１００が未だユーザの手元にあり、情報処理装置１００とユーザとが近接状態にあると判断して、画面表示部１０５に表示された情報を近接用表示に維持する。
Further, when the positional relationship detection unit 108a determines that no motion is recorded in the motion recording unit 107 (No in step S72), the user uses the
また、位置関係検出部１０８ａは、ユーザが情報処理装置１００を操作していないと判断した場合（ステップＳ７３：Ｎｏ）、近接用表示に変更した後、情報処理装置１００の動きが検出されずに予め設定された時間Ｔ３経過したか否かを判断する（ステップＳ７４）。本実施形態では、位置関係検出部１０８ａは、図示しない経過時間カウンタにより計測された経過時間が予め設定された時間Ｔ３に達しているか否かを判断する。近接用表示に変更した後、予め設定された時間Ｔ３経過していない場合（ステップＳ７４：Ｎｏ）、すなわち、計測された経過時間が予め設定された時間Ｔ３に達していない場合、ステップＳ７１に戻る。なお、予め設定された時間Ｔ３には、例えば３０〜６０秒がデフォルト値として設定されており、情報処理装置１００のユーザが任意に設定可能である。
Further, when the positional relationship detection unit 108a determines that the user is not operating the information processing apparatus 100 (step S73: No), the movement of the
また、本実施形態では、動き記録部１０７に動きが記録されておらずかつユーザが情報処理装置１００を操作していないと判断された場合に、情報処理装置１００の動きが検出されていないと判断して、近接用表示に変更してから予め設定された時間Ｔ３経過したか否かを判断しているが、これに限定するものではない。例えば、位置関係検出部１０８ａは、動き記録部１０７に動きが記録されていなかった場合に、情報処理装置１００の動きが検出されていないと判断して、近接用表示に変更してから予め設定された時間Ｔ３経過したか否かを判断しても良い。または、位置関係検出部１０８ａは、ユーザが情報処理装置１００を操作していないと判断された場合に、情報処理装置１００の動きが検出されていないと判断して、近接用表示に変更してから予め設定された時間Ｔ３経過したか否かを判断しても良い。
In the present embodiment, if it is determined that no movement is recorded in the movement recording unit 107 and the user is not operating the
そして、図示しない経過時間カウンタは、近接用表示に変更した後、情報処理装置１００の動きが検出されずに予め設定された時間Ｔ３経過した場合、経過時間の計測を終了する（ステップＳ７５）。次に、位置関係検出部１０８ａは、音声記録部１０２に最後に記録された所定時間Ｔ１内の音声の音量が閾値ｓより小さいか否かを判断する（ステップＳ７６）。
Then, the elapsed time counter (not shown) ends the measurement of the elapsed time when the preset time T3 has elapsed without detecting the movement of the
位置関係検出部１０８ａは、音声記録部１０２に記録された音声の音量が閾値ｓより小さい場合、当該音声記録部１０２に記録された音声の音量が小さいと判断して（ステップＳ７６：Ｙｅｓ）、情報処理装置１００がテレビジョン放送表示装置３００から離れたことを検出する。そして、表示制御部１０８は、情報処理装置１００がテレビジョン放送表示装置３００から離れたことが検出されると（言い換えると、ユーザが情報処理装置１００を手に取ったままテレビジョン放送表示装置３００から離れて、情報処理装置１００とユーザとの近接状態が維持されていることが検出されると）、画面表示部１０５に表示された情報を近接用表示に維持する（ステップＳ７７）。
When the sound volume recorded in the
例えば、表示制御部１０８は、テレビジョン放送表示装置３００の近くに置かれていた情報処理装置１００がユーザの手に取られて情報処理装置１００の動きが検出されると、画面表示部１０５に表示された情報を遠隔用表示から近接用表示に変更する。その後、ユーザが情報処理装置１００を持ったまま移動して、情報処理装置１００をテレビジョン放送表示装置３００から離れた位置に置いた場合（すなわち、情報処理装置１００の動きが検出されなくなりかつ音声記録部１０２に記録された音声の音量が小さくなった場合）、情報処理装置１００がテレビジョン放送表示装置３００のセカンドモニタとして使用されていないことは明らかであり、画面表示部１０５に表示された情報は近接用表示のままにした方が良い。したがって、表示制御部１０８は、情報処理装置１００の次回の使用に備えて、画面表示部１０５に表示された情報を近接用表示に維持する。これにより、情報処理装置１００を次回使用する際、画面表示部１０５に表示された情報を近接用表示に切り替える操作を行うことなく、直ちに情報処理装置１００の使用を開始できる。
For example, when the
一方、位置関係検出部１０８ａは、音声記録部１０２に記録された音声の音量が閾値ｓより大きい場合、当該音声記録部１０２に記録された音声の音量が大きくなったと判断して（ステップＳ７６：Ｎｏ）、情報処理装置１００がテレビジョン放送表示装置３００に近づいたままであることを検出する。そして、表示制御部１０８は、情報処理装置１００がテレビジョン放送表示装置３００に近づいたままであることが検出されると（言い換えると、情報処理装置１００とユーザとが遠隔状態になったことが検出されると）、画面表示部１０５に表示された情報を遠隔用表示に変更する（ステップＳ７８）。
On the other hand, when the sound volume recorded in the
例えば、表示制御部１０８は、テレビジョン放送表示装置３００の近くに置かれていた情報処理装置１００がユーザの手に取られて情報処理装置１００の動きが検出されると、画面表示部１０５に表示された情報を遠隔用表示から近接用表示に変更する。その後、ユーザが情報処理装置１００を再びテレビジョン放送表示装置３００の近くに置いた場合（すなわち、情報処理装置１００の動きが検出されなくなりかつ音声記録部１０２に記録された音声の音量が大きい場合）、情報処理装置１００が再びテレビジョン放送表示装置３００のセカンドモニタとして使用されていることが明らかであり、画面表示部１０５に表示された情報は遠隔用表示に変更した方が良い。したがって、表示制御部１０８は、情報処理装置１００をセカンドモニタとして機能させるために、画面表示部１０５に表示された情報を遠隔用表示に戻す。これにより、テレビジョン放送表示装置３００の近くに置かれていた情報処理装置１００が手に取られて近接用表示に変更された後、再びテレビジョン放送表示装置３００の近くに情報処理装置１００が置かれてセカンドモニタとして使用される場合に、近接用表示に変更されたままとなることを防止できる。
For example, when the
本実施形態では、表示制御部１０８は、遠隔用表示に変更された状態で情報処理装置１００の動きが検出された場合、近接用表示に変更しているが、これに限定するものではない。例えば、表示制御部１０８は、遠隔用表示に変更された情報処理装置１００の動きが検出された後、情報処理装置１００の動きが検出されずに予め設定された時間Ｔ３経過しかつ入力された音量が大きい場合、近接用表示に変更することなく、遠隔用表示を維持しても良い。これにより、例えば、情報処理装置１００がテレビジョン放送表示装置３００の近くに置かれて遠隔用表示に変更されている状態において、ユーザが情報処理装置１００を手に取った後、直ぐにテレビジョン放送表示装置３００の近くに置いた場合には、画面表示部１０５に表示された情報が近接用表示に変更されないので、情報処理装置１００の位置をテレビジョン放送表示装置３００の近くに移動させた場合に、遠隔用表示に維持することができる。
In the present embodiment, when the movement of the
このように、第２の実施形態の情報処理装置１００によれば、遠隔用表示に変更されている状態で情報処理装置１００の動きが検出された場合、近接用表示に変更するとともに、近接用表示に変更した後、情報処理装置１００の動きが検出されずに予め設定された時間Ｔ３経過しかつ入力された音声の音量が大きい場合、遠隔用表示に変更することにより、テレビジョン放送表示装置３００の近くに置かれていた情報処理装置３００が手に取られて近接用表示に変更された後、再びテレビジョン放送表示装置３００の近くに情報処理装置１００が置かれてセカンドモニタとして使用される場合に、近接用表示に変更されたままとなることを防止できる。
As described above, according to the
以上説明したとおり、第１から第２の実施形態によれば、情報処理装置１００の利便性を向上させることができる。
As described above, according to the first and second embodiments, the convenience of the
本実施形態の情報処理装置１００は、ＣＰＵ（Central Processing Unit）などの制御装置と、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）などの記憶装置と、ＨＤＤ(Hard Disk Drive)、ＣＤドライブ装置などの外部記憶装置と、ディスプレイ装置などの表示装置（画面表示部１０５）と、タッチパネルなどの入力装置を備えている。
An
本実施形態の情報処理装置１００で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
A program executed by the
また、本実施形態の情報処理装置１００で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報処理装置１００で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
Further, the program executed by the
また、本実施形態のプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。 Further, the program of this embodiment may be configured to be provided by being incorporated in advance in a ROM or the like.
本実施形態の情報処理装置１００で実行されるプログラムは、上述した各部（音声送信部１０３、番組関連情報受信部１０４、動き検出部１０６、表示制御部１０８、位置関係検出部１０８ａ）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記記憶媒体からプログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、音声送信部１０３、番組関連情報受信部１０４、動き検出部１０６、表示制御部１０８、位置関係検出部１０８ａが主記憶装置上に生成されるようになっている。
A program executed by the
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.
１００・・・情報処理装置、１０１・・・音声入力部、１０２・・・音声記録部、１０３・・・音声送信部、１０４・・・番組関連情報受信部、１０５・・・画面表示部、１０６・・・動き検出部、１０７・・・動き記録部、１０８・・・表示制御部、１０８ａ・・・位置関係検出部、２００・・・サーバ、３００・・・テレビジョン放送表示装置。
DESCRIPTION OF
Claims (7)
自装置の動きを検出する動き検出部と、
情報を表示する表示部と、
前記動き検出部により動きが検出されかつ前記入力部に入力された音声の音量が変化した場合に、前記自装置と前記外部機器との位置関係を検出し、この検出した前記位置関係に応じて前記情報の表示態様を変更する表示制御部と、
を備えた携帯端末装置。 An input unit capable of inputting sound emitted from an external device;
A motion detector for detecting the motion of the device itself;
A display for displaying information;
When the motion is detected by the motion detector and the volume of the sound input to the input unit is changed, the positional relationship between the device and the external device is detected, and the detected positional relationship is detected. A display control unit for changing a display mode of the information;
A mobile terminal device.
表示制御部が、前記動き検出部により動きが検出されかつ前記入力部に入力された音声の音量が変化した場合に、前記自装置と前記外部機器との位置関係を検出し、この検出した前記位置関係に応じて前記情報の表示態様を変更する過程、
を含む表示制御方法。 A display control method executed by a mobile terminal device including an input unit capable of inputting a sound emitted from an external device, a motion detection unit that detects a motion of the own device, and a display unit that displays information. ,
The display control unit detects a positional relationship between the own device and the external device when a motion is detected by the motion detection unit and a volume of the sound input to the input unit changes, and the detected Changing the display mode of the information according to the positional relationship;
A display control method including:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012288107A JP2014130494A (en) | 2012-12-28 | 2012-12-28 | Mobile terminal device and display control method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012288107A JP2014130494A (en) | 2012-12-28 | 2012-12-28 | Mobile terminal device and display control method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014130494A true JP2014130494A (en) | 2014-07-10 |
Family
ID=51408827
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012288107A Pending JP2014130494A (en) | 2012-12-28 | 2012-12-28 | Mobile terminal device and display control method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2014130494A (en) |
-
2012
- 2012-12-28 JP JP2012288107A patent/JP2014130494A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10075578B2 (en) | System and method of providing voice-message call service | |
| US9786326B2 (en) | Method and device of playing multimedia and medium | |
| US20200050346A1 (en) | Continuation of playback of media content by different output devices | |
| CN108235086B (en) | Video playing control method and device and corresponding terminal | |
| KR102438199B1 (en) | Display device and method for changing settings of display device | |
| WO2016066092A1 (en) | Multimedia playing controlling method and device, and storage medium | |
| KR101975431B1 (en) | Content item display system, method and apparatus | |
| JP6285615B2 (en) | Remote assistance method, client, program, and recording medium | |
| RU2656693C2 (en) | Event prompting method and device | |
| JP6298925B2 (en) | State switching method, apparatus, program, and recording medium | |
| US9807308B2 (en) | Personal camera companion for real-time streaming | |
| CN104469437A (en) | Advertisement pushing method and device | |
| CN107636541B (en) | Method on computing device, system for alarm and machine readable medium | |
| TW201346700A (en) | Information processing device, information processing method, and program | |
| EP3796317A1 (en) | Video processing method, video playing method, devices and storage medium | |
| CN104391711B (en) | A kind of method and device that screen protection is set | |
| JP2017517828A (en) | Audio information identification method and apparatus | |
| US20200125374A1 (en) | Method and device for starting application program | |
| JP2017505086A (en) | Method, apparatus, program and recording medium for prompting call request | |
| CN106201310A (en) | The display packing of notification message, device and terminal | |
| JP2017505081A (en) | Method and apparatus for prompting device connection | |
| CN107885418A (en) | Terminal, multi-screen display method and device | |
| US20120287283A1 (en) | Electronic device with voice prompt function and voice prompt method | |
| CN104837020B (en) | The method and apparatus for playing video | |
| CN104539497A (en) | Network connecting method and device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20151102 |