JP5430381B2 - Display device operation system using portable terminal - Google Patents

Display device operation system using portable terminal Download PDF

Info

Publication number
JP5430381B2
JP5430381B2 JP2009284390A JP2009284390A JP5430381B2 JP 5430381 B2 JP5430381 B2 JP 5430381B2 JP 2009284390 A JP2009284390 A JP 2009284390A JP 2009284390 A JP2009284390 A JP 2009284390A JP 5430381 B2 JP5430381 B2 JP 5430381B2
Authority
JP
Japan
Prior art keywords
image
display device
portable terminal
display
operation content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009284390A
Other languages
Japanese (ja)
Other versions
JP2011130025A (en
Inventor
稔 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to JP2009284390A priority Critical patent/JP5430381B2/en
Publication of JP2011130025A publication Critical patent/JP2011130025A/en
Application granted granted Critical
Publication of JP5430381B2 publication Critical patent/JP5430381B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Description

本発明は、テレビ等の表示機器を携帯端末により操作するための表示機器操作システムに関するものである。   The present invention relates to a display device operation system for operating a display device such as a television with a mobile terminal.

従来、液晶テレビに表示される映像の表示をユーザが操作するためには、専用のリモコンを用いて操作している。そして、近年、1つのリモコンに種々の機能を持たせることによりユーザの使い勝手を良くすることが考えられている。   Conventionally, in order for a user to operate display of a video displayed on a liquid crystal television, operation is performed using a dedicated remote controller. In recent years, it has been considered to improve user convenience by providing various functions to one remote controller.

しかしながら、ボタン数が増加すると、現在の表示を操作するためのボタン(電源ボタン、チャンネルボタン、音量ボタンの他、録画ボタン、巻戻しボタン、早送りボタン、一時停止ボタン、再生ボタン等)を瞬時に見つけ出すことが難しくなり、またその見つけ出す作業が煩雑になり、逆にユーザの使い勝手を阻害する結果となっている。この問題は、特許文献1に示すような、液晶テレビに接続されたDVDレコーダ等の周辺機器も共通のリモコンで操作可能に構成されたものにおいて一層顕著になる。   However, as the number of buttons increases, the buttons for operating the current display (power button, channel button, volume button, recording button, rewind button, fast forward button, pause button, play button, etc.) are instantly displayed. It becomes difficult to find out, and the work of finding out becomes complicated, and conversely, the user's convenience is hindered. This problem becomes even more prominent when peripheral devices such as a DVD recorder connected to a liquid crystal television are configured to be operable with a common remote controller as shown in Patent Document 1.

また、1つのリモコンにおいてボタン数が増加すると、それにともない、ボタンのサイズも小さくなる傾向がある。そうするとユーザにとって操作しにくくなるという問題もある。   As the number of buttons in one remote controller increases, the button size tends to decrease accordingly. If it does so, there also exists a problem that it becomes difficult for a user to operate.

なお、近年では、例えば特許文献2や特許文献3に示すように、現実環境にコンピュータを用いて情報を付加提示する技術(拡張現実(AR)技術)を用いて、通常の可視光による画像表示を妨げることなく、不可視光による画像表示を行うことによって別の情報表示を可能にするものが考えられている。具体的にこれらは、プロジェクタからスクリーン上に投影することによって、可視光による画像表示を行うと共に不可視光により画像表示を行い、目視により可視光による画像を認識するとともに、携帯端末により不可視光による画像を認識するものである。   In recent years, as shown in, for example, Patent Document 2 and Patent Document 3, image display using normal visible light is performed using a technology (augmented reality (AR) technology) that additionally displays information in a real environment using a computer. It is considered that another information can be displayed by displaying an image with invisible light without disturbing the above. Specifically, these images are projected from a projector onto a screen to display an image with visible light, display an image with invisible light, recognize an image with visible light by visual observation, and display an image with invisible light by a portable terminal. Is to recognize.

特開2009−225396号公報JP 2009-225396 A 特開2005−62748号公報JP 2005-62748 A 特開2005−17985号公報JP 2005-17985 A

そこで本発明は、上記問題点を一挙に解決すべくなされたものであり、AR技術を用いた従来にはない全く新しい表示機器の操作システムを提供するものであり、可視光による画像表示を妨げずに、当該可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることをその主たる所期課題とするものである。   Therefore, the present invention has been made to solve the above problems all at once, and provides an entirely new display device operation system using AR technology, which hinders image display by visible light. In addition, a button for operating the visible light image display can be presented to the user via the portable terminal, and the visible light image display can be operated using the portable terminal. This is the main desired issue.

すなわち本発明に係る携帯端末を用いた表示機器操作システムは、可視光による第1画像及び不可視光による第2画像を表示する表示機器と、前記第2の画像を撮像するカメラ及び画面を有する携帯端末とを備え、記第2画像が、前記表示機器による前記第1画像の表示を操作するための操作内容を特定する識別子を示すものであり、前記携帯端末が、前記第2画像を撮像し、その第2画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて操作すると前記表示機器に操作指令信号を送信するものであり、前記表示機器が、前記第1画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第2画像を表示するものであることを特徴とする。 That is, a display device operation system using a portable terminal according to the present invention includes a display device that displays a first image by visible light and a second image by invisible light, a mobile device that has a camera and a screen for capturing the second image. And the second image indicates an identifier for specifying an operation content for operating display of the first image by the display device, and the portable terminal captures the second image. , Starting a predetermined application based on the identifier indicated by the second image and displaying the operation content on the screen, and transmitting an operation command signal to the display device when the user operates based on the operation content der is, the display device, the first to determine the operation content according to the type of image, der which displays the second image showing an identifier for identifying the operation content It is characterized in.

このようなものであれば、可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることができる。これにより、操作可能なボタンの識別を極めて簡単に行うことができ、可視光による画像表示の操作性を向上させることができる。また、操作内容を特定する識別子を示す第2画像を不可視光により表示しているので、可視光による画像表示を妨げることもない。   If it is such, not only the button for operating the image display by visible light can be presented to the user via the portable terminal, but also the image display by visible light can be operated by using the portable terminal. can do. As a result, the operable buttons can be identified very easily, and the operability of image display using visible light can be improved. In addition, since the second image indicating the identifier for specifying the operation content is displayed with invisible light, image display with visible light is not hindered.

種々の第1画像に合わせて自動的に特有の操作内容を表示できるようにするためには、前記表示機器が、前記第1画像の種類に応じて操作内容を判断し、当該操作内容を特定する識別子を示す第2画像を表示するものであることが望ましい。その他、現在表示されている第1画像の種類をユーザが入力することによって、前記表示機器が、当該画像に合わせた操作内容を特定する識別子を示す第2画像を表示するようにしても良い。   In order to automatically display the specific operation content according to the various first images, the display device determines the operation content according to the type of the first image and specifies the operation content. It is desirable that the second image indicating the identifier to be displayed be displayed. In addition, when the user inputs the type of the first image that is currently displayed, the display device may display a second image that indicates an identifier that identifies the operation content that matches the image.

従来の液晶テレビにおけるリモコン信号受信部を兼用可能とするためには、前記操作指令信号が赤外線信号であることが望ましい。   In order to make it possible to also use a remote control signal receiving unit in a conventional liquid crystal television, it is desirable that the operation command signal is an infrared signal.

また、本発明に係る表示機器操作方法は、可視光による第1画像及び不可視光による第2画像を表示する表示機器と、前記第2の画像を撮像するカメラ及び画面を有する携帯端末とを用いた表示機器操作方法であって、前記第2画像が、前記表示機器による前記第1画像の表示を操作するための操作内容を特定する識別子を示すものであり、前記携帯端末により前記第2画像を撮像し、その第2画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて前記携帯端末を操作すると、前記携帯端末が前記表示機器に操作指令信号を送信し、前記表示機器が、前記第1画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第2画像を表示することを特徴とする。 The display device operating method according to the present invention uses a display device that displays a first image by visible light and a second image by invisible light, and a mobile terminal that has a camera and a screen for capturing the second image. In the display device operation method, the second image indicates an identifier for specifying an operation content for operating display of the first image by the display device, and the second image is displayed by the portable terminal. When the user operates the portable terminal based on the operation content, the predetermined application is activated based on the identifier indicated by the second image and the operation content is displayed on the screen. said There which transmits an operation command signal to the display device, the display device determines the operation content according to the type of the first image indicates an identifier for identifying the operation content And displaying the two images.

このように構成した本発明によれば、可視光による画像表示を妨げずに、当該可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることができる。   According to the present invention configured as described above, a button for operating the visible light image display can be presented to the user via the portable terminal without disturbing the visible light image display. An image display using visible light can be operated using a portable terminal.

本発明の表示機器操作システムの一実施形態を示す模式図である。It is a schematic diagram which shows one Embodiment of the display apparatus operation system of this invention. 同実施形態の液晶テレビのバックライトの構成を示す図である。It is a figure which shows the structure of the backlight of the liquid crystal television of the embodiment. 変形例に係る液晶テレビのバックライトを示す図である。It is a figure which shows the backlight of the liquid crystal television which concerns on a modification. 変形例に係る液晶テレビの模式的断面図を示す図である。It is a figure which shows typical sectional drawing of the liquid crystal television which concerns on a modification. 同実施形態の携帯端末の機器構成図である。It is a device block diagram of the portable terminal of the embodiment. 同実施形態の携帯端末の機能構成図である。It is a functional block diagram of the portable terminal of the embodiment. 同実施形態の携帯端末画面の表示内容を示す一例である。It is an example which shows the display content of the portable terminal screen of the embodiment. 同実施形態の携帯端末画面の表示内容を示す一例である。It is an example which shows the display content of the portable terminal screen of the embodiment. 変形実施形態に係る携帯端末画面の表示内容を示す図である。It is a figure which shows the display content of the portable terminal screen which concerns on deformation | transformation embodiment.

以下に本発明の一実施形態について図面を参照して説明する。   An embodiment of the present invention will be described below with reference to the drawings.

本実施形態に係る表示機器操作システム100は、可視光による第1画像M1及び不可視光による第2画像M2を表示可能な表示機器2と、前記第2画像M2を撮像可能なカメラ31及び画面32を有する携帯端末3とを具備している。   The display device operation system 100 according to the present embodiment includes a display device 2 that can display a first image M1 using visible light and a second image M2 using invisible light, a camera 31 that can capture the second image M2, and a screen 32. And a mobile terminal 3 having

表示機器2は、テレビ放送信号を選択的に受信するチューナと、当該テレビ放送信号が示す映像出力を行う液晶パネルを有する液晶パネルと、当該液晶パネルに光を照射するバックライトと、これら各部を制御等する制御部とを備える液晶テレビである。なお、表示機器2は液晶テレビに限られず、その他のディスプレイ装置を用いて構成しても良い。   The display device 2 includes a tuner that selectively receives a television broadcast signal, a liquid crystal panel that has a liquid crystal panel that outputs video indicated by the television broadcast signal, a backlight that irradiates light to the liquid crystal panel, and each of these units. It is a liquid crystal television provided with the control part which controls. The display device 2 is not limited to the liquid crystal television, and may be configured using other display devices.

そして、液晶テレビ2は、可視光による第1画像M1及び不可視光による第2画像M2を表示可能に構成されている。不可視光とは、不可視である波長帯域の光であり、本実施形態では赤外線である。   The liquid crystal television 2 is configured to be able to display the first image M1 using visible light and the second image M2 using invisible light. Invisible light is light in a wavelength band that is invisible, and is infrared in this embodiment.

また、液晶テレビ2の制御部は、現在表示している第1画像M1の種類に応じて表示の操作内容を判断して、当該操作内容を特定する識別子を示す第2画像M2を画面上に表示させる。本実施形態の第2画像M2は、二次元バーコードである。なお、識別子を示す第2画像M2は、後述するアプリケーションデータと対応付けられて予め制御部内に入力されている。   Further, the control unit of the liquid crystal television 2 determines the display operation content according to the type of the first image M1 currently displayed, and displays a second image M2 indicating an identifier for specifying the operation content on the screen. Display. The second image M2 of the present embodiment is a two-dimensional barcode. The second image M2 indicating the identifier is input in advance in the control unit in association with application data to be described later.

なお、バックライトが直下型方式のものであれば、図2に示すように、赤色LED(R)、緑色LED(G)及び青色LED(B)の他、赤外線LED(Ir)を液晶パネルの裏面に均一に配置して構成される。また、バックライトがエッジライト方式のものであれば、図3に示すように、赤色LED(R)、緑色LED(G)及び青色LED(B)の他、赤外線LED(Ir)を線上に均一に配置し、それらLEDからの光を導光板により面状の光に変換して液晶パネルに照射する。また、このとき、図4に示すように、液晶パネルの前面に設けられるカラーフィルタには、赤色フィルタ部、緑色フィルタ部、青色フィルタ部の他、赤外線フィルタ部を均一に配置している。   If the backlight is of a direct type, as shown in FIG. 2, an infrared LED (Ir) in addition to a red LED (R), a green LED (G), and a blue LED (B) is connected to the liquid crystal panel. Consists of a uniform arrangement on the back. If the backlight is of an edge light type, as shown in FIG. 3, the infrared LED (Ir) is uniformly distributed on the line in addition to the red LED (R), the green LED (G), and the blue LED (B). The light from these LEDs is converted into planar light by the light guide plate and irradiated onto the liquid crystal panel. At this time, as shown in FIG. 4, the color filter provided on the front surface of the liquid crystal panel has an infrared filter portion uniformly arranged in addition to the red filter portion, the green filter portion, and the blue filter portion.

携帯端末3は、図にその機器構成の一例を示すように、少なくとも、指などの接触による操作が可能なタッチパネル式の画面32と、不可視光(赤外線)による第2画像M2を撮像可能な例えばCCD又はCMOS等の撮像素子を有するカメラ31と、赤外線送信を行う信号送信部33とを備えるものである。なお、このカメラ31は、通常使用時において可視光による画像M1を撮像可能とし、表示機器2の操作開始時において不可視光による画像M2のみを撮像可能とするように切り替え可能に構成している。また、切り替えることなく、両方の画像を取得できるように構成しても良い。 As shown in FIG. 6 as an example of the device configuration, the mobile terminal 3 can capture at least a touch panel screen 32 that can be operated by contact with a finger or the like, and a second image M2 using invisible light (infrared rays). For example, it includes a camera 31 having an image sensor such as a CCD or CMOS, and a signal transmission unit 33 that performs infrared transmission. The camera 31 is configured to be switchable so that an image M1 by visible light can be captured during normal use and only an image M2 by invisible light can be captured at the start of operation of the display device 2. Moreover, you may comprise so that both images can be acquired, without switching.

そして、携帯端末3は、メモリに格納されたプログラムによりCPU及びその他の周辺機器が協働することによって、アプリケーション格納部3a、アプリケーション取得部3b、アプリケーション起動部3c等の機能を発揮する制御部34を備えている。   Then, the portable terminal 3 is configured such that the CPU and other peripheral devices cooperate with each other according to the program stored in the memory, and thereby the control unit 34 that exhibits the functions of the application storage unit 3a, the application acquisition unit 3b, the application activation unit 3c, and the like. It has.

アプリケーション格納部3aは、液晶テレビ2に表示される第1画像M1の表示を携帯端末3により操作可能にするためのアプリケーションデータを格納するものである。   The application storage unit 3 a stores application data for enabling the display of the first image M1 displayed on the liquid crystal television 2 to be operated by the mobile terminal 3.

具体的なアプリケーションとしては、液晶テレビ2がテレビ放送信号を受信して、当該テレビ放送を表示している場合には、図に示すように、当該テレビ放送の表示を操作するためのボタン機能(電源ボタンP11、チャンネル切替ボタンP12、音量調節ボタンP13等)を携帯端末3に付加するものである。 Specific applications, the liquid crystal television 2 receives a television broadcast signal, when viewing the television broadcast, as shown in FIG. 7, the button functions for manipulating the display of the television broadcast (Power button P11, channel switching button P12, volume control button P13, etc.) are added to the portable terminal 3.

また、液晶テレビ2がDVDレコーダ等の映像再生装置(不図示)に接続され、当該映像再生装置から録画した番組等の映像データを取得して再生している場合には、図に示すように、当該映像の表示を操作するためのボタン機能(電源ボタンP21、巻戻しボタンP22、早送りボタンP23、一時停止ボタンP24、停止ボタンP25、再生ボタンP26等)を携帯端末3に付加するものである。これらのアプリケーションデータは予めアプリケーション格納部3aに格納されていている。なお、後述するアプリケーション取得部3bが解析した識別子に基づいてインターネットを介してアプリケーションデータを取得できるようにしても良い。 Further, the liquid crystal television 2 is connected to a video reproducing apparatus such as a DVD recorder (not shown), when it acquires the video data of a program or the like recorded from the video reproducing apparatus is reproduced, as shown in FIG. 8 In addition, a button function (power button P21, rewind button P22, fast forward button P23, pause button P24, stop button P25, play button P26, etc.) for operating the display of the video is added to the portable terminal 3. is there. These application data are stored in advance in the application storage unit 3a. In addition, you may enable it to acquire application data via the internet based on the identifier which the application acquisition part 3b mentioned later analyzed.

アプリケーション取得部3bは、前記カメラ31により得られた画像(第2画像M2)を示す画像データを取得して、当該第2画像M2を解析(デコード)して識別子を認識するものである。そして、アプリケーション取得部3bは、解析した結果得られた識別子に結び付けられたアプリケーションデータをアプリケーション格納部3aから取得して、アプリケーション起動部3cに出力する。   The application acquisition unit 3b acquires image data indicating an image (second image M2) obtained by the camera 31, analyzes (decodes) the second image M2, and recognizes an identifier. And the application acquisition part 3b acquires the application data linked | related with the identifier obtained as a result of the analysis from the application storage part 3a, and outputs it to the application starting part 3c.

アプリケーション起動部3cは、アプリケーション取得部3bにより得られたアプリケーションデータを起動して、タッチパネル式の画面32に、第1画像M1の画像表示を操作するための操作ボタンを表示する。前述のとおり、液晶テレビ2がテレビ放送を表示している場合には、図に示すように、当該テレビ放送の表示を操作するために必要なボタン(電源ボタンP11、チャンネル切替ボタンP12、音量調節ボタンP13等)のみをタッチパネル式画面32に表示する。そして、アプリケーション起動部3cは、ユーザが当該タッチパネル画面32に表示されたボタンを押下することによって生じる操作信号を取得して、信号送信部33に出力する。 The application activation unit 3c activates the application data obtained by the application acquisition unit 3b, and displays an operation button for operating the image display of the first image M1 on the touch panel screen 32. As described above, when the liquid crystal television 2 displays a television broadcast, as shown in FIG. 7 , the buttons (power button P11, channel switching button P12, volume necessary for operating the television broadcast display) Only the adjustment button P13 or the like) is displayed on the touch panel screen 32. Then, the application activation unit 3 c acquires an operation signal generated when the user presses a button displayed on the touch panel screen 32 and outputs the operation signal to the signal transmission unit 33.

そして、操作信号を受信した信号送信部33は、当該操作信号に対応する液晶テレビ2の操作指令信号を赤外線送信する。この操作指令信号は、液晶テレビ2の信号受信部により受信される。その後、操作指令信号を受信した液晶テレビ2は、当該操作指令信号に基づいて画面表示等を制御する。   And the signal transmission part 33 which received the operation signal transmits the operation command signal of the liquid crystal television 2 corresponding to the said operation signal by infrared rays. This operation command signal is received by the signal receiver of the liquid crystal television 2. Thereafter, the liquid crystal television 2 that has received the operation command signal controls screen display and the like based on the operation command signal.

<本実施形態の効果>
このように構成した本実施形態に係る表示機器操作システム100によれば、可視光による画像表示を操作するために必要なボタンのみを携帯端末3を介してユーザに提示することができるだけでなく、その携帯端末3を用いて可視光による画像表示M1を操作可能にすることができる。これにより、操作可能なボタンの識別を極めて簡単に行うことができ、可視光による画像表示の操作性を向上させることができる。また、操作内容を特定する識別子を示す第2画像M2を不可視光により表示しているので、可視光による画像表示を妨げることもない。
<Effect of this embodiment>
According to the display device operation system 100 according to the present embodiment configured as described above, not only can the buttons necessary for operating the image display by visible light be presented to the user via the portable terminal 3, The portable terminal 3 can be used to operate the image display M1 using visible light. As a result, the operable buttons can be identified very easily, and the operability of image display using visible light can be improved. In addition, since the second image M2 indicating the identifier for specifying the operation content is displayed with invisible light, image display with visible light is not hindered.

<その他の変形実施形態>
なお、本発明は前記実施形態に限られるものではない。
<Other modified embodiments>
The present invention is not limited to the above embodiment.

例えば、前記実施形態において第2画像に対応付けられた所定のアプリケーションを起動して携帯端末画面に操作ボタンを表示する期間は、携帯端末のカメラが第2画像を撮像している最中のみとしても良い。また、携帯端末のカメラにより第2画像を撮像してから、ユーザが所定のアプリケーションを終了するための終了ボタンを押下するまでの間であっても良い。また、携帯端末の姿勢をセンサにより認識して所定のアプリケーションの終了を判断するようにしても良い。このとき、例えば携帯端末のカメラが液晶テレビの画面を向いていない姿勢(具体的には携帯端末が水平姿勢である等)となった場合に所定のアプリケーションを終了することが考えられる。   For example, in the embodiment, the period during which the predetermined application associated with the second image is activated and the operation button is displayed on the mobile terminal screen is only during the time when the camera of the mobile terminal is capturing the second image. Also good. Further, it may be from when the second image is captured by the camera of the portable terminal until the user presses an end button for ending the predetermined application. Further, the end of a predetermined application may be determined by recognizing the attitude of the mobile terminal by a sensor. At this time, for example, it is conceivable that the predetermined application is ended when the camera of the mobile terminal is in an attitude not facing the screen of the liquid crystal television (specifically, the mobile terminal is in a horizontal attitude or the like).

また、前記実施形態では、表示機器の操作機能を携帯端末に持たせる態様について説明したが、その他、可視光である第1画像と当該第1画像に関連付けられた不可視光により第2画像を表示して、当該第2画像を携帯端末を介して視認可能に構成しても良い。例えば図9(A)に示すように、液晶テレビがデジタル放送を受信している場合には、受信中の番組に関する情報(EPG情報)を携帯端末に表示するように構成しても良い。このとき、裏番組のEGP情報又は現在録画予約中の番組に関する情報を表示しても良い。   In the embodiment, the mode in which the portable terminal has the operation function of the display device has been described. In addition, the first image that is visible light and the invisible light associated with the first image are displayed. And you may comprise the said 2nd image so that visual recognition is possible via a portable terminal. For example, as shown in FIG. 9A, when the liquid crystal television receives a digital broadcast, information (EPG information) related to the program being received may be displayed on the portable terminal. At this time, EGP information of the back program or information regarding the program currently reserved for recording may be displayed.

さらに、第1画像として表示されている番組又はCMに関する付加情報がWebに存在する場合には、当該WebのURLを第2画像として表示するようにしても良い。このとき、第2画像としてURLを撮像した携帯端末は、図9(B)に示すように、当該URLを携帯端末画面上に表示すると共に、当該URLを選択(タッチパネル式の場合には接触)した場合には、そのURLのWebページを表示する。   Furthermore, when additional information regarding the program or CM displayed as the first image exists on the Web, the URL of the Web may be displayed as the second image. At this time, as shown in FIG. 9B, the mobile terminal that has captured the URL as the second image displays the URL on the mobile terminal screen and selects the URL (contact in the case of the touch panel type). If so, the Web page of the URL is displayed.

その上、情報番組や通信販売等の番組であれば、図9(C)に示すように、紹介した商品の情報やその注文のための電話番号を携帯端末に表示するように構成しても良い。   In addition, as shown in FIG. 9C, if the program is an information program or a mail order program, the introduced product information and the telephone number for ordering may be displayed on the portable terminal. good.

さらにその上、図9(D)に示すように、スクリプト言語等によって記述された携帯端末のバグ修正パッチやゲーム等のアプリケーションを携帯端末上で実行できるように構成しても良い。   In addition, as shown in FIG. 9D, a portable terminal bug correction patch or a game application described in a script language or the like may be executed on the portable terminal.

加えて前記不可視光としては、赤外線の他、電波、紫外線、エックス線又はガンマ線を用いても良い。   In addition, as the invisible light, radio waves, ultraviolet rays, X-rays or gamma rays may be used in addition to infrared rays.

その他、本発明は前記実施形態に限られず、その趣旨を逸脱しない範囲で種々の変形が可能であるのは言うまでもない。   In addition, it goes without saying that the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the spirit of the present invention.

100・・・表示機器操作システム
2 ・・・表示機器(液晶テレビ)
M1 ・・・第1画像
M2 ・・・第2画像
3 ・・・携帯端末
31 ・・・カメラ
32 ・・・画面
100: Display device operation system 2: Display device (liquid crystal television)
M1 ... 1st image M2 ... 2nd image 3 ... Mobile terminal 31 ... Camera 32 ... Screen

Claims (4)

可視光による第1画像及び不可視光による第2画像を表示する表示機器と、
前記第2の画像を撮像するカメラ及び画面を有する携帯端末とを備え、
記第2画像が、前記表示機器による前記第1画像の表示を操作するための操作内容を特定する識別子を示すものであり、
前記携帯端末が、前記第2画像を撮像し、その第2画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて操作すると前記表示機器に操作指令信号を送信するものであり、
前記表示機器が、前記第1画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第2画像を表示するものである、携帯端末を用いた表示機器操作システム。
A display device for displaying a first image by visible light and a second image by invisible light;
A camera that captures the second image and a mobile terminal having a screen;
The second image indicates an identifier for specifying the operation content for operating the display of the first image by the display device,
The portable terminal captures the second image, activates a predetermined application based on an identifier indicated by the second image, displays the operation content on the screen, and a user operates based on the operation content Then all SANYO which transmits an operation command signal to the display device,
A display device operation system using a portable terminal , wherein the display device determines the operation content according to the type of the first image and displays the second image indicating an identifier for specifying the operation content. .
前記操作指令信号が赤外線信号である請求項1記載の携帯端末を用いた表示機器操作システム。   The display device operation system using a mobile terminal according to claim 1, wherein the operation command signal is an infrared signal. 前記携帯端末の画面がタッチパネル式のものである請求項1又は2記載の携帯端末を用いた表示機器操作システム。   The display device operation system using a portable terminal according to claim 1 or 2, wherein the screen of the portable terminal is of a touch panel type. 可視光による第1画像及び不可視光による第2画像を表示する表示機器と、前記第2の画像を撮像するカメラ及び画面を有する携帯端末とを用いた表示機器操作方法であって、
前記第2画像が、前記表示機器による前記第1画像の表示を操作するための操作内容を特定する識別子を示すものであり、
前記携帯端末により前記第2画像を撮像し、その第2画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて前記携帯端末を操作すると、前記携帯端末が前記表示機器に操作指令信号を送信し、
前記表示機器が、前記第1画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第2画像を表示する表示機器操作方法。
A display device operation method using a display device that displays a first image by visible light and a second image by invisible light, and a mobile terminal that has a camera and a screen for capturing the second image,
The second image indicates an identifier for specifying an operation content for operating display of the first image by the display device;
The second image is picked up by the portable terminal, a predetermined application is activated based on an identifier indicated by the second image, and the operation content is displayed on the screen, and the user performs the portable operation based on the operation content. When operating the terminal, the mobile terminal transmits an operation command signal to the display device ,
A display device operation method in which the display device determines the operation content according to the type of the first image, and displays the second image indicating an identifier for specifying the operation content .
JP2009284390A 2009-12-15 2009-12-15 Display device operation system using portable terminal Expired - Fee Related JP5430381B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009284390A JP5430381B2 (en) 2009-12-15 2009-12-15 Display device operation system using portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009284390A JP5430381B2 (en) 2009-12-15 2009-12-15 Display device operation system using portable terminal

Publications (2)

Publication Number Publication Date
JP2011130025A JP2011130025A (en) 2011-06-30
JP5430381B2 true JP5430381B2 (en) 2014-02-26

Family

ID=44292166

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009284390A Expired - Fee Related JP5430381B2 (en) 2009-12-15 2009-12-15 Display device operation system using portable terminal

Country Status (1)

Country Link
JP (1) JP5430381B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013039473A1 (en) 2011-09-12 2013-03-21 Intel Corporation Methods and apparatus for keyword-based, non-linear navigation of video streams and other content
JP6129136B2 (en) * 2014-10-02 2017-05-17 キヤノン株式会社 Apparatus operating device and apparatus operating method
JP7190541B2 (en) * 2019-11-01 2022-12-15 株式会社ロイヤリティマーケティング Program, code output method, and terminal device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116985A (en) * 1995-10-13 1997-05-02 Sony Corp Remote controller, remote control method and device
JP2000115079A (en) * 1998-10-08 2000-04-21 Matsushita Electric Ind Co Ltd Device and method for infrared data communication
JP4498775B2 (en) * 2003-11-20 2010-07-07 大日本印刷株式会社 Viewing information collection method, data broadcasting program data, information access method
JP3929450B2 (en) * 2004-03-30 2007-06-13 株式会社エム・エム・シー Product sales system, printed product sales product used therefor, and printing method therefor

Also Published As

Publication number Publication date
JP2011130025A (en) 2011-06-30

Similar Documents

Publication Publication Date Title
KR102035134B1 (en) Image display apparatus and method for operating the same
US10007424B2 (en) Mobile client device, operation method, recording medium, and operation system
US8193901B2 (en) Remote controller, remote control system, and method for displaying detailed information
US20100309224A1 (en) Image displaying method, image displaying program, and display
JP2021122134A (en) Imaging apparatus
KR20120051209A (en) Method for providing display image in multimedia device and thereof
US20120212650A1 (en) Photographing apparatus, photographing control method and photographing control program
EP2613556A1 (en) Method and electronic apparatus for controlling an external apparatus or an appratus connected to the external aparatus
KR20130037998A (en) Display apparatus and display method thereof
JP5430381B2 (en) Display device operation system using portable terminal
US9046921B2 (en) Display apparatus and control method thereof
JP5094583B2 (en) Imaging apparatus, data communication system, and data communication method
US20150116343A1 (en) Electronic device and image reproducing characteristics determination method
JP2009118423A (en) Display device, and control method
JP4860707B2 (en) Television recording device, television receiver, and control program
JP2006295652A (en) Display processor and display processing method
JP2010283559A (en) Input switching device and television receiver
JP2005033420A (en) Display control apparatus and television receiver
KR102270105B1 (en) Image providing apparatus, and method for operating the same
KR101920640B1 (en) Video conference apparatus and method for operating the same
KR20110073853A (en) Image display device and method for setting up a picturequality
KR101280510B1 (en) Method for channel switching and Apparatus for performing the method
JP4599210B2 (en) Remote control device with photographing means
JP2016072698A (en) Information processing device, display device, tv set, information processing device control program, and recording medium
KR20110138851A (en) Controlling method a memu list and image displaying device thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121206

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131203

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5430381

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees