JP6938732B2 - Video display device - Google Patents

Video display device Download PDF

Info

Publication number
JP6938732B2
JP6938732B2 JP2020126355A JP2020126355A JP6938732B2 JP 6938732 B2 JP6938732 B2 JP 6938732B2 JP 2020126355 A JP2020126355 A JP 2020126355A JP 2020126355 A JP2020126355 A JP 2020126355A JP 6938732 B2 JP6938732 B2 JP 6938732B2
Authority
JP
Japan
Prior art keywords
remote control
unit
video camera
smartphone
television
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020126355A
Other languages
Japanese (ja)
Other versions
JP2020182241A (en
Inventor
吉澤 和彦
和彦 吉澤
明 石山
明 石山
橋本 康宣
康宣 橋本
清水 宏
宏 清水
光信 渡辺
光信 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2018539459A external-priority patent/JP6741764B2/en
Application filed by Maxell Ltd filed Critical Maxell Ltd
Priority to JP2020126355A priority Critical patent/JP6938732B2/en
Publication of JP2020182241A publication Critical patent/JP2020182241A/en
Priority to JP2021142052A priority patent/JP7119190B2/en
Application granted granted Critical
Publication of JP6938732B2 publication Critical patent/JP6938732B2/en
Priority to JP2022123963A priority patent/JP7350947B2/en
Priority to JP2023148448A priority patent/JP2023160984A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、映像データを保持する外部機器、映像表示装置、および遠隔操作端末間の機器連携技術に関する。 The present invention relates to a device cooperation technique between an external device for holding video data, a video display device, and a remote control terminal.

本技術分野の背景技術として、特許文献1には、課題として「複数のモニタに接続されたSTB(セット・トップ・ボックス)に記憶された映像コンテンツをスマートフォンなどで操作可能な映像送信システムにおける操作性を向上させる制御部、送信装置、及び送信方法を提供する。」と記載されている。 As a background technology in this technical field, Patent Document 1 describes as an issue "operation in a video transmission system in which video contents stored in STBs (set top boxes) connected to a plurality of monitors can be operated by a smartphone or the like. A control unit, a transmission device, and a transmission method for improving the performance are provided. "

この課題の解決手段として、「映像データ制御部(スマートフォン)は、表示装置(ベッドルームTV)に対して特定情報を無線発信する状態にするよう指示する特定情報発信指示を送信可能に構成された特定情報発信指示送信部(近距離無線通信部、Wi−Fi通信部)と、特定情報の電波強度に基づいて最も近くの表示装置を特定可能に構成された表示装置特定部(制御部)と、映像データを無線で送信可能に構成された映像データ送信装置(サーバ)に対して、最も近くの表示装置に映像データを送信するよう指示する映像データ送信指示を送信可能に構成された映像データ送信指示送信部(Wi−Fi通信部)と、を備える。(要約抜粋)」と記載されている。 As a means for solving this problem, "the video data control unit (smartphone) is configured to be able to transmit a specific information transmission instruction instructing the display device (bedroom TV) to wirelessly transmit specific information. A specific information transmission instruction transmission unit (short-range wireless communication unit, Wi-Fi communication unit) and a display device identification unit (control unit) configured to be able to identify the nearest display device based on the radio field strength of the specific information. , Video data configured to enable transmission of video data transmission instructions to instruct the video data transmission device (server) configured to wirelessly transmit video data to transmit video data to the nearest display device. A transmission instruction transmission unit (Wi-Fi communication unit) is provided. (Abstract excerpt) ”is described.

特開2016−25599号公報Japanese Unexamined Patent Publication No. 2016-255999

しかしながら、上記文献に記載の技術においては、映像データ制御部(スマホ)を所有するユーザが、主体的に、表示装置(テレビ)および映像データ送信装置(サーバ)に対して指示をすることにより、映像データ制御部(スマホ)と表示装置(テレビ)と映像データ送信装置(サーバ)との間の連携を確立する必要があり、使い勝手が悪かった。また、上記映像データ送信装置(サーバ)に代替する機器として、ビデオカメラやビデオレコーダ等の外部機器が考えられるが、上記表示装置(テレビ)と接続される外部機器が変更された際の連携動作についても考慮されていない。 However, in the technique described in the above document, the user who owns the video data control unit (smartphone) proactively gives an instruction to the display device (television) and the video data transmission device (server). It was necessary to establish the cooperation between the video data control unit (smartphone), the display device (television), and the video data transmission device (server), which was not easy to use. Further, as an alternative device to the video data transmission device (server), an external device such as a video camera or a video recorder can be considered, but the cooperative operation when the external device connected to the display device (television) is changed. Is not taken into consideration.

本発明は、上記事情に鑑みてなされたもので、多種多様な外部機器が映像表示装置に接続される可能性のある環境において、少ない負担で外部機器、映像表示装置および遠隔操作端末間の連携を確立するとともに、ユーザに高い操作性をもたらす機器間の連携動作を実現する技術を提供することを目的とする。 The present invention has been made in view of the above circumstances, and in an environment where a wide variety of external devices may be connected to a video display device, cooperation between the external device, the video display device, and the remote control terminal is performed with a small burden. The purpose is to provide a technology that realizes cooperative operation between devices that brings high operability to the user.

上記課題を解決するため、本発明は、像表示装置であって、外部機器を接続し、当該外部機器と通信するインタフェース部と、前記外部機器を遠隔操作する遠隔操作端末とネットワークを介して通信する通信部と、映像を表示する表示部と、前記インタフェース部と前記通信部と前記表示部とを制御する制御部と、を備え、前記制御部は、前記インタフェース部に接続された前記外部機器から当該外部機器の電源がオンしたことを示す情報を受信すると、前記遠隔操作端末に対して、前記外部機器を遠隔操作するためのアプリケーションソフトウェアを前記遠隔操作端末に起動させるための通信を前記通信部と前記遠隔操作端末との間で行うように制御するとともに、前記遠隔操作端末を、予め作成された前記外部機器と当該外部機器を遠隔操作する可能性のある遠隔操作端末とを対応付けた中継テーブルを参照して決定するように制御することを特徴とする。 To solve the above problems, the present invention provides a Film image display device, connect the external device, and an interface unit for communicating with the external device via the remote control terminal and a network for remotely operating the external device A communication unit for communication, a display unit for displaying an image, and a control unit for controlling the interface unit, the communication unit, and the display unit are provided, and the control unit is connected to the interface unit. Upon receiving information indicating that the power of the external device has been turned on from the device, the remote control terminal is informed of communication for activating the application software for remotely operating the external device on the remote control terminal. The remote control terminal is controlled so as to be performed between the communication unit and the remote control terminal, and the remote control terminal is associated with the external device created in advance and the remote control terminal that may remotely control the external device. It is characterized in that it is controlled so as to be determined by referring to the relay table.

本発明によれば、多種多様な外部機器が映像表示装置に接続される可能性のある環境において、少ない負担で外部機器、映像表示装置および遠隔操作端末間の連携を確立でき、ユーザに高い操作性をもたらす機器間の連携動作を実現できる。上記に記載した以外の目的、構成、効果は以下の説明で明らかにされる。 According to the present invention, in an environment where a wide variety of external devices may be connected to a video display device, cooperation between the external device, the video display device and the remote control terminal can be established with a small burden, and the user can perform high operation. It is possible to realize cooperative operation between devices that bring about sexuality. Purposes, configurations, and effects other than those described above will be clarified in the following description.

第一の実施形態の三者連携システムの構成図である。It is a block diagram of the tripartite cooperation system of 1st Embodiment. (a)は、第一の実施形態のテレビ(TV)のブロック構成図であり、(b)は、第一の実施形態の映像表示装置(TV)の機能ブロック図である。(A) is a block diagram of a television (TV) of the first embodiment, and (b) is a functional block diagram of a video display device (TV) of the first embodiment. (a)は、第一の実施形態のスマートフォンのブロック構成図であり、(b)は、第一の実施形態のスマートフォンの機能ブロック図である。(A) is a block diagram of the smartphone of the first embodiment, and (b) is a functional block diagram of the smartphone of the first embodiment. 第一の実施形態のビデオカメラのブロック構成図である。It is a block block diagram of the video camera of 1st Embodiment. 第一の実施形態の中継テーブルを説明するための説明図である。It is explanatory drawing for demonstrating the relay table of 1st Embodiment. 第一の実施形態の連携テーブルを説明するための説明図である。It is explanatory drawing for demonstrating the cooperation table of 1st Embodiment. 第一の実施形態の三者連携処理のフローチャートである。It is a flowchart of the tripartite cooperation process of 1st Embodiment. 第一の実施形態の中継アプリ取得処理のフローチャートである。It is a flowchart of the relay application acquisition process of 1st Embodiment. 第一の実施形態のリモコン決定処理のフローチャートである。It is a flowchart of the remote control determination process of 1st Embodiment. 第一の実施形態のリモコンアプリ取得処理のフローチャートである。It is a flowchart of the remote control application acquisition process of 1st Embodiment. (a)および(b)は、第一の実施形態のリモコン画像を説明するための説明図である。(A) and (b) are explanatory views for explaining the remote control image of the first embodiment. 第二の実施形態の三者連携システムの構成図である。It is a block diagram of the tripartite cooperation system of 2nd Embodiment. (a)は、第二の実施形態のビデオカメラの機能ブロック図であり、(b)は、第二の実施形態のスマートフォンの機能ブロック図であり、(c)は、第二の実施形態のテレビの機能ブロック図である。(A) is a functional block diagram of the video camera of the second embodiment, (b) is a functional block diagram of the smartphone of the second embodiment, and (c) is a functional block diagram of the second embodiment. It is a functional block diagram of a television. 第二の実施形態の連携テーブルを説明するための説明図である。It is explanatory drawing for demonstrating the cooperation table of the 2nd Embodiment. 第二の実施形態の三者連携処理のフローチャートである。It is a flowchart of the tripartite cooperation process of 2nd Embodiment.

<第一の実施形態>
以下、図面を用いて本発明の第一の実施形態を説明する。なお、以下に説明する実施形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって、適宜修正または変更されるべきものであり、本発明は以下の実施形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成しても良い。
<First Embodiment>
Hereinafter, the first embodiment of the present invention will be described with reference to the drawings. The embodiments described below are examples for realizing the present invention, and should be appropriately modified or changed depending on the configuration of the apparatus to which the present invention is applied and various conditions. It is not limited to the embodiment of. In addition, a part of each embodiment described later may be appropriately combined and configured.

図1は、本実施形態の三者連携システムの構成図である。本図に示すように、本実施形態の三者連携システムは、映像表示装置10と、遠隔操作端末20と、外部機器30と、を備える。映像表示装置10と外部機器30とは、例えば、HDMI(High−Definition Multimedia Interface:高精細度マルチメディアインターフェース)(登録商標)ケーブル等により接続される。また、遠隔操作端末20は、近距離無線通信(例えば、NFC、IR通信、Bluetooth(登録商標)等)又は無線LANにより、映像表示装置10に接続される。また、映像表示装置10は、インターネットを経由して、サーバ90に接続される。 FIG. 1 is a configuration diagram of a tripartite cooperation system of the present embodiment. As shown in this figure, the tripartite cooperation system of the present embodiment includes a video display device 10, a remote control terminal 20, and an external device 30. The video display device 10 and the external device 30 are connected by, for example, an HDMI (High-Definition Multimedia Interface) (registered trademark) cable or the like. Further, the remote control terminal 20 is connected to the video display device 10 by short-range wireless communication (for example, NFC, IR communication, Bluetooth (registered trademark), etc.) or wireless LAN. Further, the video display device 10 is connected to the server 90 via the Internet.

映像表示装置10は、外部から映像データを取得し、自身が備える表示部に表示する。本実施形態の映像表示装置10は、例えば、テレビ、TVチューナを備えないモニタ等である。以後、テレビを例にあげて説明する。テレビ10は、無線LANのアクセスポイント機能をさらに備え、インターネットを経由して、サーバ90に接続される。 The video display device 10 acquires video data from the outside and displays it on a display unit provided by the video display device 10. The video display device 10 of the present embodiment is, for example, a television, a monitor without a TV tuner, or the like. Hereinafter, the explanation will be given by taking a television as an example. The television 10 further includes a wireless LAN access point function, and is connected to the server 90 via the Internet.

遠隔操作端末20は、リモコン機能を実現するアプリケーションソフトウェア(以下「リモコンアプリ」と略記する)を格納する。遠隔操作端末20では、遠隔操作端末20を構成するハードウェアがリモコンアプリを実行することにより、リモコン機能が実現される。本実施形態の遠隔操作端末20は、例えば、スマートフォン、タブレット端末、携帯端末等の通信機能を有する情報処理端末である。以後、スマートフォンを例に挙げて説明する。 The remote control terminal 20 stores application software (hereinafter abbreviated as "remote control application") that realizes a remote control function. In the remote control terminal 20, the remote control function is realized by the hardware constituting the remote control terminal 20 executing the remote control application. The remote control terminal 20 of the present embodiment is, for example, an information processing terminal having a communication function such as a smartphone, a tablet terminal, or a mobile terminal. Hereinafter, a smartphone will be described as an example.

外部機器30は、映像データを保持あるいは中継する。また、テレビ10に接続され、保持あるいは中継する映像データをテレビ10に送信する。本実施形態の外部機器30は、例えば、ビデオカメラ、ビデオレコーダ、セットトップボックス(STB)等である。以後、ビデオカメラを例に挙げて説明する。 The external device 30 holds or relays video data. Further, the video data connected to the television 10 and held or relayed is transmitted to the television 10. The external device 30 of the present embodiment is, for example, a video camera, a video recorder, a set-top box (STB), or the like. Hereinafter, a video camera will be described as an example.

ビデオカメラ30とテレビ10とはHDMIケーブルで接続しているが、両者の接続は、これに限定されない。ビデオカメラ30とテレビ10とを1対1で接続するインタフェースであれば有線、無線を問わず可能である。また、ビデオカメラ30に代えて、テレビ10のUSB端子(図示しない)に接続可能なUSBメモリ装置を用いても良い。この場合、前記USBメモリ装置は、USBケーブルを用いて、或いは直接テレビ10と接続されて良い。また、本実施形態では、スマートフォン20とテレビ10とは、近距離通信でも接続されているが、この機能はなくてもよい。 The video camera 30 and the television 10 are connected by an HDMI cable, but the connection between the two is not limited to this. Any interface that connects the video camera 30 and the television 10 on a one-to-one basis can be wired or wireless. Further, instead of the video camera 30, a USB memory device that can be connected to the USB terminal (not shown) of the television 10 may be used. In this case, the USB memory device may be directly connected to the television 10 using a USB cable. Further, in the present embodiment, the smartphone 20 and the television 10 are connected by short-range communication, but this function may not be provided.

[ハードウェア構成]
以下、本実施形態の三者連携システムにおけるテレビ10、スマートフォン20、ビデオカメラ30それぞれについて、詳細な構成を説明する。
[Hardware configuration]
Hereinafter, detailed configurations of each of the television 10, the smartphone 20, and the video camera 30 in the tripartite cooperation system of the present embodiment will be described.

[テレビ]
図2(a)は、本実施形態のテレビ10のブロック図である。テレビ10は、制御部11と、TVチューナ12と、表示部13と、記憶部14と、HDMI通信インタフェース(I/F)15と、有線LAN通信インタフェース(I/F)16と、無線LAN通信インタフェース(I/F)17と、近距離通信インタフェース(I/F)18と、を備える。
[TV set]
FIG. 2A is a block diagram of the television 10 of the present embodiment. The television 10 includes a control unit 11, a TV tuner 12, a display unit 13, a storage unit 14, an HDMI communication interface (I / F) 15, a wired LAN communication interface (I / F) 16, and wireless LAN communication. It includes an interface (I / F) 17 and a short-range communication interface (I / F) 18.

制御部11は、所定のプログラムに従ってテレビ10全体を制御するマイクロプロセッサユニットである。 The control unit 11 is a microprocessor unit that controls the entire television 10 according to a predetermined program.

記憶部14は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュROM、SSD(Solid State Drive)、HDD(Hard Disc Drive)等のデバイスが用いられる。 The storage unit 14 includes a program area, a temporary storage area, and a storage storage area. The program area is an area in which these programs are expanded when the basic operation program and other application programs are executed. The temporary storage area temporarily holds data as needed when executing various application programs. The storage storage area stores various setting values, various programs, moving image data, etc. even when power is not supplied. For the storage storage area, for example, a device such as a flash ROM, an SSD (Solid State Drive), or an HDD (Hard Disk Drive) is used.

なお、本実施形態では、テレビ10は、アプリケーションサーバから、インターネットを介して、新規アプリケーションプログラムをダウンロードすることにより、機能拡張が可能であるものとする。この際、ダウンロードした新規アプリケーションプログラムは、記憶部14のストレージ記憶領域に記憶される。 In the present embodiment, it is assumed that the function of the television 10 can be expanded by downloading a new application program from the application server via the Internet. At this time, the downloaded new application program is stored in the storage storage area of the storage unit 14.

本実施形態のテレビ10は、ストレージ記憶領域に記憶された新規アプリケーションプログラムを、制御部11がプログラム領域に展開するとともに、展開した新規アプリケーションプログラムを実行することにより、多種の新規機能を実現する。 The television 10 of the present embodiment realizes various new functions by deploying the new application program stored in the storage storage area in the program area by the control unit 11 and executing the expanded new application program.

表示部13は、例えば、液晶パネルまたは有機ELディスプレイ等の表示デバイスである。本実施形態の表示部13は、後述のTVチューナ12が、アンテナで受信した放送電波を受け取り、映像処理した画像等を表示する。 The display unit 13 is, for example, a display device such as a liquid crystal panel or an organic EL display. In the display unit 13 of the present embodiment, the TV tuner 12, which will be described later, receives the broadcast radio wave received by the antenna and displays a video-processed image or the like.

TVチューナ12は、アンテナで受信した放送電波を映像信号として出力する。TVチューナ12は、地上デジタルチューナ、BS/CSデジタルチューナ、OFDM復調部、MPEGデコーダ等を備える。 The TV tuner 12 outputs the broadcast radio wave received by the antenna as a video signal. The TV tuner 12 includes a terrestrial digital tuner, a BS / CS digital tuner, an OFDM demodulator, an MPEG decoder, and the like.

HDMI通信I/F15は、HDMI通信のインタフェース部である。HDMI通信I/F15は、TMDS(Transition Minimized Differential Signaling)処理部、TMDS処理部で受信した暗号化された映像信号を復号する復号化部、CEC(Consumer Electronics Control)制御部等を備え、テレビ10をビデオカメラ30等と1対1に接続する。 The HDMI communication I / F15 is an interface unit for HDMI communication. The HDMI communication I / F15 includes a TMDS (Transition Minimized Differential Signaling) processing unit, a decoding unit that decodes the encrypted video signal received by the TMDS processing unit, a CEC (Consumer Electricals Control) control unit, and the like. Is connected one-to-one with a video camera 30 or the like.

無線LAN通信I/F17は、無線LANのアクセスポイントとして機能し、スマートフォン20等の無線LAN通信I/Fを備える機器とデータの送受信を行う。 The wireless LAN communication I / F 17 functions as a wireless LAN access point and transmits / receives data to / from a device having a wireless LAN communication I / F such as a smartphone 20.

有線LAN通信I/F16は、ホームゲートウエイを通じてインターネットと接続し、サーバ90との間でデータの送受信を行う。 The wired LAN communication I / F 16 connects to the Internet through the home gateway and transmits / receives data to / from the server 90.

近距離通信I/F18はスマートフォン20等との間で近距離無線通信(NFC、IR通信、Bluetooth等)を行う。 The short-range communication I / F18 performs short-range wireless communication (NFC, IR communication, Bluetooth, etc.) with the smartphone 20 or the like.

[スマートフォン]
図3(a)は、本実施形態のスマートフォン20のブロック図である。スマートフォン20は、制御部21と、携帯網通信I/F22と、タッチパネル23と、記憶部24と、無線LAN通信I/F27と、近距離通信I/F28と、を備える。
[smartphone]
FIG. 3A is a block diagram of the smartphone 20 of the present embodiment. The smartphone 20 includes a control unit 21, a mobile network communication I / F 22, a touch panel 23, a storage unit 24, a wireless LAN communication I / F 27, and a short-range communication I / F 28.

制御部21は、所定のプログラムに従ってスマートフォン20全体を制御するマイクロプロセッサユニットである。 The control unit 21 is a microprocessor unit that controls the entire smartphone 20 according to a predetermined program.

記憶部24は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュROM、SSD、HDD等のデバイスが用いられる。 The storage unit 24 includes a program area, a temporary storage area, and a storage storage area. The program area is an area in which these programs are expanded when the basic operation program and other application programs are executed. The temporary storage area temporarily holds data as needed when executing various application programs. The storage storage area stores various setting values, various programs, moving image data, etc. even when power is not supplied. For the storage storage area, for example, a device such as a flash ROM, SSD, or HDD is used.

本実施形態のスマートフォン20は、アプリケーションサーバから、インターネットおよび無線LANアクセスポイントを介して、上記リモコンアプリを含む新規アプリケーションプログラムをダウンロードすることにより、機能拡張可能とする。この際、ダウンロードした新規アプリケーションプログラムは、記憶部24のストレージ記憶領域に記憶される。 The function of the smartphone 20 of the present embodiment can be expanded by downloading a new application program including the remote control application from the application server via the Internet and a wireless LAN access point. At this time, the downloaded new application program is stored in the storage storage area of the storage unit 24.

本実施形態のスマートフォン20は、制御部21が、ストレージ記憶領域に記憶された新規アプリケーションプログラムを、プログラム領域に展開して実行することにより、多種の新規機能を実現可能であるものとする。 In the smartphone 20 of the present embodiment, it is assumed that the control unit 21 can realize various new functions by expanding and executing a new application program stored in the storage storage area in the program area.

タッチパネル23は、例えば液晶パネルまたは有機ELディスプレイ等の表示デバイスと、タッチパネル等の信号入力装置とを組み合わせた装置である。本実施形態のスマートフォン20は、テレビ10およびビデオカメラ30のリモコンとして機能する。タッチパネル23は、この際のリモコン画面等を表示する。また、画面上へのユーザの接触による操作を検出することにより操作入力の検出を行う。 The touch panel 23 is a device that combines a display device such as a liquid crystal panel or an organic EL display and a signal input device such as a touch panel. The smartphone 20 of the present embodiment functions as a remote controller for the television 10 and the video camera 30. The touch panel 23 displays the remote control screen or the like at this time. In addition, the operation input is detected by detecting the operation due to the user's contact on the screen.

携帯網通信I/F22は、移動体電話通信網の基地局と無線通信を行い、電話通信(通話)およびデータの送受信を行う。 The mobile network communication I / F 22 wirelessly communicates with a base station of a mobile telephone communication network, and performs telephone communication (call) and data transmission / reception.

無線LAN通信I/F27は、無線LANアクセスポイントを介してテレビ10、ビデオカメラ30、または、サーバ90とデータの送受信を行う。 The wireless LAN communication I / F 27 transmits / receives data to / from the television 10, the video camera 30, or the server 90 via the wireless LAN access point.

近距離通信I/F28は、テレビ10との間で近距離無線通信(NFC、IR通信、Bluetooth等)を行う。 The short-range communication I / F 28 performs short-range wireless communication (NFC, IR communication, Bluetooth, etc.) with the television 10.

[ビデオカメラ]
図4(a)は、本実施形態のビデオカメラ30のブロック図である。ビデオカメラ30は、制御部31と、映像入力処理部32と、表示部33と、記憶部34と、HDMI通信I/F35と、無線LAN通信I/F37と、近距離通信I/F38と、を備える。
[Video camera]
FIG. 4A is a block diagram of the video camera 30 of the present embodiment. The video camera 30 includes a control unit 31, a video input processing unit 32, a display unit 33, a storage unit 34, an HDMI communication I / F35, a wireless LAN communication I / F37, a short-range communication I / F38, and the like. To be equipped.

制御部31は、所定のプログラムに従ってビデオカメラ30全体を制御するマイクロプロセッサユニットである。 The control unit 31 is a microprocessor unit that controls the entire video camera 30 according to a predetermined program.

記憶部34は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュROM、SSD、HDD等のデバイスが用いられる。 The storage unit 34 includes a program area, a temporary storage area, and a storage storage area. The program area is an area in which these programs are expanded when the basic operation program and other application programs are executed. The temporary storage area temporarily holds data as needed when executing various application programs. The storage storage area stores various setting values, various programs, moving image data, etc. even when power is not supplied. For the storage storage area, for example, a device such as a flash ROM, SSD, or HDD is used.

表示部33は、例えば液晶パネルまたは有機ELディスプレイ等の表示デバイスである。例えば、後述の映像入力処理部32で映像処理した映像データを表示する。 The display unit 33 is a display device such as a liquid crystal panel or an organic EL display. For example, the video data processed by the video input processing unit 32, which will be described later, is displayed.

映像入力処理部32は、撮像光学系と、撮像素子と、映像信号処理系とを備える。撮像光学系は、レンズ、絞り等を備える。映像信号処理系は、入力された映像信号に対し、デジタル信号処理を行う。 The video input processing unit 32 includes an image pickup optical system, an image pickup element, and a video signal processing system. The imaging optical system includes a lens, an aperture, and the like. The video signal processing system performs digital signal processing on the input video signal.

HDMI通信I/F35は、HDMI通信のI/F部である。HDMI通信I/F35は、TMDS処理部、映像信号を暗号化する暗号化部、CEC制御部を備え、テレビ10等と1対1に接続される。 The HDMI communication I / F35 is an I / F part of HDMI communication. The HDMI communication I / F35 includes a TMDS processing unit, an encryption unit that encrypts a video signal, and a CEC control unit, and is connected to a television 10 or the like on a one-to-one basis.

無線LAN通信I/F37は、無線LANアクセスポイントを介してテレビ10またはスマートフォン20とデータの送受信を行う。 The wireless LAN communication I / F 37 transmits / receives data to / from the television 10 or the smartphone 20 via the wireless LAN access point.

近距離通信I/F38は、無接点充電機(例えば、充電ドック)との間で近距離無線通信(NFC、IR通信、Bluetooth等)を行う。 The short-range communication I / F 38 performs short-range wireless communication (NFC, IR communication, Bluetooth, etc.) with a non-contact charger (for example, a charging dock).

[機能構成]
次に、本実施形態のテレビ10,スマートフォン20およびビデオカメラ30の、機能について説明する。
[Functional configuration]
Next, the functions of the television 10, the smartphone 20, and the video camera 30 of the present embodiment will be described.

[テレビ]
本実施形態のテレビ10は、映像データを保持するビデオカメラ30がHDMI通信I/F15を介して接続されたことを検知すると、スマートフォン20にリモコンアプリを起動させ、その後の連携動作を制御する。スマートフォン20がスリープ状態にある場合には、スリープ状態を解除した後に、リモコンアプリを起動させるようにしても良い。なお、スマートフォン20への各種の指示は、無線LAN通信I/F17または近距離通信I/F18を介して行う。特に区別する必要がない場合は、通信I/Fと呼ぶ。
[TV set]
When the television 10 of the present embodiment detects that the video camera 30 holding the video data is connected via the HDMI communication I / F 15, the smartphone 20 activates the remote control application and controls the subsequent cooperative operation. When the smartphone 20 is in the sleep state, the remote control application may be activated after the smartphone 20 is released from the sleep state. Various instructions to the smartphone 20 are given via wireless LAN communication I / F17 or short-range communication I / F18. When it is not necessary to distinguish between them, it is called a communication I / F.

これを実現するため、図2(b)に示すように、本実施形態のテレビ10は、テレビ10、ビデオカメラ30およびスマートフォン20の三者間の連携を確立する第一連携確立部120と、三者間の連携確立後の連携動作を制御する中継部130と、接続検知部140と、を備える。また、第一連携確立部120は、ペアリング部121と、リモコン決定部122と、を備える。 In order to realize this, as shown in FIG. 2B, the television 10 of the present embodiment includes the first cooperation establishment unit 120 that establishes the cooperation between the television 10, the video camera 30, and the smartphone 20. It includes a relay unit 130 that controls the cooperation operation after the cooperation between the three parties is established, and a connection detection unit 140. Further, the first cooperation establishment unit 120 includes a pairing unit 121 and a remote controller determination unit 122.

接続検知部140は、ビデオカメラ30がHDMI通信I/F15を介して接続されたことを検知し、第一連携確立部120に通知する。本実施形態では、ビデオカメラ30からHDMI通信I/F15を介して機器IDが通知される。接続検知部140は、この機器IDを得ることにより、接続を検知する。 The connection detection unit 140 detects that the video camera 30 is connected via the HDMI communication I / F15, and notifies the first cooperation establishment unit 120. In the present embodiment, the device ID is notified from the video camera 30 via the HDMI communication I / F15. The connection detection unit 140 detects the connection by obtaining this device ID.

ペアリング部121は、スマートフォン20等の、三者連携システムでリモコンとなり得る各種の端末(候補スマートフォン)からの要求(ペアリング要求)に応じて候補ビデオカメラを対応づける。対応づける候補ビデオカメラは、その候補スマートフォンで操作可能なビデオカメラであって、接続する可能性のあるビデオカメラである。対応づけた結果は、中継テーブル500として保持する。 The pairing unit 121 associates a candidate video camera with a request (pairing request) from various terminals (candidate smartphones) that can serve as a remote controller in a tripartite cooperation system such as a smartphone 20. The associated candidate video camera is a video camera that can be operated by the candidate smartphone and is a video camera that may be connected. The associated result is held as the relay table 500.

本実施形態では、ペアリング部121は、ビデオカメラ30が接続されたことを接続検知部140から通知されると、そのビデオカメラ30から、機器情報を受け取り、蓄積する。従って、ペアリング部121は、現在接続されているビデオカメラ30および過去に蓄積されたビデオカメラ30の機器情報を蓄積する。 In the present embodiment, when the connection detection unit 140 notifies that the video camera 30 is connected, the pairing unit 121 receives and stores the device information from the video camera 30. Therefore, the pairing unit 121 accumulates the device information of the currently connected video camera 30 and the video camera 30 accumulated in the past.

なお、機器情報は、そのビデオカメラ30を識別する情報(機器ID)と、中継アプリ情報とを含む。中継アプリ情報は、当該ビデオカメラ30を、テレビ10を介してスマートフォン20から操作する際に必要とされるアプリケーションプログラム(中継アプリ)の名称(中継アプリ名)およびスマートフォン20の対応OS情報を含む。 The device information includes information for identifying the video camera 30 (device ID) and relay application information. The relay application information includes the name (relay application name) of the application program (relay application) required when operating the video camera 30 from the smartphone 20 via the television 10 and the corresponding OS information of the smartphone 20.

中継アプリは、テレビ10がスマートフォン20から通信I/Fを介して受信した操作指示を、ビデオカメラ30との通信I/FであるHDMI通信I/F15を介してビデオカメラ30に指示するアプリケーションプログラムである。 The relay application is an application program that instructs the video camera 30 via the HDMI communication I / F 15, which is the communication I / F with the video camera 30, for the operation instruction received by the television 10 from the smartphone 20 via the communication I / F. Is.

また、本実施形態のペアリング部121は、候補スマートフォンから、ペアリング要求を受け取ると、当該候補スマートフォンで操作可能な候補ビデオカメラを対応づけて、中継テーブル500を生成する。候補スマートフォンから送信されるペアリング要求は、当該候補スマートフォンの識別情報(機器ID)と、当該候補スマートフォンのOS情報とを含む。機器IDは、例えば、候補スマートフォンのIPアドレス等であってもよい。また、ペアリング部121は、対応づけた候補ビデオカメラの機器IDを、折り返し、要求元の候補スマートフォンに通知する。 Further, when the pairing unit 121 of the present embodiment receives a pairing request from the candidate smartphone, the pairing unit 121 associates the candidate video cameras that can be operated by the candidate smartphone to generate the relay table 500. The pairing request transmitted from the candidate smartphone includes the identification information (device ID) of the candidate smartphone and the OS information of the candidate smartphone. The device ID may be, for example, the IP address of the candidate smartphone. In addition, the pairing unit 121 returns the device ID of the associated candidate video camera and notifies the requesting candidate smartphone.

ペアリング部121は、例えば、ペアリング要求に含まれるスマートフォンのOS情報と、候補外部機器の対応OS情報とを用い、対応づけの可否を判別する。 The pairing unit 121 uses, for example, the OS information of the smartphone included in the pairing request and the corresponding OS information of the candidate external device to determine whether or not the pairing is possible.

ここで、ペアリング部121が作成する中継テーブル500の例を図5に示す。本図に示すように、本実施形態の中継テーブル500は、候補スマートフォンの機器ID510に対応づけて、操作可能な候補ビデオカメラ520が登録される。そして、候補ビデオカメラ520の情報として、機器ID521と、中継アプリ名522と、その中継アプリがインストールされているか否かを示す情報(インストール)523とが登録される。なお、図5には、インストール523として、中継アプリがインストールされている場合は「1」を、インストールされていない場合は「0」を登録する場合を例示する。 Here, an example of the relay table 500 created by the pairing unit 121 is shown in FIG. As shown in this figure, in the relay table 500 of the present embodiment, an operable candidate video camera 520 is registered in association with the device ID 510 of the candidate smartphone. Then, as the information of the candidate video camera 520, the device ID 521, the relay application name 522, and the information (installation) 523 indicating whether or not the relay application is installed are registered. Note that FIG. 5 illustrates a case where "1" is registered as the installation 523 when the relay application is installed, and "0" is registered when the relay application is not installed.

なお、1つの候補ビデオカメラに複数の候補スマートフォンが対応づけられる場合、それらの間に、予め優先順位を付し、その情報を中継テーブル500に登録してもよい。 When a plurality of candidate smartphones are associated with one candidate video camera, priorities may be given in advance between them and the information may be registered in the relay table 500.

リモコン決定部122は、HDMI通信I/F15を介してビデオカメラ30が接続されると、三者連携システムにおいてリモコンとして用いるスマートフォン20を決定し、決定したスマートフォン20にリモコンアプリを起動させる。スマートフォン20は、ペアリング部121が作成した中継テーブル500を参照し、接続されたビデオカメラ30(候補ビデオカメラ)に対応づけて登録されている候補スマートフォンの中から決定する。 When the video camera 30 is connected via the HDMI communication I / F 15, the remote control determination unit 122 determines the smartphone 20 to be used as the remote controller in the tripartite cooperation system, and activates the remote controller application on the determined smartphone 20. The smartphone 20 refers to the relay table 500 created by the pairing unit 121, and determines from among the candidate smartphones registered in association with the connected video camera 30 (candidate video camera).

例えば、中継テーブル500に、候補スマートフォンの優先順位が付与されている場合、当該優先順位に従って決定する。一方、優先順位が付与されていない場合は、例えば、その時点でテレビ10に最も近い候補スマートフォンを選択する。最も近い候補スマートフォンは、例えば、テレビ10と各候補スマートフォンとの間で近距離無線通信(NFC、IR通信、Bluetooth等)または無線LANによる通信を行い、最も電波強度の大きいものを選択する。 For example, when the relay table 500 is given a priority of candidate smartphones, the priority is determined according to the priority. On the other hand, when the priority is not given, for example, the candidate smartphone closest to the TV 10 at that time is selected. As the closest candidate smartphone, for example, short-range wireless communication (NFC, IR communication, Bluetooth, etc.) or wireless LAN communication is performed between the television 10 and each candidate smartphone, and the one having the highest radio wave strength is selected.

なお、中継テーブル500に登録されている複数の候補スマートフォンから、リモコンとして使用するスマートフォン20を選択する手法は、これに限定されない。例えば、登録されている全ての候補スマートフォンに通知を行い、最も早く承諾の意思を送信してきた候補スマートフォンを選択するよう構成してもよい。 The method of selecting the smartphone 20 to be used as the remote controller from the plurality of candidate smartphones registered in the relay table 500 is not limited to this. For example, it may be configured to notify all registered candidate smartphones and select the candidate smartphone that has sent the intention of consent earliest.

また、ここで選択したスマートフォン20との間の通信が途切れた場合、リモコン決定部122は、再度、上記手法でリモコンとして用いるスマートフォン20を決定する。 Further, when the communication with the smartphone 20 selected here is interrupted, the remote control determination unit 122 again determines the smartphone 20 to be used as the remote controller by the above method.

リモコン決定部122は、ビデオカメラ30を操作するリモコンアプリを起動させるための起動信号を生成し、決定したスマートフォン20に対し、通信I/Fを介して送信する。本実施形態では、起動信号は、テレビ10およびビデオカメラ30それぞれの機器IDを含む。この起動信号を受信したスマートフォン20側では、ビデオカメラ30を操作するリモコンアプリを起動させる。 The remote control determination unit 122 generates an activation signal for activating the remote control application that operates the video camera 30, and transmits the activation signal to the determined smartphone 20 via the communication I / F. In the present embodiment, the activation signal includes the device IDs of the television 10 and the video camera 30 respectively. On the smartphone 20 side that has received this activation signal, the remote control application that operates the video camera 30 is activated.

中継部130は、三者連携確立後、中継アプリに従って、中継処理を行う。具体的には、スマートフォン20がリモコンアプリを介して受け付けた操作指示をスマートフォン20から受信し、ビデオカメラ30に中継する。また、その操作指示に応じてビデオカメラ30から転送されたデータを処理する。 After establishing the three-party cooperation, the relay unit 130 performs relay processing according to the relay application. Specifically, the operation instruction received by the smartphone 20 via the remote control application is received from the smartphone 20 and relayed to the video camera 30. In addition, the data transferred from the video camera 30 is processed according to the operation instruction.

なお、操作指示は、ビデオカメラ30を操作する指示である。本実施形態では、例えば、表示部13にビデオカメラ30の操作画面を表示させる指示、ビデオカメラ30が保持する映像データを表示部13に表示させる指示等が含まれる。 The operation instruction is an instruction to operate the video camera 30. In the present embodiment, for example, an instruction to display the operation screen of the video camera 30 on the display unit 13, an instruction to display the video data held by the video camera 30 on the display unit 13, and the like are included.

なお、テレビ10が実現する各機能は、記憶部14のストレージ領域に格納されるプログラムを、制御部11のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、中継テーブル500は、ストレージ領域に格納される。テレビ10が実現する各機能のうち、全部または一部の機能は、ASIC(Application Specific Integrated Circuit)、FPGA(field−programmable gate array)などのハードウェアによって実現されてもよい。また、テレビ10とビデオカメラ30とがHDMIで接続される場合、テレビ10とビデオカメラ30との間の制御信号のやり取りは、CEC機能により実現されてもよい。 Each function realized by the television 10 is realized by the microprocessor of the control unit 11 developing and executing the program stored in the storage area of the storage unit 14 in the program area. Further, the relay table 500 is stored in the storage area. Of the functions realized by the television 10, all or part of the functions may be realized by hardware such as ASIC (Application Specific Integrated Circuit) and FPGA (field-programmable gate array). Further, when the television 10 and the video camera 30 are connected by HDMI, the exchange of control signals between the television 10 and the video camera 30 may be realized by the CEC function.

[スマートフォン]
スマートフォン20は、テレビ10からの指示に従って、ビデオカメラ30のリモコンとして機能する。これを実現するため、図3(b)に示すように、本実施形態のスマートフォン20は、テレビ10、ビデオカメラ30およびスマートフォン20の三者間の連携を確立する第二連携確立部210と、リモコン処理部220とを備える。また、第二連携確立部210は、連携テーブル作成部211を備える。
[smartphone]
The smartphone 20 functions as a remote controller for the video camera 30 according to an instruction from the television 10. In order to realize this, as shown in FIG. 3B, the smartphone 20 of the present embodiment includes a second cooperation establishment unit 210 that establishes cooperation between the television 10, the video camera 30, and the smartphone 20. It is provided with a remote control processing unit 220. Further, the second cooperation establishment unit 210 includes a cooperation table creation unit 211.

連携テーブル作成部211は、三者間の連携を実現するために、連携テーブル600を作成する。本実施形態では、自身が操作可能なテレビ(候補テレビ)と候補ビデオカメラとの組み合わせ、および、操作に用いるアプリケーション(リモコンアプリ)を対応づけて連携テーブルとして作成する。 The cooperation table creation unit 211 creates the cooperation table 600 in order to realize the cooperation between the three parties. In the present embodiment, a combination of a television (candidate television) that can be operated by itself and a candidate video camera, and an application (remote control application) used for the operation are associated with each other to create a linkage table.

具体的には、テレビ10にペアリング要求を行った結果、テレビ10から通知された候補ビデオカメラの機器IDを、通知元のテレビ10を候補テレビとして、当該候補テレビの機器IDに対応づけて保持する。また、対応づけた候補ビデオカメラの機器IDおよびテレビ10の機器IDに基づき、テレビ10を介して当該候補ビデオカメラを操作するためのリモコンアプリを特定する。 Specifically, as a result of making a pairing request to the TV 10, the device ID of the candidate video camera notified from the TV 10 is associated with the device ID of the candidate TV with the notification source TV 10 as the candidate TV. Hold. Further, based on the device ID of the associated candidate video camera and the device ID of the TV 10, a remote control application for operating the candidate video camera via the TV 10 is specified.

なお、本実施形態では、上述のように、リモコンアプリは、テレビ10を介してビデオカメラ30を操作するリモコンとしてスマートフォン20を機能させる。すなわち、リモコンアプリは、例えば、ビデオカメラ30に保持される映像データを、テレビ10の表示部13に表示させる指示を受け付けるアプリケーションである。このリモコンアプリは、一般に、外部のサーバ90に保持される。本実施形態のスマートフォン20は、インターネットを介してサーバ90にアクセスし、該当するアプリケーションを入手する。 In the present embodiment, as described above, the remote control application causes the smartphone 20 to function as a remote control for operating the video camera 30 via the television 10. That is, the remote control application is, for example, an application that receives an instruction to display the video data held in the video camera 30 on the display unit 13 of the television 10. This remote control application is generally held on an external server 90. The smartphone 20 of the present embodiment accesses the server 90 via the Internet and obtains the corresponding application.

図6に、本実施形態の連携テーブル作成部211が作成する連携テーブル600の例を示す。本図に示すように、本実施形態の連携テーブル600は、候補テレビ毎に、当該候補テレビの機器ID610と、当該候補テレビを介して操作可能なビデオカメラである候補ビデオカメラの機器ID620と、当該候補テレビを介して当該候補ビデオカメラをそれぞれ制御するためのリモコンアプリを特定する情報(リモコンアプリ名)630と、を対応づけて登録する。また、そのリモコンアプリ名630を有するリモコンアプリの、インストールの有無を示す情報(インストール)640も合わせて登録する。なお、図6には、インストール640として、リモコンアプリがインストールされている場合は「1」を、インストールされていない場合は「0」を登録する場合を例示する。 FIG. 6 shows an example of the cooperation table 600 created by the cooperation table creation unit 211 of the present embodiment. As shown in this figure, the cooperation table 600 of the present embodiment includes, for each candidate television, the device ID 610 of the candidate television, the device ID 620 of the candidate video camera which is a video camera that can be operated via the candidate television, and the device ID 620 of the candidate video camera. Information (remote application name) 630 that specifies a remote control application for controlling each of the candidate video cameras via the candidate TV is registered in association with each other. In addition, information (installation) 640 indicating whether or not the remote control application having the remote control application name 630 is installed is also registered. Note that FIG. 6 illustrates a case where "1" is registered as the installation 640 when the remote control application is installed, and "0" is registered when the remote control application is not installed.

リモコン処理部220は、三者連携を実現するための処理を行う。具体的には、リモコンアプリを展開して実行する。 The remote control processing unit 220 performs processing for realizing the tripartite cooperation. Specifically, the remote control application is expanded and executed.

スマートフォン20が実現する各機能は、記憶部24のストレージ領域に格納されるプログラムを、制御部21のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、連携テーブル600は、ストレージ領域に格納される。スマートフォン20が実現する各機能のうち、全部または一部の機能は、ASIC、FPGAなどのハードウェアによって実現されてもよい。 Each function realized by the smartphone 20 is realized by the microprocessor of the control unit 21 developing and executing the program stored in the storage area of the storage unit 24 in the program area. Further, the cooperation table 600 is stored in the storage area. Of the functions realized by the smartphone 20, all or part of the functions may be realized by hardware such as ASIC and FPGA.

[ビデオカメラ]
本実施形態のビデオカメラ30は、HDMI通信I/F35を介して、テレビ10に接続されると、接続相手のテレビ10に、自身を制御するための情報を送信する。上述のように、本機能は、CEC機能により実現されてもよい。
[Video camera]
When the video camera 30 of the present embodiment is connected to the television 10 via the HDMI communication I / F35, the video camera 30 transmits information for controlling itself to the television 10 of the connection partner. As described above, this function may be realized by the CEC function.

[三者連携処理の流れ]
以上の機能を有するテレビ10、スマートフォン20およびビデオカメラ30による、三者連携処理の流れを説明する。図7は、本実施形態の三者連携処理の流れを説明するためのフローチャートである。なお、中継テーブル500および連携テーブル600は、予め作成されているものとする。
[Flow of tripartite cooperation processing]
The flow of the tripartite cooperation processing by the television 10, the smartphone 20, and the video camera 30 having the above functions will be described. FIG. 7 is a flowchart for explaining the flow of the tripartite cooperation process of the present embodiment. It is assumed that the relay table 500 and the cooperation table 600 are created in advance.

また、以下では、ビデオカメラ30の記憶部34に記録された動画像の中から、スマートフォン20への操作により所望の動画像を選択してテレビ10の表示部13に表示する場合を例にあげて説明する。しかしながら、この例に限定されない。動画像を選択して表示する指示以外にも、例えば、ビデオカメラ30が保持する動画像または静止画をテレビ10の記憶部14に記憶させるための指示等でも、この連携処理を同様に適用できる。 Further, in the following, an example will be given in which a desired moving image is selected from the moving images recorded in the storage unit 34 of the video camera 30 by operating the smartphone 20 and displayed on the display unit 13 of the television 10. I will explain. However, it is not limited to this example. In addition to the instruction to select and display the moving image, for example, the instruction for storing the moving image or the still image held by the video camera 30 in the storage unit 14 of the television 10 can be similarly applied to this cooperation process. ..

まず、ビデオカメラ30をテレビ10にHDMIで接続し、或いは、HDMIでテレビ10に接続済みのビデオカメラ30の電源をONにすると(ステップS301)、ビデオカメラ30からテレビ10に、ビデオカメラ30の機器IDを含むトリガが送信される。 First, when the video camera 30 is connected to the TV 10 by HDMI, or when the power of the video camera 30 already connected to the TV 10 by HDMI is turned on (step S301), the video camera 30 is connected to the TV 10 and the video camera 30 is connected. A trigger including the device ID is transmitted.

テレビ10では、接続検知部140が機器IDの通知を受け、リモコン決定部122に送信する。機器IDを受信すると、テレビ10のリモコン決定部122は、中継テーブル500を参照し、中継アプリを取得する中継アプリ取得処理を行い(ステップS101)、中継アプリを取得する。また、リモコンとして用いるスマートフォンを決定するリモコン決定処理も行い(ステップS102)、スマートフォン20を決定する。 In the television 10, the connection detection unit 140 receives the notification of the device ID and transmits it to the remote control determination unit 122. Upon receiving the device ID, the remote control determination unit 122 of the television 10 refers to the relay table 500, performs a relay application acquisition process for acquiring the relay application (step S101), and acquires the relay application. In addition, a remote control determination process for determining a smartphone to be used as a remote controller is also performed (step S102), and the smartphone 20 is determined.

そして、リモコン決定部122は、決定したスマートフォン20に対し、接続指示を通知する(ステップS103)。ここでは、スマートフォン20に、テレビ10の機器ID、ビデオカメラ30の機器IDを通知するとともに、リモコンアプリの起動を促すコマンドを送信する。 Then, the remote control determination unit 122 notifies the determined smartphone 20 of the connection instruction (step S103). Here, the smartphone 20 is notified of the device ID of the television 10 and the device ID of the video camera 30, and a command for prompting the activation of the remote control application is transmitted.

ここで、ステップS101の中継アプリ取得処理の詳細を、図8を用いて説明する。 Here, the details of the relay application acquisition process in step S101 will be described with reference to FIG.

まず、リモコン決定部122は、中継テーブル500を検索し(ステップS411)、受信した機器IDが登録されているか否かを判別する(ステップS412)。ここで、登録されていない場合は、三者連携処理自体を終了する。 First, the remote control determination unit 122 searches the relay table 500 (step S411) and determines whether or not the received device ID is registered (step S412). Here, if it is not registered, the tripartite cooperation process itself is terminated.

一方、登録されている場合は、リモコン決定部122は、当該機器ID521に対応づけて登録されている中継アプリが、インストール済みであるか否かを判別する(ステップS413)。インストール済みである場合、最新版であるか否かを判別する(ステップS414)。最新版であるか否かは、インターネット経由でサーバ90にアクセスし、中継アプリ情報として登録されているバージョン情報と、提供されている最新版の情報とを比較し、判別する。 On the other hand, if it is registered, the remote controller determination unit 122 determines whether or not the relay application registered in association with the device ID 521 has been installed (step S413). If it is already installed, it is determined whether or not it is the latest version (step S414). Whether or not it is the latest version is determined by accessing the server 90 via the Internet and comparing the version information registered as the relay application information with the information of the latest version provided.

最新版の中継アプリがインストールされている場合は、処理を終了する。一方、中継アプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、リモコン決定部122は、インターネット経由でサーバ90にアクセスし、最新版の中継アプリをダウンロードし(ステップS415)、インストールし(ステップS416)、中継アプリ取得処理を終了する。 If the latest version of the relay application is installed, the process ends. On the other hand, if the relay application is not installed, or if it is installed but not the latest version, the remote controller determination unit 122 accesses the server 90 via the Internet and downloads the latest version of the relay application (step S415). , Install (step S416), and end the relay application acquisition process.

なお、ビデオカメラ30が中継アプリを保持し、テレビ10がビデオカメラ30から中継アプリを取得するようにしても良い。また、サーバ90に記憶されている中継アプリとビデオカメラ30に記憶されている中継アプリとのバージョンを比較し、適宜新しいものを取得するようにしても良い。 The video camera 30 may hold the relay application, and the television 10 may acquire the relay application from the video camera 30. Further, the versions of the relay application stored in the server 90 and the relay application stored in the video camera 30 may be compared, and a new one may be acquired as appropriate.

また、上記説明では、中継アプリがインストールされている場合でも、それが最新版であるか否かをインターネット経由でサーバ90に確認し、あるいは、ビデオカメラ30に問い合わせ、常に最新版をインストールするよう構成している。しかしながら、最新版であるか否かの確認は行わなくてもよい。 Also, in the above explanation, even if the relay application is installed, check with the server 90 via the Internet whether it is the latest version, or contact the video camera 30 and always install the latest version. It is configured. However, it is not necessary to confirm whether or not the version is the latest version.

また、ビデオカメラ30に古いバージョンの中継アプリが記憶されている状態で、インターネット経由でサーバ90から最新版の中継アプリをダウンロードした場合、テレビ10は、サーバ90から取得した最新版の中継アプリを以て、ビデオカメラ30に記憶された古いバージョンの中継アプリを更新するようにしても良い。 Further, when the latest version of the relay application is downloaded from the server 90 via the Internet while the old version of the relay application is stored in the video camera 30, the TV 10 uses the latest version of the relay application obtained from the server 90. , The old version of the relay application stored in the video camera 30 may be updated.

次に、ステップS102のリモコン決定処理の詳細を、図9を用いて説明する。 Next, the details of the remote control determination process in step S102 will be described with reference to FIG.

リモコン決定部122は、まず、テレビ10の無線LANの同一サブネットワーク(サブNW)内の、リモコンとなり得る機器を検索し(ステップS421)、抽出する。ここでは、例えば、同一サブNW内の各種の機器のうち、スマートフォンを検索する。 First, the remote control determination unit 122 searches for and extracts a device that can serve as a remote controller in the same sub-network (sub-NW) of the wireless LAN of the television 10 (step S421). Here, for example, a smartphone is searched among various devices in the same sub-NW.

そして、リモコン決定部122は、中継テーブル500を検索し(ステップS422)、ステップS421で抽出したスマートフォンの中に、S101の処理で受信した機器IDを持つビデオカメラ30に対応づけて登録されている候補スマートフォンがあるか否かを判別する(ステップS423)。 Then, the remote control determination unit 122 searches the relay table 500 (step S422), and is registered in the smartphone extracted in step S421 in association with the video camera 30 having the device ID received in the process of S101. It is determined whether or not there is a candidate smartphone (step S423).

登録されていない場合、三者連携処理自体を終了する。なお、終了前に、ユーザにリモコンとして使用可能なスマートフォンの登録がないことを通知するよう構成してもよい。 If it is not registered, the tripartite cooperation process itself is terminated. In addition, before the end, it may be configured to notify the user that there is no registration of a smartphone that can be used as a remote controller.

一方、登録されている場合は、リモコン決定部122は、登録されている候補スマートフォンの台数を判別する(ステップS424)。 On the other hand, if it is registered, the remote control determination unit 122 determines the number of registered candidate smartphones (step S424).

複数台登録されている場合、リモコン決定部122は、その中からリモコンとするスマートフォン20を選択し(ステップS425)、それをリモコンとして用いるスマートフォン20と決定する(ステップS426)。選択は、上述の手法により行う。 When a plurality of smartphones are registered, the remote controller determination unit 122 selects the smartphone 20 to be the remote controller from among them (step S425), and determines the smartphone 20 to be used as the remote controller (step S426). The selection is made by the method described above.

上記ステップS424で、登録されている台数が1台であれば、その候補スマートフォンを、リモコンとして用いるスマートフォン20と決定する(ステップS426)。リモコンとして用いるスマートフォン20が決定すると、リモコン決定部122は、リモコン決定処理を終了する。 If the number of registered smartphones is one in step S424, the candidate smartphone is determined to be the smartphone 20 to be used as a remote controller (step S426). When the smartphone 20 to be used as the remote controller is determined, the remote controller determination unit 122 ends the remote controller determination process.

なお、このリモコン決定処理は、三者連携処理実行中に、何等かの事情でリモコンとして用いるスマートフォン20との接続が途切れた場合も、実行される。 It should be noted that this remote control determination process is also executed even if the connection with the smartphone 20 used as the remote controller is interrupted for some reason during the execution of the tripartite cooperation process.

図7に戻り、接続指示を受けたスマートフォン20のリモコン処理部220は、リモコンアプリ取得処理を行う(ステップS201)。 Returning to FIG. 7, the remote control processing unit 220 of the smartphone 20 that has received the connection instruction performs the remote control application acquisition process (step S201).

リモコンアプリ取得処理の詳細を、図10に従って、説明する。 The details of the remote control application acquisition process will be described with reference to FIG.

リモコン処理部220は、通知されたテレビ10の機器IDおよびビデオカメラ30の機器IDを用い、連携テーブル600を検索し(ステップS431)、両者に対応づけられたリモコンアプリがインストールされているか否かを判別する(ステップS432)。 The remote control processing unit 220 searches the cooperation table 600 using the notified device ID of the TV 10 and the device ID of the video camera 30 (step S431), and whether or not the remote control application associated with both is installed. (Step S432).

リモコンアプリがインストールされている場合、リモコン処理部220は、そのアプリのバージョンが最新版であるか否かを判別する(ステップS433)。最新版であるか否かの判別は、インターネット経由でサーバ90にアクセスし、リモコンアプリ情報として登録されているバージョン情報と、提供されている最新版の情報とを比較し、行う。 When the remote control application is installed, the remote control processing unit 220 determines whether or not the version of the application is the latest version (step S433). Whether or not the version is the latest version is determined by accessing the server 90 via the Internet, comparing the version information registered as the remote control application information with the information of the latest version provided.

リモコンアプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、リモコン処理部220は、サーバ90にアクセスし、最新版のリモコンアプリをダウンロードする(ステップS434)。そして、それをインストールし(ステップS435)、処理を終了する。 If the remote control application is not installed, or if it is installed but not the latest version, the remote control processing unit 220 accesses the server 90 and downloads the latest version of the remote control application (step S434). Then, it is installed (step S435), and the process ends.

なお、上述の中継アプリ同様、最新版であるか否かの判別は、行わなくてもよい。さらに、ここでは、リモコンアプリは、サーバ90からダウンロードするものとして説明したが、テレビ10からダウンロードしてもよい。この場合、各種リモコンアプリをテレビ10の記憶部14のストレージ記憶領域に予め記憶させておく。また、サーバ90に記憶されているリモコンアプリとテレビ10に記憶されているリモコンアプリとのバージョンを比較し、新しい方を取得しても良い。また、インターネット経由でサーバ90からダウンロードしたリモコンアプリをテレビ10のストレージ記憶領域に記憶させても良い。 As with the above-mentioned relay application, it is not necessary to determine whether or not the version is the latest version. Further, although the remote control application has been described here as being downloaded from the server 90, it may be downloaded from the television 10. In this case, various remote control applications are stored in advance in the storage storage area of the storage unit 14 of the television 10. Further, the version of the remote control application stored in the server 90 and the version of the remote control application stored in the TV 10 may be compared and the newer one may be acquired. Further, the remote control application downloaded from the server 90 via the Internet may be stored in the storage storage area of the television 10.

図7に戻り、リモコンアプリ取得処理を終えると、リモコン処理部220は、リモコンアプリを起動し、スマートフォン20のタッチパネル23に、リモコン画像を表示する(ステップS202)。ここで、表示されるリモコン画像は、スクロール可能な態様で表示され、テレビ10またはビデオカメラ30のどちらを操作するか選択可能な操作表示、チャネル操作表示、録画された動画の再生スタート、ストップの等の表示がなされる。 Returning to FIG. 7, when the remote control application acquisition process is completed, the remote control processing unit 220 activates the remote control application and displays the remote control image on the touch panel 23 of the smartphone 20 (step S202). Here, the displayed remote control image is displayed in a scrollable manner, and an operation display for selecting whether to operate the television 10 or the video camera 30, a channel operation display, a start / stop of playback of the recorded video, and so on. Etc. are displayed.

表示されるリモコン画像の一例を、図11(a)および図11(b)に示す。本図に示すように、本実施形態のリモコン画像700は、操作対象機器選択領域710と、リモコン操作受付領域720とを備える。 An example of the displayed remote control image is shown in FIGS. 11 (a) and 11 (b). As shown in this figure, the remote control image 700 of the present embodiment includes an operation target device selection area 710 and a remote control operation reception area 720.

操作対象機器選択領域710は、このリモコン画像700を介して操作する対象の機器の選択を受け付ける。ここでは、テレビ10およびビデオカメラ30のいずれかを受け付ける。例えば、これらの図に示すように、選択を受け付けるためのボタンを備える。また、これらのボタンは、選択された機器が識別可能なように表示される。 The operation target device selection area 710 accepts the selection of the target device to be operated via the remote control image 700. Here, either the television 10 or the video camera 30 is accepted. For example, as shown in these figures, a button for accepting a selection is provided. Also, these buttons are displayed so that the selected device can be identified.

リモコン操作受付領域720には、操作対象機器選択領域710で選択された機器の操作画面が表示される。例えば、テレビ10が選択された場合、チャンネル選択表示等がなされる。一方、ビデオカメラ30が選択された場合、再生する動画の選択、再生スタート、再生ストップ等の指示を受け付ける画面表示がなされる。また、いずれを選択した場合でも、音量調整等は、共通に表示される。 In the remote control operation reception area 720, the operation screen of the device selected in the operation target device selection area 710 is displayed. For example, when the television 10 is selected, a channel selection display or the like is displayed. On the other hand, when the video camera 30 is selected, a screen display for receiving instructions such as selection of a moving image to be played, playback start, playback stop, and the like is performed. In addition, regardless of which one is selected, the volume adjustment and the like are displayed in common.

なお、リモコン操作受付領域720は、スクロールにより、操作画面が変わるよう構成されていてもよい。この場合も、操作対象機器選択領域710に、操作画面で操作する対象の機器が識別可能な態様で表示されてもよい。 The remote control operation reception area 720 may be configured so that the operation screen changes by scrolling. Also in this case, the target device to be operated on the operation screen may be displayed in an identifiable manner in the operation target device selection area 710.

なお、このリモコン画像700はあくまでも1例であり、どのように表示させるかは、各機器が実装している機能により変わる。また、例えば、機器選択の表示を3以上に設定しても良い。また、機器毎のリモコン操作を統合したリモコン画像としてもよい。例えば、ビデオカメラ30の動画を再生すると同時に、その画像をテレビ10の記憶部14に記録するように指示することを可能とする画像などである。 The remote control image 700 is just an example, and how to display it depends on the functions implemented by each device. Further, for example, the display of device selection may be set to 3 or more. Further, a remote control image in which remote control operations for each device are integrated may be used. For example, it is an image that makes it possible to play back a moving image of the video camera 30 and at the same time instruct the storage unit 14 of the television 10 to record the image.

図7に戻り、リモコン画像がタッチパネル23に表示されると、リモコン処理部220は、ビデオカメラ30の動画選択画面の転送指示を行う(ステップS203)。この転送指示は、スマートフォン20から、テレビ10へ送信される。そして、それを受けたテレビ10の中継部130が、当該指示を、中継先のビデオカメラ30に送信する(ステップS104)。 Returning to FIG. 7, when the remote control image is displayed on the touch panel 23, the remote control processing unit 220 gives a transfer instruction on the video selection screen of the video camera 30 (step S203). This transfer instruction is transmitted from the smartphone 20 to the television 10. Then, the relay unit 130 of the television 10 that receives the instruction transmits the instruction to the video camera 30 of the relay destination (step S104).

転送指示を受信したビデオカメラ30では、動画選択画面のデータをテレビ10に転送する(ステップS302)。なお、動画選択画面は、例えば、ビデオカメラ30に記憶されている動画像を選択する画面とする。選択する画面とは、例えば、動画像のサムネイル画像が表示されている画像等である。 The video camera 30 that has received the transfer instruction transfers the data on the moving image selection screen to the television 10 (step S302). The moving image selection screen is, for example, a screen for selecting a moving image stored in the video camera 30. The screen to be selected is, for example, an image in which a thumbnail image of a moving image is displayed.

動画選択画面のデータを受信したテレビ10では、中継部130が、当該データに従って、ビデオカメラ30の動画選択画面を、表示部13に表示する(ステップS105)。そして、中継部130は、転送指示元のスマートフォン20に、画面表示が終了したことを意味する画面表示終了通知を行う(ステップS106)。 In the television 10 that has received the data on the video selection screen, the relay unit 130 displays the video selection screen of the video camera 30 on the display unit 13 according to the data (step S105). Then, the relay unit 130 notifies the smartphone 20 of the transfer instruction source of the screen display end, which means that the screen display has ended (step S106).

画面表示終了通知を受け付けると、スマートフォン20では、リモコン処理部220が、自身をユーザからのリモコン操作の受け付けが可能な状態とする。これにより、ユーザは、テレビ10の表示部13に表示される動画選択画面を見ながらビデオカメラ30への指示を行うことができる。 Upon receiving the screen display end notification, in the smartphone 20, the remote control processing unit 220 sets itself in a state where it can accept the remote control operation from the user. As a result, the user can give an instruction to the video camera 30 while watching the moving image selection screen displayed on the display unit 13 of the television 10.

リモコン処理部220は、ユーザからの操作による指示(操作指示)を受け付けると、当該操作指示をテレビ10に送信する(ステップS204)。ここで受け付ける操作指示は、例えば、選択した動画の再生指示等である。動画の選択は、例えば、テレビ10に動画選択画面として表示される動画像のサムネイル画像から選択する。 When the remote control processing unit 220 receives an operation instruction (operation instruction) from the user, the remote control processing unit 220 transmits the operation instruction to the television 10 (step S204). The operation instruction received here is, for example, a playback instruction of the selected moving image. The moving image is selected from, for example, thumbnail images of moving images displayed as a moving image selection screen on the television 10.

スマートフォン20から操作指示を受信すると、テレビ10では、中継部130が、ビデオカメラ30に当該操作指示を中継する(ステップS107)。 Upon receiving the operation instruction from the smartphone 20, the relay unit 130 relays the operation instruction to the video camera 30 on the television 10 (step S107).

指示を受け取ったビデオカメラ30では、操作指示に従って、データをテレビ10に転送する(ステップS303)。例えば、所定の動画の再生指示を受け取った場合、当該動画像データをテレビ10に転送する。 Upon receiving the instruction, the video camera 30 transfers the data to the television 10 according to the operation instruction (step S303). For example, when a predetermined moving image reproduction instruction is received, the moving image data is transferred to the television 10.

テレビ10の中継部130は、転送されたデータを表示部13に表示する(ステップS108)とともに、中継処理を終了したことを意味する処理終了通知を、スマートフォン20に送信する(ステップS109)。例えば、動画像データを受信した場合、当該動画像の表示を開始する。 The relay unit 130 of the television 10 displays the transferred data on the display unit 13 (step S108), and transmits a processing end notification indicating that the relay processing is completed to the smartphone 20 (step S109). For example, when the moving image data is received, the display of the moving image is started.

処理終了通知を受信したスマートフォン20では、リモコン処理部220が、リモコン画像を更新する(ステップS205)。なお、ステップS103でテレビ10から通知された接続指示を受信したスマートフォン20は、リモコンアプリがインストール済みの場合、リモコンアプリの自動起動を促さず、代わりに、リモコンアプリのアイコンの色を変更することによりテレビ10からの通知があった旨をユーザに知らせるようにしても良い。ユーザは、リモコンアプリの色が変わったことを確認してリモコンアプリを手動で起動するようにしても良い。 In the smartphone 20 that has received the processing end notification, the remote control processing unit 220 updates the remote control image (step S205). If the remote control application is already installed, the smartphone 20 that has received the connection instruction notified from the TV 10 in step S103 does not prompt the automatic activation of the remote control application, but instead changes the color of the icon of the remote control application. The user may be notified that the notification from the television 10 has been received. The user may manually start the remote control application after confirming that the color of the remote control application has changed.

以上説明したように、本実施形態によれば、例えば、ビデオカメラ30をテレビ10に接続することをトリガとして、ビデオカメラ30とテレビ10とスマートフォン20との連携を確立する。そして、スマートフォン20からのリモコン操作により、ビデオカメラ30とテレビ10とを連携制御できる。 As described above, according to the present embodiment, for example, by connecting the video camera 30 to the television 10, the cooperation between the video camera 30, the television 10 and the smartphone 20 is established. Then, the video camera 30 and the television 10 can be linked and controlled by operating the remote controller from the smartphone 20.

このように、本実施形態によれば、特定の外部機器に限らず、多種多様な外部機器(ビデオカメラ)が映像表示装置(テレビ)に接続される可能性がある環境であっても、自動的に装置間の連携を確立することができる。このため、操作性および使い勝手のよい三者連携システムを、ユーザに過度な負担を与えることなく確立できる。 As described above, according to the present embodiment, not only a specific external device but also a wide variety of external devices (video cameras) are automatically connected even in an environment where there is a possibility of being connected to a video display device (television). It is possible to establish cooperation between devices. Therefore, a tripartite cooperation system with good operability and usability can be established without imposing an excessive burden on the user.

<第二の実施形態>
次に、本発明の第二の実施形態を説明する。第一の実施形態では、映像表示装置、外部機器、遠隔操作端末の三者連携処理を、映像表示装置が、中継装置として機能することにより、実現している。本実施形態では、遠隔操作端末が、主導し、連携を実現する。
<Second embodiment>
Next, a second embodiment of the present invention will be described. In the first embodiment, the three-way cooperation processing of the video display device, the external device, and the remote control terminal is realized by the video display device functioning as a relay device. In this embodiment, the remote control terminal takes the lead and realizes cooperation.

すなわち、第一の実施形態では、テレビ10が中心に位置してシステム全体を制御する役割を果している。一方、第二の実施形態では、スマートフォン20がシステム全体を制御する。 That is, in the first embodiment, the television 10 is located at the center and plays a role of controlling the entire system. On the other hand, in the second embodiment, the smartphone 20 controls the entire system.

本実施形態の三者連携システムの構成図を、図12に示す。本図に示すように、本実施形態の三者連携システムは、映像表示装置(テレビ)10と、遠隔操作端末(スマートフォン)20と、外部機器(ビデオカメラ)30と、アクセスポイント40と、を備える。 The configuration diagram of the tripartite cooperation system of this embodiment is shown in FIG. As shown in this figure, the tripartite cooperation system of the present embodiment includes a video display device (television) 10, a remote control terminal (smartphone) 20, an external device (video camera) 30, and an access point 40. Be prepared.

本実施形態のテレビ10、スマートフォン20、およびビデオカメラ30の基本的な構成は、第一の実施形態と同様である。また、アクセスポイント40は、テレビ10、スマートフォン20、ビデオカメラ30等の無線LANクライアント機器間を相互に接続し、また、これらの無線LANクライアントを、他のネットワークに接続する。 The basic configuration of the television 10, the smartphone 20, and the video camera 30 of the present embodiment is the same as that of the first embodiment. Further, the access point 40 connects wireless LAN client devices such as a television 10, a smartphone 20, and a video camera 30 to each other, and connects these wireless LAN clients to another network.

以下、本実施形態について、第一の実施形態と異なる構成に主眼をおいて説明する。以下、第一の実施形態と共通する部分には、特に断らない限り、同一の符号を付し、その詳細な説明は省略する。 Hereinafter, the present embodiment will be described with a focus on a configuration different from that of the first embodiment. Hereinafter, unless otherwise specified, the same parts as those in the first embodiment are designated by the same reference numerals, and detailed description thereof will be omitted.

本実施形態では、テレビ10と、スマートフォン20と、ビデオカメラ30とは、例えば、無線LAN経由で、アクセスポイント40を介して接続される。すなわち、これらは、HDMI接続を行わない。従って、テレビ10およびビデオカメラ30は、HDMI通信I/F15およびHDMI通信I/F35を備えなくてもよい。 In the present embodiment, the television 10, the smartphone 20, and the video camera 30 are connected via, for example, a wireless LAN via an access point 40. That is, they do not make an HDMI connection. Therefore, the television 10 and the video camera 30 do not have to include the HDMI communication I / F15 and the HDMI communication I / F35.

[機能構成]
[ビデオカメラ]
本実施形態のビデオカメラ30は、図13(a)に示すように、アクセスポイント40を介して、無線LANの同一サブネットワーク内の全ての機器に対し、接続要求を送信する接続要求送信部310を備える。本実施形態では、接続要求は、例えば、自身の機器IDを含む。なお、接続要求の送信先の機器は、テレビ10とスマートフォン20とに限定してもよい。接続要求は、無線LAN通信I/F37を介して送信される。
[Functional configuration]
[Video camera]
As shown in FIG. 13A, the video camera 30 of the present embodiment is a connection request transmission unit 310 that transmits a connection request to all devices in the same subnetwork of the wireless LAN via the access point 40. To be equipped. In this embodiment, the connection request includes, for example, its own device ID. The device to which the connection request is transmitted may be limited to the television 10 and the smartphone 20. The connection request is transmitted via the wireless LAN communication I / F37.

ビデオカメラ30が実現する上記機能は、記憶部34のストレージ領域に格納されるプログラムを、制御部31のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。ビデオカメラ30が実現する各機能のうち、全部または一部の機能は、ASIC、FPGAなどのハードウェアによって実現されてもよい。 The above-mentioned function realized by the video camera 30 is realized by the microprocessor of the control unit 31 developing and executing the program stored in the storage area of the storage unit 34 in the program area. Of the functions realized by the video camera 30, all or part of the functions may be realized by hardware such as ASIC and FPGA.

[スマートフォン]
図13(b)に示すように、本実施形態のスマートフォン20は、第二連携確立部210aと、リモコン処理部220aとを備える。
[smartphone]
As shown in FIG. 13B, the smartphone 20 of the present embodiment includes a second cooperation establishment unit 210a and a remote control processing unit 220a.

第二連携確立部210aは、ビデオカメラ30から無線LAN通信I/F27を介して接続要求を受信すると、ビデオカメラ30およびテレビ10それぞれのリモコンアプリを起動する。このため、第二連携確立部210aは、連携テーブル作成部211aと、リモコン決定部212と、表示先決定部213と、を備える。 When the second cooperation establishment unit 210a receives the connection request from the video camera 30 via the wireless LAN communication I / F 27, the second cooperation establishment unit 210a activates the remote control applications for each of the video camera 30 and the television 10. Therefore, the second cooperation establishment unit 210a includes a cooperation table creation unit 211a, a remote control determination unit 212, and a display destination determination unit 213.

連携テーブル作成部211aは、連携させる機器同士のペアリングを行い、連携テーブル800を作成する。ペアリングは、例えば、近距離無線通信等を用いて行う。例えば、近接させた機器同士で相互に指定されたボタン操作を行う等の公知の手段を用いれば良く、特に制限は無い。また、例えば、スマートフォン20が、アクセスポイント40にアクセスし、得られる接続機器のリストから、テレビ10およびビデオカメラ30を選択するよう構成してもよい。これにより、機器の種別、および当該機器を識別する機器IDを得ることができる。機器の種別は、映像表示装置、画像記憶装置、等を特定可能な情報であり、機器IDは、例えば、IPアドレスなどである。 The linkage table creation unit 211a performs pairing between the devices to be linked and creates the linkage table 800. Pairing is performed using, for example, short-range wireless communication or the like. For example, a known means such as performing a button operation designated to each other between adjacent devices may be used, and there is no particular limitation. Further, for example, the smartphone 20 may be configured to access the access point 40 and select the television 10 and the video camera 30 from the list of connected devices obtained. This makes it possible to obtain the type of device and the device ID that identifies the device. The type of device is information that can identify a video display device, an image storage device, and the like, and the device ID is, for example, an IP address.

連携テーブル作成部211aは、ペアリングにより得た、機器のリストに対し、機器ID(IPアドレス)に基づき、サーバ90等にアクセスし、当該機器のリモコンアプリの情報(例えば、リモコンアプリ名)を取得する。得られた情報を対応づけ、図14に示すように、連携テーブル800を作成する。 The cooperation table creation unit 211a accesses the server 90 or the like based on the device ID (IP address) for the list of devices obtained by pairing, and provides the remote control application information (for example, the remote control application name) of the device. get. The obtained information is associated with each other, and the cooperation table 800 is created as shown in FIG.

なお、リモコンアプリの情報を取得する際、スマートフォン20は、連携可能か否かも判別する。例えば、スマートフォン20のOS用のリモコンアプリが用意されていない場合もある。このようなリモコンアプリしか用意されていない機器は、連携不可能と判別し、連携テーブル800に登録しない。 When acquiring the information of the remote control application, the smartphone 20 also determines whether or not the cooperation is possible. For example, a remote control application for the OS of the smartphone 20 may not be prepared. A device for which only such a remote control application is prepared is determined not to be linked and is not registered in the link table 800.

作成される連携テーブル800には、機器ID810と、当該機器の種別を特定する情報(種別)820と、当該機器のリモコンアプリの情報(リモコンアプリ名)830と、リモコンアプリ名830で特定されるリモコンアプリがインストールされているか否かを示す情報(インストール)840とが対応づけて登録される。なお、図14には、インストール840として、リモコンアプリがインストールされている場合は「1」を、インストールされていない場合は「0」を登録する場合を例示する。本実施形態の連携テーブル800は、スマートフォン20の、記憶部24に登録される。 The created linkage table 800 is specified by the device ID 810, the information (type) 820 that specifies the type of the device, the remote control application information (remote control application name) 830 of the device, and the remote control application name 830. Information (installation) 840 indicating whether or not the remote control application is installed is registered in association with it. Note that FIG. 14 illustrates a case where "1" is registered as the installation 840 when the remote control application is installed, and "0" is registered when the remote control application is not installed. The cooperation table 800 of this embodiment is registered in the storage unit 24 of the smartphone 20.

リモコン決定部212は、ビデオカメラ30からの接続要求を受け取ると、同一サブネットワークに接続される全スマートフォン間で、リモコンとするスマートフォン20を決定するリモコン決定処理を行う。 Upon receiving the connection request from the video camera 30, the remote control determination unit 212 performs a remote control determination process for determining the smartphone 20 to be the remote controller among all the smartphones connected to the same subnetwork.

具体的には、接続要求に含まれる機器IDが、自身が保持する連携テーブル800に登録されているか否かを判別し、いなければ、処理を終了する。一方、登録されている場合、自身をリモコンとなり得る候補スマートフォンとする。そして、同一サブネットワーク内に、同様に候補スマートフォンとされた他のスマートフォンがあるか否かを判別する。 Specifically, it is determined whether or not the device ID included in the connection request is registered in the linkage table 800 held by itself, and if not, the process ends. On the other hand, if it is registered, it makes itself a candidate smartphone that can be a remote controller. Then, it is determined whether or not there is another smartphone that is also a candidate smartphone in the same sub-network.

このとき、他に候補スマートフォンがなければ、自身を、リモコンとして用いるスマートフォン20と決定する。一方、他に候補スマートフォンがある場合、当該候補スマートフォン間でやり取りを行い、いずれがリモコンとして用いるスマートフォン20となるかを決定する。ここでは、例えば、分散アービトレーションの手法を用いて決定する。 At this time, if there is no other candidate smartphone, it is determined that the smartphone 20 is used as a remote controller. On the other hand, when there are other candidate smartphones, the candidate smartphones are exchanged with each other to determine which is the smartphone 20 to be used as the remote controller. Here, for example, the determination is made using a distributed arbitration method.

なお、リモコンとして用いるスマートフォン20の選択方法は、予めスマートフォン間の優先順位を決め、最も優先順位の高い候補スマートフォンを選択する方法、ビデオカメラ30に最も近接した候補スマートフォンを選択する方法等が可能である。ビデオカメラ30とスマートフォン20との距離は、ビデオカメラ30の設置場所を特定し、GPSまたは無線LANの電波強度により、スマートフォン20のアクセスポイント40からの位置を推定することにより算出する。 As the selection method of the smartphone 20 used as the remote controller, a method of determining the priority among smartphones in advance and selecting the candidate smartphone having the highest priority, a method of selecting the candidate smartphone closest to the video camera 30, and the like are possible. be. The distance between the video camera 30 and the smartphone 20 is calculated by specifying the installation location of the video camera 30 and estimating the position of the smartphone 20 from the access point 40 based on the radio field strength of GPS or wireless LAN.

なお、三者連携処理開始後、リモコンとして選択されたスマートフォン20との間の通信が切れた場合には、ビデオカメラ30は、再度、接続要求を行う。このとき、リモコン決定部212は、その接続要求を受け、リモコン決定処理を行い、リモコンとして用いるスマートフォン20を決定することにより、再選択を行う。 If the communication with the smartphone 20 selected as the remote controller is cut off after the start of the tripartite cooperation process, the video camera 30 makes a connection request again. At this time, the remote controller determination unit 212 receives the connection request, performs the remote controller determination process, and determines the smartphone 20 to be used as the remote controller to perform reselection.

さらに、本実施形態のリモコン決定部212は、後述の表示先決定部213が映像を表示するテレビ10を決定すると、連携テーブル800に、三者連携に用いるビデオカメラ30、テレビ10それぞれのリモコンアプリがインストールされているか否かを判別する。判別後、必要に応じてリモコンアプリを取得し、インストールを行う。 Further, when the display destination determination unit 213 described later determines the television 10 on which the image is displayed, the remote control determination unit 212 of the present embodiment displays the remote control application of each of the video camera 30 and the television 10 used for the tripartite cooperation on the cooperation table 800. Determine if is installed. After the determination, acquire the remote control application as needed and install it.

表示先決定部213は、自身がリモコンとして用いるスマートフォン20と決定された場合、同一サブネットワーク内のテレビのうち、ビデオカメラ30の画像の表示先(表示先装置)とするテレビ10を決定する。 When the display destination determination unit 213 determines that the smartphone 20 is used as a remote controller, the display destination determination unit 213 determines the television 10 as the display destination (display destination device) of the image of the video camera 30 among the televisions in the same subnetwork.

同一サブネットワーク内のテレビであって、連携テーブル800に登録されたテレビ(候補テレビ)が複数ある場合は、その中の1つを表示先装置のテレビ10として選択する。表示先装置とするテレビ10の選択は、例えば、予め候補テレビ間の優先順位を決め、最も優先順位の高いテレビを選択する方法、スマートフォン20に最も近い候補テレビを表示先装置のテレビ10とする方法、ビデオカメラ30に最も近い候補テレビを表示先装置のテレビ10とする方法、或いは複数の候補テレビを一覧表示してユーザに選択させる方法、などにより行う。 When there are a plurality of televisions (candidate televisions) registered in the cooperation table 800 among the televisions in the same subnetwork, one of them is selected as the television 10 of the display destination device. The selection of the TV 10 as the display destination device is, for example, a method of determining the priority among the candidate TVs in advance and selecting the TV having the highest priority, and the candidate TV closest to the smartphone 20 is set as the TV 10 of the display destination device. A method, a method in which the candidate TV closest to the video camera 30 is set as the TV 10 of the display destination device, a method in which a plurality of candidate TVs are displayed in a list, and a method in which the user selects the candidate TV is performed.

なお、スマートフォン20に最も近い候補テレビを選択する場合、例えば、各候補テレビとスマートフォン20との間で近距離無線通信を行い、その際の電波強度が最も大きい候補テレビをスマートフォン20に最も近接している候補テレビとする。ビデオカメラ30に最も近い候補テレビを選択する場合、例えば、ビデオカメラ30および各候補テレビについて、図示しないGPS機能等を用いてビデオカメラ30および各候補テレビがそれぞれ位置情報を取得し、該取得した各位置情報からビデオカメラ30と各候補テレビの距離を検出し、最も近接している候補テレビを決定する。 When selecting the candidate TV closest to the smartphone 20, for example, short-range wireless communication is performed between each candidate TV and the smartphone 20, and the candidate TV having the highest radio wave strength at that time is closest to the smartphone 20. Candidate TV. When selecting the candidate TV closest to the video camera 30, for example, for the video camera 30 and each candidate TV, the video camera 30 and each candidate TV acquire position information by using a GPS function (not shown) or the like, and the acquired position information is obtained. The distance between the video camera 30 and each candidate TV is detected from each position information, and the closest candidate TV is determined.

リモコン処理部220aは、自スマートフォン20と、表示先装置とするテレビ10と、ビデオカメラ30との間で、三者連携処理を実行する。本実施形態では、表示先装置とするテレビ10用のリモコンアプリと、ビデオカメラ30用のリモコンアプリとを起動し、ユーザの指示に応じて両者をそれぞれ実行する。 The remote control processing unit 220a executes a tripartite cooperation process between the own smartphone 20, the television 10 as the display destination device, and the video camera 30. In the present embodiment, the remote control application for the television 10 and the remote control application for the video camera 30 as the display destination device are activated, and both are executed according to the user's instruction.

両リモコンアプリが起動され、スマートフォン20のタッチパネル23に表示されるリモコン画像は、第一の実施形態の図11(a)および図11(b)のリモコン画像と同様である。本実施形態では、操作対象機器選択領域710を介して、操作対象機器が選択されると、それに応じて、当該機器のリモコンアプリを動作させる。 The remote control images displayed on the touch panel 23 of the smartphone 20 when both remote control applications are activated are the same as the remote control images of FIGS. 11 (a) and 11 (b) of the first embodiment. In the present embodiment, when the operation target device is selected via the operation target device selection area 710, the remote control application of the device is operated accordingly.

例えば、テレビ10が選択されると、スマートフォン20のタッチパネル23に、テレビ10用のリモコン画像(例えば、図11(a))700を表示する。そして、当該画面を介して受け付けた指示を、テレビ10に向けて送出する。本実施形態では、例えば、テレビ10のIPアドレスを宛先としたコマンドを、アクセスポイント40に向けて送出する。 For example, when the television 10 is selected, the remote control image (for example, FIG. 11A) 700 for the television 10 is displayed on the touch panel 23 of the smartphone 20. Then, the instruction received via the screen is sent to the television 10. In the present embodiment, for example, a command addressed to the IP address of the television 10 is sent to the access point 40.

また、ビデオカメラ30が選択されると、スマートフォン20のタッチパネル23に、ビデオカメラ30用のリモコン画像(例えば、図11(b))を表示する。そして、当該リモコン画像を介して受け付けた指示を、ビデオカメラ30に向けて送出する。本実施形態では、例えば、ビデオカメラ30のIPアドレスを宛先としたコマンドを、アクセスポイント40に向けて送出する。 When the video camera 30 is selected, the remote control image for the video camera 30 (for example, FIG. 11B) is displayed on the touch panel 23 of the smartphone 20. Then, the instruction received via the remote control image is sent to the video camera 30. In the present embodiment, for example, a command addressed to the IP address of the video camera 30 is sent to the access point 40.

スマートフォン20が実現する各機能は、記憶部24のストレージ領域に格納されるプログラムを、制御部21のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、連携テーブル800は、ストレージ領域に格納される。スマートフォン20が実現する各機能のうち、全部または一部の機能は、ASIC、FPGAなどのハードウェアによって実現されてもよい。 Each function realized by the smartphone 20 is realized by the microprocessor of the control unit 21 developing and executing the program stored in the storage area of the storage unit 24 in the program area. Further, the cooperation table 800 is stored in the storage area. Of the functions realized by the smartphone 20, all or part of the functions may be realized by hardware such as ASIC and FPGA.

[テレビ]
本実施形態のテレビ10は、三者連携のための中継を行わない。従って、図13(c)に示すように、第一連携確立部120および中継テーブル500は、備えなくてもよい。また、中継部130の代わりに、中継部130aを備える。
[TV set]
The television 10 of the present embodiment does not relay for tripartite cooperation. Therefore, as shown in FIG. 13C, the first cooperation establishment unit 120 and the relay table 500 may not be provided. Further, instead of the relay unit 130, a relay unit 130a is provided.

本実施形態の中継部130aは、スマートフォン20からデータの送信元を特定する機器IDと、当該データに対する操作指示とを受信する。また、受信した機器IDを有するビデオカメラ30からデータを受信すると、受信した操作指示に従って当該データを処理する。受信する操作指示は、例えば、当該データを表示部13に表示する、記憶部14に格納するなどである。また、処理を終えると、スマートフォン20にその旨を通知する。なお、機器ID、操作指示、データは、無線LAN通信I/F17を介して受信する。 The relay unit 130a of the present embodiment receives the device ID that identifies the data transmission source and the operation instruction for the data from the smartphone 20. When data is received from the video camera 30 having the received device ID, the data is processed according to the received operation instruction. The operation instruction to be received is, for example, displaying the data on the display unit 13 or storing the data in the storage unit 14. Further, when the processing is completed, the smartphone 20 is notified to that effect. The device ID, operation instruction, and data are received via the wireless LAN communication I / F17.

[三者連携処理の流れ]
以上の機能を有するテレビ10、スマートフォン20およびビデオカメラ30による、本実施形態の三者連携処理の流れを説明する。図15は、本実施形態の三者連携処理の流れを説明するためのフローチャートである。なお、連携テーブル800は、予め作成されているものとする。
[Flow of tripartite cooperation processing]
The flow of the tripartite cooperation processing of the present embodiment by the television 10, the smartphone 20, and the video camera 30 having the above functions will be described. FIG. 15 is a flowchart for explaining the flow of the tripartite cooperation process of the present embodiment. It is assumed that the cooperation table 800 is created in advance.

ここでも、第一の実施形態同様、ビデオカメラ30の記憶部34に記録された動画像の中から、スマートフォン20からの操作により所望の動画像を選択してテレビ10の表示部13に表示する場合を例にあげて説明する。なお、これ以外のリモコン操作、例えば、ビデオカメラ30が保持する動画像または静止画をテレビ10の記憶部14に記憶する操作等、通常のビデオカメラ30およびテレビ10が有するリモコン操作であれば特にこの例に限定されない。 Here, as in the first embodiment, a desired moving image is selected from the moving images recorded in the storage unit 34 of the video camera 30 by the operation from the smartphone 20 and displayed on the display unit 13 of the television 10. The case will be described as an example. It should be noted that other remote control operations, such as an operation of storing a moving image or a still image held by the video camera 30 in the storage unit 14 of the television 10, are particularly limited to remote control operations possessed by the normal video camera 30 and the television 10. Not limited to this example.

まず、ビデオカメラ30の接続要求送信部310が、アクセスポイント40を介して、接続要求を送信する(ステップS321)。接続要求は、同一サブネットワーク内の全スマートフォンに送信される。 First, the connection request transmission unit 310 of the video camera 30 transmits a connection request via the access point 40 (step S321). The connection request is sent to all smartphones in the same subnet network.

同一サブネットワーク内の全スマートフォンのリモコン決定部212は、それぞれ、ビデオカメラ30からの接続要求を受信すると、リモコン決定処理を行い、この三者連携処理において、リモコンとなるスマートフォン20を決定する(ステップS221)。決定は、上述の手法にて行う。 When each of the remote control determination units 212 of all smartphones in the same subnetwork receives the connection request from the video camera 30, the remote control determination process is performed, and in this tripartite cooperation process, the smartphone 20 to be the remote controller is determined (step). S221). The determination is made by the method described above.

その後、ステップS221で決定したスマートフォン20の表示先決定部213は、同一サブネットワーク内の全テレビの中から、表示先装置とするテレビ10を決定する(ステップS222)。 After that, the display destination determination unit 213 of the smartphone 20 determined in step S221 determines the television 10 to be the display destination device from all the televisions in the same subnetwork (step S222).

そして、リモコン決定部212は、リモコンアプリを取得する(ステップS223)。リモコンアプリの取得処理の流れは、第一の実施形態の図10で説明したリモコンアプリ取得処理と略同様である。ただし、本実施形態では、テレビ10およびビデオカメラ30それぞれについて本処理を実行する。 Then, the remote control determination unit 212 acquires the remote control application (step S223). The flow of the remote control application acquisition process is substantially the same as the remote control application acquisition process described with reference to FIG. 10 of the first embodiment. However, in the present embodiment, this process is executed for each of the television 10 and the video camera 30.

すなわち、通知されたビデオカメラ30の機器IDおよび決定したテレビ10の機器IDを用い、連携テーブル800を検索し、それぞれの機器IDに対応づけてリモコンアプリがインストールされているか否かを判別する。そして、インストールされている場合、そのアプリのバージョンが最新版であるか否かを判別する。そして、リモコンアプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、対応サーバから最新版のリモコンアプリをダウンロードし、それをインストールする。 That is, using the notified device ID of the video camera 30 and the device ID of the determined TV 10, the cooperation table 800 is searched, and it is determined whether or not the remote control application is installed in association with each device ID. Then, if it is installed, it is determined whether or not the version of the application is the latest version. Then, if the remote control application is not installed, or if it is installed but not the latest version, download the latest version of the remote control application from the compatible server and install it.

リモコンアプリ取得処理を終えると、スマートフォン20のリモコン処理部220aは、各リモコンアプリを起動し、スマートフォン20のタッチパネル23に、リモコン画像を表示する(ステップS224)。 When the remote control application acquisition process is completed, the remote control processing unit 220a of the smartphone 20 activates each remote control application and displays the remote control image on the touch panel 23 of the smartphone 20 (step S224).

その後、リモコン処理部220aは、ビデオカメラ30の動画選択画面の転送指示を行う(ステップS225)。この転送指示は、スマートフォン20から、アクセスポイント40を介して、テレビ10およびビデオカメラ30へ送信される。なお、転送指示は、テレビ10、スマートフォン20およびビデオカメラ30それぞれの識別情報(例えば、IPアドレス)を含む。 After that, the remote control processing unit 220a gives a transfer instruction on the video selection screen of the video camera 30 (step S225). This transfer instruction is transmitted from the smartphone 20 to the television 10 and the video camera 30 via the access point 40. The transfer instruction includes identification information (for example, IP address) of each of the television 10, the smartphone 20, and the video camera 30.

そして、それを受けたビデオカメラ30は、動画選択画面のデータを表示先装置であるテレビ10に転送する(ステップS322)。なお、動画選択画面は、第一の実施形態同様、例えば、ビデオカメラ30に記憶されている動画像を選択する画面とする。選択する画面とは、例えば、動画像のサムネイル画像が表示されている画像等である。 Then, the video camera 30 that receives the data transfers the data on the moving image selection screen to the television 10 that is the display destination device (step S322). As in the first embodiment, the moving image selection screen is, for example, a screen for selecting a moving image stored in the video camera 30. The screen to be selected is, for example, an image in which a thumbnail image of a moving image is displayed.

動画選択画面のデータを受信したテレビ10の中継部130aは、当該データに従って、ビデオカメラ30の動画選択画面を、表示部13に表示する(ステップS121)。そして、送信元のスマートフォン20に、画面表示が終了したことを意味する画面表示終了通知を行う(ステップS122)。 The relay unit 130a of the television 10 that has received the data on the video selection screen displays the video selection screen of the video camera 30 on the display unit 13 according to the data (step S121). Then, the transmission source smartphone 20 is notified of the end of the screen display, which means that the screen display has ended (step S122).

画面表示終了通知を受け付けると、スマートフォン20のリモコン処理部220aは、ユーザからのリモコン操作の受け付けが可能な状態とする。これにより、ユーザは、テレビ10の表示部13に表示される動画選択画面を見ながらビデオカメラ30への指示を行うことができる。 Upon receiving the screen display end notification, the remote control processing unit 220a of the smartphone 20 is in a state of being able to accept the remote control operation from the user. As a result, the user can give an instruction to the video camera 30 while watching the moving image selection screen displayed on the display unit 13 of the television 10.

リモコン処理部220aは、ユーザからの操作指示を受け付けると、当該指示をテレビ10およびビデオカメラ30に送信する(ステップS226)。ここで受け付ける操作指示は、例えば、選択した動画の再生指示等である。動画の選択は、例えば、テレビ10に動画選択画面として表示される動画像のサムネイル画像から選択する。 When the remote control processing unit 220a receives an operation instruction from the user, the remote control processing unit 220a transmits the instruction to the television 10 and the video camera 30 (step S226). The operation instruction received here is, for example, a playback instruction of the selected moving image. The moving image is selected from, for example, thumbnail images of moving images displayed as a moving image selection screen on the television 10.

指示を受け取ったビデオカメラ30では、操作指示に従って、データをテレビ10に転送する(ステップS323)。例えば、所定の動画の再生指示を受け取った場合、当該動画像データをテレビ10に転送する。 Upon receiving the instruction, the video camera 30 transfers the data to the television 10 according to the operation instruction (step S323). For example, when a predetermined moving image reproduction instruction is received, the moving image data is transferred to the television 10.

テレビ10の中継部130aは、転送されたデータを表示部13に表示する(ステップS123)とともに、表示処理を終了したことを意味する処理終了通知を、スマートフォン20に送信する(ステップS124)。例えば、動画像データを受信した場合、当該動画像の表示を開始する。 The relay unit 130a of the television 10 displays the transferred data on the display unit 13 (step S123), and transmits a processing end notification indicating that the display processing is completed to the smartphone 20 (step S124). For example, when the moving image data is received, the display of the moving image is started.

処理終了通知を受信したスマートフォン20のリモコン処理部220aは、リモコン画像を更新する(ステップS227)。 The remote control processing unit 220a of the smartphone 20 that has received the processing end notification updates the remote control image (step S227).

以上説明したように、本実施形態によれば、アクセスポイント40を介して、ビデオカメラ30が接続要求を行うことにより、自動的に表示先のテレビ10およびリモコンとして用いるスマートフォン20を決定し、それらの間で、三者連携処理が実行される。すなわち、ユーザは、スマートフォン20の操作により、ビデオカメラ30とテレビ10との操作を行うことができ、ビデオカメラ30に保持される映像データを、テレビ10に表示させることができる。 As described above, according to the present embodiment, when the video camera 30 makes a connection request via the access point 40, the television 10 to be displayed and the smartphone 20 to be used as the remote controller are automatically determined, and they are determined. In between, the tripartite cooperation process is executed. That is, the user can operate the video camera 30 and the television 10 by operating the smartphone 20, and the video data held in the video camera 30 can be displayed on the television 10.

このように、本実施形態によれば、第一の実施形態同様、操作性の良い、三者連携システムを、少ない負担で実現することができる。 As described above, according to the present embodiment, it is possible to realize a tripartite cooperation system having good operability as in the first embodiment with a small burden.

なお、上記第二の実施形態では、ビデオカメラ30が、アクセスポイント40を介して、同一サブネットワーク内のスマートフォン20に接続要求を送信することをトリガとして、三者連携処理を開始するよう構成しているが、これに限定されない。 In the second embodiment, the video camera 30 is configured to start the tripartite cooperation process triggered by transmitting a connection request to the smartphone 20 in the same subnetwork via the access point 40. However, it is not limited to this.

例えば、ビデオカメラ30が充電ドックに設置されたことをトリガとして、三者連携処理を開始するよう構成してもよい。充電ドックは、例えば、無接点充電または電源コンセントからの充電が可能であり、設置されるビデオカメラ30のサポート状況により、無接点充電または電源コンセントからの充電が選択される。さらに、充電ドックは近距離通信(NFC、IR通信、Bluetooth等)により、充電ドック機器IDをビデオカメラ30に通知可能に構成される。 For example, the tripartite cooperation process may be started with the video camera 30 installed in the charging dock as a trigger. The charging dock can be, for example, non-contact charging or charging from a power outlet, and depending on the support status of the installed video camera 30, contactless charging or charging from a power outlet is selected. Further, the charging dock is configured to be able to notify the video camera 30 of the charging dock device ID by short-range communication (NFC, IR communication, Bluetooth, etc.).

この場合、ビデオカメラ30が充電ドックの上に設置されると、例えば、無接点充電が開始され、かつ、ビデオカメラ30は、NFC通信により充電ドックのIDを受信する。そして、ビデオカメラ30は、無線LANの同一サブネットワーク内の全ての機器に、自身の機器IDと充電ドックの機器IDとを、トリガとして送信する。 In this case, when the video camera 30 is installed on the charging dock, for example, non-contact charging is started, and the video camera 30 receives the ID of the charging dock by NFC communication. Then, the video camera 30 transmits its own device ID and the device ID of the charging dock to all the devices in the same sub-network of the wireless LAN as a trigger.

これにより、ビデオカメラ30を充電ドックに設置するだけで、三者連携処理が実行される。すなわち、ユーザは、ビデオカメラ30を充電ドックに設置するだけで、所定のスマートフォン20により、ビデオカメラ30とテレビ10とを制御できる。 As a result, the tripartite cooperation process is executed only by installing the video camera 30 in the charging dock. That is, the user can control the video camera 30 and the television 10 by the predetermined smartphone 20 simply by installing the video camera 30 in the charging dock.

また、第二の実施形態では、連携テーブル800に、機器毎に、その種別およびリモコンアプリを登録しているが、これに限定されない。例えば、テレビとビデオカメラの組み合わせ毎のリモコンアプリが得られる場合、第一の実施形態と同様の構成を有する連携テーブルとしてもよい。 Further, in the second embodiment, the type and the remote control application are registered for each device in the cooperation table 800, but the present invention is not limited to this. For example, when a remote control application for each combination of a TV and a video camera can be obtained, a cooperation table having the same configuration as that of the first embodiment may be used.

すなわち、連携テーブル作成部211aは、サーバ90にアクセスし、候補テレビ毎に、当該候補テレビと連携操作可能なリモコンアプリを有するビデオカメラを抽出する。そして、得られたビデオカメラを、候補ビデオカメラとしてそのリモコンアプリの情報とともに登録する。 That is, the cooperation table creation unit 211a accesses the server 90 and extracts a video camera having a remote control application that can be operated in cooperation with the candidate TV for each candidate TV. Then, the obtained video camera is registered as a candidate video camera together with the information of the remote control application.

この場合、リモコン処理部220aは、第一の実施形態同様、ビデオカメラ30と決定したテレビ10とに対応づけて連携テーブルに保持されるリモコンアプリを展開し、リモコン処理を実行する。 In this case, the remote control processing unit 220a develops the remote control application held in the cooperation table in association with the video camera 30 and the determined television 10 and executes the remote control processing, as in the first embodiment.

また、上記各実施形態では、リモコンアプリがスマートフォン20に無い場合、自動的にサーバからインターネットを介してダウンロードしてインストールしている。しかしながら、この手法に限定されない。例えば、スマートフォン20のタッチパネル23にリモコンアプリのダウンロード促すプロンプト表示を行い、ダウンロードおよびインストールは、ユーザの指示を受け付けてから行うよう構成してもよい。また、第一の実施形態のテレビ10の中継アプリのダウンロードおよびインストールに関しても同様である。 Further, in each of the above embodiments, when the remote control application is not provided in the smartphone 20, it is automatically downloaded from the server via the Internet and installed. However, it is not limited to this method. For example, the touch panel 23 of the smartphone 20 may be configured to display a prompt for downloading the remote control application, and the download and installation may be performed after receiving the user's instruction. The same applies to the download and installation of the relay application of the television 10 of the first embodiment.

以上、本発明の実施形態の例を説明した。言うまでもなく、本発明の技術を実現する構成は前記実施形態に限られるものではなく、様々な変形例が考えられる。また、文中や図中に現れる数値等もあくまでも一例であり、異なるものを用いても本発明の効果を損なうことはない。 The example of the embodiment of the present invention has been described above. Needless to say, the configuration for realizing the technique of the present invention is not limited to the above-described embodiment, and various modifications can be considered. In addition, the numerical values appearing in the text and figures are merely examples, and the effects of the present invention may not be impaired even if different values are used.

前述した本発明の機能等は、それらの一部または全部を、例えば集積回路で設計する等によりハードウェアで実現しても良い。また、マイクロプロセッサユニット等がそれぞれの機能等を実現するプログラムを解釈して実行することによりソフトウェアで実現しても良い。ハードウェアとソフトウェアを併用しても良い。 The above-mentioned functions of the present invention and the like may be realized by hardware, for example, by designing a part or all of them with an integrated circuit. Further, it may be realized by software by interpreting and executing a program in which a microprocessor unit or the like realizes each function or the like. Hardware and software may be used together.

また、図中に示した制御線や情報線は説明上必要と考えられるものを示しており、必ずしも製品上の全ての制御線や情報線を示しているとは限らない。 In addition, the control lines and information lines shown in the figure indicate those considered necessary for explanation, and do not necessarily indicate all the control lines and information lines on the product.

10:映像表示装置(テレビ)、11:制御部、12:TVチューナ、13:表示部、14:記憶部、15:HDMI通信I/F、16:有線LAN通信I/F、17:無線LAN通信I/F、18:近距離通信I/F、
20:遠隔操作端末(スマートフォン)、21:制御部、22:携帯網通信I/F、23:タッチパネル、24:記憶部、27:無線LAN通信I/F、28:近距離通信I/F、
30:外部機器(ビデオカメラ)、31:制御部、32:映像入力処理部、33:表示部、34:記憶部、35:HDMI通信I/F、37:無線LAN通信I/F、38:近距離通信I/F、
40:アクセスポイント、90:サーバ、
120:第一連携確立部、121:ペアリング部、122:リモコン決定部、130:中継部、130a:中継部、140:接続検知部、
210:第二連携確立部、210a:第二連携確立部、211:連携テーブル作成部、211a:連携テーブル作成部、212:リモコン決定部、213:表示先決定部、220:リモコン処理部、220a:リモコン処理部、
310:接続要求送信部、
500:中継テーブル、510:候補スマートフォンの機器ID、520:候補ビデオカメラ、521:候補ビデオカメラの機器ID、522:中継アプリ名、523:インストールの有無、
600:連携テーブル、610:候補テレビの機器ID、620:候補ビデオカメラの機器ID、630:リモコンアプリ名、640:インストールの有無、
700:リモコン画像、710:操作対象機器選択領域、720:リモコン操作受付領域、
800:連携テーブル、810:機器ID、820:種別、830:リモコンアプリ名、840:インストールの有無
10: Video display device (television), 11: Control unit, 12: TV tuner, 13: Display unit, 14: Storage unit, 15: HDMI communication I / F, 16: Wired LAN communication I / F, 17: Wireless LAN Communication I / F, 18: Short-range communication I / F,
20: Remote control terminal (smartphone), 21: Control unit, 22: Mobile network communication I / F, 23: Touch panel, 24: Storage unit, 27: Wireless LAN communication I / F, 28: Short-range communication I / F,
30: External device (video camera), 31: Control unit, 32: Video input processing unit, 33: Display unit, 34: Storage unit, 35: HDMI communication I / F, 37: Wireless LAN communication I / F, 38: Short-range communication I / F,
40: Access point, 90: Server,
120: First cooperation establishment unit, 121: Pairing unit, 122: Remote control determination unit, 130: Relay unit, 130a: Relay unit, 140: Connection detection unit,
210: Second cooperation establishment unit, 210a: Second cooperation establishment unit, 211: Cooperation table creation unit, 211a: Cooperation table creation unit, 212: Remote control determination unit, 213: Display destination determination unit, 220: Remote control processing unit, 220a : Remote control processing unit,
310: Connection request transmitter,
500: Relay table, 510: Candidate smartphone device ID, 520: Candidate video camera, 521: Candidate video camera device ID, 522: Relay application name, 523: With or without installation,
600: Linkage table, 610: Candidate TV device ID, 620: Candidate video camera device ID, 630: Remote control application name, 640: With or without installation,
700: Remote control image, 710: Operation target device selection area, 720: Remote control operation reception area,
800: Linkage table, 810: Device ID, 820: Type, 830: Remote control application name, 840: Presence / absence of installation

Claims (5)

像表示装置であって、
外部機器を接続し、当該外部機器と通信するインタフェース部と、
前記外部機器を遠隔操作する遠隔操作端末とネットワークを介して通信する通信部と、
映像を表示する表示部と、
前記インタフェース部と前記通信部と前記表示部とを制御する制御部と、
を備え、
前記制御部は、
前記インタフェース部に接続された前記外部機器から当該外部機器の電源がオンしたことを示す情報を受信すると、前記遠隔操作端末に対して、前記外部機器を遠隔操作するためのアプリケーションソフトウェアを前記遠隔操作端末に起動させるための通信を前記通信部と前記遠隔操作端末との間で行うように制御するとともに、
前記遠隔操作端末を、予め作成された前記外部機器と当該外部機器を遠隔操作する可能性のある遠隔操作端末とを対応付けた中継テーブルを参照して決定するように制御する
ことを特徴とする映像表示装置。
A Film image display device,
An interface unit that connects an external device and communicates with the external device,
A communication unit that communicates with a remote control terminal that remotely controls the external device via a network,
A display unit that displays images and
A control unit that controls the interface unit, the communication unit, and the display unit,
With
The control unit
Upon receiving information indicating that the power of the external device has been turned on from the external device connected to the interface unit, the remote control terminal is remotely controlled with application software for remotely controlling the external device. While controlling so that the communication for activating the terminal is performed between the communication unit and the remote control terminal,
The remote control terminal is controlled so as to be determined by referring to a relay table in which the external device created in advance and the remote control terminal that may remotely control the external device are associated with each other. Video display device.
請求項1に記載の映像表示装置であって、
前記制御部は、前記遠隔操作端末からの前記外部機器に対する操作指示を前記通信部で受信し、前記受信した操作指示に基づいて前記インタフェース部から前記外部機器に中継して送信するように制御する
ことを特徴とする映像表示装置。
The video display device according to claim 1.
The control unit controls the communication unit to receive an operation instruction from the remote control terminal to the external device, and relays and transmits the operation instruction from the interface unit to the external device based on the received operation instruction. A video display device characterized by this.
映像表示装置であって、
外部機器と通信し、当該外部機器を遠隔操作する遠隔操作端末と通信する通信部と、
映像を表示する表示部と、
前記通信部と前記表示部とを制御する制御部と、
を備え、
前記制御部は、
前記通信部が前記外部機器から当該外部機器の電源がオンしたことを示す情報を受信すると、前記遠隔操作端末に対して、前記外部機器を遠隔操作するためのアプリケーションソフトウェアを前記遠隔操作端末に起動させるための通信を前記通信部と前記遠隔操作端末との間で行うように制御するとともに、
前記遠隔操作端末を、予め作成された前記外部機器と当該外部機器を遠隔操作する可能性のある遠隔操作端末とを対応付けた中継テーブルを参照して決定するように制御する
ことを特徴とする映像表示装置。
It is a video display device
A communication unit that communicates with an external device and communicates with a remote control terminal that remotely controls the external device.
A display unit that displays images and
A control unit that controls the communication unit and the display unit,
With
The control unit
When the communication unit receives information indicating that the power of the external device has been turned on from the external device, the remote control terminal activates application software for remotely controlling the external device on the remote control terminal. In addition to controlling the communication to be performed between the communication unit and the remote control terminal,
The remote control terminal is controlled so as to be determined by referring to a relay table in which the external device created in advance and the remote control terminal that may remotely control the external device are associated with each other. Video display device.
請求項3に記載の映像表示装置であって、
前記制御部は、前記遠隔操作端末からの前記外部機器に対する操作指示を前記通信部で受信し、前記受信した操作指示に基づいて前記通信部から前記外部機器に中継して送信するように制御すること
を特徴とする映像表示装置。
The video display device according to claim 3.
The control unit controls the communication unit to receive an operation instruction from the remote control terminal to the external device, and relays and transmits the operation instruction from the communication unit to the external device based on the received operation instruction. a video display device, characterized in that.
請求項2または4に記載の映像表示装置であって、
前記操作指示は、前記外部機器が保持する映像データを前記表示部に表示させる指示である
ことを特徴とする映像表示装置。
A Film image display device according to claim 2 or 4,
The operation instruction is an instruction to display the image data held by the external device on the display unit.
JP2020126355A 2016-09-15 2020-07-27 Video display device Active JP6938732B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020126355A JP6938732B2 (en) 2016-09-15 2020-07-27 Video display device
JP2021142052A JP7119190B2 (en) 2020-07-27 2021-09-01 Video display device
JP2022123963A JP7350947B2 (en) 2020-07-27 2022-08-03 Video display device
JP2023148448A JP2023160984A (en) 2020-07-27 2023-09-13 Video display device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018539459A JP6741764B2 (en) 2016-09-15 2016-09-15 Video display device and cooperative control method in video display device
JP2020126355A JP6938732B2 (en) 2016-09-15 2020-07-27 Video display device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018539459A Division JP6741764B2 (en) 2016-09-15 2016-09-15 Video display device and cooperative control method in video display device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021142052A Division JP7119190B2 (en) 2020-07-27 2021-09-01 Video display device

Publications (2)

Publication Number Publication Date
JP2020182241A JP2020182241A (en) 2020-11-05
JP6938732B2 true JP6938732B2 (en) 2021-09-22

Family

ID=73024850

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2020126355A Active JP6938732B2 (en) 2016-09-15 2020-07-27 Video display device
JP2021142052A Active JP7119190B2 (en) 2020-07-27 2021-09-01 Video display device
JP2022123963A Active JP7350947B2 (en) 2020-07-27 2022-08-03 Video display device
JP2023148448A Pending JP2023160984A (en) 2020-07-27 2023-09-13 Video display device

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2021142052A Active JP7119190B2 (en) 2020-07-27 2021-09-01 Video display device
JP2022123963A Active JP7350947B2 (en) 2020-07-27 2022-08-03 Video display device
JP2023148448A Pending JP2023160984A (en) 2020-07-27 2023-09-13 Video display device

Country Status (1)

Country Link
JP (4) JP6938732B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024063306A1 (en) * 2022-09-21 2024-03-28 삼성전자주식회사 Electronic device and method for controlling electronic device
WO2024080389A1 (en) * 2022-10-11 2024-04-18 엘지전자 주식회사 Display device and display system

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004356831A (en) 2003-05-28 2004-12-16 Matsushita Electric Ind Co Ltd Data transmitting/receiving system
JP4971005B2 (en) 2007-03-29 2012-07-11 パイオニア株式会社 Connection information recognition system for external device connected to electronic device and its recognition method
JP4469901B2 (en) 2008-02-29 2010-06-02 株式会社東芝 Electronic device and display control method
JP2009246487A (en) 2008-03-28 2009-10-22 Sharp Corp Remote operation device, device to be operated, control method for remote operation device, control method for device to be operated, and remote operation system
EP2611198A3 (en) 2011-12-30 2013-08-21 Samsung Electronics Co., Ltd. Display apparatus, input apparatus and method for controlling the display apparatus to provide a single-view or multi-view mode
JP5306489B2 (en) * 2012-01-06 2013-10-02 株式会社東芝 Terminal, program and device operation control method
JP5404860B2 (en) * 2012-07-10 2014-02-05 株式会社東芝 Information processing terminal and information processing method
JP2014235534A (en) * 2013-05-31 2014-12-15 株式会社東芝 Information processing apparatus and display control method
JP2015162790A (en) 2014-02-27 2015-09-07 オンキヨー株式会社 Controller, controller program, and network apparatus

Also Published As

Publication number Publication date
JP7119190B2 (en) 2022-08-16
JP2021184652A (en) 2021-12-02
JP2023160984A (en) 2023-11-02
JP2022140715A (en) 2022-09-27
JP7350947B2 (en) 2023-09-26
JP2020182241A (en) 2020-11-05

Similar Documents

Publication Publication Date Title
JP7350947B2 (en) Video display device
US11770573B2 (en) Video display device and cooperative control method in video display device
US8395706B2 (en) Information processing system, display device, output device, information processing device, identification information acquisition method and identification information supply method
US20110320963A1 (en) Systems and methods for controlling multiple user access to media devices in a connected platform environment
JP2010068509A (en) Video control apparatus and method for controlling the same
US20130016392A1 (en) Mobile device, image forming apparatus, notification server and control methods thereof
JP2009130876A (en) Terminal cooperation continuation viewing-and-listening system, terminal, server, and method
JP2009065305A (en) Terminal cooperation system for seamless viewing and listening, terminal, server, and method
US20120092144A1 (en) Electronic device, control device and control method thereof
US20160156956A1 (en) Display device
JP2013247539A (en) Display device, display method, and display device control program
JP2022109718A (en) Video display device, video output device, and method for controlling video output device
WO2015037129A1 (en) Electronic device and connection method for electronic device
WO2016006087A1 (en) Control device, method, and program
KR101812792B1 (en) System and method for changing the connection form of the HDMI dongle
JP6068744B2 (en) Set-top box, display system, control method, program, and recording medium
WO2014207931A1 (en) Communication system and method
JP2009171371A (en) Digital broadcast receiver and network compatible equipment
WO2015193978A1 (en) System, method, and program
JP2004357188A (en) Control system, control apparatus, data output device, control method, recording medium and program
JP2016019025A (en) Video data control device, video data transmitter and video data transmission method
JP2013157935A (en) Television receiver, external device connected to television receiver, and television reception system
JP2013168747A (en) Av system and display apparatus
JP2014138296A (en) Display processing device and display processing system
JP2008160245A (en) Television and data provision system

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200727

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200727

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210712

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210901

R150 Certificate of patent or registration of utility model

Ref document number: 6938732

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111