JP2018152778A - Terminal device and program - Google Patents
Terminal device and program Download PDFInfo
- Publication number
- JP2018152778A JP2018152778A JP2017048785A JP2017048785A JP2018152778A JP 2018152778 A JP2018152778 A JP 2018152778A JP 2017048785 A JP2017048785 A JP 2017048785A JP 2017048785 A JP2017048785 A JP 2017048785A JP 2018152778 A JP2018152778 A JP 2018152778A
- Authority
- JP
- Japan
- Prior art keywords
- message
- unit
- service
- cooperation
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 claims abstract description 146
- 230000005540 biological transmission Effects 0.000 claims description 186
- 230000006870 function Effects 0.000 description 61
- 238000000034 method Methods 0.000 description 41
- 238000010586 diagram Methods 0.000 description 33
- 238000012790 confirmation Methods 0.000 description 32
- 238000012545 processing Methods 0.000 description 30
- 230000008569 process Effects 0.000 description 25
- 230000004913 activation Effects 0.000 description 15
- 230000015654 memory Effects 0.000 description 9
- 230000015572 biosynthetic process Effects 0.000 description 7
- 238000003786 synthesis reaction Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000007630 basic procedure Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000007789 gas Substances 0.000 description 1
- 230000003760 hair shine Effects 0.000 description 1
- 230000001795 light effect Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
本発明は、端末装置及びプログラムに関する。 The present invention relates to a terminal device and a program.
近年、放送通信連携サービスを実現するためのシステムに関する研究開発が盛んに行われている。ハイブリッドキャストは、日本の代表的な放送通信連携サービスの一つであり、その技術仕様が策定されている（例えば、非特許文献1、2参照）。この技術仕様の規格に則り、２０１３年よりハイブリッドキャストのサービスが開始されている。例えば、ＨＴＭＬ（Hypertext Markup Language）５を用いて記述された放送マネージドアプリケーションによるサービスが、複数の放送局より提供されている。「アプリケーション」とは、アプリケーションプログラムの略称であり、以下では、「アプリ」とも記載する。放送マネージドアプリは、放送送信側から送信される放送サービスの制御信号を用いて、起動、終了、強制終了などのライフサイクルが制御されるアプリである。
In recent years, research and development related to a system for realizing a broadcasting / communication cooperation service has been actively conducted. Hybridcast is one of Japan's representative broadcasting and communication cooperation services, and its technical specifications have been formulated (for example, see Non-Patent
ハイブリッドキャストでは、テレビなどの受信装置と、スマートフォンやタブレットなどの端末装置とが連携する機能を利用することが可能である。以下では、受信装置と連携する端末装置を連携端末とも記載する。連携機能の具体的な一例として、テレビで実行される放送マネージドアプリと、端末装置にインストールされたコンパニオンアプリ上で動作するＷｅｂ（ウェブ）アプリとの間で、テキストメッセージを相互に送受信することができる。 In the hybrid cast, it is possible to use a function in which a receiving device such as a television and a terminal device such as a smartphone or a tablet cooperate with each other. Hereinafter, a terminal device that cooperates with the receiving device is also referred to as a cooperation terminal. As a specific example of the linkage function, a text message can be transmitted and received between a broadcast managed app executed on a television and a web (web) app that operates on a companion app installed on a terminal device. it can.
また、テレビ及び連携端末において、複数の放送外マネージドアプリを実行する技術がある（例えば、特許文献１参照）。放送外マネージドアプリとは、ユーザの操作によって、ライフサイクルが制御されるアプリである。 In addition, there is a technique for executing a plurality of non-broadcast managed apps on a television and a linked terminal (see, for example, Patent Document 1). A non-broadcast managed app is an app whose life cycle is controlled by a user operation.
一方、近年、様々な機器同士がＷｉ−ＦｉやＢｌｕｅｔｏｏｔｈ（登録商標）等の通信手段を用いて通信を行う、ＩｏＴ（Internet of Things）環境の構築に向けた取り組みが盛んに行われている。テレビをこれらＩｏＴ機器と連携動作させることにより、新たな視聴サービスを創出することが期待できる。 On the other hand, in recent years, efforts have been actively made to construct an IoT (Internet of Things) environment in which various devices communicate with each other using communication means such as Wi-Fi or Bluetooth (registered trademark). It is expected that a new viewing service can be created by operating the TV in cooperation with these IoT devices.
現行のハイブリッドキャストの放送マネージドアプリ規格においては、テレビと連携端末においてそれぞれ一つのアプリしか同時には実行できない上、双方のアプリが同一のサービス事業者から提供される場合にのみ連携することができる。また、特許文献1においても、放送マネージドアプリと同様、テレビのアプリと連携端末のアプリの一対で個々のサービスを提供することが記載されている。そのため既存技術においては、連携端末で実行されるアプリのサービス提供者が複数あるなど、連携端末で実行されるアプリが複数個である場合に、テレビで実行される1個のアプリと、連携端末で実行される複数個のアプリとが連携することについては考慮されていなかった。
In the current hybrid cast broadcast managed application standard, only one application can be executed at the same time on the TV and the cooperation terminal, and cooperation can be performed only when both applications are provided by the same service provider. Further,
また、ハイブリッドキャストにより、テレビ（受信装置）は連携端末とは直接接続することができるようになったが、その他のＩｏＴ機器とは、ローカルな環境で直接接続する手段が存在しないという問題がある。 Moreover, although the television (reception device) can be directly connected to the cooperation terminal by the hybrid cast, there is a problem that there is no means to directly connect with other IoT devices in a local environment. .
本発明は、このような事情を考慮してなされたもので、放送の受信装置において実行される放送通信連携サービスのアプリと、ＩｏＴ機器において実行されるアプリとを連携させることができる端末装置及びプログラムを提供する。 The present invention has been made in consideration of such circumstances, and a terminal device capable of linking an application of a broadcast communication cooperation service executed in a broadcast receiving apparatus and an application executed in an IoT device, and Provide a program.
［１］本発明の一態様による端末装置は、放送を受信する機能を有する受信装置で稼働する受信装置側アプリケーションと連携動作する端末側アプリケーションを実行させるアプリケーション実行部と、通信機能を有する外部機器との間で通信を行う機器通信入出力部と、連携動作する前記受信装置側アプリケーション及び前記端末側アプリケーションの少なくともいずれかからのメッセージを、前記機器通信入出力部を介して送信する機器連携部と、を具備することを特徴とする。 [1] A terminal device according to an aspect of the present invention includes an application execution unit that executes a terminal-side application that operates in cooperation with a receiving-device-side application that operates in a receiving device that has a function of receiving broadcasts, and an external device that has a communication function A device communication input / output unit that communicates with the device, and a device cooperation unit that transmits a message from at least one of the receiving device side application and the terminal side application that operate in cooperation via the device communication input / output unit It is characterized by comprising.
［２］また、本発明の一態様は、上述の端末装置において、送信先を識別するための送信先識別情報を含む前記メッセージを受け取り、前記送信先識別情報に基づいて前記メッセージを分配し、前記送信先識別情報が示す送信先が前記外部機器である場合には前記メッセージを前記外部機器に送信するために前記機器連携部に渡すメッセージ制御部、をさらに備えることを特徴とする。 [2] Further, according to one aspect of the present invention, in the terminal device described above, the message including transmission destination identification information for identifying a transmission destination is received, and the message is distributed based on the transmission destination identification information. When the transmission destination indicated by the transmission destination identification information is the external device, it further includes a message control unit that passes the message to the device cooperation unit to transmit the message to the external device.
［３］また、本発明の一態様は、上述の端末装置において、前記機器連携部は、前記機器通信入出力部を介して前記外部機器からのメッセージを受信し、前記メッセージ制御部は、前記機器連携部が受信した前記外部機器からの前記メッセージに含まれる送信先識別情報に基づいて、前記メッセージを前記受信装置側アプリケーションまたは前記端末側アプリケーションのいずれかの送信先に分配する、ことを特徴とする。 [3] Moreover, according to one aspect of the present invention, in the above-described terminal device, the device cooperation unit receives a message from the external device via the device communication input / output unit, and the message control unit Based on transmission destination identification information included in the message from the external device received by the device cooperation unit, the message is distributed to the transmission destination of either the reception device side application or the terminal side application. And
［４］また、本発明の一態様は、上述の端末装置において、前記機器連携部は、前記メッセージに含まれるサービス識別情報が示すサービスを前記外部機器が受け入れるか否かを表す情報を前記外部機器の属性に対応付けて保持する機器利用可能サービス表を記憶し、前記サービス識別情報に基づいて前記メッセージを前記外部機器に送信するか否かを判断する、ことを特徴とする。 [4] Further, according to an aspect of the present invention, in the terminal device described above, the device cooperation unit transmits information indicating whether or not the external device accepts a service indicated by service identification information included in the message. A device usable service table stored in association with device attributes is stored, and it is determined whether or not to transmit the message to the external device based on the service identification information.
［５］また、本発明の一態様は、上述の端末装置において、前記機器通信入出力部は、前記外部機器との間で用いられる通信プロトコルの種類毎に存在し、前記機器連携部は、使用する通信プロトコルに応じた前記機器通信入出力部を介して前記メッセージを前記外部機器に送信する、ことを特徴とする。 [5] Further, according to one aspect of the present invention, in the terminal device described above, the device communication input / output unit exists for each type of communication protocol used with the external device, and the device cooperation unit includes: The message is transmitted to the external device via the device communication input / output unit corresponding to a communication protocol to be used.
［６］また、本発明の一態様は、コンピュータを、上述した端末装置のいずれかとして機能させるためのプログラムである。 [6] One embodiment of the present invention is a program for causing a computer to function as any of the terminal devices described above.
本発明によれば、放送の受信装置において実行される放送通信連携サービスのアプリと、端末装置と通信する外部機器とを連携させることが可能となる。 ADVANTAGE OF THE INVENTION According to this invention, it becomes possible to link the application of the broadcast communication cooperation service performed in the broadcast receiver, and the external apparatus which communicates with a terminal device.
以下、図面を参照しながら本発明の実施形態を詳細に説明する。以下では、「アプリケーションプログラム」を、「アプリケーション」又は「アプリ」とも記載する。また、以下の説明では、アプリに記述された命令で指定される処理を実行することを、単に「アプリを実行」又は「アプリの実行」と呼ぶことがある。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. Hereinafter, “application program” is also referred to as “application” or “application”. Further, in the following description, executing a process specified by an instruction described in an application may be simply referred to as “execute application” or “execute application”.
図1は、本実施形態の一実施形態による放送通信連携システム１の全体構成図である。
放送通信連携システム１は、放送送出装置２と、サービスサーバ３と、受信装置４と、連携端末５と、ＩｏＴ機器１０とを有する。なお、「ＩｏＴ」は、「Internet of Things（モノのインターネット）」の略である。放送送出装置２及びサービスサーバ３は送信側（例えば、放送事業者側）の装置であり、受信装置４、連携端末５、及びＩｏＴ機器１０は、受信側（例えば、放送の視聴者側）の装置である。
FIG. 1 is an overall configuration diagram of a broadcasting /
The broadcast /
放送送出装置２は、放送信号を送出する。サービスサーバ３は、アプリ本体やアプリで利用するコンテンツデータを、インターネットを介して受信側の装置へ配信する。アプリ本体とは、アプリケーションのプログラムである。受信装置４は、例えば、ハイブリッドキャスト対応テレビである。連携端末５は、例えば、スマートフォンやタブレット端末などの端末装置である。ＩｏＴ機器１０は、連携端末５と通信し得るあらゆる種類の機器である。なお、ＩｏＴ機器と連携端末５との間の通信は、近距離において行われる場合も、遠距離において行われる場合もある。受信装置４及び連携端末５は、インターネットを介してサービスサーバ３と相互に通信できる。また、受信装置４と連携端末５は、無線ＬＡＮ（Local Area Network）等のローカルネットワークを介して接続する。また、連携端末５とＩｏＴ機器１０は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信手段を介して接続する。
The broadcast transmission device 2 transmits a broadcast signal. The
ＩｏＴ機器１０は、連携端末５の外部に存在する「外部機器」の一種である。ＩｏＴ機器１０は、無線等によるデータ通信の機能を有している。ＩｏＴ機器１０の具体例を次に列挙する。ＩｏＴ機器１０は、例えば、電気製品（情報機器、照明機器、その他家電製品等）や、計測のための機器や、情報収集のための機器や、発電のための機器や、エネルギー（電力、ガス等）制御のための機器や、空調機器等であり得る。また、ＩｏＴ機器１０は、認証のための機能（生体認証を含む）を有する機器であり得る。また、ＩｏＴ機器１０は、例えば映像コンテンツに所謂「４Ｄ」演出効果を与えるための機器であって、光の効果を与える機器や、音の効果を与える機器や、物質（液状、霧状、気体等）を噴出するための機器や、物や人を傾けたり加速度を与えたりするための機器等であり得る。また、ＩｏＴ機器１０は、玩具や、ゲーム機や、ゲームのコントローラーや、テレビや映像レコーダーやオーディオ装置のリモコンや、楽器（電子楽器を含む）や、音声合成装置や、集音のための機器や、音声認識装置等であり得る。また、ＩｏＴ機器１０は、建物内や街角や店舗や公共施設等に設置され、情報機器等と通信し合う装置等であり得る。また、ＩｏＴ機器１０は、ここに例示したものに限られず、あらゆる物であり得る。
The
放送通信連携サービスの形態は複数存在するが、本実施形態の放送通信連携システム１では、ハイブリッドキャスト技術仕様（非特許文献１、２）に基づき、受信装置４において、デジタル放送サービスとインターネットサービスとが連携動作することを想定する。
受信装置４が、放送またはインターネットにより配信されるアプリを実行することで、インターネット上のコンテンツを取得できるようになり、ユーザが放送通信連携サービスを利用できるようになる。さらに、ハイブリッドキャスト技術仕様に則り、受信装置４と連携端末５にインストールした端末側連携アプリとが連携動作する。
There are a plurality of forms of broadcasting / communication cooperation services. However, in the broadcasting /
When the receiving device 4 executes an application distributed by broadcasting or the Internet, the content on the Internet can be acquired, and the user can use the broadcasting / communication cooperation service. Furthermore, in accordance with the hybrid cast technical specifications, the receiving device 4 and the terminal-side cooperative app installed in the
なお、本実施形態においては、受信装置４において動作するアプリは、放送事業者が配信する放送マネージドアプリとする。放送マネージドアプリは、放送送出装置２から送信される放送サービスの制御信号に基づいて、起動、終了、強制終了などのライフサイクルが制御される。 In the present embodiment, the app that operates in the receiving device 4 is a broadcast managed app distributed by a broadcaster. The broadcast managed application has a life cycle such as activation, termination, and forced termination controlled based on a broadcast service control signal transmitted from the broadcast transmission device 2.
連携端末５に実装される端末側連携アプリは、通信により接続される他の装置である受信装置４と連携して動作するコンパニオンアプリである。端末側連携アプリは、受信装置４により実行される放送マネージドアプリと連携動作する1以上のサービスアプリを実行する。また、この端末側連携アプリは、ＩｏＴ機器１０で実行されるアプリと連携動作する。
The terminal-side cooperative app implemented in the
放送マネージドアプリとサービスアプリとは連携動作することにより、ユーザへ提供するサービスを実行する。サービスとは、ユーザが連携端末５に行った操作に従って動作した結果の画像、映像、音声を、連携端末５に、又は、受信装置４及び連携端末５に出力することである。サービスの実行には、受信装置４が有する受信機機能から取得した情報などが利用される。受信機機能は、放送信号を受信し、ユーザにより選択されたチャンネルの番組映像や音声などのコンテンツデータを放送信号から取得し、デコードして出力する一連の機能である。ユーザに提供するサービスは任意であるが、一例として、ＳＮＳ（ソーシャルネットワークサービス）、天気予報やニュースなどの情報の提供、外国語字幕の提供、テレビ映像とは異なる角度からの映像の提示などがある。
The broadcast managed app and the service app operate in cooperation to execute a service provided to the user. The service is to output an image, a video, and a sound obtained as a result of operation according to an operation performed on the
また、本実施形態の放送通信連携システム１では、受信装置４の動作及び連携端末５の動作（ユーザが連携端末５に行った操作に従った動作を含む）の結果のデータを、ＩｏＴ機器１０に渡す。そして、ＩｏＴ機器１０は、渡されたデータに従った動作をする。また、ＩｏＴ機器１０は、ＩｏＴ機器１０が保持するデータ（ＩｏＴ機器１０が収集したデータを含む）を、連携端末５や受信装置４に渡す。連携端末５や受信装置４は、ＩｏＴ機器１０から渡されたデータに従った動作をすることが可能である。
Further, in the broadcasting /
本実施形態では、端末側連携アプリまたはＩｏＴ機器側連携アプリにおいて実行されるサービスアプリがウェブアプリである場合を例に説明する。ウェブアプリとは、ウェブブラウザにより実行されるアプリである。ウェブアプリは、任意の手段により連携端末５に実装される。例えば、ウェブアプリは、放送マネージドアプリから取得が指示されたアプリでもよく、ユーザ操作により取得したアプリでもよく、連携端末５に予め実装されたアプリでもよい。放送マネージドアプリ及びウェブアプリのプログラムは、例えば、ＨＴＭＬ（Hypertext Markup Language）により記述される。
In the present embodiment, an example will be described in which the service application executed in the terminal-side cooperative application or the IoT device-side cooperative application is a web application. A web application is an application executed by a web browser. The web application is mounted on the
図２は、受信装置４、連携端末５、及びＩｏＴ機器１０のスタック図である。受信装置４は、ハードウェア、ＯＳ（Operation System）、レジデント及びアプリ実行部の４層から構成される。アプリ実行部は、例えばＨＴＭＬ５ブラウザであり、放送マネージドアプリを実行する。ＯＳ上で実行されるレジデントには、メモリに常駐するソフトウェアによる放送の受信機機能が搭載される。アプリ実行部で実行される放送マネージドアプリは、非特許文献1により規定される拡張ＡＰＩ（Application Program Interface）を通してレジデントの受信機機能にアクセスすることができる。ハードウェアは、ＣＰＵ（central processing unit）、各種メモリ、チューナー、デコーダ、通信装置、表示装置、入力装置などを含む。
FIG. 2 is a stack diagram of the receiving device 4, the
連携端末５は、ハードウェア、ＯＳ及びネイティブアプリ実行部の３層から構成される。ネイティブアプリ実行部は、ｉＯＳ（登録商標）やＡｎｄｒｏｉｄ（登録商標）など端末のＯＳが提供するアプリを実行する。ネイティブアプリ実行部では、複数のネイティブアプリが動作可能である。ネイティブアプリは、特定のＯＳやプラットフォームで実行可能なプログラムである。本実施形態における端末側連携アプリはネイティブアプリであり、ネイティブアプリ実行部において動作する。なお、端末側連携アプリは、ネイティブアプリでなくてもよい。例えば、端末側連携アプリは、ネイティブアプリから、ネイティブアプリではないブラウザを呼び出し、ブラウザによりウェブアプリを実行させてもよい。
ハードウェアは、ＣＰＵ、各種メモリ、通信装置、表示装置、入力装置などを含む。
The
The hardware includes a CPU, various memories, a communication device, a display device, an input device, and the like.
ＩｏＴ機器１０の構成としては、様々な形態が考えられるが、ここで図示する構成はＷｏＴ（Web of Things）として検討が進んでいる典型的な構成である３層構成である。即ち、ＩｏＴ機器１０は、ハードウェア、ＯＳ、アプリ実行部の3層から構成される機器である。アプリ実行部はＨＴＭＬ５ブラウザであり、ＩｏＴ機器向けに記述されたウェブアプリを実行する。ＩｏＴ機器１０のハードウェアとしては、ＣＰＵ、各種メモリ、通信装置、表示装置、入力装置などを含む。なお、ここで図示する構成は一例であり、異なる構成であってもよい。例えば、ＨＴＭＬブラウザはウェブアプリのコードをＯＳが実行可能な形式に解釈する機能を有するが、このブラウザの機能を連携端末５が代わりに提供してもよい。この場合、連携端末５は、ウェブアプリのコードを解釈し、そのコードをＩｏＴ機器１０のＯＳで実行可能な形式のデータ（コード）に変換し、変換後のコードをＩｏＴ機器１０に送信する。ＩｏＴ機器はこの連携端末５側から送られたコードをＯＳ層で解釈し、実行する。また、ここに例示した構成に限らず、他の構成によって装置間で機能を適切に配置してもよい。
Although various forms can be considered as the configuration of the
ハイブリッドキャストにおける端末連携機能は、受信装置４のアプリ実行部で動作する放送マネージドアプリと、連携端末５のネイティブアプリ実行部が実行する端末側連携アプリの内部で動作するウェブアプリの間で実現される。放送マネージドアプリとウェブアプリとの間では、非特許文献1で規定される拡張ＡＰＩを用いてテキストメッセージを送信する。テキストメッセージには、任意のメッセージ内容を記述することができる。例えば、メッセージ内容は、アプリに対する各種の実行命令や、アプリが動作する際に用いられる付加的な情報などでもよい。
The terminal cooperation function in the hybrid cast is realized between a broadcast managed application that operates in the application execution unit of the receiving device 4 and a web application that operates in the terminal side cooperation application that is executed by the native application execution unit of the
また、連携端末５とＩｏＴ機器１０との連携機能は、連携端末５で動作するコンパニオンアプリの内部で動作するウェブアプリと、ＩｏＴ機器１０のアプリ実行部で動作するウェブアプリとの間で実現される。連携端末５のコンパニオンアプリからＩｏＴ機器１０に、メッセージを送信することができる。また、携帯端末５は、ＩｏＴ機器１０からのメッセージを受信することができる。なお、連携端末５とＩｏＴ機器１０との間で送受信されるメッセージは、テキスト形式でもよく、バイナリ形式でも良い。
Further, the cooperation function between the
図３は、受信装置４の内部構成を示すブロック図であり、本実施形態と関係する機能ブロックのみを抽出して示してある。同図に示す受信装置４は、放送受信部４０１、分離部４０２、映像復号部４０３、音声復号部４０４、データ放送実行部４０５、通信入出力部４０６、リモコン入力制御部４０７、電源制御部４０８、アプリ実行部４０９、アプリ制御部４１０、放送通信連携部４１１、端末連携部４１２、映像合成部４１３、映像表示部４１４、音声合成部４１５及び音声出力部４１６を備えて構成される。
なお、連携端末５と連携動作するアプリケーションであって、受信装置４側で実行されるアプリケーションを「受信装置側アプリケーション」と呼ぶ。
FIG. 3 is a block diagram showing an internal configuration of the receiving device 4, and only functional blocks related to the present embodiment are extracted and shown. The receiving apparatus 4 shown in the figure includes a
An application that operates in cooperation with the
放送受信部４０１は、チューナーであり、放送送出装置２から送出された放送信号を受信し、復調する。分離部４０２は、放送受信部４０１が受信し、復調した放送信号を、映像データ、音声データなどのコンテンツデータや、コンテンツデータ以外のデータに分離する。コンテンツ以外のデータには、例えば、データ放送や、受信チャンネル、番組情報が記述されたＳＩ（Service Information）や、イベントメッセージなどが含まれる。映像復号部４０３は、映像データを復号する。音声復号部４０４は、音声データを復号する。データ放送実行部４０５は、ＢＭＬ（Broadcast Markup Language）ブラウザであり、データ放送を実行する。
The
通信入出力部４０６は、通信ネットワークに接続するためのインターフェースである。
通信入出力部４０６は、インターネットなどを介してアプリマーケット、アカウント管理サーバ、アプリ配信サーバなどのサービスサーバ３と接続する。また、通信入出力部４０６は、無線ＬＡＮなどのローカルネットワークを介して連携端末５と接続する。リモコン入力制御部４０７は、リモコン（リモートコントローラ）からユーザがリモコンに行った操作を示すデータを受信する。電源制御部４０８は、受信装置４の電源の制御を行う。
The communication input /
The communication input /
アプリ実行部４０９は、放送マネージドアプリを実行するウェブ（Ｗｅｂ）ブラウザである。放送マネージドアプリは、１以上のサービスの機能を提供する。アプリ制御部４１０は、放送信号から分離されたデータに含まれる情報に基づいて、放送マネージドアプリの起動や終了などの制御を行う。例えば、アプリ制御部４１０は、現在選択されている放送事業者（チャンネル）の放送マネージドアプリを、放送信号から分離されたＡＩＴに設定されている情報などに基づいて制御する。アプリ制御部４１０は、起動した放送マネージドアプリの識別情報を端末連携部４１２に通知する。
The
放送通信連携部４１１は、放送マネージドアプリにおいて放送又は通信により取得したコンテンツを連携動作させるために、アプリ実行部４０９に対して拡張ＡＰＩで規定される機能を提供する。具体的には、放送通信連携部４１１は、受信中の放送信号に含まれるＳＩやイベントメッセージなどの情報や受信装置４が備える機能などへのアクセス手段を提供する。端末連携部４１２は、連携端末５とのペアリング処理と、受信装置４の放送マネージドアプリと連携端末５のウェブアプリ間の通信を仲介する処理とを行う。端末連携部４１２は、後述する図５に示す連携端末５の端末連携部５３１とペアで動作する。端末連携部４１２は、起動された放送マネージドアプリの識別情報を連携端末５に通知する。
The broadcast
映像合成部４１３は、映像復号部４０３が復号した放送番組の映像データと、データ放送実行部４０５やアプリ実行部４０９の処理結果に基づき出力された映像データとを合成し、映像表示部４１４に出力する。映像表示部４１４は、一般的なディスプレイであり、映像合成部４１３が合成した映像データの映像を表示する。
The
音声合成部４１５は、音声復号部４０４が復号した放送番組の音声データと、データ放送実行部４０５やアプリ実行部４０９の処理結果に基づき出力された音声データとを合成し、音声出力部４１６に出力する。音声出力部４１６は、一般的なスピーカーであり、音声合成部４１５が合成した音声データを音声により出力する。
The
図４は、アプリ実行部４０９の詳細な構成を示す機能ブロック図である。アプリ実行部４０９は、サービス実行部４２１、サービス実行管理部４２２及びメッセージ制御部４２３を有する。なお、アプリ実行部４０９は複数のサービス実行部４２１を備え得るが、同時に動作する放送マネージドアプリは一つのみとする。同図では、アプリ実行部４０９が備える複数のサービス実行部４２１をそれぞれ、サービス実行部４２１−１、４２１−２、４２１−３、…と記載している。
FIG. 4 is a functional block diagram illustrating a detailed configuration of the
サービス実行部４２１は、アプリ制御部４１０による制御に基づき、放送マネージドアプリに含まれるサービス機能を実行する。サービス実行管理部４２２は、各サービス実行部４２１の起動及び終了の制御や状態管理を行い、複数のサービス実行部４２１を並列に実行させる。
The service execution unit 421 executes a service function included in the broadcast managed application based on control by the
メッセージ制御部４２３は、サービス実行部４２１が実行する放送マネージドアプリのサービス機能と連携端末５が実行するウェブアプリとの間のメッセージを適切に送受信するための制御を行う。メッセージ制御部４２３は、サービス識別管理部４２３１、メッセージ受信部４２３２、メッセージ判定部４２３３、メッセージ分配部４２３４及び送信元サービス設定部４２３５を有する。
The
サービス識別管理部４２３１は、サービス実行部４２１の識別子と、そのサービス実行部４２１により実行されるサービスの識別子との対応表を例えばリスト形式で管理する。
サービスの識別子は、予め決められる。なお、各放送マネージドアプリは、プレフィックスを付加することなどにより、送信先のアドレスとして、サービス毎に予め決められた識別子を、メッセージの一部に付加して送受信を行う。
The service
The service identifier is predetermined. Each broadcast managed application performs transmission / reception by adding an identifier predetermined for each service as a transmission destination address to a part of the message by adding a prefix or the like.
メッセージ受信部４２３２は、連携端末５からのメッセージ、及び、サービス実行部４２１からのメッセージを受信する。メッセージ受信部４２３２は、受信したメッセージを、メッセージ判定部４２３３及びメッセージ分配部４２３４に送信する。なお、メッセージ受信部４２３２は、メッセージ判定部４２３３に宛先の判定に必要な情報のみを送信してもよい。
The
メッセージ判定部４２３３は、メッセージ受信部４２３２から受信したメッセージに付加されたサービスの識別子と、サービス識別管理部４２３１に記憶される対応表とを照合してメッセージの送信先を決定し、メッセージ分配部４２３４に通知する。メッセージ判定部４２３３は、メッセージに付加された送信元のサービスの識別子と送信先のサービスの識別子とが同一の場合は連携端末５を送信先とし、異なる場合はサービス実行部４２１を送信先とする。また、メッセージ判定部４２３３は、実施形態によっては、サービス間の通信チャンネルを確立するための識別子の発行や、その識別子に基づいたメッセージの送信先の決定を行う。
The
メッセージ分配部４２３４は、メッセージ受信部４２３２から受信したメッセージを、メッセージ判定部４２３３が決定した送信先に送信する。送信元サービス設定部４２３５は、サービス実行部４２１が連携端末５または他のサービス実行部４２１に対して送信するメッセージに、そのサービス実行部４２１において実行中の放送マネージドアプリのサービスの識別子を付加する。
The
図５は、連携端末５の構成を示す機能ブロック図であり、本実施形態と関係する機能ブロックのみを抽出して示してある。同図においては、端末側連携アプリを中心とした機能構成を示す。連携端末５は、ハードウェア部５１、ＯＳ部５２、連携アプリ実行制御部５３及び他アプリ実行制御部５４を有する。
なお、受信装置４と連携動作するアプリケーションであって、連携端末５側で実行されるアプリケーションを「端末側アプリケーション」と呼ぶ。
FIG. 5 is a functional block diagram showing the configuration of the
An application that operates in cooperation with the receiving device 4 and is executed on the
ハードウェア部５１は、ＣＰＵ、各種メモリ、通信装置、ディスプレイ（表示装置）、ユーザ操作を入力するための入力デバイス（入力装置）などの各種ハードウェアからなる。ディスプレイがタッチパネルである場合、入力デバイスは、タッチパネルに配されたタッチセンサーである。ハードウェア部５１は、通信装置により実現される通信入出力部５１１及び機器通信入出力部５１２を有する。
The
通信入出力部５１１は、通信ネットワークに接続するためのインターフェースである。
通信入出力部５１１は、インターネットなどを介してサービスサーバ３と接続する。また、通信入出力部５１１は、無線ＬＡＮなどのローカルネットワークを介して受信装置４と接続する。機器通信入出力部５１２は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信手段に接続するためのインターフェースである。機器通信入出力部５１２は、Ｗｉ−Ｆｉ、ＢＬＥ（Bluetooth Low Energy）など、通信プロトコルごとに設けられる。機器通信入出力部５１２は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等を介してＩｏＴ機器１０と接続する。なお、ＩｏＴ機器との接続に使用するプロトコルによっては、機器通信入出力部５１２は、通信入出力部５１１と共用される場合がある。つまり、機器通信入出力部５１２は、通信機能を有するＩｏＴ機器１０との間で通信を行う。ＯＳ部５２は、ＯＳにより実現され、端末全体を制御し、連携アプリ実行制御部５３及び他アプリ実行制御部５４に、ハードウェア部５１へのインターフェースを提供する。
The communication input /
The communication input /
連携アプリ実行制御部５３は、ＣＰＵがメモリに記憶された端末側連携アプリを読み出して実行することにより実現される。連携アプリ実行制御部５３は、端末連携部５３１、サービス実行部５３２、サービス実行管理部５３３、メッセージ制御部５３４及び機器連携部５３５を有する。複数のサービス実行部５３２をそれぞれ、サービス実行部５３２−１、５３２−２、５３２−３、…と記載する。
The cooperation application
端末連携部５３１は、受信装置４とのペアリング処理と、受信装置４の放送マネージドアプリと連携端末５のウェブアプリ間の通信を仲介する処理とを行う。端末連携部５３１は、受信装置４の端末連携部４１２とペアで動作する。
The
サービス実行部（アプリケーション実行部）５３２は、個々のサービスを提供するためのウェブアプリを実行する。サービス実行部５３２の実装方法としては、Ａｎｄｒｏｉｄ（登録商標）搭載端末におけるＷｅｂＶｉｅｗ、ｉＯＳ搭載端末におけるＵＩＷｅｂＶｉｅｗなどが挙げられる。サービス実行部５３２は複数存在することを前提としており、各サービス実行部５３２には一意の識別子が割り当てられ、サービスの識別子としても用いられる。各サービス実行部５３２は、以下のようなウェブアプリを実行する。 The service execution unit (application execution unit) 532 executes web applications for providing individual services. As a mounting method of the service execution unit 532, there are WebView in an Android (registered trademark) -equipped terminal, UIWebView in an iOS-equipped terminal, and the like. It is assumed that there are a plurality of service execution units 532, and each service execution unit 532 is assigned a unique identifier and is also used as a service identifier. Each service execution unit 532 executes the following web application.
（１）現在実際にサービスが提供されている受信装置４の放送マネージドアプリと連携したウェブアプリ。なお、このウェブアプリを実行するのは一つのサービス実行部５３２である。
（２）複数の放送局が配信する放送マネージドアプリと連携して共通に利用することができるウェブアプリ。
（３）受信装置４と連携しないウェブアプリ。
上記のウェブアプリのうちの（１）と（２）に関して、サービス実行部５３２は、放送を受信する機能を有する受信装置４で稼働する受信装置側アプリケーションと連携動作する端末側アプリケーションを実行させるものである。
(1) A web application that cooperates with a broadcast managed application of the receiving device 4 that is currently actually providing a service. The web application is executed by one service execution unit 532.
(2) A web application that can be commonly used in cooperation with a broadcast managed application distributed by a plurality of broadcasting stations.
(3) A web application that does not cooperate with the receiving device 4.
Regarding (1) and (2) of the above web applications, the service execution unit 532 executes a terminal-side application that operates in cooperation with a receiving-device-side application that operates in the receiving device 4 having a function of receiving a broadcast. It is.
サービス実行管理部５３３は、各サービス実行部５３２の起動及び終了の制御や状態管理を行い、複数のサービス実行部５３２を並列に実行させる。サービス実行管理部５３３は、受信装置４からの指示又はユーザ操作に基づいて、サービス実行部５３２、または、サービス実行部５３２上で実行されるウェブアプリの起動及び終了の制御や、フォアグラウンドでの動作又はバックグラウンドでの動作など状態の変更を行う。
The service
ハイブリッドキャストでは、受信装置４と連携端末５との間でテキストメッセージを送受信するためのＡＰＩが規定されている。メッセージ制御部５３４は、受信装置４が実行する放送マネージドアプリと連携端末５の各サービス実行部５３２が実行するウェブアプリとの間、および、サービス実行部５３２の間のメッセージを適切に送受信するための制御を行う。また、メッセージ制御部５３４は、連携端末５の各サービス実行部５３２が実行するウェブアプリとＩｏＴ機器１０のアプリ実行部が実行するアプリとの間のメッセージを適切に送受信するための制御を行う。具体的には、メッセージ制御部５３４は、送信先を識別するための送信先識別情報を含むメッセージを受け取り、送信先識別情報に基づいてメッセージを分配し、送信先識別情報が示す送信先がＩｏＴ機器１０（外部機器）である場合にはメッセージをＩｏＴ機器１０に送信するために機器連携部５３５に渡す。また、メッセージ制御部５３４は、機器連携部５３５が受信したＩｏＴ機器１０からのメッセージに含まれる送信先識別情報に基づいて、メッセージを受信装置側アプリケーションまたは端末側アプリケーションのいずれかの送信先に分配する。メッセージ制御部５３４の詳細を、後で図６を用いて説明する。
In the hybrid cast, an API for transmitting and receiving a text message between the receiving device 4 and the
機器連携部５３５は、ＩｏＴ機器１０とのペアリング処理と、ＩｏＴ機器１０と連携端末５とのアプリ間の通信を仲介する。また、機器連携部５３５は、連携端末５の各サービス実行部５３２−１、５３２−２、５３２−３、・・・のウェブアプリとＩｏＴ機器１０のアプリ実行部との間のメッセージを適切に送受信するための制御を行う。機器連携部５３５は、連携動作する受信装置側アプリケーション及び端末側アプリケーションの少なくともいずれかからのメッセージを、機器通信入出力部５１２を介して送信する。また、機器連携部５３５は、機器通信入出力部５１２を介してＩｏＴ機器１０からのメッセージを受信する。なお、機器連携部５３５については、後で図２１を用いて説明する。
The
図６は、メッセージ制御部５３４の詳細な構成を示す機能ブロック図である。メッセージ制御部５３４は、サービス識別管理部５３４１、メッセージ受信部５３４２、メッセージ判定部５３４３、メッセージ分配部５３４４及び送信元サービス設定部５３４５を有する。
FIG. 6 is a functional block diagram showing a detailed configuration of the
サービス識別管理部５３４１は、サービス実行部５３２の識別子と、そのサービス実行部５３２が実行するウェブアプリにより提供されるサービスであるウェブサービスの識別子との対応表を例えばリスト形式で管理する。ウェブサービスの識別子は、予め決められる。なお、各ウェブサービスは、プレフィックスを付加することなどにより、送信先のアドレスとして、ウェブサービス毎に予め決められた識別子を、メッセージの一部に付加して送受信を行う。
The service
メッセージ受信部５３４２は、受信装置４からのメッセージ、ＩｏＴ機器１０からのメッセージ、及び、各サービス実行部５３２からのメッセージを受信する。メッセージ受信部５３４２は、受信したメッセージを、メッセージ判定部５３４３及びメッセージ分配部５３４４に送信する。なお、メッセージ受信部５３４２は、メッセージ判定部５３４３に宛先の判定に必要な情報のみを送信してもよい。
The
メッセージ判定部５３４３は、メッセージ受信部５３４２から受信したメッセージに付加されたサービスの識別子と、サービス識別管理部５３４１に記憶される対応表とを照合してメッセージの送信先を決定し、メッセージ分配部５３４４に通知する。メッセージ判定部５３４３は、メッセージに付加された送信元のサービスの識別子と送信先のサービスの識別子とが同一の場合は、同じくメッセージに付加された送信先識別子を参照し、受信装置４またはその他のＩｏＴ機器１０を送信先とする。また、メッセージに付加された送信元のサービスの識別子と送信先のサービスの識別子とが異なる場合は、各サービス実行部５３２を送信先とする。また、メッセージ判定部５３４３は、実施形態によっては、サービス間の通信チャンネルを確立するための識別子の発行や、その識別子に基づいたメッセージの送信先の決定を行う。
The
メッセージ分配部５３４４は、メッセージ受信部５３４２から受信したメッセージを、メッセージ判定部５３４３が決定した送信先に送信する。送信元サービス設定部５３４５は、サービス実行部５３２が受信装置４または他のサービス実行部５３２に対して送信するメッセージに、送信元のサービス実行部５３２の識別子を付加する。
The
図７は、ＩｏＴ機器の機能構成を示すブロック図である。図示するように、ＩｏＴ機器１０の少なくとも一部は、コンピュータを用いて実現され、ソフトウェア、ＯＳ、ハードウェアの３層で構成される。ＩｏＴ機器１０は、機能として、アプリ実行部１０１１及び通信入出力部１０３１を含む。
FIG. 7 is a block diagram illustrating a functional configuration of the IoT device. As shown in the figure, at least a part of the
アプリ実行部１０１１は、アプリを実行する機能を有する。アプリ実行部１０１１は、例えば、ウェブブラウザで実現される。ただし、ウェブブラウザ以外の機能としてアプリを実行するようにしてもよい。アプリは、例えば、ＩｏＴ機器１０に組み込まれている。ただし、ＩｏＴ機器１０の種別や機能によっては、ＩｏＴ機器１０が、Ｗｉ−ＦｉやＢｌｕｅｔｏｏｔｈ（登録商標）等の通信手段を用いてインターネットや外部機器に接続し、更新版のアプリを取得して更新するようにしてもよい。また、ここでは、１つのＩｏＴ機器１０は1つのサービスのみを実行可能であると想定して説明するが、１つのＩｏＴ機器１０が複数のサービスを実行してもよい。アプリ実行部１０１１は、ソフトウェアで実現される。ただし、その機能の少なくとも一部をハードウェアで実現するようにしてもよい。
The
通信入出力部１０３１は、通信ネットワークとのインターフェースである。通信入出力部１０３１は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ等により、連携端末５と通信する。通信入出力部１０３１は、ハードウェアで実現される。ただし、その機能の少なくとも一部をソフトウェアで実現するようにしてもよい。ハードウェアは、ＣＰＵ、メモリ、通信装置等を含む。
The communication input /
上述したように、受信装置４で実行される放送マネージドアプリは一つである。そこで、複数のサービスを一つの放送マネージドアプリで実行するために、一つのＨＴＭＬ文書（アプリケーションプログラム）内に複数のサービスそれぞれを実行させるためのプログラムを記述する。例えば、放送局Ａが提供する現行の放送マネージドアプリでのサービスＡに加え、放送局Ａと放送局Ｂとが共通に提供するサービスＸを同時に運用することを想定する。このとき、放送局Ａが提供するサービスＡのＨＴＭＬ文書内と、放送局Ｂが提供する放送マネージドアプリのサービスＢのＨＴＭＬ文書内に、サービスＸの機能をJavaScript（登録商標）等で記述する。さらに、複数のサービスで個々にデバイス間でメッセージを送受信するため、連携端末５のサービス実行管理部５３３と同等の機能を有するサービス実行管理部４２２の機能、連携端末５のメッセージ制御部５３４と同等の機能を有するメッセージ制御部４２３の機能を、サービスＡとサービスＢの両方のサービスのＨＴＭＬ文書内にサービスＸの機能と同様に記述する。サービス実行管理部４２２の機能には、サービス実行部４２１の起動や終了などの制御、サービスごとに画面に表示するか否かの制御が含まれる。
As described above, there is one broadcast managed application executed by the receiving device 4. Therefore, in order to execute a plurality of services with one broadcast managed application, a program for executing each of the plurality of services is described in one HTML document (application program). For example, it is assumed that a service X shared by the broadcasting station A and the broadcasting station B is simultaneously operated in addition to the service A in the current broadcast managed application provided by the broadcasting station A. At this time, the function of the service X is described in JavaScript (registered trademark) or the like in the HTML document of the service A provided by the broadcast station A and in the HTML document of the service B of the broadcast managed application provided by the broadcast station B. Furthermore, in order to send and receive messages between devices individually with a plurality of services, the function of the service
図８は、放送マネージドアプリの記述例を示す図である。同図は、放送局Ａの放送マネージドアプリを、ＨＴＭＬ文書として記述した例である。同図に示すように、divでサービスＡ、サービスＸのそれぞれ表示する要素をグループ化し、idを指定する（serviceA、common_serviceX）。サービス実行部４２１で実行される各サービスの機能は、JavaScript（登録商標）で記述し、head部分にインクルードする（serviceA.js、common_serviceX）。さらに、サービス実行管理部４２２によるサービス実行部４２１の起動や終了などの制御機能（common_appcontrol.js）、メッセージ制御部４２３の機能（common_messaging.js）、及び、サービス実行管理部４２２によるサービス毎の表示の制御機能（common_viewcontrol.js）も同様にインクルードする。このようにＨＴＭＬ文書として記述された放送マネージドアプリをアプリ実行部４０９が実行することにより、アプリ実行部４０９は、サービス実行部４２１、サービス実行管理部４２２及びメッセージ制御部４２３として動作する。これにより、受信装置４上の放送マネージドアプリと、連携端末５上のコンパニオンアプリ双方に同等の機能が導入されるため、複数のサービスを一対の受信装置４と連携端末５上で利用できるようになる。
なお、サービス実行管理部４２２、メッセージ制御部４２３及びサービス実行部４２１として動作する機能部が、予め受信装置４のアプリ実行部４０９に実装されていてもよい。
FIG. 8 is a diagram illustrating a description example of a broadcast managed application. The figure is an example in which the broadcast managed application of the broadcasting station A is described as an HTML document. As shown in the figure, elements to be displayed for service A and service X are grouped by div, and id is specified (serviceA, common_serviceX). The function of each service executed by the service execution unit 421 is described in JavaScript (registered trademark) and included in the head part (serviceA.js, common_serviceX). Furthermore, a control function (common_appcontrol.js) such as activation and termination of the service execution unit 421 by the service
Note that functional units that operate as the service
連携端末５のサービス実行管理部５３３は、受信装置４からの指示、又は、連携端末５にユーザが入力した指示に従って、サービス実行部５３２によるウェブアプリの起動又は停止を行う。具体的には、受信装置４のアプリ実行部４０９が実行している放送マネージドアプリからサービス起動指示が出力されると、端末連携部４１２は連携端末５を送信先とし、通信入出力部４０６を介してサービス起動指示を送信する。サービス起動指示には、起動対象のウェブアプリを特定する情報が含まれる。連携端末５の端末連携部５３１は、通信入出力部５１１を介して受信したサービス起動指示をサービス実行管理部５３３へ出力する。サービス実行管理部５３３は、受信したサービス起動指示により起動が指示されたウェブアプリを起動する。あるいは、連携端末５の入力デバイスによりユーザが起動対象のウェブアプリの情報を入力すると、サービス実行管理部５３３は、その起動対象のウェブアプリを起動する。これにより、連携アプリ実行制御部５３において、サービス実行部５３２が動作する。
The service
図９は、放送通信連携システム１内の装置間でやりとりされるメッセージの例を示す概略図である。図９（ａ）は、受信装置４において放送マネージドアプリのサービスＰの機能を実行しているサービス実行部４２１から、連携端末５の端末側連携アプリにおいてサービスＰのウェブアプリを実行しているサービス実行部５３２へ送信されるメッセージＭ１１を示す。図９（ｂ）は、連携端末５の端末側連携アプリにおいてサービスＰのウェブアプリを実行しているサービス実行部５３２から、同じく端末側連携アプリにおいてサービスＱのウェブアプリを実行しているサービス実行部５３２に送信されるメッセージＭ２１を示す。メッセージＭ１１は、放送マネージドアプリのサービスＰの機能を実行しているサービス実行部４２１により記述されるメッセージであり、メッセージＭ１２は、サービスＰのウェブアプリを実行しているサービス実行部５３２において記述されるメッセージである。メッセージＭ１１、Ｍ２１には、送信先のサービスの識別子（それぞれ、dst:ServiceP、dst:ServiceQ）、メッセージ本体（message)が記述される。
FIG. 9 is a schematic diagram illustrating an example of messages exchanged between apparatuses in the broadcasting /
図９（ｃ）は、連携端末５の端末側連携アプリにおいてサービスＰのウェブアプリを実行しているサービス実行部５３２から、ＩｏＴ機器１０においてサービスＰのウェブアプリを実行しているアプリ実行部１０１１に送信されるメッセージＭ３１を示す。メッセージＭ３１には、送信先のサービスの識別子（dst:ServiceP）、装置の種別（dev:IoT）、及びメッセージ本体（message)が記述される。また、メッセージＭ３１において、送信先のＩｏＴ機器１０を識別する情報は、メッセージ本体の中に記述されている。
FIG. 9C illustrates an
図９（ｄ）に示すメッセージＭ１２、図９（ｅ）に示すメッセージＭ２２、及び図９（ｆ）に示すメッセージＭ３２は、連携端末５のメッセージ受信部５３４２が受信するメッセージである。メッセージＭ１２は、メッセージＭ１１に送信元のサービスＰの識別子(src:ServiceP)が付加されたものである。メッセージＭ２２は、メッセージＭ２１に送信元のサービスＰの識別子(src:ServiceP)が付加されたものである。メッセージＭ３２は、メッセージＭ３１に送信元のサービスＰの識別子(src:ServiceP)が付加されたものである。
A message M12 illustrated in FIG. 9D, a message M22 illustrated in FIG. 9E, and a message M32 illustrated in FIG. 9F are messages received by the
具体的には、受信装置４の送信元サービス設定部４２３５が、メッセージＭ１１に送信元のサービスＰの識別子を追加し、メッセージＭ１２となる。メッセージＭ１２の場合は、放送マネージドアプリを実行することにより生成されるメッセージ制御部４２３が有する送信元サービス設定部４２３５の機能（図８におけるcommon_messaging.js）によって、送信元のサービスの識別子が設定される。一方、メッセージＭ２２の場合は、連携端末５の送信元サービス設定部５３４５が、メッセージＭ２１に送信元のサービスＰの識別子を付加する。
Specifically, the transmission source
なお、メッセージのフォーマットはこれらの記述例に限らない。また、本実施形態では、送信元のサービスの識別子と送信先のサービスの識別子のみを記述したが、受信装置４、連携端末５、もしくはＩｏＴ機器１０を送信先として記述しても構わない。
The message format is not limited to these description examples. In this embodiment, only the identifier of the service of the transmission source and the identifier of the service of the transmission destination are described. However, the reception device 4, the
図１０，図１１及び図１２は、メッセージ制御部４２３及びメッセージ制御部５３４の動作を示す処理フローである。以下では、メッセージ制御部５３４を例にして説明するが、メッセージ制御部４２３も同様に動作する。
10, FIG. 11 and FIG. 12 are processing flows showing the operations of the
図１０及び図１１は、メッセージ受信時の処理フローを示すフローチャートである。なお、図１０と図１１とは、結合子により接続されている。連携端末５の端末連携部５３１は、通信入出力部５１１を介して受信装置４から受信したメッセージを、メッセージ受信部５３４２に出力する。メッセージ受信部５３４２は、端末連携部５３１からメッセージを受信する（ステップＳ１０５）。メッセージ受信部５３４２は、受信したメッセージから送信先のサービスの識別子及び送信元のサービスの識別子を検出する（ステップＳ１１０）。メッセージ受信部５３４２は、メッセージが読み出した送信先のサービスの識別子及び送信元のサービスの識別子をメッセージ判定部５３４３に通知し、メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ１１５）。
10 and 11 are flowcharts showing a processing flow when a message is received. Note that FIG. 10 and FIG. 11 are connected by a connector. The
メッセージ判定部５３４３は、サービス識別管理部５３４１に、送信先のサービスの識別子により特定されるサービスをサービス実行部５３２が実行しているか否かの照合を依頼する（ステップＳ１２０）。サービス識別管理部５３４１は、メッセージ判定部５３４３から通知された送信先のサービスの識別子と対応付けて対応表に登録されているサービス実行部５３２の識別子を取得する。サービス識別管理部５３４１は、サービス実行部５３２の識別子が取得できた場合はその識別子を設定した照合結果を、取得できなかった場合はサービス実行部５３２がないことを示す照合結果を出力する。
The
メッセージ判定部５３４３は、サービス識別管理部５３４１から、送信先のサービスの識別子により特定されるサービスを実行するサービス実行部５３２があることを示す照合結果を受信したと判断すると（ステップＳ１２５：はい）、ステップＳ１３５に移る。
If
一方、メッセージ判定部５３４３は、サービス識別管理部５３４１から送信先のサービスの識別子により特定されるサービスを実行するサービス実行部５３２がないことを示す照合結果を受信したと判断すると（ステップＳ１２５：いいえ）、ステップＳ１３０の処理を行う。すなわち、メッセージ判定部５３４３は、エラーをメッセージの送信元に返送するなど、所定のエラー処理を行う（ステップＳ１３０）。
On the other hand, when determining that the
ステップＳ１２５からＳ１３５に移った場合、引き続き下記の処理を行う。
メッセージ判定部５３４３は、送信先の識別子と送信元の識別子が同一であるか否かを判定する（ステップＳ１３５）。
図１１に移って、送信先の識別子と送信元の識別子が同一であると判定された場合（ステップＳ１４０：はい）、ステップＳ１４５に進む。送信先の識別子と送信元の識別子が同一ではないと判定された場合（ステップＳ１４０：いいえ）、ステップＳ１６５に進む。
When the process proceeds from step S125 to S135, the following processing is continued.
The
Moving to FIG. 11, if it is determined that the identifier of the transmission destination and the identifier of the transmission source are the same (step S140: Yes), the process proceeds to step S145. When it is determined that the identifier of the transmission destination and the identifier of the transmission source are not the same (step S140: No), the process proceeds to step S165.
メッセージ判定部５３４３は、送信先のデバイスが受信機（受信装置４）であるかＩｏＴ機器１０であるかを判定する（ステップＳ１５０）。送信先のデバイスが受信機（受信装置４）である場合（ステップＳ１５０：はい）、メッセージ判定部５３４３は、メッセージ分配部５３４４に対して、端末連携部５３１を経由してメッセージを送信するよう通知する（ステップＳ１５５）。送信先のデバイスがＩｏＴ機器１０である場合（ステップＳ１５０：いいえ）、メッセージ判定部５３４３は、メッセージ分配部５３４４に対して、機器連携部５３５を経由してメッセージを送信するよう通知する（ステップＳ１６０）。これらのいずれの場合も、次に、ステップＳ１７０に移る。
The
送信先の識別子と送信元の識別子が同一ではない場合（ステップＳ１４０：いいえ）の処理は次の通りである。即ち、メッセージ判定部５３４３は、メッセージ分配部５３４４に対して、メッセージに記述された送信先のサービス実行部５３２にメッセージを送信するよう通知する。具体的には、メッセージ判定部５３４３は、メッセージに記述荒れた送信先の識別子のサービスを実行するサービス実行部５３２にメッセージを送信するようにする（ステップＳ１６５）。次に、ステップＳ１７０に移る。
The processing when the identifier of the transmission destination and the identifier of the transmission source are not the same (step S140: No) is as follows. In other words, the
ステップＳ１５５、Ｓ１６０、Ｓ１７０のいずれかの処理の完了後、メッセージ分配部５３４４は、メッセージ判定部５３４３からの指示に従い、端末連携部５３１、機器連携部５３５、もしくは各サービス実行部５３２のいずれかにメッセージを送信する。
以上で、このフローチャートの処理を終了する。
After the completion of any one of steps S155, S160, and S170, the
Above, the process of this flowchart is complete | finished.
図１２は、メッセージ発行時の処理フローを示すフローチャートである。サービス実行部５３２は、メッセージを設定し、送信元サービス設定部５３４５に通知する（ステップＳ２０５）。送信元サービス設定部５３４５は、受信したメッセージに対して、送信元の識別子として、メッセージの送信元のサービス実行部５３２が実行しているサービスの識別子を追加し、メッセージ受信部５３４２に通知する（ステップＳ２１０）。メッセージ受信部５３４２は、メッセージから読み出した送信先のサービスの識別子及び送信元のサービスの識別子をメッセージ判定部５３４３に通知し、メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ２１５）。
FIG. 12 is a flowchart showing a processing flow when a message is issued. The service execution unit 532 sets a message and notifies the transmission source service setting unit 5345 (step S205). The transmission source
メッセージ判定部５３４３は、送信先と送信元の識別子が同一か否かを判定する（ステップＳ２２０）。メッセージ判定部５３４３は、送信先と送信元の識別子が同一と判定した場合（ステップＳ２２５：はい）、メッセージ分配部５３４４に対して、端末連携部５３１を経由して受信装置４に、または機器連携部５３５を経由してＩｏＴ機器１０に、メッセージを送信するよう通知する（ステップＳ２３０）。メッセージ分配部５３４４は、メッセージ判定部５３４３の指示に従い、メッセージを端末連携部５３１または機器連携部５３５の適切な方に出力する。端末連携部５３１側に出力された場合、端末連携部５３１は、メッセージ分配部５３４４から受信したメッセージを、通信入出力部５１１を介して受信装置４に送信する。また、機器連携部５３５側に出力された場合、機器連携部５３５は、メッセージ分配部５３４４から受信したメッセージを、機器通信入出力部５１２を介してＩｏＴ機器１０に送信する（ステップＳ２４０）。
The
一方、メッセージ判定部５３４３は、送信先と送信元の識別子が同一ではないと判定した場合（ステップＳ２２５：いいえ）、ステップＳ２３５の処理を行う。すなわち、メッセージ判定部５３４３は、サービス識別管理部５３４１から、メッセージに記述された送信先のサービスの識別子に対応して対応表に登録されているサービス実行部５３２の識別子を読み出す。メッセージ判定部５３４３は、読み出した識別子により特定されるサービス実行部５３２、つまり、メッセージに記述された送信先のサービスの識別子により特定されるウェブサービスを実行しているサービス実行部５３２へメッセージを送信するよう、メッセージ分配部５３４４に通知する（ステップＳ２３５）。メッセージ分配部５３４４は、メッセージ判定部５３４３により送信先として指示されたサービス実行部５３２に、メッセージを送信する（ステップＳ２４０）。
On the other hand, when the
図１３は、受信装置４と連携端末５の間のシーケンス図である。受信装置４のサービス実行部４２１は、連携端末５において実行されるサービスの識別子を宛先に設定したメッセージを発行する（ステップＳ３０５）。送信元サービス設定部４２３５は、サービス実行部４２１から受信したメッセージに送信元のサービスの識別子を設定し、メッセージ受信部４２３２に出力する（ステップＳ３１０）。メッセージ受信部４２３２は、メッセージから取得した送信元のサービスの識別子及び送信先のサービスの識別子をメッセージ判定部４２３３に通知し（ステップＳ３１５）、メッセージ全体をメッセージ分配部４２３４に通知する（ステップＳ３２０）。メッセージ判定部４２３３は、送信元のサービスの識別子及び送信先のサービスの識別子が同一であるため、連携端末５にメッセージを送信するようメッセージ分配部４２３４に通知する（ステップＳ３２５）。メッセージ分配部４２３４は、メッセージを端末連携部４１２に出力し（ステップＳ３３０）、端末連携部４１２は、メッセージを、通信入出力部４０６を介して連携端末５に送信する。
FIG. 13 is a sequence diagram between the receiving device 4 and the
連携端末５の通信入出力部５１１は、受信装置４から受信したメッセージを端末連携部５３１に出力する（ステップＳ３３５）。メッセージ受信部５３４２は、端末連携部５３１からメッセージを受信する（ステップＳ３４０）。メッセージ受信部５３４２は、メッセージから取得した送信元のサービスの識別子及び送信先のサービスの識別子をメッセージ判定部５３４３に通知し（ステップＳ３４５）、メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ３５０）。メッセージ判定部５３４３は、送信先のサービスの識別子により特定されるウェブサービスが存在することを示す照合結果をサービス識別管理部５３４１から受信すると、ステップＳ３５５の処理を行う。すなわち、メッセージ判定部５３４３は、送信先のサービスの識別子により特定されるウェブサービスを実行しているサービス実行部５３２へメッセージを出力するようメッセージ分配部５３４４に指示する（ステップＳ３５５）。メッセージ分配部５３４４は、メッセージ判定部５３４３に指示されたサービス実行部５３２へメッセージを出力する（ステップＳ３６０）。
The communication input /
図１３では、受信装置４から連携端末５へのメッセージの送信例を示したが、連携端末５から受信装置４へのメッセージ送信も同様の手順で実行できる。
In FIG. 13, an example of message transmission from the reception device 4 to the
図１４は、連携端末５のウェブアプリ間でメッセージを送信する場合のシーケンス図である。同図では、サービス実行部５３２−１をサービス実行部（１）、サービス実行部５３２−２をサービス実行部（２）と記載している。
FIG. 14 is a sequence diagram when a message is transmitted between the web applications of the
サービス実行部５３２−１は、サービス実行部５３２−２が実行しているサービスの識別子を宛先に設定したメッセージを発行する（ステップＳ４０５）。送信元サービス設定部５３４５は、サービス実行部５３２−１から受信したメッセージに送信元のサービスの識別子を設定し、メッセージ受信部５３４２に出力する（ステップＳ４１０）。メッセージ受信部５３４２は、メッセージから取得した送信元のサービスの識別子及び送信先のサービスの識別子をメッセージ判定部５３４３に通知し（ステップＳ４１５）、メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ４２０）。メッセージ判定部５３４３は、送信元のサービスの識別子及び送信先のサービスの識別子が異なるため、送信先のサービスの識別子により特定されるウェブサービスを実行しているサービス実行部５３２−２にメッセージを送信するようメッセージ分配部５３４４に通知する（ステップＳ４２５）。メッセージ分配部５３４４は、メッセージ判定部５３４３に指示されたサービス実行部５３２−２へメッセージを出力する（ステップＳ４３０）。
The service execution unit 532-1 issues a message in which the identifier of the service being executed by the service execution unit 532-2 is set as the destination (step S405). The transmission source
図１４では、連携端末５のウェブアプリ間でメッセージを送信する場合ついて示しているが、受信装置４のサービス実行部４２１間でメッセージを送信する場合についても同様の手順で実行できる。
Although FIG. 14 shows a case where a message is transmitted between web applications of the
上述した、図９から図１４までの例では、全てのメッセージに送信元のサービスの識別子と送信先のサービスの識別子を付加して送信していたが、サービス間のチャンネルの識別子を付加する実施形態をとっても構わない。この場合、受信装置４の放送マネージドアプリのサービスと連携端末５のウェブサービスとの間、又は、連携端末５におけるウェブサービス間で、メッセージングを開始する前に、接続処理を実行してサービス間のチャンネルを確立する。以降、受信装置４及び連携端末５は、接続解除の処理が実行されるまでは、確立したチャンネルにおいて割り当てられたセッションの識別子に基づき、送信元と送信先の識別子を付加せずにメッセージを送信する。
In the example of FIGS. 9 to 14 described above, the identifier of the source service and the identifier of the destination service are added to all messages for transmission. However, the identifier of the channel between services is added. You may take a form. In this case, before starting messaging between the broadcast managed application service of the receiving device 4 and the web service of the
図１５は、受信装置４の放送マネージドアプリのサービスと連携端末５のウェブサービスとの間でセッションの識別子に基づきメッセージを送信する場合のメッセージの設定例を示す図である。図１５（ａ）は、接続登録メッセージＭ３１を、図１５（ｂ）は接続登録確認メッセージＭ３２を、図１５（ｃ）は接続解除メッセージＭ３３を、図１５（ｄ）は接続解除確認メッセージＭ３４を、図１５（ｅ）はメッセージ本体が設定されたメッセージＭ３５を示す。
FIG. 15 is a diagram illustrating a setting example of a message when a message is transmitted based on a session identifier between the broadcast managed application service of the reception device 4 and the web service of the
接続登録メッセージＭ３１、接続登録確認メッセージＭ３２、接続解除メッセージＭ３３、接続解除確認メッセージＭ３４、メッセージＭ３５には、type属性が含まれている。
このtype属性により、メッセージが登録（publish）／登録確認（subscribe）／接続解除（unpublish）／接続解除確認（unsubscribe）／メッセージ本体（body）のいずれであるかが識別可能である。
The connection registration message M31, the connection registration confirmation message M32, the connection release message M33, the connection release confirmation message M34, and the message M35 include a type attribute.
By this type attribute, it is possible to identify whether the message is registration (publish) / registration confirmation (subscribe) / connection release (unpublish) / connection release confirmation (unsubscribe) / message body (body).
また、接続登録メッセージＭ３１、接続登録確認メッセージＭ３２、接続解除メッセージＭ３３、接続解除確認メッセージＭ３４には、送信元のサービスの識別子（src）及び送信先のサービスの識別子（dst）が設定され、接続登録確認メッセージＭ３２及び接続解除確認メッセージＭ３４には、さらに、確立したチャンネルに割当てられたセッションの識別子（subscribe_ID）が記述される。メッセージ本体（message）が設定されたメッセージＭ３５には、送信元及び送信先は設定されず、セッションの識別子（subscribe_ID）とメッセージの内容（message）が記述される。 In addition, in the connection registration message M31, the connection registration confirmation message M32, the connection release message M33, and the connection release confirmation message M34, the identifier of the source service (src) and the identifier of the destination service (dst) are set. In the registration confirmation message M32 and the connection release confirmation message M34, an identifier (subscribe_ID) of a session assigned to the established channel is further described. In the message M35 in which the message body (message) is set, the transmission source and the transmission destination are not set, and the session identifier (subscribe_ID) and the message content (message) are described.
図１６及び図１７は、受信装置４と連携端末５の間でセッションの識別子に基づきメッセージを送信する場合のシーケンス図である。
FIGS. 16 and 17 are sequence diagrams when a message is transmitted between the receiving device 4 and the
図１６は、接続登録処理のシーケンスを示す。受信装置４のサービス実行部４２１は、接続登録メッセージを発行する（ステップＳ５０５）。サービス実行部４２１が発行した接続登録メッセージには、接続登録メッセージであることを示す「publish」が設定されたtype属性と、送信先のサービスの識別子が設定されたdst属性とが含まれる。送信元サービス設定部４２３５は、このメッセージに、送信元のサービスの識別子を設定したsrc属性を追加する。送信元サービス設定部４２３５は、src属性が追加された接続登録メッセージをメッセージ受信部４２３２に出力する（ステップＳ５１０）。
FIG. 16 shows a sequence of connection registration processing. The service execution unit 421 of the receiving device 4 issues a connection registration message (step S505). The connection registration message issued by the service execution unit 421 includes a type attribute in which “publish” indicating the connection registration message is set, and a dst attribute in which the identifier of the destination service is set. The transmission source
メッセージ受信部４２３２は、接続登録メッセージに設定されている送信先のサービスの識別子及び送信元のサービスの識別子をメッセージ判定部４２３３に通知し（ステップＳ５１５）、接続登録メッセージ全体をメッセージ分配部４２３４に通知する（ステップＳ５２０）。メッセージ判定部４２３３は、送信先と送信元のサービスの識別子が同一であるため、連携端末５にメッセージを送信するようメッセージ分配部４２３４に通知する（ステップＳ５２５）。メッセージ分配部４２３４は、接続登録メッセージを端末連携部４１２に出力し（ステップＳ５３０）、端末連携部４１２は、メッセージ分配部４２３４から受信した接続登録メッセージを、通信入出力部４０６を介して連携端末５に送信する。
The
連携端末５の通信入出力部５１１は、受信装置４からメッセージを受信し、端末連携部５３１に出力する（ステップＳ５３５）。メッセージ受信部５３４２は、端末連携部５３１からメッセージを受信する（ステップＳ５４０）。メッセージ受信部５３４２は、受信したメッセージをメッセージ判定部５３４３に出力する（ステップＳ５４５）。メッセージ判定部５３４３は、受信したメッセージのtype属性により接続登録メッセージであると判断すると、subscribe_IDを発行し、送信元及び送信先のサービスの識別子と対応付けて記憶する。なお、接続が解除される度に新規のsubscribe_IDを発番してもよく、送信元と送信先のペアに対して予め決定したsubscribe_IDを割り当てても構わない。さらに、メッセージ判定部５３４３は、接続登録確認メッセージを生成する。接続登録確認メッセージには、接続登録確認メッセージを示す「subscribe」が設定されたtype属性と、発行したsubscribe_IDと、接続登録メッセージに設定されていたdst属性及びsrc属性とが含まれる。メッセージ判定部５３４３は、生成した接続登録確認メッセージをメッセージ分配部５３４４に通知し、受信装置４へ送信するよう指示する（ステップＳ５５０）。
The communication input /
メッセージ分配部５３４４は、接続登録確認メッセージを端末連携部５３１に出力し（ステップＳ５５５）、端末連携部５３１は、接続登録確認メッセージを、通信入出力部５１１を介して受信装置４に送信する（ステップＳ５６０）。
The
受信装置４の通信入出力部４０６は、連携端末５から受信したメッセージを端末連携部４１２に出力する。メッセージ受信部４２３２は、端末連携部４１２からメッセージを受信する（ステップＳ５６５）。メッセージ受信部４２３２は、受信したメッセージのtype属性から接続登録確認メッセージであると判断する。メッセージ受信部４２３２は、接続登録確認メッセージから取得したsubscribe_IDと、送信元及び送信先のサービスの識別子をメッセージ判定部４２３３に出力する（ステップＳ５７０）。メッセージ判定部４２３３は、subscribe_IDと、送信元及び送信先のサービスの識別子とを対応付けて登録する。
さらに、メッセージ受信部４２３２は、接続登録確認メッセージを、送信先のサービスの識別子により特定される放送マネージドアプリを実行しているサービス実行部４２１にsubscribe_IDを通知する（ステップＳ５７５）。
The communication input /
Further, the
図１７は、メッセージ送信処理のシーケンスを示す。受信装置４のサービス実行部４２１は、メッセージ本体を設定したメッセージを発行する（ステップＳ６０５）。メッセージには、メッセージ本体であることを示す「body」が設定されたtype属性と、送信先のサービスに応じたsubscribe_IDと、メッセージ内容とが含まれる。送信元サービス設定部４２３５は、サービス実行部４２１から受信したメッセージに送信元のサービスの識別子を設定する。なお、送信元のサービスの識別子の設定は行わなくてもよい。送信元サービス設定部４２３５は、送信元のサービスの識別子が設定されたメッセージを、メッセージ受信部４２３２に出力する（ステップＳ６１０）。
FIG. 17 shows a sequence of message transmission processing. The service execution unit 421 of the receiving device 4 issues a message in which the message body is set (step S605). The message includes a type attribute in which “body” indicating the message body is set, a subscribe_ID corresponding to the destination service, and the message content. The transmission source
メッセージ受信部４２３２は、メッセージに設定されているsubscribe_IDをメッセージ判定部４２３３に通知し（ステップＳ６１５）、メッセージ全体をメッセージ分配部４２３４に通知する（ステップＳ６２０）。メッセージ判定部４２３３は、subscribe_IDに対応して記憶される送信先及び送信元のサービスの識別子が同一であるため、連携端末５にメッセージを送信するようメッセージ分配部４２３４に通知する（ステップＳ６２５）。
メッセージ分配部４２３４は、メッセージを端末連携部４１２に出力し（ステップＳ６３０）、端末連携部４１２は、メッセージ分配部４２３４から受信したメッセージを、通信入出力部４０６を介して連携端末５に送信する。
The
The
連携端末５の通信入出力部５１１は、受信装置４から受信したメッセージを端末連携部５３１に出力する（ステップＳ６３５）。メッセージ受信部５３４２は、端末連携部５３１からメッセージを受信する（ステップＳ６４０）。メッセージ受信部５３４２は、受信したメッセージのtypeによりメッセージ本体であると判断すると、メッセージから読み出したsubscribe_IDをメッセージ判定部５３４３に出力し（ステップＳ６４５）、メッセージをメッセージ分配部５３４４に出力する（ステップＳ６５０）。メッセージ判定部５３４３は、subscribe_IDに対応した送信元及び送信先のサービスの識別子が同じであるため、送信先のサービスの識別子により特定されるサービスを実行しているサービス実行部５３２へメッセージを出力するようメッセージ分配部５３４４に指示する（ステップＳ６５５）。メッセージ分配部５３４４は、メッセージ判定部５３４３に指示されたサービス実行部５３２へメッセージを出力する（ステップＳ６６０）。
The communication input /
図１６及び図１７では、受信装置４から連携端末５へのメッセージの送信例を示したが、連携端末５から受信装置４へのメッセージ送信も同様の手順で実行できる。
In FIG. 16 and FIG. 17, an example of message transmission from the reception device 4 to the
図１８は、連携端末５のウェブアプリ間でセッションの識別子に基づきメッセージを送信する場合のメッセージの記述例を示す図である。図１８（ａ）は、接続登録メッセージＭ４１を、図１８（ｂ）は接続登録確認メッセージＭ４２を、図１８（ｃ）は接続解除メッセージＭ４３を、図１８（ｄ）は接続解除確認メッセージＭ４４を、図１８（ｅ）はメッセージ本体が設定されたメッセージＭ４５を示す。Ｍ４１〜Ｍ４５のメッセージに含まれる属性はそれぞれ、図１５に示すＭ３１〜Ｍ３５のメッセージと同様である。
FIG. 18 is a diagram illustrating a description example of a message when a message is transmitted based on the session identifier between the web applications of the
すなわち、接続登録メッセージＭ４１、接続登録確認メッセージＭ４２、接続解除メッセージＭ４３、接続解除確認メッセージＭ４４、メッセージＭ４５には、type属性が含まれている。また、接続登録メッセージＭ４１、接続登録確認メッセージＭ４２、接続解除メッセージＭ４３、接続解除確認メッセージＭ４４には、送信元のサービスの識別子（src）及び送信先のサービスの識別子（dst）が設定され、接続登録確認メッセージＭ４２及び接続解除確認メッセージＭ４４には、さらに、確立したチャンネルに割当てられたセッションの識別子（subscribe_ID）が記述される。メッセージ本体（message）が設定されたメッセージＭ４５には、送信元及び送信先は設定されず、セッションの識別子（subscribe_ID）とメッセージの内容（message）が記述される。 That is, the connection registration message M41, the connection registration confirmation message M42, the connection release message M43, the connection release confirmation message M44, and the message M45 include a type attribute. In addition, in the connection registration message M41, the connection registration confirmation message M42, the connection release message M43, and the connection release confirmation message M44, the service identifier of the transmission source (src) and the service identifier of the transmission destination (dst) are set. The registration confirmation message M42 and the connection release confirmation message M44 further describe an identifier (subscribe_ID) of a session assigned to the established channel. In the message M45 in which the message body (message) is set, the transmission source and the transmission destination are not set, and the session identifier (subscribe_ID) and the message content (message) are described.
図１９及び図２０は、連携端末５のウェブアプリ間でセッションの識別子に基づきメッセージを送信する場合のシーケンス図である。このシーケンスは、図１６及び図１７に示すシーケンスと基本的な手順の差異はない。ただし、受信装置４と連携端末５との間でメッセージを送信する場合、連携端末５は、メッセージ分配部５３４４から端末連携部５３１を経由して送受信を行うが、ウェブアプリ間の場合は、メッセージ分配部５３４４から連携端末５内のメッセージ受信部５３４２にメッセージを送信し、以降、同様の処理が実行される。
19 and 20 are sequence diagrams when a message is transmitted between the web applications of the
図１９は、連携端末５のウェブアプリ間の接続登録処理のシーケンスを示す。連携端末５のサービス実行部５３２−１は、接続登録メッセージを発行する（ステップＳ７０５）。サービス実行部５３２−１が発行した接続登録メッセージには、接続登録メッセージであることを示す「publish」が設定されたtype属性と、サービス実行部５３２−２により実行される送信先のサービスの識別子が設定されたdst属性とが含まれる。送信元サービス設定部５３４５は、このメッセージに、送信元のサービスの識別子を設定したsrc属性を追加する。送信元サービス設定部５３４５は、src属性が追加された接続登録メッセージをメッセージ受信部５３４２に出力する（ステップＳ７１０）。
FIG. 19 shows a sequence of connection registration processing between web applications of the
メッセージ受信部５３４２は、接続登録メッセージに設定されている送信先のサービスの識別子及び送信元のサービスの識別子をメッセージ判定部５３４３に通知し（ステップＳ７１５）、接続登録メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ７２０）。メッセージ判定部５３４３は、送信先と送信元のサービスの識別子が異なるため、メッセージ受信部５３４２にメッセージを送信するようメッセージ分配部５３４４に通知する（ステップＳ７２５）。メッセージ分配部５３４４は、接続登録メッセージをメッセージ受信部５３４２に出力する（ステップＳ７３０）。
The
メッセージ受信部５３４２は、受信したメッセージをメッセージ判定部５３４３に出力する（ステップＳ７３５）。メッセージ判定部５３４３は、受信したメッセージのtypeにより接続登録メッセージであると判断すると、subscribe_IDを発行し、送信元及び送信先のサービスの識別子と対応付けて記憶する。さらに、メッセージ判定部５３４３は、接続登録確認メッセージを生成する。メッセージ判定部５３４３は、生成した接続登録確認メッセージをメッセージ分配部５３４４に通知し、メッセージ受信部５３４２へ送信するよう指示する（ステップＳ７４０）。メッセージ分配部５３４４は、接続登録確認メッセージをメッセージ受信部５３４２に出力する（ステップＳ７４５）。
The
メッセージ受信部５３４２は、受信した接続登録確認メッセージから取得したsubscribe_IDと、送信元及び送信先のサービスの識別子をメッセージ判定部５３４３に出力する（ステップＳ７５０）。メッセージ判定部５３４３は、subscribe_IDと、送信元及び送信先のサービスの識別子とを対応付けて登録する。さらに、メッセージ受信部５３４２は、接続登録確認メッセージを、送信先のサービスの識別子により特定されるウェブアプリを実行しているサービス実行部５３２−１にsubscribe_IDを通知する（ステップＳ７５５）。
The
図２０は、連携端末５のウェブアプリ間のメッセージ送信処理のシーケンスを示す。連携端末５のサービス実行部５３２−１は、メッセージ本体を設定したメッセージを発行する（ステップＳ８０５）。送信元サービス設定部５３４５は、サービス実行部５３２−１から受信したメッセージに送信元のサービスの識別子を設定する。なお、送信元のサービスの識別子の設定は行わなくてもよい。送信元サービス設定部５３４５は、送信元のサービスの識別子が設定されたメッセージを、メッセージ受信部５３４２に出力する（ステップＳ８１０）。
FIG. 20 shows a sequence of message transmission processing between web applications of the
メッセージ受信部５３４２は、メッセージに設定されているsubscribe_IDをメッセージ判定部５３４３に通知し（ステップＳ８１５）、メッセージ全体をメッセージ分配部５３４４に通知する（ステップＳ８２０）。メッセージ判定部５３４３は、subscribe_IDに対応して記憶される送信先及び送信元のサービスの識別子が異なるため、送信先のサービスの識別子により特定されるウェブサービスを実行しているサービス実行部５３２−２にメッセージを送信するようメッセージ分配部５３４４に通知する（ステップＳ８２５）。メッセージ分配部５３４４は、メッセージ判定部５３４３に指示されたサービス実行部５３２−２へメッセージを出力する（ステップＳ８３０）。
The
図１９及び図２０では、連携端末５のウェブアプリ間でメッセージを送信する場合ついて示しているが、受信装置４において放送マネージドアプリにより実行されるサービス間でのメッセージ送信についても同様の手順で実行できる。
19 and 20 show a case in which a message is transmitted between web applications of the
次に、連携端末５内の機器連携部５３５についてさらに詳細に説明する。連携端末５において、メッセージ制御部５３４の処理により、ＩｏＴ機器１０へのメッセージは機器連携部５３５に送られる。一例として、複数のＩｏＴ機器１０のうちのどのＩｏＴ機器１０にメッセージを送るかを表す情報は、メッセージ本文内に記述される。機器連携部５３５は、メッセージ本文を解釈することによって送信先を判断し、メッセージを配分する役割を担う。
Next, the
図２１は、機器連携部の詳細な構成を示すブロック図である。図示するように、機器連携部５３５は、機器管理部５３５１及び機器通信部５３５２（５３５２−１及び５３５２−２）を有する。
FIG. 21 is a block diagram illustrating a detailed configuration of the device cooperation unit. As illustrated, the
機器管理部５３５１は、サービス実行部５３２からメッセージ制御部５３４経由で送られてきたメッセージを受信する。また、機器管理部５３５１は、連携端末５の周辺に存在する通信可能なＩｏＴ機器１０の表を保有し、送信先のＩｏＴ機器１０が存在するか否かを判定する。また、ＩｏＴ機器１０の各々が接続を許可するサービスの表を保有し、ＩｏＴ機器１０がサービスからのメッセージの送信を許可するか否かを判定する。メッセージの送信が可能である場合、機器管理部５３５１は、使用する通信プロトコルに対応した機器通信部５３５２にメッセージを送信する。
The
機器通信部５３５２は、必要に応じて、送信するメッセージの形式を、送信先のＩｏＴ機器１０に則した形式に変換する。なお、変換後のメッセージの形式は、送信先であるＩｏＴ機器１０の内部構成や機能によってさまざまである。機器通信部５３５２は、それらのそれぞれに柔軟に対応してメッセージの形式を変換する機能を有する。返還後のメッセージの形式は、一例として、ウェブブラウザで解釈可能な形式である。また、別の例として、バイナリ形式であってもよい。さらに他の形式であってもよい。そして機器通信部５３５２は、ハードウェアの通信機能（機器通信入出力部５１２）を呼び出し、メッセージを送信する。なお、機器連携部５３５は、複数の系統の機器通信部５３５２を有していてよい。図２１に示す機能構成においても、複数の機器通信部５３５２が存在しており、例えばプロトコル毎に使い分けられる。ここでは符号に枝番を付している。即ち、機器通信部５３５２−１は、情報通信入出力部５１２−１を通して情報の送受信を行う。また、機器通信部５３５２−２は、情報通信入出力部５１２−２を通して情報の送受信を行う。ここでは系統数が２である場合を示しているが、系統数は任意である。
The device communication unit 5352 converts the format of the message to be transmitted into a format conforming to the
図２２は、機器管理部５３５１がメッセージ制御部５３４から受信するメッセージの例を示す概略図である。図示するメッセージにおいて、次の情報が記述されている。即ち、送信先のサービスを識別する情報が記述されている（dst: serviceP）。また、機器種別がＩｏＴ機器であることを表す情報が記述されている（dev: IoT）。
FIG. 22 is a schematic diagram illustrating an example of a message received from the
また、このメッセージ（message）内部には、次の情報が記述されている。即ち、通信プロトコル（protocol: Bluetooth Low Energy）は、メッセージの送信に用いる通信プロトコルを示すものである。また、機器特定要素（target info:）は、対象とする機器を特定する要素である。機器特定要素は、例えば、コマンドタイプ、デバイスタイプ、デバイスメーカー、デバイスネーム、デバイスＩＤ、及びコマンドを含む。コマンドタイプ（command type: control light）は、送信する命令の機能の種別を表すものである。例えば、「調光する」、「速度を変更する」、「電気を点ける」などといったコマンドタイプがあり得る。デバイスタイプ（device type: light）は、送信先のデバイスの種類を示すものである。例えば、「ロボット」、「電球」などといった機器種別が考えられる。デバイスメーカー（device maker: maker A）は、送信先の機器のメーカー（製造業者）を一意に識別する情報である。デバイスネーム（device name: A's LIGHT）は、送信先の機器の名称を表す情報である。例えば、製品群名、製品名などがデバイスネームとして用いられる。デバイスＩＤ（device id: l_00000001）は、送信先の機器をＭＡＣアドレス等のレベルで識別するための情報である。なお、「ＭＡＣアドレス」は、「Media Access Control Address」を意味する。コマンド（command: hogehogehoge）は、送信先の機器への命令を含む情報である。命令は、例えば、ＨＴＭＬ５で記述されるものである。 Further, the following information is described in the message. That is, the communication protocol (protocol: Bluetooth Low Energy) indicates a communication protocol used for message transmission. The device specifying element (target info :) is an element for specifying a target device. The device specifying element includes, for example, a command type, a device type, a device manufacturer, a device name, a device ID, and a command. The command type (command type: control light) represents the function type of the command to be transmitted. For example, there may be command types such as “light control”, “change speed”, and “turn on electricity”. The device type (device type: light) indicates the type of destination device. For example, device types such as “robot” and “light bulb” are conceivable. The device maker (maker A) is information that uniquely identifies the maker (manufacturer) of the transmission destination device. The device name (device name: A's LIGHT) is information indicating the name of the destination device. For example, a product group name, a product name, or the like is used as the device name. The device ID (device id: l_00000001) is information for identifying a destination device at a level such as a MAC address. “MAC address” means “Media Access Control Address”. The command (command: hogehogehoge) is information including a command to the destination device. The instruction is described in, for example, HTML5.
機器管理部５３５１は、ＩｏＴ機器宛のメッセージの送信先の判定と、メッセージの送信の可否の判定を行う。そのために機器管理部５３５１は、自らが保持する２種類の表を参照する。
The
機器管理部５３５１が保持する第１の表は、通信可能機器表である。通信可能機器表は、連携端末５が通信可能なＩｏＴ機器１０の情報を持つ表である。通信可能機器表は、通信可能なＩｏＴ機器１０毎に、通信プロトコル及び機器特定要素の情報を有している。機器管理部５３５１は、受け取ったメッセージの送信先として指定された機器が、通信可能な状態で存在するか否かを調べるためにこの通信可能機器表を参照する。なお、通信可能機器表を更新する方法は、実装に依存する。連携端末５は、適切なタイミングにおいて通信可能なＩｏＴ機器１０をサーチし、検出できたＩｏＴ機器１０の情報に基づいて通信可能機器表を更新する。
The first table held by the
機器管理部５３５１が保持する第２の表は、機器利用可能サービス表である。機器利用可能サービス表は、ＩｏＴ機器１０毎に、接続を許可するサービスの種類の情報を一覧形式で持つ。この機器利用可能サービス表は、例えばコンパニオンアプリのアップデート等の際に、併せて更新することができる。また、別のタイミングで機器利用可能サービス表を適宜更新するようにしてもよい。つまり、機器連携部５３５内の機器管理部５３５１は、メッセージに含まれるサービス識別情報が示すサービスをＩｏＴ機器１０が受け入れるか否かを表す情報をＩｏＴ機器１０の属性に対応付けて保持する機器利用可能サービス表を記憶し、サービス識別情報に基づいてメッセージをＩｏＴ機器１０に送信するか否かを判断する。
The second table held by the
図２３は、機器連携部の動作シーケンスを示すフローチャートである。以下、このフローチャートに沿って説明する。 FIG. 23 is a flowchart illustrating an operation sequence of the device cooperation unit. Hereinafter, it demonstrates along this flowchart.
機器管理部５３５１は、メッセージ制御部５３４からメッセージを受信する（ステップＳ９０５）。機器管理部５３５１は、受信したメッセージの本文（図２１におけるmessage: {…}）に含まれる通信プロトコル及び機器特定要素を抽出する（ステップＳ９１０）。そして、機器管理部５３５１は、メッセージ本文から抽出した通信プロトコル及び機器特定要素と、自らが維持する通信可能機器表とを比較し、メッセージ送信先であるＩｏＴ機器１０が、自装置の周辺に通信可能な状態で存在するか否かを判定する（ステップＳ９１５）。送信先のＩｏＴ機器１０が存在しない場合（ステップＳ９２０：いいえ）、エラー処理を行うためにステップＳ９４５に移る。送信先のＩｏＴ機器１０が存在する場合（ステップＳ９２０：はい）、次のステップＳ９２５に移る。
The
機器管理部５３５１は、メッセージに含まれるサービス識別子と、自らが維持する機器利用可能サービス表を比較する。この比較結果に基づいて、機器管理部５３５１は、存在する送信先のＩｏＴ機器１０がメッセージ送信元のサービスからの接続を許可するか否かを判定する（ステップＳ９２５）。許可しない場合、つまりそのＩｏＴ機器１０が受け入れるサービスの中に、送信元のサービスが含まれない場合（ステップＳ９３０：いいえ）、エラー処理を行うためにステップＳ９４５に移る。許可する場合、つまりそのＩｏＴ機器１０が受け入れるサービスの中に、送信元のサービスが含まれる場合（ステップＳ９３０：はい）、次のステップＳ９３５に移る。
The
機器管理部５３５１は、メッセージ本文に含まれる通信プロトコルの情報を基に、メッセージを送信する機器通信部５３５２を判定し、該当する機器通信部５３５２にメッセージを渡す（ステップＳ９３５）。このとき、メッセージを送信可能なＩｏＴ機器１０が複数存在する場合の処理は、実装に依存する。例えば、予め定められたルールに従って優先度の高いＩｏＴ機器１０にメッセージを送信してもよく、またその都度、ＩｏＴ機器１０を選択してメッセージを送信してもよい。機器通信部５３５２は、機器管理部からメッセージを受信する。そして機器通信部５３５２は、メッセージ本文に含まれる機器特定要素を基に、機器通信入出力部５１２を介して、送信先のＩｏＴ機器１０にメッセージを送信する（ステップＳ９４０）。
The
ステップＳ９２０またはＳ９３０から、ステップＳ９４５に移った場合の処理は、次の通りである。即ち、機器管理部５３５１は、メッセージを適切に送信する先がないため（接続が許可されない場合を含む）、エラーを送信元に通知するなどといったエラー処理を行う（ステップＳ９４５）。
The processing when the process moves from step S920 or S930 to step S945 is as follows. That is, the
受信装置４とＩｏＴ機器１０とが連携するまでの手順は次の通りである。受信装置４において実行する放送マネージドアプリからＩｏＴ機器１０へメッセージを送る例を示す。まず受信装置４が連携端末５にメッセージを送る。メッセージ内には、連携端末５からＩｏＴ機器１０にメッセージを送るように記述されている。また、メッセージ内には、送信先のＩｏＴ機器１０を特定する情報と、送信先であるそのＩｏＴ機器１０に与える命令が記述されている。連携端末５は、送信先のＩｏＴ機器１０を特定する情報に従って、ＩｏＴ機器１０にメッセージを送る。ＩｏＴ機器１０はメッセージに記述された命令に従って動作する。この結果、受信装置４とＩｏＴ機器１０とは連携端末５を介して連携動作することになる。
The procedure until the receiving device 4 and the
また、連携端末５において実行するコンパニオンアプリから、受信装置４とＩｏＴ機器１０とのそれぞれに、関連したメッセージを送信するようにしてもよい。この方法を用いて受信装置４とＩｏＴ機器１０とが連携して動作するようにすることも可能である。
Further, a related message may be transmitted from the companion app executed in the
次に、受信装置４と連携端末５とＩｏＴ機器１０との連携動作を利用した具体的なサービスの実行手順の一例を説明する。
図２４及び図２５は、具体的なサービスの例を実現するための手順であって、受信装置４とＩｏＴ機器１０が双方向にメッセージのやり取りを行う手順の例を示すシーケンス図である。図２４と図２５は一連の手順の流れを示している。即ち、図２４に示す手順の実行後に、図２５に示す手順が実行される。
Next, an example of a specific service execution procedure using the cooperative operation of the receiving device 4, the
24 and 25 are sequence diagrams illustrating an example of a procedure for realizing an example of a specific service, in which the reception apparatus 4 and the
ここでは、テレビで放送される音楽番組とピアノ玩具との連携サービスを例とする。
このサービスは、放送される音楽番組の中での演奏に合わせてピアノ玩具の鍵盤が光る「お手本モード」と、ピアノ玩具の鍵盤を叩くことでその音階が受信装置４の画面上に表示される「練習モード」とで構成される。前提として、受信装置４と連携端末５とにおいて、番組に連動したウェブアプリが実行されている。以下で説明する手順において、受信装置４や連携端末５の動作は、それぞれの装置で稼働するアプリの動作である。また、受信装置４と連携端末５とのペアリングは既に完了している。また、連携端末５は、接続可能なＩｏＴ機器１０のリストを既に保持している。
Here, a cooperation service between a music program broadcast on a television and a piano toy is taken as an example.
In this service, the “model mode” in which the keyboard of the piano toy shines according to the performance in the broadcast music program, and the scale is displayed on the screen of the receiving device 4 by tapping the keyboard of the piano toy. It consists of “practice mode”. As a premise, a web application linked to a program is executed in the receiving device 4 and the
まず図２４において、受信装置４で稼働するアプリから連携端末５に、現在利用可能なサービス名と、サービスに対応するＩｏＴ機器１０のリストを送信する（ステップＳ１００５）。連携端末５は、受信装置４から受信したＩｏＴ機器１０のリストと、予め保持している接続可能なＩｏＴ機器１０のリストと比較する。該当するＩｏＴ機器１０が接続可能な状態で存在する場合、連携端末５は、例えば通知機能を用いて、ユーザに機器連携サービスが利用可能であること、及び対象となるＩｏＴ機器１０のリストを通知する（ステップＳ１０１０）。なお、ステップＳ１００５およびＳ１０１０の処理は、所定の時間間隔で繰り返し行われてもよい。このときの状態は、図示する「サービス・機器選択前」の状態である。
First, in FIG. 24, the service name currently available and the list of the
ユーザは上記の通知に応じて、サービス及び機器を選択する操作を連携端末５において行う（ステップＳ１０１５）。このユーザの選択に応じて、連携端末５は、ＩｏＴ機器１０に接続要求を行う（ステップＳ１０２０）。このとき、連携端末５が必要に応じてユーザにペアリングキーの入力を要求するようにしてもよい。ＩｏＴ機器１０は、連携端末５からの接続要求に応答して、接続受付を連携端末５に返す（ステップＳ１０２５）。連携端末５は、ＩｏＴ機器１０からの接続受付を受信したことによって接続の成功を認識すると、接続の成功をユーザに通知し、サービス画面に遷移する。また、連携端末５は、接続したＩｏＴ機器１０のデバイスＩＤを受信装置４に通知する（ステップＳ１０３０）。受信装置４は、通知されたデバイスＩＤを保持する。これにより、受信装置４とＩｏＴ機器１０との間で双方向にメッセージをやり取りする準備が完了する。このときの状態は、図示する「サービス・機器選択後」の状態である。
In response to the notification, the user performs an operation for selecting a service and a device on the cooperation terminal 5 (step S1015). In response to the user's selection, the
連携端末の画面には、モードを選択することのできるユーザインタフェースが表示されている。具体的には、ユーザは「お手本モード」と「練習モード」とを選択できる。ここで、ユーザは、連携端末５を操作して「お手本モード」への移行を選択する（ステップＳ１０３５）。ユーザから選択に応じて、連携端末５は、受信装置４に「お手本モード」が選択されたことを通知する（ステップＳ１０４０）。
On the screen of the cooperation terminal, a user interface capable of selecting a mode is displayed. Specifically, the user can select “example mode” and “practice mode”. Here, the user selects the shift to the “example mode” by operating the cooperation terminal 5 (step S1035). In response to the selection from the user, the
受信装置４において稼働するアプリは、不図示のサービスサーバ装置からインターネット等の通信手段を介して、演奏データを取得する。サービスサーバ装置は、放送されている音楽番組の中での演奏に合わせたタイミングで、この演奏データを受信装置４に送信する。演奏データは、放送中の音楽番組において演奏中の曲の楽譜データと、楽譜データ上において現在演奏されている箇所を示すデータ（拍子のデータ、あるいは楽譜データ上の特定の音符を指し示すデータ）とで構成される。受信装置４は、サービスサーバ装置から受信した演奏データに基づいて、画面への表示を行う。具体的には、受信装置４は、上記の楽譜データに基づいて楽譜を画面上に描画するとともに、その楽譜上で現在演奏されている箇所を例えば色を変えるなどして指し示す。 The application running on the receiving device 4 acquires performance data from a service server device (not shown) via communication means such as the Internet. The service server device transmits the performance data to the receiving device 4 at a timing that matches the performance of the broadcast music program. The performance data includes the musical score data of the song being played in the broadcast music program, data indicating the part currently being played on the musical score data (time data, or data indicating a specific note on the musical score data), and Consists of. The receiving device 4 performs display on the screen based on the performance data received from the service server device. Specifically, the receiving device 4 draws a score on the screen based on the above score data, and indicates the part currently being played on the score by changing the color, for example.
図２５に移って、受信装置４は、演奏データをテレビの画面に表示するのと同時に、「演奏個所に応じた鍵盤を光らせる」という命令を含んだメッセージを、連携端末５に送信する（ステップＳ１０４５）。図示する具体例では、この命令は「『ミ』を光らせる」という命令である。そして連携端末５は、その命令を含んだメッセージをＩｏＴ機器１０に送信する（ステップＳ１０５０）。なお、このとき、最初に取得したデバイスＩＤを用いて、このＩｏＴ機器１０がメッセージの送信先として指定されている。図示する例では、鍵盤上の「ミ」のキーの色が、他の色と異なっている。なお、メッセージの送信先として、複数のデバイスＩＤを指定してもよい。また、デバイスＩＤの代わりに、デバイスネーム等、他の識別子を用いて指定してもよい。ＩｏＴ機器１０（ピアノ玩具）は、メッセージに応じて鍵盤の所定のキーを光らせる。なお、このときの状態は、図示する「鍵盤へのメッセージ送信」の状態である。
Moving to FIG. 25, the receiving device 4 displays the performance data on the screen of the television, and at the same time transmits a message including a command “light the keyboard according to the performance location” to the cooperation terminal 5 (step S1045). In the specific example shown in the figure, this command is a command of “light up“ Mi ””. Then, the
次に、ユーザは連携端末５を操作することによって、「練習モード」への移行を選択する（ステップＳ１０５５）。連携端末５は、受信装置４に、「練習モード」へ移行したことを通知する（ステップＳ１０６０）。また、連携端末５は、ＩｏＴ機器１０に、「練習モード」へ移行したことを通知する（ステップＳ１０６５）。この状態において、ユーザは、鍵盤を操作する（ステップＳ１０７０）。
Next, the user selects the transition to the “practice mode” by operating the cooperation terminal 5 (step S1055). The
この状態において、ＩｏＴ機器１０（ピアノ玩具）は、ユーザが鍵盤を叩く都度、どのキーが叩かれたかを表す情報を含んだメッセージを連携端末に送信する（ステップＳ１０７５）。ここでＩｏＴ機器１０から連携端末５に送信されるメッセージ自体には、送信先の受信装置を識別する情報は含まれていない。しかしながら連携端末５は、最初にＩｏＴ機器１０への接続要求を行った受信装置４のＩＤを保持している。そのため、連携端末５は、このＩｏＴ機器と連携している受信装置４のみにメッセージを転送することができる（ステップＳ１０８０）。受信装置４は、どのキーが叩かれたかを表すメッセージを受信し、キーの種類に応じた動作をする。このように、ＩｏＴ機器１０から受信装置４へのメッセージの送信が行われる。なお、図示する具体例では、ＩｏＴ機器１０からは「『ラ』を弾いた」というメッセージが、連携端末５経由で、受信装置４に送られる。受信装置４側では、画面に表示している楽譜上の、叩かれたキーに対応する位置（高さ）を光らせるなどといたビジュアル表現を行う。このときの状態は、図示する「鍵盤からのメッセージ受信」の状態である。
In this state, every time the user hits the keyboard, the IoT device 10 (piano toy) transmits a message including information indicating which key is hit to the cooperation terminal (step S1075). Here, the message itself transmitted from the
以上説明したように、サービスの利用開始時に、連携端末５が、受信装置４とＩｏＴ機器１０とを接続する処理を行う。これによって、以後、受信装置４とＩｏＴ機器１０との間で、連携端末５を経由する形での双方向のメッセージのやり取りが可能となる。
As described above, the
以上説明した実施形態の構成において、受信装置４で実行するサービスから、連携端末５を介して、連携端末と通信接続が可能なＩｏＴ機器１０にメッセージを送ることが可能となる。あるいは、連携端末５から受信装置４とＩｏＴ機器１０との双方に、関連したメッセージを送ることが可能となる。これにより、受信装置４とＩｏＴ機器１０を連携した新たな視聴サービスを実現することが可能となる。
In the configuration of the embodiment described above, it is possible to send a message from the service executed by the receiving device 4 to the
また、以上説明した実施形態によれば、放送通信連携システム１は、受信装置４と、連携端末５（端末装置）とを有する。受信装置４は、放送信号に含まれるコンテンツデータを出力する処理と、放送信号と連携した動作により複数のサービスを提供するアプリケーション（放送マネージドアプリ）を実行する処理とを実行する。連携端末５は、個別のサービスを提供するアプリケーションであるサービスアプリケーション（サービスアプリ、ウェブアプリ）を複数並列で実行させる。受信装置４が実行するアプリケーションに含まれるサービスの機能と、サービスアプリケーションにより提供されるサービスの機能とが連携して、ユーザにサービスを提供する。
Moreover, according to embodiment described above, the broadcast
連携端末５は、サービスアプリケーションを複数並列で実行させる連携アプリ実行制御部５３と、受信装置４と通信する通信入出力部５１１（通信部）とを備える。連携アプリ実行制御部５３は、複数のサービス実行部５３２と、メッセージ判定部５３４３と、メッセージ分配部５３４４と、送信元サービス設定部５３４５とを有する。各サービス実行部５３２は、受信したメッセージを用いてサービスアプリケーションを実行する。メッセージ判定部５３４３は、受信装置４において実行されているアプリケーションから発行され、通信入出力部５１１が受信したメッセージに設定されている送信先の情報に基づいて、メッセージの宛先のサービス実行部５３２を判定する。メッセージ分配部５３４４は、メッセージ判定部５３４３が判定した宛先のサービス実行部５３２にメッセージを出力する。
The
また、メッセージ判定部５３４３は、サービス実行部５３２が発行したメッセージの宛先を判定する。メッセージ分配部５３４４は、サービス実行部５３２により発行されたメッセージの宛先が受信装置４であるとメッセージ判定部５３４３により判定された場合、当該メッセージを通信入出力部５１１により受信装置４に送信する。また、メッセージ分配部５３４４は、サービス実行部５３２により発行されたメッセージの宛先が他のサービス実行部５３２であるとメッセージ判定部５３４３により判定された場合、当該メッセージを宛先と判定された他のサービス実行部５３２に出力する。
Further, the
なお、サービス実行部５３２は、受信装置４において実行されるアプリケーションが提供するサービスの識別子又は他のサービス実行部５３２において実行されるサービスアプリケーションが提供するサービスの識別子を送信先の情報に設定したメッセージを発行してもよい。送信元サービス設定部５３４５は、サービス実行部５３２が発行したメッセージの送信元の情報に、当該メッセージを発行したサービス実行部５３２において実行されるサービスアプリケーションが提供するサービスの識別子を設定する。このとき、メッセージ判定部５３４３は、送信元サービス設定部５３４５により送信元の情報が設定されたメッセージから取得した送信元のサービスの識別子及び送信先のサービスの識別子に基づき、メッセージの宛先が受信装置４であるか他のサービス実行部５３２であるかを判定してもよい。メッセージ分配部５３４４は、メッセージ判定部５３４３により判定された宛先に、サービス実行部５３２により発行されたメッセージを出力する。
Note that the service execution unit 532 sets the identifier of the service provided by the application executed in the receiving device 4 or the identifier of the service provided by the service application executed in the other service execution unit 532 as the transmission destination information. May be issued. The transmission source
また、連携アプリ実行制御部５３は、サービス実行部５３２と受信装置４との間、又は、異なるサービス実行部５３２の間で通信チャンネルの確立及び解除を行う端末連携部５３１をさらに備えてもよい。この場合、メッセージ判定部５３４３は、受信装置４から受信したメッセージに設定されている通信チャンネルの識別情報に基づいてメッセージの宛先となるサービス実行部５３２を判定する処理と、サービス実行部５３２から発行されたメッセージに設定されている通信チャンネルの識別情報に基づいてメッセージの宛先が他のサービス実行部５３２であるか受信装置４であるかを判定する処理との少なくとも一方を行う。メッセージ分配部５３４４は、メッセージ判定部５３４３により判定された宛先に、サービス実行部５３２により発行されたメッセージを出力する。
Moreover, the cooperation application
また、受信装置４は、放送信号を受信し、放送信号に含まれるコンテンツデータを出力する受信機機能部と、アプリケーションに含まれる複数のサービスの機能を複数並列で実行させるアプリ実行部４０９と、連携端末５と通信する通信入出力部４０６（通信部）とを有する。受信機機能部は、例えば、放送受信部４０１、分離部４０２、映像復号部４０３、音声復号部４０４、データ放送実行部４０５、リモコン入力制御部４０７、電源制御部４０８、映像合成部４１３、映像表示部４１４、音声合成部４１５、音声出力部４１６などである。アプリ実行部４０９は、サービス実行部４２１と、メッセージ判定部４２３３と、メッセージ分配部４２３４と、送信元サービス設定部４２３５を備える。サービス実行部４２１はそれぞれ、受信機機能部から取得した情報と、受信したメッセージの記述とを用いて、アプリケーションに含まれるサービスの機能のそれぞれを実行する。メッセージ判定部４２３３は、連携端末５において実行されているサービスアプリケーションから発行され、通信入出力部４０６が受信したメッセージに設定されている送信先の情報に基づいて、メッセージの宛先のサービス実行部４２１を判定する。メッセージ分配部４２３４は、メッセージ判定部４２３３により判定された宛先のサービス実行部４２１にメッセージを出力する。
In addition, the receiving device 4 receives a broadcast signal and outputs content data included in the broadcast signal, an
また、メッセージ判定部４２３３は、サービス実行部４２１が発行したメッセージの宛先を判定する。メッセージ分配部４２３４は、サービス実行部４２１により発行されたメッセージの宛先が連携端末５であるとメッセージ判定部４２３３により判定された場合、当該メッセージを通信入出力部４０６により連携端末５に送信する。また、メッセージ分配部４２３４は、サービス実行部４２１により発行されたメッセージの宛先が他のサービス実行部４２１であるとメッセージ判定部４２３３により判定された場合、当該メッセージを宛先と判定された他のサービス実行部４２１に出力する。
Further, the
なお、サービス実行部４２１は、連携端末５において実行されるサービスアプリケーションにより提供されるサービスの識別子又は他のサービス実行部４２１において実行されるサービスの識別子を送信先の情報に設定したメッセージを発行してもよい。送信元サービス設定部４２３５は、サービス実行部４２１が発行したメッセージの送信元の情報に、当該メッセージを発行したサービス実行部４２１において実行されるサービスの識別子を設定する。このとき、メッセージ判定部４２３３は、送信元サービス設定部４２３５により送信元の情報が設定されたメッセージから取得した送信元のサービスの識別子及び送信先のサービスの識別子に基づき、メッセージの宛先が連携端末５であるか他のサービス実行部４２１であるかを判定してもよい。メッセージ分配部４２３４は、メッセージ判定部４２３３により判定された宛先にサービス実行部４２１により発行されたメッセージを出力する。
The service execution unit 421 issues a message in which the identifier of the service provided by the service application executed in the
また、受信装置４は、サービス実行部４２１と連携端末５との間、又は、異なるサービス実行部４２１の間で通信チャンネルの確立及び解除を行う端末連携部４１２をさらに備えてもよい。この場合、メッセージ判定部４２３３は、連携端末５から受信したメッセージに設定されている通信チャンネルの識別情報に基づいてメッセージの宛先となるサービス実行部４２１を判定する処理と、サービス実行部４２１から発行されたメッセージに設定されている通信チャンネルの識別情報に基づいてメッセージの宛先が他のサービス実行部４２１であるか連携端末５であるかを判定する処理との少なくとも一方を行う。メッセージ分配部４２３４は、メッセージ判定部４２３３により判定された宛先に、サービス実行部４２１により発行されたメッセージを出力する。
The receiving device 4 may further include a
以上説明した実施形態によれば、ハイブリッドキャストなどの放送通信連携サービスにおいて、放送マネージドアプリのように受信装置で実行されるアプリが1個（サービス提供者が一つ）、連携端末で実行されるアプリが複数個（サービス提供者が複数）ある場合でも、受信装置において実行される1個のアプリに対して連携端末において実行される複数個のアプリが連携することができる。これにより、現行のハイブリッドキャストの運用において、受信装置の実装を変えることなく、連携端末に実装するコンパニオンアプリ（端末側連携アプリ）を改修するだけで、複数のマルチスクリーンサービスを並列して実行することが可能になる。 According to the embodiment described above, in a broadcasting / communication cooperation service such as hybrid cast, one application (one service provider) is executed on the receiving device, such as a broadcast managed application, and is executed on the cooperation terminal. Even when there are a plurality of applications (a plurality of service providers), a plurality of applications executed on the cooperation terminal can cooperate with one application executed on the receiving device. This allows multiple multi-screen services to be executed in parallel simply by modifying the companion app (terminal-side cooperative app) that is implemented on the cooperative terminal without changing the implementation of the receiving device in the current hybrid cast operation. It becomes possible.
また、メッセージの送信時に、メッセージ本体に送信先のサービス識別子を記述するだけで、受信装置または連携端末のいずれが送信先として適切であるかを判定し、送信することができる。これにより、アプリの制作者は、装置内と装置外を意識せず、サービス名を設定するような命令を記述するだけで、適切なアプリにメッセージを送信することができる。 In addition, when a message is transmitted, it is possible to determine and transmit which of the receiving device and the cooperation terminal is appropriate as the transmission destination simply by describing the service identifier of the transmission destination in the message body. As a result, the creator of the application can send a message to an appropriate application simply by writing a command for setting a service name without being conscious of inside and outside the apparatus.
なお、上述の受信装置４及び連携端末５は、内部にコンピュータシステムを有している。そして、受信装置４及び連携端末５の一部の動作の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータシステムが読み出して実行することによって、上記処理が行われる。ここでいうコンピュータシステムとは、ＣＰＵ及び各種メモリやＯＳ、周辺機器等のハードウェアを含むものである。
In addition, the above-mentioned receiving device 4 and the
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
Further, the “computer system” includes a homepage providing environment (or display environment) if a WWW system is used.
The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Furthermore, the “computer-readable recording medium” dynamically holds a program for a short time like a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line. In this case, a volatile memory in a computer system serving as a server or a client in that case, and a program that holds a program for a certain period of time are also included. The program may be a program for realizing a part of the functions described above, and may be a program capable of realizing the functions described above in combination with a program already recorded in a computer system.
１…放送通信連携システム
２…放送送出装置
３…サービスサーバ
４…受信装置
５…連携端末
１０…ＩｏＴ機器（外部機器）
５１…ハードウェア部
５２…ＯＳ部
５３…連携アプリ実行制御部
５４…他アプリ実行制御部
４０１…放送受信部
４０２…分離部
４０３…映像復号部
４０４…音声復号部
４０５…データ放送実行部
４０６…通信入出力部
４０７…リモコン入力制御部
４０８…電源制御部
４０９…アプリ実行部
４１０…アプリ制御部
４１１…放送通信連携部
４１２…端末連携部
４１３…映像合成部
４１４…映像表示部
４１５…音声合成部
４１６…音声出力部
４２１…サービス実行部
４２２…サービス実行管理部
４２３…メッセージ制御部
５１１…通信入出力部
５１２…機器通信入出力部
５３１…端末連携部
５３２−１〜５３２−３…サービス実行部（アプリケーション実行部）
５３３…サービス実行管理部
５３４…メッセージ制御部
５３５…機器連携部
１０１１…アプリ実行部
１０３１…通信入出力部
４２３１…サービス識別管理部
４２３２…メッセージ受信部
４２３３…メッセージ判定部
４２３４…メッセージ分配部
４２３５…送信元サービス設定部
５３４１…サービス識別管理部
５３４２…メッセージ受信部
５３４３…メッセージ判定部
５３４４…メッセージ分配部
５３４５…送信元サービス設定部
５３５１…機器管理部
５３５２，５３５２−１，５３５２−２…機器通信部
DESCRIPTION OF
51 ...
533 ... Service
Claims (6)
通信機能を有する外部機器との間で通信を行う機器通信入出力部と、
連携動作する前記受信装置側アプリケーション及び前記端末側アプリケーションの少なくともいずれかからのメッセージを、前記機器通信入出力部を介して送信する機器連携部と、
を具備することを特徴とする端末装置。 An application execution unit that executes a terminal-side application that operates in cooperation with a receiving-device-side application that operates in a receiving device having a function of receiving broadcasts;
A device communication input / output unit for communicating with an external device having a communication function;
A device cooperation unit that transmits a message from at least one of the reception device side application and the terminal side application that operate in cooperation via the device communication input / output unit;
A terminal device comprising:
をさらに備えることを特徴とする請求項１に記載の端末装置。 When the message including the transmission destination identification information for identifying the transmission destination is received, the message is distributed based on the transmission destination identification information, and the transmission destination indicated by the transmission destination identification information is the external device A message control unit that passes the message to the device cooperation unit to transmit the message to the external device;
The terminal device according to claim 1, further comprising:
前記メッセージ制御部は、前記機器連携部が受信した前記外部機器からの前記メッセージに含まれる送信先識別情報に基づいて、前記メッセージを前記受信装置側アプリケーションまたは前記端末側アプリケーションのいずれかの送信先に分配する、
ことを特徴とする請求項２に記載の端末装置。 The device cooperation unit receives a message from the external device via the device communication input / output unit,
The message control unit sends the message to the destination of either the reception device side application or the terminal side application based on the destination identification information included in the message from the external device received by the device cooperation unit. Distribute to
The terminal device according to claim 2.
ことを特徴とする請求項１から３までのいずれか一項に記載の端末装置。 The device cooperation unit stores a device available service table that holds information indicating whether the external device accepts the service indicated by the service identification information included in the message in association with the attribute of the external device, Determining whether to send the message to the external device based on the service identification information;
The terminal device according to any one of claims 1 to 3, wherein
前記機器連携部は、使用する通信プロトコルに応じた前記機器通信入出力部を介して前記メッセージを前記外部機器に送信する、
ことを特徴とする請求項１から４までのいずれか一項に記載の端末装置。 The device communication input / output unit exists for each type of communication protocol used with the external device,
The device cooperation unit transmits the message to the external device via the device communication input / output unit according to a communication protocol to be used.
The terminal device according to any one of claims 1 to 4, wherein
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017048785A JP6861058B2 (en) | 2017-03-14 | 2017-03-14 | Terminal devices and programs |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017048785A JP6861058B2 (en) | 2017-03-14 | 2017-03-14 | Terminal devices and programs |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018152778A true JP2018152778A (en) | 2018-09-27 |
| JP6861058B2 JP6861058B2 (en) | 2021-04-21 |
Family
ID=63680605
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017048785A Active JP6861058B2 (en) | 2017-03-14 | 2017-03-14 | Terminal devices and programs |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6861058B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112673353A (en) * | 2019-05-28 | 2021-04-16 | 株式会社日立制作所 | Information processing system and control method of information processing system |
| JP7493268B2 (en) | 2020-06-11 | 2024-05-31 | ジョンフン パク | Streaming broadcast support system using Internet of Things devices |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004348748A (en) * | 1997-01-10 | 2004-12-09 | Sharp Corp | Computer readable recording medium having method, system and program of communication recorded thereon |
| JP2009171230A (en) * | 2008-01-16 | 2009-07-30 | Sharp Corp | Content reproduction system, portable terminal unit, and reproduction method |
| JP2013218690A (en) * | 2012-04-07 | 2013-10-24 | Samsung Electronics Co Ltd | Method and system for reproducing content, and recording medium |
-
2017
- 2017-03-14 JP JP2017048785A patent/JP6861058B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004348748A (en) * | 1997-01-10 | 2004-12-09 | Sharp Corp | Computer readable recording medium having method, system and program of communication recorded thereon |
| JP2009171230A (en) * | 2008-01-16 | 2009-07-30 | Sharp Corp | Content reproduction system, portable terminal unit, and reproduction method |
| JP2013218690A (en) * | 2012-04-07 | 2013-10-24 | Samsung Electronics Co Ltd | Method and system for reproducing content, and recording medium |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112673353A (en) * | 2019-05-28 | 2021-04-16 | 株式会社日立制作所 | Information processing system and control method of information processing system |
| JP7493268B2 (en) | 2020-06-11 | 2024-05-31 | ジョンフン パク | Streaming broadcast support system using Internet of Things devices |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6861058B2 (en) | 2021-04-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5253850B2 (en) | Portable information terminal, viewing device, information providing device, device control device, cooperative processing system, and program | |
| JPH10174082A (en) | Two-way tv broadcast system and file access method applied to the system | |
| JP2014010842A (en) | Method to discover application | |
| CN103024525A (en) | Set-top box and method of controlling the same by mobile terminal | |
| JP2009146390A (en) | Information processing apparatus, information processing system, information processing method and program | |
| JP2007079745A (en) | Network connection device, server device, terminal equipment, system, reception method, character input method, transmission method, program, and computer readable recording medium | |
| US20110072083A1 (en) | Communication terminal communicating via communication network | |
| CN109271130A (en) | Audio frequency playing method, medium, device and calculating equipment | |
| JP2013105404A (en) | Apparatus operation support system, apparatus operation support terminal device, apparatus operation support server device, apparatus operation support method, and apparatus operation support program | |
| AU2011314469A1 (en) | Method and apparatus for accessing device based on intuitive selection | |
| CN102065340B (en) | System and method for implementing multimedia synchronous interaction | |
| JP6861058B2 (en) | Terminal devices and programs | |
| JP6726601B2 (en) | Terminal device and program | |
| KR20140123523A (en) | System for synchronizing content transmitted to a digital tv receiver with multiple portable devices with or without internet access | |
| JP2018078380A (en) | Terminal device and program | |
| JP6722566B2 (en) | Terminal device and program | |
| JP6745198B2 (en) | Terminal device, receiving device, and program | |
| JP6872662B2 (en) | Receiver and program | |
| JP2018078384A (en) | Terminal device and program | |
| CN111654753B (en) | Application program starting method and display device | |
| CN101826081A (en) | Method for acquiring network multimedia file in coding control way | |
| JP5670890B2 (en) | Method and terminal for generating and applying electronic service guide information | |
| JP6514847B2 (en) | Apparatus and terminal connection method and program | |
| JP6807214B2 (en) | Terminal devices, receivers and programs | |
| CN106714086B (en) | Voice pairing system and method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20181026 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200127 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200804 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200923 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210302 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210329 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6861058 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |