JP2016111492A - 端末装置、サーバ装置、及びプログラム - Google Patents
端末装置、サーバ装置、及びプログラム Download PDFInfo
- Publication number
- JP2016111492A JP2016111492A JP2014246515A JP2014246515A JP2016111492A JP 2016111492 A JP2016111492 A JP 2016111492A JP 2014246515 A JP2014246515 A JP 2014246515A JP 2014246515 A JP2014246515 A JP 2014246515A JP 2016111492 A JP2016111492 A JP 2016111492A
- Authority
- JP
- Japan
- Prior art keywords
- content
- data
- video
- program
- elapsed time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
図1は、本実施形態に係る放送システムの概略構成図を示している。図1に示すように、放送システムは、放送波を送出する放送局1と、テレビ受像機2と、携帯端末3と、サーバ装置5とを有する。そして、放送システムは、テレビ番組に連動したコンテンツを、放送と好適に同期して実行することが可能なシステムである。携帯端末3及びサーバ装置5は、ネットワーク4を介して電気的に接続している。
図2は、携帯端末3の概略構成を示すブロック図である。図2に示すように、携帯端末3は、主に、マイク31と、カメラ32と、通信部33と、記憶部34と、制御部35と、表示部36と、音声出力部37とを有する。
次に、テレビ受像機2に表示されている放送映像とコンテンツアプリに基づくコンテンツDt2とを同期させる処理(「コンテンツ同期処理」とも呼ぶ。)について詳しく説明する。
図5は、携帯端末3が実行するコンテンツ同期処理の手順を示すフローチャートである。携帯端末3は、図5のフローチャートの処理を、例えば、コンテンツアプリを起動する旨の入力を検知した場合に実行する。
次に、上述の実施形態に好適な各変形例について説明する。なお、これらの各変形例は、組み合わせて上述の実施例に適用してもよい。
生放送番組の場合、携帯端末3は、照合用データDt1及びコンテンツDt2を予めサーバ装置5から取得することができない。そこで、この場合、放送システムは、放送局1による放送電波の送出タイミングを所定時間幅だけ遅延させ、サーバ装置5は、遅延された放送前の生放送番組の照合用データDt1の生成及び携帯端末3への送信を行い、コンテンツ同期処理を携帯端末3に実行させてもよい。
携帯端末3は、コンテンツ同期処理の実行時にサーバ装置5から照合用データDt1を受信するのに代えて、照合用データDt1を予め記憶してもよい。例えば、携帯端末3は、コンテンツアプリのダウンロード時などに、照合用データDt1及びコンテンツDt2をダウンロードして記憶してもよい。
携帯端末3の経過時間認識部53は、コンテンツ同期処理に要する時間を考慮して、コンテンツ実行部54に通知する経過時間Tpを決定してもよい。
照合用特徴量Frtに代えて、携帯端末3は、放送番組で使用される映像又は音声データそのものを、番組の経過時間と関連付けて照合用データDt1として記憶し、カメラ32又はマイク31から入力された映像又は音声データと直接比較してもよい。
携帯端末3は、マイク31とカメラ32の一方のみを有していてもよい。具体的には、携帯端末3は、マイク31から入力された音声データに基づき抽出特徴量Fetを算出する場合、カメラ32を有していなくともよい。同様に、携帯端末3は、カメラ32から入力された映像データに基づき抽出特徴量Fetを算出する場合、マイク31を有していなくともよい。
2 テレビ受像機
3 携帯端末
4 ネットワーク
5 サーバ装置
Claims (8)
- 番組と関連するコンテンツを実行する端末装置であって、
前記番組の放送映像又は放送音声に関する照合用データを記憶する記憶手段と、
テレビ受像機が出力する映像を撮影する撮影手段が生成した映像データ又は前記テレビ受像機が出力する音声を電気信号に変換する音声入力手段が生成した音声データを取得するデータ取得手段と、
前記照合用データを参照することで、前記映像データ又は前記音声データから、前記テレビ受像機が出力する映像の前記番組の開始からの経過時間を認識する経過時間認識手段と、
前記経過時間に基づき、前記コンテンツと前記テレビ受像機が出力する映像とを同期させて前記コンテンツを実行するコンテンツ実行手段と、
を有することを特徴とする端末装置。 - ネットワークを介してサーバ装置と通信を行う通信手段をさらに備え、
前記記憶手段は、前記通信手段が前記サーバ装置から受信した照合用データを記憶することを特徴とする請求項1に記載の端末装置。 - 前記映像データ又は音声データから特徴量を抽出する特徴量抽出手段をさらに備え、
前記記憶手段は、前記照合用データとして、前記番組の各時点での放送映像又は放送音声の特徴量と、前記番組の開始からの経過時間とを関連付けて記憶し、
前記経過時間算出手段は、前記特徴量抽出手段が抽出した特徴量に最も近似する特徴量を前記照合用データから検索することで、前記経過時間を認識することを特徴とする請求項1または2に記載の端末装置。 - 前記コンテンツは、前記番組の開始時点からの経過時間毎に対応するデータを含み、
前記コンテンツ実行手段は、前記経過時間認識手段が認識した経過時間に対応する前記データを使用して前記コンテンツの実行を開始することを特徴とする請求項1〜3のいずれか一項に記載の端末装置。 - 前記記憶手段は、前記テレビ受像機のセカンドスクリーンとして表示すべき映像データを前記コンテンツとして記憶し、
前記コンテンツ実行手段は、前記経過時間に基づき、前記テレビ受像機が出力する映像と同期させて前記映像データを表示することを特徴とする請求項1〜4のいずれか一項に記載の端末装置。 - 前記記憶手段は、前記コンテンツとして、音声を採点するための採点情報を、前記番組の開始時点からの経過時間に対応付けて記憶し、
前記コンテンツ実行手段は、前記経過時間に基づき、前記採点情報を参照して、前記音声入力手段により入力された音声の採点を行うことを特徴とする請求項1〜4のいずれか一項に記載の端末装置。 - 請求項1〜6のいずれか一項に記載の端末装置と、前記番組が生放送番組の場合に、前記テレビ受信機に受信させる放送電波の送出タイミングを所定時間幅だけ遅延させる放送システムと通信を行うサーバ装置であって、
前記番組が生放送番組の場合に、前記放送システムが生成した放送用の映像又は音声のデータと、前記コンテンツ実行手段が実行するコンテンツとを、前記放送システムから即時に取得する取得手段と、
前記取得手段が取得した放送用の映像又は音声のデータに基づき、映像又は音声に関する照合用データを生成する照合用データ生成手段と、
前記照合用データ生成手段が生成した照合用データと、前記取得手段が取得した前記コンテンツとを前記端末装置に送信するデータ送信手段と、
を有することを特徴とするサーバ装置。 - 番組と関連するコンテンツを実行し、前記番組の放送映像又は放送音声に関する照合用データを参照するコンピュータが実行するプログラムであって、
テレビ受像機が出力する映像を撮影する撮影手段が生成した映像データ又は前記テレビ受像機が出力する音声を電気信号に変換する音声入力手段が生成した音声データを取得するデータ取得手段と、
前記照合用データを参照することで、前記映像データ又は前記音声データから、前記テレビ受像機が出力する映像の前記番組の開始からの経過時間を認識する経過時間認識手段と、
前記経過時間に基づき、前記コンテンツと前記テレビ受像機が出力する映像とを同期させて前記コンテンツを実行するコンテンツ実行手段
として前記コンピュータを機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014246515A JP6433273B2 (ja) | 2014-12-05 | 2014-12-05 | 端末装置、サーバ装置、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014246515A JP6433273B2 (ja) | 2014-12-05 | 2014-12-05 | 端末装置、サーバ装置、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016111492A true JP2016111492A (ja) | 2016-06-20 |
JP6433273B2 JP6433273B2 (ja) | 2018-12-05 |
Family
ID=56124655
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014246515A Active JP6433273B2 (ja) | 2014-12-05 | 2014-12-05 | 端末装置、サーバ装置、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6433273B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6163680B1 (ja) * | 2016-10-27 | 2017-07-19 | エヴィクサー株式会社 | コンテンツ再生プログラム及びコンテンツ再生装置 |
CN108718420A (zh) * | 2018-07-06 | 2018-10-30 | 青岛海信传媒网络技术有限公司 | 一种电视时间同步的方法及装置 |
WO2019182075A1 (ja) * | 2018-03-23 | 2019-09-26 | ヤマハ株式会社 | 情報処理方法および情報処理装置 |
WO2022190717A1 (ja) | 2021-03-11 | 2022-09-15 | ヤマハ株式会社 | コンテンツデータ処理方法およびコンテンツデータ処理装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006005897A (ja) * | 2004-05-19 | 2006-01-05 | Dowango:Kk | 端末装置、コンテンツ配信システム、情報出力方法、情報出力プログラム |
JP2007053604A (ja) * | 2005-08-18 | 2007-03-01 | Kddi Corp | 映像信号のフレーム同期方式 |
JP2011035576A (ja) * | 2009-07-31 | 2011-02-17 | Nippon Hoso Kyokai <Nhk> | デジタル放送受信機、送信機及び端末装置 |
US20120017236A1 (en) * | 2010-07-13 | 2012-01-19 | Sony Computer Entertainment Inc. | Supplemental video content on a mobile device |
JP2013055479A (ja) * | 2011-09-02 | 2013-03-21 | Nippon Hoso Kyokai <Nhk> | 通信コンテンツ生成装置および通信コンテンツ生成プログラム |
JP2014168167A (ja) * | 2013-02-28 | 2014-09-11 | Video Research:Kk | 情報表示装置及びシステム及び方法及びプログラム |
JP2014192870A (ja) * | 2013-03-28 | 2014-10-06 | Dainippon Printing Co Ltd | 多言語同時再生システム |
-
2014
- 2014-12-05 JP JP2014246515A patent/JP6433273B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006005897A (ja) * | 2004-05-19 | 2006-01-05 | Dowango:Kk | 端末装置、コンテンツ配信システム、情報出力方法、情報出力プログラム |
JP2007053604A (ja) * | 2005-08-18 | 2007-03-01 | Kddi Corp | 映像信号のフレーム同期方式 |
JP2011035576A (ja) * | 2009-07-31 | 2011-02-17 | Nippon Hoso Kyokai <Nhk> | デジタル放送受信機、送信機及び端末装置 |
US20120017236A1 (en) * | 2010-07-13 | 2012-01-19 | Sony Computer Entertainment Inc. | Supplemental video content on a mobile device |
JP2013055479A (ja) * | 2011-09-02 | 2013-03-21 | Nippon Hoso Kyokai <Nhk> | 通信コンテンツ生成装置および通信コンテンツ生成プログラム |
JP2014168167A (ja) * | 2013-02-28 | 2014-09-11 | Video Research:Kk | 情報表示装置及びシステム及び方法及びプログラム |
JP2014192870A (ja) * | 2013-03-28 | 2014-10-06 | Dainippon Printing Co Ltd | 多言語同時再生システム |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6163680B1 (ja) * | 2016-10-27 | 2017-07-19 | エヴィクサー株式会社 | コンテンツ再生プログラム及びコンテンツ再生装置 |
WO2018078768A1 (ja) * | 2016-10-27 | 2018-05-03 | エヴィクサー株式会社 | コンテンツ再生プログラム及びコンテンツ再生装置 |
KR20190085938A (ko) * | 2016-10-27 | 2019-07-19 | 에빅사 가부시키가이샤 | 콘텐츠 재생 프로그램 및 콘텐츠 재생 장치 |
KR102607703B1 (ko) | 2016-10-27 | 2023-11-30 | 에빅사 가부시키가이샤 | 콘텐츠 재생 프로그램 및 콘텐츠 재생 장치 |
WO2019182075A1 (ja) * | 2018-03-23 | 2019-09-26 | ヤマハ株式会社 | 情報処理方法および情報処理装置 |
JP2019169852A (ja) * | 2018-03-23 | 2019-10-03 | ヤマハ株式会社 | 情報処理方法および情報処理装置 |
JP7102826B2 (ja) | 2018-03-23 | 2022-07-20 | ヤマハ株式会社 | 情報処理方法および情報処理装置 |
CN108718420A (zh) * | 2018-07-06 | 2018-10-30 | 青岛海信传媒网络技术有限公司 | 一种电视时间同步的方法及装置 |
CN108718420B (zh) * | 2018-07-06 | 2021-05-18 | 青岛海信传媒网络技术有限公司 | 一种电视时间同步的方法及装置 |
WO2022190717A1 (ja) | 2021-03-11 | 2022-09-15 | ヤマハ株式会社 | コンテンツデータ処理方法およびコンテンツデータ処理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6433273B2 (ja) | 2018-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102043088B1 (ko) | 멀티미디어 스트림들의 동기화 | |
US20170034263A1 (en) | Synchronized Playback of Streamed Audio Content by Multiple Internet-Capable Portable Devices | |
EP2954511B1 (en) | Systems and methods for interactive broadcast content | |
US20070260634A1 (en) | Apparatus, system, method, and computer program product for synchronizing the presentation of media content | |
JP2021530927A (ja) | フレーム精度のコンテンツ修正の円滑化を支援する、低レートフィンガープリンティングを用いた補間に基づく時間マッピングの確立及び使用 | |
JP6433273B2 (ja) | 端末装置、サーバ装置、及びプログラム | |
JP6721510B2 (ja) | 2つの電子デバイスにおいて再生を同期させるための方法及び装置 | |
EP3011691B1 (en) | System and method to assist synchronization of distributed play out of control | |
US10981056B2 (en) | Methods and systems for determining a reaction time for a response and synchronizing user interface(s) with content being rendered | |
CN103460128A (zh) | 借助智能电话和音频水印的多种语言同步电影配音 | |
US8781291B2 (en) | Data processing device, data processing method, and program | |
JP2006528859A (ja) | オーディオとビデオを同期させるための指紋生成及び検出の方法及び装置 | |
JP4621758B2 (ja) | コンテンツ情報再生装置、コンテンツ情報再生システム、および情報処理装置 | |
JP6289651B2 (ja) | 2つの電子機器での再生を同期させる方法及び装置 | |
WO2013024704A1 (ja) | 画像処理装置および方法、並びにプログラム | |
CN110047497B (zh) | 背景音频信号滤除方法、装置及存储介质 | |
CN111028818A (zh) | 合唱方法、装置、电子设备和存储介质 | |
KR102167276B1 (ko) | 복수의 동영상 처리를 위한 장치 및 방법 | |
WO2017096897A1 (zh) | 媒体内容播放方法、设备和系统 | |
JP4304615B2 (ja) | データ処理装置、データ処理方法及びデータ処理プログラム | |
US20210297731A1 (en) | Video distribution system, video generation method, and reproduction device | |
KR20200028085A (ko) | 방송 콘텐츠 송출을 위한 장치 및 방법 | |
TW201619953A (zh) | 複合節拍特效系統及複合節拍特效處理方法 | |
KR101403969B1 (ko) | 타임코드를 상실한 동영상의 자막 재생 시점 인식 방법 | |
CN114007091A (zh) | 一种视频处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170710 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180510 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180515 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180627 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180724 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180907 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180925 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181003 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181023 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181106 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6433273 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |