JP6091551B2 - 表示制御装置、表示制御方法及びプログラム - Google Patents
表示制御装置、表示制御方法及びプログラム Download PDFInfo
- Publication number
- JP6091551B2 JP6091551B2 JP2015120910A JP2015120910A JP6091551B2 JP 6091551 B2 JP6091551 B2 JP 6091551B2 JP 2015120910 A JP2015120910 A JP 2015120910A JP 2015120910 A JP2015120910 A JP 2015120910A JP 6091551 B2 JP6091551 B2 JP 6091551B2
- Authority
- JP
- Japan
- Prior art keywords
- display control
- video
- video data
- bar
- period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
図1は、一般的なシークバーの例を示す図である。このユーザインタフェースでは直線状にバーBが配置される。このバーBは、映像全体のうち再生した量を表示画面上の長さに投影して示す。通常、左端が映像の最初に、右端が映像の最後に対応し、映像の時間の経過とバー上の位置が比例の関係で対応付けられていることが多い。
まず、以降の説明で用いる用語を定義する。
「メタデータ」は、映像に付随して存在するデータで、映像のどの時間点にどんな場面があるかという、映像の特徴を示したデータのことである。具体的には、顔や物の認識情報、景色の認識情報、映像を撮像したビデオカメラに加えられたズームの操作情報、音量の変化情報、音声の認識情報、ユーザ自らによるタグ付け情報のうち、少なくとも一つを含む。例えば、映像の0分14秒16の時間点から子供の顔が映り始める、といった情報がメタデータに含まれる。メタデータは、映像の中に埋め込まれている場合と、映像と分離して管理される場合の両方があるが、本実施形態では後者の場合を想定して説明する。図2に、メタデータの一例を示す。
操作部201は、操作デバイス400と接続され、ユーザからの操作を受け付ける。また、操作部201は、ユーザが映像中のどのフレームを選択したかという情報であるシーク情報を作成する。表示部203は、映像配信装置100から受信した映像を表示デバイス500に出力して表示する。
まず、表示装置200は、映像配信装置100に、ユーザのユーザ嗜好データを送信する(S100)。送信されたユーザ嗜好データは、図4のユーザ嗜好データ・データベース105に保存される(S200)。送信されるユーザ嗜好データの具体例は後述する。
(1)ユーザを識別するID、(2)メタデータのクラスと種類、(3)メタデータに与えられたスコア。
配信準備を開始すると(S701)、次に、映像配信装置100は表示装置200から映像のIDを受け取る(S702)。データベース管理部102は、この映像IDに対応する映像が存在するかを調べ、映像IDの有効性を確認する(S703)。映像IDが有効でなかった場合は、表示装置200にエラーを通知し(S704)、配信準備を終了する(S705)。映像IDが有効であった場合は、映像IDに対応する映像を映像データベース103から読み出す(S706)。
フレームデータは、前述したように、映像から抽出したフレームと、フレームに関するデータとから構成される。フレームデータの例を図8に示す。フレームは映像から抽出され、識別するためのIDが付与される。フレームに関するデータは、例えば図8のXML形式を用いて表現される。図8のXMLには、各フレームについて、フレームが映像のどの時間点から作成されたかという情報と、そのフレームが抽出された原因となるメタデータのクラスと種類とが記述されている。
まず、映像の総時間を、ある適当な数Nで等分割する。次に、分割された各区間それぞれについて、その区間に存在する重要な場面の数と種類をパラメータとして適当なスコアを与える。スコアの与え方には、例えばユーザにとって重要度の高い場面には高いスコアを与える方法や、ユーザが視聴したくないという嗜好を持つ場面には負のスコアを与える方法など、種々の方法が適用可能である。
分割数Nを6、スコアの計算方法として「各区間に存在する重要な場面の数に1を加える」という方法をとったとき、図1のシークバーを非線形なシークバーにしたものを図9に示す。
図10では、ユーザインタフェースデータはXML形式で表現されており、以下のような内容が記述されている。
(1)ユーザインタフェースのクラス(ここではシークバー)、(2)映像の総時間、(3)映像の時間点とシークバーの位置との対応関係。表示装置200はこのようなユーザインタフェースデータを受信し、ユーザインタフェース作成を行うことができる。
前述した通り、映像配信装置100は、映像配信に先立ち、重要な場面に対応するフレームデータを表示装置200に送信している。
配信開始(S1101)すると、映像配信装置100が表示装置200から配信開始の要求を受け取る(S1102)。次に、映像配信装置100は再生開始位置を最初にセットし(S1103)、映像を表示装置200へと送信する(S1104)。
映像配信に先立って表示装置200に送られた、重要な場面に対応するフレームデータの位置がI1〜I10である。
ユーザがシーク動作に入ったときに送るフレームデータの作成については、いくつかの方法が適用可能である。一つ目の方法としては、選択されたフレームから一定の時間だけ離れた時間点においてフレームデータを何個か作成する方法がある。例えば、選択されたフレームが映像の22.50秒目から抽出されたものであった場合、22.50秒から前後2.00秒離れた時間点、および前後1.00秒離れた時間点からフレームデータを作成する。
また、本発明は、以下の処理を実行することによっても実現される。即ち、前述した実施形態の機能を実現するソフトウェア(コンピュータプログラム)を、ネットワーク又は各種のコンピュータ読み取り可能な記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (18)
- 映像データを取得する第1取得手段と、
前記第1取得手段により取得される映像データに係る、映像の内容に関する特徴及び音声の特徴の少なくとも何れかに基づく特徴情報を取得する第2取得手段と、
前記第1取得手段により取得される映像データの再生位置をユーザに指定させるためのバーを表示部に表示させる表示制御手段であって、前記映像データの等しい時間長の異なる期間それぞれに対応する、前記バーの異なる部分の長さが、前記第2取得手段により取得される前記映像の内容に関する特徴及び音声の特徴の少なくとも何れかに基づく特徴情報に応じて異なる前記バーを、前記表示部に表示させる前記表示制御手段とを有することを特徴とする表示制御装置。 - 前記第2取得手段により取得される特徴情報は、前記第1取得手段により取得される映像データから作成されるメタデータであることを特徴とする請求項1に記載の表示制御装置。
- 前記第2取得手段により取得される特徴情報は、前記映像データにおける所定の場面を特定するための情報を含むことを特徴とする請求項1又は2に記載の表示制御装置。
- 前記所定の場面は、前記第2取得手段により取得される特徴情報と、前記特徴情報に基づいて特定される場面の重要度を表すデータとに基づいて特定されることを特徴とする請求項3に記載の表示制御装置。
- 前記重要度を表すデータは、前記特徴情報に基づいて特定される場面に対してユーザごとに設定される重要度を表すことを特徴とする請求項4に記載の表示制御装置。
- 前記所定の場面は、前記特徴情報に基づいて特定される場面のうち、前記重要度を表すデータにより表される重要度が所定の閾値以上の場面であることを特徴とする請求項4又は5に記載の表示制御装置。
- 前記表示制御手段は、前記映像データの等しい時間長の異なる期間それぞれに対応する、前記バーの異なる部分の長さが、当該異なる期間それぞれに前記所定の場面が含まれるか否かに応じて異なる前記バーを、前記表示部に表示させることを特徴とする請求項3乃至6の何れか1項に記載の表示制御装置。
- 前記表示制御手段は、前記映像データの等しい時間長の異なる期間それぞれに対応する、前記バーの異なる部分の長さが、当該異なる期間それぞれに含まれる前記所定の場面の重要度に応じて異なる前記バーを、前記表示部に表示させることを特徴とする請求項3乃至6の何れか1項に記載の表示制御装置。
- 前記表示制御手段は、前記映像データの第1期間に前記所定の場面が含まれ、前記第1期間と等しい時間長の第2期間に前記所定の場面が含まれない場合に、前記バーの前記第1期間に対応する部分の長さが前記バーの前記第2期間に対応する部分の長さよりも長い前記バーを前記表示部に表示させることを特徴とする請求項3乃至8の何れか1項に記載の表示制御装置。
- 前記表示制御手段は、前記映像データの第1期間に含まれる前記所定の場面の重要度の合計が所定値以上であり、前記第1期間と等しい時間長の第2期間に含まれる前記所定の場面の重要度の合計が前記所定値より小さい場合に、前記バーの前記第1期間に対応する部分の長さが前記バーの前記第2期間に対応する部分の長さよりも長い前記バーを前記表示部に表示させることを特徴とする請求項3乃至8の何れか1項に記載の表示制御装置。
- 前記表示制御手段は、前記映像データの第1期間に前記所定の場面が所定数以上含まれ、前記第1期間と等しい時間長の第2期間に前記所定の場面が所定数以上含まれない場合に、前記バーの前記第1期間に対応する部分の長さが前記バーの前記第2期間に対応する部分の長さよりも長い前記バーを前記表示部に表示させることを特徴とする請求項3乃至8の何れか1項に記載の表示制御装置。
- 前記所定の場面は、特定のオブジェクトが映像に含まれる場面であることを特徴とする請求項3乃至11の何れか1項に記載の表示制御装置。
- 前記第2取得手段により取得される特徴情報は、映像に含まれる顔、物、及び景色の少なくとも何れかの認識情報、映像を撮像したカメラに加えられたズーム操作に関する情報、音量の変化に関する情報、並びに音声の認識情報の少なくとも何れかを含むことを特徴とする請求項1乃至12の何れか1項に記載の表示制御装置。
- 前記第1取得手段により取得される映像データを、前記表示制御手段により表示部に表示されるバーに基づいてユーザが指定した再生位置から再生する再生制御手段を有することを特徴とする請求項1乃至13の何れか1項に記載の表示制御装置。
- 映像データを取得する第1取得工程と、
前記第1取得工程において取得される映像データに係る、映像の内容に関する特徴及び音声の特徴の少なくとも何れかに基づく特徴情報を取得する第2取得工程と、
前記第1取得工程において取得される映像データの再生位置をユーザに指定させるためのバーを表示部に表示させる表示制御工程であって、前記映像データの等しい時間長の異なる期間それぞれに対応する、前記バーの異なる部分の長さが、前記第2取得工程により取得される前記映像の内容に関する特徴及び音声の特徴の少なくとも何れかに基づく特徴情報に応じて異なる前記バーを、前記表示部に表示させる前記表示制御工程とを有することを特徴とする表示制御装置の表示制御方法。 - 前記第2取得工程において取得される特徴情報は、前記第1取得工程において取得される映像データから作成されるメタデータであることを特徴とする請求項15に記載の表示制御方法。
- 前記第2取得工程において取得される特徴情報は、前記映像データにおける所定の場面を特定するための情報を含むことを特徴とする請求項15又は16に記載の表示制御方法。
- コンピュータを、請求項1乃至14の何れか1項に記載の表示制御装置の各手段として機能させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015120910A JP6091551B2 (ja) | 2015-06-16 | 2015-06-16 | 表示制御装置、表示制御方法及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015120910A JP6091551B2 (ja) | 2015-06-16 | 2015-06-16 | 表示制御装置、表示制御方法及びプログラム |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010278288A Division JP5765927B2 (ja) | 2010-12-14 | 2010-12-14 | 表示制御装置及び表示制御装置の制御方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015216647A JP2015216647A (ja) | 2015-12-03 |
| JP6091551B2 true JP6091551B2 (ja) | 2017-03-08 |
Family
ID=54753101
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015120910A Expired - Fee Related JP6091551B2 (ja) | 2015-06-16 | 2015-06-16 | 表示制御装置、表示制御方法及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6091551B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6864833B2 (ja) * | 2017-06-05 | 2021-04-28 | 株式会社Jvcケンウッド | チャット端末装置、チャットシステム、チャット表示方法、及びチャット表示プログラム |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4325071B2 (ja) * | 2000-04-07 | 2009-09-02 | ソニー株式会社 | デジタルビデオ再生方法及びデジタルビデオ再生装置 |
| JP4593842B2 (ja) * | 2001-08-03 | 2010-12-08 | キヤノン株式会社 | 動画像検索装置及びその制御方法 |
| JP2006345929A (ja) * | 2005-06-13 | 2006-12-28 | Olympus Medical Systems Corp | 画像表示装置 |
| JP2008033743A (ja) * | 2006-07-31 | 2008-02-14 | Fuji Xerox Co Ltd | 時系列データ再生制御のためのプログラム及び装置 |
| WO2008029479A1 (en) * | 2006-09-08 | 2008-03-13 | Panasonic Corporation | Content reproduction device and content reproduction method |
| JP2010211881A (ja) * | 2009-03-11 | 2010-09-24 | Seiko Epson Corp | 再生装置、再生方法、及びプログラム |
-
2015
- 2015-06-16 JP JP2015120910A patent/JP6091551B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015216647A (ja) | 2015-12-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5765927B2 (ja) | 表示制御装置及び表示制御装置の制御方法 | |
| US10115433B2 (en) | Section identification in video content | |
| KR102392497B1 (ko) | 자막 및 더빙에 대한 선호도의 자동 검출 | |
| CN102113009B (zh) | 注释媒体内容项目 | |
| US20160232696A1 (en) | Method and appartus for generating a text color for a group of images | |
| US10334300B2 (en) | Systems and methods to present content | |
| JP4360390B2 (ja) | 情報処理装置および方法、プログラム、並びに記録媒体 | |
| EP2816564B1 (en) | Method and apparatus for smart video rendering | |
| US10496243B2 (en) | Method and apparatus for color detection to generate text color | |
| US10503778B2 (en) | Methods, systems, and media for associating scenes depicted in media content with a map of where the media content was produced | |
| US11792205B2 (en) | Location based authentication | |
| CN109074347A (zh) | 具有限制交互性的实时内容编辑 | |
| JP2002170119A (ja) | 画像認識装置、画像認識方法及び記録媒体 | |
| JP5798451B2 (ja) | 情報処理装置およびその方法 | |
| CN108463997A (zh) | 支持众包视频 | |
| CN111698261B (zh) | 基于流媒体的视频播放方法、装置、设备及存储介质 | |
| JP2005277847A (ja) | 画像再生システム、画像送信装置、画像受信装置、画像再生方法、画像再生プログラム、記録媒体 | |
| JP6091551B2 (ja) | 表示制御装置、表示制御方法及びプログラム | |
| KR102247532B1 (ko) | 비디오 장면 모아보기 제공 방법, 서버 및 시스템 | |
| US20230260549A1 (en) | Information processing apparatus, information processing method, and program | |
| WO2012132530A1 (ja) | 映像処理システム、映像処理方法、映像処理装置及びその制御方法と制御プログラムを格納した記憶媒体 | |
| JP4225701B2 (ja) | 要約映像特定装置、および要約映像特定方法 | |
| KR101866964B1 (ko) | 스트리밍 미디어 중계 장치 및 그 방법 | |
| JP7365195B2 (ja) | カラオケシステム | |
| WO2018201195A1 (en) | Devices, systems and methodologies configured to enable generation, capture, processing, and/or management of digital media data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160414 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160524 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160719 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170110 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170207 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6091551 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |