JP2017517995A - 要約コンテンツサービスのための放送受信装置及び方法 - Google Patents

要約コンテンツサービスのための放送受信装置及び方法 Download PDF

Info

Publication number
JP2017517995A
JP2017517995A JP2017505434A JP2017505434A JP2017517995A JP 2017517995 A JP2017517995 A JP 2017517995A JP 2017505434 A JP2017505434 A JP 2017505434A JP 2017505434 A JP2017505434 A JP 2017505434A JP 2017517995 A JP2017517995 A JP 2017517995A
Authority
JP
Japan
Prior art keywords
content
video
event
section
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017505434A
Other languages
English (en)
Other versions
JP6419306B2 (ja
Inventor
リ，ジ−ヒョ
チェ，サン−ジン
カン，ジ−ホン
リ，ヨン−フン
キム，スン−ウォン
キム，ジュ−ヨン
ユ，ジョン−ウク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2014/007280 external-priority patent/WO2015156452A1/ko
Publication of JP2017517995A publication Critical patent/JP2017517995A/ja
Application granted granted Critical
Publication of JP6419306B2 publication Critical patent/JP6419306B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G06V20/47—Detecting features for summarising video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

要約コンテンツサービスのための放送受信装置及び方法が開示される。本発明に係る放送受信装置の要約コンテンツ生成方法は、コンテンツを受信するステップと、コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出するステップと、検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成するステップとを含む。それにより、放送受信装置は、ユーザの要請したコンテンツに対する要約コンテンツを生成することができる。

Description

本発明は、放送受信装置及び方法に関し、より詳細には、スポーツ関連コンテンツに対する要約コンテンツサービス提供のための放送受信装置及び方法に関する。
従来の放送受信装置は、現在ディスプレイ中のコンテンツに対する要約コンテンツ（以下、ハイライト映像という）を外部から受信して画面上にディスプレイする。このようなハイライト映像は、ハイライト映像に関連するコンテンツ再生が一定時間経過した後に外部サーバから生成されて放送受信装置に伝送される。
例えば、サッカーのようなスポーツコンテンツに対するハイライト映像の場合、外部サーバは、サッカー試合の前半或いは前後半が全て終わった後に、当該スポーツコンテンツに対するハイライト映像を生成して放送受信装置に伝送する。それにより、放送受信装置は、サッカー試合の前半或いは前後半が終わった後に当該サッカー試合に関連し、外部サーバから生成されたハイライト映像を受信して画面上にディスプレイする。
よって、視聴者は、現在視聴中のサッカー試合の一部を視聴できていない状況でゴールの映像のようなイベントが発生した場合、当該イベントに関連する映像区間を含むハイライト映像が外部サーバから受信される前までに当該イベントが発生した映像区間の視聴を待たなければならないという不都合を強いられていた。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の第１の目的は、放送受信装置で再生中のコンテンツに対する要約コンテンツをリアルタイムで生成することにある。
更に、本発明の第２の目的は、放送受信装置で再生中のコンテンツ及び要約コンテンツのうち少なくとも１つを再生する要約コンテンツサービスを提供することにある。
以上のような目的を達成するための本発明の一実施形態に係る放送受信装置の要約コンテンツ生成方法は、コンテンツを受信するステップと、前記コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出するステップと、前記検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成するステップとを含む。
そして、前記コンテンツは、スポーツ関連コンテンツであり、前記放送受信装置は、スポーツ関連コンテンツに対する要約コンテンツに関連する試合状況条件を保存し、前記検出するステップは、前記コンテンツに含まれた映像データを分析し、前記保存された試合状況条件に対応する映像区間を少なくとも１つのイベント区間として検出してよい。
なお、前記検出するステップは、前記コンテンツに含まれたオーディオデータを分析し、予め設定された臨界レベル以上のオーディオ信号レベルを有する映像区間をイベント区間として検出してよい。
そして、前記検出するステップは、前記コンテンツに含まれたオーディオデータに対するＳＴＴ分析を行ってテキストデータを生成し、前記生成されたテキストデータを用いて要約コンテンツに関連する予め設定された単語の含まれた映像区間をイベント区間として検出してよい。
なお、前記生成するステップは、前記検出された少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相及び色相別の割合値に基づいて前記コンテンツがスポーツ関連コンテンツか否かを判断するステップと、前記スポーツ関連コンテンツである場合、前記少なくとも１つのイベント区間が検出された時間情報に基づいてコンテンツ要約区間を決定するステップとを含んでよい。
そして、前記判断するステップは、前記少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相のうち予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第１臨界値以上か否かに応じて、前記コンテンツが前記スポーツ関連コンテンツか否かを判断してよい。
なお、前記判断するステップは、前記検出された少なくとも１つのイベント区間に対する映像区間と隣接した周辺映像区間のイメージ情報に含まれた色相のうち前記フィールドカラーに対応する色相の割合値が予め設定された第２臨界値以上か否かに応じて、前記スポーツに対するプレイ状況を判断してよい。
そして、前記判断するステップは、前記検出された少なくとも１つのイベント区間に対する映像区間のイメージから試合進行状況をガイドするガイド領域を抽出し、前記抽出されたガイド領域に基づいて前記スポーツに対するプレイ状況を判断し、前記ガイド領域は、試合スコア及び試合進行時間のうち少なくとも１つを表す領域であってよい。
なお、前記要約コンテンツ区間を決定するステップは、前記少なくとも１つのイベント区間の検出された時間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、前記獲得した前後映像区間と前記少なくとも１つのイベント区間に対する映像区間とを前記コンテンツ要約区間として決定してよい。
そして、前記コンテンツ要約区間を決定するステップは、前記獲得した前後映像区間のうち少なくとも１つのシーン（Ｓｃｅｎｅ）変化発生有無に応じて、前記固定時間を可変してよい。
なお、前記少なくとも１つのイベント区間が検出されると、前記検出された少なくとも１つのイベント区間に対する映像区間からサムネールイメージを獲得するステップと、前記生成された要約コンテンツ及び前記要約コンテンツに関連して予め獲得したサムネールイメージをマッチングさせて保存するステップと、ユーザ命令に応じて、予め保存された前記コンテンツに対する要約コンテンツ及び前記要約コンテンツとマッチングされたサムネールイメージを出力するステップとを更に含んでよい。
そして、前記獲得するステップは、前記サムネールイメージが複数個の場合、前記複数のサムネールイメージのうち予め定義された有効フィールドカラーに対応する色相の数が最も少ないサムネールイメージまたは前記複数のサムネールイメージのそれぞれに含まれた同一のオブジェクトのうちサイズが最も大きいオブジェクトを含むサムネールイメージを獲得してよい。
一方、前記目的を達成するための本発明の別の実施形態に係る放送受信装置は、コンテンツを受信する受信部と、前記コンテンツを出力する出力部と、前記コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出し、前記検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成して前記出力部を介して出力されるように制御する制御部とを含む。
一方、前記目的を達成するための本発明の別の実施形態に係る放送受信装置の要約コンテンツサービス方法は、複数の映像フレームの画素値を比較して要約コンテンツサービスのためのイベント領域を検出するステップと、映像フレームが入力されると、前記入力された映像フレームから前記検出されたイベント領域に対応する領域を検出し、前記対応する領域の文字変化を検知してイベント発生有無を検知するステップと、前記イベント発生の検知された結果に基づいて要約コンテンツを生成するステップとを含む。
そして、前記検出するステップは、複数の映像フレームのうち第１及び第２映像フレーム間の相互対応する各画素領域別の画素差と予め設定された臨界値とを比較し、前記臨界値未満の画素差を有する画素領域の数を算出するステップと、前記臨界値未満の画素差を有する画素領域の数が予め設定された臨界画素数未満である場合、予め設定された臨界回数以上連続的に検出されるか否かを判断するステップと、前記予め設定された臨界回数以上連続的に検出されると、前記臨界値未満の画素差を有する画素領域に基づいて前記イベント領域を検出及び保存するステップとを含んでよい。
なお、前記算出するステップは、前記臨界値未満の画素差を有する画素領域と残りの画素領域の変数を異なるように適用し、前記臨界値未満の画素差を有する画素領域に適用された変数の数から前記画素領域の数を算出してよい。
そして、前記検出するステップは、前記イベント領域を分析してイベント発生有無を判断するためのソース情報を生成するステップを更に含み、前記イベント領域は、スポーツ試合関連スコアボード領域であり、前記ソース情報は、試合時間領域、スコア領域及びチーム領域のうち少なくとも１つを含んでよい。
なお、前記ソース情報を生成するステップは、前記イベント領域内の各画素領域別に設定された変数のうち、画素差の発生を表す変数に設定された画素領域に基づいて前記試合時間領域を含むソース情報を生成して保存してよい。
そして、前記ソース情報を生成するステップは、数字認識アルゴリズムを用いて前記イベント領域から数字を検出し、検出された数字が少なくとも２つ以上の連続的に存在すると、前記数字の検出された画素領域に基づいて前記試合時間領域を含むソース情報を生成して保存してよい。
なお、前記ソース情報を生成するステップは、文字認識アルゴリズムを用いて前記試合時間領域、スコア領域及びチーム領域のうち少なくとも１つを含むソース情報を生成して保存してよい。
そして、前記検知するステップは、前記映像フレームが入力されると、前記イベント領域の各画素領域に対応する前記映像フレームの画素領域を分析し、前記イベント領域に対応する領域が存在するか否かを判断するステップと、前記イベント領域に対応する領域が存在すると、前記ソース情報に基づいて前記イベント領域及び前記イベント領域に対応する領域を分析してイベント発生有無を検知するステップとを含んでよい。
なお、前記判断するステップは、前記イベント領域のうち前記試合時間領域を除く残りの画素領域と、前記残りの画素領域に対応する前記映像フレームの画素領域から算出された画素差のうち、予め設定された臨界値未満の画素差を有する前記映像フレームの画素領域数を獲得するステップと、前記イベント領域のうち前記試合時間領域を除く残りの画素領域数対比前記予め設定された臨界値未満の画素差を有する画素領域数の割合値が予め設定された画素割合値未満である場合、前記イベント領域に対応する領域をイベント領域として判断するステップとを含んでよい。
そして、前記検知するステップは、前記ソース情報にスコア領域が含まれていない場合、前記イベント領域に対応する領域のうち前記試合時間領域を除く残りの画素領域に対応する画素領域に設定された変数に基づいてスコア領域を決定し、前記イベント領域から前記決定されたスコア領域に対応するスコア領域を決定するステップと、数字認識アルゴリズムを用いて前記それぞれのスコア領域から数字を認識して数字変化有無に応じてイベント発生有無を検知するステップとを含んでよい。
なお、前記検知するステップは、前記ソース情報にスコア領域が含まれている場合、前記イベント領域に対応する領域のうち前記スコア領域に対応する領域を検出し、数字認識アルゴリズムを用いて前記検出された領域と前記スコア領域から数字を認識して数字変化有無に応じてイベント発生有無を検知してよい。
そして、前記検知するステップは、前記それぞれのスコア領域から認識された数字の変化に応じてイベントが発生したと検知されると、前記イベント領域及びソース情報を前記イベント領域に対応する領域及び前記領域に関連するソース情報にアップデートしてよい。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置は、コンテンツを録画保存する保存部と、前記コンテンツに対する複数の映像フレームの画素値を比較して要約コンテンツサービスのためのイベント領域を検出し、前記検出されたイベント領域を前記保存部に保存し、前記イベント領域が検出された後、映像フレームが入力されると、前記入力された映像フレームから前記検出されたイベント領域に対応する領域を検出し、前記対応する領域の文字変化を検知してイベント発生有無を検知し、前記イベント発生の検知された結果に基づいて要約コンテンツを生成する制御部とを含む。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置の要約コンテンツサービス方法は、ユーザの選択したコンテンツの映像及びオーディオデータをデコードするステップと、前記デコードされた映像データの映像イメージを分析して少なくとも１つの候補サムネールイメージを決定して保存するステップと、前記デコードされた映像及びオーディオデータのうち少なくとも１つを分析してイベント発生による要約コンテンツを生成するステップと、前記要約コンテンツに含まれた時間情報に基づいて前記要約コンテンツに対応する候補サムネールイメージを前記要約コンテンツの代表サムネールイメージとして決定するステップとを含む。
そして、前記保存するステップは、前記デコードされた映像データの映像イメージのうちズームインショット（Ｚｏｏｍ−Ｉｎ Ｓｈｏｔ）イメージを前記少なくとも１つの候補サムネールイメージとして決定して保存してよい。
なお、前記保存するステップは、前記デコードされた映像データ別の映像イメージを分析して有効フィールドカラーに対応する色相の画素割合値を算出し、算出された画素割合値と予め設定された基準画素割合値とを比較し、前記基準画素割合値未満の画素割合値を有する映像イメージを候補サムネールイメージとして決定して保存してよい。
そして、前記保存するステップは、前記デコードされた映像データ別の映像イメージに含まれたオブジェクトのうち予め設定された臨界サイズ以上のオブジェクトを含む映像イメージを候補サムネールイメージとして決定して保存してよい。
なお、前記保存するステップは、前記少なくとも１つの候補サムネールイメージとして決定された映像イメージと以前の映像イメージとのヒストグラムに基づいてシーン変化率を決定し、前記決定されたシーン変化率と予め設定された基準変化率を比較し、前記予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージを除く残りの予め保存された候補サムネールイメージを削除させてよい。
そして、前記決定するステップは、前記要約コンテンツの再生区間内に属する候補サムネールイメージが予め保存されているか否かを判断するステップと、前記要約コンテンツの再生区間内に属する候補サムネールイメージが予め保存されている場合、前記候補サムネールイメージを代表サムネールイメージとして決定し、前記要約コンテンツの再生区間内に属する候補サムネールイメージが予め保存されていない場合、前記要約コンテンツの再生が終了する区間の映像イメージを代表サムネールイメージとして決定するステップと、前記決定された代表サムネールイメージと前記要約コンテンツとをマッチングさせて保存するステップとを含んでよい。
なお、前記少なくとも１つのコンテンツの映像及びオーディオデータがデコードされると、前記デコードされた映像データの映像イメージ及び前記映像イメージの前後映像イメージを分析して上下左右のうち少なくとも１つの領域にブラックイメージが連続的に検出されるか否かに応じて、前記ブラックイメージの除去された映像イメージを生成するステップを更に含んでよい。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置は、ユーザの選択したコンテンツの映像及びオーディオデータをデコードするデコード部と、少なくとも１つの候補サムネールイメージを保存する保存部と、前記デコードされた映像及びオーディオデータのうち少なくとも１つを分析してイベント発生による要約コンテンツを生成し、前記要約コンテンツに含まれた時間情報に基づいて前記保存部に保存された少なくとも１つの候補サムネールイメージのうち前記要約コンテンツに対応する候補サムネールイメージを前記要約コンテンツの代表サムネールイメージとして決定して前記保存部に保存する制御部とを含む。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置の要約コンテンツサービス方法は、少なくとも１つのコンテンツの映像及びオーディオデータをデコードするステップと、前記デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出するステップと、前記検出されたイベント区間に基づいて要約コンテンツを生成するステップと、ユーザ命令に応じて、前記コンテンツ及び前記要約コンテンツのうち少なくとも１つを出力するステップとを含む。
そして、前記出力するステップは、第１ユーザ命令に応じて、前記コンテンツ及び前記コンテンツに関連する要約コンテンツを同時に出力し、第２ユーザ命令に応じて、前記コンテンツ及び他コンテンツに関連する要約コンテンツを同時に出力してよい。
なお、前記デコードするステップは、前記ユーザ命令が第１ユーザ命令である場合、第１デコード部を介してコンテンツの映像及びオーディオデータをデコードし、第２デコード部を介して前記コンテンツに関連する要約コンテンツをデコードし、前記出力するステップは、前記第１及び第２デコード部を介してデコードされたコンテンツ及び前記コンテンツに関連する要約コンテンツを同時に出力してよい。
そして、デマルチプレキシング部を介して複数のチャネルのうちユーザ命令に対応するチャネルのコンテンツを抽出するステップを更に含み、前記デコードするステップは、前記デマルチプレキシング部から抽出されたコンテンツの映像及びオーディオデータを前記第１デコード部を介してデコードし、前記生成するステップは、前記デマルチプレキシング部から抽出されたコンテンツに基づいて要約コンテンツを生成してよい。
なお、第１及び第２デマルチプレキシング部を介して複数のチャネルのうちユーザ命令に対応するチャネルのコンテンツを抽出するステップを更に含み、前記デコードするステップは、前記第１デマルチプレキシング部から抽出されたコンテンツの映像及びオーディオデータを前記第１デコード部を介してデコードし、前記生成するステップは、前記第２デマルチプレキシング部から抽出されたコンテンツ及びイベント区間の検出された時間情報に基づいて要約コンテンツを生成してよい。
そして、第１ないし第３デマルチプレキシング部を介して複数のチャネルのうちユーザ命令に対応するチャネルのコンテンツを抽出するステップを更に含み、前記デコードするステップは、前記第１デマルチプレキシング部から抽出されたコンテンツの映像及びオーディオデータを前記第１デコード部を介してデコードし、前記第３デマルチプレキシング部から抽出されたコンテンツの映像及びオーディオデータを第３デコード部を介してデコードし、前記生成するステップは、前記第２デマルチプレキシング部から抽出されたコンテンツ及びイベント区間の検出された時間情報に基づいて要約コンテンツを生成してよい。
なお、第１及び第２デマルチプレキシング部を介して第１及び第２コンテンツを抽出するステップを更に含み、前記デコードするステップは、第１デコード部を介して第１デマルチプレキシング部から抽出された第１コンテンツの映像及びオーディオデータをデコードし、第２デコード部を介して前記第２デマルチプレキシング部から抽出された前記第２コンテンツの映像及びオーディオデータをデコードし、第３デコード部を介して前記第３デマルチプレキシング部から抽出された第２コンテンツに関連して予め生成された要約コンテンツをデコードし、前記出力するステップは、前記ユーザ命令が第２ユーザ命令である場合、前記第１及び第２デコード部を介してデコードされた前記第１コンテンツ及び前記第２コンテンツに対する要約コンテンツを同時に出力してよい。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置は、少なくとも１つのコンテンツに含まれた映像及びオーディオデータをデコードするデコード部と、前記デコードされたコンテンツを出力する出力部と、前記デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出するイベント検出部と、前記検出されたイベント区間に基づいて要約コンテンツを生成し、ユーザ命令に応じて、前記コンテンツ及び前記要約コンテンツを同時に出力するように前記出力部を制御する制御部とを含む。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置の要約コンテンツサービス方法は、コンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出するステップと、前記コンテンツから前記検出されたイベント区間に関連する映像区間を選択的に出力するためのブックマーキング（ｂｏｏｋｍａｒｋｉｎｇ）情報を自動生成するステップと、前記生成されたブックマーキング情報を保存するステップとを含む。
そして、前記ブックマーキング情報は、前記イベント区間を含む要約コンテンツ区間の開始及び終了時点の時間情報を含み、前記生成するステップは、前記イベント区間に関連する映像区間に含まれた映像イメージのうち１つの映像イメージを代表サムネールイメージとして決定し、前記代表サムネールイメージとして決定された映像イメージを含むブックマーキング情報を生成してよい。
なお、ユーザ命令に応じて、録画コンテンツまたは前記録画コンテンツに対するブックマーキング情報に含まれた代表サムネールイメージを同時に出力するステップを更に含み、前記出力するステップは、前記ユーザ命令が要約コンテンツサービス命令である場合、前記録画コンテンツの再生時間情報に基づいて前記録画コンテンツに対するブックマーキング情報に含まれた時間情報に対応する映像区間のみを選択的に出力してよい。
そして、前記検出するステップは、デコードされた映像データ、デインターレーシング（Ｄｅｉｎｔｅｒｌａｃｉｎｇ）された映像データ、スケーリングされた映像データ及びタイミング駆動部の駆動制御信号によって出力される映像データのうち１つを分析してイベント区間を検出してよい。
なお、複数のチューナ部のうち第１チューナ部を介して選局されたチャネルのコンテンツを出力するステップと、前記複数のチューナ部のうち第２チューナ部を介して選局されたチャネルのコンテンツを録画保存するステップとを含み、前記検出するステップは、前記第２チューナ部を介して選局されたチャネルのコンテンツに対する映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出してよい。
一方、前記目的を達成するための本発明の更に別の実施形態に係る放送受信装置は、録画コンテンツを保存する保存部と、コンテンツの映像及びオーディオデータを出力可能な形態で信号処理するデータ処理部と、前記信号処理されたコンテンツの映像及びオーディオデータを出力する出力部と、前記信号処理されたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出し、前記コンテンツから前記検出されたイベント区間に関連する映像区間を選択的に出力するためのブックマーキング情報を自動生成して前記保存部に保存する制御部とを含む。
以上説明したように、本発明によれば、放送受信装置はユーザの要請したコンテンツに対する要約コンテンツを生成することができる。更に、本発明に係る放送受信装置は、ユーザの要請したコンテンツ及び当該コンテンツに関連する要約コンテンツ或いは他コンテンツに関連する要約コンテンツを同時に再生することができる。
本発明の一実施形態に係る放送受信装置のブロック図である。 本発明の一実施形態に係る放送受信装置のブロック図である。 本発明の一実施形態に係る放送受信装置で予め検出されたイベント区間に基づいてコンテンツ要約区間を決定する例示図である。 本発明の一実施形態に係る要約コンテンツを生成するための例示図である。 本発明の一実施形態に係る要約コンテンツを生成するための例示図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で予め検出された少なくとも１つのイベント区間に対応する映像区間に基づいて要約コンテンツ生成のためのコンテンツ要約区間を決定する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で要約コンテンツを生成する方法に対するフローチャートである。 本発明の一実施形態に係る放送受信装置でイベント領域を検出する例示図である。 本発明の一実施形態に係る放送受信装置で初期映像フレームに設定された変数を示す例示図である。 本発明の一実施形態に係る放送受信装置で複数の映像フレームに基づいて予め設定された臨界値未満の画素差を有する映像フレームに設定された変数を示す例示図である。 本発明の一実施形態に係る放送受信装置でイベント発生有無を検知する例示図である。 本発明の一実施形態に係る放送受信装置でイベント発生有無を検知する例示図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置でイベント領域を検出する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置でイベント発生有無を検知する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置でイベント領域に対応する領域を検出する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置でブラックイメージを含む映像イメージを加工処理する例示図である。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定する例示図である。 本発明の一実施形態に係る放送受信装置で予め決定された候補サムネールイメージのうちシーン変化率に基づいて最終候補サムネールイメージを決定する例示図である。 本発明の一実施形態に係る放送受信装置に要約コンテンツを生成及び再生する例示図である。 本発明の一実施形態に係る放送受信装置に要約コンテンツを生成及び再生する例示図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で代表サムネールイメージを決定する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で検出されたイベント区間に基づいて要約コンテンツ生成のための有効性有無を判断するための例示図である。 本発明の一実施形態に係る放送受信装置でイベント区間に対する映像区間に基づいて要約コンテンツを生成するための例示図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する例示図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する例示図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係るコンテンツに対する要約コンテンツ生成及び同時再生を行う放送受信装置のブロック図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で要約コンテンツに対する生成及び再生する方法に対するフローチャートである。 本発明の一実施形態に係る放送受信装置で要約コンテンツ区間を出力する例示図である。 本発明の一実施形態に係る放送受信装置で録画コンテンツを出力する例示図である。 本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置のブロック図である。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービス関連ブックマーキング情報を生成する方法のフローチャートである。 本発明の一実施形態に係る放送受信装置で要約コンテンツサービス関連録画コンテンツを出力するフローチャートである。
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。
図１は、本発明の一実施形態に係る放送受信装置のブロック図である。
図１に示すように、放送受信装置１００は、放送サーバ（図示せず）で提供するコンテンツの受信が可能な端末装置として、例えば、スマートテレビ、スマートフォン、タブレットパソコンのような端末装置か、或いは、スマートテレビのような端末装置に放送サーバ（図示せず）から提供されたコンテンツを出力するセットトップボックスであってよい。このような放送受信装置１００は、受信部１１０と、出力部１２０及び制御部１３０を含む。
受信部１１０は、放送サーバ（図示せず）から提供される複数のコンテンツのうち、ユーザによって選択されたチャネルを介してコンテンツを受信する。そして、出力部１２０は、受信部１１０を介して受信されたコンテンツを出力する。具体的に、受信部１１０は、チューナ部１１３を介してユーザの要請したチャネルを選局し、選局されたチャネルを介して放送サーバ（図示せず）から提供される地上波放送或いはケーブル放送のようなコンテンツを受信することができる。このようなコンテンツは映像及びオーディオデータを含んでよく、放送受信装置１００で出力可能な形態で信号処理されてよい。よって、出力部１２０は、出力可能な形態で信号処理された映像及びオーディオデータを含むコンテンツを出力することができる。特に、出力部１２０は、制御部１３０の制御命令に応じて、コンテンツに関連する要約コンテンツを出力するか、或いは、コンテンツ及び要約コンテンツを同時に出力することができる。
制御部１３０は、放送受信装置１００を構成する各構成に対する動作全般を制御する。特に、制御部１３０は、受信部１１０を介して受信されたコンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出する。しかし、本発明はこれに限定されず、制御部１３０は、後述の保存部１６０に予め保存されたコンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出することができる。
このように、コンテンツに対する少なくとも１つのイベント区間が検出されると、制御部１３０は、検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成する。ここで、要約コンテンツは、放送サーバ（図示せず）を介してリアルタイムでストリーミングされるコンテンツまたは保存部１６０に録画保存されたコンテンツに対するハイライト映像であってよい。
このようなコンテンツに対する要約コンテンツが生成されると、制御部１３０は、ユーザ命令に応じて、予め生成された要約コンテンツを出力するように出力部１２０を制御することができる。それにより、出力部１２０は、リアルタイムでストリーミングされるコンテンツまたは録画コンテンツに関連して予め生成された要約コンテンツを出力するか、或いは、コンテンツ及び同一コンテンツに関連する要約コンテンツを同時に出力することができる。更に、出力部１２０は、制御部１３０の制御命令に応じて、リアルタイムでストリーミングされるコンテンツを出力すると同時に、また別のコンテンツに関連して予め保存された要約コンテンツを出力することができる。
以下では、図２を参照して、上述の放送受信装置１００の構成についてより詳細に説明する。
図２は、本発明の一実施形態に係る放送受信装置の細部ブロック部である。
図２に示すように、放送受信装置１００は、上述のように、受信部１１０と、出力部１２０及び制御部１３０を含み、更に、通信部１４０と、データ処理部１５０と、保存部１６０及び入力部１７０を更に含んでよい。
通信部１４０は、コンテンツを提供するコンテンツサーバ（図示せず）と有線または無線で通信を行ってユーザの要請したコンテンツを受信したり、または、放送受信装置１００の動作を制御する遠隔制御装置（図示せず）と通信を行ってユーザ命令を受信することができる。具体的に、通信部１７０は、遠隔制御装置（図示せず）を介してチャネル選局命令、要約コンテンツ生成命令、要約コンテンツ再生命令等のユーザ命令を受信することができる。
このような通信部１４０は、近距離無線通信モジュール（図示せず）、無線通信モジュール（図示せず）等のような多様な通信モジュールを含んでよい。ここで、近距離無線通信モジュールとは、ブルートゥースやＺｉｇｂｅｅ（登録商標）等のような近距離無線通信方式によって、近距離に位置した放送受信装置（図示せず）、ユーザ端末装置（図示せず）等の外部機器と無線通信を行うためのモジュールである。なお、無線通信モジュールとは、Ｗｉ−Ｆｉ、ＩＥＥＥ等のような無線通信プロトコールによって外部ネットワークに接続されて通信を行うモジュールである。その他に、無線通信モジュールは、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）、３ＧＰＰ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ Ｐａｒｔｎｅｒｓｈｉｐ Ｐｒｏｊｅｃｔ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）等のような多様な移動通信規格によって移動通信網に接続して通信を行う移動通信モジュールを更に含んでよい。
データ処理部１５０は、受信部１１０または通信部１４０を介して受信されたコンテンツを逆多重化（Ｄｅｍｕｌｔｉｐｌｅｘｉｎｇ）して映像及びオーディオデータに分離する。一方、上述のコンテンツは、映像及びオーディオデータだけでなく、テキスト情報、ＥＰＧ情報のような付加データを更に含んでよい。この場合、データ処理部１５０は、受信されたコンテンツを逆多重化してコンテンツに含まれた映像及びオーディオデータと付加データとを分離することができる。
その後、コンテンツから映像及びオーディオデータに分離されると、データ処理部１５０は映像及びオーディオデータを出力可能な形態で信号処理する。具体的に、データ処理部１５０は、コンテンツから分離された映像データをデコードした後、デコードされた映像データを出力可能な形態の映像データに変換する。なお、データ処理部１５０は、コンテンツから分離されたオーディオデータをデコードした後、デコードされたオーディオデータをアナログ形態の音響データに変換する。それにより、出力部１２０は、データ処理部１５０を介して信号処理された映像データ及びオーディオデータを映像出力部１２１及びオーディオ出力部１２３を介して出力することができる。
一方、データ処理部１５０を介してコンテンツに含まれた映像及びオーディオデータに対する信号処理が行われると、制御部１３０は、信号処理された映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出し、検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成する。実施形態によって、制御部１３０は、後述するイベント検出部１３１を介してコンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出することができる。その後、制御部１３０は、検出されたイベント区間に対する映像区間を獲得し、獲得した映像区間に基づいて前後映像区間を獲得する。その後、制御部１３０は、獲得されたイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成することができる。
実施形態によって、保存部１６０は、イベント検出モジュール、コンテンツ要約モジュール、要約コンテンツ生成モジュールを保存することができる。よって、制御部１３０は、保存部１６０に予め保存されたイベント検出モジュール、コンテンツ要約モジュール及び要約コンテンツ生成モジュールを用いてコンテンツに対するイベント検出、コンテンツ要約区間決定及び要約コンテンツを生成することができる。
ここで、イベント検出モジュールは、コンテンツに対する要約コンテンツに関連して少なくとも１つのイベント区間を検出するためのモジュールである。そして、コンテンツ要約モジュールは、イベント検出モジュールを通じて検出された少なくとも１つのイベント区間に対する映像区間及び当該映像区間に関連して予め獲得した前後映像区間をコンテンツ要約区間として決定するか否かを判断するためのモジュールである。そして、要約コンテンツ生成モジュールは、コンテンツ要約区間として決定されたイベント区間に対する映像区間及び前後映像区間に基づいて要約コンテンツを生成するためのモジュールである。
よって、制御部１３０は、このようなイベント検出モジュール、コンテンツ要約モジュール及び要約コンテンツ生成モジュールを用いてイベント区間を検出し、検出されたイベント区間に対する映像区間及び当該映像区間に関連する前後映像区間がコンテンツ要約区間として有効か否かを判断し、当該コンテンツに対する要約コンテンツを生成することができる。
一方、制御部１６０は、上述のイベント検出モジュール、コンテンツ要約モジュール及び要約コンテンツ生成モジュールだけでなく、放送受信装置１００の動作を制御するための運営体制プログラム及び運営体制によって管理されて運営体制のリソースを用いて放送受信装置１００の動作を行い、ユーザインターフェースを提供するアプリケーションプログラムを保存することができる。ここで、運営体制は、放送受信装置１００がターンオン（Ｔｕｒｎ Ｏｎ）される場合、保存部１６０で読み込まれ、コンパイルされて放送受信装置１００の各構成を動作させるプログラムであってよい。そして、アプリケーションプログラムは、ユーザの実行命令によって保存部１６０で読み取られて、実行可能な形態で転移されて多様な動作を行う。更に、保存部１６０は、制御部１３０によって処理された各種マルチメディアデータ、コンテンツデータ、外部ソースから受信されたデータを保存することができる。
このような保存部１６０は、ＲＯＭ、ＲＡＭまたは放送受信装置１００に着脱可能なメモリカード（例えば、ＳＤカード、メモリスティック）、非揮発性メモリ、揮発性メモリ、ハードディスクドライブ（ＨＤＤ）またはソリッドステートドライブ（ＳＳＤ）のうち、少なくとも１つで実現されてよい。
入力部１７０は、放送受信装置に具備された操作部（図示せず）或いはタッチパネル（図示せず）のような入力手段から入力されるユーザ命令を受信して制御部１３０に伝達する。ここで、ユーザ命令は、チャネル選局命令、要約コンテンツ生成命令、要約コンテンツ再生命令等であってよい。このような入力部１７０は、ユーザの音声を認識できる音声認識モジュール（図示せず）を含むことができる。このような入力部１７０は、音声認識モジュール（図示せず）を介してチャネル選局命令、要約コンテンツ生成命令、要約コンテンツ再生命令のような多様なユーザ命令に対応するユーザ音声を認識し、認識された音声認識結果を制御部１３０に伝達することができる。
よって、制御部１３０は、入力部１７０または通信部１４０を介してコンテンツに対する要約コンテンツ生成命令が入力されたり受信されると、保存部１６０に予め保存されたイベント検出モジュールを用いてコンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して少なくとも１つのイベント区間を検出することができる。このようなイベント検出モジュールを用いてイベント区間を検出する制御部１３０は、次のような実施形態を通じてコンテンツから少なくとも１つのイベント区間を検出することができる。
一実施形態によって、制御部１３０は、コンテンツに含まれた映像データを分析して保存部１６０に予め保存された試合状況条件に対応する映像区間を少なくとも１つのイベント区間として検出することができる。ここで、保存部１６０に予め保存された試合状況条件は、多様なジャンルのコンテンツのうち、スポーツ関連コンテンツからイベント区間を検出するための条件であってよい。例えば、コンテンツがサッカー関連スポーツコンテンツの場合、試合状況条件は得点場面、選手の入場場面、シュート場面等であってよい。よって、制御部１３０は、スポーツ関連コンテンツに含まれた映像データを分析し、得点場面、選手の入場場面、シュート場面等の試合状況条件に対応する映像区間を少なくとも１つのイベント区間として検出することができる。
別の実施形態によって、制御部１３０は、コンテンツに含まれた映像データを分析して保存部１６０に予め保存された臨界レベル以上のオーディオ信号レベルを有する映像区間をイベント区間として検出することができる。例えば、ゴールが決まった得点場面に関連する映像区間に対応するオーディオデータのオーディオ信号レベルは、一般的なオーディオ信号レベルより高いレベルを有してよい。よって、制御部１３０は、コンテンツに含まれたオーディオデータを分析して予め設定された臨界レベル以上のオーディオ信号レベルを有するオーディオ区間に基づいて当該オーディオ区間に関連する映像区間をイベント区間として検出することができる。
更に別の実施形態によって、制御部１３０は、コンテンツに含まれたオーディオデータに対するＳＴＴ（Ｓｐｅｅｃｈ ｔｏ Ｔｅｘｔ）分析を行ってテキストデータを生成し、生成されたテキストデータを用いて予め設定された単語の含まれた映像区間をイベント区間として検出することができる。例えば、コンテンツがサッカー関連スポーツコンテンツの場合、予め設定された単語は、“ゴール”、“ゴールイン”等であってよく、コンテンツが野球関連スポーツコンテンツの場合、予め設定された単語は“ホームイン”、“ホームラン”等であってよい。
よって、制御部１３０は、スポーツ関連コンテンツが受信されると、保存部１６０に予め保存されたスポーツジャンル別に予め設定された単語のうち、当該スポーツコンテンツに関連して予め設定された単語を獲得する。その後、制御部１３０は、ＳＴＴ分析アルゴリズムを用いてスポーツコンテンツに含まれたオーディオデータからテキストデータを生成し、生成されたテキストデータのうち、当該コンテンツのスポーツ種目に関連して予め設定された単語の含まれたテキストデータを獲得する。このような予め設定された単語の含まれたテキストデータが獲得されると、制御部１３０は予め設定された単語の含まれたテキストデータに関連する映像区間をイベント区間として検出することができる。
しかし、本発明はそれに限定されずに、受信部１１０または通信部１４０は放送サーバ（図示せず）またはコンテンツサーバ（図示せず）からスポーツ関連コンテンツ及び当該スポーツに対するイベント情報を受信することができる。この場合、制御部１３０は、受信したイベント情報に基づいて予め受信したスポーツ関連コンテンツに含まれた映像データ或いはオーディオデータを分析して特定映像区間をイベント区間として検出することができる。
更に、放送サーバ（図示せず）またはコンテンツサーバ（図示せず）から受信されたスポーツ関連コンテンツは映像及びオーディオデータだけでなく、テキスト形態の字幕情報を含む付加データを更に含んでよい。この場合、制御部１３０は、スポーツ関連コンテンツに含まれた付加データを分析して予め設定された単語を含むテキストイメージを含む付加データに関連する映像区間をイベント区間として検出することができる。
このような多様な実施形態によって、コンテンツから少なくとも１つのイベント区間が検出されると、制御部１３０は、保存部１６０に予め保存されたコンテンツ要約モジュールを用いて予め検出された少なくとも１つのイベント区間に対する映像区間を分析して当該映像区間に対するコンテンツがスポーツ関連コンテンツか否かを判断する。
実施形態によって、制御部１３０は、予め検出された少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相及び色相別の割合値に基づいて受信したコンテンツがスポーツ関連コンテンツか否かを判断する。
具体的に、保存部１６０は、各スポーツ種目別に予め定義されたフィールドカラー及び当該フィールドカラーに対する色相の占める割合値に関連して予め設定された第１臨界値を保存することができる。例えば、サッカーまたは野球スポーツのフィールドカラーは、グリーン（Ｇｒｅｅｎ）に予め定義されていてよく、アイスホッケースポーツのフィールドカラーは、ホワイト（Ｗｈｉｔｅ）に予め定義されていてよい。なお、競泳スポーツのフィールドカラーは、ブルー（Ｂｌｕｅ）に予め定義されてよい。このように、スポーツ種目別に各フィールドカラーが定義されてよく、各フィールドカラーが画面上にディスプレイされる割合程度に対する第１臨界値が予め設定されてよい。
よって、制御部１３０は、保存部１６０に予め保存されたスポーツ種目別のフィールドカラー及び第１臨界値に基づいて予め検出された少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相情報のうち、予め定義されたフィールドカラーを含むか否かを判断する。例えば、受信したコンテンツがサッカー関連スポーツコンテンツの場合、制御部１３０は保存部１６０に予め保存されたスポーツ種目別のフィールドカラーのうち、サッカースポーツに対するフィールドカラー（グリーン（Ｇｒｅｅｎ））及び第１臨界値を獲得することができる。その後、制御部１３０は、予め検出されたそれぞれのイベント区間に対する映像区間のイメージ情報に含まれた色相情報のうち、予め獲得したフィールドカラーに対応する色相があるか否かを判断する。判断の結果、予め獲得したフィールドカラーに対応する色相がある場合、制御部１３０は、予め定義されたフィールドカラーに対応する色相の割合値を算出する。すなわち、制御部１３０は、予め検出された少なくとも１つのイベント区間に対する映像区間に適用される色相のうち、予め定義されたフィールドカラーに対応する色相の占める程度を算出する。このような予め定義されたフィールドカラーに対応する色相の割合値は公知となった算出アルゴリズムを通じて算出されてよい。
予め定義されたフィールドカラーに対応する色相の割合値が算出されると、制御部１３０は、算出された割合値が予め設定された第１臨界値以上か否かを判断し、予め設定された第１臨界値以上である場合、当該コンテンツがスポーツ関連コンテンツと判断することができる。
このような判別条件によって予め受信されたコンテンツがスポーツ関連コンテンツと判断されると、制御部１３０は当該スポーツに対するプレイ状況を更に判断することができる。
一実施形態によって、制御部１３０は予め検出された少なくとも１つのイベント区間に対する映像区間と隣接した周辺映像区間のイメージ情報に含まれた色相のうち予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第２臨界値以上か否かに応じて、スポーツに対するプレイ状況を判断することができる。ここで、第２臨界値は、上述の第１臨界値と同一か新たな値に設定された値であってよい。
例えば、イベント区間として検出された第１映像区間のイメージ情報に基づいて第１映像区間に関連するコンテンツがスポーツ関連コンテンツとして決定されると、制御部１３０は、第１映像区間を中心に予め設定された区間に属する以前映像区間及び以後映像区間のイメージ情報を獲得する。
このように、イベント区間として検出された映像区間と隣接した周辺映像区間のそれぞれのイメージ情報に基づいて予め定義されたフィールドカラーに対応する色相が含まれているか否かを判断する。判断の結果、イベント区間として検出された映像区間と隣接した周辺映像区間のうち少なくとも１つの周辺映像区間に予め定義されたフィールドカラーに対応する色相が含まれていない場合、制御部１３０はスポーツに対するプレイが進行されていない状況であると判断することができる。
一方、イベント区間として検出された映像区間と隣接した周辺映像区間のそれぞれのイメージ情報に基づいて予め定義されたフィールドカラーに対応する色相が含まれている場合、制御部１３０は、周辺映像区間に関連する色相のうち予め定義されたフィールドカラーに対応する色相の割合値を算出し、算出されたそれぞれの割合値と予め定義された第２臨界値を比較する。比較の結果、イベント区間として検出された映像区間と隣接する周辺映像区間のうち少なくとも１つの周辺映像区間の割合値が第２臨界値未満である場合、制御部１３０はスポーツに対するプレイが進行されていない状況と判断することができる。一方、イベント区間として検出された映像区間と隣接する周辺映像区間の予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第２臨界値以上である場合、制御部１３０はスポーツに対するプレイが進行されていると判断することができる。
ここで、スポーツに対するプレイが進行されていない状況は、例えば、サッカースポーツの場合はハーフタイムであってよく、野球スポーツの場合は攻守交代が行われる状況であってよい。このようなハーフタイム或いは攻守交代が行われる場合、スポーツ試合の合間に広告コンテンツが挿入されてよい。よって、このような判別条件を通じて、制御部１３０は当該スポーツに対するプレイ進行状況を判断することができる。
更に別の実施形態によって、制御部１３０は、予め検出された少なくとも１つのイベント区間に対する映像区間のイメージから試合進行状況をガイドするガイド領域を抽出し、抽出されたガイド領域に基づいてスポーツに対するプレイ状況を判断することができる。ここで、ガイド領域は、試合スコア及び試合進行時間のうち少なくとも１つを含んでよい。
よって、制御部１３０は、予め検出された少なくとも１つのイベント区間に対する映像区間のイメージのうち、試合進行状況をガイドするガイド領域に含まれた試合スコア或いは試合進行時間を分析して当該スポーツに対するプレイ進行状況を判断することができる。
一方、上述のように、予め検出された少なくとも１つのイベント区間に対する映像区間から受信されたコンテンツがスポーツ関連コンテンツであり、当該スポーツがプレイ進行状況と判断されると、制御部１３０は少なくとも１つのイベント区間の検出された時間を基準に予め設定された固定時間に存在する前後映像区間を獲得する。その後、制御部１３０は、獲得した前後映像区間のうち、シーン（Ｓｃｅｎｅ）場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間がない場合、制御部１３０は少なくとも１つのイベント区間が検出された時間の映像区間と予め設定された固定時間内に存在する前後映像区間とをコンテンツ要約区間として決定することができる。
一方、判断の結果、シーン場面の変化された区間がある場合、制御部１３０は予め設定された固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得する。その後、制御部１３０は、予め検出されたイベント区間に対する映像区間及び可変された固定時間内に属する前後映像区間をコンテンツ要約区間として決定することができる。
すなわち、制御部１３０は、少なくとも１つのイベント区間の検出された時間を基準に予め設定された固定時間に存在する前後映像区間が獲得されると、獲得した前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間がない場合、制御部１３０は少なくとも１つのイベント区間の検出された時間の映像区間と予め設定された固定時間内に属する前後映像区間とをコンテンツ要約区間として決定することができる。
一方、判断の結果、シーン場面の変化された区間がある場合、制御部１３０は予め設定された固定時間内に属する前後映像区間のうち少なくとも１つのイベント区間の検出された時間の区間映像に関連する前後映像区間の属する時間として予め設定された固定時間を可変する。その後、制御部１３０は、少なくとも１つのイベント区間の検出された時間の映像区間と可変された固定時間内に属する前後映像区間とをコンテンツ要約区間として決定することができる。
一方、本発明に係る固定時間は、絶対固定時間を含んでよく、このような絶対固定時間は可変されない。よって、制御部１３０は、固定時間内に存在する前後映像区間のうち、絶対固定時間内に存在する前後映像区間を除く残りの前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間がある場合、制御部１３０は絶対固定時間を除く残りの固定時間内に固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得することができる。
その後、制御部１３０は、予め獲得したイベント区間に対する映像区間及び当該映像区間を基準に予め設定された固定時間或いは可変された固定時間内に存在する前後映像区間を含むコンテンツ要約区間を決定することができる。その後、制御部１３０は、保存部１６０に予め保存された要約コンテンツ生成モジュール１６５に基づいて予め決定されたコンテンツ要約区間に対する要約コンテンツを生成することができる。
一方、制御部１３０は、要約コンテンツ生成のためのコンテンツ要約区間の決定された予め決定されたコンテンツ要約区間に含まれた映像区間のうち、イベント区間に対する映像区間の映像イメージからサムネールイメージを獲得し、獲得したサムネールイメージと当該コンテンツ要約区間に基づいて生成された要約コンテンツを相互マッチングさせて保存部１６０に保存する。
一方、予め決定されたコンテンツ要約区間に関連するイベント区間に対する映像区間から複数のサムネールイメージが獲得されると、制御部１３０は、複数のサムネールイメージのうち、予め定義された有効フィールドカラーに対応する色相の数が最も少ないサムネールイメージまたは複数のサムネールイメージのそれぞれに含まれた同一のオブジェクトのうち、サイズが最も大きいオブジェクトを含むサムネールイメージを代表サムネールイメージとして決定することができる。しかし、本発明はそれに限定されずに、制御部１３０は複数のサムネールイメージのそれぞれに含まれたオブジェクトが相互同一ではない場合、各サムネールイメージに含まれたオブジェクトの数が最も少ないか、或いは、サイズの最も大きいオブジェクトを含むサムネールイメージを代表サムネールイメージとして決定することができる。その後、制御部１３０は、複数のサムネールイメージのうち、代表サムネールイメージと予め生成された要約コンテンツを相互マッチングさせて保存部１６０に保存する。よって、保存部１６０は、コンテンツ別に生成された少なくとも１つの要約コンテンツ及び当該要約コンテンツに対するサムネールイメージを相互マッチングさせて保存することができる。
その後、ユーザから要約コンテンツに対する再生命令が入力されると、制御部１３０は保存部１６０に予め保存された要約コンテンツのうち入力された再生命令に対応する要約コンテンツが再生されるように出力部１２０を制御する。それにより、出力部１２０は、映像出力部１２１を介してユーザの再生命令に対応する要約コンテンツ及び当該要約コンテンツに対するサムネールイメージを出力することができる。
一方、ユーザから画面上にディスプレイされたサムネールイメージのうち１つのサムネールイメージが選択されると、制御部１３０は選択されたサムネールイメージに関連する要約コンテンツから再生されるように出力部１２０を制御することができる。それにより、出力部１２０は、映像出力部１２１を介してユーザから選択されたサムネールイメージに関連する要約コンテンツから順次に出力することができる。
これまで、本発明に係る放送受信装置１００の各構成について詳細に説明してきた。以下では、本発明に係る放送受信装置１００で受信されたスポーツ関連コンテンツから要約コンテンツを生成する動作についてより具体的に説明する。
図３は、本発明の一実施形態に係る放送受信装置で予め検出されたイベント区間に基づいてコンテンツ要約区間を決定する例示図である。
図３に示すように、放送受信装置１００はサッカー関連スポーツコンテンツをディスプレイすることができ、現在ディスプレイされる映像イメージはイベント区間として検出された映像区間であってよい。このようなイベント区間が検出されると、制御部１３０は予め検出されたイベント区間に対する映像区間のイメージ情報に含まれた色相のうち予め定義されたフィールドカラーに対応する色相が含まれているか否かを判断する。ここで、予め定義されたフィールドカラーがグリーンである場合、制御部１３０は予め検出されたイベント区間に対する映像区間のイメージ情報に予め定義されたフィールドカラーであるグリーンカラーを含むか否かを判断する。図示のように、映像区間を示す色相のうち、グリーンカラー３１０が全映像のほとんどを表すことが分かる。このように、当該映像区間を示す色相のうち、予め定義されたフィールドカラーがグリーンカラーである場合、制御部１３０は当該映像区間のグリーンカラー割合値を算出し、算出されたグリーンカラーの割合値が予め設定された第１臨界値以上か否かを判断する。判断の結果、予め設定された第１臨界値以上である場合、制御部１３０は受信されたコンテンツがサッカー関連スポーツコンテンツと判断することができる。
サッカー関連スポーツコンテンツと判断されると、制御部１３０はサッカー試合が進行中か否かを判断する。具体的に、制御部１３０は、イベント区間として検出された映像区間と隣接した周辺映像区間のイメージ情報に基づいて周辺映像区間を現す色相のうち、予め定義されたフィールドカラーのグリーンカラーを含むか否かを判断する。判断の結果、周辺映像区間のうち少なくとも１つの映像区間が予め定義されたフィールドカラーであるグリーンカラーを含まないか、或いは、周辺映像区間のうち少なくとも１つの映像区間のグリーンカラーの割合値が予め設定された臨界値未満である場合、制御部１３０はサッカー試合に対するプレイが進行されていないと判断することができる。
一方、判断の結果、周辺映像区間の色相が予め定義されたフィールドカラーであるグリーンカラーを全て含んでおり、グリーンカラーの割合値が予め設定された臨界値以上である場合、制御部１３０はサッカー試合が進行されていると判断することができる。
なお、制御部１３０は、イベント区間として検出された映像区間のイメージのうち、試合進行状況をガイドするガイド領域３２０を抽出し、抽出されたガイド領域３２０に表示された試合スコア或いは試合進行時間を分析してサッカー試合が進行されているか否かを判断することができる。
このように、イベント区間として検出された映像区間がスポーツ関連コンテンツであり、当該スポーツ試合が進行されていると判断されると、制御部１３０はイベント区間として検出された映像区間が要約コンテンツ生成のための有効区間として判断することができる。その後、制御部１３０は、有効区間として判断されたイベント区間の検出された時間を基準に予め設定された固定時間に基づいて、イベント区間として検出された映像区間に関連する前後映像区間を獲得し、予め検出された映像区間と前後映像区間に基づいてコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成することができる。
図４は、本発明の一実施形態に係る固定時間に基づいて要約コンテンツを生成するための例示図であり、図５は、本発明の一実施形態に係る可変された固定時間に基づいて要約コンテンツを生成する例示図である。
図４に示すように、制御部１３０は、要約コンテンツ生成のための有効区間として検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間が獲得されると、獲得したイベント区間に対する映像区間を基準に予め設定された固定時間内に存在する前後映像区間を獲得することができる。
図示のように、イベント区間Ｂ４１０に対応する映像区間４１０−１は、要約コンテンツ生成のための有効区間として決定されてよい。このように、イベント区間Ｂ４１０に対応する映像区間４１０−１が有効区間として決定されると、制御部１３０はイベント区間Ｂ４１０に対応する映像区間４１０−１を基準に予め設定された固定時間Ａ４２０及びＡ’４３０に属する映像区間を獲得する。
図示のように、制御部１３０は、イベント区間Ｂ４１０に対応する映像区間４１０−１の検出された時間を基準に映像区間４１０−１以前の映像区間のうち、予め設定された固定時間Ａ４２０に属する第１ないし第３映像区間４２０−１〜４２０−３を獲得することができる。なお、制御部１３０は、イベント区間Ｂ４１０に対応する映像区間４１０−１の検出された時間を基準に映像区間４１０−１以後の映像区間のうち、予め設定された固定時間Ａ’４３０に属する第４ないし第６映像区間４３０−１〜４３０−３を獲得することができる。
このように、固定時間Ａ４２０に属する第１ないし第３映像区間４２０−１〜４２０−３及び固定時間Ａ’４３０に属する第４ないし第６映像区間４３０−１〜４３０−３が獲得されると、制御部１３０は固定時間Ａ４２０及び固定時間Ａ’４３０に属する映像区間のうち、シーン変化の発生した区間があるか否かを判断する。判断の結果、固定時間Ａ４２０に属する第１ないし第３映像区間４２０−１〜４２０−３のうち第３固定区間４２０−３と、固定時間Ｂ４３０に属する第４ないし第６映像区間４３０−１〜４３０−３のうち第６映像区間４３０−３がシーン変化の発生した区間区間と判断することができる。ここで、第３映像区間４２０−３は、第１及び第２映像区間４２０−１、４２０−２へのシーン場面の開始する区間であってよく、第６映像区間４３０−３は、第４及び第５映像区間４３０−１、４３０−２のシーン場面の終了する区間であってよい。
このように、固定時間Ａ４２０及び固定時間Ａ’４３０に属する映像区間のうちシーン変化の発生した区間が検出されると、制御部１３０は、図５に示すように、予め設定された固定時間Ａ４２０を固定時間ａ４２０’に可変し、固定時間Ａ’４３０を固定時間ａ’４３０’に可変する。すなわち、制御部１３０は、予め設定された固定時間Ａ４３０に関連してシーン変化の発生した第３映像区間４２０−３を除く残りの第１及び第２映像区間４２０−１、４２０−２を含むことができるように固定時間Ａ’４２０を固定時間ａ４２０’に可変する。なお、制御部１３０は、予め設定された固定時間Ａ’４３０に関連してシーン変化の発生した第６映像区間４３０−３を除く残りの第４及び第５映像区間４３０−１、４３０−２を含むことができるように固定時間Ａ’４３０を固定時間ａ’４３０’に可変する。
このように、固定時間Ａ４２０及び固定時間Ａ’４３０が固定時間ａ４２０’及び固定時間ａ’４３０’に可変されると、制御部１３０は、図５に示すように、イベント区間Ｂ４１０に対応する映像区間４１０−１、可変された固定時間ａ４２０’に存在する第１及び第２映像区間４２０−１、４２０−２及び可変された固定時間ａ’４３０’に存在する第４及び第５映像区間４３０−１’、４３０−２’を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成することができる。
しかし、本発明はそれに限定されずに、固定時間Ａ４２０及び固定時間Ａ’４３０は斜線領域のように絶対固定時間４２０”、４３０”を含むことができ、それぞれの絶対固定時間４２０”、４３０”内に存在する映像区間はイベント区間Ｂ４１０’に対応する映像区間４１０−１とともにコンテンツ要約区間に含まれることが望ましい。すなわち、制御部１３０は、固定時間Ａ４２０及び固定時間Ａ’４３０内に存在する映像区間４２０−１〜４２０−３、４３１−１〜４３０−３に関連して絶対固定時間４２０”、４３０”を除く残りの固定時間内に存在する映像区間に対してシーン変化が発生するか否かを応じて、絶対固定時間４２０”、４３０”以後の固定時間内で固定時間Ａ４２０及び固定時間Ａ’４３０を可変的に調節することができる。
このように、制御部１３０は、イベント区間に対する映像区間及び予め設定された固定時間或いは可変された固定時間内の映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することで、ゴール場面等のイベント区間に対してより自然な要約コンテンツを生成することができる。
これまで、本発明に係る放送受信装置１００で受信されたコンテンツから要約コンテンツを生成する動作について多様な実施形態を通じて詳細に説明してきた。以下では、本発明に係る放送受信装置１００で受信されたコンテンツから要約コンテンツを生成する方法について詳細に説明する。
図６は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。
図６に示すように、放送受信装置１００は、放送サーバ（図示せず）或いはコンテンツサーバ（図示せず）からコンテンツが受信されると、受信されたコンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する（Ｓ６１０、Ｓ６２０）。しかし、本発明はそれに限定されず、放送受信装置１００は予め保存された録画コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出することができる。
具体的に、放送受信装置１００は受信されたコンテンツ或いは録画コンテンツを逆多重化して映像及びオーディオデータに分離する。その後、放送受信装置１００は、コンテンツから映像及びオーディオデータに分離されると、分離された映像及びオーディオデータをデコードして出力可能な形態で信号処理する。
コンテンツに含まれた映像及びオーディオデータに対する信号処理が行われると、放送受信装置１００は信号処理された映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出することができる。少なくとも１つのイベント区間が検出されると、放送受信装置１００は検出された少なくとも１つのイベント区間に対する映像区間及び当該映像区間に関連する前後映像区間に基づいてコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成する（Ｓ６３０、Ｓ６４０）。実施形態によって、放送受信装置１００は予め保存されたイベント検出モジュール、コンテンツ要約モジュール及び要約コンテンツ生成モジュールを用いてコンテンツに対するイベント検出、コンテンツ要約区間決定及び要約コンテンツを生成することができる。このようなモジュールを通じて要約コンテンツが生成されると、放送受信装置１００は生成された要約コンテンツを保存する。その後、放送受信装置１００はユーザ命令に応じて、ユーザ命令に対応するコンテンツに関連する要約コンテンツを出力するか、或いは、コンテンツ及び要約コンテンツを同時に出力する（Ｓ６５０）。
一方、上述のステップＳ６２０において放送受信装置１００は、次のような実施形態を通じてユーザの要請したコンテンツから予め設定された条件に対応する少なくとも１つのイベント区間を検出することができる。
一実施形態によって、放送受信装置１００はコンテンツに含まれた映像データを分析し、予め保存された試合状況条件に対応する映像区間を少なくとも１つのイベント区間として検出することができる。ここで、予め保存された試合状況条件は、多様なジャンルのコンテンツのうちスポーツ関連コンテンツから少なくとも１つのイベント区間を検出するための条件であってよい。
更に別の実施形態によって、放送受信装置１００はコンテンツに含まれたオーディオデータを分析し、予め保存された臨界レベル以上のオーディオ信号レベルを有する映像区間をイベント区間として検出することができる。
更に別の実施形態によって、放送受信装置１００はコンテンツに含まれたオーディオデータに対するＳＴＴ分析を行ってテキストデータを生成し、生成されたテキストデータを用いて予め設定された単語の含まれた映像区間をイベント区間として検出することができる。
しかし、本発明はそれに限定されず、放送受信装置１００は放送サーバ（図示せず）またはコンテンツサーバ（図示せず）からスポーツ関連コンテンツ及び当該スポーツに対するイベント情報を受信することができる。この場合、放送受信装置１００は受信したイベント情報に基づいてユーザの要請したコンテンツに含まれた映像データ或いはオーディオデータを分析し、特定映像区間をイベント区間として検出することができる。更に、放送サーバ（図示せず）或いはコンテンツサーバ（図示せず）から受信されたスポーツ関連コンテンツは、映像及びオーディオデータだけでなく、テキスト形態の字幕情報を含む付加データを更に含むことができる。この場合、放送受信装置１００は、スポーツ関連コンテンツに含まれた付加データを分析して予め設定された単語を含むテキストイメージを含む付加データに関連する映像区間をイベント区間として検出することができる。
このような多様な実施形態を通じて少なくとも１つのイベント区間が検出されると、放送受信装置１００は、予め検出された少なくとも１つのイベント区間が要約コンテンツ生成のための有効区間か否かを判断し、検出されたイベント区間が有効区間である場合、当該イベント区間に対する映像区間及び当該映像区間の前後区間に基づいてコンテンツ要約区間を決定することができる。以下では、図７を参照して、放送受信装置１００で予め検出された少なくとも１つのイベント区間をコンテンツ要約区間として決定する方法について詳細に説明する。
図７は、本発明の一実施形態に係る放送受信装置で予め検出された少なくとも１つのイベント区間に対応する映像区間に基づいて要約コンテンツ生成のためのコンテンツ要約区間を決定する方法のフローチャートである。
図７に示すように、放送受信装置１００は、要約コンテンツ生成のためのイベント検出モジュールを用いて予め受信されたコンテンツから少なくとも１つのイベント区間が検出されると、検出されあた少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相及び色相別の割合値に基づいて予め受信されたコンテンツがスポーツ関連コンテンツか否かを判断する（Ｓ７１０）。
実施形態によって、放送受信装置１００は各スポーツ種目別に予め定義されたフィールドカラー及びフィールドカラーに対応する色相の占める割合値に関連して予め設定された第１臨界値を保存することができる。よって、放送受信装置１００は、予め保存されたスポーツ種目別のフィールドカラー及び第１臨界値に基づいて予め検出された少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相情報のうち、予め定義されたフィールドカラーに対応する色相があるか否かを判断する。判断の結果、予め獲得したフィールドカラーに対応する色相があれば、放送受信装置１００は予め定義されたフィールドカラーに対応する色相の割合値を算出し、算出された割合値が予め設定された第１臨界値以上か否かを判断する。判断の結果、予め設定された第１臨界値以上である場合、放送受信装置１００は予め受信されたコンテンツがスポーツ関連コンテンツと判断することができる。
このように、受信されたコンテンツがスポーツ関連コンテンツである場合、放送受信装置１００は当該スポーツに対するプレイ状況を判断する（Ｓ７２０）。
一実施形態によって、放送受信装置１００は予め検出された少なくとも１つのイベント区間に対する映像区間と隣接する周辺映像区間のイメージ情報に含まれた色相のうち、予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第２臨界値以上か否かに応じて、当該スポーツに対するプレイ状況を判断することができる。ここで、第２臨界値は、上述の第１臨界値と同一か新たな値に設定された値であってよい。
具体的に、放送受信装置１００は、イベント区間として検出された映像区間と隣接する周辺映像区間のうち少なくとも１つの周辺映像区間に予め定義されたフィールドカラーに対応する色相が含まれていないか、或いは、予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第２臨界値未満であれば、スポーツに対するプレイが進行されていない状況と判断することができる。ここで、スポーツに対するプレイが進行されていない状況は、例えば、サッカースポーツの場合はハーフタイムであってよく、野球スポーツの場合は攻守交代が行われる状況であってよい。一方、イベント区間として検出された映像区間と隣接する周辺映像区間が予め定義されたフィールドカラーに対応する色相を全て含んでおり、フィールドカラーに対応するそれぞれの色相別の割合値が予め設定された第２臨界値以上なら、放送受信装置１０はスポーツに対するプレイが進行されていると判断することができる。
更に別の実施形態によって、放送受信装置１００は予め検出された少なくとも１つのイベント区間に対する映像区間のイメージから試合進行状況をガイドするガイド領域を抽出し、抽出されたガイド領域に基づいてスポーツに対するプレイ状況を判断することができる。ここで、ガイド領域は、試合スコア及び試合進行時間のうち少なくとも１つを含んでよい。
よって、放送受信装置１００は、予め検出された少なくとも１つのイベント区間に対する映像区間のイメージのうち、試合進行状況をガイドするガイド領域に含まれた試合スコア或いは試合進行時間を分析して当該スポーツに対するプレイ進行状況を判断することができる。
一方、上述のように、予め検出された少なくとも１つのイベント区間に対する映像区間から受信されたコンテンツがスポーツ関連コンテンツであり、当該スポーツがプレイ進行状況と判断されると、放送受信装置１００は少なくとも１つのイベント区間に対する映像区間の検出された時間を基準に予め設定された固定時間に存在する前後映像区間を獲得する（Ｓ７３０）。その後、放送受信装置１００は、予め設定された固定時間に存在する前後映像区間のうち少なくとも１つの映像区間でシーン変化が発生するか否かを判断する（Ｓ７４０）。
判断の結果、予め設定された固定時間に存在する前後映像区間にシーン変化が発生すると判断されると、放送受信装置１００は予め設定された固定時間内に属する前後映像区間のうち、可変された固定時間内に存在する前後映像区間を獲得する（Ｓ７５０）。すなわち、放送受信装置１００は、予め設定された固定時間内に属する前後映像区間のうち少なくとも１つのイベント区間が検出された時間の区間映像に関連する前後映像区間の属する時間に予め設定された固定時間を可変する。その後、放送受信装置１００は、可変された固定時間内に属する前後映像区間及び当該前後映像区間の間に存在する少なくとも１つのイベント区間に対する映像区間をコンテンツ要約区間として決定する（Ｓ７６０）。一方、ステップ７４０において、予め設定された固定時間に存在する前後映像区間にシーン変化が発生していないと判断されると、放送受信装置１００は予め設定された固定時間に存在する前後映像区間及び前後映像区間の間に存在する少なくとも１つのイベント区間に対する映像区間をコンテンツ要約区間として決定することができる。
一方、本発明に係る固定時間は、絶対固定時間を含んでよく、このような絶対固定時間は可変されない。よって、放送受信装置１００は、固定時間内に存在する前後映像区間のうち、絶対固定時間内に存在する前後映像区間を除く残りの前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間があれば、放送受信装置１００は絶対固定時間を除く残りの固定時間内で固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得することができる。
その後、放送受信装置１００は、イベント区間に対する映像区間及び当該映像区間を基準に予め設定された固定時間或いは可変された固定時間内に存在する前後映像区間を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成及び保存する（Ｓ７７０）。
図８は、本発明の一実施形態に係る放送受信装置で要約コンテンツを生成する方法に対するフローチャートである。
図８に示すように、放送受信装置１００は少なくとも１つのイベント区間が検出されると、検出されたイベント区間に対するサムネール情報を保存する。このとき、放送受信装置１００は、イベント区間の検出された時間情報も同時に保存することができる。その後、放送受信装置１００は、少なくとも１つのイベント区間が検出された映像区間と、予め設定された固定時間或いは可変された固定時間内に存在する前後映像区間を含むコンテンツ要約区間が決定されると、予め保存されたサムネールイメージを獲得する（Ｓ８１０）。ここで、獲得したサムネールイメージは、予め決定されたコンテンツ要約区間に基づいて生成される要約コンテンツを識別するためのものである。このようなサムネールイメージが獲得されると、放送受信装置１００は獲得したサムネールイメージが複数個であるか否かを判断する（Ｓ８２０）。
判断の結果、複数のサムネールイメージが獲得されると、放送受信装置１００は複数のサムネールイメージのうち、予め設定された条件を満たすサムネールイメージを代表サムネールイメージとして獲得する（Ｓ８３０）。実施形態によって、放送受信装置１００は、要約コンテンツ生成のためのコンテンツ要約区間に関連して複数のサムネールイメージが獲得されると、獲得した複数のサムネールイメージのうち予め定義された有効フィールドカラーに対応する色相の数が最も少ないサムネールイメージオまたは複数のサムネールイメージのそれぞれに含まれた同一のオブジェクトのうち、サイズの最も大きいオブジェクトを含むサムネールイメージを代表イメージとして決定することができる。一方、放送受信装置１００は、複数のサムネールイメージのそれぞれに含まれたオブジェクトが相互同一ではない場合、各サムネールイメージに含まれたオブジェクトの数が最も少ないか或いはサイズが最も大きいオブジェクトを含むサムネールイメージを代表サムネールイメージとして決定することができる。このような代表サムネールイメージとして決定されると、放送受信装置１００は予め決定されたコンテンツ要約区間に基づいて要約コンテンツを生成し、生成された要約コンテンツと予め決定された代表サムネールイメージとを相互マッチングさせて保存する（Ｓ８４０）。
一方、上述のステップＳ８２０において、コンテンツ要約区間に関連して獲得されたサムネールイメージが単一個であれば、放送受信装置１００はステップＳ８４０で予め決定されたコンテンツ要約区間に基づいて要約コンテンツを生成し、生成された要約コンテンツと予め獲得した単一のサムネールイメージとを相互マッチングさせて保存することができる。その後、ユーザから要約コンテンツに対する再生命令が入力されると、放送受信装置１００は予め保存された複数の要約コンテンツのうち再生命令に対応する少なくとも１つの要約コンテンツを順次に再生する。このとき、放送受信装置１００は、再生命令に対応する少なくとも１つの要約コンテンツに対するサムネールイメージを画面上にディスプレイすることができる。それにより、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、放送受信装置１００は選択されたサムネールイメージに関連する要約コンテンツから順次に再生することができる。
これまで、本発明の係る放送受信装置１００で受信されたコンテンツに対する要約コンテンツを生成する方法について詳細に説明してきた。以下では、放送受信装置１００でコンテンツを構成する複数の映像フレームの各画素値に基づいて要約コンテンツを生成する動作及び方法について詳細に説明する。
上述の制御部１３０は、ユーザから視聴中のコンテンツ或いは保存部１６０に保存された録画コンテンツに対する要約コンテンツサービス命令が入力されると、入力された要約コンテンツサービス命令に関連するコンテンツの複数の映像フレームの画素値を比較し、要約コンテンツサービスのためのイメージ領域を検出する。このとき、制御部１３０は、要約コンテンツサービス命令が入力された時点のコンテンツに対する複数の映像フレームの画素値を比較して要約コンテンツサービスのためのイベント領域を検出することが望ましい。ここで、要約コンテンツサービス関連コンテンツはスポーツ試合に対するコンテンツであってよく、イベント領域はスポーツ試合時間をガイドする時間情報、チーム情報、スコア情報を含むスポーツ試合状況をガイドするスコアボード領域であってよい。
このようなイベント領域が検出されると、制御部１３０はイベント領域が検出された後、当該コンテンツに対する映像フレームが入力されると、入力された映像フレームから予め検出されたイベント領域に対応する領域を検出し、イベント領域と当該イベント領域に対応する領域の文字変化を検知してイベント発生有無を検知する。ここで、文字変化を検知することは、例えば、サッカースポーツの場合、ゴールが入った後にスコア関連数字が変化されるか否かを検知することであってよい。よって、制御部１３０は、スコア関連数字が変化されるか否かに応じてイベントが発生したと検知することができる。このようなイベントが発生したと検知されると、制御部１３０はイベントの発生した時点の映像フレーム区間に基づいてハイライト映像のような要約コンテンツを生成し、生成された要約コンテンツを保存部１６０に保存する。実施形態によって、制御部１３０はイベントの発生した時点の映像フレームが獲得されると、イベントの発生した時点の映像フレームと当該映像フレームの前後映像フレームのうち、予め設定された固定時間に存在する前後映像フレームに基づいて要約コンテンツを生成することができる。
一方、制御部１３０は、イベントの発生した時点の映像フレーム区間に基づいて要約コンテンツが生成されると、生成された要約コンテンツを含む複数の映像フレームのうち１つの映像フレームに対する映像イメージを当該要約コンテンツを識別するための代表サムネールイメージとして決定することができる。実施形態によって、制御部１３０は要約コンテンツを含む複数の映像フレーム別の映像イメージを分析して、ズームインショットイメージに該当する映像フレームの映像イメージを代表サムネールイメージとして決定することができる。このように、要約コンテンツを識別するための代表サムネールイメージが決定されると、制御部１３０は予め生成された要約コンテンツ及び当該要約コンテンツを識別するために代表サムネールイメージに決定された映像イメージを相互マッチングさせて保存部１６０に保存することができる。
具体的に、制御部１３０は、コンテンツを構成する複数の映像フレームの画素差に基づいてイベント領域を検出し、検出されたイベント領域に基づいてその後の映像フレームに当該イベント領域に対応する領域があるか否かを判断する。その後、制御部１３０は、イベント領域及び当該イベント領域に対応する領域を分析し、文字変化が発生するか否かに応じてイベントが発生したか否かを検知する。
具体的に、制御部１３０は、後述のイベント検出部１３１を介してイベント領域を 検出することができる。具体的に、イベント検出部１３１は、コンテンツを構成する複数の映像フレームのうち、第１及び第２映像フレームの間の相互対応する各画素領域別の画素差と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差を有する画素領域の数を算出する。その後、イベント検出部１３１は、予め設定された臨界値未満の画素差を有する画素領域の数が予め設定された臨界画素数未満である場合、予め設定された臨界回数以上連続的に検出されるか否かを判断する。判断の結果、予め設定された臨界値未満の画素差を有する画素領域の数が予め設定された臨界回数以上連続的に検出されると、イベント領域検出部１３１は臨界値未満の画素差未満の画素差を有する画素領域に基づいてイベント領域を検出し、検出されたイベント領域を保存部１６０に保存する。
より具体的に、ユーザから要約コンテンツ再生命令が入力された後、当該命令に対応するコンテンツの映像フレームが入力されてよい。このような映像フレームが少なくとも２つ以上入力されると、イベント検出部１２１は最初入力された映像フレーム（以下、第１映像フレームという）（Ｉｎ−１）の各画素領域と次の映像フレーム（以下、第２映像フレームという）（Ｉｎ）の各画素領域から画素差（Ｄｎ−１）を算出する。その後、イベント検出部１３１は、各画素領域別の画素差（Ｄｎ−１）が算出されると、算出されたそれぞれの画素差（Ｄｎ−１）と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差（Ｄｎ−１）を有する画素領域の数を算出する。
実施形態によって、イベント検出部１３１は、臨界値未満の画素差を有する画素領域と残りの画素領域の変数を異なるように適用し、臨界値未満の画素差を有する画素領域に適用された変数の数から画素領域の数を算出することができる。具体的に、イベント検出部１３１は、第１映像フレーム（Ｉｎ−１）の各画素領域の変数を１に初期化する。その後、イベント検出部１３１は、第１及び第２映像フレーム（Ｉｎ−１）（Ｉｎ）に基づいて予め設定された臨界値未満の画素差（Ｄｎ−１）を有する画素領域の変数を１に維持し、予め設定された臨界値以上の画素差（Ｄｎ−１）を有する画素領域の変数を０に変換する。それにより、イベント検出部１３１は、第１映像フレーム（Ｉｎ−１）の各画素領域が変数のうち変数１に維持された画素領域の数を算出することができる。
このように、画素領域の数が算出されると、イベント検出部１３１は変数１に維持されは画素領域の数と予め設定された臨界画素数とを比較し、変数１に維持された画素領域の数が予め設定された臨界画素数未満か否かを判断する。判断の結果、予め設定された臨界画素数未満の場合、イベント検出部１３１はＳｔａｔｉｃ＿Ｃｏｕｎｔを１増加させる。その後、イベント検出部１３１は、変数の変化された第１映像フレーム（Ｉｎ−１）と第２映像フレーム（Ｉｎ）以後の第３映像フレーム（Ｉｎ＋１）の各画素領域別の画素差と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差（Ｄｎ−１）を比較し、予め設定された臨界値未満の画素差（Ｄｎ−１）を有する画素領域の変数を１に維持し、予め設定された臨界値以上の画素差（Ｄｎ−１）を有する画素領域の数と予め設定された臨界画素数とを比較し、変数１に維持された画素領域の数が予め設定された臨界画素数未満の場合、１が増加されたＳｔａｔｉｃ＿Ｃｏｕｎｔに１を追加で増加させる。このような一連の動作を通じ、Ｓｔａｔｉｃ＿Ｃｏｕｎｔの値が予め設定された値（予め設定された臨界回数）以上になると、イベント検出部１３１は第１映像フレーム（Ｉｎ−１）の変数のうち、変数１に維持された画素領域を要約コンテンツサービスのためのイベント領域として検出することができる。
実施形態によって、イベント検出部１３１はＦｌｏｏｄ Ｆｉｌｌアルゴリズムのような連結領域（Ｃｏｎｎｅｃｔｅｄ Ｃｏｍｐｏｎｅｎｔ）アルゴリズムを用いて第１映像フレーム（Ｉｎ−１）の変数のうち、変数１に維持された画素領域からイベント領域を検出することができる。このようなアルゴリズムは、公知となった技術であるため、本発明では詳細な説明を省略する。
一方、本発明の更なる態様によって、イベント検出部１３１は予め検出されたイベント領域を分析してイベント発生有無を判断することができるソース情報を生成し、生成されたソース情報を保存部１６０に保存する。ここで、イベント領域はスポーツ試合関連スコアボード領域であり、ソース情報は試合時間領域、スコア領域及びチーム領域のうち少なくとも１つを含んでよい。
一実施形態によって、イベント検出部１３１は予め検出されたイベント領域内の各画素領域別に設定された変数のうち、画素差発生を示す変数に設定された画素領域に基づいて試合時間領域を含むソース情報を生成し、生成されたソース情報を保存部１６０に保存することができる。
例えば、サッカー関連スポーツの場合、スコアボード領域として検出されたイベント領域には試合時間を示す試合時間領域を含むことができ、当該試合時間領域は分単位の時間及び秒単位の時間を含むことができる。よって、試合時間領域のうち、秒単位の時間を示す領域の画素領域の変数と残りのイベント領域の画素領域の変数とは異なってよい。すなわち、イベント領域の画素領域うち、秒単位の時間を示す画素領域の変数は０になってよく、秒単位の時間を示す画素領域を除く残りのイベント領域の画素領域の変数は１になってよい。よって、イベント検出部１３１は、イベント領域の画素領域別の変数から１ではない０の変数を有する画素領域が検出されると、０の変数を有する画素領域を基準に予め設定された画素領域を試合時間領域として決定することができる。このとき、イベント検出部１３１は、０の変数を有する画素領域を基準に予め設定された左側領域を画素領域を試合時間領域として決定することが望ましい。
このような試合時間領域が決定されると、イベント検出部１３１は予め決定されたイベント領域と予め決定された試合時間領域とを含むソース情報を相互マッチングさせて保存部１６０に保存することができる。
更に別の実施形態によって、イベント検出部１３１は数字認識アルゴリズムを用いて予め検出されたイベント領域から数字を検出し、検出された数字が少なくとも２つ以上連続的に存在すると、数字の検出された画素涼気に基づいて試合時間領域を含むソース情報を生成して保存部１６０に保存することができる。ここで、数字認識アルゴリズムは、Ｏｐｔｉｃａｌ Ｄｉｇｉｔ Ｒｅｃｏｇｎｉｔｉｏｎ（ＯＤＲ）アルゴリズムとして、このような数字認識アルゴリズムは公知となった技術であるため、詳細な説明は省略する。
例えば、サッカー関連スポーツの場合、スコアボード領域として検出されたイベント領域にはスコア及び試合時間を示す領域を含むことができ、各領域を通じて数字イメージが表示されてよい。特に、スコアを示す領域の場合、単一数字イメージが表示されてよく、試合時間を示す領域の場合、複数の数字イメージが表示されてよい。
よって、イベント検出部１３１は、このような数字認識アルゴリズムを用いて予め検出されたイベント領域から数字が検出されると、検出された数字のうち少なくとも２つ以上連続的に存在する数字を検出し、当該数字の検出された画素領域を基準に予め設定された画素領域を試合時間領域として決定することができる。このとき、イベント検出部１３１は、２つ以上連続的に存在する数字を除く残りの数字に関連して当該数字の検出された画素領域を基準に予め設定された画素領域をスコア領域として決定することができる。このように、試合時間領域または試合時間領域とスコア領域とが決定されると、イベント検出部１３１は、試合時間領域または指示時間領域とスコア領域とを含むソース情報を生成し、生成されたソース情報と予め検出されたイベント領域とを相互マッチングさせて保存部１６０に保存することができる。
更に別の実施形態によって、イベント検出部１３１は、文字認識アルゴリズムを用いて試合時間領域、スコア領域、チーム領域のうち少なくとも１つを含むソース情報を生成して保存部１６０に保存することができる。ここで、文字認識アルゴリズムは、Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ（ＯＣＲ）アルゴリズムとして、このような文字認識アルゴリズムは公知となった技術であるため、詳細な説明は省略する。
例えば、サッカー関連スポーツの場合、スコアボード領域に検出されたイベント領域にはスコア、リーム名及び試合時間を示す領域を含んでおり、各領域を通じて数字及び文字イメージが表示されてよい。よって、イベント検出部１３１は、このような文字認識アルゴリズムを用いて予め検出されたイベント領域から数字及び文字イベントが表示されると、文字イメージを示す領域をチーム領域として決定し、数字イメージを示す領域をスコア及び試合時間を示す領域として決定することができる。上述のように、スコアを示す領域の場合、単一数字イメージが表示されてよく、試合時間を示す領域の場合、複数の数字イメージが表示されてよい。
よって、イベント検出部１３１は、予め検出されたイベント領域から数字が検出されると、検出された数字のうち少なくとも２つ以上連続的に存在する数字の検出された画素領域を基準に予め設定された画素領域を試合時間領域として決定することができる。なお、イベント検出部１３１は、２つ以上連続的に存在する数字を除く残りの数字に関連して当該数字の検出された画素領域を基準に予め設定された画素領域をスコア領域として決定することができる。このように、チーム領域、スコア領域及び試合時間領域が決定されると、イベント検出部１３１はチーム領域、スコア領域及び試合時間領域を含むソース情報を生成し、生成されたソース情報と予め検出されたイベント領域とを相互マッチングさせて保存部１６０に保存することができる。
このように、イベント検出部１３１を介してイベント領域が検出されると、制御部１３０はイベント領域が検出された後に入力された映像フレームの各画素領域のうちイベント領域に対応する画素領域を分析してイベント領域に対応する領域が存在するか否かを判断する。
具体的に、制御部１３０は、予め検出されたイベント領域のち、試合時間領域を除く残りの画素領域と、残りの画素領域に対応する映像フレームの画素領域から算出された画素差のうち、予め設定された臨界値未満の画素差を有する映像フレームの画素領域の数を獲得する。その後、制御部１３０は、予め検出されたイベント領域のうち、試合時間領域を除く残りの画素領域数対比予め設定された臨界値未満の画素差を有する映像フレームの画素領域数の割合値が予め設定された画素割合値未満である場合、イベント領域に対応する領域をイベント領域と判断する。
より具体的に、制御部１３０は、イベント検出部１３１を介してイベント領域が検出された後、映像フレームが入力されると、入力された映像フレームの画素領域のうち、予め検出されたイベント領域の画素領域に対応する画素領域（以下、イベント候補領域という）を獲得する。
このような映像フレームのイベント候補領域が獲得されると、制御部１３０はイベント候補領域の画素領域のうち、予め検出されたイベント領域に関連して予め生成されたソース情報に含まれた試合時間領域を除く残りの領域の画素領域に対応する画素領域（第２残りの画素領域という）を獲得する。その後、制御部１３０は、イベント領域の画素領域のうち、試合時間領域を除く残りの領域の画素領域とイベント候補領域から獲得した第２残りの画素領域から各画素領域別の画素差を算出する。その後、制御部１３０は、各画素領域別に算出された画素差と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差を有する第２残りの画素領域の数を獲得する。その後、制御部１３０は、イベント領域の残りの画素領域数対比予め設定された臨界値未満の画素差を有する映像フレームの画素領域数の割合値を算出する。
実施形態によって、イベント領域の画素領域のうち、試合時間領域を除く残りの領域の変数は１であってよい。なお、イベント候補領域のうち、第２残りの画素領域の変数は１であってよい。よって、制御部１３０は、変数が１のイベント領域の残りの領域に対する画素領域の数を獲得する。その後、制御部１３０は、予め設定された臨界値未満の画素差を有する第２残りの画素領域の変数を１から０に変更し、予め設定された臨界値以上の画素差を有する第２残りの画素領域の変数を１に維持する。その後、制御部１３０は、予め獲得したイベント領域の残りの領域に対する画素領域数対比第２残りの画素領域のうち、変数が１に維持された画素領域数の割合値を算出する。その後、制御部１３０は算出された割合値と予め設定された臨界値とを比較し、予め算出された割合値が予め設定された臨界値未満である場合、イベント領域に対応するイベント候補領域をイベント領域と判断することができる。
判断の結果、イベント領域に対応する領域が存在すると、制御部１３０は予め検出されたイベント領域に対するソース情報に基づいてイベント領域及びイベント領域に対応する領域を分析してイベント発生有無を検知する。
具体的に、制御部１３０は予め検出されたイベント領域に関連して予め保存されたソース情報にスコア領域が含まれているか否かを判断する。判断の結果、スコア領域が含まれていない場合、制御部１３０はイベント領域に対応する領域の画素領域のうち、ソース情報に含まれた試合時間領域を除く残りの画素領域に対応する画素領域の変数に基づいてスコア領域を決定する。その後、制御部１３０は、予め検出されたスコア領域に基づいて予め検出されたイベント領域からスコア領域からスコア領域を決定する。その後、制御部１３０は、数字認識アルゴリズムを用いてそれぞれのスコア領域から数字を認識して数字変化有無に応じてイベント発生有無を検知する。
上述のように、イベント領域（以下、第１イベント領域という）に対応する領域（以下、第２イベント領域という）の変数は、第１及び第２イベント領域の画素領域間の画素差に応じて１から０に、または、１に維持されてよい。上述のように、第２イベント領域の第２残りの画素領域のうち、第１及び第２イベント領域の画素領域間の画素差が予め設定された臨界値以上の画素領域の変数は１であってよく、残りの画素領域の変数は０であってよい。
よって、制御部１３０は第２イベント領域のうち、試合時間領域を除く残りの領域に対する画素領域のうち変数が１の画素領域を獲得する。その後、制御部１３０は、変数が１の画素領域が予め設定された数以上連続的に隣接しているか否かを判断し、連続的に隣接していると、連結領域アルゴリズムを用いて変数が１の画素領域からスコア領域を決定する。その後、制御部１３０は、第２イベント領域から決定されたスコア領域に基づいて第１イベント領域のスコア領域を決定することができる。このように、第１及び第２イベント領域のスコア領域がそれぞれ決定されると、制御部１３０は数字認識アルゴリズムを用いてそれぞれのスコア領域から数字を認識する。その後、制御部１３０はそれぞれのスコア領域から認識された数字を比較して両数字が相互異なると、イベントが発生したと判断することができる。
例えば、第１イベント領域のスコア領域から認識された数字は０であってよく、第２イベント領域のスコア領域から認識された数字は１であってよい。このように、両数字が相互異なると判断されると、制御部１３０はイベントが発生したと検知することができる。
一方、ソース情報にスコア領域が含まれていると、制御部１３０はスコア領域に基づいて第２イベント領域からスコア領域を検出する。その後、制御部１３０は、数字認識アルゴリズムを用いて第１及び第２イベント領域のスコア領域から数字を認識し、認識された数字を比較して両数字が相互異なると、イベントが発生したと検知することができる。このように、両スコア領域から認識された数字を通じてイベントが発生したと検知されると、制御部１３０は保存部１６０に予め保存された第１イベント領域及びソース情報を第２イベント領域及び第２イベント領域に関連するソース情報にアップデートする。
よって、上述のイベント検出部１３１は、イベント領域及びソース情報がアップデータされた後に映像フレームが入力されると、アップデータされたイベント領域及びソース情報に基づいて新たなイベント領域を検出することができ、制御部１３０はイベント検出部１３１を介して検出されたイベント領域に基づいてイベント発生有無を検知することができる。
一方、制御部１３０はイベントが発生したと検知されると、上述のように、イベントが発生したと検知された時点の映像フレームと、当該映像フレームを基準に予め設定された固定時間内に存在する前後映像フレームに基づいて要約コンテンツを生成する。なお、制御部１３０は、生成された要約コンテンツを含む複数の映像フレームのうち、ズームインショットイメージに該当する映像フレームの映像イメージを当該要約コンテンツを識別するための代表サムネールイメージとして決定した後、予め生成された要約コンテンツとともに相互マッチングさせて保存部１６０に保存することができる。
これまで、本発明に係る要約コンテンツサービス提供のためにイベント発生有無を判断する放送受信装置１００の各構成について詳細に説明する。以下では、本発明に係る放送受信装置１００でイベント発生有無を判断する動作について多様な実施形態を通してより具体的に説明する。
図９は、本発明の一実施形態に係る放送受信装置からイベント領域を検出する例示図である。
図９の（ａ）及び（ｂ）に示すように、第１及び第２映像フレームが入力されると、制御部１３０はイベント検出部１３１を介してイベント領域を検出する。上述のように、イベント検出部１３１は、第１及び第２映像フレームの各画素領域別の画素差を算出した後、算出された画素差と予め設定された臨界値とを比較して予め設定された臨界値未満の画素差を有する画素領域を抽出する。
図示のように、第１及び第２映像フレームに対応する第１及び第２映像イメージ９００、９００’のうち左側上段にはスコアボード９１０、９１０’が表示されてよい。この場合、スコアボード９１０、９１０’に対応する画素領域は予め設定された臨界値未満の画素差を有してよい。よって、イベント検出部１３１は、第１及び第２映像イメージ９００、９００’の左測上段にそれぞれ表示されたスコアボード９１０、９１０’に対応する画素領域をイベント領域として検出することができる。
図１０は、本発明の一実施形態に係る放送受信装置で初期映像フレームに設定された変数を示す例示図であり、図１１は、本発明の一実施形態に係る放送受信装置で複数の映像フレームに基づいて予め設定された臨界値未満の画素差を有する映像フレームに設定された変数を示す例示図である。
上述の図９の（ａ）における第１映像イメージ９００に対応する第１映像フレームが入力されると、イベント検出部１３１は第１映像フレームの画素領域の変数を１に初期設定する。すなわち、イベント検出部１３１は、図１０に示すように、第１映像フレームに関連して各画素領域別の変数が１に初期設定された映像フレーム１０１０を生成する。このように、各画素領域別の変数が１に初期設定された映像フレーム１０１０が生成された状態で、上述の図９の（ｂ）における第２映像フレーム９００’に対応する第２映像フレームが入力されると、イベント検出部１３１は第１及び第２映像フレームの各画素領域別の画素差を算出する。その後、イベント検出部１３１は、領域別に算出された画素差と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差を有する画素領域を除く残りの画素領域の変数を１から０に変更する。
上述のように、第１及び第２映像フレームのそれぞれに対応する第１及び第２映像イメージ９００、９００’の左側上段にはスコアボード９１０、９１０’が表示されてよい。よって、スコアボード９１０、９１０’に対応する画素領域を除く残りの画素領域は予め設定された臨界値以上の画素差を有してよい。この場合、イベント検出部１３１は、図１１に示すように、第１映像フレームに関連して生成された映像フレーム１０１０の各画素領域別に設定された変数のうち、予め設定された臨界値以上の画素差を有する画素領域の変数を１から０に変更し、予め設定された臨界値未満の画素差を有する画素領域の変数を予め設定された１に維持する。すなわち、イベント検出部１３１は、スコアボード９１０、９１０’に対応する画素領域の変数を予め設定された１に維持し、残りの画素領域の変数を予め設定された１から０に変換してよい。
その後、イベント検出部１３１は、連結領域アルゴリズムを用いて画素領域の変数が予め設定された１に維持された画素領域からイベント領域１１１０を検出することができる。一方、図９の（ａ）において、第１映像フレームに対応するスコアボード９１０には試合時間を示す時間情報を含むことができ、当該時間情報は分単位の時間と秒単位の時間とを含むことができる。よって、秒単位の時間が表示される領域は第１及び第２映像フレーム間の画素差が予め設定された臨界値以上であってよい。よって、予め検出されたイベント領域１１１０内の画素領域のうち、秒単位の時間の表示される領域に対応する画素領域の変数は０であってよい。このように、予め検出されたイベント領域１１１０内に変数が０の画素領域が検出されると、イベント検出部１３１は当該画素領域を試合時間関連領域であると判断する。よって、イベント検出部１３１は、予め検出されたイベント領域１１１０内に変数が０の画素領域１１２０を基準に予め設定された画素領域を試合時間領域１１３０として決定することができる。
図１２は、本発明の一実施形態に係る放送受信装置でイベント発生有無を検知する第１例示図であり、図１３は、本発明の別の実施形態に係る放送受信装置でイベント発生有無を検知する第２例示図である。
図１２に示すように、イベント領域が検出された状態で、入力された映像フレームがイベント領域に対応する領域として検出されると、制御部１３０は予め検出されたイベント領域と当該イベント領域に対応する領域との各画素領域別の画素差に基づいて設定された変数からイベント発生有無を検知することができる。
具体的に、図１２の（ａ）に示すように、入力された映像フレームに対する映像イメージ１２００に関連して左側上段にはスコアボード１２１０が表示されてよく、スコアボード１２１０の表示される領域は、イベント領域に対応する領域として判別された領域であってよい。この場合、制御部１３０は、イベント領域の各画素領域別に設定された変数とスコアボード１２１０の表示される領域の各画素別に設定された変数とに基づいてイベント発生有無を判断する。もし、両領域の各画素領域別に設定された変数に基づいてイベント領域の画素領域１２１０’のうち、試合時間領域の画素領域１２１０’−１を除く残りの領域の画素領域に対する変数が同様に維持されてよい。
すなわち、入力された映像フレームに対する映像イメージ１２００上に表示されたスコアボード１２１０にはスコアイメージ１２２０が表示されてよく、スコアイメージ１２２０上に表示された数字は以前の映像イメージのスコアイメージ上に表示された数字と同一であってよい。この場合、図１２の（ｂ）に示すように、イベント領域の画素領域１２１０’のうち、試合時間領域の画素領域１２１０’−１を除く残りの領域の画素領域に対する変数が同一に維持されてよい。このように、試合時間領域の画素領域１２１０’−１を除く残りの領域の画素領域に対する変数が同一に維持されると、制御部１３０はイベントが発生していないと判断する。
一方、図１３の（ａ）に示すように、入力された映像フレームに対する映像イメージ１３００に関連して左側上段に表示されたスコアボード１３１０上にはスコアイメージ１３２０が表示されてよい。そして、スコアイメージ１３２０上に表示された数字は以前の映像イメージのスコアボード上に表示された数字と異なってよい。
例えば、図１２で説明した映像イメージ１２００のスコアボード１２１０に含まれたスコアイメージ１２２０上には０：０というスコア関連数字が表示されてよい。すなわち、映像イメージ１２００が入力される前までの映像イメージのスコアボードに含まれたスコアイメージ１２２０上には０：０というスコア関連数字が表示されてよい。一方、映像イメージ１２００が入力された後、図１３で説明した映像イメージ１３００が入力されてよく、入力された映像イメージ１３００のスコアボード１３１０に含まれたスコアイメージ１３２０上には０：１というスコア関連数字が表示されてよい。
この場合、図１３の（ｂ）に示すように、イベント領域の画素領域１３１０’のうち、試合時間領域の画素領域１３２０’を除く残りの領域の画素領域で一部の画素領域１３１０’−２の変数が１から０に変更されてよい。このように、試合時間領域の画素領域１３１０’−１を除く残りの画素領域のうち、一部の画素領域１３２０’−２の変数が変更されると、制御部１３０は数字認識アルゴリズムを用いて変数の変更された画素領域１３２０’−２に対するスコア領域とスコアボード１３１０上に含まれたスコアイメージ１３２０に対応する画素領域に対するスコア領域から数字を認識する。その後、それぞれのスコア領域から認識された数字が相互異なると、制御部１３０はイベントが発生したと検知することができる。
これまで、多様な実施形態を通じて本発明に係る放送受信装置１００の動作について詳細に説明してきた。以下では、本発明に係る放送受信装置１００で要約コンテンツサービスを提供する方法について詳細に説明する。
図１４は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。
図１４に示すように、放送受信装置１００はユーザの要約コンテンツサービス命令に応じて、ユーザの要請したコンテンツに対する映像フレームが入力される。このような複数の映像フレームが入力されると、放送受信装置１００は入力された複数の映像フレームのうち、最初に入力された映像フレームとその後に入力された映像フレームの画素値を比較し、要約コンテンツサービスのためのイベント領域を検出する（Ｓ１４１０）。ここで、要約コンテンツサービス関連コンテンツは、スポーツ試合に対するコンテンツであってよく、イベント領域はスポーツ試合時間をガイドする時間情報、チーム情報、スコア情報を含むスポーツ試合状況をガイドするスコアボード領域であってよい。
このようなイベント領域が検出されると、放送受信装置１００はイベント領域が検出された後、当該コンテンツに対する映像フレームが入力されると、入力された映像フレームから予め検出されたイベント領域に対応する領域を検出し、イベント領域と当該イベント領域に対応する領域との文字変化を検知し、イベント発生有無を検知する（Ｓ１４２０）。ここで、文字変化を検知することは、例えば、サッカースポーツの場合、ゴールが入った後にスコア関連数字が変化されるか否かを検知するものであってよい。よって、放送受信装置１００はスコア関連数字が変化されるか否かに応じて、イベントが発生したと検知することができる。このようなイベントが発生したと検知されると、放送受信装置１００はイベントの発生した時点の映像フレーム区間に基づいてハイライト映像のような要約コンテンツを生成し、生成された要約コンテンツを保存する（Ｓ１４３０）。このとき、放送受信装置１００は、イベントの発生した時点の映像フレーム区間に基づいて要約コンテンツが生成されると、生成された要約コンテンツを含む複数の映像フレームのうち１つの映像フレームに対する映像イメージを当該要約コンテンツを識別するための代表サムネールイメージとして決定することができる。その後、放送受信装置１００は予め生成された要約コンテンツ及び当該要約コンテンツを識別するために代表サムネールイメージとして決定された映像イメージを相互マッチングさせて保存することができる。
以下では、放送受信装置１００でイベント領域を検出する方法について詳細に説明する。
図１５は、本発明の一実施形態に係る放送受信装置でイベント領域を検出する方法のフローチャートである。
図１５に示すように、放送受信装置１００は複数の映像フレームのうち、最初に入力された第１映像フレーム及び第１映像フレームが入力された後に入力された第２映像フレームの間の相互対応する各画素領域別の画素差を算出する（Ｓ１５１０）。
各画素領域別の画素差が算出されると、放送受信装置１００は各画素領域別に算出された画素差と予め設定された臨界値とを比較し、予め設定された臨界値未満の画素差を有する画素領域数を算出する（Ｓ１５２０）。予め設定された臨界値未満の画素差を有する画素領域数が算出されると、放送受信装置１００は予め設定された臨界値未満の画素差を有する画素領域数が予め設定された臨界画素数未満か否かを判断する（Ｓ１５３０）。判断の結果、予め設定された臨界画素数以上の場合、放送受信装置１００はステップＳ１５１０ないしＳ１５３０を通じて、第２映像フレーム及び第２映像フレームの後に入力された映像フレームの間の画素値に基づいて予め設定された臨界値未満の画素差を有する画素領域数が予め設定された臨界画素数未満か否かを判断する。
一方、ステップＳ１５３０において予め設定された臨界値未満の画素差を有する画素領域数が予め設定された臨界画素数未満である場合、放送受信装置１００は予め設定された臨界回数以上連続的に検出されるか否かを判断する（Ｓ１５４０）。判断の結果、予め設定された臨界回数未満で検出されたと判断されると、放送受信装置１００は予め設定された臨界回数以上検出されるまで、上述のステップＳ１５１０ないしＳ１５４０の動作を繰り返し行う。
このような一連の動作を通じて、予め設定された臨界回数以上連続的に検出されると、放送受信装置１００は予め設定された臨界値未満の画素差を有する画素領域に基づいてイベント領域を検出し、検出されたイベント領域を保存する（Ｓ１５５０）。その後、放送受信装置１００は予め検出されたイベント領域を分析してイベント発生有無を判断するためのソース情報を生成し、生成されたソース情報を保存する（Ｓ１５６０）。ここで、イベント領域は、スポーツ試合関連スコアボード領域であり、ソース情報は試合時間領域、スコア領域及びチーム領域のうち少なくとも１つを含んでよい。
一実施形態によって、放送受信装置１００は予め検出されたイベント領域内の各画素領域別に設定された変数のうち、画素差発生を示す変数に設定された画素領域に基づいて試合時間領域を含むソース情報を生成し、生成されたソース情報を保存することができる。別の実施形態によって、放送受信装置１００は数字認識アルゴリズムを用いて予め検出されたイベント領域から数字を検出し、検出された数字が少なくとも２つ以上連続的に存在すると、数字の検出された画素領域に基づいて試合時間領域を含むソース情報を生成して保存することができる。更に別の実施形態によって、放送受信装置１００は文字認識アルゴリズムを用いて試合時間領域、スコア領域、チーム領域のうち少なくとも１つを含むソース情報を生成して保存することができる。
このように、チーム領域、スコア領域及び試合時間領域が決定されると、放送受信装置１００はチーム領域、スコア領域及び試合時間領域を含むソース情報を生成し、生成されたソース情報と予め検出されたイベント領域とを相互マッチングさせて保存することができる。
これまで、本発明に係る放送受信装置１００で要約コンテンツサービスのためのイベント領域を検出する方法について詳細に説明してきた。以下では、放送受信装置１００で予め検出されたイベント領域に基づいてイベント発生有無を検知する方法について詳細に説明する。
図１６は、本発明の一実施形態に係る放送受信装置でイベント発生有無を検知する方法を示すフローチャートであり、図１７は、本発明の一実施形態に係る放送受信装置でイベント領域に対応する領域を検出する方法を示すフローチャートである。
図１６に示すように、放送受信装置１００はイベント領域が検出された後、映像 フレームが入力されると、入力された映像フレームの各画素領域のうちイベント領域に対応する画素領域を分析してイベント領域に対応する領域が存在するか否かを判断する（Ｓ１６１０、Ｓ１６２０）。
より具体的に、図１７に示すように、放送受信装置１００は予め検出されたイベント領域のうち試合時間領域を除く残りの画素領域と、残りの画素領域に対応する映像フレームの画素領域から画素差を算出する（Ｓ１７１０）。その後、放送受信装置１００は、各画素領域から算出された画素差のうち、予め設定された臨界値未満の画素差を有する映像フレームの画素領域数を獲得する（Ｓ１７２０）。
その後、放送受信装置１００は、予め検出されたイベント領域のうち試合時間領域を除く残りの画素領域数対比予め設定された臨界値未満の画素差を有する映像フレームの画素領域数の割合値を算出する（Ｓ１７３０）。このように、割合値が算出されると、放送受信装置１００は算出された割合値と予め設定された画素割合値とを比較して予め設定された画素割合値未満か否かを判断する（Ｓ１７４０）。判断の結果、算出された割合値が予め設定された画素割合値未満である場合、放送受信装置１００はイベント領域に対応する領域をイベント領域と同一の領域で検出する（Ｓ１７５０）。
このように、図１７を介してイベント領域に対応する領域が検出されると、放送受信装置１００は予め検出されたイベント領域に関連して予め保存されたソース情報にスコア領域が含まれているか否かを判断する（Ｓ１６３０）。判断の結果、スコア領域が含まれていない場合、放送受信装置１００はイベント領域に対応する領域の画素領域のうち、ソース情報に含まれた試合時間領域を除く残りの画素領域に対応する画素領域の変数に基づいてスコア領域を決定する（Ｓ１６４０）。
実施形態によって、イベント領域（以下、第１イベント領域という）に対応する領域（以下、第２イベント領域という）の変数は、第１及び第２イベント領域の画素領域間の画素差に応じて１から０に、または１に維持されてよい。よって、放送受信装置１００は、第２イベント領域のうち試合時間領域を除く残りの領域に対する画素領域のうち変数が１の画素領域を獲得する。その後、放送受信装置１００は、変数が１の画素領域が予め設定された数以上連続的に隣接しているか否かを判断して連続的に隣接している場合、連結領域アルゴリズムを用いて変数が１の画素領域からスコア領域を決定する。その後、放送受信装置１００は予め検出されたスコア領域に基づいて予め検出されたイベント領域からスコア領域を決定する。
このように、イベント領域及びイベント領域に対応する領域からスコア領域がそれぞれ決定されると、放送受信装置１００は数字認識アルゴリズムを用いてそれぞれのスコア領域から数字を認識して数字変化有無に応じてイベント発生有無を検知する（Ｓ１６５０）。
一方、ステップＳ１６３０において、ソース情報にスコア領域が含まれていると、放送受信装置１００はスコア領域に基づいてイベント領域に対応する領域でスコア領域を検出する。その後、放送受信装置１００は、上述のステップＳ１６５０のように、数字認識アルゴリズムを用いてそれぞれのスコア領域から数字を認識し、認識された数字を比較して両数字が相互異なると、イベントが発生したと検知することができる。このように、両スコア領域から認識された数字を通じてイベントが発生したと検知されると、放送受信装置１００は予め保存されたイベント領域及びソース情報を当該イベント領域に対応する領域及び当該領域に対するソース情報にアップデートする。
よって、放送受信装置１００はイベント領域及びソース情報がアップデートされた後に映像フレームが入力されると、アップデートされたイベント領域及びソース情報に基づいて新たなイベント領域を検出し、検出されたイベント領域に基づいてイベント発生有無を検知することができる。
以下では、上述の放送受信装置１００で受信されたコンテンツに対する要約コンテンツ生成及び当該要約コンテンツに対するサムネールイメージを決定する更に別の実施形態について具体的に説明する。
上述のデータ処理部１５０は、コンテンツに含まれた映像及びオーディオデータに対するデコードを行うデコード部１５１を含んでよい。よって、デコード部１５１はユーザの要請したチャネルのコンテンツが受信されると、受信されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行う。しかし、本発明はそれに限定されずに、デコード部１５１は保存部１６０に予め保存されたコンテンツのうち、ユーザ命令に対応するコンテンツの映像及びオーディオデータに対するデコードを行うことができる。
一方、上述の保存部１６０は、ユーザの要請に応じて、視聴中のコンテンツ或いは予約設定されたコンテンツに関連してレコーディングされた録画コンテンツを保存することができる。更に、保存部１６０は視聴中のコンテンツ或いは録画コンテンツに対する要約コンテンツ及び要約コンテンツを識別するための代表サムネールイメージを保存することができる。ここで、要約コンテンツは、リアルタイムでストリーミングされるコンテンツまたはレコーディングされた録画コンテンツに対するハイライト映像であってよく、代表サムネールイメージはＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）映像イメージであってよい。しかし、本発明はそれに限定されず、代表サムネールイメージはＢＭＰ（Ｂｉｔｍａｐ）、ＧＩＦ（Ｇｒａｐｈｉｃ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）等の映像イメージであってよい。
よって、上述の出力部１２０は、制御部１３０の制御命令に応じて、映像出力部１２１及びオーディオ出力部１２３を介してユーザの要請したチャネルのコンテンツ或いは保存部１６０に予め保存された録画コンテンツの映像及びオーディオデータを出力するだけでなく、要約コンテンツに対する映像及びオーディオデータを出力することができる。
具体的に、要約コンテンツに対する映像及びオーディオデータを出力する場合、映像出力部１２１は、要約コンテンツ及び要約コンテンツを識別する代表サムネールイメージを同時に画面上にディスプレイすることができる。よって、ユーザが代表サムネールイメージを選択すると、映像出力部１２１は制御部１３０の制御命令に応じて、選択された代表サムネールイメージに対応する要約コンテンツから順次にディスプレイすることができる。このような要約コンテンツと代表サムネールイメージをディスプレイする動作は以下で詳細に説明する。
一方、上述の制御部１３０は、デコードされた映像及びオーディオデータのうち少なくとも１つを分析してイベント発生による要約コンテンツを生成する。なお、制御部１３０は、現在再生されるコンテンツに関連してデコードされた映像データの映像イメージを分析して予め設定された条件に対応する映像イメージを候補サムネールイメージとして決定し、保存部１６０に保存する。すなわち、制御部１３０は、コンテンツが再生される時点と同期化した時点から当該コンテンツの映像データに対する映像イメージを分析して予め設定された条件に対応する映像イメージを候補サムネールイメージとして決定し、決定された候補サムネールイメージを保存部１６０に保存することができる。
一方、制御部１３０は要約コンテンツが生成されると、要約コンテンツに含まれた時間情報に基づいて保存部１６０に予め保存された少なくとも１つの候補サムネールイメージのうち、当該要約コンテンツに対応する候補サムネールイメージを獲得し、獲得した候補サムネールイメージを当該要約コンテンツの代表サムネールイメージとして決定し、保存部１６０に保存する。ここで、要約コンテンツに含まれた時間情報は要約コンテンツに関連するコンテンツの再生時間と同期化した時間を基準に当該要約コンテンツが再生される時間であってよい。一方、制御部１３０は要約コンテンツの代表サムネールイメージに決定された候補サムネールイメージをＪＰＥＧ映像イメージに変換して保存部１６０に保存することが望ましい。
一方、制御部１３０は、デコードされた映像データの映像イメージを分析して候補サムネールイメージを決定する前に、デコードされた映像データの映像イメージ及び映像イメージの前後映像イメージを分析して上下左右のうち少なくとも１つの領域にブラックイメージが連続的に検出されるか否かを判断する。
一般的に、ＳＤ映像フォーマット或いはＨＤ映像フォーマットからなるコンテンツの場合、ディスプレイされる映像データの出力画面の割合が通常映像フォーマットからなる映像データの出力画面の割合と異なってよい。よって、ＳＤ映像フォーマット或いはＨＤ映像フォーマットからなる映像データの場合、上下左右のうち少なくとも１つの領域にブラックイメージを含んでよい。それにより、制御部１３０はコンテンツに対する再生が開始されると、最初に映像出力部１２１を介して出力される映像データから連続する映像データのうち、予め設定された数の映像データを分析して上下左右のうち少なくとも１つの領域にブラックイメージが連続的に検出されるか否かを判断する。判断の結果、少なくとも１つの領域にブラックイメージが連続的に検出されると、制御部１３０はブラックイメージを含む少なくとも１つの映像を除去した後、ブラックイメージを含む領域の除去された分だけ映像イメージをリサイジングする。
その後、制御部１３０はリサイジングされた映像イメージ或いはオリジナル映像イメージを分析してズームインショット（Ｚｏｏｍ−Ｉｎ Ｓｈｏｔ）イメージに該当する映像イメージを候補サムネールイメージに決定して保存部１６０に保存することができる。それにより、保存部１６０は、現在再生されているコンテンツに対する少なくとも１つの候補サムネールイメージを保存することができる。
上述のように、デコードされた映像データの映像イメージを分析してズームインショットイメージを候補サムネールイメージに決定する制御部１３０は、次のような実施形態を通じて映像イメージがズームインショットか否かを判断して候補サムネールイメージを決定することができる。
一実施形態によって、制御部１３０はデコードされた映像データ別の映像イメージを分析して有効フィールドカラーに対応する色相の画素割合値に基づいてズームインショットイメージと判断される映像データの映像イメージを候補サムネールイメージとして決定することができる。
具体的に、保存部１６０は、スポーツ種目別に映像イメージを示す色相のうち、代表色相を示す有効フィールドカラーに対する割合及び映像イメージの全色相の画素対比有効フィールドカラーの画素割合を示す基準画素割合値を保存することができる。
よって、制御部１３０は、デコードされた映像データ別の映像イメージを分析して有効フィールドカラーに対応する色相の画素割合値を算出する。その後、制御部１３０は、予め算出された画素割合値と予め設定されて保存部１６０に保存された当該有効フィールドカラーに対する基準画素割合値を比較し、基準画素割合値未満の画素割合値を有する映像イメージをズームインショットと判断することができる。よって、制御部１３０は、ズームインショットイメージと判断された映像イメージを候補サムネールイメージとして決定して保存部１６０に保存することができる。
例えば、サッカー、野球、アメリカンフットボール、ゴルフスポーツの有効フィールドカラーはグリーン（Ｇｒｅｅｎ）カラーに設定されてよく、競泳スポーツの有効フィールドカラーはブルー（Ｂｌｕｅ）カラーに設定されてよく、アイスホッケー、スピードスケーティングスポーツの有効フィールドカラーはホワイト（Ｗｈｉｔｅ）カラーに設定されてよい。このように、保存部１６０は、各スポーツ種目別に各スポーツ種目に対する代表色相を示す有効フィールドカラーが設定されてよい。なお、保存部１６０は、スポーツ関連コンテンツの映像データに対する映像イメージを示す全色相の画素対比当該スポーツに対する有効フィールドカラーの画素割合を示す基準画素割合値を保存することができる。
例えば、再生中のコンテンツがサッカー関連コンテンツである場合、制御部１３０は再生中のコンテンツの映像データ別の映像イメージを分析してサッカースポーツの有効フィールドカラーのグリーンカラーの画素値と全映像イメージを示す色相の画素値からグリーンカラーに対する画素割合値を算出する。その後、制御部１３０は、算出されたグリーンカラーに対する画素割合値と予め設定されて保存されたサッカースポーツ関連基準画素割合値を比較し、基準画素割合値未満の画素割合値を有する映像イメージを読み取り、読み取られた映像イメージを候補サムネールイメージに決定して保存部１６０に臨時保存する。このとき、制御部１３０は、候補サムネールイメージに決定された映像イメージが再生される時点の時間情報を保存部１６０に同時に保存する。よって、保存部１６０は再生中のコンテンツに関連する少なくとも１つの候補サムネールイメージ及び当該候補サムネールイメージに対する時間情報を保存することができる。
更に別の実施形態によって、制御部１３０はデコードされた映像データ別の映像イメージを分析して映像イメージを示す画素数と予め設定された臨界画素数とを比較する。その後、制御部１３０は、デコードされた映像データ別の映像イメージのうち、予め設定された臨界画素数未満の画素数を含む映像イメージをズームインショットイメージと判断し、ズームインショットと判断された映像イメージを候補サムネールイメージに決定して保存部１６０に保存する。このとき、制御部１３０は、候補サムネールイメージに決定された映像イメージが再生される時点の時間情報を獲得し、当該候補サムネールイメージに決定された映像イメージとともに保存部１６０に保存する。よって、保存部１６０は、再生中のコンテンツに関連する少なくとも１つの候補サムネールイメージ及び当該候補サムネールイメージに対する時間情報を保存することができる。
例えば、デコードされた映像データ別の映像イメージのうち、第１映像イメージは５の色相に対する画素数を含むことができ、第２映像イメージは１０の色相に対する画素数を含むことができる。そして、予め設定された臨界画素数は７に設定されてよい。この場合、制御部１３０は、第１及び第２映像イメージの画素数のそれぞれと臨界画素数とを比較して、臨界画素数より少ない画素数を含む第１映像イメージを候補サムネールイメージとして決定することができる。候補サムネールイメージが決定されると、制御部１３０は候補サムネールイメージとして決定された第１映像イメージと候補サムネールイメージに決定された第１映像イメージの再生される時点の時間情報を保存部１６０に保存することができる。
更に別の実施形態によって、制御部１３０はデコードされた映像データ別の映像イメージに含まれたオブジェクトのうち、予め設定された臨界サイズ以上のオブジェクトを含む映像イメージをズームインショットイメージと判断し、ズームインショットと判断された映像イメージを候補サムネールイメージに決定して保存部１６０に保存する。このとき、制御部１３０は、候補サムネールイメージに決定された映像イメージの再生される時点の時間情報を獲得し、当該候補サムネールイメージとして決定された映像イメージとともに保存部１６０に保存する。それにより、保存部１６０は再生中のコンテンツに関連する少なくとも１つの候補サムネールイメージ及び当該候補サムネールイメージに対する時間情報を保存することができる。
更に別の実施形態によって、制御部１３０はデコードされた映像データ別の映像イメージを相互比較分析する。このとき、制御部１３０は、上述の多様な実施形態のうち１つを通じて、映像データ別の映像イメージを相互比較分析することができる。その後、制御部１３０は、相互比較された映像イメージのうち１つの映像イメージを候補サムネールイメージに決定し、候補サムネールイメージに決定された映像イメージを保存することができる。
このような多様な実施形態を通じて、再生中のコンテンツに関連する少なくとも１つの候補サムネールイメージが決定されると、制御部１３０は予め決定された少なくとも１つの候補サムネールイメージと以前の映像イメージのヒストグラムに基づいてシーン変化率を決定する。その後、制御部１３０は、予め決定されたシーン変化率と予め設定された基準変化率とを比較し、予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージを除く残りの候補サムネールイメージを保存部１６０から削除する。それにより、保存部１６０は、予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージのみを保存することができる。
具体的に、制御部１３０は予め決定された少なくとも１つの候補サムネールイメージに対する映像イメージと当該映像イメージの以前の映像イメージのそれぞれに対するヒストグラムを生成する。その後、制御部１３０はユークリッド距離（Ｅｕｃｌｉｄｅａｎ Ｄｉｓｔａｎｃｅ）を用いてそれぞれのヒストグラムの相違値を算出し、算出された相違値の度合いに応じて、候補サムネールイメージに対するシーン変化率を決定することができる。このように、候補サムネールイメージに対するシーン変化率が決定されると、制御部１３０は予め決定された候補サムネールイメージのシーン変化率が予め設定された基準変化率未満のシーン変化率か否かに応じて、当該候補サムネールイメージを保存部１６０から削除するか否かを決定することができる。
このように、再生中のコンテンツに関連して少なくとも１つの候補サムネールイメージが保存部１６０に保存されると、制御部１３０は予め保存された少なくとも１つの候補サムネールイメージの時間情報と要約コンテンツの再生関連時間情報とに基づいて当該要約コンテンツの再生区間に属する候補サムネールイメージが保存部１６０に保存されているか否かを判断する。判断の結果、予め生成された要約コンテンツの再生区間に属する候補サムネールイメージが保存部１６０に保存されていると、制御部１３０は当該候補サムネールイメージを予め生成された要約コンテンツに対する代表サムネールイメージとして決定することができる。
一方、予め生成された要約コンテンツの再生区間に属する候補サムネールイメージが保存部１６０に保存されていない場合、制御部１３０は予め生成された要約コンテンツの再生が終了する区間の映像イメージを代表サムネールイメージとして決定することができる。しかし、本発明はそれに限定されずに、制御部１３０は予め設定された要約コンテンツの再生が開始する区間の映像イメージ或いは要約コンテンツを構成する複数の映像イメージのうちズームインショットイメージに関連する映像イメージを代表サムネールイメージとして決定することができる。このように、予め生成された要約コンテンツに対する代表サムネールイメージが決定されると、制御部１３０は予め決定された代表サムネールイメージと当該要約コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
一方、制御部１３０は、上述の実施形態を通じてデコードされた映像及びオーディオデータのうち少なくとも１つを分析してイベント発生によるイベント区間を検出し、検出されたイベント区間に基づいて要約コンテンツを生成することができる。具体的に、制御部１３０は、検出されたイベント区間に該当する映像区間及び当該映像区間が前後映像区間に基づいて要約コンテンツを生成することができる。ここで、前後映像区間は予め設定された条件に対応する映像区間であってよい。実施形態によって、制御部１３０はイベント区間が検出されると、検出されたイベント区間に該当する映像区間を基準に予め設定された固定時間内に存在する前後映像区間を獲得することができる。このような予め設定された固定時間内に存在する前後映像区間が獲得されると、制御部１３０はイベント区間に該当する映像区間及び予め設定された固定時間内に存在する前後映像区間に基づいて要約コンテンツを生成することができる。
このとき、制御部１３０は、固定時間内に存在する前後映像区間の映像イメージを分析してシーン場面の変化された映像区間があるか否かに応じて、予め獲得した前後映像区間のうち一部の映像区間と、イベント区間に該当する映像区間に基づいて要約コンテンツを生成することができる。
図１８は、本発明の一実施形態に係る放送受信装置でブラックイメージを含む映像イメージを加工処理する例示図である。
図１８の（ａ）は、ＳＤ映像フォーマット或いはＨＤ映像フォーマットからなるコンテンツに含まれた映像イメージ１８１０は、上下左右領域１８２０にブラックイメージを含んでよい。このように、映像イメージ１８１０は、上下左右領域１８２０にブラックイメージが含まれている場合、制御部１３０は、上下左右領域１８２０に含まれたブラックイメージを除去した後、映像イメージ１８１０をリサイジングする。すなわち、制御部１３０は、映像イメージ１８１０の上下左右領域１８２０に含まれたブラックイメージを除去した後、ブラックイメージの除去された領域１９２０分だけ映像イメージ１８１０をリサイジングする。よって、制御部１３０は、図１８の（ｂ）に示すように、ブラックイメージを含む領域１８２０分だけサイズの拡大された映像イメージ１８１０’を生成することができる。
図１９は、本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定する例示図である。
図１９に示すように、制御部１３０は、コンテンツが再生される時点と同期した時点から当該コンテンツに含まれた映像データの映像イメージを分析する。コンテンツが再生される場合、第１映像イメージ１９１０から順次に画面上にディスプレイされてよい。よって、制御部１３０は、第１映像イメージ１９１０から順次に分析することができる。図示のように、第１出力映像イメージ１９１０’は第１映像イメージ１９１０に対応する映像イメージとして、制御部１３０は、第１出力映像イメージ１９１０’の有効フィールドカラーに対応する色相の画素割合値を算出する。例えば、有効フィールドカラーに対応する色相がグリーンであれば、制御部１３０は第１出力映像イメージ１９１０’を示す色相の画素対比有効フィールドカラーに対応するグリーンカラーの画素から画素割合値を算出することができる。このような画素割合値が算出されると、制御部１３０は第１出力映像イメージ１９１０’の有効フィールドカラーに対応するグリーンカラーに対する画素割合値が予め設定された基準画素割合値未満か否かを判断する。判断の結果、第１出力映像イメージ１９１０’の有効フィールドカラーに対応するグリーンカラーに対する画素割合値が予め設定された基準画素割合値以上であれば、制御部１３０は第１映像イメージ１９１０に対応する第１出力映像イメージ１９１０’がズームインショットイメージではないと判断する。
このような方式を通じて、制御部１３０は第１映像イメージ１９１０から順次に画面上にディスプレイされる映像イメージのうち、第２映像イメージ１９２０及び第３映像イメージ１９３０がズームインショットイメージと判断することができる。ここで、ズームインショットイメージと判断された第２及び第３映像イメージ１９２０、１９３０のそれぞれに対応する第２及び第３出力映像イメージ１９２０’、１９３０’は有効フィールドカラーに対応するグリーンカラーに対する画素割合値が予め設定された基準画素割合値より少ない映像イメージであってよい。よって、制御部１３０は、有効フィールドカラーに関連して予め設定された基準画素割合値より少ない画素割合値を有する第２及び第３映像イメージ１９２０、１９３０をズームインショットイメージと判断し、ズームインショットイメージに該当する第２及び第３映像イメージ１９２０、１９３０を候補サムネールイメージとして決定することができる。
図２０は、本発明の一実施形態に係る放送受信装置で予め決定された候補サムネールイメージのうち、シーン変化率に基づいて最終候補サムネールイメージを決定する例示図である。
図２０の（ａ）及び（ｂ）に示す第１及び第２映像イメージ２０１０、２０２０は、予め設定された条件に基づいて候補サムネールイメージに決定された映像イメージであってよい。このような第１及び第２映像イメージ２０１０、２０２０が候補サムネールイメージに決定されると、制御部１３０は候補サムネールイメージに決定された第１映像イメージ２０１０と以前の映像イメージのヒストグラムに基づいてシーン変化率を決定する。なお、制御部１３０は、候補サムネールイメージに決定された第２映像イメージ２０２０と以前の映像イメージのヒストグラムに基づいてシーン変化率を決定する。その後、制御部１３０は、候補サムネールイメージに決定された第１及び第２映像イメージ２０１０、２０２０のシーン変化率と予め設定された基準変化率とを比較し、予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージを最終の候補サムネールイメージとして決定する。
図示のように、第１及び第２映像イメージ２０１０、２２０２０のうち第１映像イメージ２０１０はカメラアングルの急激な移動によって、ブラー（Ｂｌｕｒ）現象の発生した映像イメージであってよい。よって、このようなブラー現象の発生した第１映像イメージ２０１０は以前の映像イメージとのシーン変化率が大きいため、予め設定された基準変化率より大きい変化率を有してよい。よって、制御部１３０は、第１及び第２映像イメージ２０１０、２０２０のうち第１映像イメージを候補サムネールイメージから除き、第２映像イメージ２０２０のみを最終の候補サムネールイメージとして決定することができる。
図２１は、本発明の一実施形態に係る放送受信装置に要約コンテンツを生成する例示図である。
図２１に示すように、制御部１３０はデコードされた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出することができる。上述のように、制御部１３０は、イベント検出部１３１を介してデコードされた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出することができる。
図示のように、第１映像区間２１１１がイベント区間として検出されると、制御部１３０はイベント区間として検出された第１映像区間２１１１を基準に予め設定された固定時間内に存在する前後映像区間を獲得する。よって、第１映像区間２１１１を基準に以前の映像区間２１１３、２１２０のうち第２映像区間２１１３が予め設定された固定時間内に存在してよく、第１映像区間２１１１を基準の以後の映像区間２１１５、２１３０のうち第３映像区間２１１５が予め設定された固定時間内に存在してよい。
このように、第１映像区間２１１１を基準に予め設定された固定時間内に存在する第２及び第３映像区間２１１３、２１１５が獲得されると、制御部１３０は第１ないし第３映像区間２１１１、２１１３、２１１５に基づいて要約コンテンツ２１１０を生成することができる。
このとき、制御部１３０は、予め獲得した第２及び第３映像区間２１１３、２１１５内に含まれた映像イメージを分析してシーン変化の発生した映像区間があるか否かを判断し、シーン変化の発生した映像区間があれば、当該映像区間を除く残りの映像区間と予め検出されたイベント区間に該当する第１映像区間２１１１に基づいて、要約コンテンツを生成することができる。
図２２は、本発明の一実施形態に係る放送受信装置で要約コンテンツを再生する例示図である。
図２２に示すように、放送受信装置１００は、ユーザの要約コンテンツサービス命令が入力されると、入力された要約コンテンツサービス命令に対応する要約コンテンツ２２１０を画面の上段領域にディスプレイし、当該要約コンテンツに関連して予め生成された第１ないし第３代表サムネールイメージ２２２０〜２２４０を画面の下段領域にディスプレイすることができる。ここで、第１代表サムネールイメージ２２２０は要約コンテンツ２１１０に関連するコンテンツから最初のイベント発生による要約コンテンツを識別するためのイメージであってよく、第３代表サムネールイメージ２２３０は当該コンテンツから最後のイベント発生による要約コンテンツを識別するためのイメージであってよい。
よって、放送受信装置１００は、ユーザの要約コンテンツサービス命令が入力された後、追加命令が入力されないと、映像出力部１２１を介して第１代表サムネールイメージ２２１０とマッチングされた要約コンテンツ２２１０から順次に出力することができる。
一方、放送受信装置１００は、ユーザの要約コンテンツサービス命令が入力された後、第２代表サムネールイメージ２２２０に対する選択命令が入力されると、現在再生中の要約コンテンツ２２１０を中断し、映像出力部１２１を介して第２代表サムネールイメージ７２０とマッチングされた要約コンテンツ２２１０から順次に出力することができる。
これまで、多様な実施形態を通じて、本発明に係る放送受信装置１００の動作について詳細に説明してきた。以下では、本発明に係る放送受信装置１００で要約コンテンツサービスを提供する方法について詳細に説明する。
図２３は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。
図２３に示すように、放送受信装置１００はユーザの要請した少なくとも１つのコンテンツの映像及びオーディオデータをデコードする（Ｓ２３１０）。ここで、ユーザの要請したコンテンツは、放送サーバ（図示せず）を介してリアルタイムでストリーミングされたり予め保存された録画コンテンツであってよい。
このようなコンテンツの映像及びオーディオデータに対するデコードが行われると、放送受信装置１００はデコードされた映像データの映像イメージと当該映像イメージの前後映像イメージとを分析し、上下左右のうち少なくとも１つの領域にブラックイメージが連続的に検出されるか否かを判断する（Ｓ２３２０）。
一般的に、ＳＤ映像フォーマット或いはＨＤ映像フォーマットからなるコンテンツの場合、ディスプレイされる映像データの出力画面の割合が通常映像フォーマットからなる映像データの出力画面の割合と異なってよい。よって、ＳＤ映像フォーマット或いはＨＤ映像フォーマットからなる映像データの場合、上下左右のうち少なくとも１つの領域にブラックイメージを含んでよい。それにより、放送受信装置１００はコンテンツに対する再生が開始されると、最初にデコードされた映像データから連続する映像データのうち、予め設定された数の映像データを分析して上下左右のうち少なくとも１つの領域にブラックイメージが連続的に検出されるか否かを判断する。
判断の結果、ブラックイメージを含む領域が検出されると、放送受信装置１００はブラックイメージを含む少なくとも１つの領域を除去した後、ブラックイメージを含む領域が除去された分だけ映像イメージをリサイジングする（Ｓ２３３０）。
その後、放送受信装置１００はデコードされた映像データの映像イメージを分析して少なくとも１つの候補サムネールイメージを決定して保存する（Ｓ２３４０）。ここで、デコードされた映像データの映像イメージは、ブラックイメージを含まないオリジナル映像イメージか、或いは、リサイジングされた映像イメージであってよい。候補サムネールイメージを決定して保存する実施形態は、以下において図面を参照してより詳細に説明する。
その後、放送受信装置１００はデコードされた映像及びオーディオデータのうち少なくとも１つを分析してイベント発生による要約コンテンツを生成する（Ｓ２３５０）。その後、放送受信装置１００は、要約コンテンツに含まれた時間情報に基づいて要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定し、決定された代表サムネールイメージと当該要約コンテンツとを相互マッチングさせて保存する（Ｓ２３６０）。ここで、候補サムネールイメージを決定するステップＳ２３４０と、要約コンテンツを生成するステップＳ２３５０は同時に進められてよい。すなわち、放送受信装置１００は、ユーザの命令に応じて、コンテンツが再生される時点から当該コンテンツの映像及びオーディオデータのうち少なくとも１つを分析して候補サムネールイメージ及び要約コンテンツを生成することができる。
一方、放送受信装置１００は、上述のステップＳ２３４０において少なくとも１つの映像イメージを候補サムネールイメージとして決定するために、次のような実施形態を通じて映像イメージがズームインショットイメージか否かを判断し、候補サムネールイメージを決定することができる。以下では、図２４ないし図２８を通じて、放送受信装置１００でデコードされた少なくとも一つの映像データの映像イメージを候補サムネールイメージとして決定する方法について詳細に説明する。
図２４は、本発明の一実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法の第１フローチャートである。
図２４に示すように、放送受信装置１００は、コンテンツの映像及びオーディオデータに対するデコードが行われると、デコードされた映像データ別の映像イメージを分析してズームインショットイメージと判断される映像イメージを検出する（Ｓ２４１０）。その後、放送受信装置１００は、ズームインショットイメージと判断される映像イメージを候補サムネールイメージとして決定し、候補サムネールイメージとして決定された映像イメージを保存する（Ｓ２４２０）。このとき、放送受信装置１００は、候補サムネールイメージとして決定された映像イメージが再生される時点の時間情報を獲得して当該候補サムネールイメージとして決定された映像イメージとともに保存する。
このように、ズームインショットイメージと判断された映像イメージが候補サムネールイメージとして決定されて保存されると、放送受信装置１００は上述のステップＳ２３６０を通じて要約コンテンツに含まれた時間情報に基づいて予め保存された候補サムネールイメージのうち要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定することができる。
図２５は、本発明の別の実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法の第２フローチャートである。
図２５に示すように、放送受信装置１００はデコードされた映像データ別の映像イメージを分析して有効フィールドカラーに対応する色相の画素割合値を算出する（Ｓ２５１０）。その後、放送受信装置１００は、各映像データ別に算出された画素割合値と基準画素割合値とを比較し、基準画素割合値未満の画素割合値を有する映像データを候補サムネールイメージとして決定して保存する（Ｓ２５２０）。このとき、放送受信装置１００は、候補サムネールイメージに決定された映像イメージが再生される時点の時間情報を獲得して当該候補サムネールイメージとして決定された映像イメージとともに保存する。
具体的に、放送受信装置１００は、スポーツ種目別に映像イメージを示す色相のうり、代表色相を示す有効フィールドカラーに対する割合及び映像イメージの全色相の画素対比有効フィールドカラーの画素割合を示す基準画素割合値を保存することができる。よって、放送受信装置１００は、デコードされた映像データ別の映像イメージを分析して有効フィールドカラーに対応する色相の画素割合値を算出する。その後、放送受信装置１００は、予め算出された画素割合値と予め設定されて保存された当該有効フィールドカラーに対する基準画素割合値とを比較し、基準画素割合値未満の画素割合値を有する映像イメージを候補サムネールイメージとして決定して保存することができる。このとき、放送受信装置１００は、候補サムネールイメージに決定された映像イメージが再生される時点の時間情報を獲得して当該候補サムネールイメージに決定された映像イメージとともに保存する。
その後、放送受信装置１００は、上述のステップＳ２３６０を通じて要約コンテンツに含まれた時間情報に基づいて予め保存された候補サムネールイメージのうち、要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定することができる。
図２６は、本発明の更に別の実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法の第３フローチャートである。
図２６に示すように、放送受信装置１００はデコードされた映像データ別の映像イメージを分析して映像イメージを示す画素数と予め設定された臨界画素数とを比較する（Ｓ２６１０）。その後、放送受信装置１００は、デコードされた映像データ別の映像イメージのうち、予め設定された臨界画素数未満の画素数を含む映像イメージを候補サムネールイメージとして決定して保存する（Ｓ２６２０）。このとき、放送受信装置１００は、候補サムネールイメージとして決定された映像イメージが再生される時点の時間情報を獲得して当該候補サムネールイメージとして決定された映像イメージとともに保存する。
その後、放送受信装置１００は、上述のステップＳ２３６０を通じて要約コンテンツに含まれた時間情報に基づいて予め保存された候補サムネールイメージのうち、要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定することができる。
図２７は、本発明の更に別の実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法の第４フローチャートである。
図２７に示すように、放送受信装置１００はデコードされた映像データ別の映像イメージに含まれたオブジェクトと予め設定された臨界サイズとを比較する（Ｓ２７１０）。その後、放送受信装置１００は、臨界サイズ以上の大きさのオブジェクトを含む映像イメージを候補サムネールイメージとして決定して保存する（Ｓ２７２０）。このとき、放送受信装置１００は、候補サムネールイメージとして決定された映像イメージが再生される時点の時間情報を獲得して当該候補サムネールイメージとして決定された映像イメージとともに保存する。
その後、放送受信装置１００は、上述のステップＳ２３６０を通じて要約コンテンツに含まれた時間情報に基づいて予め保存された候補サムネールイメージのうち、要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定することができる。
図２８は、本発明の更に別の実施形態に係る放送受信装置で候補サムネールイメージを決定及び保存する方法の第５フローチャートである。
図２８に示すように、放送受信装置１００はデコードされた映像データ別の映像イメージを相互比較分析する（Ｓ２８１０）。このとき、放送受信装置１００は、図２４ないし図２７のうち少なくとも１つの実施形態を通じて映像データ別の映像イメージを相互比較分析することができる。その後、放送受信装置１００は、相互比較された映像イメージのうちの１つの映像イメージを候補サムネールイメージとして決定し、候補サムネールイメージとして決定された映像イメージを保存する（Ｓ２８２０）。
その後、放送受信装置１００は、上述のステップＳ２３６０を通じて要約コンテンツに含まれた時間情報に基づいて予め保存された候補サムネールイメージのうち、要約コンテンツに対応する候補サムネールイメージを当該要約コンテンツに対する代表サムネールイメージとして決定することができる。
このような多様な実施形態を通じて再生中のコンテンツに関連する少なくとも１つの候補サムネールイメージが決定されると、放送受信装置１００は予め決定された少なくとも１つの候補サムネールイメージと以前の映像イメージのヒストグラムに基づいてシーン変化率を決定する。その後、放送受信装置１００は、予め決定されたシーン変化率と予め設定された基準変化率とを比較し、予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージを除く残りの予め保存された候補サムネールイメージを削除する。それにより、放送受信装置１００は、予め設定された基準変化率未満のシーン変化率を有する候補サムネールイメージのみを保存することができる。
以下では、上述のステップＳ２３６０を通じて保存受信装置１００で予め保存された候補サムネールイメージのうち、１つの候補サムネールイメージを予め生成された要約コンテンツの代表サムネールイメージとして決定する方法について詳細に説明する。
図２９は、本発明の一実施形態に係る放送受信装置で代表サムネールイメージを決定する方法のフローチャートである。
図２９に示すように、放送受信装置１００はコンテンツの映像及びオーディオデータのうち少なくとも１つを分析してイベント発生による要約コンテンツが生成されると、予め保存された少なくとも１つの候補サムネールイメージの時間情報と当該要約コンテンツの再生関連時間情報に基づいて当該要約コンテンツの再生区間に属する候補サムネールイメージが保存されているか否かを判断する（Ｓ２９１０）。判断の結果、予め生成された要約コンテンツの再生区間に属する候補サムネールイメージが保存されていると、放送受信装置１００は当該候補サムネールイメージを予め生成された要約コンテンツに対する代表サムネールイメージとして決定する（Ｓ２９２０）。
一方、判断の結果、予め生成された要約コンテンツの再生区間に属する候補サムネールイメージが保存されていない場合、放送受信装置１００は要約コンテンツを構成する映像イメージのうち１つの映像イメージを代表サムネールイメージとして決定する（Ｓ２９３０）。実施形態によって、放送受信装置１００は予め生成された要約コンテンツの再生区間に属する候補サムネールイメージが保存されていないと、要約コンテンツの再生が終了する区間の映像イメージを代表サムネールイメージとして決定することができる。このように、予め決定された要約コンテンツに対する代表サムネールイメージが決定されると、放送受信装置１００は代表サムネールイメージとして決定された映像イメージをＪＰＥＧ映像イメージに変換し、ＪＰＥＧ映像イメージに変換された代表サムネールイメージと当該要約コンテンツとを相互マッチングさせて保存する（Ｓ２９４０、Ｓ２９５０）。
以下では、放送受信装置１００でデコードされたコンテンツと要約コンテンツとを同時に出力する動作及び方法について詳細に説明する。
上述のように、放送サーバ（図示せず）から選局されたチャネルを通じてコンテンツを受信する受信部１１０は、チューナ部１１３とデマルチプレキシング部１１１を含んでよい。チューナ部１１３は、放送サーバ（図示せず）から提供される複数のチャネル別のコンテンツを受信し、デマルチプレキシング部１１１はチューナ部１１３を介して受信された複数のチャネル別のコンテンツのうち、ユーザの要請したチャネルのコンテンツを抽出する。このように、ユーザの要請したチャネルのコンテンツが抽出されると、データ処理部１５０はデコード部１５１を介して当該コンテンツに含まれた映像及びオーディオデータに対するデコードを行い、デコードされた映像及びオーディオデータを出力可能な形態で信号処理する。それにより、出力部１２０は、信号処理された映像及びオーディオデータを映像出力部１２１及びオーディオ出力部１２３を介して出力することができる。
一方、制御部１３０は、上述のように、イベント検出部１３１を介して検出されたイベント区間に基づいてコンテンツに対する要約コンテンツを生成して保存部１６０に保存する。なお、制御部１３０はユーザ命令に応じて、ユーザの要請したチャネルのコンテンツと保存部１６０に予め保存された要約コンテンツとを同時に出力するように出力部１２０を制御することができる。ここで、要約コンテンツはリアルタイムでストリーミングされるコンテンツまたはレコーディングされた録画コンテンツに対するハイライト映像であってよい。
実施形態によって、制御部１３０はユーザ命令が第１ユーザ命令である場合、視聴中のコンテンツ及び当該コンテンツに対する要約コンテンツを同時に出力するように出力部１２０を制御することができる。一方、ユーザ命令が第２ユーザ命令である場合、制御部１３０は視聴中のコンテンツ及び当該コンテンツと異なる他チャネルのコンテンツに対する要約コンテンツを同時に出力するように出力部１２０を制御することができる。
ここで、第１ユーザ命令は視聴中のコンテンツに対する要約コンテンツサービス要請命令であってよく、第２ユーザ命令は視聴中のコンテンツと異なる他チャネルの要約コンテンツサービス要請命令であってよい。よって、制御部１３０は、第１ユーザ命令が入力されると、視聴中のコンテンツに対する要約コンテンツを生成して保存部１６０に保存する。その後、制御部１３０は、視聴中のコンテンツ及び予め保存された当該コンテンツに対する要約コンテンツを同時に出力することができる。一方、第２ユーザ命令が入力されると、制御部１３０は、入力された第２ユーザ命令に対応するチャネルのコンテンツに対する要約コンテンツを生成して保存部１６０に保存する。その後、制御部１３０は、視聴中のコンテンツ及び予め保存された第２ユーザ命令に対応するコンテンツに対する要約コンテンツを同時に出力することができる。
一方、保存部１６０は、ユーザの要請に応じて、視聴中のコンテンツに関連して録画されたコンテンツ及び視聴中のコンテンツに対する要約コンテンツを保存する。なお、保存部１６０は、コンテンツから少なくとも１つのイベント区間を検出し、検出されたイベント区間に基づいて要約コンテンツを生成するための多様な設定情報を保存することができる。
このような保存部１６０は、上述のように、スポーツ関連コンテンツの映像及びオーディオデータからイベント区間を検出するために予め設定された試合状況条件及び臨界レベル値を保存するか、或いは、スポーツ関連コンテンツの付加データからイベント区間を検出するために予め設定された単語情報を保存することができる。なお、保存部１６０は、予め検出されたイベント区間の映像区間が有効か否かを判断するためのフィールドカラー及びフィールドカラーの割合を決定するための臨界値を保存することができる。
一方、制御部１３０は、ユーザの要請したコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出するようにイベント検出部１３１を制御する。このような制御命令に応じて、イベント検出部１３１は、保存部１６０に予め保存された条件に基づいて、ユーザの要請したコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出する。
コンテンツに含まれた映像及びオーディオデータを分析してイベント区間を検出する方法は、上記において詳細に説明しているため、以下では詳細な説明を省略する。
イベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツまたは予め設定された時間単位で予め保存されたリアルタイムコンテンツに対する映像区間のうち、当該イベント区間の検出された時間情報に基づいて、イベント区間に対する映像区間を獲得することができる。ここで、イベント区間の検出された時間情報は、当該イベント区間に対する映像区間が出力部１２０を介して出力される時間或いはイベント区間に対する映像区間が再生される総再生時間であってよい。
一実施形態によって、保存部１６０は要約コンテンツに関連するコンテンツに対する録画コンテンツを保存することができる。この場合、イベント検出部１３１は、出力部１２０を介して出力されるコンテンツのうち、予め設定された条件に対応するイベントの発生したイベント区間の時間情報を制御部１３０に伝達することができる。それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツの映像区間のうち、イベント検出部１３１によってイベント区間の検出された時間情報に対応する時間の映像区間を獲得することができる。
例えば、イベント検出部１３１は、出力部１２０を介して出力されるコンテンツに対する映像区間のうち、当該コンテンツの出力された時点を基準に３０分１５秒から２０秒の間の映像区間を、予め設定された条件に対応するイベントの発生したイベント区間として検出することができる。そして、保存部１６０は、出力部１２０を介して出力される時点と同期化した時点にコンテンツを録画保存したり録画されたコンテンツを保存することができる。この場合、制御部１３０は、イベント区間として検出された時間情報に基づいて保存部１６０に予め保存されたコンテンツの映像区間のうち、３０分１５秒から２０秒の間の映像区間を獲得することができる。
別の実施形態によって、保存部１６０は、要約コンテンツに関連するリアルタイムコンテンツの映像区間を予め設定された時間単位で臨時保存することができる。この場合、イベント検出部１３１は、出力部１２０を介して出力されるコンテンツのうち、予め設定された条件に対応するイベントの発生したイベント区間が維持される時間情報を制御部１３０に伝達することができる。ここで、イベント区間の維持される時間情報は、上述のように、イベント区間に対する映像区間が再生される総再生時間であってよい。それにより、制御部１３０は、イベント検出部１３１によって検出されたイベント区間が維持される時間情報に基づいて、保存部１６０に臨時保存された映像区間のうち、イベント区間の維持される時間に対応する時間に臨時保存された映像区間を獲得することができる。
例えば、保存部１６０は、１分単位でコンテンツに対する映像区間を臨時保存することができる。一方、イベント検出部１３１を介して検出されたイベント区間の維持される時間は５秒であってよい。この場合、制御部１３０は、イベント区間の維持される時間に保存部１６０に臨時保存された映像区間のうち、最も先に臨時保存された映像区間から５秒以内に臨時保存された映像区間までを獲得し、獲得した映像区間をイベント区間に対する映像区間として決定することができる。
このように、イベント区間の検出された時点に基づいて、当該イベント区間に対する映像区間が獲得されると、制御部１３０は上述の実施形態に通じて獲得した映像区間を分析して当該映像区間に対するコンテンツがスポーツ関連コンテンツか否かを判断する。
判断の結果、予め検出された少なくとも１つのイベント区間に対する映像区間がスポーツ関連コンテンツと判断されると、制御部１３０は、上述のように、予め検出されたイベント区間に対する映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得する。その後、制御部１３０は、獲得した前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間がない場合、制御部１３０は少なくとも１つのイベント区間の検出された時間の映像区間と予め設定された固定時間内に属する前後映像区間をコンテンツ要約区間として決定することができる。
一方、判断の結果、シーン場面の変化された区間があれば、制御部１３０は予め設定された固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得する。その後、制御部１３０は、予め検出されたイベント区間に対する映像区間及び可変された固定時間内に属する前後映像区間をコンテンツ要約区間として決定することができる。
一方、固定時間は、上述のように、絶対固定時間を含むことができ、このような絶対固定時間は可変されてよい。よって、制御部１３０は、固定時間内に存在する前後映像区間のうち、絶対固定時間内に存在する前後映像区間を除く残りの前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間があれば、制御部１３０は、絶対固定時間を除く残りの固定時間内で固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得することができる。
その後、制御部１３０は、予め獲得したイベント区間に対する映像区間及び当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成して保存部１６０に保存する。このとき、制御部１３０は、予め生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間の映像イメージをサムネールイメージとして決定し、決定されたサムネールイメージと予め生成された要約コンテンツとをマッチングさせて保存部１６０に保存する。
要約コンテンツを構成する映像区間からサムネールイメージを決定し、決定されたサムネールイメージと当該要約コンテンツとをマッチングさせて保存する方法は、上記において詳細に説明しているため、以下では詳細な説明を省略する。
以下では、上述の制御部１３０で予め検出されたイベント区間からコンテンツ要約区間を決定する動作について詳細に説明する。
図３０は、本発明の一実施形態に係る放送受信装置で検出されたイベント区間に基づいて要約コンテンツ生成のための有効性有無を判断するための例示図であり、図３１は、本発明の一実施形態に係る放送受信装置でイベント区間に対する映像区間に基づいて要約コンテンツを生成するための例示図である。
図３０に示すように、放送受信装置１００はサッカー関連スポーツコンテンツをディスプレイすることができ、現在ディスプレイされる映像イメージはイベント検出部１３１を介して予め設定された条件に対応するイベント区間として検出された時間に基づいて獲得した映像区間であってよい。このようなイベント区間に対する映像区間が獲得されると、制御部１３０はイベント区間に対する映像区間に適用された色相のうち、予め定義されたフィールドカラーに対応するグリーンカラーが含まれているか否かを判断する。図示のように、映像区間を示す色相のうち、グリーンカラー３０１０が全映像のほとんどを示すことが分かる。このように、当該映像区間を示す色相のうち、予め定義されたフィールドカラーであるグリーンカラーである場合、制御部１３０は当該映像区間のグリーンカラー割合値を算出し、算出された割合値が予め設定された臨界値以上か否かを判断する。判断の結果、予め設定された臨界値以上であると、イベント検出部１３１は現在ディスプレイ中のコンテンツがサッカー関連スポーツコンテンツであると判断することができる。
なお、制御部１３０は、イベント区間として検出された映像区間に対する映像イメージから試合進行状況をガイドするガイド領域３０３０を抽出することができる。このようなガイド領域３０３０が抽出されると、制御部１３０は抽出されたガイド領域３０３０に表示された試合スコア或いは試合進行時間を分析して現在ディスプレイ中のコンテンツがサッカー関連スポーツコンテンツであると判断することができる。
このように、ディスプレイ中の映像区間に関連して検出されたイベント区間から視聴中のコンテンツがスポーツ関連コンテンツと判断されると、制御部１３０は、当該イベント区間に対する映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得することができる。
具体的に、図３１に示すように、イベント区間Ｂ３１１０に対する映像区間３１１０−１がスポーツ関連コンテンツと判断されると、制御部１３０は映像区間３１１０−１を中心に予め設定された第１固定時間３１２０に属する第１ないし第３映像区間３１２０−１〜３１２０−３と、予め設定された第２固定時間３１３０に属する第４ないし第６映像区間３１３０−１〜３１３０−３を獲得する。
その後、制御部１３０は、第１及び第２固定時間３１２０、３１３０に属する映像区間のうち、シーン変化の発生した区間を除く残りの映像区間に基づいて第１及び第２固定時間３１２０、３１３０を可変する。すなわち、制御部１３０は、シーン変化の発生した第３及び第６映像区間３１２０−３、３１３０−３を除く残りの映像区間に対応する固定時間に第１及び第２固定時間３１２０、３１３０を可変する。よって、第１固定時間３１２０は固定時間ａ３１２０’に可変され、第２固定時間３１３０は固定時間ｂ３１３０’に可変されてよい。
このように、予め設定された第１及び第２固定時間３１２０、３１３０が可変されると、制御部１３０はイベント区間Ｂ３１１０に対する映像区間３１１０−１、可変された固定時間ａ３１２０’に対する第１及び第２映像区間３１２０−１、３１２０−２と、可変された固定時間ｂ３１３０’に対する第４及び第５映像区間３１３０−１、３１３０−２を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成することができる。
しかし、本発明はそれに限定されず、第１及び第２固定時間３１２０、３１３０は斜線領域のように絶対固定時間３１２０”、３１３０”を含むことができ、それぞれの絶対固定時間３１２０”、３１３０”内に存在する映像区間はシーン変化によらず、イベント区間Ｂ３１１０に対する映像区間とともにコンテンツ要約区間に含まれてよい。
一方、制御部１３０は、上述のように、第１または第２ユーザ命令に応じて、ユーザの要請したコンテンツ及び当該コンテンツに関連して予め生成された要約コンテンツを同時に出力するか、或いは、ユーザの要請したコンテンツ及び他コンテンツに関連して予め生成された要約コンテンツを同時に出力するように出力部１２０を制御する。ここで、第１ユーザ命令は、視聴中のコンテンツに関連する要約コンテンツサービスに対する要請命令であってよく、第２ユーザ命令は、視聴中のコンテンツと異なる他コンテンツに関連する要約コンテンツサービスに対する要請命令であってよい。
それにより、出力部１２０は、映像出力部１２１を介してユーザの要請したコンテンツの映像データを第１画面サイズに適するように調整し、要約コンテンツの映像データを第２画面サイズに適するように調整し、当該要約コンテンツに対するサムネールイメージを第３画面サイズに適するように調整する。なお、出力部１２０は、オーディオ出力部１２３を介してユーザの要請したコンテンツのオーディオデータまたは要約コンテンツに対するオーディオデータをスピーカで出力する。実施形態によって、第１または第２ユーザ命令が入力されると、制御部１３０はユーザの要請したコンテンツのオーディオデータに対する出力を中断し、要約コンテンツに対するオーディオデータが出力されるように出力部１２０を制御することができる。それにより、出力部１２０は、オーディオ出力部１２３を介して出力される要約コンテンツに対するオーディオデータを出力することができる。よって、スピーカは、コンテンツに対するオーディオ信号の出力を中断し、オーディオ出力部１２３を介して出力される要約コンテンツに対するオーディオ信号を出力することができる。
一方、制御部１３０は、ユーザ命令に応じて、コンテンツに関連して順次に生成された複数の要約コンテンツのうち少なくとも１つを選択的に出力するように出力部１２０を制御することができる。具体的に、上述のように、第１または第２ユーザ命令に応じて、放送受信装置１００の第１ないし第３画面領域には映像出力部１２１を介して出力されたコンテンツ、要約コンテンツ及びサムネールイメージが出力されてよい。一方、ユーザは第３画面領域にディスプレイされた複数のサムネールイメージのうち１つのサムネールイメージを選択することができる。このような選択命令が入力されたり受信されると、制御部１３０は当該選択命令に対応するサムネールイメージを決定し、決定されたサムネールイメージとマッチングされた要約コンテンツから順次に出力するように出力部１２０を制御することができる。それにより、出力部１２０は、映像及びオーディオ出力部１２１、１２３を介して複数のサムネールイメージ別にマッチングされた要約コンテンツのうち、ユーザの選択命令に対応するサムネールイメージとマッチングされた要約コンテンツから順次に出力することができる。
図３２は、本発明の一実施形態に係る放送受信装置でコンテンツに対する要約コンテンツサービスを提供する例示図である。
図３２に示すように、放送受信装置１００は、ユーザの要請したコンテンツを全画面上にディスプレイすることができる。このようなコンテンツがディスプレイされている状態で同一のコンテンツに対する要約コンテンツサービス要請命令（第１ユーザ命令）が入力されると、放送受信装置１００は画面の第１領域３２１０上にユーザの要請したコンテンツをディスプレイし、第１領域３２１０にディスプレイされるコンテンツに関連して予め生成された要約コンテンツを画面の第２領域３２２０に順次にディスプレイすることができる。更に、放送受信装置１００は、画面の第３領域３２３０に順次に生成された要約コンテンツに対するサムネールイメージをディスプレイすることができる。よって、第３領域３２３０にディスプレイされたサムネールイメージのうち、第１サムネールイメージ３２３１に対する選択命令が入力されると、放送受信装置１００は第１サムネールイメージ３２３１とマッチングされた要約コンテンツから順次に第２領域３２２０にディスプレイすることができる。
図３３は、本発明の一実施形態に係る放送受信装置でコンテンツと異なる他コンテンツに対する要約コンテンツサービスを提供する例示図である。
図３３に示すように、放送受信装置１００は、ユーザの要請したコンテンツを全画面上にディスプレイすることができる。このようなコンテンツがディスプレイされている状態で現在ディスプレイされるコンテンツと異なる他コンテンツに対する要約コンテンツサービス要請命令（第２ユーザ命令）が入力されると、放送受信装置１００は画面の第１領域３３１０上にユーザの要請したコンテンツをディスプレイし、第１領域３３１０にディスプレイされるコンテンツと異なる他コンテンツに関連して予め生成された要約コンテンツを画面の第２領域３３２０に順次にディスプレイすることができる。更に、放送受信装置１００は、画面の第３領域３３３０に順次に生成された要約コンテンツに対するサムネールイメージをディスプレイすることができる。よって、第３領域３３３０にディスプレイされたサムネールイメージのうち、第１サムネールイメージ３３３１に対する選択命令が入力されると、放送受信装置１００は第１サムネールイメージ３３３１とマッチングされた要約コンテンツから順次に第２領域３３２０にディスプレイすることができる。
これまで、本発明に係る放送受信装置１００の各構成について詳細に説明してきた。以下では、多様な実施形態に通じて要約コンテンツサービスを提供する放送受信装置１００に対する構成についてより具体的に説明する。ただ、要約コンテンツサービスに関連して各構成に対する動作説明は上記において詳細に説明しているため、以下では、このような要約コンテンツサービスを提供する放送受信装置１００の構成方式について詳細に説明する。
図３４は、本発明の一実施形態に係るコンテンツに対する要約コンテンツを生成する放送受信装置の第１ブロック図である。
具体的に、図３４に示すように、放送受信装置１００は最低限の構成のみで視聴中のコンテンツに対する要約コンテンツを生成し、生成された要約コンテンツを再生することができる。そのために、放送受信装置１００は、上述のように、デマルチプレキシング部１１１、デコード部１５１、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができ、このようなそれぞれの構成は単一構成からなってよい。
この場合、デマルチプレキシング部１１１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、デコード部１５１及び制御部１３０に出力する。デコード部１５１は、デマルチプレキシング部１１１から出力されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、それにより、制御部１３０はデコードされたコンテンツを出力部１２０を介して出力する。それと同時に、制御部１３０は、デマルチプレキシング部１１１から出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０はデコード部１５１からデコードされたコンテンツを保存部１６０に保存することができる。
一方、イベント検出部１３１は、デコード部１５１から出力されたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツまたは予め設定された時間単位で臨時保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行うようにデコード部１５１を制御し、出力部１２０はデコード部１５１からデコードされた映像及びオーディオデータを出力する。このとき、出力部１２０は、制御部１３０の制御命令に応じて、デコード部１５１からデコードされた映像及びオーディオデータとともに、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツからデコード部１５１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は、上述のそれぞれの構成に対して最低限の構成のみでコンテンツに対する要約コンテンツを生成し、生成された要約コンテンツを再生することができる。
図３５は、本発明の一実施形態に係るコンテンツ及び同一のコンテンツに対する要約コンテンツを同時に再生する放送受信装置の第１ブロック図でる。
図３５に示すように、放送受信装置１００は、最低限の構成のみで視聴中のコンテンツ及び同一のコンテンツに関連する要約コンテンツを同時に再生することができる。そのために、放送受信装置１００は、デマルチプレキシング部１１１、第１及び第２デコード部１５１−１、１５１−２、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、デマルチプレキシング部１１１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、第１デコード部１５１−１及び制御部１３０に出力する。第１デコード部１５１−１は、デマルチプレキシング部１１１から出力されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０はデコードされたコンテンツを出力部１２０を介して再生することができる。
一方、制御部１３０は、デマルチプレキシング部１１１を介して出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されずに、制御部１３０は第１デコード部１５１−１からデコードされたコンテンツを保存部１６０に保存することができる。一方、第１デコード部１５１−１は、デコードされたコンテンツをイベント検出部１３１に出力し、イベント検出部１３１は第１デコード部１５１−１を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に関する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
一方、要約コンテンツサービス命令が入力されると、制御部１３０は、現在再生中のコンテンツに対する映像データが画面の第１領域に出力されるように出力部１２０を制御する。それと同時に、制御部１３０は、保存部１６０に予め保存された要約コンテンツに対する映像及びオーディオデータを第２デコード部１５１−３を介してデコードし、デコードされた要約コンテンツの映像データが順次に画面の第２領域に出力されるように出力部１２０を制御する。なお、制御部１３０は、画面の第３領域に予め保存された要約コンテンツ別にマッチングされたサムネールイメージが表示されるように出力部１２０を制御する。それにより、放送受信装置１００の第１領域にはユーザの要請したチャネルのコンテンツが再生され、第２領域には当該チャネルのコンテンツに関連する要約コンテンツが再生され、第３領域には要約コンテンツに対するサムネールイメージがディスプレイされてよい。
一方、第３領域にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は、選択されたサムネールイメージとマッチングされた要約コンテンツに対する映像データから順次に画面の第２領域に出力されるように出力部１２０を制御する。それにより、放送受信装置１００の第２領域にはユーザの選択したサムネールイメージとマッチングされた要約コンテンツから順次に再生されてよい。
このように、本発明に係る放送受信装置１００は、上述のそれぞれの構成に対して最低限の構成のみでコンテンツ及び同一のコンテンツに関連する要約コンテンツを同時に再生することができる。
図３６は、本発明の別の実施形態に係るコンテンツに対する要約コンテンツを生成する放送受信装置の第２ブロック図である。
具体的に、図３６に示すように、放送受信装置１００は第１及び第２デマルチプレキシング部１１１−１、１１１−３、デコード部１５１、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、デコード部１５１に出力し、第２デマルチプレキシング部１１１−３は、第１デマルチプレキシング部１１１−１と同一のチャネルのコンテンツを抽出して制御部１３０に出力する。第１デマルチプレキシング部１１１−１から出力されたコンテンツを受信したデコード部１５１は受信されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は、デコードされたコンテンツを出力部１２０を介して出力することができる。それと同時に、制御部１３０は、第２デマルチプレキシング部１１１−３から出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は第２デマルチプレキシング部１１１−３から出力されたコンテンツをデコード部１５１を介してデコードして保存部１６０に保存することができる。
一方、デコード部１５１は、デコードされたコンテンツをイベント検出部１３１に出力し、イベント検出部１３１はデコード部１５１を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツまたは予め設定された時間単位で臨時保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、デコード部１５１を介して予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行って再生し、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツからデコード部１５１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は、第１及び第２デマルチプレキシング部１１１−１、１１１−３を介してユーザの要請したコンテンツに対する抽出を行うことで、最低限の構成からなる放送受信装置１００に比べてより効率的にユーザの要請したコンテンツに対する再生及び当該コンテンツに関連する要約コンテンツを生成することができる。
図３７は、本発明の別の実施形態に係るコンテンツ及び同一のコンテンツに対する要約コンテンツを同時に再生する放送受信装置の第２ブロック図である。
図３７に示すように、放送受信装置１００は第１及び第２デマルチプレキシング部１１１−１、１１１−３、第１及び第２デコード部１５１−１、１５１−３、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、第１デコード部１５１−１に出力し、第２デマルチプレキシング部１１１−３は、第１デマルチプレキシング部１１１−１と同一のチャネルのコンテンツを抽出して制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０はデコードされたコンテンツを出力部１２０を介して再生することができる。一方、制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は第１デコード部１５１−１からデコードされたコンテンツを保存部１６０に保存することができる。
一方、第１デコード部１５１−１は、デコードされたコンテンツをイベント検出部１３１に出力し、イベント検出部１３１は第１デコード部１５１−１を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むイベント要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
一方、要約コンテンツサービス命令が入力されると、制御部１３０は、現在再生中のコンテンツに対する映像データが画面の第１領域に出力されるように出力部１２０を制御する。それと同時に、制御部１３０は、保存部１６０に予め保存された要約コンテンツに対する映像及びオーディオデータを第２デコード部１５１−３を介してデコードし、第２デコード部１５１−３からデコードされた要約コンテンツの映像データが順次に画面の第２領域に出力されるように出力部１２０を制御する。なお、制御部１３０は、画面の第３領域に予め保存された要約コンテンツ別にマッチングされたサムネールイメージが表示されるように出力部１２０を制御する。それにより、放送受信装置１００の第１領域にはユーザの要請したチャネルのコンテンツが再生され、第２領域には当該チャネルのコンテンツに関連する要約コンテンツが再生され、第３領域には要約コンテンツに対するサムネールイメージがディスプレイされてよい。
一方、第３領域にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は、選択されたサムネールイメージとマッチングされた要約コンテンツに対する映像データから順次に画面の第２領域に出力されるように出力部１２０を制御する。それにより、放送受信装置１００の第２領域にはユーザの選択したサムネールイメージとマッチングされた要約コンテンツから順次に再生されてよい。
このように、本発明に係る放送受信装置１００は、第１及び第２デマルチプレキシング部１１１−１、１１１−３と、第１及び第２デコード部１５１−１、１５１−３の構成を含むことで、最低限の構成からなる放送受信装置１００に比べてより効率的にユーザの要請したコンテンツ及び同一のコンテンツに関連する要約コンテンツを同時に再生することができる。
図３８は、本発明の別の実施形態に係るコンテンツに対する要約コンテンツを生成する放送受信装置の第３ブロック図である。
具体的に、図３８に示すように、放送受信装置１００は第１ないし第３デマルチプレキシング部１１１−１〜１１１−５、第１及び第２デコード部１５１−１、１５１−３、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうち、ユーザ命令に対応するチャネルのコンテンツを抽出して第１デコード部１５１−１に出力し、第２デマルチプレキシング部１１１−３は、第１デマルチプレキシング部１１１−１と同一のチャネルのコンテンツを抽出して第２デコード部１５１−３に出力する。そして、第３デマルチプレキシング部１１１−５は、第１及び第２デマルチプレキシング部１１１−１、１１１−３と同一のチャネルのコンテンツを抽出して制御部１３０に出力する。
第１デマルチプレキシング部１１１−１から出力されたコンテンツを受信した第１デコード部１５１−１は受信されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は、デコードされたコンテンツを出力部１２０を介して出力することができる。それと同時に、制御部１３０は、第３デマルチプレキシング部１１１−５から出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は第３デマルチプレキシング部１１１−５から出力されたコンテンツを第１デコード部１５１−１を介してデコードして保存部１６０に保存することができる。
一方、第２デコード部１５１−３は、第２デマルチプレキシング部１１１−３から出力されたコンテンツをデコードし、デコードされたコンテンツをイベント検出部１３１に出力する。それにより、イベント検出部１３１は第２デコード部１５１−３を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツまたは予め設定された時間単位で臨時保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むイベント要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、第１または第２デコード部１５１−１、１５１−３を介して予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行って再生し、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツから第１デコード部１５１−１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５と第及び第２デコード部１５１−１、１５１−３の構成を含むことで、図３４または図３６を参照して説明した放送受信装置１００に比べて最も安定的且つ効率的にユーザの要請したコンテンツに対する再生及び当該コンテンツに関連する要約コンテンツを生成することができる。
図３９は、本発明の別の実施形態に係るコンテンツ及び同一のコンテンツに対する要約コンテンツを同時に再生する放送受信装置の第３ブロック図である。
図３９に示すように、放送受信装置１００は第１ないし第３デマルチプレキシング部１１１−１〜１１１−５、第１ないし第３デコード部１５１−１〜１５１−５、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、第１デコード部１５１−１に出力し、第２デマルチプレキシング部１１１−３は、第１デマルチプレキシング部１１１−１と同一のチャネルのコンテンツを抽出して第２デコード部１５１−３に出力する。そして、第３デマルチプレキシング部１１１−５は、第１及び第２デマルチプレキシング部１１１−１、１１１−３と同一のチャネルのコンテンツを抽出して制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は第１デコード部１５１−１でデコードされたコンテンツを出力部１２０を介して再生することができる。一方、制御部１３０は、第３デマルチプレキシング部１１１−５を介して出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は第１ないし第３デコード部１５１−１〜１５１−５のうちの１つからデコードされたコンテンツを保存部１６０に保存することができる。
一方、第２デコード部１５１−３は、デコードされたコンテンツをイベント検出部１３１に出力し、イベント検出部１３１は第２デコード部１５１−３を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むイベント要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
一方、要約コンテンツサービス命令が入力されると、制御部１３０は、現在再生中のコンテンツに対する映像データが画面の第１領域に出力されるように出力部１２０を制御する。それと同時に、制御部１３０は、保存部１６０に予め保存された要約コンテンツに対する映像及びオーディオデータを第３デコード部１５１−５を介してデコードし、第３デコード部１５１−５からデコードされた要約コンテンツの映像データが順次に画面の第２領域に出力されるように出力部１２０を制御する。なお、制御部１３０は、画面の第３領域に予め保存された要約コンテンツ別にマッチングされたサムネールイメージが表示されるように出力部１２０を制御する。それにより、放送受信装置１００の第１領域にはユーザの要請したチャネルのコンテンツが再生され、第２領域には当該チャネルのコンテンツに関連する要約コンテンツが再生され、第３領域には要約コンテンツに対するサムネールイメージがディスプレイされてよい。
一方、第３領域にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は、選択されたサムネールイメージとマッチングされた要約コンテンツに対する映像データから順次に画面の第２領域に出力されるように出力部１２０を制御する。それにより、放送受信装置１００の第２領域にはユーザの選択したサムネールイメージとマッチングされた要約コンテンツから順次に再生されてよい。
このように、本発明に係る放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５と、第１ないし第３デコード部１５１−１〜１５１−５の構成を含むことで、図３５または図３７を参照して説明した放送受信装置１００にに比べてより安定的且つ効率的にユーザの要請したコンテンツ及び同一のコンテンツに関連する要約コンテンツを同時に再生することができる。
図４０は、本発明の別の実施形態に係るコンテンツに対する要約コンテンツを生成する放送受信装置の第４ブロック図である。
具体的に、図４０に示すように、放送受信装置１００はデマルチプレキシング部１１１、第１及び第２デコード部１５１−１、１５１−３、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、デマルチプレキシング部１１１は、複数のチャネル別のコンテンツのうちユーザ命令に対応するチャネルのコンテンツを抽出し、第１及び第２デコード部１５１−１、１５１−３と制御部１３０とに出力する。
デマルチプレキシング部１１１から出力されたコンテンツを受信した第１デコード部１５１−１は受信されたコンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は、デコードされたコンテンツを出力部１２０を介して出力することができる。
それと同時に、制御部１３０は、デマルチプレキシング部１１１から出力されたコンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０はデマルチプレキシング部１１１から出力されたコンテンツを第１デコード部１５１−１を介してデコードして保存部１６０に保存することができる。
一方、第２デコード部１５１−３は、デマルチプレキシング部１１１から出力されたコンテンツをデコードし、デコードされたコンテンツをイベント検出部１３１に出力する。それにより、イベント検出部１３１は、第２デコード部１５１−３を介してデコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出し、検出されたイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された録画コンテンツまたは予め設定された時間単位で臨時保存されたコンテンツに対する映像区間のうち、予め検出されたイベント区間に対する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、第１デコード部１５１−１を介して予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行って再生し、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツから第１デコード部１５１−１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は、第１及び第２デコード部１５１−１、１５１−３の構成を含み、第１及び第２デコード部１５１−１、１５１−３を介してユーザの要請したコンテンツに対するデコードを行うことで、最低限の構成からなる放送受信装置１００に比べてより安定的且つ効率的にユーザの要請したコンテンツに対する再生及び当該コンテンツに関連する要約コンテンツを生成することができる。
図４１は、本発明の一実施形態に係る視聴中のコンテンツと異なる他コンテンツに対する要約コンテンツを生成する放送受信装置の第１ブロック図である。
図４１に示すように、放送受信装置１００は、第１及び第２デマルチプレキシング部１１１−１、１１１−３、第１及び第２デコード部１５１−１、１５１−３、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応する第１チャネルの第１コンテンツを抽出し、第１デコード部１５１−１に出力する。そして、第２デマルチプレキシング部１１１−３は、複数のチャネル別のコンテンツのうち第２チャネルの第２コンテンツを抽出して第２デコード部１５１−３及び制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力された第１コンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は第１デコード部１５１−１でデコードされた第１コンテンツを出力部１２０を介して出力することができる。それと同時に、制御部１３０は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツを保存部１６０に保存する。
一方、第２デコード部１５１−３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツをデコードし、デコードされた第２コンテンツをイベント検出部１３１に出力する。それにより、イベント検出部１３１は、第２デコード部１５１−３を介してデコードされた第２コンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出し、検出されたイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された第２コンテンツに対する録画コンテンツまたは予め設定された時間単位で臨時保存された第２コンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むイベント要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、第１デコード部１５１−１を介して予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行って再生し、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツから第１デコード部１５１−１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は最低限の構成のみでユーザの要請した第１コンテンツに対する再生及び第２コンテンツに関連する要約コンテンツを生成することができる。
図４２は、本発明の一実施形態に係る視聴中のコンテンツと異なる他コンテンツに対する要約コンテンツを同時に再生する放送受信装置の第１ブロック図である。
図４２に示すように、放送受信装置１００は、第１及び第２デマルチプレキシング部１１１−１、１１１−３、第１ないし第３デコード部１５１−１〜１５１−５、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応する第１チャネルの第１コンテンツを抽出し、第１デコード部１５１−１に出力し、第２デマルチプレキシング部１１１−３は、ユーザ命令に対応する第２チャネルの第２コンテンツを抽出して第２デコード部１５１−３及び制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力された第１コンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は第１デコード部１５１−１でデコードされた第１コンテンツを出力部１２０を介して再生することができる。一方、制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は、第２または第３デコード部１５１−３、１５１−５からデコードされた第２コンテンツを保存部１６０に保存することができる。
一方、第２デコード部１５１−３は、デコードされた第２コンテンツをイベント検出部１３１に出力し、イベント検出部１３１は第２デコード部１５１−３を介してデコードされた第２コンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された第２コンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
一方、要約コンテンツサービス命令が入力されると、制御部１３０は、現在再生中の第１コンテンツに対する映像データが画面の第１領域に出力されるように出力部１２０を制御する。それと同時に、制御部１３０は、保存部１６０に予め保存された第２コンテンツに関連する要約コンテンツに対する映像及びオーディオデータを第３デコード部１５１−５を介してデコードし、第３デコード部１５１−５からデコードされた要約コンテンツの映像データが順次に画面の第２領域に出力するように出力部１２０を制御する。なお、制御部１３０は、画面の第３領域に予め保存された要約コンテンツ別にマッチングされたサムネールイメージが表示されるように出力部１２０を制御する。それにより、放送受信装置１００の第１領域にはユーザの要請した第１チャネルの第１コンテンツが再生され、第２領域には第２チャネルの第２コンテンツに関連する要約コンテンツが再生され、第３領域には要約コンテンツに対するサムネールイメージがディスプレイされてよい。
一方、第３領域にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツに対する映像データから順次に画面の第２領域に出力されるように出力部１２０を制御する。それにより、放送受信装置１００の第２領域にはユーザの選択したサムネールイメージとマッチングされた要約コンテンツから順次に再生されてよい。
このように、本発明に係る放送受信装置１００は、最低限の構成のみでユーザの要請した第１コンテンツ及び第２コンテンツに関連する要約コンテンツ同時に再生することができる。
図４３は、本発明の別の実施形態に係る視聴中のコンテンツと異なる他コンテンツに対する要約コンテンツを生成する放送受信装置の第２ブロック部である。
図４３に示すように、放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５、第１及び第２デコード部１５１−１、１５１−３、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応する第１チャネルの第１コンテンツを抽出し、第１デコード部１５１−１に出力する。そして、第２デマルチプレキシング部１１１−３は、複数のチャネル別のコンテンツのうち第２チャネルの第２コンテンツを抽出して第２デコード部１５１−３に出力し、第３デマルチプレキシング部１１１−５は、第２デマルチプレキシング部１１１−３と同一の第２チャネルの第２コンテンツを抽出して制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力された第１コンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は第１デコード部１５１−１でデコードされた第１コンテンツを出力部１２０を介して出力することができる。それと同時に、制御部１３０は、第３デマルチプレキシング部１１１−５から出力された第２コンテンツを保存部１６０に保存する。
一方、第２デコード部１５１−３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツをデコードし、デコードされた第２コンテンツをイベント検出部１３１に出力する。それにより、イベント検出部１３１は、第２デコード部１５１−３を介してデコードされた第２コンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出し、検出されたイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された第２コンテンツに対する録画コンテンツまたは予め設定された時間単位で臨時保存された第２コンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
その後、要約コンテンツ再生に対するユーザ命令が入力されると、制御部１３０は、第１デコード部１５１−１を介して予め保存された要約コンテンツの映像及びオーディオデータに対するデコードを行って再生し、要約コンテンツ別にマッチングされたサムネールイメージを画面上にディスプレイすることができる。一方、画面上にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツから第１デコード部１５１−１を介してデコードして順次に再生することができる。
このように、本発明に係る放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５と、第１及び第２デコード部１５１−１、１５１−３との構成を含むことで、より安定的かつ効率的にユーザの要請した第１コンテンツに対する再生及び第２コンテンツに対する要約コンテンツを生成することができる。
図４４は、本発明の別の実施形態に係る視聴中のコンテンツと異なる他コンテンツに対する要約コンテンツを再生する放送受信装置の第２ブロック図である。
図４４に示すように、放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５、第１ないし第３デコード部１５１−１〜１５１−５、出力部１２０、イベント検出部１３１、制御部１３０及び保存部１６０を含むことができる。
この場合、第１デマルチプレキシング部１１１−１は、複数のチャネル別のコンテンツのうちユーザ命令に対応する第１チャネルの第１コンテンツを抽出し、第１デコード部１５１−１に出力する。そして、第２デマルチプレキシング部１１１−３は、ユーザ命令に対応する第２チャネルの第２コンテンツを抽出して第２デコード部１５１−３に出力し、第３デマルチプレキシング１１１−５は、第２デマルチプレキシング部１１１−３と同様に第２チャネルの第２コンテンツを抽出して制御部１３０に出力する。
第１デコード部１５１−１は、第１デマルチプレキシング部１１１−１から出力された第１コンテンツに含まれた映像及びオーディオデータに対するデコードを行い、制御部１３０は第１デコード部１５１−１でデコードされた第１コンテンツを出力部１２０を介して再生することができる。一方、制御部１３０は、第３デマルチプレキシング部１１１−５を介して出力された第２コンテンツを保存部１６０に保存する。しかし、本発明はそれに限定されるわけではなく、制御部１３０は、第３デコード部１５１−５からデコードされた第２コンテンツを保存部１６０に保存することができる。
一方、第２デコード部１５１−３は、デコードされた第２コンテンツをイベント検出部１３１に出力し、イベント検出部１３１は第２デコード部１５１−３を介してデコードされた第２コンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する。このように、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間が検出されると、イベント検出部１３１は検出された少なくとも１つのイベント区間に対する時間情報を制御部１３０に伝達する。
それにより、制御部１３０は、保存部１６０に予め保存された第２コンテンツに対する映像区間のうち、予め検出されたイベント区間に関する時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、制御部１３０は、獲得した映像区間がスポーツ関連コンテンツなら、当該映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間を含むコンテンツ要約区間に基づいて要約コンテンツを生成することができる。このような要約コンテンツが生成されると、制御部１３０は生成された要約コンテンツを構成する映像区間のうち、予め設定された条件に対応する１つの映像区間をサムネールイメージに決定し、予め生成された要約コンテンツとサムネールイメージとを相互マッチングさせて保存部１６０に保存する。
一方、要約コンテンツサービス命令が入力されると、制御部１３０は、現在再生中の第１コンテンツに対する映像データが画面の第１領域に出力されるように出力部１２０を制御する。それと同時に、制御部１３０は、保存部１６０に予め保存された第２コンテンツに関連する要約コンテンツに対する映像及びオーディオデータを第３デコード部１５１−５を介してデコードし、第３デコード部１５１−５からデコードされた要約コンテンツの映像データが順次に画面の第２領域に出力されるように出力部１２０を制御する。なお、制御部１３０は、画面の第３領域に予め保存された要約コンテンツ別にマッチングされたサムネールイメージが表示されるように出力部１２０を制御する。それにより、放送受信装置１００の第１領域にはユーザの要請した第１チャネルの第１コンテンツが再生され、第２領域には第２チャネルの第２コンテンツに関連する要約コンテンツが再生され、第３領域には要約コンテンツに対するサムネールイメージがディスプレイされてよい。
一方、第３領域にディスプレイされたサムネールイメージのうち１つが選択されると、制御部１３０は選択されたサムネールイメージとマッチングされた要約コンテンツに対する映像データから順次に画面の第２領域に出力されるように出力部１２０を制御する。それにより、放送受信装置１００の第２領域にはユーザの選択したサムネールイメージとマッチングされた要約コンテンツから順次に再生されてよい。
このように、本発明に係る放送受信装置１００は、第１ないし第３デマルチプレキシング部１１１−１〜１１１−５及び第１ないし第３デコード部１５１−１〜１５１−５を含むことで、より安定的かつ効率的にユーザの要請した第１コンテンツ及び第２ココンテンツに関連する要約コンテンツを同時に再生することができる。
これまで、本発明に係る放送受信装置でコンテンツに対する要約コンテンツサービスを提供する動作について詳細に説明してきた。以下では、本発明に係る放送受信装置で要約コンテンツサービスを提供する方法について詳細に説明する。
図４５は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービスを提供する方法のフローチャートである。
図４５に示すように、放送受信装置１００はデマルチプレキシング部を介して 複数のチャネルのうち、ユーザ命令に対応するチャネルのコンテンツを抽出する（Ｓ４５１０）。このようなコンテンツが抽出されると、放送受信装置１００は抽出されたコンテンツに含まれた映像及びオーディオデータをデコードする（Ｓ４５２０）。その後、放送受信装置１００は、デコードされたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出する（Ｓ４５３０）。
イベント区間を検出する方法は、上記において説明しているため、以下では詳細な説明は省略する。
予め設定された条件に基づいて少なくとも１つのイベント区間が検出されると、放送受信装置１００は検出されたイベント区間に基づいてコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成する（Ｓ４５４０、Ｓ４５５０）。具体的に、放送受信装置１００はイベント区間が検出されると、イベント区間の検出された時間情報に基づいて予め保存された録画コンテンツまたは予め設定された時間単位で予め保存されたリアルタイムコンテンツに対する映像区間のうち、イベント区間に対する映像区間を獲得する。その後、放送受信装置１００は、獲得した映像区間を分析して当該映像区間に対するコンテンツがスポーツ関連コンテンツか否かを判断する。判断の結果、スポーツ関連コンテンツであれば、放送受信装置１００は予め検出されたイベント区間に対する映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得する。
その後、放送受信装置１００は、獲得した前後映像区間のうちシーン場面の変化された区間があるか否かを判断し、シーン場面の変化された区間がない場合、予め検出されたイベント区間に対する映像区間及び当該映像区間を基準に固定時間に存在する前後映像区間をコンテンツ要約区間として決定する。
一方、獲得した前後映像区間のうち少なくとも１つの映像区間でシーン場面が変化されたと判断されると、放送受信装置１００は予め設定された固定時間を可変し、予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得する。その後、放送受信装置１００は、検出されたイベント区間に対する映像区間及び可変された固定時間内に存在する前後映像区間をコンテンツ要約区間として決定することができる。
一方、本発明に係る固定時間は絶対固定時間を含むことができ、このような絶対固定時間は可変されない。よって、放送受信装置１００は、固定時間内に存在する前後映像区間のうち、絶対固定時間内に存在する前後映像区間を除く残りの前後映像区間のうち、シーン場面の変化された区間があるか否かを判断する。判断の結果、シーン場面の変化された区間がある場合、放送受信装置１００は絶対固定時間を除く残りの固定時間内に固定時間を可変して予め検出されたイベント区間に対する映像区間に関連する前後映像区間を獲得することができる。
その後、放送受信装置１００は、イベント区間に対する映像区間及び当該映像区間を基準に予め設定された固定時間或いは可変された固定時間に存在する前後映像区間を含むコンテンツ要約区間を決定し、決定されたコンテンツ要約区間に基づいて要約コンテンツを生成する。このような要約コンテンツが生成されると、放送受信装置１００は当該要約コンテンツを構成する放送区間のうち予め設定された条件に対応する１つの映像区間の映像イメージをサムネールイメージに決定し、決定されたサムネールイメージと要約コンテンツとをマッチングさせて保存する。
その後、放送受信装置１００は、ユーザ命令に応じて、ユーザの要請したコンテンツ及び予め保存された要約コンテンツを同時に再生する（Ｓ４５６０）。ここで、要約コンテンツは、現在視聴中のコンテンツに関連するコンテンツか、或いは、現在視聴中のコンテンツと異なる他コンテンツに関連するコンテンツであってよい。すなわち、放送受信装置１００は、ユーザ命令が視聴中のコンテンツと同一のコンテンツに対する要約コンテンツサービス命令であれば、視聴中のコンテンツと当該コンテンツに関連する要約コンテンツとを同時に再生する。一方、放送受信装置１００は、ユーザ命令が視聴中のコンテンツと異なるコンテンツにたいする要約コンテンツサービス命令なら、視聴中のコンテンツと他コンテンツに関連する要約コンテンツとを同時に再生する。
図４６は、本発明の一実施形態に係る放送受信装置で要約コンテンツに対する生成及び再生する方法に対するフローチャートである。
図４６に示すように、放送受信装置１００は、ユーザ命令が入力されると、入力されたユーザ命令が同一のチャネルに対する要約コンテンツサービス要請か否かを判断する。判断の結果、同一のチャネルに対する要約コンテンツサービス要請の場合、放送受信装置１００は現在再生中のコンテンツから要約コンテンツを生成する（Ｓ４６１０）。上述のように、放送受信装置１００は現在再生中のコンテンツから予め設定された条件に対応するイベント区間を検出し、イベント区間の検出された時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、放送受信装置１００は、獲得した映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間に基づいて現在再生中のコンテンツに対する要約コンテンツを生成する（Ｓ４６２０）。その後、放送受信装置１００は、ユーザの要請したコンテンツ及び当該コンテンツに関連する要約コンテンツを同時に出力する（Ｓ４６３０）。すなわち、放送受信装置１００は現在再生中のコンテンツを第１領域にディスプレイし、当該コンテンツに関連する要約コンテンツを第２領域にディスプレイする。
一方、放送受信装置１００は、当該コンテンツに関連して生成された要約コンテンツに対するサムネールイメージを第３領域にディスプレイすることができる。このようなサムネールイメージのうち１つが選択されると、放送受信装置１００は選択されたサムネールイメージとマッチングされた要約コンテンツから順次に第２領域にディスプレイすることができる。
一方、ステップＳ４６１０で現在再生中のコンテンツ（以下、第１コンテンツという）と異なる他コンテンツ（以下、第２コンテンツという）に対する要約コンテンツサービス要請であれば、放送受信装置１００は第２コンテンツに関連する要約コンテンツを生成する（Ｓ４６４０）。その後、放送受信装置１００は第１コンテンツと第２コンテンツに関連する要約コンテンツとを同時に出力する（Ｓ４６５０）。
具体的に、放送受信装置１００は、第１デマルチプレキシング部を介して第１コンテンツを抽出し、第１デコード部を介して第１コンテンツにデコードを行って第１領域にディスプレイする。そして、放送受信装置１００は、第２デマルチプレキシング部を介して第２コンテンツを抽出し、抽出された第２コンテンツから予め設定された条件に対応するイベント区間を検出する。その後、放送受信装置１００は、第２コンテンツから検出されたイベント区間の時間情報に基づいてイベント区間に対する映像区間を獲得する。その後、放送受信装置１００は、獲得した映像区間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、獲得したイベント区間に対する映像区間及び前後映像区間に基づいて第２コンテンツに対する要約コンテンツを生成する。
それにより、放送受信装置１００は第１領域に第１コンテンツを再生し、同時に第２領域に第２コンテンツに関連する要約コンテンツを再生することができる。一方、放送受信装置１００は、第２コンテンツに関連して生成された要約コンテンツに対するサムネールイメージを第３領域にディスプレイすることができる。このようなサムネールイメージのうち１つが選択されると、放送受信装置１００は選択されたサムネールイメージとマッチングされた要約コンテンツから順次に第２領域にディスプレイすることができる。
以下では、上述の放送受信装置１００でイベント区間に関連する映像区間を選択的に出力するためのブックマーキング情報を生成する動作及び方法について詳細に説明する。
上述のように、データ処理部１５０は受信されたコンテンツ或いは予め保存された録画コンテンツの映像及びオーディオデータを出力可能な形態で信号処理する。そのために、データ処理部１５０は、デコード部１５１と、スケーラ１５３及びデインターレーシング部１５５のうち少なくとも１つを含むことができる。上述のように、デコード部１５１は、受信されたコンテンツ或いは予め保存された録画コンテンツの映像及びオーディオデータをデコードする。スケーラ１５３は、デコードされた映像データに対するスケーリングを行い、デインターレーシング部１５５は、デコードされた映像データを順次走査映像に変換するデインターレーシングを行う。このようなデータ処理部１５０を構成するデコード部１５１、スケーラ１５３及びデインターレーシング部１５５は映像処理を行うための公知となった構成として、本発明では詳細な説明を省略する。
一方、上述の制御部１３０は、入力部１７０を介して入力された録画命令に応じて、受信部１１０または通信部１４０を介して受信されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを保存部１６０に保存する。
更に、制御部１３０は、入力部１７０を介して入力された要約コンテンツ再生命令に応じて、ユーザの要請したコンテンツに対する要約コンテンツサービス提供のための動作を行う。具体的に、制御部１３０は、データ処理部１５０を介して信号処理されたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応するイベント区間を検出する。その後、制御部１３０は、当該コンテンツに関連する録画コンテンツで予め検出されたイベント区間に関連する映像区間のみを選択的に出力するためのブックマーキング情報を生成して保存部１６０に保存する。
ここで、イベント区間に関連する映像区間は、録画コンテンツでハイライト映像上で選別された映像区間であってよい。そして、イベント区間に関連する映像区間を選択的に出力するためのブックマーキング情報はイベント区間を含む要約コンテンツ区間の開始及び終了時点の時間情報を含むことができる。更に、ブックマーキング情報は、当該イベント区間を含む要約コンテンツ区間に含まれた映像イメージのうち、代表サムネールイメージに決定された映像イメージを含むことができる。よって、制御部１３０は、イベント区間を含む要約コンテンツ区間の開始及び終了時点の時間情報と、当該イベント区間を含む要約コンテンツ区間に含まれた映像イメージのうち、代表サムネールイメージに決定された映像イメージを含むブックマーキング情報を生成して保存部１６０に保存することができる。
一方、上述のように、録画コンテンツ、要約コンテンツ及び当該要約コンテンツに対するサムネールイメージを保存する保存部１６０は、ユーザの要請に応じて、視聴中のコンテンツ或いは予約設定されたコンテンツに関連して録画された録画コンテンツ及び当該録画コンテンツで要約コンテンツ区間を選択的に出力するためのブックマーキング情報を保存することができる。
一方、制御部１３０は、上述の実施形態を通じてイベント区間が検出されると、検出されたイベント区間を含む要約コンテンツ区間を決定し、当該要約コンテンツ区間い対する代表サムネールイメージを決定することができる。このような要約コンテンツ区間に対する代表サムネールイメージが決定されると、制御部１３０はイベント区間を含む要約コンテンツ区間の開始及び終了時点の時間情報と、代表サムネールイメージに決定された映像イメージを含むブックマーキング情報を生成して保存部１６０に保存することができる。
一方、制御部１３０は、入力部１７０を介して録画コンテンツ再生命令が入力されると、保存部１６０に予め保存された複数の録画コンテンツのうち、録画コンテンツ再生命令に対応する録画コンテンツを出力するように出力部１２０を制御することができる。このとき、制御部１３０は、入力部１７０を介して入力された録画コンテンツ再生命令が要約コンテンツサービス命令であれば、当該録画コンテンツで要約コンテンツ区間に該当する映像区間のみを選択的に出力するように出力部１２０を制御することができる。
具体的に、制御部１３０は、要約コンテンツサービス命令に応じて、出力部１２０を介して出力される録画コンテンツに対するブックマーキング情報を獲得する。その後、制御部１３０は、録画コンテンツの再生時間情報に基づいて当該録画コンテンツに対するブックマーキング情報に含まれた時間情報に対応する映像区間を抽出し、抽出された映像区間のみを選択的に出力するように出力部１２０を制御することができる。それにより、出力部１２０は、映像出力部１２１及びオーディオ出力部１２３のうち少なくとも１つを介して録画コンテンツで要約コンテンツ区間に該当する映像区間のみを選択的に出力することができる。
図４７は、本発明の一実施形態に係る放送受信装置で要約コンテンツ区間を出力する例示図である。
図４７に示すように、制御部１３０は、ユーザの要請した録画コンテンツに関連して予め保存されたブックマーキング情報を獲得することができる。このようなブックマーキング情報が獲得されると、制御部１３０は、獲得したブックマーキング情報に含まれた要約コンテンツ区間の再生開始時点の時間情報と、再生終了時点の時間情報とを獲得する。図示のように、Ａ要約コンテンツ区間４７１０の再生開始時点はａ時点であってよく、再生終了視点はａ’時間であってよい。そして、Ｂ要約コンテンツ区間４７２０の再生開始時点はｂ時間であってよく、再生終了時点はｂ’時間であってよい。最後に、Ｃ要約コンテンツ区間４７３０の再生開始時点はｃ時間であってよく、再生終了時点はｃ’時間であってよい。
このように、予め獲得したブックマーキング情報に基づいて、ＡないしＣ要約コンテンツ区間４７１０〜４７３０に関する時間情報が獲得されると、制御部１３０は録画コンテンツが再生される時点を基準に、ａ時間からａ’時間に該当する映像区間を出力するように出力部１２０を制御する。それにより、出力部１２０は、録画コンテンツの映像区間のうち、ａ時間からａ’時間に該当する映像区間を出力する。その後、制御部１３０は、ａ時間でａ’時間に該当する映像区間の再生が終了すると、すなわち、ａ’時間に該当する映像区間の再生が終了すると、録画コンテンツの再生される時点を基準にｂ時間からｂ’時間に該当する映像区間を出力するように出力部１２０を制御する。それにより、出力部１２０は、録画コンテンツの映像区間のうち、ｂ時間からｂ’時間 に該当する映像区間を出力する。その後、制御部１３０は、ｂ時間でｂ’時間に該当する映像区間の再生が終了すると、すなわち、ｂ’時間に該当する映像区間の再生が終了すると、録画コンテンツの再生される時点を基準にｃ時間からｃ’時間に該当する映像区間を出力するように出力部１２０を制御する。それにより、出力部１２０は、録画コンテンツの映像区間のうち、ｃ時間からｃ’時間に該当する映像区間を出力する。
このように、本発明に係る放送受信装置１００は、ブックマーキング情報に基づいて録画コンテンツの映像区間のうち、ハイライト映像に該当する要約コンテンツ区間のみを選択的に再生することができる。
一方、制御部１３０は、録画コンテンツ再生命令が入力されると、予め保存された複数の録画コンテンツのうち、入力されたコンテンツ再生命令に対応する録画コンテンツを獲得し、獲得した録画コンテンツに関連するブックマーキング情報が保存されているか否かを判断する。判断の結果、録画コンテンツに関連するブックマーキング情報が保存されていると、制御部１３０は、コンテンツ再生命令に対応する録画コンテンツ及びブックマーキング情報に含まれた代表サムネールイメージを出力するように出力部１２０を制御する。それにより、出力部１２０は、映像出力部１２１を介して第１領域に録画コンテンツに対する映像データを出力し、第２映像に複数の代表サムネールイメージを出力することができる。
図４８は、本発明の一実施形態に係る放送受信装置で録画コンテンツを出力する例示図である。
図４８に示すように、制御部１３０は、ユーザの録画コンテンツ再生命令が入力されると、予め保存された複数の録画コンテンツのうち、入力された録画コンテンツ再生命令に対応する録画コンテンツを獲得する。このとき、制御部１３０は、録画コンテンツに関連するブックマーキング情報が保存部１６０に保存されているか否かを判断する。判断の結果、録画コンテンツに関連するブックマーキング情報が保存されていると、制御部１３０は録画コンテンツ再生命令に対応する録画コンテンツ４８１０及び当該録画コンテンツに関連するブックマーキング情報に含まれた代表サムネールイメージを出力するように出力部１２０を制御する。それにより、出力部１２０は、映像出力部１２１を介して第１領域に録画コンテンツの映像データ４８１０を出力し、第２領域に録画コンテンツに関連するブックマーキング情報に含まれた第１ないし第３代表サムネールイメージ４８２０〜４８４０を出力する。
このような第１ないし第３代表サムネールイメージ４８２０〜４８４０が第２領域に出力された状態で、第１代表サムネールイメージ４８２０が選択されると、制御部１３０は、選択された第１代表サムネールイメージ４８２０に関連する要約コンテンツ区間の時間情報を獲得し、獲得した時間情報に基づいて選択された代表サムネールイメージに関連する要約コンテンツ区間から順次に出力されるように出力部１２０を制御する。ここで、選択された第１代表サムネールイメージ４８２０に関連する要約コンテンツ区間から順次に出力されることは、第１代表サムネールイメージ４８２０に関連する要約コンテンツ区間から録画コンテンツが再生されたり、または、録画コンテンツのうち第１ないし第３代表サムネールイメージ４８２０〜４８４０に関連する要約コンテンツ区間のみが選択的に出力されることを全て含んでよい。
一方、上述の多様な実施形態を通じて、コンテンツに対するイベント区間を検出する制御部１３０は、信号処理された映像及びオーディオデータのうち映像データからイベント区間を検出することにおいて、当該映像データの信号処理状態に応じて異なるアルゴリズムを適用してイベント区間を検出することが望ましい。すなわち、データ処理部１５０を介して信号処理された映像データはデコードされた映像データ、デインターレーシングされた映像データ及びスケーリングされた映像データであってよい。更に、映像データは、信号処理された映像データに対応する駆動制御信号を生成するタイミング駆動部１８０の駆動制御信号によって出力されるデータであってよい。
よって、制御部１３０は、データ処理部１５０を構成するデコード部１５１を介してデコードされた映像データ、デインターレーシング部１５５を介してデインターレーシングされた映像データ、スケーラ１５３を介してスケーリングされた映像データ及びタイミング駆動部１８０の駆動制御信号に応じて出力される映像データに応じて異なるアルゴリズムを適用してそれぞれの映像データを分析してイベント区間を検出することができる。
具体的に、制御部１３０は、デマルチプレキシング部１１１を介してデマルチプレキシングされたコンテンツからイベント区間を検出する場合、当該コンテンツに含まれた映像データをデコードした後、デコードされた映像データを分析して予め設定された条件に対応するイベント区間を検出することができる。そして、制御部１３０は、デコード部１５１を介してデコードされたコンテンツの映像データが入力されると、インターレーシング（Ｉｎｔｅｒｌａｃｉｎｇ）された映像イメージを分析して予め設定された条件に対応するイベント区間を検出することができる。なお、制御部１３０は、スケーラ１５３を介してスケーリングされた映像データが入力されると、スケーリングされた映像データの映像イメージに対する解像度を考慮し、予め設定された条件に対応するイベント区間を検出することができる。なお、制御部１３０は、デインターレーシング部１５５を介してデインターレーシングされたコンテンツの映像データが入力されると、入力された映像データの映像イメージに対する入力解像度を考慮し、予め設定された条件に対応するイベント区間を検出することができる。最後に、制御部１３０は、タイミング駆動部１８０の駆動制御信号に応じて出力される映像データが入力されると、当該映像データの映像イメージに対するＬＶＤＳ（Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）または差動信号（Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）を分析して予め設定された条件に対応するイベント区間を検出することができる。
一方、上述のように、ユーザの要約コンテンツサービス命令に応じて、コンテンツに対する録画及びイベント区間を検出する制御部１３０は、上述のイベント検出部１３１及びレコーディング部１３３を介して行うことができる。イベント検出部１３１は、受信部１１０を介して受信されたコンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出し、レコーディング部１５３は、受信部１１０を介して受信されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。
よって、制御部１３０は、視聴中のコンテンツに対する要約コンテンツサービス命令が入力されると、受信部１１０を介して受信されたコンテンツが出力されるようにデータ処理部１５０及び出力部１２０を制御する。それと同時に、制御部１３０は、当該コンテンツに対する録画及びイベント検出を行うようにレコーディング部１３３とイベント検出部１３１とを制御する。それにより、レコーディング部１３３は、受信部１１０を介して受信されたコンテンツに対するレコーディングを行って録画コンテンツを生成し、それと同時にイベント検出部１３１は受信部１１０を介して受信されたコンテンツの映像及びオーディオデータのうち少なくとも１つを予め設定された条件に対応するイベント区間を検出することができる。よって、制御部１３０は、イベント検出部１３１を介して検出されたイベント区間に基づいて要約コンテンツ区間を決定し、決定された要約コンテンツ区間に対するブックマーキング情報を生成してレコーディング部１３３を介して生成された録画コンテンツとともにマッチングさせて保存部１６０に保存することができる。
一方、制御部１３０は、視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービス命令が入力されると、第１チューナ部１１３−１を介して選局されたチャネルのコンテンツを出力するように出力部１２０を制御する。それと同時に、制御部１３０は、第２チューナ部１３３−３を介して選局されたチャネルのコンテンツに対する録画及びイベント検出を行うようにレコーディング部１３３とイベント検出部１３１とを制御する。それにより、レコーディング部１３３は、第２チューナ部１１３−３を介して選局されて受信されたコンテンツに対するレコーディングを行って録画コンテンツを生成し、それと同時にイベント検出部１３１は、第２チューナ部１１３−３を介して選局されて受信されたコンテンツの映像及びオーディオデータのうち少なくとも１つを予め設定された条件に対応するイベント区間を検出することができる。よって、制御部１３０は、イベント検出部１３１を介して検出されたイベント区間に基づいて当該コンテンツに対する要約コンテンツ区間を決定し、決定された要約コンテンツ区間に対するブックマーキング情報を生成してレコーディング部１３３を介して生成された録画コンテンツとともにマッチングさせて保存部１６０に保存することができる。
これまで、本発明に係る放送受信装置１００の各構成について詳細に説明してきた。以下では、多様な実施形態を通じて要約コンテンツサービスを提供する放送受信装置１００に対する構成についてより具体的に説明する。ただ、要約コンテンツサービスに関連して各構成に対する動作の説明は、上記において詳細に説明しているため、以下では、図４９ないし図５８を参照して要約コンテンツサービスを提供する放送受信装置１００の構成方式について詳細に説明する。
図４９は、本発明の一実施形態に係る要約コンテンツサービスを提供する放送受信装置の第１ブロック図である。
図４９に示すように、デマルチプレキシング部１１１は、チューナ部１１３を介して選局された複数のチャネルのうちユーザの要請したチャネルのコンテンツを抽出し、抽出されたコンテンツをデータ処理部１５０及び制御部１３０をそれぞれ出力する。デマルチプレキシング部１１１を介してコンテンツを受信したデータ処理部１５０は、デコード部１５１を介してコンテンツの映像及びオーディオデータに対するデコードを行ってスケーラ１５３に出力し、スケーラ１５３は、デコードされた映像データに対するスケーリングを行ってタイミング駆動部１８０に出力する。タイミング駆動部１８０は、スケーラ１５３を介してスケーリングされた映像データに対応する駆動制御信号を生成し、映像出力部１２１はタイミング駆動部１８０で生成された駆動制御信号に基づいて映像データを出力する。
一方、制御部１３０は、デマルチプレキシング部１１１を介して出力されたコンテンツが入力されると、レコーディング部１３３及びイベント検出部１３１を介して当該コンテンツに対する録画及びイベント区間を検出する。具体的に、レコーディング部１３３は、デマルチプレキシング部１１１から出力されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、デマルチプレキシング部１１１から出力されたコンテンツの映像及びオーディオデータに対するデコードを行い、デコードされた映像データを分析して予め設定された条件に対応するイベント区間を検出する。このとき、イベント検出部１３１は、デコードされたオーディオデータも併せて分析して予め設定された条件に対応するイベント区間を検出することが望ましい。以下では、イベント検出部１３１において、コンテンツの映像データを分析して予め設定された条件に対応するイベント区間を検出することについてのみ説明する。
制御部１３０は、イベント検出部１３１を介してイベント区間が検出されると、上述のように、イベント区間を含む要約コンテンツ区間を決定し、決定された要約コンテンツ区間の再生関連時間情報及び代表サムネールイメージを含むブックマーキング情報を生成する。その後、制御部１３０は、レコーディング部１３３を介して生成された録画コンテンツとブックマーキング情報とをマッチングさせて保存部１６０に保存することができる。
図５０は、本発明の別の実施形態に係る要約コンテンツサービスを提供する放送受信装置の第２ブロック図である。
図４９を参照して説明したように、デマルチプレキシング部１１１はユーザの要請したチャネルのコンテンツが抽出されると、当該コンテンツをデータ処理部１５０及び制御部１３０に出力する。それにより、データ処理部１５０は、映像データに対する信号処理を行い、映像出力部１２１はタイミング駆動部１８０の駆動制御信号に基づいて当該映像データを出力する。
一方、データ処理部１５０のデコード部１５１は、図５０に示すように、デマルチプレキシング部１１１を介して出力されたコンテンツから映像データに対するデコードが行われると、デコードされた映像データを制御部１３０に出力する。それにより、レコーディング部１３３は、デマルチプレキシング部１１１から出力されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、デコード部１５１から出力された映像データを分析して予め設定された条件に対応するイベント区間を検出する。このようなレコーディング部１３３及びイベント検出部１３１を介して録画コンテンツ生成及びイベント区間が検出されると、制御部１３０は、上述のように、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５１は、本発明の更に別の実施形態に係る要約コンテンツサービスを提供する放送受信装置の第３ブロック図である。
図４９を参照して説明したように、デマルチプレキシング部１１１はユーザの要請したチャネルのコンテンツが抽出されると、当該コンテンツをデータ処理部１５０及び制御部１３０に出力する。デマルチプレキシング部１１１を介してユーザの要請したチャネルのコンテンツが抽出されると、データ処理部１５０は映像データに対する信号処理を行い、映像出力部１２１はタイミング駆動部１８０の駆動制御信号に基づいて当該映像データを出力する。
一方、データ処理部１５０のスケーラ１５３は、デコード部１５１を介してデコードされた映像データに対するスケーリングが行われると、図５１に示すように、スケーリングされた映像データを制御部１３０に出力する。それにより、レコーディング１３３は、デマルチプレキシング部１１１から出力されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、スケーラ１５３からスケーリングされた映像データを分析して予め設定された条件に対応するイベント区間を検出する。このとき、イベント検出部１３１は、スケーリングされた映像データの解像度を考慮してイベント区間を検出することが望ましい。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、上述のように、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５２は、本発明の更に別の実施形態に係る要約コンテンツサービスを提供する放送受信装置の第４ブロック図である。
図４９を参照して説明したように、デマルチプレキシング部１１１はユーザの要請したチャネルのコンテンツが抽出されると、当該コンテンツをデータ処理部１５０及び制御部１３０に出力する。それにより、データ処理部１５０は、映像データに対する信号処理を行い、映像出力部１２１はタイミング駆動部１８０の駆動制御信号に基づいて当該映像データを出力する。
一方、タイミング駆動部１８０は、図５２に示すように、スケーラ１５３を介してスケーリングされた映像データに対する出力関連駆動制御信号を生成し、生成された駆動制御信号に基づいて映像出力部１２１に出力するタイミングに当該映像データを制御部１３０に出力する。それにより、レコーディング部１３３は、デマルチプレキシング部１１１から出力されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、タイミング駆動部１８０から出力された映像データを分析して予め設定された条件に対応するイベント区間を検出する。このとき、イベント検出部１３１は、タイミング駆動部１８０の駆動制御信号に基づいて出力される映像データのＬＶＤＳ（Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）または差動信号（Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）を分析して予め設定された条件に対応するイベント区間を検出することができる。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、上述のように、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５３は、本発明の更に別の実施形態に係る要約コンテンツサービスを提供する放送受信装置の第４ブロック図である。
図４９を参照して説明したように、デマルチプレキシング部１１１はユーザの要請したチャネルのコンテンツが抽出されると、当該コンテンツをデータ処理部１５０及び制御部１３０に出力する。それにより、データ処理部１５０は、当該コンテンツの映像データに対する信号処理を行う。このとき、データ処理部１５０は、上述のデコード部１５１を介してデコードされた映像データをスケーラ１５３を介してスケーリングする前に、デインターレーシング部１５５を介してデコードされた映像データを順次走査映像に変換した後、スケーラ１５３を介して順次走査映像に変換された映像データに対するスケーリングを行うことができる。
一方、デインターレーシング部１５５は、図５３に示すように、順次走査映像に変換された映像データをスケーラ１５３に出力すると同時に、当該映像データを制御部１３０に出力する。それにより、レコーディング部１３３は、デマルチプレキシング部１１１から出力されたコンテンツに対するレコーディングを行って当該コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、デインターレーシング部１５５を介して順次走査映像に変換された映像データの入力解像度を考慮して予め設定された条件に対応するイベント区間を検出することができる。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、上述のように、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５４は、本発明の一実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置の第１ブロック図である。
図５４に示すように、第１デマルチプレキシング部１１１−１は、第１チューナ部１１３−１を介して選局された複数のチャネルのうち、ユーザが視聴を要請したチャネルの第１コンテンツを抽出し、抽出された第１コンテンツをデータ処理部１５０に出力する。第１デマルチプレキシング部１１１−１を介してコンテンツを受信したデータ処理部１５０は、デコード部１５１を介してコンテンツの映像及びオーディオデータに対するデコードを行ってスケーラ１５３に出力し、スケーラ１５３は、デコードされた映像データに対するスケーリングを行ってタイミング駆動部１８０に出力する。タイミング駆動部１８０は、スケーラ１５３を介してスケーリングされた映像データに対応する駆動制御信号を生成し、映像出力部１２１はタイミング駆動部１８０で生成された駆動制御信号に基づいて映像データを出力する。
一方、第２デマルチプレキシング部１１１−３は、第２チューナ部１１３−３を介して選局された複数のチャネルのうち、ユーザが要約コンテンツサービスを要請したチャネルの第２コンテンツを抽出し、抽出された第２コンテンツを制御部１３０に出力する。制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツが入力されると、レコーディング部１３３及びイベント検出部１３１を介して第２コンテンツに対する録画及びイベント区間を検出する。上述のように、レコーディング部１３３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツに対するレコーディングを行って第２コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツの映像データに対するデコードを行い、デコードされた映像データを分析して予め設定された条件に対応するイベント区間を検出する。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５５は、本発明の別の実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置の第２ブロック図である。
図５５に示すように、第１デマルチプレキシング部１１１−１は、ユーザが視聴を要請したチャネルの第１コンテンツが抽出されると、第１コンテンツをデータ処理部１５０に出力する。それにより、データ処理部１５０の第１デコード部１５１−１は、第１コンテンツの映像及びオーディオデータに対するデコードを行い、スケーラ１５３は第１デコード部１５１−１からデコードされた映像データをスケーリングしてタイミング駆動部１８０に伝達する。それにより、映像出力部１２１は、タイミング駆動部１８０の駆動制御信号に基づいて第１コンテンツの映像データを出力する。
一方、第２デマルチプレキシング部１１１−３は、第２チューナ部１１３−３を介して選局された複数のチャネルのうち、ユーザが要約コンテンツサービスを要請したチャネルの第２コンテンツを抽出し、抽出された第２コンテンツをデータ処理部１５０及び制御部１３０に出力する。
それにより、データ処理部１５０の第２デコード部１５１−３は、第２コンテンツの映像及びオーディオデータに対するデコードを行い、デコードされた映像データを制御部１３０に出力する。制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツと、第２デコード部１５１−３を介してデコードされた映像データが入力されると、レコーディング部１３３及びイベント検出部１３１を介して第２コンテンツに対する録画及びイベント区間を検出する。具体的に、レコーディング部１３３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツに対するレコーディングを行って第２コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、第２デコード部１５１−３からデコードされた映像データを分析して予め設定された条件に対応するイベント区間を検出する。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５６は、本発明の更に別の実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置の第３ブロック図である。
図５６に示すように、第１デマルチプレキシング部１１１−１は、ユーザが視聴を要請したチャネルの第１コンテンツが抽出されると、第１コンテンツをデータ処理部１５０に出力する。それにより、データ処理部１５０の第１デコード部１５１−１は、第１コンテンツの映像及びオーディオデータに対するデコードを行い、第１スケーラ１５３−１は第１デコード部１５１−１からデコードされた映像データをスケーリングしてタイミング駆動部１８０に伝達する。それにより、映像出力部１２１は、タイミング駆動部１８０の駆動制御信号に基づいて第１コンテンツの映像データを出力する。
一方、第２デマルチプレキシング部１１１−３は、第２チューナ部１１３−３を介して選局された複数のチャネルのうち、ユーザが要約コンテンツサービスを要請したチャネルの第２コンテンツを抽出し、抽出された第２コンテンツをデータ処理部１５０及び制御部１３０に出力する。それにより、データ処理部１５０の第２デコード部１５１−３は、第２コンテンツの映像及びオーディオデータに対するデコードを行い、第２スケーラ１５３−３は、第２デコード部１５１−３からデコードされた映像データをスケーリングされて制御部１３０に出力する。制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツと、第２スケーラ１５３−３を介してスケーリングされた映像データが入力されると、レコーディング部１３３及びイベント検出部１３１を介して第２コンテンツに対する録画及びイベント区間を検出する。具体的に、レコーディング部１３３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツに対するレコーディングを行って第２コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、第２スケーラ１５３−３からスケーリングされた映像データを分析して予め設定された条件に対応するイベント区間を検出する。このとき、イベント検出部１３１は、スケーリングされた映像データの解像度を考慮してイベント区間を検出することが望ましい。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５７は、本発明の更に別の実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置の第４ブロック図である。
図５７に示すように、第１デマルチプレキシング部１１１−１は、ユーザが視聴を要請したチャネルの第１コンテンツが抽出されると、第１コンテンツをデータ処理部１５０に出力する。それにより、データ処理部１５０の第１デコード部１５１−１は、第１コンテンツの映像及びオーディオデータに対するデコードを行い、第１スケーラ１５３−１は第１デコード部１５１−１からデコードされた映像データをスケーリングしてタイミング駆動部１８０に伝達する。それにより、映像出力部１２１は、タイミング駆動部１８０の駆動制御信号に基づいて第１コンテンツの映像データを出力する。
一方、第２デマルチプレキシング部１１１−３は、第２チューナ部１１３−３を介して選局された複数のチャネルのうち、ユーザが要約コンテンツサービスを要請したチャネルの第２コンテンツを抽出し、抽出された第２コンテンツをデータ処理部１５０及び制御部１３０に出力する。
それにより、データ処理部１５０の第２デコード部１５１−３は、第２コンテンツの映像及びオーディオデータに対するデコードを行い、デインターレーシング部１５５は、第２デコード部１５１−３からデコードされた映像データを順次走査映像に変換した後、制御部１３０に出力する。制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツと、デインターレーシング部１５５を介して順次走査映像に変換された映像データが入力されると、レコーディング部１３３及びイベント検出部１３１を介して第２コンテンツに対する録画及びイベント区間を検出する。具体的に、レコーディング部１３３は、第２デマルチプレキシング部１１１−３から出力された第２コンテンツに対するレコーディングを行って第２コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、デインターレーシング部１５５を介して順次走査映像に変換された映像データの入力解像度を考慮して予め設定された条件に対応するイベント区間を検出することができる。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
図５８は、本発明の更に別の実施形態に係る視聴中のコンテンツと異なるコンテンツに対する要約コンテンツサービスを提供する放送受信装置の第５ブロック図である。
図５８に示すように、第１デマルチプレキシング部１１１−１は、ユーザが視聴を要請したチャネルの第１コンテンツが抽出されると、第１コンテンツをデータ処理部１５０に伝達する。それにより、データ処理部１５０の第１デコード部１５１−１は、第１コンテンツの映像及びオーディオデータに対するデコードを行い、第１スケーラ１５３−１は第１デコード部１５１−１からデコードされた映像データをスケーリングして第１タイミング駆動部１８０−１に出力する。それにより、映像出力部１２１は、第１タイミング駆動部１８０−１の駆動制御信号に基づいて第１コンテンツの映像データを出力する。
一方、第２デマルチプレキシング部１１１−３は、第２チューナ部１１３−３を介して選局された複数のチャネルのうち、ユーザが要約コンテンツサービスを要請したチャネルの第２コンテンツを抽出し、抽出された第２コンテンツをデータ処理部１５０及び制御部１３０に伝達する。それにより、データ処理部１５０の第２デコード部１５１−３は、第２コンテンツの映像及びオーディオデータに対するデコードを行い、第２スケーラ１４３−２は、デコードされた映像データをスケーリングして第２タイミング駆動部１８０−２に出力する。映像データの出力のための駆動制御信号を生成する第２タイミング駆動部１８０−２はスケーリングされた映像データが入力されると、当該映像データを制御部１３０に出力する。
制御部１３０は、第２デマルチプレキシング部１１１−３を介して出力された第２コンテンツと第２タイミング駆動部１８０−２を介して伝達された映像データが入力されると、レコーディング部１３３及びイベント検出部１３１を介して第２コンテンツに対する録画及びイベント区間を検出する。具体的に、レコーディング部１３３は、第２デマルチプレキシング部１１１−３から伝達された第２コンテンツに対するレコーディングを行って第２コンテンツに対する録画コンテンツを生成する。そして、イベント検出部１３１は、第２タイミング駆動部１８０−２を介して出力された映像データの映像イメージに対するＬＶＤＳ（Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）または差動信号（Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）を分析して予め設定された条件に対応するイベント区間を検出することができる。
このようなレコーディング部１３３及びイベント検出部１３１を介してコンテンツ生成及びイベント区間が検出されると、制御部１３０は、録画コンテンツに対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存部１６０に保存することができる。
これまで、多様な実施形態を通じて要約コンテンツサービスを提供する放送受信装置１００の各構成について詳細に説明してきた。以下では、本発明に係る放送受信装置１００で要約コンテンツサービスを提供する方法について詳細に説明する。
図５９は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービス関連ブックマーキング情報を生成する方法のフローチャートである。
図５９に示すように、放送受信装置１００は要約コンテンツサービスに対するユーザ命令に応じて、当該ユーザ命令に対応するチャネルからコンテンツを受信し、受信されたコンテンツの映像及びオーディオデータを出力可能な形態に信号処理して出力する（Ｓ５９１０）。このようなコンテンツを出力している状態で、放送受信装置１００は他コンテンツに対する録画命令が入力されるか否かを判断する（Ｓ５９２０）。
判断の結果、他コンテンツに対する録画命令が入力されていない場合、放送受信装置１００は出力されるコンテンツに対する録画コンテンツ生成及び当該コンテンツに対する要約コンテンツ区間を決定する（Ｓ５９３０）。具体的に、放送受信装置１００は、他コンテンツに対する録画命令が入力されないと、出力されるコンテンツの映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応するイベント区間を検出する。一方、放送受信装置１００は、他コンテンツに対する録画命令が入力されると、入力された録画命令に対応するチャネルから出力されるコンテンツ（以下、第１コンテンツという）と異なる他コンテンツ（以下、第２コンテンツという）を受信する。その後、放送受信装置１００は、第２コンテンツに対する録画コンテンツ生成及び第２コンテンツに対する要約コンテンツ区間を決定する（Ｓ５９４０）。第１または第２コンテンツに対する要約コンテンツ区間が決定されると、放送受信装置１００は当該要約コンテンツ区間に対するブックマーキング情報を生成し、生成されたブックマーキング情報と録画コンテンツとを相互マッチングさせて保存する（Ｓ５９５０）。
具体的に、放送受信装置１００は、視聴中の第１コンテンツまたは視聴中の第１コンテンツと異なる第２コンテンツの映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応するイベント区間を検出する。
一実施形態によって、放送受信装置１００は、第１または第２コンテンツに対する映像データを分析して予め設定された試合状況条件に対応する映像区間をイベント区間として検出することができる。別の実施形態によって、放送受信装置１００は第１または第２コンテンツに対するオーディオデータを分析して予め設定された臨界レベル以上のオーディオ信号レベルを有する映像区間をイベント区間として検出することができる。このようなイベント区間が検出されると、放送受信装置１００は予め検出されたイベント区間を含む要約コンテンツ区間を決定し、当該要約コンテンツ区間のみを選択的に出力するためのブックマーキング情報を生成する。ここで、ブックマーキング情報は、イベント区間を含む要約コンテンツ区間の再生開始及び終了時点の時間情報を含むことができる。
このとき、放送受信装置１００は、予め検出されたイベント区間を含む要約コンテンツ区間が決定されると、決定された要約コンテンツ区間に含まれた映像イメージのうち１つの映像イメージを代表サムネールイメージに決定する。実施形態によって、放送受信装置１００は、イベント区間を含む要約コンテンツ区間に含まれた映像イメージのうち、ズームイン映像イメージを代表サムネールイメージに決定することができる。このように、要約コンテンツ区間に対する代表サムネールイメージが決定されると、放送受信装置は、予め決定された代表サムネールイメージと当該代表サムネールイメージに関連する要約コンテンツ区間の再生開始及び終了時点の時間情報を含むブックマーキング情報を生成する。その後、放送受信装置１００は、第１または第２コンテンツに関連する録画コンテンツ及び当該録画コンテンツに対するブックマーキング情報を相互マッチングさせて保存する。
図６０は、本発明の一実施形態に係る放送受信装置で要約コンテンツサービス関連録画コンテンツを出力するフローチャートである。
図６０に示すように、放送受信装置１００はコンテンツ再生関連ユーザ命令が入力されると、予め保存された複数の録画コンテンツのうち、入力されたユーザ命令に対応する録画コンテンツに対する映像及びオーディオデータを出力する（Ｓ６０１０）。このような録画コンテンツが出力されている状態で、放送受信装置１００は要約コンテンツサービス関連ユーザ命令が入力されるか否かを判断する（Ｓ６０２０）。判断の結果、要約コンテンツサービス関連ユーザ命令が入力されると、放送受信装置１００は録画コンテンツの特定映像区間のみを選択的に出力する（Ｓ６０３０）。ここで、特定映像区間は予め検出されたイベント区間を含む要約コンテンツ区間であってよい。
具体的に、放送受信装置１００は要約コンテンツサービス関連ユーザ命令が入力されると、録画コンテンツの再生時間情報に基づいて当該録画コンテンツに対するブックマーキング情報に含まれた時間情報に対応する映像区間である要約コンテンツ区間のみを選択的に出力する。一方、ステップＳ６０１０において、放送受信装置１００はコンテンツ再生命令に応じて、予め保存された複数の録画コンテンツのうち、入力されたコンテンツ再生命令に対応する録画コンテンツを獲得し、獲得した録画コンテンツに関連するブックマーキング情報が保存されているか否かを判断する。判断の結果、録画コンテンツに関連するブックマーキング情報が保存されていると、放送受信装置１００はコンテンツ再生命令に対応する録画コンテンツ及びブックマーキング情報に含まれた代表サムネールイメージを出力する。すなわち、放送受信装置１００は、第１領域上に録画コンテンツに対する映像データを出力し、第２領域上に複数の代表サムネールイメージを出力する。
よって、このような複数の代表サムネールイメージのうち１つの代表サムネールイメージが選択されると、放送受信装置１００は選択された代表サムネールイメージに関連する要約コンテンツ区間が再生される時点から録画コンテンツを出力することができる。
一方、上述の放送受信装置１００における要約コンテンツサービス方法は、コンピュータで実行可能なアルゴリズムを含むプログラムで実現でき、前記プログラムは非一時的な読み取り可能な媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）に保存されて提供されてよい。
非一時的な読み取り可能な媒体とは、レジスタやキャッシュ、メモリ等のように短い間だけデータを保存する媒体ではなく、半永久的にデータを保存し、機器によって読み取り（ｒｅａｄｉｎｇ）が可能な媒体を意味する。具体的には、上述の多様なアプリケーションまたはプログラムは、ＣＤやＤＶＤ、ハードディスク、ブルーレイディスク、ＵＳＢ、メモリカード、ＲＯＭ等のような非一時的な読み取り可能な媒体に保存されて提供されてよい。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

Claims (15)

  1. 放送受信装置の要約コンテンツサービス方法において、
    コンテンツを受信するステップと、
    前記コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析し、予め設定された条件に対応する少なくとも１つのイベント区間を検出するステップと、
    前記検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成するステップと
    を含む要約コンテンツサービス方法。
  2. 前記コンテンツは、スポーツ関連コンテンツであり、
    前記放送受信装置は、スポーツ関連コンテンツに対する要約コンテンツに関連する試合状況条件を保存し、
    前記検出するステップは、
    前記コンテンツに含まれた映像データを分析し、前記保存された試合状況条件に対応する映像区間を少なくとも１つのイベント区間として検出することを特徴とする請求項１に記載の要約コンテンツサービス方法。
  3. 前記検出するステップは、
    前記コンテンツに含まれたオーディオデータを分析し、予め設定された臨界レベル以上のオーディオ信号レベルを有する映像区間をイベント区間として検出することを特徴とする請求項１に記載の要約コンテンツサービス方法。
  4. 前記検出するステップは、
    前記コンテンツに含まれたオーディオデータに対するＳＴＴ分析を行ってテキストデータを生成し、前記生成されたテキストデータを用いて要約コンテンツに関連する予め設定された単語の含まれた映像区間をイベント区間として検出することを特徴とする請求項１に記載の要約コンテンツサービス方法。
  5. 前記生成するステップは、
    前記検出された少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相及び色相別の割合値に基づいて前記コンテンツがスポーツ関連コンテンツか否かを判断するステップと、
    前記スポーツ関連コンテンツである場合、前記少なくとも１つのイベント区間が検出された時間情報に基づいてコンテンツ要約区間を決定するステップと
    を含むことを特徴とする請求項１に記載の要約コンテンツサービス方法。
  6. 前記判断するステップは、
    前記少なくとも１つのイベント区間に対する映像区間のイメージ情報に含まれた色相のうち予め定義されたフィールドカラーに対応する色相の割合値が予め設定された第１臨界値以上か否かに応じて、前記コンテンツが前記スポーツ関連コンテンツか否かを判断することを特徴とする請求項５に記載の要約コンテンツサービス方法。
  7. 前記判断するステップは、
    前記検出された少なくとも１つのイベント区間に対する映像区間と隣接した周辺映像区間のイメージ情報に含まれた色相のうち前記フィールドカラーに対応する色相の割合値が予め設定された第２臨界値以上か否かに応じて、前記スポーツに対するプレイ状況を判断することを特徴とする請求項６に記載の要約コンテンツサービス方法。
  8. 前記判断するステップは、
    前記検出された少なくとも１つのイベント区間に対する映像区間のイメージから試合進行状況をガイドするガイド領域を抽出し、前記抽出されたガイド領域に基づいて前記スポーツに対するプレイ状況を判断し、
    前記ガイド領域は、
    試合スコア及び試合進行時間のうち少なくとも１つを表す領域であることを特徴とする請求項６に記載の要約コンテンツサービス方法。
  9. 前記コンテンツ要約区間を決定するステップは、
    前記少なくとも１つのイベント区間の検出された時間を基準に予め設定された固定時間に存在する前後映像区間を獲得し、前記獲得した前後映像区間と前記少なくとも１つのイベント区間に対する映像区間とを前記コンテンツ要約区間として決定することを特徴とする請求項５に記載の要約コンテンツサービス方法。
  10. 前記コンテンツ要約区間を決定するステップは、
    前記獲得した前後映像区間のうち少なくとも１つのシーン（Ｓｃｅｎｅ）変化発生有無に応じて、前記固定時間を可変することを特徴とする請求項９に記載の要約コンテンツサービス方法。
  11. 前記少なくとも１つのイベント区間が検出されると、前記検出された少なくとも１つのイベント区間に対する映像区間からサムネールイメージを獲得するステップと、
    前記生成された要約コンテンツ及び前記要約コンテンツに関連して予め獲得したサムネールイメージをマッチングさせて保存するステップと、
    ユーザ命令に応じて、予め保存された前記コンテンツに対する要約コンテンツ及び前記要約コンテンツとマッチングされたサムネールイメージを出力するステップと
    を更に含むことを特徴とする請求項５に記載の要約コンテンツサービス方法。
  12. 前記獲得するステップは、
    前記サムネールイメージが複数個の場合、前記複数のサムネールイメージのうち予め定義された有効フィールドカラーに対応する色相の数が最も少ないサムネールイメージまたは前記複数のサムネールイメージのそれぞれに含まれた同一のオブジェクトのうちサイズが最も大きいオブジェクトを含むサムネールイメージを獲得することを特徴とする請求項１１に記載の要約コンテンツサービス方法。
  13. コンテンツを受信する受信部と、
    前記コンテンツを出力する出力部と、
    前記コンテンツに含まれた映像及びオーディオデータのうち少なくとも１つを分析して予め設定された条件に対応する少なくとも１つのイベント区間を検出し、
    前記検出された少なくとも１つのイベント区間に基づいて要約コンテンツを生成して前記出力部を介して出力されるように制御する制御部と
    を含む放送受信装置。
  14. 放送受信装置の要約コンテンツサービス方法において、
    複数の映像フレームの画素値を比較して要約コンテンツサービスのためのイベント領域を検出するステップと、
    映像フレームが入力されると、前記入力された映像フレームから前記検出されたイベント領域に対応する領域を検出し、前記対応する領域の文字変化を検知してイベント発生有無を検知するステップと、
    前記イベント発生の検知された結果に基づいて要約コンテンツを生成するステップと
    を含む要約コンテンツサービス方法。
  15. 前記検出するステップは、
    複数の映像フレームのうち第１及び第２映像フレーム間の相互対応する各画素領域別の画素差と予め設定された臨界値とを比較し、前記臨界値未満の画素差を有する画素領域の数を算出するステップと、
    前記臨界値未満の画素差を有する画素領域の数が予め設定された臨界画素数未満である場合、予め設定された臨界回数以上連続的に検出されるか否かを判断するステップと、
    前記予め設定された臨界回数以上連続的に検出されると、前記臨界値未満の画素差を有する画素領域に基づいて前記イベント領域を検出及び保存するステップと
    を含むことを特徴とする請求項１４に記載の要約コンテンツサービス方法。
JP2017505434A 2014-04-11 2014-08-06 要約コンテンツサービス方法及び放送受信装置 Active JP6419306B2 (ja)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
KR10-2014-0043639 2014-04-11
KR20140043597 2014-04-11
KR20140043536 2014-04-11
KR10-2014-0043597 2014-04-11
KR20140043639 2014-04-11
KR10-2014-0043536 2014-04-11
KR10-2014-0043641 2014-04-11
KR20140043641 2014-04-11
KR10-2014-0043524 2014-04-11
KR20140043524 2014-04-11
KR10-2014-0100489 2014-08-05
KR1020140100489A KR102217186B1 (ko) 2014-04-11 2014-08-05 요약 컨텐츠 서비스를 위한 방송 수신 장치 및 방법
PCT/KR2014/007280 WO2015156452A1 (ko) 2014-04-11 2014-08-06 요약 컨텐츠 서비스를 위한 방송 수신 장치 및 방법

Publications (2)

Publication Number Publication Date
JP2017517995A true JP2017517995A (ja) 2017-06-29
JP6419306B2 JP6419306B2 (ja) 2018-11-07

Family

ID=54400307

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017505434A Active JP6419306B2 (ja) 2014-04-11 2014-08-06 要約コンテンツサービス方法及び放送受信装置

Country Status (8)

Country Link
US (1) US20160261929A1 (ja)
EP (1) EP3110165B1 (ja)
JP (1) JP6419306B2 (ja)
KR (1) KR102217186B1 (ja)
CN (1) CN106134216B (ja)
BR (1) BR112015002635A2 (ja)
MX (1) MX364802B (ja)
RU (1) RU2669574C2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210049446A (ko) * 2019-10-25 2021-05-06 주식회사 케이티 주요 장면 이벤트를 검출하여 타임 슬라이스 영상을 생성하는 서버, 방법 및 컴퓨터 프로그램

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104038717B (zh) * 2014-06-26 2017-11-24 北京小鱼在家科技有限公司 一种智能录制系统
US20150379353A1 (en) * 2014-06-27 2015-12-31 Nokia Corporation Method and apparatus for role identification during multi-device video recording
KR20160074288A (ko) * 2014-12-18 2016-06-28 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR20160104493A (ko) * 2015-02-26 2016-09-05 삼성전자주식회사 방송 수신 장치 및 그 제어 방법
US10025986B1 (en) * 2015-04-27 2018-07-17 Agile Sports Technologies, Inc. Method and apparatus for automatically detecting and replaying notable moments of a performance
US10805668B2 (en) * 2015-05-20 2020-10-13 DISH Technologies L.L.C. Apparatus, systems and methods for trick function viewing of media content
EP3298797A4 (en) * 2015-05-22 2019-01-30 Playsight Interactive Ltd. EVENT-BASED VIDEO PRODUCTION
US10356456B2 (en) * 2015-11-05 2019-07-16 Adobe Inc. Generating customized video previews
US10575036B2 (en) * 2016-03-02 2020-02-25 Google Llc Providing an indication of highlights in a video content item
EP3306495B1 (en) * 2016-10-04 2023-07-12 Joaquin Sufuentes Method and system for associating recorded videos with highlight and event tags to facilitate replay services
KR102608466B1 (ko) * 2016-11-22 2023-12-01 삼성전자주식회사 영상 처리 방법 및 영상 처리 장치
US11272242B2 (en) * 2017-03-28 2022-03-08 Turner Broadcasting System, Inc. Platform for publishing graphics to air
KR102474551B1 (ko) * 2017-04-24 2022-12-06 주식회사 넥슨코리아 사용자 단말의 사용자와의 인터랙션 방법 및 장치
GB2565999A (en) * 2017-05-15 2019-03-06 Antony Clark Roger System for producing video recordings
US10430924B2 (en) * 2017-06-30 2019-10-01 Quirklogic, Inc. Resizable, open editable thumbnails in a computing device
JPWO2019026360A1 (ja) * 2017-07-31 2020-05-28 ソニー株式会社 情報処理装置および情報処理方法
US10715883B2 (en) 2017-09-06 2020-07-14 Rovi Guides, Inc. Systems and methods for generating summaries of missed portions of media assets
US10182271B1 (en) * 2017-12-20 2019-01-15 Rovi Guides, Inc. Systems and methods for playback of summary media content
CN108307250B (zh) * 2018-01-23 2020-10-30 浙江大华技术股份有限公司 一种生成视频摘要的方法及装置
US11594028B2 (en) 2018-05-18 2023-02-28 Stats Llc Video processing for enabling sports highlights generation
KR102585777B1 (ko) 2018-05-29 2023-10-10 삼성전자주식회사 전자 장치 및 그 제어방법
CN108833969A (zh) * 2018-06-28 2018-11-16 腾讯科技（深圳）有限公司 一种直播流的剪辑方法、装置以及设备
US10885942B2 (en) 2018-09-18 2021-01-05 At&T Intellectual Property I, L.P. Video-log production system
KR102219250B1 (ko) * 2018-10-30 2021-02-24 주식회사 아프리카티비 영상 제공 방법 및 이를 이용한 영상 제공 장치
US11252483B2 (en) 2018-11-29 2022-02-15 Rovi Guides, Inc. Systems and methods for summarizing missed portions of storylines
CN109743589B (zh) * 2018-12-26 2021-12-14 百度在线网络技术（北京）有限公司 文章生成方法及装置
US10997424B2 (en) 2019-01-25 2021-05-04 Gracenote, Inc. Methods and systems for sport data extraction
US11805283B2 (en) 2019-01-25 2023-10-31 Gracenote, Inc. Methods and systems for extracting sport-related information from digital video frames
US11010627B2 (en) 2019-01-25 2021-05-18 Gracenote, Inc. Methods and systems for scoreboard text region detection
US11036995B2 (en) * 2019-01-25 2021-06-15 Gracenote, Inc. Methods and systems for scoreboard region detection
US11087161B2 (en) 2019-01-25 2021-08-10 Gracenote, Inc. Methods and systems for determining accuracy of sport-related information extracted from digital video frames
US11837262B2 (en) 2019-11-29 2023-12-05 Naver Corporation Electronic device for tagging event in sports play video and operating method thereof
KR102466526B1 (ko) * 2019-11-29 2022-11-14 네이버 주식회사 경기 영상에 대한 이벤트의 태깅을 위한 전자 장치 및 그의 동작 방법
JP6752349B1 (ja) * 2019-12-26 2020-09-09 株式会社ドワンゴ コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム
US11295746B2 (en) 2020-07-15 2022-04-05 Gracenote, Inc. System and method for multi-modal podcast summarization
KR102450432B1 (ko) * 2020-11-19 2022-10-04 주식회사 핏투게더 스포츠 이벤트를 검출하는 방법 및 이를 수행하는 시스템
CN115049755A (zh) * 2021-03-09 2022-09-13 京东方科技集团股份有限公司 一种图片生成方法、装置、设备以及存储介质
KR102467081B1 (ko) * 2021-04-05 2022-11-11 한밭대학교 산학협력단 동영상 검토 시스템, 방법 그리고 프로그램
WO2023243754A1 (ko) * 2022-06-17 2023-12-21 주식회사 엔씨소프트 지정된 모션이 캡쳐된 시점을 추출하는 전자 장치 및 방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003101939A (ja) * 2001-07-17 2003-04-04 Pioneer Electronic Corp 映像情報要約装置、映像情報要約方法及び映像情報要約プログラム
JP2004516752A (ja) * 2000-12-21 2004-06-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 映像番組のマルチメディア要約にアクセスするシステム及び方法
JP2006148932A (ja) * 2004-11-22 2006-06-08 Samsung Electronics Co Ltd スポーツ動映像の要約方法及び装置
JP2007288697A (ja) * 2006-04-19 2007-11-01 Sanyo Electric Co Ltd 録画再生装置
JP2008185626A (ja) * 2007-01-26 2008-08-14 Toshiba Corp ハイライトシーン検出装置
JP2009033413A (ja) * 2007-07-26 2009-02-12 Sony Corp 情報処理装置及び情報処理方法、並びにプログラム
WO2010073355A1 (ja) * 2008-12-26 2010-07-01 富士通株式会社 番組データ処理装置、方法、およびプログラム

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805733A (en) * 1994-12-12 1998-09-08 Apple Computer, Inc. Method and system for detecting scenes and summarizing video sequences
US7296282B1 (en) * 1999-01-22 2007-11-13 Koplar Interactive Systems International Llc Interactive optical cards and other hand-held devices with increased connectivity
US8051446B1 (en) * 1999-12-06 2011-11-01 Sharp Laboratories Of America, Inc. Method of creating a semantic video summary using information from secondary sources
US7474698B2 (en) * 2001-10-19 2009-01-06 Sharp Laboratories Of America, Inc. Identification of replay segments
US7339992B2 (en) * 2001-12-06 2008-03-04 The Trustees Of Columbia University In The City Of New York System and method for extracting text captions from video and generating video summaries
US7120873B2 (en) * 2002-01-28 2006-10-10 Sharp Laboratories Of America, Inc. Summarization of sumo video content
US7184955B2 (en) * 2002-03-25 2007-02-27 Hewlett-Packard Development Company, L.P. System and method for indexing videos based on speaker distinction
WO2004014061A2 (en) * 2002-08-02 2004-02-12 University Of Rochester Automatic soccer video analysis and summarization
US7212666B2 (en) * 2003-04-01 2007-05-01 Microsoft Corporation Generating visually representative video thumbnails
JP4424590B2 (ja) * 2004-03-05 2010-03-03 株式会社Ｋｄｄｉ研究所 スポーツ映像の分類装置
US20080138029A1 (en) * 2004-07-23 2008-06-12 Changsheng Xu System and Method For Replay Generation For Broadcast Video
KR100754529B1 (ko) * 2005-11-28 2007-09-03 삼성전자주식회사 동영상 요약 서비스 장치 및 그 방법
KR100764175B1 (ko) * 2006-02-27 2007-10-08 삼성전자주식회사 맞춤형 방송 서비스를 위한 동영상의 중요 자막을 검출하는장치 및 방법
ITTO20060556A1 (it) * 2006-07-27 2008-01-28 Videotec Spa Metodo di rilevazione eventi e sistema di video sorveglianza utilizzante il metodo
CN100530189C (zh) * 2007-02-13 2009-08-19 华为技术有限公司 一种自适应生成足球视频摘要的方法和装置
GB2447053A (en) * 2007-02-27 2008-09-03 Sony Uk Ltd System for generating a highlight summary of a performance
US20080269924A1 (en) * 2007-04-30 2008-10-30 Huang Chen-Hsiu Method of summarizing sports video and apparatus thereof
US8238719B2 (en) * 2007-05-08 2012-08-07 Cyberlink Corp. Method for processing a sports video and apparatus thereof
US7983442B2 (en) * 2007-08-29 2011-07-19 Cyberlink Corp. Method and apparatus for determining highlight segments of sport video
US9524072B1 (en) * 2007-08-29 2016-12-20 The Directv Group, Inc. Method and system for forming content in a fantasy sporting event
US8301618B2 (en) * 2008-02-26 2012-10-30 Microsoft Corporation Techniques to consume content and metadata
US9141860B2 (en) * 2008-11-17 2015-09-22 Liveclips Llc Method and system for segmenting and transmitting on-demand live-action video in real-time
KR101628237B1 (ko) * 2009-01-21 2016-06-22 삼성전자주식회사 하이라이트 영상 구성 방법 및 장치
CN101599179B (zh) * 2009-07-17 2011-06-01 北京邮电大学 场地运动精彩镜头集锦自动生成方法
KR20110062982A (ko) * 2009-12-04 2011-06-10 삼성전자주식회사 실시간 방송 컨텐츠의 방송 요약 정보 생성 방법 및 장치와, 그 제공방법 및 방송 수신 장치
US8964065B2 (en) * 2010-02-10 2015-02-24 Panasonic Intellectual Property Management Co., Ltd. Video picture extracting apparatus, imaging apparatus and recording medium
US20120236201A1 (en) * 2011-01-27 2012-09-20 In The Telling, Inc. Digital asset management, authoring, and presentation techniques
CN102254160B (zh) * 2011-07-12 2013-06-12 央视国际网络有限公司 视频比分的检测识别方法及装置
US10650442B2 (en) * 2012-01-13 2020-05-12 Amro SHIHADAH Systems and methods for presentation and analysis of media content
US9699513B2 (en) * 2012-06-01 2017-07-04 Google Inc. Methods and apparatus for providing access to content
US20130347018A1 (en) * 2012-06-21 2013-12-26 Amazon Technologies, Inc. Providing supplemental content with active media
US9497406B2 (en) * 2013-03-11 2016-11-15 Coachmyvideo.Com, Llc Methods and systems of creation and catalog of media recordings
CN106233745B (zh) * 2013-07-29 2021-01-15 皇家Kpn公司 向客户端提供瓦片视频流
US20150058708A1 (en) * 2013-08-23 2015-02-26 Adobe Systems Incorporated Systems and methods of character dialog generation
US9059952B2 (en) * 2013-09-05 2015-06-16 Yapp Media, LLC System and method for distributing and optimizing quality and quantity of social media posts

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004516752A (ja) * 2000-12-21 2004-06-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 映像番組のマルチメディア要約にアクセスするシステム及び方法
JP2003101939A (ja) * 2001-07-17 2003-04-04 Pioneer Electronic Corp 映像情報要約装置、映像情報要約方法及び映像情報要約プログラム
JP2006148932A (ja) * 2004-11-22 2006-06-08 Samsung Electronics Co Ltd スポーツ動映像の要約方法及び装置
JP2007288697A (ja) * 2006-04-19 2007-11-01 Sanyo Electric Co Ltd 録画再生装置
JP2008185626A (ja) * 2007-01-26 2008-08-14 Toshiba Corp ハイライトシーン検出装置
JP2009033413A (ja) * 2007-07-26 2009-02-12 Sony Corp 情報処理装置及び情報処理方法、並びにプログラム
WO2010073355A1 (ja) * 2008-12-26 2010-07-01 富士通株式会社 番組データ処理装置、方法、およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210049446A (ko) * 2019-10-25 2021-05-06 주식회사 케이티 주요 장면 이벤트를 검출하여 타임 슬라이스 영상을 생성하는 서버, 방법 및 컴퓨터 프로그램
KR102652647B1 (ko) * 2019-10-25 2024-04-01 주식회사 케이티 주요 장면 이벤트를 검출하여 타임 슬라이스 영상을 생성하는 서버, 방법 및 컴퓨터 프로그램

Also Published As

Publication number Publication date
EP3110165A4 (en) 2017-08-09
BR112015002635A2 (pt) 2017-07-04
CN106134216A (zh) 2016-11-16
EP3110165A1 (en) 2016-12-28
KR102217186B1 (ko) 2021-02-19
US20160261929A1 (en) 2016-09-08
RU2015104057A3 (ja) 2018-05-11
RU2669574C2 (ru) 2018-10-12
EP3110165B1 (en) 2019-10-02
KR20150118002A (ko) 2015-10-21
MX2016013106A (es) 2017-05-01
MX364802B (es) 2019-05-08
JP6419306B2 (ja) 2018-11-07
CN106134216B (zh) 2020-09-04
RU2015104057A (ru) 2018-05-11

Similar Documents

Publication Publication Date Title
JP6419306B2 (ja) 要約コンテンツサービス方法及び放送受信装置
US8279343B2 (en) Summary content generation device and computer program
JP5515890B2 (ja) 画像処理装置、画像処理方法、画像処理システム、制御プログラムおよび記録媒体
US20110286720A1 (en) Electronic apparatus, video processing method, and program
US8009232B2 (en) Display control device, and associated method of identifying content
US20110138418A1 (en) Apparatus and method for generating program summary information regarding broadcasting content, method of providing program summary information regarding broadcasting content, and broadcasting receiver
JP2008147838A (ja) 画像処理装置、画像処理方法、およびプログラム
CN105933764A (zh) 广播接收装置及其控制方法
KR100604831B1 (ko) 오디오에 부가 영상과 문자를 동기시켜 재생하는오디오/비디오 재생 장치 및 그 방법
KR20090089878A (ko) 개요 및 리포트를 이미 포함하는 시청각 도큐먼트의 새로운 개요를 생성하기 위한 방법 및 상기 방법을 구현할 수 있는 수신기
WO2010125757A1 (ja) 映像音声再生装置、映像音声記録再生装置、映像音声再生方法、および映像音声記録再生方法
US8437611B2 (en) Reproduction control apparatus, reproduction control method, and program
JP2016103714A (ja) 録画再生装置
JP2006180306A (ja) 動画記録再生装置
JP2011044871A (ja) シーンラベル生成装置、シーンラベル生成方法及びコンテンツ配信サーバ
KR100818401B1 (ko) 디지털 방송 수신기에서 녹화물 재생 방법
US20150074113A1 (en) Electronic apparatus, method for controlling electronic apparatus, and information recording medium
JP5232744B2 (ja) 要約コンテンツを表示する表示装置、方法及びプログラム
US20160064037A1 (en) Video apparatus and control method of video apparatus
JP4539884B2 (ja) 再生装置、プログラム及び電子画面を構築する方法
JP4760893B2 (ja) 動画記録再生装置
KR20070075728A (ko) 디지털 방송 수신기에서 녹화물 탐색 방법 및 그 장치
JP2016116098A (ja) 録画再生装置
JP2022096398A (ja) 放送受信装置、サーバ装置、情報記録再生装置、第１表示システム、及び第２表示システム
EP3554092A1 (en) Video system with improved caption display

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170802

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180824

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180918

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181009

R150 Certificate of patent or registration of utility model

Ref document number: 6419306

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250