CN106134216A - 用于摘要内容服务的广播接收装置及方法 - Google Patents

用于摘要内容服务的广播接收装置及方法 Download PDF

Info

Publication number
CN106134216A
CN106134216A CN201480077664.6A CN201480077664A CN106134216A CN 106134216 A CN106134216 A CN 106134216A CN 201480077664 A CN201480077664 A CN 201480077664A CN 106134216 A CN106134216 A CN 106134216A
Authority
CN
China
Prior art keywords
interval
video
event
content
clip text
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480077664.6A
Other languages
English (en)
Other versions
CN106134216B (zh
Inventor
李知骁
崔相陈
姜知洪
李庸熏
金升园
金周妍
刘钟旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2014/007280 external-priority patent/WO2015156452A1/ko
Publication of CN106134216A publication Critical patent/CN106134216A/zh
Application granted granted Critical
Publication of CN106134216B publication Critical patent/CN106134216B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G06V20/47—Detecting features for summarising video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection

Abstract

公开了一种用于摘要内容服务的广播接收装置以及方法。根据本发明的一种广播接收装置的摘要内容生成方法包括如下的步骤：接收内容；通过对包含在内容中的视频数据以及音频数据中的至少一个进行分析而检测与预设条件对应的至少一个事件区间；基于检测出的至少一个事件区间来生成摘要内容。据此，广播接收装置可以生成关于用户请求的内容的摘要内容。

Description

用于摘要内容服务的广播接收装置及方法
技术领域
本发明涉及一种广播接收装置及方法，具体而言，涉及一种用于提供关于体育相关内容的摘要内容服务的广播接收装置以及方法。
背景技术
现有的广播接收装置从外部接收当前显示的内容的摘要内容(在下文中，称之为强调图像)并将其显示在屏幕上。这种强调图像在与强调图像相关的内容的再现经过预定时间借助外部服务器而被生成，并被传输到广播接收装置。
例如，对于诸如足球等体育内容的强调图像的情况，外部服务器在足球比赛的上半场或上下半场全部结束之后生成针对该体育内容的强调图像，并将该强调图像传输到广播接收装置。据此，广播接收装置在足球比赛的上半场或者上下半场全部结束之后接收外部借助服务器生成的与该足球比赛相关的强调图像，并将其显示在屏幕上。
因此，如果在用户无法视听当前视听的足球比赛中的一部分的情况下发生诸如进球的事件，则在从外部服务器接收包含与该事件相关的视频区间的强调图像之前，用户需要一直等待该事件所发生的视频区间的视听，从而需要承受一定的不便。
发明内容
技术问题
本发明是为解决上述的问题点而提出的，其目的在于实时地在广播接收装置中生成与再现中的内容对应的摘要内容。
进而，本发明的目的还在于提供一种用于再现当前在广播接收装置再现的内容以及摘要内容中的至少一个的摘要内容服务。
技术手段
用于达成上述目的的根据本发明的一实施例的一种广播接收装置的摘要内容生成方法包括如下的步骤：接收内容；通过对包含在内容中的视频数据以及音频数据中的至少一个进行分析而检测与预设条件对应的至少一个事件区间；以及基于所述检测出的至少一个事件区间来生成摘要内容。
另外，所述内容可以是体育相关内容，所述广播接收装置存储与关于体育相关内容的摘要内容相关的比赛状况条件，而且在所述检测的步骤中，可通过对包含在所述内容中的视频数据进行分析而将与所述存储的比赛状况条件对应的视频区间检测为至少一个事件区间。
此外，在所述检测的步骤中，可通过将包含在所述内容中的音频数据进行分析，而将具有预设的临界电平以上的音频信号电平的视频区间检测为事件区间。
另外，在所述检测的步骤中，可通过对包含在所述内容中的音频数据执行STT分析而生成文本数据，并利用所述生成的文本数据而将包含与摘要内容相关的预设的词语的视频区间检测为事件区间。
此外，所述生成的步骤可以包括如下的步骤：基于针对所述检测出的至少一个事件区间的视频区间的图像信息所包含的颜色以及按颜色的比率值来判断所述内容是否为体育相关内容；以及如果所述内容是所述体育相关内容，则基于检测出所述至少一个事件区间的时间信息来确定内容摘要区间。
另外，在所述判断的步骤中，可以根据在针对所述至少一个事件区间的视频区间的图像信息所包含的颜色中的与预定的场地颜色对应的颜色的比率值是否为预设的第一临界值以上，来判断所述广播体育是否为所述体育相关内容。
此外，在所述判断的步骤中，可以根据在与针对检测出的至少一个事件区间的视频区间相邻的周围视频区间的图像信息所包含的颜色中的与所述场地颜色对应的颜色的比率值是否为预设的第二临界值以上，来判断关于所述体育的进行状态。
另外，在所述判断的步骤中，可以从与检测出的至少一个事件区间对应的视频区间的图像中提取用于引导比赛进行状况的引导区域，并可以基于所述提取到的引导区域来判断关于所述体育的进行状态，所述引导区域是用于表示比赛比分以及比赛进行时间中的至少一个的区域。
此外，在确定所述摘要内容区间的步骤中，可以以检测出所述至少一个事件区间的时间为基准而获取在预设的固定时间内存在的前后视频区间，并将所述获取的前后视频区间和针对所述至少一个事件区间的视频区间确定为所述内容摘要区间。
另外，在确定所述内容摘要区间的步骤中，可以根据所述获取到的前后视频区间中的至少一个的场景是否发生变化而改变所述固定时间。
此外，还可以包括如下的步骤：如果检测出所述至少一个事件区间，则从与所述检测出的至少一个事件区间对应的视频区间获取缩略图图像；将所述生成的摘要内容以及与所述摘要内容相关地已获取的缩略图图像彼此进行匹配并存储；根据用户命令，将关于已存储的所述内容的摘要内容以及与所述摘要内容匹配的缩略图图像输出。
另外，在所述获取的步骤中，如果所述缩略图图像为多个缩略图图像，则可以从所述多个缩略图图像中获取如下缩略图图像：与预定的有效场地颜色对应的颜色的数量最少的缩略图图像；或者包括所述多个缩略图图像均包含的相同的对象中的大小最大的对象的缩略图图像。
另一方面，根据用于达成所述目的的本发明的另一实施例的一种广播接收装置包括：接收部，接收内容；输出部，输出所述内容；控制部，通过对包含在内容中的视频数据以及音频数据中的至少一个进行分析而检测与预设条件对应的至少一个事件区间，之后基于所述检测出的至少一个事件区间来生成摘要内容，并通过所述输出部输出生产的摘要内容。
另一方面，根据用于达成所述目的的本发明的又一实施例的一种广播接收装置的摘要内容服务方法包括如下步骤：将多个视频帧的像素值进行比较而检测用于摘要内容服务的事件区域；如果接收到视频帧，则从所述接收到的视频帧检测与所述检测出的事件区域对应的区域，并通过感测所述对应的区域的文字变化而检测事件的发生与否；基于感测到所述事件的发生的结果来生成摘要内容。
另外，所述检测的步骤可以包括如下步骤：将多个视频帧中的第一视频帧以及第二视频帧之间的彼此对应的各个像素区域的像素差和预设的临界值进行比较，并计算出具有小于所述临界值的像素差的像素区域的数量；如果具有小于所述临界值的像素差的像素区域的数量小于预设的临界像素，则判断具有小于所述临界值的像素差的像素区域是否被连续地检测出预设的临界次数以上；如果连续地检测出所述预设的临界次数以上，则基于具有小于所述临界值的像素差的像素区域来检测并存储所述事件区域。
此外，在所述计算的步骤中，可以向具有小于所述临界值的像素差的像素区域和其余像素区域不同地应用变量，并从向具有小于所述临界值的像素差的像素区域应用的变量的数量计算出所述像素区域的数量。
另外，所述检测的步骤还可以包括通过分析所述事件区域来生成用于判断事件是否发生的源信息，而且所述事件区域可以是体育比赛相关比分板区域，所述源信息可以包括比赛时间区域、比分区域以及队伍区域中的至少一个。
此外，在生成所述源信息的步骤中，可以基于设定为所述事件区域内的按各个像素区域来设定的变量中的用于表示像素差的发生的变量的像素区域，来生成包含所述比赛时间区域的源信息并存储生成的源信息。
而且，在生成所述源信息的步骤中，利用数字识别算法从所述事件区域检测数字，如果检测出的数字至少存在连续两个以上，则基于检测出所述数字的像素区域来生成包含所述比赛时间区域的源信息并存储生成的源信息。
此外，在生成所述源信息的步骤中，可以利用文字识别算法生成包含所述比赛时间区域、比分区域以及队伍区域中的至少一个的源信息并将其存储。
而且，在所述检测的步骤可以包括如下的步骤：如果接收到所述视频帧，则通过分析与所述事件区域的各个像素区域对应的所述视频帧的像素区域，来判断与所述事件区域对应的区域是否存在；如果存在与所述事件区域对应的区域，则通过基于所述源信息来分析所述事件区域以及与所述事件区域对应的区域，来检测事件的发生与否。
此外，所述判断的步骤可以包括如下的步骤：获取所述事件区域中的除了所述比赛时间区域之外的剩余像素区域、以及从与所述剩余像素区域对应的所述视频帧的像素区域计算出的像素差中的具有小于预定的临界值的像素差的所述视频帧的像素区域数量；如果所述事件区域中的除了所述比赛时间区域之外的剩余像素区域与具有小于所述预定的临界值的像素差的像素区域数量的比率值小于预定的像素比率值，则将与所述事件区域对应的区域判断为事件区域。
而且，所述感测的步骤可以包括如下的步骤：如果所述源信息不包括比分区域，则基于设定于对应于所述事件区域的区域中的与除了所述比赛时间区域之外的剩余像素区域对应的像素区域的变量来确定比分区域，并从所述事件区域确定与所述确定的比分区域对应的比分区域；利用数字识别算法来从所述各个比分区域识别数字，并根据数字是否变化来感测事件的发生与否。
此外，在所述感测的步骤中，如果所述源信息包括比分区域，则可以从与所述事件区间对应的区域中检测与所述比分区域对应的区域，并利用数字识别算法从所述检测出的区域和所述比分区域识别数字，并根据数字是否变化来感测事件的发生与否。
而且，在所述感测的步骤中，如果根据从所述各个比分区域识别的数字的变化而感测到发生了事件，则可以将所述事件区域以及源信息更新为与所述事件区域对应的区域以及与所述区域相关的源信息。
另外，用于达成所述目的的根据本发明的又一实施例的一种广播接收装置包括：存储部，用于录制并存储内容；控制部，用于通过比较关于所述内容的多个视频帧的像素值来检测用于摘要内容服务的事件区域，并将所述检测出的事件区域存储到所述存储部，而且如果在检测出所述事件区域之后接收到视频帧，则从所述接收到的视频帧检测与所述检测出的事件区域对应的区域，并感测与所述对应的区域的文字变化而感测事件发生与否，而且基于所述事件发生的感测结果来生成摘要内容。
另一方面，用于达成所述目的的根据本发明的又一实施例的一种广播接收装置的摘要内容服务方法包括如下的步骤：对用户选择的内容的视频数据以及音频数据进行解码；通过分析所述经解码的视频数据的视频图像，而确定和存储至少一个候选缩略图图像；通过分析所述经解码的视频数据以及音频数据中的至少一个，而生成根据事件发生的摘要内容；基于包含在所述摘要内容的时间信息，来将与所述摘要内容对应的候选缩略图图像确定为所述摘要内容的代表缩略图图像。
而且，在所述存储的步骤中，可以将所述解码的视频数据的视频图像中的放大快照图像确定为所述至少一个候选缩略图图像并对其进行存储。
此外，在所述存储的步骤中，可通过分析按所述经解码的视频数据的视频图像而计算出与有效场地颜色对应的颜色的像素比率值，并且通过将计算出的像素比率值和预设的基准像素比率值进行比较而将具有小于所述基准像素比率值的像素比率值的视频图像确定为候选缩略图图像并将其存储。
而且，在所述存储的步骤中，将包含按所述经解码的视频数据的视频图像所的对象中的具有预设的临界大小以上的对象的视频图像确定为候选缩略图图像并将其存储。
此外，在所述存储的步骤中，可以基于确定为所述至少一个候选缩略图图像的视频图像和之前的视频图像的直方图(histogram)来确定场景变化率，并通过将所述确定的场景变化率和预设的基准变化率进行比较，来删除除了具有小于基准变化率的场景变化率的候选缩略图图像之外的剩余候选缩略图图像。
另外，所述确定的步骤可以包括如下的步骤：判断属于所述摘要内容的再现区间内的候选缩略图图像是否已存储；如果属于所述摘要内容的再现区间内的候选缩略图图像已存储，则将所述候选缩略图图像确定为代表缩略图图像，而且如果属于所述摘要内容的再现区间内的候选缩略图图像未存储，则将所述摘要内容的再现终止的区间的视频图像确定为代表缩略图图像；将所述确定的代表缩略图图像和所述摘要内容彼此匹配并存储。
此外，如果所述至少一个内容的视频数据以及音频数据被解码，则通过分析所述被解码的视频数据的视频图像以及所述视频数据的前后视频图像，来根据是否在上下左右中的至少一个区域连接地检测出黑色图像而生成所述黑色图像被去除的视频图像。
另外，根据用于达成所述目的的本发明的又一实施例的一种广播接收装置包括：解码部，对用户选择的内容的视频数据以及音频数据进行解码；存储部，存储至少一个候选缩略图图像；控制部，通过分析所述经解码的视频数据以及音频数据中的至少一个而生成根据事件发生的摘要内容，并基于包含在所述摘要内容中的时间信息，将存储于存储部的至少一个候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为所述摘要内容的代表缩略图图像，并将其存储到存储部。
另一方面，用于达成所述目的的根据本发明的又一实施例的一种广播接收装置的摘要内容服务方法包括如下的步骤：对至少一个内容的视频数据以及音频数据进行解码；通过分析所述经解码的视频数据以及音频数据中的至少一个，来检测与预设的条件对应的至少一个事件区间；基于所述检测出的事件区间来生成摘要内容；根据用户命令而输出所述内容以及所述摘要内容中的至少一个。
另外，在所述输出的步骤中，可以根据第一用户命令而同时输出所述内容以及与所述内容相关的摘要内容，或者可以根据第二用户命令而同时输出所述内容以及与所述内容相关的摘要内容。
此外，在所述解码的步骤中，如果所述用户命令为第一用户命令，则可以通过第一解码部而对内容的视频数据以及音频数据进行解码，并通过第二解码部而对与所述内容相关的摘要内容进行解码，而且在所述输出的步骤中，可以同时输出通过第一解码部以及第二解码部而解码的内容以及与所述内容相关的摘要内容。
另外，还可以包括通过解复用部来提取多个信道中的与用户命令对应的信道的内容的步骤，而且，在所述解码的步骤中，可以通过所述第一解码部对从所述解复用部提取的内容的视频数据以及音频数据进行解码，而且在所示生成的步骤中，可以基于从所述解复用部提取的内容来生成摘要内容。
此外，还可以包括通过第一解复用部以及第二解复用部而提取多个信道中的与用户命令对应的信道的内容的步骤，而且在所述解码的步骤中，可以通过所述第一解码部而对从所述第一解复用部提取的内容的视频数据以及音频数据进行解码，在所述生成的步骤中，可以基于从所述第二解复用部提取的内容以及检测出事件区间的时间信息来生成摘要内容。
另外，还可以包括通过第一解复用部至第三解复用部提取多个信道中的与用户命令对应的信道的内容的步骤，而且在所述解码的步骤中，通过所述第一解码部对所述第一解复用部提取的内容的视频数据以及音频数据进行解码，并通过第三解码部对所述第三解复用部提取的内容的视频数据以及音频数据进行解码，而且在所述生成的步骤中，可以基于所述第二解复用部提取的内容以及检测出事件区间的时间信息来生成摘要内容。
此外，还可以包括通过第一解复用部以及第二解复用部提取第一内容以及第二内容的步骤，而且在所述解码的步骤中，可以通过第一解码部对第一解复用部提取的第一内容的视频数据以及音频数据进行解码，并可以通过第二解码部对所述第二解复用部提取的所述第二内容的视频数据以及音频数据进行解码，而且可以通过第三解码部对所述第三解复用部提取的与所述第二内容相关地生成的摘要内容进行解码，在所述输出的步骤中，如果所述用户命令为第二用户命令，则可以同时输出与通过所述第一解复用部以及第二解复用部解码的所述第一内容以及所述第二内容对应的摘要内容。
另一方面，用于达成所述目的的根据本发明的又一实施例的广播接收装置包括：解码部，对包含在至少一个内容中的视频数据以及音频数据执行解码；输出部，将所述经解码的内容输出；事件检测部，通过分析所述经解码的内容的视频数据以及音频数据中的至少一个而检测与预设条件对应的至少一个事件区间；控制部，基于所述检测出的事件区间来生成摘要内容，并根据用户命令控制所述输出部同时输出所述内容以及所述摘要内容。
另一方面，用于达成所述目的的根据本发明的又一实施例的广播接收装置的摘要内容服务方法包括如下的步骤：通过分析内容的视频数据以及音频数据中的至少一个而检测与预设条件对应的事件区间；从所述内容中自动生成用于选择性地输出与所述检测出的事件区间相关的视频区间的书签(bookmarking)信息；存储所述生成的书签信息。
而且，所述书签信息可以包括包含所述事件区间的摘要内容区间的开始及终止时间点的时间信息，而且在所述生成的步骤中，可以将包括在与所述事件区间相关的视频区间中的视频图像中的一个视频图像确定为代表缩略图图像，并生成包含确定为所述代表缩略图图像的视频图像的书签信息。
此外，还可以包括根据用户命令而同时输出录制内容或者包含在所述录制内容以及关于所述录制内容的书签信息中的代表缩略图图像的步骤，而且，在所述输出的步骤中，如果所述用户命令为摘要内容服务命令，则基于所述录制内容的再现时间信息，可以仅选择性地输出与包含在关于所述录制内容的书签信息中的时间信息对应的视频区间。
另外，在所述检测的步骤中，可通过分析经解码的视频数据、去交错(deinerlacing)的视频数据、缩放的视频数据以及根据时序驱动部的驱动控制信号而输出的视频数据中的一个而检测事件区间。
此外，还可以包括如下的步骤：输出通过多个调谐部中的第一调谐部选择的信道的内容；录制并存储通过所述多个调谐部中的第二调谐部选择的信道的内容，而且在所述检测的步骤中，可通过分析与通过所述第二调谐部选择的信道的内容对应的视频数据以及音频数据中的至少一个而检测与预设条件对应的事件区间。
另一方面，用于达成所述目的的根据本发明的又一实施例的广播接收装置包括：存储部，用于存储录制内容；数据处理部，用于将内容的视频数据以及音频数据信号处理为可输出的形态；输出部，用于输出所述经信号处理的内容的视频数据以及音频数据；控制部，通过分析所述经信号处理的内容的视频数据以及音频数据中的至少一个而检测与预设条件对应的事件区间，并自动生成用于从所述内容中仅选择性地输出与所述检测出的事件区间相关的视频区间的书签信息，并将其存储到所述存储部。
技术效果
如上所述，根据本发明的多样的实施例，广播接收装置可以生成针对用户请求的内容的摘要内容。不仅如此，根据本发明的广播接收装置还可以同时再现用户请求的内容以及与该内容相关的摘要内容或者与另一内容相关的摘要内容。
附图说明
图1以及图2是根据本发明的一实施例的广播接收装置的框图，
图3是在根据本发明的一实施例的广播接收装置中基于已检测的内容区间来确定内容摘要区间的示意图，
图4以及图5是根据本发明的一实施例的用于生成摘要内容的示意图，
图6是在根据本发明的一实施例的在广播接收装置提供摘要内容服务的方法的流程图，
图7是根据本发明的一实施例的广播接收装置中基于与已检测的至少一个事件区间对应的图象区间来确定用于生成摘要内容的内容摘要区间的方法的流程图，
图8是根据本发明的一实施例的在广播接收装置中生成摘要内容的方法的流程图，
图9是根据本发明的一实施例的在广播接收装置中检测内容区域的示意图，
图10是示出根据本发明的一实施例的在广播接收装置中设定在初始视频帧的变量的示意图，
图11是示出根据本发明的一实施例的广播接收装置中设定于具有小于基于多个视频帧而预设定的临界值的像素差的图象帧的变量的示意图，
图12以及图13是根据本发明的一实施例的在广播接收装置中感测是否发生事件的示意图，
图14是根据本发明的一实施例的在广播接收装置中提供摘要内容服务的方法的流程图，
图15是根据本发明的一实施例的在广播接收装置中检测事件区域的方法的流程图，
图16是根据本发明的一实施例的在广播接收装置中感测事件发生与否的方法的流程图，
图17是根据本发明的一实施例的在广播接收装置中检测与事件区域对应的区域的方法的流程图，
图18是根据本发明的一实施例的在广播接收装置中对包含黑色图像的视频图像进行加工处理的示意图，
图19是根据本发明的一实施例的在广播接收装置中确定候选缩略图图像的示意图，
图20是根据本发明的一实施例的在广播接收装置中场景变化率来在候选缩略图图像中确定最终候选缩略图图像的示意图，
图21以及图22是根据本发明的一实施例的在广播接收装置中生成及再现摘要内容的示意图，
图23是根据本发明的一实施例的在广播接收装置中提供摘要内容的方法的流程图，
图24至图28是根据本发明的一实施例的在广播接收装置中确定和存储候选缩略图图像的方法的流程图，
图29是根据本发明的一实施例的在广播接收装置中确定代表缩略图图像的方法的流程图，
图30是根据本发明的一实施例的在广播接收装置中基于检测出的事件区间来判断是否有针对生成摘要内容的有效性的示意图，
图31是根据本发明的一实施例的在广播接收装置中基于关于事件区间的视频区间来生成摘要内容的示意图，
图32以及图33是根据本发明的一实施例的在广播接收装置中提供摘要内容服务的示意图，
图34至图44是根据本发明的一实施例的用于执行关于内容的摘要内容的生成以及同时再现的广播接收装置的框图，
图45是根据本发明的一实施例的在广播接收装置中提供摘要内容服务的方法的流程图，
图46是关于根据本发明的一实施例的在广播接收装置中生成及再现摘要内容的方法的流程图，
图47是根据本发明的一实施例的在广播接收装置中输出摘要内容区间的示意图，
图48是根据本发明的一实施例的在广播接收装置中输出录制内容的示意图，
图49至图53是根据本发明的一实施例的提供摘要内容服务的广播接收装置的框图，
图54至图58是根据本发明的一实施例的提供针对关于与视听中的内容不同的内容的摘要内容服务的广播接收装置的框图，
图59是根据本发明的一实施例的在广播接收装置中生成与摘要内容服务相关的书签信息的方法的流程图，
图60是根据本发明的一实施例的在广播接收装置中输出与摘要内容服务相关的录制内容的流程图。
具体实施方式
在下文中，参照附图对根据本发明的一实施例进行更为详细的说明。
图1是根据本发明的一实施例的广播接收装置的框图。
如图1所示，广播接收装置100是一种接收从广播服务器(未图示)提供的内容的终端装置，例如可以是智能TV、智能手机、平板电脑等终端装置，或者是用于向智能TV等终端装置输出从广播服务器(未图示)提供的内容的机顶盒。这种广播接收装置100包括：接收部110、输出部120以及控制部130。
在广播服务器(未图示)提供的多个内容中，接收部110通过用户选择的频道而接收内容。而且，输出部120输出通过接收部110而接收到的内容。具体而言，接收部110可以通过调谐部113选择用户请求的频道，并通过选择的频道而接收从广播服务器(未图示)提供的诸如地面广播或有线广播等内容。如上所述的内容可以包含视频数据以及音频数据，而且可以被信号处理为广播接收装置100可输出的形态。因此，输出部120可以输出包含被信号处理为可输出的形态的视频数据以及音频数据的内容。尤其，输出部120可以根据控制部130的控制命令而输出与内容相关的摘要内容，或者可以同时输出内容以及摘要内容。
控制部130对构成广播接收装置100的各个构成要素的整体操作进行控制。尤其，控制部130通过分析经由接收部110接收的内容所包含的视频数据以及音频数据中的至少一个，而检测出与预设的条件对应的至少一个事件区间。然而，本发明并不局限于此，控制部130还可以通过分析已存储于下述的存储不部160中的视频数据以及音频数据中的至少一个，而检测出与预设的条件对应的至少一个事件区间。
如上所述，如果检测出关于内容的至少一个事件区间，则控制部130基于检测的至少一个事件区间来生成摘要内容。在此，摘要内容可以是针对通过广播服务器(未图示)而实时流传输的内容或被录制并存储于存储部160的内容的强调图像。
如果生成如上所述的与内容对应的摘要内容，则控制部130可以根据用户的命令而控制输出部120输出已生成的摘要内容。据此，输出部120可以输出与实时流传输的内容或录制内容相关地生成的摘要内容，或者可以同时输出内容以及与该内容相关的摘要内容。不仅如此，输出部120根据控制部130的控制命令而输出实时流传输的内容的同时，还可以输出与另一内容相关地存储的摘要内容。
在下文中，通过图2对上述的广播接收装置100的构成进行更为详细的说明。
图2是根据本发明的一实施例的广播接收装置的详细框图。
如图2所示，广播接收装置100可以如上所述地包含接收部110、输出部120以及控制部130，而且还可以追加地包含通信部140、数据处理部150、存储部160以及输入部170。
通信部140可通过与提供内容的内容服务器(未图示)执行有线通信或者无线通信而接收用户所请求的内容，或者通过与控制广播接收装置100的操作的远程控制装置(未图示)执行通信而接收用户的命令。具体而言，通信部140可以通过远程控制装置(未图示)接收诸如频道选择命令、摘要内容生成命令、摘要内容再现命令等用户命令。
这种通信部140可以包括近距离无线通信模块(未图示)、无线通信模块(未图示)等多样的通信模块。在此，近距离无线通信模块是用于根据诸如蓝牙、ZigBee等近距离无线通信方式与位于近距离的诸如广播接收装置(未图示)、用户终端装置(未图示)等外部设备执行无线通信的模块。另外，无线通信模块是根据诸如WIFI、IEEE等无线通信协议而连接到网络并执行通信的模块。此外，无线通信模块还可以包括移动通信模块，所述移动通信模块其根据诸如3G(3rdGeneration)、3GPP(3rdGenerationPartnershipProject)、长期演进(LongTermEvoloution：LTE)等多样的移动通信规格而连接到移动通信网并执行通信。
数据处理部150通过对经由接收部110或通信部140接收的内容进行解复用(Demultiplexing)，而将其分离为视频数据以及音频数据。另外，上述的内容不仅可以包括视频数据以及音频数据，还可以包括诸如文本信息、EPG信息等附加数据。在此情况下，数据处理部150通过对接收到的内容进行解复用(Demultiplexing)，而分量包含在内容中的视频数据、音频数据和附加数据。
之后，在从内容分离视频数据以及音频数据时，数据处理部150将视频数据以及音频数据信号处理为可输出形态。具体而言，数据处理部150在对从内容分离出的视频数据进行解码之后，将经解码的视频数据转换为可输出形态的视频数据。此外，数据处理部150在对从内容分离出的音频数据进行解码，将经解码的音频数据转换为模拟形式的声音数据。据此，输出部120可通过图形输出部121和音频输出部123输出通过数据处理部150而被信号处理的视频数据和音频数据。
此外，在通过数据处理部150对包含在内容中的视频数据以及音频数据执行信号处理时，控制部130通过分析经信号处理的视频数据以及音频数据中的至少一个，而检测出与预设的条件对应的至少一个事件区间，并基于检测出的至少一个事件区间来生成摘要内容。根据实施例，控制部130可以通过下述的事件检测部131来通过分析包含在内容中的视频数据以及音频数据中的至少一个进行分析而检测出与预设的条件对应的至少一个事件区间。之后，控制部130获取针对检测的事件区间的视频区间，并基于所获取的视频区间来获取前后视频区间。之后，控制部130可以确定包括针对所获取的事件区间的视频区间以及前后视频区间的内容摘要区间，并基于所确定的内容摘要区间来生成摘要内容。
根据实施例，存储部160可以存储事件检测模块、内容摘要模块、摘要内容生成模块。因此，控制部130可以利用已存储到存储部160的事件检测模块、内容摘要模块以及摘要内容生成模块来检测关于内容的事件，确定内容摘要区间，并生成摘要内容。
在此，事件检测模块是用于与针对内容的摘要内容相关地检测至少一个事件区间的模块。另外，内容摘要模块是用于判断是否将针对通过事件检测模块检测的至少一个事件区间的视频区间以及与该视频区间相关地获取的前后视频区间确定为内容摘要区间的模块。另外，摘要内容生成模块是用于基于确定为内容摘要区间的针对事件区间的视频区间以及前后视频区间来生成摘要内容的模块。
因此，控制部130可以利用这种事件检测模块、内容摘要模块以及摘要内容，来生成模块检测事件区间，判断针对事件区间的视频区间以及与该视频区间相关的前后视频区间作为内容摘要区间的有效与否，并生成与相关内容对应的摘要内容。
另外，存储部160不仅可以存储上述的事件检测模块、内容摘要模块以及摘要内容生成模块，还可以存储用于控制广播接收装置100的操作的操作系统程序以及被操作系统所管理、利用操作系统的资源来执行广播接收装置100的操作并提供用户界面的应用程序。在此，操作系统可以是如下的程序：在广播接收装置100开启的情况下从存储部160中被读取而编译，从而使广播接收装置100的各个构成进行操作。而且，应用程序根据用户的运行命令而被操作系统从存储部160中读取，并被转换为可运行的形态而执行多样的操作。不仅如此，存储部160可以存储被控制部130处理的各种多媒体数据、内容数据、从外部源接收到的数据。
这种存储部160可以用如下项中的至少一个来实现：ROM、RAM或者可在广播接收装置100装卸的存储卡(例如，SD卡、记忆棒)、非易失性存储器、易失性存储器、硬盘驱动器(HDD)或者固态盘(SSD)。
输入部170可以接收经由具备于广播接收装置100的诸如操作部(未图示)或触摸面板(未图示)等输入单元输入到的用户命令，并将该用户命令传输到控制部130。在此，用户命令可以是频道选择命令、摘要内容生成命令、摘要内容再现命令等。这种输入部170可以包含可识别用户语音的语音识别模块(未图示)。这种输入部170可以通过语音识别模块(未图示)识别针对诸如频道选择命令、摘要内容生成命令、摘要内容再现命令等多样的用户命令的用户语音，并将识别出的语音识别结果传递给控制部130。
因此，如果通过输入部170或者通信部140而输入或接收到针对内容的摘要内容生成命令，则控制部130可以通过利用已存储于存储部160的事件检测模块来分析包含在内容中的视频数据以及音频数据中的至少一个，而检测出至少一个事件区间。这种利用事件检测模块来检测事件区间的控制部130可以通过下述的实施例来从内容中检测出至少一个事件区间。
根据一实施例，控制部130可通过分析包含在内容中的视频数据，而将与存储于存储部160的比赛状况条件对应的视频区间检测为至少一个事件区间。在此，已存储于存储部160的比赛状况条件可以是用于从在多样的分类的内容中的体育相关内容中检测事件区间的条件。例如，在内容是与足球相关的体育内容的情况下，比赛状况条件可以是得分场面、选手入场场面、射门场面等。因此，控制部130可通过分析包含在体育相关内容中的视频数据，而将对应于得分场面、选手入场场面、射门场面等的比赛状况条件的视频区间检测为至少一个事件区间。
根据另一实施例，控制部130可通过分析包含在内容中的音频数据，而将具有预存储于存储部160中的临界电平以上的音频信号电平的视频区间检测为事件区间。例如，对应于与进球的得分场面相关的视频区间的音频数据的音频信号电平可以高于一般的信号电平。因此，控制部130可通过分析包含在内容中的音频数据，从而基于具有临界值电平以上的语音信号等级的音频区间来将与该音频区间相关的视频区间检测为事件区间。
根据又一实施例，控制部130可通过对包含在内容中的音频数据执行声音转文字(SpeechtoText：STT)分析而生成文本数据，并利用生成的文本数据来将包括预设的词语的视频区间检测为事件区间。例如，在内容为与足球相关的体育内容的情况下，预设的词语可以是“进球(Goal)”、“进球了(Goal-in)”等，而在内容为与棒球相关的体育内容的情况下，预设的词语可以是“全垒打(homerun)”、“安全跑回本垒(home-in)”等。
因此，如果接收到体育相关内容，则控制部130获取在已存储于存储部160的按体育分类预设定的词语中的与该体育分类相关地预设定的词语。之后，控制部130利用STT分析算法从体育内容所包含的音频数据生成文本数据，并且获取在已生成的文本数据中的包括与该内容的体育项目相关地预设定的词语的文本数据。如果获取到这种包含预设定的词语的文本数据，则控制部130可以将与包含预设定的词语的文本数据相关的视频区间检测为事件区间。
然而，本发明并不局限于此，接收部110或通信部140可以从广播服务器(未图示)或内容服务器(未图示)接收体育相关内容以及针对该体育的事件信息。在此情况下，控制部130可通过基于接收到的事件信息分析包含在已接收的体育相关内容中的视频数据或音频数据，而将特定的视频区间检测为事件区间。
不仅如此，从广播服务器(未图示)或者内容服务器(未图示)接收到的体育相关内容不仅包括视频数据以及音频数据，还可以包括包含文本形式的字幕信息的附加数据。在此情况下，控制器130可通过分析包含在体育相关内容中的附加数据，而将与包括包含预设的词语的文本图像的附加数据相关的视频区间检测为事件区间。
如果通过上述的多样的实施例从内容中检测出至少一个事件区间，则控制部130通过利用已存储于存储部160的内容摘要模块来分析针对已检测的至少一个事件区间的视频区间，而判断针对该视频区间的内容是否为体育相关内容。
根据实施例，控制部130基于针对已检测的至少一个事件区间的视频区间的图像信息所包括的颜色以及按颜色的比率值，来判断接收到的内容是否为体育相关内容。
具体而言，存储部160可以与按各个体育项目来定义的场地的颜色以及与该场地的颜色对应的颜色所占的比率值相关地存储预设的第一临界值。例如，足球或棒球的场地颜色可被预定义为绿色，而冰球运动的场地颜色可被预定义为白色。此外，游泳运动的场地颜色可被预定义为蓝色。如上所述，可以按体育项目来定义各个场地的颜色，而且可以预设关于各个场地颜色显示在画面上的比例程度的第一临界值。
因此，控制部130基于与已存储在存储部160的按体育项目的场地颜色以及第一临界值来判断针对已检测的至少一个事件区间的视频区间的图像信息所包含的颜色信息中是否包括预设的场地颜色。例如，如果接收到的内容为足球相关的体育内容，则控制部130可获取已存储于存储部160的按体育项目的场地颜色中的针对足球体育的场地颜色(绿色)以及第一临界值。之后，控制部130判断在针对已检测的各个事件区间的视频区间的图像信息所包括的颜色信息中是否存在与已获取的场地颜色对应的颜色。根据判断结果，如果有与已获取的场地颜色对应的颜色，则控制部130计算与预定的场地颜色对应的颜色的比率值。即，控制部130计算采用到针对已检测的至少一个事件区间的视频区间的颜色中的与预定义的场地颜色对应的颜色所占程度。如上所述的与预定义的场地颜色对应的颜色的比率值可以借助公知的计算算法来被计算。
如果计算出与预定义的颜色对应的颜色的比率值，则控制部130判断计算出的比率值是否为预设定的第一临界值以上，且如果是预设定的第一临界值以上，则可以判断为该内容是体育相关内容。
当根据上述的判别条件而判断已接收的内容为体育相关内容时，控制部130还可以判断该体育比赛的进行与否。
根据一实施例，控制部130可以根据与针对已检测的至少一个的事件区间的视频区间相邻的周围视频区间的图像信息所包含的颜色中的与预设定的场地颜色对应的颜色的比率值是否为预设定的第二临界值以上而判断体育比赛的进行与否。在此，第二临界值可以是与上述的第一临界值相同的值或者是新设定的值。
例如，如果基于检测为事件区间的第一视频区间的图像信息来将与第一视频区间相关的内容确定为体育相关内容，则控制部130获取属于以第一视频区间为中心的预设定的区间中的之前视频区间以及之后视频区间的图像信息。
如上所述，基于与检测为事件区间的视频区间相邻的各个周围视频区间的图像信息来判断是否包括与预定义的场地颜色对应的颜色。如果根据判断结果，与检测为事件区间的视频区间相邻的周围视频区间中的至少一个周围视频区间不包括与预定义的场地颜色对应的颜色，则控制部130可以判断为该体育比赛不是进行状态。
另外，如果基于与检测为事件区间的视频区间相邻的各个周围视频区间各自图像信息，包括与预定义的场地颜色对应的颜色，控制部130计算在与周围视频区间相关的颜色中的与预定义的场地颜色对应的颜色的比率值，并将计算出的各个比率值与预定义的第二临界值进行比较。根据比较结果，如果与检测为事件区间的视频区间相邻的周围视频区间中的至少一个周围视频区间的比率值小于第二临界值，则控制部130可以判断为该体育比赛不是进行状态。另外，如果与检测为事件区间的视频区间相邻的周围视频区间的与预定义的场地颜色对应的颜色的比率值为预设定的第二临界值以上，则控制部130可以判断为该体育比赛在进行状态。
在此，体育比赛不在进行状态可以是：例如在足球体育的情况下的中场休息时间，棒球比赛的情况下的攻守交替的进行状态。在进行如上所述的中场休息或攻守交替的情况下，体育比赛中间可插入广告内容。因此，控制部130可以通过这种判别条件来判断该体育的比赛进行状态。
根据又一实施例，控制部130可从针对已检测的至少一个事件区间的视频区间的图像中提取用于显示比赛进行状况的引导(guide)区域，并基于提取到的引导区域来判断体育比赛的进行状态。在此，引导区域可以包含比赛比分以及比赛进行时间中的至少一个。
因此，控制部130可通过分析在针对已检测的至少一个事件区间的视频区间的图像中的包括在用于显示比赛进行状况的引导区域中的比赛比分或比赛进行时间，而判断该体育比赛的进行状态。
另外，如果如上所述，判断出从针对已检测的至少一个事件区间的视频区间接收到的内容为体育相关内容且该体育比赛正处于进行状态，则控制部130获取在以检测出至少一个事件区间的时间为基准的预设定的固定时间内存在的前后视频区间。之后，控制部130判断获取到的前后视频区间中是否有场景(Scene)变化的区间。如果判断结果表示没有场景变化的区间，则控制部130可以将检测到一个事件区间的时间的视频区间和预设定的固定时间内存在的前后视频区间确定为内容摘要区间。
另外，如果根据判断结果，存在场景变化区间，则控制部130通过改变预设定的固定时间而获取与针对已检测的事件区间的视频区间相关的前后视频区间。之后，控制部130可以将针对已检测的事件区间的视频区间以及属于改变后的固定时间内的前后视频区间确定为内容摘要区间。
即，如果获取了在以检测出至少一个事件区间的时间为基准的预设定的固定时间内存在的前后视频区间，则控制部130判断所述获取到的前后视频区间中是否存在场景变化的区间。如果根据判断结果，没有场景变化的区间，则控制部130可以确定：包括检测出至少一个事件区间的时间的视频区间和属于预设定的固定时间内的前后视频区间的内容摘要区间。
另外，如果根据判断结果，存在场景变化的区间，则控制部130将预设定的固定时间改变为：在属于预设定的固定时间内的前后视频区间中的与检测出至少一个事件区间的时间的区间视频相关的前后视频区间所属的时间。之后，控制部130可以确定：包括检测出至少一个事件区间的时间的视频区间和属于改变后的固定时间内的前后视频区间的内容摘要区间。
另外，根据本发明的固定时间可以包括绝对固定时间，该绝对固定时间不可改变。因此，控制部130判断固定时间内存在的前后视频区间中除了在绝对固定时间内存在的前后视频区间之外的剩余前后视频区间中是否存在场景变化的区间。根据判断结果，如果存在场景变化的区间，则控制部130可以在除了绝对固定时间之外的剩余固定时间内改变固定时间，从而获取与针对已检测的事件区间的视频区间相关的前后视频区间。
之后，控制部130可以确定内容摘要区间，该内容摘要区间包含针对已获取的事件区间的视频区间以及以该视频区间为基准而在预设定的固定时间或者改变后的固定时间内存在的前后视频区间。之后，控制部130可基于预存储于存储部160的摘要内容生成模块165来生成针对已确定的内容摘要区间的摘要内容。
另外，控制部130从为了生成摘要内容而确定内容摘要区间的已确定的内容摘要区间所包括的视频区间中的针对事件区间的视频区间的图像中获取缩略图图像，并将获取到的缩略图图像和基于该内容摘要区间生成的摘要内容彼此匹配并存储到存储部160。
另外，如果从针对与已确定的内容摘要区间相关的事件区间的视频区间中获取多个缩略图图像，则控制部130可以将如下的缩略图图像确定为代表缩略图图像：多个缩略图图像中的与预定义的有效场地颜色对应的颜色数量最少的缩略图图像；或者包括多个缩略图图像均包含的相同的对象中的大小最大的对象的缩略图图像。然而，本发明并不局限于此，在多个缩略图图像分别包含的对象互不相同的情况下，控制部130可将各个缩略图所包含的对象的数量最少的缩略图图像或者包括大小最大的对象的缩略图图像确定为代表缩略图图像。之后，控制部130将多个缩略图图像中的代表缩略图图像和已生成的摘要内容彼此匹配并存储到存储部160。因此，存储部160可以将按内容生成的至少一个摘要内容以及针对该摘要内容的缩略图图像彼此匹配并存储。
之后，如果用户输入摘要内容的再现命令，则控制部130控制输出部120来再现已存储于存储部160的摘要内容中的与输入的再现命令对应的摘要内容。据此，输出部120可以通过视频输出部121输出与用户的再现命令对应的摘要内容以及针对该摘要内容的缩略图图像。
另外，如果用户选择显示在屏幕上的缩略图图像中的一个缩略图图像，则控制部130可以通过控制输出部120从与选择到的缩略图图像相关的摘要内容开始进行再现。据此，输出部120可以通过视频输出部121从与用户选择的缩略图图像相关的摘要内容开始进行顺序输出。
到目前为止，已对根据本发明的广播接收装置100的各个结构进行了详细的说明。以下对在根据本发明的广播接收装置100中从接收到的体育相关内容中生成摘要内容的操作进行更为具体的说明。
图3是在根据本发明的一实施例的广播接收装置中基于已检测的事件区间来确定内容摘要区间的示意图。
如图3所示，广播接收装置100可以显示足球相关的体育内容，而且当前显示的视频图像可以是检测为事件区间的视频区间。如果检测到这种事件区间，则控制部130判断在针对已检测的事件区间的视频区间的图像信息所包含的颜色中是否包括与预定义的场地颜色对应的颜色。在此，如果预定义的场地颜色为绿色，则控制部130可以判断在针对已检测的事件区间的视频区间的图像信息中是否包含作为预定义的场地颜色的绿色。如图所示，可以看出在表示视频区间的颜色中，绿色(310)占了大部分的视频画面。如上所述，如果该颜色为用于表示该视频区间的颜色中的预定义的场地颜色(即，绿色)，则控制部130计算该视频区间中的绿色的比率值，并判断所计算出的绿色的比率值是否为预设定的第一临界值以上。如果判断结果为计算出的绿色的比率值是预设定的第一临界值以上，则控制部130可以判断接收到的内容为足球相关体育内容。
在判断为是足球相关的体育内容时，控制部130将判断足球比赛的进行与否。具体而言，控制部130可以基于与检测为事件区间的视频区间相邻的周围视频区间的图像信息来判断用于表示周围视频区间的颜色是否包括预定义的场地颜色，即绿色。如果根据判断结果，周围视频区间中的至少一个视频区间并不包含作为预定义的场地颜色的绿色，或者周围视频区间中的至少一个视频区间的绿色的比率值小于预设定的临界值，则控制部130可以判断为不在进行足球比赛。
另外，如果根据判断结果，所有周围视频区间的颜色包括作为预定义的场地颜色的绿色，而绿色的比率值为预设定的临界值以上，则控制部130可以判断为正在进行足球比赛。
此外，控制部130可以在检测为事件区间的视频区间的图像中提取用于引导比赛进行状况的引导区间320，并可通过分析显示于提取到的引导区间320中的比赛比分或者比赛进行时间来判断足球比赛的进行与否。
如上所述，如果判断出检测为事件区间的视频区间是体育相关的内容，而且该体育比赛处于进行状态，则控制部130可以将检测为事件区间的视频区间判断为用于生成摘要内容的有效区间。之后，控制部130可以以检测出判断为有效区间的事件区间的时间为基准而基于预设定的固定时间来获取与检测为事件区间的视频区间相关的前后视频区间，并可以基于已检测的视频区间和前后视频区间来确定内容摘要区间，而且可以基于所确定的内容摘要区间来生成摘要内容。
图4是根据本发明的一实施例的基于固定时间来生成摘要内容的示意图；图5是根据本发明的一实施例的基于改变的固定时间来生成摘要内容的示意图。
如图4所示，在基于关于检测为用于生成摘要内容的有效区间的事件区间的时间信息而获取了针对事件区间的视频区间时，控制部130可以针对获取到的事件区间的视频区间为基准而获取预设定的固定时间内存在的前后视频区间。
如图所示，可以将与事件区间B 410对应的视频区间410-1确定为用于生成摘要内容的有效区间。如上所述，如果将与事件区间B 410对应的视频区间410-1确定为有效区间，则控制部130可获取以与事件区间B 410对应的视频区间410-1为基准而属于预设定的固定时间A420以及A'430的视频区间。
如图所示，控制部130可以以检测出与事件区间B 410对应的视频区间410-1的时间为基准而从视频区间410-1之前的视频区间中获取属于预设定的固定时间A 420的第一视频区间420-1至第三视频区间420-3。此外，控制部130可以从基于检测出与事件区间B410对应的视频区间410-1的时间来从视频区间410-1以后的视频区间中获取属于预设定的固定时间A'430的第四视频区间430-1至第六视频区间430-3。
如果通过这种方式，获取到属于固定时间A420的第一视频区间420-1至第三视频区间420-3以及属于固定时间A'430的第四视频区间430-1至第六固定时间430-3，则控制部130判断属于固定时间A420以及固定时间A'430的视频区间中是否存在场景变化的区间。根据判断结果，可以将属于固定时间A420的第一视频区间420-1至第三视频区间420-3中的第三视频区间420-3和属于固定时间B 430的第四视频区间430-1至第六视频区间430-3中的第六视频区间430-3判断为发生场景变化的区间。在此，第三视频区间420-3可以是第一视频区间420-1以及第二视频区间420-2的场景开始的区间，而且第六视频区间430-3可以是第四视频区间430-1以及第五视频区间430-2的场景结束的区间。
如果如上所述，检测出属于固定时间A 420以及固定时间A'420的视频区间中发生场景变化的区间，则如图5所示，控制部130将预设定的固定时间A 420改变为固定时间a420'，并将固定时间A'430改变为固定时间a'430'。即，控制部130将固定时间A 420改变为固定时间a 420'，使得固定时间a 420'能够包括除了与预设定的固定时间A 420相关地发生场景变化的第三视频区间之外的剩余的第一视频区间420-1以及第二视频区间420-2。此外，控制部130将固定时间A'430改变为固定时间a'430'，使得固定时间a'430'能够包括除了与预设定的固定时间A'430相关地发生场景变化的第六视频区间430-3之外的剩余第四视频区间430-1以及第五视频区间430-2。
如果如上所述，固定时间A 420以及固定时间A'430改变为固定时间a420'以及固定时间a'430'，则如图5所示，控制部130可以确定包含与事件区间B410对应的视频区间410-1、在改变后的固定时间a 420'中存在的第一视频区间420-1以及第二视频区间420-2、在改变后的固定时间a'430'中存在的第四视频区间430-1'以及第五视频区间430-2'的内容摘要区间，并可以基于确定的内容摘要区间来生成摘要内容。
然而，本发明并不局限于此，如画斜线的部分所示，固定时间A 420以及固定时间A'430可以包含绝对固定时间420″、430″，而且在各个绝对固定时间420″、430″中存在的视频区间则优选同与事件区间B 410'对应的视频区间410-1一起包含在内容摘要区间。即，与在固定时间A 420以及固定时间A'430中存在的视频区间420-1至420-3、430-1至430-3相关地，控制部130可根据除了绝对固定时间420″、430″之外的剩余固定时间内存在的视频区间是否发生场景变化，来在绝对固定时间420″、430″之外的固定时间内可变地调整固定时间A420以及固定时间A'430。
如上所述，控制部130可以基于包含针对事件区间的视频区间以及预设定的固定时间或者改变后的固定时间内的视频区间的内容摘要区间，来生成摘要内容，从而可以针对诸如进球场面等事件区间生成更为自然的摘要内容。
到目前为止，已通过多样的实施例而对根据本发明的广播接收装置100中从接收到的内容生成摘要内容的操作进行了详细的说明。在下文中，对根据本发明的广播接收装置100中从接收到的内容中生成摘要内容的方法进行详细的说明。
图6是在根据本发明的一实施例的广播接收装置中提供摘要内容服务的方法的流程图。
如图6所示，如果从广播服务器(未图示)或者内容服务器(未图示)中接收到内容，则广播接收装置100通过分析包含在接收到的内容中的视频数据以及音频数据中的至少一个来检测出与预设定的条件对应的至少一个事件区间(S610、S620)。然而，本发明并不局限于此，广播接收装置100可通过分析包含在已存储的录制内容中的视频数据以及音频数据中的至少一个，来检测出与预设定的条件对应的至少一个事件区间。
具体而言，广播接收装置100通过对接收到的内容或者录制内容进行解复用(demultiplex)，来分离视频数据以及音频数据。之后，在从内容分离视频数据以及音频数据时，广播接收装置100将会对分离的视频数据以及音频数据进行解码(decoding)，并将其处理为可输出的形态。
在对包含在内容中的视频以及音频信息执行信号处理之后，广播接收装置100可通过分析信号处理后的视频数据以及音频数据中的至少一个，来检测与预设定的条件对应的至少一个事件区间。如果检测到至少一个事件区间，则广播接收装置100基于针对被检测的至少一个事件区域的视频区域以及与该视频区域相关的前后视频区间来确定内容摘要区间，并基于所确定的内容摘要区间来生成摘要内容(S630、S640)。根据实施例，广播接收装置100可以利用已存储的事件检测模块、内容摘要模块以及摘要内容生成模块来检测针对内容的事件、确定内容摘要区间以及生成摘要内容。当通过上述的模块生成摘要内容时，广播接收装置100存储生成的摘要内容。之后，广播接收装置100根据用户命令而输出与对应于用户命令的内容相关的摘要内容，或者同时输出内容以及摘要内容(S650)。
另外，在上述的步骤(S620)中广播接收装置100可以通过如下的实施例而从用户请求的内容中生成与预设定的条件对应的至少一个事件区间。
根据一实施例，广播接收装置100通过对包含在内容中的视频数据进行分析，来将与已存储的比赛状况条件对应的视频区间检测为至少一个事件区间。在此，已存储的比赛状况条件可以是用于从多样的种类的内容中的体育相关内容检测出至少一个事件区间的条件。
根据另一实施例，广播接收装置100可通过对包含在内容中的音频数据进行分析来将具有已存储的临界电平以上的音频信号电平的视频区间检测为事件区间。
根据又一实施例，广播接收装置100可通过对包含在内容中的音频数据执行STT分析而生成文本数据，并利用所生成的文本数据将包括已存储的词语的视频区间检测为事件区间。
然而，本发明并不局限于此，广播接收装置100还可以从广播服务器(未图示)或者内容服务器(未图示)接收体育相关内容以及关于该体育的事件信息。在此情况下，广播接收装置100可通过基于接收到的事件信息对用户请求的内容中包含的视频数据或者音频数据进行分析，来将特定视频区间检测为事件区间。不仅如此，从广播服务器(未图示)或者内容服务器(未图示)接收到的体育相关内容不仅包括视频数据以及音频数据，还可以包括包含文本形式的字幕信息的附加数据。在此情况下，广播接收装置100可以通过对包含在体育相关内容中的附加数据进行分析而将与包括包含预设定的词语的文本图像的附加数据相关的视频区间检测为事件区间。
如果通过上述的多样的实施例而检测出至少一个事件区间，则广播接收装置100将会判断被检测的至少一个事件区间是否为用于生成摘要内容的有效区间，并且在检测的事件区间为有效区间时，可以基于针对该事件区间的视频区间以及该视频区间的前后区间来确定内容摘要区间。在下文中，参照图7对广播接收装置100中将检测到的至少一个事件区间确定为内容摘要区间的方法进行说明。
图7是根据本发明的一实施例的广播接收装置中基于针对已检测的至少一个事件区间的视频区间来确定用于生成摘要内容的内容摘要区间的方法的流程图。
如图7所示，如果利用用于生成摘要内容的事件检测模块而从已接收到的内容中检测到至少一个事件区间，则广播接收装置100可以基于针对检测到的至少一个事件区间的视频区间的图像信息所包含的颜色以及按颜色的比率值来判断已接收的内容是否为体育相关内容(S710)。
根据实施例，广播接收装置100可以存储与按各个体育项目来预定义的场地颜色以及对应于该场地颜色的颜色所占的比率值相关地设置的第一临界值。因此，广播接收装置100基于已存储的按体育项目的场地颜色以及第一临界值来判断在针对检测到的至少一个事件区间的视频区间的图像信息所包含的颜色信息中是否存在与预定义的场地颜色对应的颜色。如果根据判断结果，存在与已获取的场地颜色对应的颜色，则广播接收装置100计算与预定义的场地颜色对应的颜色的比率值，并判断所计算的比率值是否为预设定的第一临界值以上。如果根据判断结果，所计算的比率值是预设定的第一临界值以上，则广播接收装置100可以判断为已接收到的内容是体育相关内容。
如上所述，在接收到的内容为体育相关内容的情况下，广播接收装置100判断该体育比赛是否处于正在进行的状态(S720)。
根据一实施例，广播接收装置100可根据在与针对检测的至少一个事件区间的视频区间相邻的周围视频区间的图像信息所包含的颜色中的与预定义的场地颜色对应的颜色的比率值是否为第二临界值以上，而判断该体育比赛是否处于正在进行的状态。在此，第二临界值可以是与上述的第一临界值相同的值或者是新设定的值。
具体而言，如果判断为与检测为事件区间的视频区间相邻的周围视频区间中的至少一个周围视频区间中没有包含与预定义的场地颜色对应的颜色，或者与预定义的场地颜色对应的颜色的比率值小于预设定的第二临界值，则广播接收装置100可以判断为是不在进行体育比赛的状态。在此，体育比赛处于不进行的状态例如可以是足球比赛中的中场休息时间，而且对于棒球运动的情况而言，可以是进行攻守交替的状态。此外，如果与被检测为事件区间的视频区间相邻的周围视频区间包括与预定义的场地颜色对应的所有的颜色，而且与场地颜色对应的各个颜色比率值均为第二临界值以上，则广播接收装置100可以判断为体育比赛处于正在进行的状态。
根据又一实施例，广播接收装置100可以从与针对检测的至少一个事件区间的视频区间的图像中提取用于引导比赛进行状况的引导区域。并基于提取到的引导区域来判断体育比赛的进行状态。在此，引导区域可以包括比赛比分以及比赛进行时间中的至少一个。
因此，广播接收装置100可通过对与针对检测的至少一个事件区间的视频区间的图像中的用于引导比赛进行状况的引导区域所包括的比赛比分或者比赛进行时间进行分析，来可以判断该比赛的进行状态。
此外，如上所述，当从针对检测的至少一个事件区间的视频区间接收到的内容为体育相关内容，而且该体育比赛处于正在进行状态时，广播接收装置100可获得存在于以检测出针对至少一个事件区间的视频区间的时间为基准而在预设定的固定时间内的前后视频区间(S730)。之后，广播接收装置100可以判断在预设定的固定时间内存在的前后视频区间中的至少一个视频区间中是否发生场景变化(S740)。
当根据判断结果，在判断为预设定的固定时间内存在的前后视频区间中发生了场景变化时，广播接收装置100可获取从属于预设定的固定时间内的前后视频区间中的改变后的固定时间内存在的前后视频区间(S750)。即，广播接收装置100可以将预设定的固定时间改变为：属于预设定的固定时间内的前后视频区间中的与检测到至少一个事件区间的时间的区间视频相关的前后视频区间所属的时间。之后，广播接收装置100可以将属于改变后的固定时间内的前后视频区间以及存在于该前后视频区间之间的与至少一个事件区间对应的视频区间确定为内容摘要区间(S760)。另外，如果在S740中判断为在预设定的固定时间内存在的前后视频区间内未发生场景变化，则广播接收装置100可以将与在预设定的固定时间内存在的前后视频区间以及存在于前后视频区间之间的与至少一个事件区间对应的视频区间确定为内容摘要区间。
另外，根据本发明的固定时间可以包含绝对固定时间，而这种绝对固定时间不能被改变。因此，广播接收装置100可以判断在固定时间内存在的前后视频区间中的除了在绝对固定时间内存在的前后视频区间之外的剩余前后视频区间中是否存在场景变化的区间。如果根据判断结果，存在场景变化的区间，则广播接收装置100可以在除了绝对固定时间之外的剩余固定时间内改变固定时间，从而获取与针对检测的事件区间的视频区间相关的前后视频区间。
之后，广播接收装置100确定内容摘要区间(其中，该内容摘要区间包含：针对事件区间对应的视频区间；以及以该视频区间为基准而在预设定的固定时间内或者改变后的固定时间内存在的前后视频区间)，并基于所确定的内容摘要区间来生成及存储摘要内容(S770)。
图8是根据本发明的一实施例的在广播接收装置中生成摘要内容的方法的流程图。
如图8所示，如果检测到至少一个事件区间，则广播接收装置100存储针对检测到的事件区间的缩略图信息。此时，广播接收装置100可以同时存储检测出事件区间的时间信息。之后，如果确定内容摘要区间(其中，该内容摘要区间包含检测到至少一个事件区间的时间的视频区间以及预设定的固定时间或改变后的固定时间内存在的前后视频区间)，则广播接收装置100获取已存储的缩略图图像(S810)。在此，获取到的缩略图图像用于识别基于已确定的内容摘要区间来生成的摘要内容。如果如上所述的获取到缩略图图像，则广播接收装置100判断所获取到的缩略图图像是否为多个(S820)。
如果根据判断结果，获取到多个缩略图图像，则广播接收装置100将在多个缩略图图像中获取满足预设定的条件的代表缩略图图像(S830)。根据实施例，如果与用于生成摘要内容的内容摘要区间相关地获取到多个缩略图图像，则广播接收装置100可以在获取到的多个缩略图图像中将如下的缩略图图像确定为代表缩略图图像：与预定义的有效场地颜色对应的颜色的数最少的缩略图图像；或者包括均包含在多个缩略图图像中的同样的对象中的大小最大的对象的缩略图图像。另外，如果分别包含在多个缩略图图像中的对象不相同，则广播接收装置100可以将所包含的对象的数量最少的缩略图图像或者包含大小最大的对象的缩略图图像确定为代表缩略图图像。当通过如上所述的方式确定代表缩略图图像时，广播接收装置100可以基于预设定的内容摘要区间来生成摘要内容，并将所生成的摘要内容和预设定的代表缩略图图像彼此匹配并存储(S840)。
另外，如果在上述的S820步骤中，与内容摘要区间相关地获取到的缩略图图像为一个，则广播接收装置100将会在S840步骤中基于预设定的内容摘要区间来生成摘要内容，并将所生成的摘要内容和已获取的一个缩略图图像进行匹配并存储。之后，如果从用户接收摘要内容的再现命令，则广播接收装置100将会依次地再现已存储的多个摘要内容中的与再现命令对应的至少一个摘要内容。此时，广播接收装置100可以将针对与再现命令对应的至少一个摘要内容的缩略图图像显示在屏幕上。据此，如果屏幕上显示的缩略图图像中的一个被选择，则广播接收装置100可以从与选择的缩略图图像相关的摘要内容开始依次地进行再现。
到目前为止，已对根据本发明的在广播接收装置100中生成与接收到的内容对应的摘要内容的方法进行了详细的说明。在下文中，对在广播接收装置100中基于构成内容的多个视频帧的各个像素值来生成摘要内容的操作以及方法进行详细的说明。
如果从用户接收到针对视听中的内容或存储于存储部160的录制内容的摘要内容服务命令，则上述的控制部130通过对与接收到的摘要内容服务命令相关的内容的多个视频帧的像素值进行比较而检测出用于摘要内容服务的事件区域。此时，控制部130优选地对针对接收到摘要内容服务命令的时间点的内容的多个视频帧的像素值进行比较来生成用于摘要内容服务的事件区域。在此，与摘要内容服务相关的内容可以是关于体育比赛的内容，而且事件区域可以是用于示出包括显示体育比赛时间的时间信息、队名信息、比分信息的体育比赛状况的比分板区域。
当检测到上述的事件区域时，如果在检测到事件区域之后接收到针对该内容的视频帧，则控制部130可以从接收到的视频帧中检测与检测到的事件区域对应的区域，并感测事件区域和与该事件区域对应的区域的文字变化，从而感测事件的发生与否。在此，例如，对足球运动的情况而言，感测文字的变化可以是在进球之后判断比分相关数字是否有变化。因此，控制部130可以根据比分相关数字的变化与否来判断事件的发生。如果检测为发生了上述的事件，则控制部130基于事件所发生的时间点上的视频帧区间来生成摘要内容(例如，强调图像等)，并将生成的摘要内容存储到存储部160。根据实施例，如果获取到发生事件的时间点上的视频帧，则在控制部130可以基于发生事件的时间点的视频帧和存在于该视频帧的前后视频帧中的预设定的固定时间内的前后视频帧来生成摘要内容。
另外，在基于发生事件的时间点上的视频帧区间来生成摘要内容之后，控制部130可以将针对包含生成的摘要内容的多个视频帧中的一个视频帧的视频确定为用于识别该摘要内容的代表缩略图图像。根据实施例，控制部130可以对按包含摘要内容的多个视频帧的视频图像进行分析，从而将与放大的镜头对应的视频帧的视频图像确定为代表缩略图图像。如上所述，如果确定用于识别摘要内容的代表缩略图图像，则控制部130将已生成的摘要内容以及为了识别该摘要内容而确定为代表缩略图图像的视频图像进行匹配并存储到存储部160。
具体而言，控制部130基于构成内容的多个视频帧的像素差来检测事件区域，并基于检测到的事件区域来判断随后的视频帧中是否存在与该事件区域对应的区域。之后，控制部130对事件区域以及与该事件区域对应的区域进行分析，并根据文字变化的发生与否而感测事件的发生与否。
具体而言，控制部130可以通过下述的事件检测部131而检测出事件区域。具体而言，事件检测部131通过将构成内容的多个视频帧中的第一视频帧以及第二视频帧之间的相互对应的各个像素区域的像素差和预设定的临界值进行比较，而计算具有小于预设定的临界值的像素的像素区域的数量。之后，在具有小于预设定的临界值的像素差的像素区域的数量小于预设定的像素临界值数量时，事件检测部131判断连续检测到的次数是否大于预设定的临界次数。当根据判断结果，具有小于预设定的临界值的像素差的像素区域的数量被连续地检测出预设定的临界次数以上时，时间区域检测部131将会基于具有小于临界值的像素差的像素区域来检测出事件区域，并将其被检测的事件区域存储到存储部160。
进一步具体而言，从用户接收到摘要内容生成命令之后，可以接收与该命令对应的内容的视频帧。当接收到至少两个以上的如上述所述的视频帧时，事件检测部121从初始输入的视频帧(在下文中，称之为第一视频帧)In-1的各个像素区域和下一视频帧(在下文中，称之为第二视频帧)In的各个像素区域中计算像素差Dn-1。在计算出按各个区域的像素差Dn-1之后，事件检测部131通过对计算出的各个像素差Dn-1和预设定的临界值进行比较，来计算具有小于预设定的临界值的像素差的像素区域的数量。
根据实施例，事件检测部131可向具有小于临界值的像素差的像素区域和剩余像素区域应用不同的变量，从而通过应用于具有小于临界值的像素差的像素区域的变量的数量来计算出像素区域数。具体而言，事件检测部131将第一视频帧In-1的各个像素区域的变量初始化为1。之后，事件检测部131将会基于第一视频帧In-1以及第二视频帧In来将具有小于预设定的临界值的像素差Dn-1的像素区域的变量保持为1，并将具有大于预设定的临界值的像素差Dn-1的像素区域的变量改变为0。据此，事件检测部131可以计算出第一视频帧In-1的各个像素区域中的变量保持为1的像素区域的数量。
如上所述，在算出像素区域的数量之后，事件检测部131将比较保持为变量1的像素区域的数量和预设定的临界像素数量进行比较，从而判断保持为变量1的像素区域的数量是否小于预设定的临界像素数量。当根据判断结果，小于临界像素数量时，事件检测部131将Static_Count增加1。之后，事件检测部131对变量被改变的第一视频帧In-1和第二视频帧In之后的第三视频帧In+1的按各个像素区域的像素差和预设定的临界值进行比较，比较小于预设定的临界值的像素差Dn-1，并将具有小于预设定的像素差Dn-1的像素区域的变量保持为1，并将具有大于预设定的临界值的像素差Dn-1的像素区域的变量改变为0。之后，时间检测部131将比较保持为变量1的像素区域的数量和预设定的临界像素数量进行比较，而在保持为变量1的像素区域的数量小于预设定的临界像素数量时，将在已增加1的Static_Count上追加地增加1。通过上述的一系列操作，当Static_Count的值达到预设定的值(预设定的临界次数)以上时，事件检测部131可以将第一视频帧In-1的变量中的保持为1的像素区域检测为用于摘要内容服务的事件区域。
根据实施例，事件检测部131可以利用诸如FloodFill算法等的连接区域(ConnectedComponent)算法，来从在第一视频帧In-1的变量中的保持为变量1的像素区域检测出事件区域。上述的算法为公知技术，因此本发明将省去对其进行的详细说明。
另外，根据本发明的另一方面，事件检测部131对被检测的事件区域进分析而生成用于判断事件的发生与否的源信息，并将生成的源信息存储到存储部160。在此，事件区域是体育比赛相关的比分板区域，而且源信息可以包括比赛时间区域、比分区域以及队名区域中的至少一个。
根据一实施例，事件检测部131基于在检测的事件区域内的按各个像素区域来设置的变量中的由用于表示像素差的发生的变量而设置的像素区域来生成包含比赛时间区域的源信息，并可以将生成的源信息存储到存储部160。
例如，对足球相关体育的情况而言，检测为比分板的事件区域可以包括表示比赛时间的比赛时间区域，而该比赛时间区域可以包括以分为单位的时间以及以秒为单位的时间。因此，在比赛时间区域中，以秒为单位的区域的像素区域的变量和剩余事件区域的像素区域的变量可不同。即，在事件区域的像素区域中，表示以秒为单位的像素区域的变量可以为0，而除了表示以秒为单位的像素区域之外的剩余事件区域的像素区域的变量可以为1。因此，当从事件区域的按像素区域的变量中检测出具有变量0而不是变量1的像素区域时，事件检测部131可以以具有变量0的像素区域为基准而将预设定的像素区域确定为比赛时间区域。此时，事件检测部131优选地将以具有变量0的像素区域为基准而预设定的左侧区域的像素区域确定为比赛时间区域。
如果如上所述，确定比赛时间区域，则事件检测部131可以将被检测的事件区域和包括预设定的比赛时间区域的源信息相互进行匹配并存储到存储部160。
根据又一实施例，事件检测部131可以利用数字识别算法来从被检测的事件区域中检测数字，而当检测到的数字连续存在两个以上时，可以基于检测出数字的像素区域来生成包括比赛时间区域的源信息并存储到存储部160。在此，数字识别算法为OpticalDigitRecognition(ODR)算法，而这种数字识别算法为公知技术，因此将省去对其进行的详细的说明。
例如，对足球相关体育的情况而言，检测为比分板区域的事件区域包括表示比分以及比赛时间的区域，并可以通过各个区域来表示数字图像。尤其，对于表示比分的区域的情况而言，可以显示单一数字图像，而对表示比赛时间的区域而言，可以显示多数字图像。
因此，在利用上述数字识别算法来从被检测的事件区域中检测出数字时，可以从被检测的数字中检测出至少连续地存在两个以上的数字，并可以以检测到该数字的像素区域为基准而将预设定的像素区域确定为比赛时间区域。此时，事件检测部131可以以除了连续存在两个以上的数字之外的剩余数字相关地检测到该数字的像素区域为基准而将预设定的像素区域确定为比分区域。在如上所述，确定比赛时间区域或者比赛时间区域和比分区域之后，事件检测部131可以生成包含比赛时间区域或者比赛时间区域和比分区域的源信息，并可以将生成的源信息和被检测的事件信息相互进行匹配并存储到存储部160。
根据又一实施例，事件检测部131可以利用文字识别算法来生成包括比赛时间区域、比分区域、队名区域中的至少一个的源信息，并将生成的源信息存储到存储部160。在此，文字识别算法为OpticalDigitRecognition(ODR)算法，而这种数字识别算法为公知技术，因此将省去对其进行的详细的说明。
例如，对足球相关体育的情况而言，检测为比分板区域的事件区域包括表示比分、队名以及比赛时间的区域，而可以通过各个区域示出数字以及文字图像。因此，当利用上述的算法从被检测的事件区域示出数字以及文字图像时，事件检测部131可以将显示文字图像的区域确定为队名区域，并可以将显示数字图像的区域确定为用于表示比分和比赛时间的区域。如上所述，对表示比分的区域而言，其可以示出单一数字图像，而对表示比赛时间的区域而言，可以示出多数字图像。
因此，在从被检测的时间区域中检测出数字时，事件检测部131可以以检测的数字中的检测出至少连续存在2个以上的数字的像素区域为基准而将预设定的像素区域确定为比赛时间区域。另外，事件检测部131可以以与除了连续地存在2个以上的数字之外的剩余数字相关地检测到这些数字的像素区域为基准，而将预设定的像素区域确定为比分区域。如上所述，在确定队名区域、比分区域以及比赛时间区域时，事件检测部131将生成包括队名区域、比分区域以及比赛时间区域的源信息，并可以将生成的源信息和检测的事件区域进行匹配并存储到存储部160。
如上所述，当通过事件检测部131检测到事件区域时，控制部130可以对检测到事件区域之后接收到的视频帧的各个像素区域中的与事件区域对应的像素区域进行分析，从而判断是否存在与事件区域对应的区域。
具体而言，控制部130可获取：从在被检测的事件区域中的除了比赛时间区域之外的剩余区域，以及具有从与剩余像素区域对应的视频帧的像素区域算出的像素差中的小于预设定的临界值的像素差的视频帧的像素区域的数量。之后，如果在被检测的事件区域中的除了比赛时间区域之外的剩余像素区域的数量与具有小于预设定的临界值的像素差的视频帧的像素区域的数量的比率值小于预设定的像素比率值，则控制部130将对应于事件区域的区域判断为事件区域。
进一步具体而言，控制部130在通过事件检测部131检测到事件区域之后接收到视频区域的情况下，获取接收到的视频帧的像素区域中的与检测的事件区域的像素区域对应的像素区域(在下文中，称之为候选区域)。
在获取上述的视频帧的事件候选区域时，控制部130将在事件候选区域的像素区域中的与除了与检测的事件区域相关地生成的源信息所包含的比赛时间区域之外的剩余区域的像素区域对应的像素区域(第二剩余像素区域)。之后，控制部130将在事件区域的像素区域的除了比赛时间区域之外的剩余区域的像素区域与从事件候选区域获取的第二剩余像素区域分别计算出按各个像素区域的像素差。之后，控制部130将对按各个像素区域计算出的像素差和预设定的临界值进行比较，从而获取具有小于预设定的临界值的像素差的第二剩余像素区域的数量。之后，控制部130将算出事件区域的剩余像素区域数量与具有小于预设定的临界值的像素差的视频帧的像素区域数量的比率值。
根据实施例，在事件区域的像素区域中，除了比赛时间区域之外的剩余区域的变量可以为1。另外，在事件候选区域中，第二剩余像素区域的变量可以为1。因此，控制部130将获取针对变量为1的事件区域的剩余区域对应的像素区域数量。之后，控制部130将具有小于预设定的临界值的像素差的第二剩余像素区域的变量由1改变为0，并将具有预设定的临界值以上的像素差的第二剩余像素区域的变量保持为1。之后，控制部130将算出针对已获取的事件区域的剩余区域的像素区域数量和第二剩余像素区域中的变量保持为1的像素区域数量的比率值。之后，控制部130将对算出的比率值和预设定的临界值进行比较，而如果算出的比率值小于预设定的临界值，则可以将与事件区域对应的事件候选区域判断为事件区域。
根据判断结果，在存在与事件区域对应的区域的情况下，控制部130可以基于关于检测的事件区域的源信息来对事件区域以及与事件区域对应的区域进行分析，从而检测出事件的发生与否。
具体而言，控制部130将判断与被检测的事件区域相关地存储的源信息中是否包含比分区域。在根据判断结果，没有包含比分区域的情况下，控制部130基于与事件区域对应的区域的像素区域中的与包含在源信息中的比赛时间区域之外的剩余像素区域对应的像素区域的变量来确定比分区域。之后，控制部130基于检测的比分区域来从检测的事件区域中确定比分区域。之后，控制部130利用数字识别算法来从各个比分区域中识别出数字，并根据数字的变化与否来感测事件的发生与否。
如上所述，与事件区域(在下文中，称之为第一事件区域)对应的区域(在下文中，称之为第二事件区域)的变量可以根据第一事件区域以及第二事件区域的像素区域之间的像素差而从1改变为0或者保持为1。如上所述，在第二事件区域的第二剩余像素区域中的，第一事件区域以及第二事件区域的像素区域之间的像素差为预设定的临界值以上的像素区域的变量可以为1，而剩余像素区域的变量可以为0。
因此，控制部130可获取：与第二事件区域中的除了比赛时间区域之外的剩余区域对应的像素区域中的变量为1的像素区域。之后，控制部130判断变量为1的像素区域是否连续地相邻预设定的数量以上，而在连续地相邻的情况下，利用连接区域算法而在变量为1的像素区域中确定比分区域。之后，控制部130可以基于从第二事件区域中确定的比分区域来确定第一事件区域的比分区域。在如上所述地分别确定第一事件区域以及第二事件区域的比分区域之后，控制部130将利用数字识别算法从各个比分区域中识别出数字。之后，控制部130对分别从各个比分区域中识别到的数字进行比较，在两个数字相异的情况下，可以判断为发生了事件。
例如，从第一事件区域的比分区域中识别到的数字可以为0，而从第二事件区域的比分区域中识别到的数字可以为1。如上所述，在判断为两个数字相异的情况下，控制部130可以检测为发生了事件。
此外，在源信息中没有包含比分区域的情况下，控制部130可以基于比分区域来从第二事件区域中检测出比分区域。之后，控制部130利用数字识别算法而从第一事件区域以及第二事件区域的比分区域中识别数字，并对识别到的数字进行比较，而在两个数字相异的情况下可以检测为发生了事件。在如上所述地，通过从两个比分区域中识别到的数字而检测到发生了事件的情况下，控制部130将存储到存储部160的第一事件区域以及源信息更新为第二事件区域以及与第二事件区域相关的源信息。
因此，如果在事件区域以及源信息更新之后接收到视频帧，则上述的事件检测部131可以基于更新后的事件区域以及源信息来检测出事件区域，而且控制部130可以通过事件检测部131基于被检测的事件区域来感测事件的发生与否。
另外，如果感测为发生了事件，则控制部130可以基于以如上所述地检测为发生了事件的时间点的视频帧和以该视频帧为基准而在预设定的固定时间内存在的前后视频帧，来生成摘要内容。此外，控制部130可将在包含生成的摘要内容的多个视频帧中的与放大快照图像对应的视频帧的视频图像确定为用于识别该摘要内容的代表缩略图图像，之后可以与已生成的摘要内容一同匹配并存储到存储部160。
以上，对根据本发明的用于为提供摘要内容服务而判断事件的发生与否的广播接收装置100的各个结构进行了详细的说明。以下，将通过多样的实施例而对在根据本发明的广播接收装置中判断事件的发生与否的操作进行更为具体的说明。
图9是在根据本发明的一实施例的广播接收装置中检测事件区域的示意图。
如图9的(a)以及(b)所示，在接收到第一视频帧以及第二视频帧时，控制部130可以通过事件检测部131检测出事件区域。如上所述，过事件检测部131在算出第一视频帧与第二视频帧的按各个像素区域的像素差之后，对算出的像素差和预设定的临界值进行比较，从而提取具有小于预设定的临界值的像素差的像素区域。
如图所示，在与第一视频帧以及第二视频帧对应的第一视频图像900以及第二视频图像900'中，在左侧上端可以显示比分板910、910'。在此情况下，与比分板910、910'对应的像素区域可以具有小于预设定的临界值的像素差。因此，事件检测部131可以将与分别表示在第一视频图像900以及第二视频图像900'的左侧上端的积分板910、910'对应的像素区域检测为事件区域。
图10是示出根据本发明的一实施例的在广播接收装置中设定在初始视频帧的变量的示意图；图11是表示在根据本发明的一实施例的广播接收装置中表示设置于基于多个视频帧的具有小于预设定的临界值的像素差的视频帧的变量的示意图。
在接收到与上述的图9的(a)中的第一视频900对应的第一视频帧时，事件检测部131将第一视频图像帧的像素区域的变量初始设置为1。即，如图10所示，事件检测部131将与第一视频帧相关地生成按各个像素区域的变量初始设置为1的视频帧1010。如上所述，在生成按各个区域的变量初始设置为1的视频帧1010的状态下，当接收到与上述的图9的(b)中的第二视频图像900'对应的第二视频帧时，事件检测部131将算出第一视频帧与第二视频帧的按各个像素区域的像素差。之后，事件检测部131对按区域算出的像素差和预设定的临界值进行比较，从而将除了具有小于预设定的临界值的像素差的像素区域之外的像素区域的变量由1变更为0。
如上所述，分别与第一视频帧以及第二视频帧对应的第一视频图像900以及第二视频900'的左上端可以显示比分板。因此，除了与比分板910、910'对应的像素区域之外剩余像素区域可以具有预设定的临界值以上的像素差。在此情况下，如图11所示，事件检测部131可以将在与第一视频帧相关地生成的视频帧1010的按各个像素区域来预设定的变量中的具有临界值以上的像素差的像素区域的变量由1改变为0，并将具有小于临界值的像素差的像素区域的变量保持为预设定的1。即，事件检测部131可以将与比分板910、910'对应的像素区域的变量保持为预设定的1，并可以将剩余像素区域的变量由1改变为0。
之后，事件检测部131可以利用连接区域算法而从像素区域的变量保持为1的像素区域检测出事件区域1110。此外，在图9的(a)中，与第一视频帧对应的比分板910可以包括用于显示比赛时间的时间信息，而且该时间信息可以包括以分为单位的时间和以秒为单位的时间。因此，示出以秒为单位的时间的区域的第一视频帧与第二视频帧之间的像素差可以是预设定的临界值以上。因此，在已被检测的事件区域1110内的像素区域中的与显示以秒为单位的时间的区域对应的像素区域的变量可以为0。如上所述，在被检测的事件区域1110内检测出变量为0的像素区域时，事件检测部131将其像素区域判断为是比赛时间相关区域。据此，事件检测部131可以以被检测的事件区域1110内的变量为0的像素区域1120为基准而将预设定的像素区域确定为比赛时间区域1130。
图12是在根据本发明的一实施例的广播接收装置中检测事件发生与否的第一示意图，图13是在根据本发明的又一实施例的广播接收装置中检测事件发生与否的第二示意图。
如图12所示，在检测到事件区域的状态下，当接收到的视频帧被检测为是与事件区域对应的区域时，控制部130根据基于检测的事件区域和与该事件区域对应的区域的按各个像素区域的像素差而设置的变量，来感测事件发生与否。
具体而言，如图12的(a)所示，与关于接收到的视频帧的视频图像1200相关，左侧上端可以显示比分板1210，而示出比分板1210的区域可以是被判别为与事件区域对应的区域的区域。在此情况下，控制部130可以基于事件区域的按各个像素区域设置的变量和显示出比分板1210的区域的按各个区域来设置的变量，来判断事件发生与否。基于两个区域的按各个像素区域设置的变量，事件区域的像素区域1210'中的与除了比赛时间区域的像素区域1210'-1之外的剩余像素区域对应的变量可被保持相同。
即，与接收到的视频帧对应的视频图像1200上显示的比分板上可以示出比分图像1220，而显示于比分图像1220上的数字可以与之前的视频图像的比分图像上显示的数字相同。在此情况下，如图12的(b)所示，与在事件区域的像素区域1210'中的除了比赛时间区域的像素区域1210'-1之外的剩余区域的像素区域对应的变量可被保持相同。如上所述，在针对除了比赛时间区域的像素区域1210'-1之外的剩余像素区域的变量保持相同时，控制部130将判断为未发生事件。
此外，如图13的(a)所示，与针对接收到的视频帧的视频图像1300相关地，显示于左侧上端的比分板1310上可以示出比分图像1320。而且，显示于比分图像1320上的数字可能与之前的视频图像的比分板上显示出的数字相异。
例如，如在图12中说明的视频图像1200的比分板1210所包含的比分图像1220上可以显示0:0的比分相关数字。即，在接收到视频图像1200之前的视频图像的比分板所包含的比分图像1220上可以显示0:0的比分相关数字。另外，在接收到视频图像1200之后，可以接收如图13所说明的视频图像1300，而接收到的视频图像1300的比分板1310所包含的比分图像1320上可以显示0:1的比分相关数字。
在此情况下，如图13的(b)所示，在事件区域的像素区域1310'中的除了比赛时间区域的像素区域1320'之外的剩余区域的像素区域中的一部分像素区域1310'-2的变量可从1改变为0。如上所述，在除了比赛时间区域的像素区域1310'-1之外的剩余像素区域中的一部分像素区域1320'-2的变量变更时，控制部130可以利用数字识别算法从针对改变变量的像素区域1320'-2的比分区域和针对与包含在比分板1310上的比分图像1320对应的像素区域的比分区域，识别出数字。之后，在从各个比分区域识别出的数字相异时，控制部130可以检测为发生了事件。
到目前为止，已通过多样的实施例而对根据本发明的广播接收装置100的操作进行了详细的说明。在下文中，将对在根据本发明的广播接收装置100中提供摘要内容服务的方法进行详细的说明。
图14是在根据本发明的一实施例的广播接收装置中提供摘要内容服务的方法的流程图。
如图14所示，广播接收装置100根据用户的摘要内容服务命令而接收与用户所请求的内容对应的视频帧。在接收到上述的多个视频帧时，广播接收装置100对在接收到的多个视频帧中的初始接收的视频帧和随后接收的视频帧的像素值进行比较，从而检测出用于摘要内容服务的事件区域(S1410)。在此，与摘要内容服务相关的内容可以是针对体育比赛的内容，事件区域可以是包括用于引导体育比赛时间的时间信息、队伍信息、比分信息的用于引导体育比赛状况的比分板区域。
当检测到上述的事件区域时，如果在检测出事件区域之后接收到针对该内容的图像帧，则广播接收装置100从接收到的图像帧中检测出与检测的事件区域对应的区域，并通过感测事件区域和与该事件区域对应的区域的文字变化而感测事件发生与否(S1420)。在此，感测文字的变化可以是例如，在足球运动的情况下，感测进球之后的比分相关数字是否变化。因此，广播接收装置100可根据比分相关数字是否变化，来感测是否发生事件。在感测到发生事件时，广播接收装置100基于发生事件的时间点的图像帧区间来生成诸如强调图像等的摘要内容，并存储生成的摘要内容(S1430)。此时，在基于发生事件的时间点的视频帧区间来生成摘要内容时，广播接收装置100可以将与包括生成的摘要内容的多个视频帧中的一个视频帧对应的视频图像确定为用于识别该摘要内容的代表缩略图图像。之后，广播接收装置100可以将已生成的摘要内容以及用于识别该摘要内容而确定为代表缩略图图像的视频图像进行匹配并存储。
以下，对在广播接收装置100中检测事件区域的方法进行详细说明。
图15是在根据本发明的一实施例的广播接收装置中检测事件区域的方法的流程图。
如图15所示，广播接收装置100可以算出：在多个视频帧中的初始接收到的第一视频帧以及接收到第一视频帧之后接收到的第二视频帧之间的相互对应的按各个像素区域的像素差(S1510)。
在计算出按各个像素区域的像素差之后，广播接收装置100将对按各个像素区域来计算出的像素差和预设定的临界值进行比较，从而计算出具有小于预设定的临界值的像素区域的数(S1520)。计算出具有小于预设定的临界值的像素差的像素区域数之后，广播接收装置100将判断其具有小于预设定的临界值的像素差的像素区域的数是否小于预设定的像素数的临界值(S1530)。根据判断结果，如果是预设定的临界值像素数以上，则广播接收装置100将通过S1510步骤至S1530步骤而基于第二视频帧以及第二视频帧以后接收到的视频帧之间的像素值来判断具有小于预设定的临界值的像素差的像素区域的数是否小于预设定的像素数的临界值。
此外，在S1530步骤中，在具有小于预设定的临界值的像素区域数量小于预设定的临界像素数量的情况下，广播接收装置100判断是否被连续地检测预设定的临界次数以上(S1540)。在根据判断结果，判断为检测的次数少于预设定的临界次数的情况下，广播接收装置100将反复执行上述的S1510步骤至S1540步骤直到检测的次数达到预设定的临界次数以上。
在通过上述的一系列操作而连续地检测出预设定的临界次数以上时，广播接收装置100基于具有小于预设定的临界值的像素差的像素区域来检测事件区域，并存储被检测的事件区域(S1550)。之后，广播接收装置100对检测的事件区域进行分析而生成用于判断事件发生与否的源信息，并存储生成的源信息(S1560)。在此，事件区域是体育比赛相关的比分板区域，源信息可以包括比赛时间区域、比分区域以及队名区域中的至少一个。
根据一实施例，广播接收装置100基于检测的时间区域内的被设定为按各个像素区域设置的变量中的表示像素差发生的变量的像素区域来生成包括比赛时间区域的源信息，并可以存储生成的源信息。根据又一实施例，广播接收装置100可以利用数字识别算法从检测的事件区域中检测出数字，且在被检测的数字连续地存在两个以上的情况下，可基于检测到数字的像素区域来生成包括比赛时间区域的源信息并存储生成的源信息。根据又一实施例，广播接收装置可以利用文字识别算法而生成包括比赛时间区域、比分区域、队名区域中的至少一个的源信息并存储生成的源信息。
如上所述，在确定队名区域、比分区域以及比赛时间区域时，广播接收装置100可生成包含队名区域、比分区域以及比赛时间区域的源信息，并将生成的源信息和被检测的事件区域进行匹配和存储。
到目前为止，已对根据本发明的在广播接收装置100中检测用于摘要内容服务的事件区域的方法进行了详细说明。在下文中，对在广播接收装置100中基于检测的事件区域来感测事件发生与否的方法进行详细的说明。
图16是根据本发明的一实施例的在广播接收装置中感测事件发生与否的方法的流程图；图17是根据本发明的一实施例的在广播接收装置中检测与事件区域对应的区域的方法的流程图。
如图16所示，广播接收装置100在检测出事件区域之后，在接收到视频帧的情况下，对接收到的视频帧的各个像素区域中的与事件区域对应的像素区域进行分析，从而判断是否存在与事件区域对应的区域(S1610、S1620)。
进一步具体而言，如图17所示，广播接收装置100根据在被检测的事件区域中的除了比赛时间区域之外的剩余像素区域和与剩余像素区域对应的视频帧的像素区域，计算像素差(S1710)。之后，广播接收装置100获取从按各个像素区域计算的像素差中的具有小于预设定的临界值的像素差的视频帧的像素区域数量(S1720)。
之后，广播接收装置100计算在检测的事件区域中的除了比赛时间区域之外的剩余像素区域数量与具有小于预设定的临界值的像素差的视频帧的像素区域数量的比率值(S1730)。当如上所述地计算比率值时，广播接收装置100对计算出的比率值和预设定的像素比率值进行比较，来判断是否小于预设定的像素比率值(S1740)。在根据判断结果，计算出的比率值小于预设定的像素比率值的情况下，广播接收装置100将与事件区域对应的区域检测为与事件区域相同的区域(S1750)。
在如上所述地，通过图17而检测出与事件区域对应的区域时，广播接收装置100判断与检测的事件区域相关地存储的源信息中是否包含比分区域(S1630)。在根据判断结果，没有包含比分区域的情况下，广播接收装置100基于与事件区域对应的区域的像素区域中的与除了包含在源信息的比赛时间区域之外的剩余像素区域对应的像素区域的变量，来确定比分区域(S1640)。
根据实施例，与事件区域(以下，称之为第一事件区域)对应的区域(以下，称之为第二事件区域)的变量可以根据第一事件区域以及第二事件区域的像素区域之间的像素差而由1变更为0或者保持为1。因此，广播接收装置100可以获取在第二事件区域中的与除了比赛时间区域之外的剩余区域对应的像素区域中的变量为1的像素区域。之后，广播接收装置100广播接收装置100判断变量为1的像素区域是否连续地相邻预设定的数量以上，而在判断为连续地相邻的情况下，利用连接区域算法而从变量为1的像素区域中确定比分区域。之后，广播接收装置100基于检测的比分区域，来在检测的事件区域中确定比分区域。
如上所述，在从事件区域以及与事件区域对应的区域中分别确定比分区域之后，广播接收装置100利用数字识别算法而从各个比分区域中识别出数字，并根据数字的变化与否而感测事件的发生与否(S1650)。
此外，在S1630步骤中，在源信息中包含比分区域的情况下，广播接收装置100基于比分区域来检测与事件区域对应的区域作为比分区域。之后，如上述的S1650步骤，广播接收装置100可以利用数字识别算法而从各个比分区域中识别数字，并对识别出的数字进行比较，而在两个数字相异的情况下可感测为发生了事件。在如上所述，通过两个比分区域识别出的数字而感测为发生了事件时，广播接收装置100将存储的事件区域以及源信息更新为与该事件区域对应的区域以及针对该区域的源信息。
因此，如果在事件区域以及源信息被更新之后接收到视频帧，广播接收装置100可以基于更新后的图像区域以及源信息来检测新的事件区域，并可以基于检测的事件信息来感测事件的发生与否。
在下文中，对在上述的广播接收装置100中生成与接收到的内容对应的摘要内容以及确定与该摘要内容对应的缩略图图像的又一实施例进行具体的说明。
上述的数据处理部150可以包含用于对包含在内容中的视频数据以及音频数据执行解码的解码部151。因此，如果接收到用户请求的频道的内容，则解码部151对包含在接收到的内容中的视频数据以及音频数据执行解码。然而，本发明并不局限于此，解码部120可以对存储于存储部160的内容中的与用户命令对应的内容的视频数据以及音频数据执行解码。
另外，上述的存储部160可根据用户的请求而存储与收听中的内容或者预约设定的内容相关地录制的录制内容。不仅如此，存储部160可以存储与视听中的内容或者录制内容对应的摘要内容以及用于识别摘要内容的代表缩略图图像。在此，摘要内容可以是针对实时流传输的内容或者录制的录制内容的强调视频(Hightlight video)，而且代表缩略图图像可以是联合图像专家组(JointPhotographicExpertsGroup：JPEG)视频图像。然而，本发明并不局限于此，代表缩略图图像还可以是位图(Bitmap：BMP)、图像互换格式(GraphicInterchangeFormat：GIF)等视频图像。
因此，上述的输出部120根据控制部130的控制命令，不仅可以通过视频输出部121以及音频输出部123输出用户所请求的频道的内容或者已存储到存储部160的录制内容的视频数据以及音频数据，还可以输出与摘要内容对应的视频数据以及音频数据。
具体而言，在输出针对摘要内容视频数据以及音频数据的情况下，视频输出部121可以在屏幕上同时输出摘要内容以及用于识别摘要内容的代表缩略图图像。因此，在用户选择代表缩略图图像时，视频输出部121可以根据控制部130的控制命令，从与选择的代表缩略图图像对应的摘要内容开始依次进行显示。在下文中，对显示上述的摘要内容和代表缩略图图像的操作进行详细的说明。
另外，上述的控制部130可通过对经解码的视频数据以及音频数据中的至少一个进行分析，来生成根据事件发生的摘要内容。另外，控制部130对与当前再现的内容相关地解码的视频数据的视频图像进行分析，从而将与已设定的条件对应的视频图像确定为候选缩略图图像，并将其存储到存储部160。即，控制部130可以从与内容再现的时间点同步的时间点开始对与该内容的视频数据对应的视频图像进行分析，从而将与已设定的条件对应的视频图像确定为候选缩略图图像，并将所确定的候选缩略图图像存储到存储部160。
另外，在生成摘要内容时，控制部130基于包含在摘要内容中的时间信息来从存储在存储部160中的至少一个候选缩略图图像中获取与相关摘要内容对应的候选缩略图图像，之后将获取到的候选缩略图图像确定为相关摘要内容的代表缩略图图像并存储到存储部160。在此，包含在摘要内容中的时间信息可以是以与摘要内容相关的内容的再现时间同步的时间为基准而再现相关摘要内容的时间。另外，优选地，控制部130将确定为摘要内容的代表缩略图图像的候选缩略图图像转换为JPEG视频图像并存储到存储部160。
另外，控制部130在对经解码的视频数据的视频图像进行分析而确定候选缩略图图像之前，对经解码的视频数据的视频图像以及该视频图像的前后视频图像进行分析，从而检测是否能够从上下左右中的至少一个区域中连续地检测到黑色图像。
通常，对以SD视频格式或者HD视频格式构成的内容的情况而言，显示的视频数据的输出屏幕比率可能会与由一般视频格式构成的视频数据的输出屏幕比率不同。因此，对以SD视频格式或者HD视频格式构成的视频数据的情况而言，可能在上下左右中的至少一个区域包含黑色图像。据此，如果开始再现内容，则控制部130对从通过视频输出部121初始输出的视频数据开始的连续的视频数据中的预设定的数量的视频数据进行分析，从而判断是否从上下左右中的至少一个区域连续地检测出黑色图像。如果根据判断结果，在至少一个区域上连续地检测到黑色图像，则控制部130在去除包含黑色图像的至少一个区域之后，将会与去除包含黑色图像的区域的部分对应地对视频图像进行大小调整(resizing)。
之后，控制部130对调整后的视频图像或原始视频图像进行分析，从而将与放大快照(Zoom-InShot)图像对应的视频图像确定为候选缩略图图像，并存储到存储部160。据此，存储部160可以存储针对当前再现的内容的至少一个候选缩略图图像。
如上所述，用于对经解码的视频数据的视频图像进行分析而将放大快照(Zoom-InShot)图像确定为候选缩略图图像的控制部130可以通过下述的实施例而判断视频图像是否为放大快照图像(Zoom-InShot)，从而确定候选缩略图图像。
根据一实施例，控制部130可以按经解码的视频数据来对视频图像进行分析，从而基于与有效场地颜色对应的颜色的像素比率值来将判断为放大快照图像的视频数据的视频图像确定为候选缩略图图像。
具体而言，存储部160可存储按各个体育种类存储表示表现视频图像的颜色中的代表颜色的有效场地颜色的比率和基准像素比率值，基准像素比率值表示视频图像的全部颜色的像素与有效场地颜色的像素的比率。
因此，控制部130对按经解码的视频数据的视频图像进行分析，从而计算与有效场地颜色对应的颜色的像素比率值。之后，控制部130将对已计算出的像素比率值与被预先设定和存储到存储部160的与有效场地颜色对应的基准像素比率值进行比较，从而可以将具有小于基准像素比率值的比率值的视频图像判断为放大快照图像。因此，控制部130可以将判断为放大快照图像的视频图像确定为候选缩略图图像，并存储到存储部160。
例如，足球、棒球、橄榄球、高尔夫球运动的有效场地颜色可以被设定为绿色；游泳运动的有效场地颜色可以被设定为蓝色；冰球、速度滑冰运动的有效场地颜色可以被设定为白色。如上所述，存储部160可以按各个体育项目来设定用于表示与各个体育项目对应的代表颜色的有效场地颜色。此外，控制部160可以存储基准像素比率值，该基准像素比率值表示表现针对体育相关内容的视频数据的视频图像的全部颜色的像素与针对该体育的有效场地颜色的像素之比。
例如，如果再现中的内容为足球相关内容，则控制部130对按再现中的内容的视频数据的视频图像进行分析，并根据作为足球运动的有效场地颜色的绿色的像素值和表示视频图像的全部颜色的像素值，来计算出与绿色对应的像素比率值。之后，控制部130对针对计算出的绿色像素比率值与预先设定而存储的足球运动相关的基准像素比率值进行比较，从而读取具有小于基准像素比率值的像素比率值的视频图像，将读取的视频图像确定为候选缩略图图像并临时存储到存储部160。此时，控制部130同时还在存储部160中存储确定为候选缩略图图像的视频图像被再现的时间点的时间信息。因此，存储部160可以存储：与再现中的内容相关的至少一个候选缩略图图像以及关于该候选缩略图图像的时间信息。
根据又一实施例，控制部130对按经解码的视频数据的视频图像进行分析，从而比较用于表示视频图像的像素数量和预设定的临界像素数量。之后，控制部130在按经解码的视频数据的视频图像中的包含小于预设定的临界像素数量的像素数量的视频图像判断为放大快照图像，并将判断为放大快照图像的视频图像确定为候选缩略图图像并存储到存储部160。此时，控制部130获取确定为候选缩略图图像的视频图像被再现的时间点的时间信息，并将其与确定为该候选缩略图图像的视频图像一起存储到存储部160。因此，存储部160可以存储：与再现中的内容相关的至少一个候选缩略图图像以及与该候选缩略图图像相关的时间信息。
例如，在按经解码的视频数据的视频图像中，第一视频图像可以包含针对5个颜色的像素数量，而且第二视频图像可以包含针对10个颜色的像素数量。另外，预设定的临界像素数量可以被设定为7个。在此情况下，控制部130可以将第一视频图像以及第二视频图像的像素数量分别与临界像素数量进行比较，从而将包含的像素数量少于临界像素数量的第一视频图像确定为候选缩略图图像。在确定候选缩略图图像之后，控制部130可以将确定为候选缩略图图像的第一视频图像和确定为候选缩略图图像的第一视频图像被再现的时间点的时间信息存储到存储部160。
根据又一实施例，控制部130从包含在按经解码的视频数据的视频图像所包含的对象中的预设定的临界大小以上的对象的视频图像判断为放大快照图像，并将判断为放大快照图像的视频图像确定为候选缩略图图像并存储到存储部160。此时，控制部130获取确定为候选缩略图图像的视频图像被再现的时间点的时间信息，并将其与确定为该候选缩略图图像的视频图像一起存储到存储部160。据此，存储部160可以存储与再现中的内容相关的至少一个候选缩略图图像以及与该候选缩略图图像相关的时间信息。
根据又一实施例，控制部130对按经解码的视频数据的视频图像进行相互比较并分析。此时，控制部130可以通过多样的实施例中的一个而对按视频数据的视频图像进行相互比较并分析。之后，控制部130可以将相互比较的视频图像中的一个视频图像确定为候选缩略图图像，并存储确定为候选缩略图图像的视频图像。
在通过如上所述的多样的实施例而确定与再现中的内容相关的至少一个候选缩略图图像之后，控制部130基于已确定的至少一个候选缩略图图像和之前的视频图像的直方图(histogram)来确定场景变化率。之后，控制部130对已确定的场景变化率和预设定的基准变化率进行比较，并从存储部160删除除了具有小于基准变化率的场景变化率的候选缩略图图像之外的候选缩略图图像。据此，存储部160可以仅存储具有小于预设定的基准变化率的场景变化率的候选缩略图图像。
具体而言，控制部130分别生成针对已确定的至少一个候选缩略图图像的视频图像和该视频图像的之前视频图像的直方图。之后，控制部130利用欧式距离(EuclideanDistance)计算出各个直方图的差值，并可以根据计算出的差值的程度来确定与候选缩略图图像对应的场景变化率。在如上所述地，确定与候选缩略图图像对应的场景变化率时，控制部130根据已确定的候选缩略图图像的场景变化率是否小于预设定的基准变化率，确定是否要从存储部160中删除该候选缩略图图像。
如果如上所述地，与再现中的内容相关地在存储部160中存储至少一个候选缩略图图像，则控制部130基于已存储的至少一个候选缩略图图像的时间信息和与摘要内容的再现相关的时间信息，来判断属于该摘要内容的再现区间的候选缩略图图像是否被存储在存储部160。如果根据判断结果，属于已生成的摘要内容的再现区间的候选缩略图图像存储在存储部160，则控制部130可以将该候选缩略图图像确定为与已生成的摘要内容对应的代表缩略图图像。
另外，如果属于已生成的摘要内容的再现区间的候选缩略图图像并没有存储在存储部160，则控制部149可以将已生成的摘要内容的再现终止的区间的视频图像确定为代表缩略图图像。然而，本发明并不局限于此，控制部130可将在已生成的摘要内容开始被再现的区间的视频图像或构成摘要内容的多个视频图像中的与放大快照图像相关的视频图像确定为代表缩略图图像。如上所述，在确定与已生成的摘要内容对应的代表缩略图图像之后，控制部130可以将已生成的代表缩略图图像和相关的摘要内容彼此匹配并存储到存储部160。
此外，控制部130将对通过上述的实施例而解码的视频数据以及音频数据中的至少一个进行分析，并根据事件的发生而检测事件区间，并可以基于检测到的事件区间来生成摘要内容。具体而言，控制部130可以基于与检测的事件区间对应的视频区间以及该视频区间的前后视频区间来生成摘要内容。在此，前后视频区间可以是与预设定的条件对应的视频区间。根据实施例，在检测到事件区间时，控制部130可以以与检测的事件区间对应的视频区间为基准而获取存在于预设定的固定时间内的视频区间。在获取存在于如上所述的固定时间内的前后视频区间之后，控制部130可以基于与事件区间对应的视频区间以及在预设定的固定时间内存在的前后视频区间来生成摘要内容。
此时，控制部130可以对在固定时间内存在的前后视频区间的视频图像进行分析，从而根据场景变化的视频区间的存在与否而基于在已获取的前后视频区间中的一部分视频区间和与事件区间对应的视频来生成摘要内容。
图18是在根据本发明的一实施例的广播接收装置中对包含黑色图像的视频图像进行加工处理的示意图。
在图18的(a)中，包含在以SD视频格式或者HD视频格式构成的内容中的视频数据的视频图像1810可以在上下左右区域1820包含黑色图像。如上所述，如果在视频图像1810的上下左右区域1820包含有黑色图像，则控制部130去除包含在上下左右区域1820中的黑色图像，之后对视频图像1810进行大小调整(resizing)。即，控制部130在去除包含在视频图像1810的上下左右区域1820中的黑色图像之后，以与去除黑色图像的区域1820的大小对应地对视频图像1810进行大小调整。因此，如图18的(b)所示，控制部130可以生成已增大与包含黑色图像的区域1820的区域相当的大小的视频图像1810'。
图19是在根据本发明的一实施例的在广播接收装置中确定候选缩略图图像的示意图。
如图19所示，控制部130在与再现内容的时间点同步的时间点开始对包含在该内容中的视频数据的视频图像进行分析。在内容被再现时，可以从第一视频图像1910开始依次地显示在屏幕上。因此，控制部130可以从第一视频图像1910开始依次地进行分析。如图所示，第一输出视频图像1910'是与第一视频图像1910对应的视频图像，控制部130可以计算第一输出视频图像1910'的与有效场地颜色对应的颜色的像素比率值。例如，如果与有效场地颜色对应的颜色为绿色，则控制部130可以通过将用于表现第一输出视频图像1910'的颜色的像素和与场地颜色对应的绿色的像素进行对比，而计算出像素比率值。在计算出如上所述的像素比率值时，控制部130判断第一输出视频图像1910'的与有效场地颜色对应的绿色的像素比率值是否小于预设的基准像素比率值。如果根据判断结果，第一输出视频图像1910'的与有效场地颜色对应的绿色的像素比率值为预设的基准像素比率值以上，则控制部130可以判断为与第一视频图像1910对应的第一输出视频图像1910'并不是放大快照图像。
通过如上所述的方式，控制部130可将在从第一视频图像1910开始依次地显示在屏幕上的视频图像中的第二视频图像1920以及第三视频图像1930判断为放大快照图像。在此，与判断为放大快照图像的第二视频图像1920以及第三视频图像1930分别对应的第二输出视频图像1920'以及第三输出视频图像1930'可以是与有效场地颜色对应的绿色的像素比率值少于预设的基准像素比率值的视频图像。因此，控制部130可将具有比与有效场地颜色相关地预设的基准像素比率值小的像素比率值的第二视频图像1920以及第三视频图像1930判断为放大快照图像，并可以将与放大快照图像对应的第二视频图像1920以及第三视频图像1930确定为候选缩略图图像。
图20是在根据本发明的一实施例的广播接收装置中从确定的候选缩略图图像中基于场景变化率来确定最终候选缩略图图像的示意图。
如图20的(a)以及(b)所示的第一视频图像2010以及第二视频图像2020可以是基于预设的条件来确定为候选缩略图图像的视频图像。在如上所述的第一视频图像2010以及第二缩略图图像2020被确定为候选缩略图图像的情况下，控制部130基于确定为候选缩略图图像的第一视频图像2010和之前的视频图像的直方图来确定场景变化率。此外，控制部130将会基于确定为候选缩略图图像的第二视频图像2020和之前的视频图像的直方图来确定场景变化率。之后，控制部130对确定为候选缩略图图像的第一视频图像2010以及第二视频图像2020的场景变化率和预设定的基准变化率进行比较，从而将具有小于基准变化率的变化率的候选缩略图图像确定为最终的候选缩略图图像。
如图所示，在第一视频图像2010以及第二视频图像2020中的第一视频图像2010可以是根据摄像头角度的快速移动而发生模糊(Blur)现象的视频图像。据此，所述发生模糊现象的第一视频图像2010与之前的视频图像之间的场景变化率较大，因此可以具有大于基准变化率的变化率。因此，控制部130可将在第一视频图像2010和第二视频图像2020中的第一视频图像从候选缩略图图像中排除，而仅将第二视频图像2020确定为最终候选缩略图图像。
图21是在根据本发明的一实施例的广播接收装置中生成摘要内容的示意图。
如图21所示，控制部130对经解码的视频数据以及音频数据中的至少一个进行分析，从而可以检测与预设的条件对应的事件区间。如上所述，控制部130可以通过事件检测部131对解码的视频数据以及音频数据中的至少一个进行分析而检测出与预设的条件对应的事件区间。
如图所示，如果第一视频区间2111被检测为事件区间，则控制部130获取存在于以检测为事件区间的第一视频区间2111为基准的预设的固定时间内的前后视频区间。因此，以第一视频区间2111为基准的之前的视频区间2113、2120中的第二视频区间2113可能存在于预设的固定时间内，而且以第一视频区间2111为基准的之后的视频区间2115、2130中的第三视频区间2115可存在于预设的固定时间内。
如上所述，如果获取到以第一视频区间2111为基准的预设的固定时间内存在的第二视频区间2113以及第三视频区间2115，则控制部13可以基于第一视频区间至第三视频区间2111、2113、2115来生成摘要内容2110。
此时，控制部130可以对已获取的第二视频区间2113以及第三视频区间2115内包含的视频图像进行分析，从而判断是否存在场景变化的视频区间，且在存在场景变化的视频区间时，可以基于除了该视频区间之外的剩余视频区间和与已检测的事件区间对应的第一视频区间2111来生成摘要内容。
图22是根据本发明的一实施例的广播接收装置中再现摘要内容的示意图。
如图22所示，在接收到用户的摘要内容服务命令之后，广播接收装置100可以将与接收到的摘要内容服务命令对应的摘要内容2210显示在屏幕的上端区域，并可以在屏幕的下端区域显示与摘要内容相关地已生成的第一代表缩略图至第三代表缩略图2220～2240。第一代表缩略图图像2220可以是用于从与摘要内容2210相关的内容中识别根据初始事件的发生的摘要内容的图像，而第三代表缩略图图像2230可以是用于从对应的内容中识别根据最后事件的发生的摘要内容的图像。
因此，在接收到用户的摘要内容命令之后，如果没有追加命令，则广播接收装置100可以通过输出部121而从与第一代表缩略图图像2210匹配的摘要内容2210开始依次地进行输出。
另外，在接收到用户的摘要内容服务命令之后，如果输入了对于第二代表缩略图图像2220的选择命令，则广播接收装置100中断当前再现中的摘要内容2210，并通过输出部从与第二代表缩略图图像720匹配的摘要内容2210开始依次地进行输出。
到目前为止，已通过多样的实施例而对根据本发明的广播接收装置100的操作进行了详细的说明。在下文中，对根据本发明的广播接收装置中提供摘要内容服务的方法进行详细的说明。
图23是根据本发明的一实施例的广播接收装置中提供摘要内容服务的方法的流程图。
如图23所示，广播接收装置100对用户所请求的至少一个内容的视频数据以及音频数据进行解码(S2310)。在此，用户请求的内容可以是通过广播服务器(未图示)实时流传输内容或者是已存储的录制内容。
当如上所述地执行对上述的内容的视频数据以及音频数据的解码时，广播接收装置100对经解码的视频数据的视频图像和该视频图像的前后视频图像进行分析，从而判断在上下左右中的至少一个区域中是否能够连续地检测出黑色图像(S2320)。
通常，对以SD视频格式或者HD视频格式构成的内容而言，显示的视频数据的输出屏幕比率可能不同于以一般视频格式构成的视频数据的输出屏幕比率。因此，对以SD视频格式或者HD视频格式构成的视频数据而言，可能在上下左右中的至少一个区域包含黑色图像。据此，在开始对于内容的再现时，广播接收装置100对从初始解码的视频数据开始的连续的视频数据中的预设的数量的视频数据进行分析，从而判断是否从上下左右中的至少一个区域连续地检测出黑色图像。
如果根据判断结果，在至少一个区域连续地检测到黑色图像，则控制部130去除包含黑色图像的至少一个区域，以与去除包含有黑色图像的区域的部分对应地对视频图像进行大小调整(resizing)(S2330)。
之后，广播接收装置100对经解码的视频数据的视频图像进行分析，从而确定并存储至少一个候选缩略图图像(S2340)。在此，经解码的视频数据的视频图像可以是不包含黑色图像的原始视频图像或者是被调整大小后的视频图像。在下文中，对确定和存储候选缩略图图像的实施例进行详细的说明。
之后，广播接收装置100对经解码的视频数据以及音频数据中的至少一个进行分析，并根据事件的发生而生成摘要内容(2350)。之后，广播接收装置100基于包含在摘要内容中的时间信息来将与摘要内容对应的候选缩略图图像确定为该摘要内容的代表缩略图图像，并将所确定的代表缩略图图像和该摘要内容彼此匹配并存储(S2360)。在此，确定候选缩略图图像的步骤S2340和生成摘要内容的步骤S2350可以同时进行。即，广播接收装置100可以根据用户的命令而从内容的再现时间点开始对该内容的视频数据以及音频数据中的至少一个进行分析，从而生成候选缩略图图像以及摘要内容。
另外，广播接收装置100为了能够在上述的步骤S2340中将至少一个视频图像确定为候选缩略图图像，可以通过如下的实施例来判断视频图像是否为放大快照图像，从而确定候选缩略图图像。在下文中，通过图24至图28，对将在广播接收装置100中解码的至少一个视频数据的视频图像确定为候选缩略图图像的方法进行详细的说明。
图24是在根据本发明的一实施例的广播接收装置中确定以及存储候选缩略图图像的方法的第一流程图。
如图24所示，在对内容的视频数据以及音频数据的解码被执行时，广播接收装置100对按解码的视频数据的视频图像进行分析，从而检测判断为放大快照图像的视频图像(S2410)。之后，广播接收装置100将判断为放大快照图像的视频图像确定为候选缩略图图像，并存储确定为候选缩略图图像的视频图像(S2420)。此时，广播接收装置100获取确定为候选缩略图图像的视频图像的再现时间点的时间信息，并将其与确定为相关候选缩略图图像的视频图像一起存储。
如上所述，在判断为放大快照图像的视频图像被确定为候选缩略图图像而被存储时，广播接收装置100可以通过上述的步骤S2360，基于包含在摘要内容中的时间信息来将已存储的候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为与该摘要内容对应的代表缩略图图像。
图25是根据本发明的又一实施例的广播接收装置中确定以及存储候选缩略图图像的方法的第二流程图。
如图25所示，广播接收装置100按解码的视频数据来分析视频图像，从而计计算出与有效场地颜色对应的颜色的像素比率值(S2510)。之后，广播接收装置100对按视频数据计算出的像素比率值和基准像素比率值进行比较，从而将具有小于基准像素比率值的像素比率值的视频图像确定为候选缩略图图像，并将其存储(S2520)。此时，广播接收装置100获取确定为候选缩略图图像的视频图像的再现时间点的时间信息，并将其与确定为相关候选缩略图图像的视频图像一同存储。
具体而言，广播接收装置100可按体育种类来存储：表示表现视频图像的颜色中的代表颜色的有效场地颜色的比率；以及视频图像全部颜色的像素与表示有效场地颜色的像素的比率的基准像素比率值。因此，广播接收装置100可以对按解码的视频数据的视频图像进行分析，从而计算出与有效场地颜色对应的颜色的像素比率值。之后，广播接收装置100可对已计算出的像素比率值和预先设定且存储的与该有效场地颜色对应的基准像素比率值进行比较，从而将具有小于基准像素比率值的像素比率值的视频图像确定为候选缩略图图像并对其进行存储。此时，广播接收装置100可以获取确定为候选缩略图图像的视频图像的再现时间点的时间信息，并将其与确定为该候选缩略图图像的视频图像一起存储。
之后，广播接收装置100可以通过上述的步骤S2360，基于包含在摘要内容的时间信息来将已存储的候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为针对该摘要内容的代表缩略图图像。
图26是根据本发明的又一实施例的在广播接收装置中确定以及存储候选缩略图图像的方法的第三流程图。
如图26所示，广播接收装置100对按经解码的视频数据的视频图像进行分析，并对用于表现视频图像的像素的数量和预设的临界像素数量进行比较(S2610)。之后，广播接收装置100在按经解码的视频图像中的包含小于预设的临界像素数量的像素数量的视频图像确定为候选缩略图图像并对其进行存储(S2620)。此时，广播接收装置100获取确定为候选缩略图图像的视频图像被再现的时间点的时间信息，并将其与确定为该候选缩略图图像的视频图像一起存储。
之后，广播接收装置100可以通过上述的步骤S2360，基于包含在摘要内容中的时间信息，将已存储的候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为与该摘要内容对应的代表缩略图图像。
图27是根据本发明的又一实施例的广播接收装置中确定以及存储候选缩略图图像的方法的第四流程图。
如图27所示，广播接收装置100对按经解码的视频数据的视频图像所包含的对象和预设的临界大小进行比较(S2710)。之后，广播接收装置100将包含大小为临界大小以上的对象的视频图像确定为候选缩略图图像并存储(S2720)。此时，广播接收装置100获取确定为候选缩略图图像的视频图像被再现的时间点的时间信息，并将其与确定为该候选缩略图图像的视频图像一起存储。
之后，广播接收装置100可以通过上述的S2360步骤，基于包含在摘要内容中的时间信息，将在已存储的候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为与该摘要内容对应的代表缩略图图像。
图28是根据本发明的又一实施例的广播接收装置中确定并存储候选缩略图图像的方法的第五流程图。
如图28所示，广播接收装置100对按经解码的视频数据的视频图像进行相互比较分析(S2810)。此时，广播接收装置100可以通过图24至图27中的至少一个实施例，对按视频数据的视频图像进行相互比较分析。之后，广播接收装置100将相互比较后的视频图像中的一个视频图像确定为候选缩略图图像，并存储确定为候选缩略图图像的视频图像(S2820)。
之后，广播接收装置100可以通过上述的S2360步骤，基于包含在摘要内容中的时间信息，将已存储的候选缩略图图像中的与摘要内容对应的候选缩略图图像确定为与该摘要内容对应的代表缩略图图像。
在通过如上所述的多样的实施例，确定与再现中的内容相关的至少一个候选缩略图图像时，广播接收装置100基于已确定的至少一个候选缩略图图像和之前的视频图像的直方图来确定场景变化率。之后，广播接收装置100对已确定的场景变化率和预设定的基准变化率进行比较，并删除除了场景变化率小于基准变化率的候选缩略图图像之外的剩余的已存储的候选缩略图图像。据此，广播接收装置100可以仅存储具有小于预设的基准变化率的场景变化率的候选缩略图图像。
以下，对通过上述的S2360步骤而在广播接收装置100中将已存储的候选缩略图图像中的一个候选缩略图图像确定为已生成的摘要内容的代表缩略图图像的方法进行详细的说明。
图29是根据本发明的一实施例的广播接收装置中确定代表缩略图图像的方法的流程图。
如图29所示，广播接收装置100在对内容的视频数据以及音频数据中的至少一个进行分析，从而在根据事件的发生而生成摘要内容时，基于已存储的至少一个候选缩略图图像的时间信息和该摘要内容的再现相关信息来判断是否存储有属于该摘要内容的再现区间的候选缩略图图像(S2910)。如果根据判断结果，存储有属于已生成的摘要内容的再现区间的候选缩略图图像，则广播接收装置100将该候选缩略图图像确定为针对已生成的摘要内容的代表缩略图图像(S2920)。
另外，如果根据判断结果，没有存储属于已生成的摘要内容的再现区间的候选缩略图图像，则广播接收装置100将构成摘要内容的视频图像中的一个视频图像确定为代表缩略图图像(S2930)。根据一实施例，如果没有存储属于已生成的摘要内容的再现区间的候选缩略图图像，则广播接收装置100可将摘要内容的再现终止的区间的视频图像确定为代表缩略图图像。据此，在确定针对已生成的摘要内容的代表缩略图图像时，广播接收装置100将确定为代表缩略图图像的视频图像转换为JPEG视频图像，并将该转换为JPEG视频图像的代表缩略图图像和该摘要内容相互进行匹配并存储(S2940、S2950)。
在下文中，对在广播接收装置100中同时输出解码的内容和摘要内容的操作以及方法进行详细说明。
如上所述，从广播服务器(未图示)经由所选的频道接收内容的接收部110可以包括调谐(tuner)部113和解复用(demux)部111。谐调部113接收广播服务器(未图示)所提供的多个按频道的内容，解复用部111在通过协调部113接收到的多个按频道的内容中提取用户请求的频道的内容。当如此地，提取到用户请求的频道的内容时，数据处理部150通过解码部151对包含在该内容中的视频数据以及音频数据执行解码，并对经解码的视频数据以及音频数据执行信号处理，从而将其信号处理为可输出的形式。据此，输出部120可以通过视频输出部121以及音频输出部123输出经信号处理的视频数据以及音频数据。
另外，如上所述，控制部130可以基于通过事件检测部131检测出的事件区间来生成内容的摘要内容，并将其存储到存储部160。此外，控制部130可根据用户的命令，控制输出部120来同时输出用户所请求的频道的内容和已存储到存储部160的摘要内容。在此，摘要内容可以是针对实时流传输的内容或者录制的录制内容的强调图像。
根据实施例，如果用户命令为第一用户命令，则控制部130可以控制输出部120同时输出视听中的内容以及针对该内容的摘要内容。另外，如果用户的命令为第二用户命令，则控制部130可以控制输出部120同时输出视听中的内容以及针对与该内容不同的其他频道的内容的摘要内容。
在此，第一用户命令可以是针对视听中的内容的摘要内容服务请求命令，第二用户命令可以是针对与视听中的内容不同的其他频道的摘要内容服务请求命令。据此，如果接收到第一用户命令，则控制部130生成针对视听中的内容的摘要内容并存储到存储部160。之后，控制部130可以同时输出视听中的内容以及已存储的与相关内容对应的摘要内容。另外，如果接收到第二用户命令，则控制部130可以生成针对与接收到的第二用户命令对应的频道的摘要内容，并将其存储到存储部160。之后，控制部130可以同时输出视听中的内容以及已存储的与第二用户命令对应的内容的摘要内容。
另外，存储部160可以根据用户的请求而存储针对与视听中的内容相关储录制的内容以及视听中的内容的摘要内容。另外，存储部160可存储用于从内容检测至少一个事件区间并基于检测的事件区间来生成摘要内容的多样的设定信息。
如上所述，所述存储部160可以存储为了能够从体育相关内容的视频数据以及音频数据中检测事件区间而预设定的比赛状况条件以及临界电平值，或者为了从体育相关内容的附加数据中检测出事件区间而预设定的颜色以及场地颜色比率的临界值。此外，存储部160可以存储临界值，该临界值用于确定用于判断检测出的事件区间的视频区间是否有效。
另外，存储部130控制事件检测部131对用户所请求的内容的视频数据以及音频数据中的至少一个进行分析来检测与预设定的条件对应的至少一个事件区间。根据上述的控制命令，事件检测部131可基于已存储到存储部的预设定的条件而对用户所请求的内容的视频数据以及音频数据中的至少一个进行分析，从而检测出与预设定的条件对应的至少一个事件区间。
上文中，已对分析内容所包含的视频数据以及音频数据来检测事件区间的方法进行过详细的说明，因此，以下将省略对其的详细说明。
检测出事件区间之后，事件检测部131将针对检测出的至少一个事件区间的时间信息传输到控制部130。据此，控制部130基于检测出该事件区间的时间信息，从与已存储的录制内容或者针对按预设定的时间单位存储的实时的内容的视频区间中，获取针对该事件区间的视频区间。在此，检测到事件区间的时间信息可以是通过输出部120输出针对该事件区间的视频区间的时间或者针对事件区间的视频区间的总再现时间。
根据一实施例，存储部160可以存储针对与摘要内容相关的内容的录制内容。在此情况下，事件检测部131可将在通过输出部120输出的内容中的与预设定的条件对应的事件所发生的事件区间的时间信息传输到控制部130。据此，控制部130可获取已存储于存储部160的录制内容的视频区间中的与通过事件检测部131检测出事件区间的时间信息对应的时间的视频区间。
例如，在针对通过输出部120输出的内容的视频区间中，事件检测部131可以以输出该内容的时间点为基准将30分15秒至30分20秒之间的视频区间检测为与预设定的条件对应的事件所发生的事件区间。另外，存储部160可以在与通过输出部120输出的时间点同步的时间点上录制和存储内容，或者可以存储录制后的内容。在此情况下，控制部130可基于检测为事件区间的时间信息来从已存储在存储部160的内容的视频区间中获取30分15秒至30分20秒之间的视频区间。
根据又一实施例，存储部160可以按预设定的单位来临时存储与摘要内容相关的实时内容的视频区间。在此情况下，检测部131可通过输出部120输出的内容中的与预设定的条件对应的事件发生的事件区间所保持的时间信息传输到控制部130。在此，如上所述，事件区间所保持的时间信息可以是针对事件区间的视频区间所再现的总再现时间。据此，控制部130可以基于由事件检测部131检测出的事件区间所保持的时间信息，获取临时存储到存储部160的视频区间中的与事件区间所保持的时间对应的时间内临时存储的视频区间。
例如，存储部160可以以1分钟为单位临时存储针对内容的视频区间。另外，通过事件检测部131检测出的事件区间所保持的时间可以是5秒钟。在此情况下，控制部130可获取在事件区间所保持的时间内临时存储到存储部160的视频区间中的从初始临时存储的视频区间至5秒以内临时存储的视频区间，并可以将获取到的视频区间确定为与事件区间对应的视频区间。
如上所述，在基于检测出事件区间的时间点来获取针对该事件区间的视频区间时，控制部130通过上述实施例对获取到的视频区间进行分析，从而判断针对该视频区间的内容是否为体育相关内容。
在根据判断结果，判断为与检测出的至少一个事件区间对应的视频区间为体育相关内容的情况下，如上所述，控制部130可以以针对已检测车的事件区间的视频区间为基准而获取在预设定的固定时间内存在的前后视频区间。之后，控制部130可以判断所获取的前后视频区间中是否存在场景变化的区间。如果根据判断结果，没有场景变化区间，则控制部130可以将检测出至少一个事件区间的时间内的视频区间和属于预设定的固定时间内的前后视频区间确定为内容摘要区间。
另外，如果根据判断结果，存在场景变化区间，则控制部130改变预设定的固定事件而获取与针对检测出的事件区间的视频区间相关的前后视频区间。之后，控制部130可以将针对检测出的事件区间的视频区间以及属于改变后的固定时间内的前后区间确定为内容摘要区间。
另外，固定时间可以如上所述地包含绝对固定时间，而这种绝对固定时间不可以改变。据此，控制部130可以判断在固定时间内存在的前后视频区间中的除了在绝对固定时间内存在的前后视频区间之外的剩余前后视频区间中是否存在场景变化区间。如果根据判断结果，存在场景变化的区间，则控制部130可以在除了绝对固定时间之外的剩余固定时间内改变固定时间，从而获取与针对检测出的事件区间的视频区间相关的前后视频区间。
之后，控制部130可以确定包含与已获取的事件区间对应的视频区间以及以该视频区间为基准而在预设定的固定时间内存在的前后视频区间的内容摘要区间，基于确定的内容摘要区间来生成摘要内容并将生成的摘要内容存储到存储部160。此时，控制部130将在构成已生成的摘要内容的视频区间中的与预设定的条件对应的一个视频区间的视频图像确定为缩略图图像，并将确定的缩略图图像和已生成的摘要内容匹配并存储到存储部160。
在上文中已对从用于构成内容的视频区间确定缩略图图像，并将所确定的缩略图图像和该摘要内容进行匹配并存储的方法进行过详细的说明，因此，以下将省略对其的详细说明。
以下，将对在上述的控制部130中从检测出的视频区间确定内容摘要区间的操作进行详细的说明。
图30是根据本发明的一实施例的广播接收装置中基于检测出的事件区间来判断是否存在用于生成摘要内容的有效性的示意图；图31是根据本发明的一实施例的广播接收装置中基于针对事件区间的视频区间来生成摘要内容的示意图。
如图30所示，广播接收装置100可以显示足球相关体育内容，而且当前显示的视频图像可以是根据通过事件检测部131检测为与预设定的条件对应的事件区间的时间获取的视频区间。如果获取针对上述的事件区间的视频区间，则控制部130判断应用于针对事件区间的视频区间的颜色中是否包含与预定义的场地颜色对应的绿色。如图所示，可以看出在表示视频区间的颜色中绿色3010表示全部视频中的大部。如上所述，如果用于表示该视频区间的颜色中有预定义的场地颜色(即，绿色)，则控制部130将会计算该视频区间中的绿色的颜色比率值，并判断所计计算出的比率值是否为预设定的临界值以上。如果判断结果为预设定的临界值以上，则时间检测部131可以判断当前显示中的内容为足球相关体育内容。
另外，控制部130可从针对检测为事件区间的视频区间的视频图像中提取用于引导比赛进行状况的引导区域3030。当上述的引导区域3030被提取时，控制部130可以对显示于提取到的引导区域的比赛比分或者比赛进行时间进行分析而判断当前显示的内容是足球相关体育内容。
如上所述，如果根据与显示中的视频区间相关地检测出的事件区间来判断出当前视听中的内容是体育相关内容，则控制部130可获取以针对以该事件区间的视频区间为基准存在于预设定的固定时间内的前后视频区间。
具体而言，如图31所示，如果针对事件区间B 3110的视频区间3110-1被判断为体育相关内容，则控制部130可以以视频区间3110-1为中心获取属于预设定的第一固定时间3120的第一视频区间3120-1至第三视频区间3120-3以及属于预设定的第二固定时间3130的第四视频区间3130-1至第六视频区间3130-3。
之后，控制部13基于属于第一固定时间3120以及第二固定时间3130的视频区间中的除了发生场景变化的区间之外的剩余视频区间，来改变第一固定时间3120以及第二固定时间3130。即，控制部130将第一固定时间3120以及第二固定时间3130改变为与除了发生场景变化的第三视频区间3120-3以及第六视频区间3130-3之外的剩余视频区间对应的固定时间。因此，第一固定时间3120可被改变为固定时间a 3120'，第二固定时间3130可被改变为固定时间b 3130'。
当如此，预设定的第一固定时间3120以及第二固定时间3130被改变时，控制部130可确定内容摘要区间并基于所确定的内容摘要区间来生成摘要内容，该内容摘要区间包含针对事件区间B3110的视频区间3110-1、针对经改变的固定时间3120'的第一视频区间3120-1以及第二视频区间3120-2、针对经改变的固定时间b 3130'的第四视频区间3130-1以及第五视频区间3130-2。
然而，本发明并不局限于此，第一固定时间3120以及第二固定时间3130可包含如阴影区域所示的绝对固定时间3120″、3130″，而在各个绝对固定时间3120″、3130″内存在的视频区间可以与场景变化无关地与针对事件区间B3110的视频区间一起包含在内容摘要区间中。
另外，如上所述，控制部130可以根据第一用户命令或第二用户命令控制输出部120同时输出用户请求的内容以及与该内容相关地生成的摘要内容，或者同时输出用户所请求的内容以及与其他内容相关地生成的摘要内容。在此，第一用户命令可以是针对与视听中的内容相关的摘要内容服务的请求命令，而且第二用户命令可以是针对与视听中的内容不同的其他内容相关的摘要内容服务的请求命令。
据此，输出部120通过视频输出部121将用户请求的内容的视频数据调整为适合第一屏幕大小，并将摘要内容的视频数据调整以适合第二屏幕大小，将针对该摘要内容的缩略图图像调整为适合第三屏幕大小。另外，输出部120通过音频输出部123将用户所请求的内容的音频数据或摘要内容的音频数据输出到扬声器)。根据实施例，在接收到第一用户命令或第二用户命令时，控制部130可控制输出部120中断用户所请求的内容的音频数据的输出，而输出与摘要内容对应的音频数据。据此，输出部120可以输出通过音频输出部123输出的摘要内容的音频数据。据此，扬声器可中断针对内容的音频信号的输出，并输出针对通过音频输出部123输出的摘要内容的音频信号。
另外，控制部130可根据用户的命令控制输出部120，选择性地输出与内容相关地依次生成的多个摘要内容中的至少一个。具体而言，如上所述，根据第一用户命令或第二用户命令，在广播接收装置100的第一屏幕区域至第三屏幕区域中可以输出通过视频输出部121输出的内容、摘要内容以及缩略图图像。另外，用户可选择显示于第三屏幕区域中的多个缩略图图像中的一个缩略图图像。当输入或接收到如上所述的选择命令时，控制部130可以通过控制输出部120确定与该选择命令对应的缩略图图像，并从匹配于所确定的缩略图图像的摘要内容开始依次地进行输出。据此，输出部120可以通过视频输出部121以及音频输出部123从按多个缩略图图像来匹配的摘要内容中的与用户的选择命令对应的缩略图图像和所匹配的摘要内容开始依次地进行输出。
图32是根据本发明的一实施例的广播接收装置中提供内容的摘要内容服务的示意图。
如图32所示，广播接收装置100可以将用户所请求的内容显示在全部的屏幕上。如果在如上所述的显示内容的状态下，接收到针对相同的内容的摘要内容服务请求命令(第一用户命令)，则广播接收装置100在屏幕的第一区域3210显示用户所请求的内容，在屏幕的第二区域3220依次显示与在第一区域3210显示的内容相关地生成的摘要内容。追加地，广播接收装置100可在屏幕的第三区域3230显示针对依次生成的内容的缩略图图像。因此，如果输入了针对显示于第三区域3230的缩略图图像中的第一缩略图图像3231的选择命令，则广播接收装置100可在第二区域3220从与第一缩略图图像3231匹配的摘要内容开始依次地进行显示。
图33是根据本发明的一实施例的广播接收装置中提供与内容相异的其他内容的摘要内容服务的示意图。
如图33所示，广播接收装置100可将用户所请求的内容显示在全部的屏幕上。如果如上所述地显示内容的状态下，输入针对与当前显示的内容不同的其他内容的摘要内容服务命令(第二用户命令)，则广播接收装置100可在屏幕的第一区域3310显示用户所请求的内容，将与在第一区域3310显示的内容不同的其他内容相关地生成的摘要内容依次地显示在屏幕的第二区域3320。追加地，广播接收装置100可以在屏幕的第三区域3330中显示针对依次生成的摘要内容的缩略图图像。因此，如果接收到针对第一缩略图图像3331的选择命令，则广播接收装置100可在第二区域3320从在显示于第三区域3330的缩略图图像中的匹配于第一缩略图图像3331的摘要内容开始依次地进行显示。
到目前为止，已对根据本发明的广播接收装置100的各个结构进行了详细的说明。在下文中，将通过多样的实施例对提供摘要内容服务的广播接收装置100的结构进行更为详细的说明。只不过，在上文中已对与摘要内容服务相关地各个结构的操作进行了详细的说明，因此，在下文中将会对如上所示的用于提高摘要内容服务的广播接收装置100的构成方式进行详细的说明。
图34是根据本发明的一实施例的生成针对内容的摘要内容的广播接收装置的第一框图。
具体而言，如图34所示，广播接收装置100可以仅利用最少的结构来生成针对视听中的内容的摘要内容并再现生成的摘要内容。为此，如上所述，广播接收装置100可以包含解复用部111、解码部151、输出部120、事件检测部131、控制部130、存储部160，而且上述的各个构成可以用单一的构成来实现。
在此情况下，解复用部111提取多个按频道的内容中的与用户的命令对应的频道的内容，并将其输出到解码部151以及控制部130。解码部151对包含在从解复用部111输出的内容中的视频数据以及音频数据执行解码，据此，控制部130通过输出部120输出经解码的内容。同时，控制部130将从解复用部111输出的内容存储到存储部160。然而，本发明并不局限于此，控制部130还可以将通过解码部151解码的内容存储到存储部160。
另外，事件检测部131可对从解码部151输出的内容的视频数据以及音频数据中的至少一种进行分析，从而检测出与预设定的条件对应的至少一个事件区间。当如此地，通过对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与条件对应的至少一个事件区间时，事件检测部131将所检测出的至少一个事件区间的时间信息传递给控制部130。
据此，控制部130从与已存储于存储部160的录制内容或者以预设定的时间单位临时存储的内容对应的视频区间中，基于针对已检测的事件区间的时间信息，来获取针对事件区间的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130将会以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并基于包括获取到的针对事件区间的视频区间以及前后视频区间的摘要区间，来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成摘要内容的视频区间中的与预设定的条件对应的一个视频区间确定为缩略图图像，并使已生成的摘要内容和缩略图图像彼此匹配并存储到存储部160。
之后，如果接收到针对再现摘要内容的用户命令，则控制部130通过控制解码部151对已存储的摘要内容的视频数据以及音频数据执行解码，而且输出部120可输出由解码部151解码的视频数据以及音频数据。此时，输出部120可以根据控制部130的控制命令而将按内容匹配的缩略图图像与由解码部151解码的视频数据以及音频数据一同显示在屏幕上。另外，如果选择了屏幕上显示的缩略图图像中的一个，则控制部130可以从匹配于所选择的缩略图图像的摘要内容开始通过解码部151依次进行解码和再现。
如上所述，根据本发明的广播接收装置100可以仅利用上述的各个结构的最少结构来对内容生成摘要内容，并可以再现所生成的摘要内容。
图35是根据本发明的一实施例的同时再现内容以及针对相同的内容的摘要内容的广播接收装置的第一框图。
如图35所示，广播接收装置100可以仅使用最小配置(minimumconfiguration)来同时再现视听中的内容以及与相同内容相关的摘要内容。为此，广播接收装置100可以包含解复用部111、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，解复用部111可提取多个按频道的内容中的与用户的命令对应的频道的内容并输出到第一解码部151-1以及控制部130。第一解码部151-1针对包含在从解复用部111输出的内容中包含的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120再现经解码的内容。
另外，控制部130将通过解复用部111输出的内容存储到存储部160。然而本发明并不局限于此，控制部130还可以将从第一解码部151-1解码的内容存储到存储部160。另外，第一解码部151-1将经解码的内容输出到事件检测部131，而事件检测部131对通过第一解码部151-1解码的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间。如果通过这种方式，对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测到与预设定条件对应的至少一个事件区间，则事件检测部131将针对检测出的至少一个事件区间的时间信息传递给控制部130。
据此，控制部130可基于针对已检测出的事件区间的时间信息，从针对已存储在存储部160的内容的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130获取存在于以该视频区间为基准的预设定的固定时间的前后视频区间，并基于包含针对获取到的事件区间的视频区间以及前后视频区间的内容摘要区间，来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成所生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配并存储到存储部160。
另外，如果接收到摘要内容服务命令，则控制部130控制输出部120将针对当前再现中的内容的视频数据输出到屏幕的第一区域。与此同时，控制部130通过第二解码部151-3对针对已存储于存储部160的摘要内容的视频数据以及音频数据进行解码，并控制输出部120将经解码的针对摘要内容的视频数据依次地输出到屏幕的第二区域。此外，控制部130控制输出部120在屏幕的第三区域显示按已存储的摘要内容来匹配的缩略图图像。据此，在广播接收装置100的第一区域可以再现用户请求的频道的内容，在第二区域可以再现与对应频道的内容相关的摘要内容，在第三区域可以显示针对摘要内容的缩略图图像。
另外，如果选择了显示于第三区域的缩略图图像中的一个，则控制部130控制输出部120而从针对与选择的缩略图图像对应的摘要内容的视频数据开始依次输出到屏幕的第二区域。据此，可在广播接收装置100的第二区域中从与用户选择的缩略图图像匹配的摘要内容开始依次进行再现。
如上所述，根据本发明的广播接收装置100可以仅利用上述的各个构成的最小配置而再现内容以及与相同的内容相关的摘要内容。
图36是根据本发明的另一实施例的生成针对内容的摘要内容的广播接收装置的第二框图。
具体而言，如图36所示，广播接收装置100可以包含第一解复用部111-1以及第二解复用部111-3、解码部151、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1提取多个按频道的内容中的与用户的命令对应的频道的内容并输出到解码部151，而且第二解复用部111-3提取与第一解复用部111-1的提取的相同的频道的内容并输出到控制部130。接收到从第一解复用部111-1输出的内容的解码部151执行针对接收到的内容中包含的视频以及音频的解码，而且控制部130可以通过输出部120输出经解码的内容。与此同时，控制部130可将从第二解复用部111-3输出的内容存储在存储部160中。然而本发明并不局限于此，控制部130可以通过解码部151对从第二解复用部111-3输出的内容进行解码，并将其存储到存储部160。
另外，解码部151将经解码的内容输出到事件检测部131，而且事件检测部131对通过解码部151解码的内容的视频数据以及音频数据中的至少一个进行分析，从而检测与预设定条件对应的至少一个事件区间。如上所述，如果对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将与检测出的至少一个事件区间对应的时间信息传递给控制部130。
据此，控制部130基于针对已检测出的事件区间对应的时间信息，来从针对已存储于存储部160的录制内容或者以预设定的时间单位临时存储的内容的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可获取存在于以该视频区间为基准的预设定的固定时间内的前后视频区间，并可以基于包含针对获取到的事件区间的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
之后，如果输入了针对摘要内容的再现的用户命令，则控制部130可通过解码部151对已存储的摘要内容的视频数据以及音频数据进行解码和再现，并可以在屏幕上显示按摘要内容来匹配的缩略图图像。另外，如果选择了显示于屏幕的缩略图图像中的一个，则控制部130可以从与选择的缩略图图像匹配的摘要内容开始通过解码部151解码并依次再现。
如上所述，根据本发明的广播接收装置100通过第一解复用部111-1以及第二解复用部111-3提取用户请求的内容，从而能够相比于由最小配置构成的广播接收装置100而更为有效地再现用户请求的内容并生成与该内容相关的摘要内容。
图37是根据本发明的又一实施例的同时再现内容以及针对相同的内容的摘要内容的广播接收装置的第二框图。
如图37所示，广播接收装置100可以包含第一解复用部111-1以及第二解复用部111-3、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1提取多个按频道的内容中的与用户命令对应的频道的内容并输出到第一解码部151-1，而且第二解复用部111-3提取与第一解复用部111-1的提取的相同的频道的内容并输出到控制部130。
第一解码部151-1对包含在从第一解复用部111-1输出的内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120再现经解码的内容。另外，控制部130可以将通过第二解复用部111-3输出的内容存储在存储部160。然而，本发明并不局限于此，控制部130可以将通过第一解码部151-1解码的内容存储在存储部160。
另外，第一解码部151-1可以将经解码的内容输出到事件检测部131，而且事件检测部131可以对通过第一解码部151-1解码的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间。如上所述，如果通过对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将针对检测的至少一个事件区间的时间信息传递给控制部130。
据此，控制部130基于针对已检测出的事件区间的时间信息，从针对已存储于存储部160的内容的视频区间中，获取针对事件区间的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含针对获取到的事件区间的视频区间以及前后视频区间的事件摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
另外，如果接收了摘要内容服务命令，则控制部130控制输出部120将针对当前再现中的内容的视频数据输出到屏幕的第一区域。与此同时，控制部130通过第二解码部151-3对针对已存储于存储部160的摘要内容的视频数据以及音频数据进行解码，并控制输出部120将通过第二解码部151-3解码的摘要内容的视频数据依次地输出到屏幕的第二区域。此外，控制部130控制输出部120在屏幕的第三区域显示已存储的按摘要内容匹配的缩略图图像。据此，在广播接收装置100的第一区域可以再现用户请求的频道的内容，在第二区域可以再现与该频道的内容相关的摘要内容，在第三区域可以显示针对摘要内容的缩略图图像。
另外，如果选择了显示于第三区域的缩略图图像中的一个，则控制部130控制输出部120从针对与选择的缩略图图像匹配的摘要内容的视频数据开始依次输出到屏幕的第二区域。据此，可以从与用户选择的缩率图像匹配的摘要内容开始依次地在广播接收装置100的第二区域中进行再现。
如上所述，根据本发明的广播接收装置100包含第一解复用部111-1以及第二解复用部111-3、第一解码部151-1以及第二解码部151-3，从而能够相比于由最小配置构成的广播接收装置100而更为有效地同时再现用户请求的内容以及与相同内容相关的摘要内容。
图38是根据本发明的又一实施例的生成针对内容的摘要内容的广播接收装置的第三框图。
具体而言，如图38所示，广播接收装置100可以包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1可以从多个按频道的内容中提取与用户的命令对应的频道的内容并输出到第一解码部151-1，而且第二解复用部111-3提取与第一解复用部111-1提取的相同的频道的内容并输出到第二解码部151-3。而且，第三解复用部111-5可以提取与第一解复用部111-1以及第二解复用部111-3提取的相同的频道的内容并输出到控制部130。
接收到从第一解复用部111-1输出的内容的第一解码部151-1针对接收到的内容中包含的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120输出解码的内容。与此同时，控制部130可以将从第三解复用部111-5输出的内容存储到存储部160。然而本发明并不局限于此，控制部130可以通过第一解码部151-1对从第三解复用部111-5输出的内容进行解码，并将其存储到存储部160。
另外，第二解码部151-3可以对从第二解复用部111-3输出的内容进行解码，并将经解码的内容输出到事件检测部131。据此，事件检测部131可以对通过第二解码部151-3解码的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间。如上所述，如果通过对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将与检测出的至少一个事件区间对应的时间信息传递给控制部130。
据此，控制部130基于针对已检测出的事件区间的时间信息，来从针对已存储于存储部160的录制内容或者以预设定的时间单位临时存储的内容的视频区间中，获取针对事件区间的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可获取存在于以该视频区间为基准的预设定的固定时间内的前后视频区间，并可以基于包含针对获取到的事件区间的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
之后，如果输入了针对摘要内容再现的用户命令，则控制部130可以通过第一解码部151-1或第二解码部151-3对已存储的摘要内容的视频数据以及音频数据进行解码并将其再现，并可以在屏幕上显示按摘要内容匹配的缩略图图像。另外，如果选择了显示于屏幕的缩略图图像中的一个，则控制部130可以从与选择的缩略图图像匹配的摘要内容开始通过第一解码部151-1解码并将其依次再现。
如上所述，根据本发明的广播接收装置100包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1以及第二解码部151-3，从而能够相比于在图34或图36中说明的广播接收装置100而更为稳定且有效地再现用户请求的内容并生成与该内容相关的摘要内容。
图39是根据本发明的又一实施例的同时再现内容以及针对相同的内容的摘要内容的广播接收装置的第三框图。
如图39所示，广播接收装置100可以包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1至第三解码部151-5、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1可以从多个按频道的内容中提取与用户命令对应的频道的内容并输出到第一解码部151-1，而且第二解复用部111-3提取与第一解复用部111-1提取的相同的频道的内容并输出到第二解码部151-3。而且，第三解复用部111-5可以提取与第一解复用部111-1以及第二解复用部111-3提取的相同的频道的内容并输出到控制部130。
第一解码部151-1对包含在从第一解复用部111-1输出的内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120再现通过第一解码部151-1解码的内容。另外，控制部130可以将通过第三解复用部111-5输出的内容存储在存储部160。然而，本发明并不局限于此，控制部130可以将通过第一解码部151-1至第三解码部151-5中的一个解码部解码的内容存储在存储部160。
另外，第二解码部151-3将经解码的内容输出到事件检测部131，而且事件检测部131对通过第二解码部151-3解码的内容的视频数据以及音频数据中的至少一个进行分析，从而检测与预设定条件对应的至少一个事件区间。如上所述，如果对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将针对检测出的至少一个事件区间的时间信息传递给控制部130。
据此，控制部130基于针对已检测出的事件区间的时间信息，来从针对已存储于存储部160的录制内容或者以预设定的时间单位临时存储的内容的视频区间中，获取针对事件区间的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含针对获取到的事件区间的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
另外，如果接收到摘要内容服务命令，则控制部130控制输出部120将针对当前再现中的内容的视频数据输出到屏幕的第一区域。与此同时，控制部130通过第三解码部151-5对针对已存储于存储部160的摘要内容的视频数据以及音频数据进行解码，并控制输出部120使通过第三解码部151-5解码的摘要内容的视频数据依次地输出到屏幕的第二区域。此外，控制部130控制输出部120在屏幕的第三区域显示已存储的按摘要内容匹配的缩略图图像。据此，在广播接收装置100的第一区域可以再现用户请求的频道的内容，在第二区域可以再现与该频道的内容相关的摘要内容，在第三区域可以显示针对摘要内容的缩略图图像。
另外，如果选择了显示于第三区域的缩略图图像中的一个缩略图图像，则控制部130控制输出部120从针对与选择的缩略图图像匹配的摘要内容的视频数据开始依次输出到屏幕的第二区域。据此，可以从与用户选择的缩略图图像匹配的摘要内容开始依次地在广播接收装置100的第二区域中再现。
如上所述，根据本发明的广播接收装置100包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1至第三解码部151-5，从而能够相比于在图35或图37中说明的广播接收装置100而更为稳定且有效地同时再现用户请求的内容以及与相同的内容相关的摘要内容。
图40是根据本发明的又一实施例的生成针对内容的摘要内容的广播接收装置的第四框图。
具体而言，如图40所示，广播接收装置100可以包含：解复用部111、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，解复用部111提取多个按频道的内容中的与用户命令对应的频道的内容并输出到第一解码部151-1以及第二解码部151-3和控制部130。
接收到从解复用部111输出的内容的第一解码部151-1针对接收到的内容中包含的视频以及音频执行解码，而且控制部130可以通过输出部120输出解码的内容。
与此同时，控制部130将通过解复用部111输出的内容存储到存储部160。然而本发明并不局限于此，控制部130还可以通过第一解码部151-1对从解复用部111输出的内容进行解码，并将其存储到存储部160。
另外，第二解码部151-3可以对从解复用部111输出的内容进行解码，并将经解码的内容输出到事件检测部131。据此，事件检测部131可以对通过第二解码部151-3解码的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间，并将与检测出的事件区间对应的时间信息传递给控制部130。
据此，控制部130基于与已检测出的事件区间对应的时间信息，来从与已存储于存储部160的录制内容或者以预设定的时间单位临时存储的内容对应的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含与获取到的事件区间对应的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
之后，如果输入了针对摘要内容再现的用户命令，则控制部130可以通过第一解码部151-1对已存储的摘要内容的视频数据以及音频数据进行解码并将其再现，并可以在屏幕上显示按摘要内容匹配的缩略图图像。另外，如果选择了显示于屏幕的缩略图图像中的一个，则控制部130可通过第一解码部151-1从与选择到的缩略图图像匹配的摘要内容开始进行解码并将其依次再现。
如上所述，根据本发明的广播接收装置100包含第一解码部151-1以及第二解码部151-3的构成要素，并通过第一解码部151-1以及第二解码部151-3而针对用户请求的内容执行解码，从而能够相比于由最小配置构成的广播接收装置100而更为稳定且有效地再现用户请求的内容，并生成与该内容相关的摘要内容。
图41是根据本发明的一实施例的生成针对与视听中的内容相异的另一内容的摘要内容的广播接收装置的第一框图。
如图41所示，广播接收装置100可以包含：第一解复用部111-1以及第二解复用部111-3、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1从多个按频道的内容中提取与用户的命令对应的第一频道的第一内容并输出到第一解码部151-1。而且，第二解复用部111-3从多个按频道的内容中提取第二频道的第二内容并输出到第二解码部151-3以及控制部130。
第一解码部151-1可以针对包含在从第一解复用部111-1输出的第一内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120输出通过第一解码部151-1解码的第一内容。与此同时，控制部130可以将从第二解复用部111-3输出的第二内容存储到存储部160。
另外，第二解码部151-3可以对从第二解复用部111-3输出的第二内容进行解码，并将经解码的第二内容输出到事件检测部131。据此，事件检测部131可以对通过第二解码部151-3解码的第二内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间，并将与检测出的事件区间对应的时间信息传递给控制部130。
据此，控制部130基于与已检测出的事件区间对应的时间信息，来从与已存储于存储部160的第二内容或者以预设定的时间单位临时存储的第二内容对应的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含与获取到的事件区间对应的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
之后，如果输入了针对摘要内容再现的用户命令，则控制部130可以通过第一解码部151-1对已存储的摘要内容的视频数据以及音频数据进行解码并将其再现，并可以在屏幕上显示按摘要内容匹配的缩略图图像。另外，如果选择了显示于屏幕的缩略图图像中的一个，则控制部130可以从与选择的缩略图图像匹配的摘要内容开始通过第一解码部151-1进行解码并将其依次再现。
如上所述，根据本发明的广播接收装置100可以通过最小配置而再现用户请求的第一内容并生成与第二内容相关的摘要内容。
图42是根据本发明的一实施例的同时再现视听中的内容和针对与该内容不同的其他内容的摘要内容的广播接收装置的第一框图。
如图42所示，广播接收装置100可以包含第一解复用部111-1以及第二解复用部111-3、第一解码部151-1至第三解码部151-5、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1从多个按频道的内容中提取与用户命令对应的第一频道的第一内容并输出到第一解码部151-1。而且，第二解复用部111-3从多个按频道的内容中提取第二频道的第二内容并输出到第二解码部151-3以及控制部130。
第一解码部151-1可以针对包含在从第一解复用部111-1输出的第一内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120再现通过第一解码部151-1解码的第一内容。另外，控制部130可以将从第二解复用部111-3输出的第二内容存储到存储部160。然而，本发明并不局限于此，控制部130可以将通过第二解码部151-3或者第三解码部151-5解码的第二内容存储到存储部160。
另外，第二解码部151-3将经解码的内容输出到事件检测部131，而且事件检测部131对通过第二解码部151-3解码的第二内容的视频数据以及音频数据中的至少一个进行分析，从而检测与预设定条件对应的至少一个事件区间。如上所述，如果对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将与检测出的至少一个事件区间对应的时间信息传递给控制部130。
据此，控制部130基于与已检测出的事件区间对应的时间信息，来从已存储于存储部160的第二内容对应的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含与获取到的事件区间对应的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
另外，如果接收到摘要内容服务命令，则控制部130控制输出部120将与当前再现中的第一内容对应的视频数据输出到屏幕的第一区域。与此同时，控制部130通过第三解码部151-5对针对与已存储于存储部160的第二内容相关联的摘要内容的视频数据以及音频数据执行解码，并控制输出部120将通过第三解码部151-5解码的摘要内容的视频数据依次地输出到屏幕的第二区域。此外，控制部130控制输出部120在屏幕的第三区域显示已存储的按摘要内容匹配的缩略图图像。据此，在广播接收装置100的第一区域可以再现用户请求的第一频道的第一内容，在第二区域可以再现与第二频道的第二内容相关的摘要内容，在第三区域可以显示与摘要内容对应的缩略图图像。
另外，如果选择了显示于第三区域的缩略图图像中的一个，则控制部130控制输出部120从针对与选择到的缩略图图像匹配的摘要内容的视频数据开始依次输出到屏幕的第二区域。据此，可以从与用户选择的缩略图图像匹配的摘要内容开始依次地在广播接收装置100的第二区域中再现。
如上所述，根据本发明的广播接收装置100可以仅使用最小配置而同时再现用户请求的第一内容以及关于第二内容的摘要内容。
图43是根据本发明的又一实施例的生成针对与视听中的内容不同的另一内容的摘要内容的广播接收装置的第二框图。
如图43所示，广播接收装置100可以包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1以及第二解码部151-3、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1从多个按频道的内容中提取与用户命令对应的第一频道的第一内容并输出到第一解码部151-1。而且，第二解复用部111-3从多个按频道的内容中提取第二频道的第二内容并输出到第二解码部151-3，第三解复用部111-5从多个按频道的内容中提取第二频道的第二内容并输出到控制部130。
第一解码部151-1可以针对包含在从第一解复用部111-1输出的第一内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120输出通过第一解码部151-1解码的第一内容。与此同时，控制部130可以将从第三解复用部111-5输出的第二内容存储到存储部160。
另外，第二解码部151-3可以对从第二解复用部111-3输出的第二内容进行解码，并将经解码的第二内容输出到事件检测部131。据此，事件检测部131可以对通过第二解码部151-3解码的第二内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间，并将与检测出的事件区间对应的时间信息传递给控制部130。
据此，控制部130基于与已检测出的事件区间对应的时间信息，来从与已存储于存储部160的第二内容或者以预设定的时间单位临时存储的第二内容对应的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含与获取到的事件区间对应的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
之后，如果输入了针对摘要内容再现的用户命令，则控制部130可以通过第一解码部151-1对已存储的摘要内容的视频数据以及音频数据进行解码并将其再现，并可以在屏幕上显示按摘要内容匹配的缩略图图像。另外，如果选择了显示于屏幕的缩略图图像中的一个，则控制部130可以从与选择的缩略图图像匹配的摘要内容开始通过第一解码部151-1进行解码并将其依次再现。
如上所述，根据本发明的广播接收装置100包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1以及第二解码部151-3的构成要素，从而能够更为稳定且有效地再现用户请求的第一内容，并生成与第二内容相关的摘要内容。
图44是根据本发明的又一实施例的生成针对与视听中的内容不同的另一内容的摘要内容的广播接收装置的第二框图。
如图44所示，广播接收装置100可以包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1至第三解码部151-5、输出部120、事件检测部131、控制部130以及存储部160。
在此情况下，第一解复用部111-1从多个按频道的内容中提取与用户命令对应的第一频道的第一内容并输出到第一解码部151-1。而且，第二解复用部111-3提取与用户命令对应的第二频道的第二内容并输出到第二解码部151-3，第三解复用部111-5与第二解复用部111-3相同地提取第二频道的第二内容并输出到控制部130。
第一解码部151-1可以针对包含在从第一解复用部111-1输出的第一内容中的视频数据以及音频数据执行解码，而且控制部130可以通过输出部120输出通过第一解码部151-1解码的第一内容。另外，控制部130可以将从第三解复用部111-5输出的第二内容存储到存储部160。然而，本发明并不局限于此，控制部130可以将通过第三解码部151-5解码的第二内容存储到存储部160。
另外，第二解码部151-3将经解码的第二内容输出到事件检测部131，而且事件检测部131对通过第二解码部151-3解码的第二内容的视频数据以及音频数据中的至少一个进行分析，从而检测与预设定条件对应的至少一个事件区间。如上所述，如果对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测出与预设定条件对应的至少一个事件区间，则事件检测部131将与检测出的至少一个事件区间对应的时间信息传递给控制部130。
据此，控制部130基于与已检测出的事件区间对应的时间信息，来从与已存储于存储部160的第二内容或者以预设定的时间单位临时存储的第二内容对应的视频区间中，获取与事件区间对应的视频区间。之后，如果获取到的视频区间为体育相关内容，则控制部130可以以该视频区间为基准而获取存在于预设定的固定时间内的前后视频区间，并可以基于包含与获取到的事件区间对应的视频区间以及前后视频区间的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则控制部130将构成已生成的摘要内容的视频区间中的与预设定条件对应的一个视频区间确定为缩略图图像，并将已生成的摘要内容和缩略图图像彼此匹配而存储到存储部160。
另外，如果接收了摘要内容服务命令，则控制部130控制输出部120将与当前再现中的第一内容对应的视频数据输出到屏幕的第一区域。与此同时，控制部130通过第三解码部151-5对针对与已存储于存储部160的第二内容相关的摘要内容的视频数据以及音频数据执行解码，并控制输出部120将通过第三解码部151-5解码的摘要内容的视频数据依次地输出到屏幕的第二区域。此外，控制部130控制输出部120在屏幕的第三区域显示已存储的按摘要内容匹配的缩略图图像。据此，在广播接收装置100的第一区域可以再现用户请求的第一频道的第一内容，在第二区域可以再现与第二频道的第二内容相关的摘要内容，在第三区域可以显示与摘要内容对应的缩略图图像。
另外，如果选择了显示于第三区域的缩略图图像中的一个，则控制部130控制输出部120从针对与选择的缩略图图像匹配的摘要内容的视频数据开始依次输出到屏幕的第二区域。据此，可以从与用户选择的缩略图图像匹配的摘要内容开始依次地在广播接收装置100的第二区域中进行再现。
如上所述，根据本发明的广播接收装置100包含第一解复用部111-1至第三解复用部111-5、第一解码部151-1至第三解码部151-5，从而能够更为稳定且有效地同时再现用户请求的第一内容以及关于第二内容的摘要内容。
到目前为止，已对在根据本发明的广播接收装置中提供关于内容的摘要内容服务的操作进行了详细的说明。以下，对在根据本发明的广播接收装置中提供摘要内容服务的方法进行详细的说明。
图45是根据本发明的一实施例的在广播接收装置中提供摘要内容服务的方法的流程图。
如图45所示，广播接收装置100通过解复用部提取多个频道中的与用户命令对应的频道的内容(S4510)。如果获取到如上所述的内容，则广播接收装置100将包含在提取到的内容中的视频数据以及音频数据解码(S4520)。之后，广播接收装置100对经解码的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的至少一个事件区间(S4530)。
检测事件区间的方法已在上文中详细地描述，因此以下将省略对该方法的说明。
若基于预设定条件来检测到至少一个事件区间，则广播接收装置100基于检测出的事件区间来确定内容摘要区间，并基于确定的摘要内容区间来生成摘要内容(S4540、S4550)。具体而言，如果检测出事件区间，则广播接收装置100基于检测出事件区间的时间信息来获取针对已存储的录制内容或者与以预设定的时间单位存储的实时内容的视频区间中的与事件区间对应的视频区间。之后，广播接收装置100对获取到的视频区间进行分析而判断该视频区间的内容是否为体育相关内容。如果根据判断结果是体育相关内容，则广播接收装置100以与检测出的事件区间对应的视频区间为基准而获取在预设定的固定时间内存在的前后视频区间。
之后，广播接收装置100判断获取到的前后视频区间中是存在场景变化的区间，如果没有场景变化的区间，则将针对检测出的事件区间的视频区间以及以该视频区间为基准而存在于固定时间内的前后视频区间确定为内容摘要区间。
另外，如果判断为在获取到的前后视频区间中的至少一个视频区间存在场景变化，则广播接收装置100将预设定的固定时间改变来获取与针对检测出的事件区间视频区间相关的前后视频区间。之后，广播接收装置100可以将针对检测出的事件区间的视频区间以及在改变后的固定时间内存在的前后视频区间确定为摘要区间。
另外，根据本发明的固定时间可以包含绝对固定时间，而且这种绝对固定时间无法改变。因此，广播接收装置100判断在存在于固定时间内的前后视频区间中的除了存在于绝对固定时间内的前后视频区间之外的剩余前后视频区间中是否存在场景变化的区间。根据判断结果，如果存在场景变化的区间，则广播接收装置100在除了绝对固定时间之外的剩余固定时间内改变固定时间，从而获取与针对检测出的事件区间的视频区间相关的前后视频区间。
之后，广播接收装置100确定包含针对事件区间对应的视频区间以及以该视频区间为基准而存在于预设定的固定时间或改变后的固定时间内的前后视频区间的内容摘要区间，并基于确定的内容摘要区间来生成摘要内容。如果生成如上所述的摘要内容，则广播接收装置100将构成该摘要内容的广播区间中的与预设定条件对应的一个视频区间的视频图像确定为缩略图图像，并将确定的缩略图图像和摘要内容匹配并存储。
之后，广播接收装置100根据用户命令而同时再现用户请求的内容以及已存储的摘要内容(S4560)。在此，摘要内容可以是与当前视听中的内容相关的内容或者与不同于当前视听中的内容的其他内容相关的内容。即，如果用户命令是针对与视听中的内容相同的内容的摘要内容服务命令，则广播接收装置100同时再现视听中的内容以及关于该内容的摘要内容。另外，如果用户命令是针对与视听中的内容不同的内容的摘要内容服务命令，则广播接收装置100同时再现视听中的内容和与其他内容相关的摘要内容。
图46是关于根据本发明的一实施例的广播接收装置中生成及再现摘要内容的方法的流程图。
如图46所示，若接收到用户命令，则广播接收装置100判断接收到的用户命令是否为针对相同的频道的摘要内容服务请求。如果根据判断结果是针对相同的频道的摘要内容服务请求，则广播接收装置100从当前再现中的内容生成摘要内容(S4610)。如上所述，广播接收装置100从当前再现中的内容获取与预设定条件对应的事件区间，并基于检测到事件区间的时间信息来获取与事件区间对应的视频区间。之后，广播接收装置100基于获取到的视频区间来获取存在于预设定的固定时间的前后视频区间，并基于针对获取到的事件区间的视频区间以及前后视频区间来生成针对当前再现中的内容的摘要内容(S4620)。之后，广播接收装置100同时输出用户请求的内容以及与该内容相关的摘要内容(S4630)。即，广播接收装置100在第一区域显示当前再现中的内容，并将与该内容相关的摘要内容显示在第二区域。
另外，广播接收装置100可以将针对与该内容相关地生成的摘要内容的缩略图图像显示在第三区域。如果选择了如上所述的缩略图图像中的一个，则广播接收装置100可以从与选择到的缩略图图像匹配的摘要内容开始依次地显示在第二区域。
另外，如果在S4610步骤中，是关于与当前再现中的内容(以下，称之为第一内容)不同的另一内容(以下，称之为第二内容)的摘要内容服务请求，则广播接收装置100生成关于第二内容的摘要内容(S4640)。之后，广播接收装置100同时输出第一内容和关于第二内容的摘要内容(S4650)。
具体而言，广播接收装置100通过第一解复用部提取第一内容，并通过第一解码部对第一内容执行解码，并将其显示在第一区域。而且，广播接收装置100通过第二解复用部提取第二内容，并从提取到的第二内容中检测与预设定条件对应的事件区间。之后，广播接收装置100基于从第二内容检测出事件区间的时间信息来获取与事件区间对应的视频区间。之后，广播接收装置100基于获取到的视频区间来获取存在于预设定的固定时间的前后视频区间，并基于获取到的与事件区间对应的视频区间以及前后视频区间来生成关于第二内容的摘要内容。
据此，广播接收装置100可以在第一区域再现第一内容，同时可以在第二区域再现关于第二内容的摘要内容。另外，广播接收装置100可以将关于与第二内容相关地生成的摘要内容的缩略图图像显示在第三区域。如果选择了如上所述的缩略图图像中的一个，则广播接收装置100可以从与选择到的缩略图图像匹配的摘要内容开始依次地显示在第二区域。
以下，对在上述的广播接收装置100中生成用于选择性地输出与事件区间对应的视频区间的书签信息的操作及方法进行详细的说明。
如上所述，数据处理部150将接收到的内容或已存储的录制内容的视频数据以及音频数据信号处理为可输出的形态。为此，信号处理部150可以包含解码部151、缩放器(scaler)153以及去交错(De-interlacing)部155中的至少一个。如上所述，解码部151对接收到的内容或已存储的录制内容的视频数据以及音频数据进行解码。缩放器153缩放经解码的视频数据，而且去交错部155对经解码的视频数据后续去交错而转换为逐行扫描图像。上述的解码部151、缩放器153以及去交错部155是用于进行图像处理的公知的构成要素，因此在本发明中省略详细的说明。
另外，上述的控制部130根据通过输入部170接收到的录制命令而对通过接收部110或通信部140接收到的内容执行录制，从而将针对该内容的录制内容存储到存储部160。
不仅如此，控制部130根据通过输入部170接收到的摘要内容生成命令而执行用于针对用户请求的内容提供摘要内容服务的操作。具体而言，控制部130对通过数据处理部150而被信号处理的内容的视频数据以及音频数据中的至少一个进行分析，从而检测与预设定条件对应的事件区间。之后，控制部130生成用于从与该内容相关的录制内容中仅选择性地输出与已检测的事件区间相关的视频区间的书签信息，并将其存储到存储部160。
在此，与事件区间对应的视频区间可以是在录制内容中被筛选为强调图像的视频区间。而且，用于选择性地输出与事件区间对应的视频区间的书签信息可以包含：包括事件区间的摘要内容区间的开始及终止时间点的时间信息。除此之外，书签信息可以包含：包含该事件区间的摘要内容区间所包含的视频图像中的被确定为代表缩略图图像的视频图像。因此，控制部130可以生成书签信息(该书签信息包括：包含摘要内容区间的开始及终止时间点的时间信息和包含该事件区间的摘要内容区间所包含的视频图像中的被确定为代表缩略图图像的视频图像)，并将生成的书签信息存储到存储部160。
另外，如上所述，用于存储录制内容、摘要内容以及针对该摘要内容的缩略图图像的存储部160可以根据用户的请求而存储与视听中的内容或预约设定的内容相关地录制的录制内容、以及用于从该录制内容中选择性输出摘要内容区间的书签信息。
另外，如果通过上述的实施例而检测出事件区间，则控制部130可以确定包含该事件区间的摘要内容区间，并可以确定针对该摘要内容区间的代表缩略图图像。如果确定针对上述的摘要内容区间的代表缩略图图像，则控制部130可以生成书签信息(该书签信息包括：包含事件区间的摘要内容区间的开始及终止时间点的时间信息和被确定为代表缩略图图像的视频图像)，并将生成的书签信息存储到存储部160。
另外，如果通过输入部170而接收到录制内容再现命令，则控制部130可以控制输出部120而从已存储的多个录制内容中输出与内容再现命令对应的录制内容。此时，如果通过输入部170接收的录制内容再现命令为摘要内容服务命令，则控制部130可以控制输出部120而从该录制内容中仅选择性输出与摘要内容区间对应的视频区间。
具体而言，控制部130根据摘要内容服务命令而获取针对通过输出部120输出的录制内容的书签信息。之后，控制部130可基于录制内容的再现时间信息来提取包含在针对该录制内容的书签信息中的与事件信息对应的视频区间，并控制输出部120仅输出提取到的摘要内容区间。据此，输出部120可以通过视频输出部121以及音频输出部123中的至少一个仅选择性输出录制内容中的与摘要内容区间对应的视频区间。
图47是根据本发明的一实施例的广播接收装置中输出摘要内容区间的示意图。
如图47所示，控制部130可以与用户请求的录制内容相关地获取已存储的书签信息。如果获取上述的书签信息，则控制部130获取包含在获取到的书签信息中的摘要内容区间的再现开始时间点的时间信息和再现终止时间点的时间信息。如图所示，A摘要内容区间4710的再现开始时间点可以为a时间，再现终止时间点可以为a'时间。而且，B摘要内容区间4720的再现开始时间点可以为b时间，再现终止时间点可以为b'时间。最后，C摘要内容区间4730的再现开始时间点可以为c时间，再现终止时间点可以为c'时间。
如上所述，如果基于已获取的书签信息来获取关于A摘要内容区间4710至C摘要内容区间4730的时间信息，则控制部130控制输出部120以录制内容的再现时间点为基准而输出与从a时间到a'时间对应的视频区间。据此，输出部120输出录制内容的视频区间中的与从a时间到a'时间对应的视频区间。之后，如果与从a时间到a'时间对应的视频区间的再现终止，即，与a'时间对应的视频区间的再现终止，则控制部130控制输出部120以录制内容的再现时间点为基准而输出与从b时间到b'时间对应的视频区间。据此，输出部120输出录制内容的视频区间中的与从b时间到b'时间对应的视频区间。之后，如果与从b时间到b'时间对应的视频区间的再现终止，即，如果与b'时间对应的视频区间的再现终止，则控制输出部120以录制内容的再现时间点为基准而输出与从c时间到c'时间对应的视频区间。据此，输出部120输出录制内容的视频区间中的、与从c时间到c'时间对应的视频区间。
如上所述，根据本发明的广播接收装置100可以基于书签信息来选择性地再现录制内容的视频区间中的与强调视频对应的摘要内容区间。
另外，如果接收到录制内容再现命令，则控制部130获取已存储的多个录制内容中的与接收到的内容再现命令对应的录制内容，并判断是否存储有与获取到的录制内容相关的书签信息。如果根据判断结果，存储有与录制内容相关的书签信息，则控制部130控制输出部120输出与内容再现命令对应的录制内容以及包含在书签信息中的代表缩略图图像。据此，输出部120可以通过视频输出部121在第一区域输出关于录制内容的视频数据，并可以在第二区域输出多个代表缩略图图像。
图48是根据本发明的一实施例的广播接收装置中输出录制内容的示意图。
如图48所示，如果接收到用户输入的录制内容再现命令，则控制部130获取从已存储的多个录制内容中的与接收到的内容再现命令对应的录制内容。此时，控制部130判断是否在存储部160存储有与获取到的录制内容相关的书签信息。如果根据判断结果，存储有与录制内容相关的书签信息，则控制部130控制输出部120输出与录制内容再现命令对应的录制内容4810以及包含在与该录制内容相关的书签信息中的代表缩略图图像。据此，输出部120可以通过视频输出部121在第一区域输出录制内容的视频数据4810，并可以在第二区域输出包含在与录制内容相关的书签信息中的第一代表缩略图图像4820至第三代表缩略图图像4840。
在如上所述的第一代表缩略图图像4820至第三代表缩略图图像4840输出到第二区域的状态下，如果选择了第一代表缩略图图像4820，则控制部130获取与选择的第一代表缩略图图像4820相关的摘要内容区间的时间信息，并控制输出部120基于获取到的事件信息来从与选择到的代表缩略图图像相关的摘要内容区间开始依次输出录制内容。在此，从与选择的第一代表缩略图图像4820相关的摘要内容区间开始依次输出的情况可以将如下的情况全部包括：从与第一代表缩略图图像4820相关的摘要内容区间开始再现录制内容；或者仅选择性地输出录制内容中的与第一代表缩略图图像4820至第三代表缩略图图像4840相关的摘要内容区间。
另外，用于通过上述的多样的实施例而检测关于内容的事件区间的控制部130在从信号处理后的视频数据以及音频数据中的视频数据中检测事件区间时，优选地，根据该视频数据的信号处理状态而采用不同的算法来检测事件区间。即，通过数据处理部150而信号处理的视频数据可以是经解码的视频数据、经去交错的视频数据以及经缩放的视频数据。除此之外，视频数据可以是根据时序驱动部180的驱动信号而输出的数据，其中，时序驱动部180生成与经信号处理的视频数据对应的驱动控制信号。
因此，控制部130可以根据通过构成数据处理部150的解码部151而被解码的视频数据、通过去交错部155而被去交错的视频数据、通过缩放器153而被缩放的视频数据以及根据时序驱动部180的驱动控制信号而输出的视频数据而采用不同的算法，从而对各个视频数据进行分析而检测事件区间。
具体而言，在从通过解复用部111而解复用的内容中检测事件区间的情况下，控制部130可以在对包含在该内容中的视频数据解码之后分析经解码的视频，从而检测与预设定条件对应的视频区间。而且，如果接收到通过解码部151而解码的内容的视频数据，则控制部130对交错(Interlacing)的视频图像进行分析而检测与预设定条件对应的事件区间。此外，如果接收到通过缩放器153而缩放的视频数据，则控制部130可以考虑视频数据的关于视频图像的分辨率而检测与预设定条件对应的事件区间。此外，如果接收到通过去交错部155而被去交错的内容的视频数据，则控制部130可以考虑关于接收到的视频数据的视频图像的输入分辨率而检测与预设定条件对应的事件区间。最终，如果接收到根据时序驱动部180的驱动控制信号而输出的视频数据，则可以通过分析针对该视频数据的视频图像的低电压差动信号(LowVoltageDifferentialSignal：LVDS)或差动信号(DifferentialSignal)而检测与预设定条件对应的事件区间。
另外，如上所述，根据用户的摘要内容服务命令，控制部130可以通过上述的事件检测部131以及录制部133而执行内容的录制以及事件区间的检测。事件检测部131可以对通过接收部110接收的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的事件区间，而且录制部153可以对通过接收部110接收到的内容执行录制而生成关于该内容的录制内容。
因此，如果接收到关于视听中的内容的摘要内容服务命令，则控制部130控制数据处理部150以及输出部120而输出通过接收部110接收到的内容。与此同时，控制部130控制录制部133和事件检测部131而执行针对该内容的录制以及事件的检测。据此，录制部133对通过接收部110接收到的内容执行录制而生成录制内容，同时，事件检测部131检测通过接收部110接收到的内容的视频数据以及音频数据中的至少一个的与预设定条件对应的事件区间。因此，控制部130可以基于通过事件检测部131检测出的事件区间来确定摘要内容区间，生成关于确定的摘要内容区间的书签信息，并将生成的书签信息与通过录制部133而生成的录制内容一同匹配并存储到存储部160。
另外，如果接收到关于与视听中的内容不同的内容的摘要内容服务命令，则控制部130控制输出部120而输出通过第一调谐部113-1选择的频道的内容。与此同时，控制部130控制录制部133和事件检测部131执行针对通过第二调谐部113-3选择的频道的内容的录制以及事件的检测。据此，录制部133录制通过第二调谐部113-3的选择而接收的内容，从而生成录制内容，同时，事件检测部131检测通过第二调谐部113-3的选择而接收到的内容的视频数据以及音频数据中的至少一个的与预设定条件对应的事件区间。因此，控制部130可以基于通过事件检测部131检测的事件区间来确定与该内容相关的摘要内容区间，生成关于确定的摘要内容区间的书签信息，并将生成的书签信息与通过录制部133而生成的录制内容彼此匹配并一同存储到存储部160。
到目前为止，已根据本发明的广播接收装置100的各个构成进行了详细的说明。以下，将通过多样的实施例而对提供摘要内容服务的广播接收装置100的构成要素进行更为具体的说明。只不过，在上文中已与摘要内容服务相关地对各个构成要素的操作进行了详细的说明，因此，以下将会通过图49至图58而对提供摘要内容服务的广播接收装置100的构成方式进行详细的说明。
图49是根据本发明的一实施例的提供摘要内容服务的广播接收装置的第一框图。
如图49所示，解复用部111提取通过调谐部113选择的多个频道中的用户请求的频道的内容，并将提取到的内容分别输出到数据处理部150以及控制部130。通过解复用部111接收到内容的数据处理部150通过解码部151执行针对内容的视频数据以及音频数据的解码并将其输出到缩放器153，而且缩放器153针对经解码的视频数据执行缩放而输出到时序驱动部180。时序驱动部180生成与通过缩放器153而被缩放的视频数据对应的驱动控制信号，而且视频输出部121基于从时序驱动部180生成的驱动控制信号来输出视频数据。
另外，如果接收到通过解复用部111而输出的内容，则控制部130通过录制部133以及事件检测部131执行针对该内容的录制以及事件区间的检测。具体而言，录制部133执行针对从解复用部111输出的内容的录制，来生成针对该内容的录制内容。而且事件检测部131针对从解复用部111输出的内容的视频数据以及音频数据执行解码，并对经解码的视频数据进行分析而检测与预设定条件对应的事件区间。此时，优选地，事件检测部131还对经解码的音频数据进行分析而检测与预设定条件对应的事件区间。以下，仅对在事件检测部131分析内容的视频数据而检测与预设定条件对应的事件区间的情况进行说明。
如果通过事件检测部131检测出事件区间，则如上所述，控制部130确定包含事件区间的摘要内容区间，并生成包含所确定的摘要内容区间的再现相关时间信息以及代表缩略图图像的书签信息。之后，控制部130可以将通过录制部133而生成的录制内容和书签信息彼此匹配并存储到存储部160。
图50是根据本发明的另一实施例的提供摘要内容服务的广播接收装置的第二框图。
如在图49中说明，如果提取到用户请求的频道的内容，则解复用部111将该内容输出到数据处理部150以及控制部130。据此，数据处理部150执行针对视频数据的信号处理，而且视频输出部121基于时序驱动部180的驱动控制信号来输出该视频数据。
另外，如图50所示，数据处理部150的解码部151对通过解复用部111而输出的内容执行视频数据的解码，并将经解码的视频数据输出到控制部130。据此，录制部133对通过解复用部111输出的内容执行录制而生成针对该内容的录制内容。而且，事件检测部131对从解码部151输出的视频数据进行分析而检测与预设定条件对应的事件区间。如果通过上述的录制部133以及事件检测部131而生成出录制内容并检测出事件区间，则控制部130可以如上所述地生成关于录制内容的书签信息，并将生成的书签信息和录制内容彼此匹配而存储到存储部160。
图51是根据本发明的又一实施例的提供摘要内容服务的广播接收装置的第三框图。
如在图49中说明，如果提取到用户请求的频道的内容，则解复用部111将该内容输出到数据处理部150以及控制部130。如果通过解复用部111而提取到用户请求的频道的内容，则数据处理部150执行针对视频数据的信号处理，而且视频输出部121基于时序驱动部180的驱动控制信号来输出该视频数据。
另外，数据处理部150的缩放器153对通过解码部151而解码的内容执行缩放，并且如图51所示，将经缩放的视频数据输出到控制部130。据此，录制部133对通过解复用部111输出的内容执行录制而生成针对该内容的录制内容。而且，事件检测部131对通过缩放器153而缩放的视频数据进行分析，从而检测与预设定条件对应的事件区间。此时，优选地，事件检测部131考虑到被缩放的视频数据的分辨率而检测事件区间。
如果通过如上所述的录制部133以及事件检测部131而完成内容的生成以及事件区间的检测，则控制部130可以如上所述地生成针对录制内容的书签信息，并将所生成的书签信息和录制内容彼此匹配而存储到存储部160。
图52是根据本发明的又一实施例的提供摘要内容服务的广播接收装置的第四框图。
如在图49中说明，如果提取到用户请求的频道的内容，则解复用部111将该内容输出到数据处理部150以及控制部130。据此，数据处理部150执行针对视频数据的信号处理，而且视频输出部121基于时序驱动部180的驱动控制信号来输出该视频数据。
另外，如图52所示，时序驱动部180生成与通过缩放器153而被缩放的视频数据的输出相关的驱动控制信号，并基于所生成的驱动控制信号而在向视频输出部121输出的时间点上将该视频数据输出到控制部130。据此，录制部133对通过解复用部111输出的内容执行录制而生成针对该内容的录制内容。而且，事件检测部131对从时序驱动部180输出的视频数据进行分析而检测与预设定条件对应的事件区间。此时，事件检测部131对基于时序驱动部180的驱动控制信号而输出的视频数据的低电压差分信号(LowVoltageDifferentialSignal：LVDS)或查分信号(DifferentialSignal)进行分析而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及分析引擎部131而完成内容的生成以及事件区间的检测，则控制部130可以如上所述地生成针对录制内容的书签信息，并将所生成的书签信息和录制内容彼此匹配而存储到存储部160。
图53是根据本发明的又一实施例的提供摘要内容服务的广播接收装置的第五框图。
如在图49中说明，如果提取到用户请求的频道的内容，则解复用部111将该内容输出到数据处理部150以及控制部130。据此，数据处理部150执行针对该内容的视频数据的信号处理。此时，在通过缩放器153而缩放通过上述的解码部151解码的视频数据之前，可以通过去交错部155而将经解码的视频数据转换为逐行扫描视频，之后通过缩放器153对转换为逐行扫描视频的视频数据执行缩放。
另外，如图53所示，去交错部155可以在将转换为逐行扫描视频的视频数据输出到缩放器153的同时将该视频数据输出到控制部130。据此，录制部133对通过解复用部111输出的内容执行录制而生成针对该内容的录制内容。而且，事件检测部131考虑到通过去交错部155而被转换为逐行扫描视频的视频数据的输入分辨率而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及事件检测部131而完成内容的生成以及事件区间的检测，则控制部130可以如上所述地生成针对录制内容的书签信息，并将所生成的书签信息和录制内容彼此匹配而存储到存储部160。
图54是根据本发明的一实施例的针对与视听中的内容不同的内容提供摘要内容服务的广播接收装置的第一框图。
如图54所示，第一解复用部111-1提取通过第一调谐部113-1选择的多个频道中的用户请求视听的频道的第一内容，并将提取到的第一内容输出到数据处理部150。通过第一解复用部111-1接收到内容的处理部150通过解码部151而对内容的视频数据以及音频数据执行解码，并将其输出到缩放器153，而且缩放器153针对经解码的视频数据执行缩放并输出到时序驱动部180。时序驱动部180生成与通过缩放器153解码的视频数据对应的驱动控制信号，而且视频输出部121基于时序驱动部180生成的驱动控制信号来输出视频数据。
另外，第二解复用部111-3提取通过第二调谐部113-3选择的多个频道中的用户请求摘要内容服务的频道的第二内容，并将提取到的第二内容输出到控制部130。如果接收到通过第二解复用部111-3输出的第二内容，则控制部130将通过录制部133以及事件检测部131而录制第二内容并检测事件区间。如上所述，录制部133针对从第二解复用部111-3输出的第二内容执行录制而生成关于第二内容的录制内容。并且，事件检测部131对从第二解复用部111-3输出的第二内容的视频数据执行解码，并分析经解码的视频数据而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及事件检测部131而生成内容并检测出事件区间，则控制部130生成关于录制内容的书签信息，并将生成的书签信息和录制内容彼此匹配并存储到存储部160。
图55是根据本发明的另一实施例的针对与视听中的内容不同的内容提供摘要内容服务的广播接收装置的第二框图。
如图55所示，如果提取到用户请求视听的频道的第一内容，则第一解复用部111-1将第一内容输出到数据处理部150。据此，数据处理部150的第一解码部151-1执行针对第一内容的视频数据以及音频数据的解码，并且第一缩放器153-1对通过第一解码部151-1解码的视频数据进行缩放并传递给时序驱动部180。据此，视频输出部121基于时序驱动部180的驱动控制信号来输出第一内容的视频数据。
另外，第二解复用部111-3提取通过第二调谐部113-3选择的多个频道中的用户请求摘要内容服务的频道的第二内容，并将提取到的第二内容输出到数据处理部150以及控制部130。
据此，数据处理部150的第二解码部151-3针对第二内容的视频数据以及音频数据执行解码，并将经解码的视频数据输出到控制部130。如果接收到通过第二解复用部111-3输出的第二内容和通过第二解码部151-3解码的视频数据，则控制部130通过录制部133以及事件检测部131录制第二内容并检测事件区间。具体而言，录制部133执行针对从第二解复用部111-3输出的第二内容的录制而生成针对第二内容的录制内容。而且，事件检测部131对通过第二解码部151-3解码的视频数据进行分析而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及事件检测部131而生成内容以及检测了事件区间，则控制部130可以生成针对录制内容的书签信息，并将所生成的书签信息和录制内容彼此匹配而存储到存储部160。
图56是根据本发明的又一实施例的针对与视听中的内容不同的内容提供摘要内容服务的广播接收装置的第三框图。
如图56所示，如果提取到用户请求视听的频道的第一内容，则第一解复用部111-1将第一内容输出到数据处理部150。据此，数据处理部150的第一解码部151-1执行针对第一内容的视频数据以及音频数据的解码，并且第一缩放器153-1将通过第一解码部151-1解码的视频数据进行缩放并传递给时序驱动部180。据此，视频输出部121基于时序驱动部180的驱动控制信号来输出第一内容的视频数据。
另外，第二解复用部111-3提取通过第二调谐部113-3选择的多个频道中的用户请求摘要内容服务的频道的第二内容，并将提取到的第二内容输出到数据处理部150和控制部130。据此，数据处理部150的第二解码部151-3针对第二内容的视频数据以及音频数据执行解码，而且第二缩放器153-3将通过第二解码部151-3而解码的视频数据缩放并输出到控制部130。如果接收到通过第二解复用部111-3而输出的第二内容和通过第二缩放器153-3而缩放的视频数据，则控制部130通过录制部133以及事件检测部131而录制第二内容并检测事件区间。具体而言，录制部133执行针对从第二解复用部111-3输出的第二内容的录制而生成针对第二内容的录制内容。而且，事件检测部131对通过第二缩放器部153-3而缩放的视频数据进行分析而检测与预设定条件对应的事件区间。此时，优选地，事件检测部131考虑到被缩放的视频数据的分辨率而检测事件区间。
如果通过如上所述的录制部133以及事件检测部131而生成内容以及检测到事件区间，则控制部130可以生成关于录制内容的书签信息，并将所生成的书签信息和录制内容彼此匹配而存储到存储部160。
图57是根据本发明的又一实施例的针对与视听中的内容不同的内容提供摘要内容服务的广播接收装置的第四框图。
如图57所示，如果提取到用户请求视听的频道的第一内容，则第一解复用部111-1将第一内容输出到数据处理部150。据此，数据处理部150的第一解码部151-1执行针对第一内容的视频数据以及音频数据的解码，并且第一缩放器153-1将通过第一解码部151-1解码的视频数据缩放并传递给时序驱动部180。据此，视频输出部121基于时序驱动部180的驱动控制信号来输出第一内容的视频数据。
另外，第二解复用部111-3提取通过第二调谐部113-3选择的多个频道中的用户请求摘要内容服务的频道的第二内容，并将提取到的第二内容输出到数据处理部150以及控制部130。
据此，数据处理部150的第二解码部151-3针对第二内容的视频数据以及音频数据执行解码，而且去交错部155将通过第二解码部151-3解码的视频数据转换为逐行扫描视频并输出到控制部130。如果接收到通过第二解复用部111-3输出的第二内容和通过去交错部180而转换为逐行扫描视频的视频数据，则控制部130通过录制部133以及事件检测部131而录制第二内容并检测事件区间。具体而言，录制部133执行针对从第二解复用部111-3输出的第二内容的录制而生成关于第二内容的录制内容。而且，事件检测部131可以考虑通过去交错部155而转换为逐行扫描视频的视频数据的输入分辨率而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及事件检测部131而生成内容并检测出事件区间，则控制部130生成关于录制内容的书签信息，并将生成的书签信息和录制内容彼此匹配并存储到存储部160。
图58是根据本发明的又一实施例的针对与视听中的内容不同的内容提供摘要内容服务的广播接收装置的第五框图。
如图58所示，如果提取到用户请求视听的频道的第一内容，则第一解复用部111-1将第一内容传递给数据处理部150。据此，数据处理部150的第一解码部151-1执行针对第一内容的视频数据以及音频数据的解码，并且第一缩放器153-1将通过第一解码部151-1解码的视频数据缩放并输出到第一时序驱动部180-1。据此，视频输出部121基于第一时序驱动部180-1的驱动控制信号来输出第一内容的视频数据。
另外，第二解复用部111-3提取通过第二调谐部113-3选择的多个频道中的用户请求摘要内容服务的频道的第二内容，并将提取到的第二内容输出到数据处理部150以及控制部130。据此，数据处理部150的第二解码部151-3针对第二内容的视频数据以及音频数据执行解码，而且第二缩放部153-2将经解码的视频数据缩放并输出到第二时序驱动部180-2。如果接收到被缩放的视频数据，则生成用于输出视频数据的驱动控制信号的第二时序驱动部180-2将该视频数据输出到控制部130。
如果接收到通过第二解复用部111-3而输出的第二内容和通过第二时序驱动部180-2传递的视频数据，则控制部130通过录制部133以及事件检测部131而录制第二内容并检测事件区间。具体而言，录制部133对从第二解复用部111-3传递的第二内容执行录制而生成针对第二内容的录制内容。而且，事件检测部131可以分析针对通过第二时序驱动部180-2而输出的视频数据的视频图像的低电压差分信号(LowVoltageDifferentialSignal：LVDS)或差分信号(DifferentialSignal)，从而检测与预设定条件对应的事件区间。
如果通过如上所述的录制部133以及事件检测部131而生成内容并检测出事件区间，则控制部130生成关于录制内容的书签信息，并将生成的书签信息和录制内容彼此匹配并存储到存储部160。
到目前为止，已通过多样的实施例而对提供摘要内容服务的广播接收装置100的各个构成进行了详细的说明。以下，对在根据本发明的广播接收装置100提供摘要内容服务的方法进行详细的说明。
图59是根据本发明的一实施例的广播接收装置中生成与摘要内容服务相关的书签信息的方法的流程图。
如图59所示，广播接收装置100根据针对摘要内容服务的用户命令而从与该用户命令对应的频道接收内容，并将接收到的内容的视频数据以及音频数据信号处理为可输出的形态而进行输出(S5910)。在输出如上所述的内容的状态下，广播接收装置100判断是否接收针对另一内容的录制命令(S5920)。
如果根据判断结果，未接收针对另一内容的录制命令，则广播接收装置100生成针对输出的内容的录制内容并确定针对该内容的摘要内容区间(S5930)。具体而言，如果未接收针对另一内容的录制命令，则广播接收装置100对输出的内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的事件区间。另外，如果接收到针对另一内容的录制命令，则广播接收装置100与从已接收的录制命令对应的频道接收与输出的内容(以下，称之为第一内容)不同的另一内容(以下，称之为第二内容)。之后，广播接收装置100生成针对第二内容的录制内容并确定针对第二内容的摘要内容区间(S5940)。如果确定针对第一内容或第二内容的摘要内容区间，则广播接收装置100生成针对该摘要内容区间的书签信息，并将生成的书签信息和录制内容彼此匹配而存储(S5950)。
具体而言，广播接收装置100对视听中的第一内容或者与视听中的第一内容不同的第二内容的视频数据以及音频数据中的至少一个进行分析而检测与预设定条件对应的事件区间。
根据一实施例，广播接收装置100可以对关于第一内容或第二内容的视频数据进行分析，并将与预设定的比赛状况条件对应的视频区间检测为事件区间。根据另一实施例，广播接收装置100可以对关于第一内容或第二内容的音频数据进行分析，并将具有预设定的临界电平以上的音频信号电平的视频区间检测为事件区间。如果检测出如上所述的事件区间，则广播接收装置100确定包含预设定的事件区间的摘要内容区间，并生成用于仅选择性地输出该摘要内容区间的书签信息。在此，书签信息可以包含：包括事件区间的摘要内容区间的再现开始时间点以及终止时间点的时间信息。
此时，如果确定包含已检测出的事件区间的摘要内容区间，则广播接收装置100将包含在所确定的摘要内容区间的视频图像中的一个视频图像确定为代表缩略图图像。根据实施例，广播接收装置100可以将包含在包含事件区间的摘要内容区间的视频图像中的放大(zoom-in)视频图像确定为代表缩略图图像。如上所述，如果确定关于摘要内容区间的代表缩略图图像，则广播接收装置100生成包含已确定的代表缩略图图像和与该代表缩略图图像相关的摘要内容区间的再现开始时间点以及终止时间点的书签信息。之后，广播接收装置100将与第一内容或第二内容相关的录制内容以及关于该录制内容的书签信息彼此匹配并存储。
图60是根据本发明的一实施例的广播接收装置中输出摘要内容服务相关录制内容的流程图。
如图60所示，如果接收到内容再现相关用户命令，则广播接收装置100输出针对已存储的多个录制内容中的与用户命令对应的录制内容的视频数据以及音频数据(S6010)。在输出如上所述的录制内容的状态下，广播接收装置100判断是否输入与摘要内容服务相关的用户命令(S6020)。如果根据判断结果，接收到摘要内容相关用户命令，则广播接收装置100仅选择性地输出录制内容的特定视频区间(S6030)。在此，特定视频区间可以是包含已检测出的事件区间的摘要内容区间。
具体而言，如果接收到摘要内容服务相关用户命令，则广播接收装置100基于录制内容的再现时间信息来仅选择性地输出与在针对该录制内容的书签信息中包含的时间信息对应的视频区间(即，摘要内容区间)。另外，在S6010步骤中，广播接收装置100根据内容再现命令而获取已存储的多个录制内容中的与接收到的内容再现命令对应的录制内容，并判断是否存储有与获取到的录制内容相关的书签信息。如果根据判断结果，存储有与获取到的录制内容相关的书签信息，则广播接收装置100输出与内容再现命令对应的录制内容以及包含在书签信息中的代表缩略图图像。即，广播接收装置100在第一区域上输出关于录制内容的视频数据，并在第二区域上输出多个代表缩略图图像。
因此，如果选择了如上所述的代表缩略图图像中的一个代表缩略图图像，则广播接收装置100可以从与选择到的代表缩略图图像相关的摘要内容区间的再现时间点开始输出录制内容。
另外，上述的广播接收装置100的摘要内容服务方法可以用包含可通过计算机执行的可执行算法的程序来实现，而且所述程序可以被存储在非临时性计算机可读介质(non-transitorycomputerreadablemedium)而提供。
非临时性计算机可读介质意味着半永久性地存储数据，并能够通过设备而读取(reading)的介质，而不是寄存器、高速缓存(cache)、存储器等临时存储数据的介质。具体而言，上述的多样的应用或者程序可以存储于CD、DVD、硬盘、蓝光光盘、USB、内存卡、ROM等非临时性计算机可读介质而被提供。
以上对本发明的优选的实施例进行了图示和说明，然而本发明并不局限于所述特定的实施例，只要是本发明所属的技术领域中具有基本知识的人员皆可在不脱离权利要求书中请求保护的本发明主旨的情况下实现多样的变形实施，而且这些变形实施不能脱离本发明的技术思想或前景而得到个别的理解。

Claims (15)

1.一种广播接收装置的摘要内容服务方法，包括如下的步骤：
接收内容；
通过分析包含在内容中的视频数据以及音频数据中的至少一个，来检测与预设条件对应的至少一个事件区间；以及
基于检测出的至少一个事件区间来生成摘要内容。
2.如权利要求1所述的摘要内容服务方法，其特征在于，
所述内容是体育相关内容，
所述广播接收装置存储与关于体育相关内容的摘要内容相关的比赛状况条件，
而且，在检测的步骤中，
通过分析包含在所述内容中的视频数据，来将与存储的比赛状况条件对应的视频区间检测为至少一个事件区间。
3.如权利要求1所述的摘要内容服务方法，其特征在于，
在检测的步骤中，通过分析包含在所述内容中的音频数据，来将具有预设的临界电平以上的音频信号电平的视频区间检测为事件区间。
4.如权利要求1所述的摘要内容服务方法，其特征在于，
在检测的步骤中，通过对包含在所述内容中的音频数据执行STT分析，而生成文本数据，并利用生成的文本数据而将包含与摘要内容相关的预设的词语的视频区间检测为事件区间。
5.如权利要求1所述的摘要内容服务方法，其特征在于，
生成的步骤包括如下的步骤：
基于针对检测出的至少一个事件区间的视频区间的图像信息所包含的颜色以及按颜色的比率值，来判断所述内容是否为体育相关内容；以及
如果所述内容是体育相关内容，则基于检测出所述至少一个事件区间的时间信息来确定内容摘要区间。
6.如权利要求5所述的摘要内容服务方法，其特征在于，
在判断的步骤中，根据在针对所述至少一个事件区间的视频区间的图像信息所包含的颜色中的与预定的场地颜色对应的颜色的比率值是否为预设的第一临界值以上，来判断所述广播体育是否为体育相关内容。
7.如权利要求6所述的摘要内容服务方法，其特征在于，
在判断的步骤中，根据在与针对检测出的至少一个事件区间的视频区间相邻的周围视频区间的图像信息所包含的颜色中的与所述场地颜色对应的颜色的比率值是否为预设的第二临界值以上，来判断关于体育的进行状态。
8.如权利要求6所述的摘要内容服务方法，其特征在于，
在判断的步骤中，
从与检测出的至少一个事件区间对应的视频区间的图像中提取用于引导比赛进行状况的引导区域，并基于提取的引导区域来判断关于所述体育的进行状态，
所述引导区域是用于表示比赛比分以及比赛进行时间中的至少一个的区域。
9.如权利要求5所述的摘要内容服务方法，其特征在于，
在确定摘要内容区间的步骤中，以检测出所述至少一个事件区间的时间为基准而获取在预设的固定时间内存在的前后视频区间，并将获取的前后视频区间和针对所述至少一个事件区间的视频区间确定为内容摘要区间。
10.如权利要求9所述的摘要内容服务方法，其特征在于，
在确定内容摘要区间的步骤中，根据获取的前后视频区间中的至少一个的场景是否发生变化而改变所述固定时间。
11.如权利要求5所述的摘要内容服务方法，其特征在于，还包括如下的步骤：
如果检测出所述至少一个事件区间，则从与检测出的至少一个事件区间对应的视频区间获取缩略图图像；
将生成的摘要内容以及与所述摘要内容相关地已获取的缩略图图像彼此进行匹配和存储；
根据用户命令，输出存储的关于所述内容的摘要内容以及与所述摘要内容匹配的缩略图图像。
12.如权利要求11所述的摘要内容服务方法，其特征在于，
在获取的步骤中，
如果所述缩略图图像为多个缩略图图像，则从所述多个缩略图图像中获取如下的缩略图图像：与预定的有效场地颜色对应的颜色的数量最少的缩略图图像或者包括所述多个缩略图图像均包含的相同的对象中的大小最大的对象的缩略图图像。
13.一种广播接收装置，包括：
接收部，接收内容；
输出部，输出所述内容；以及
控制部，通过分析包含在所述内容中的视频数据以及音频数据中的至少一个来检测与预设条件对应的至少一个事件区间，基于检测出的至少一个事件区间来生成摘要内容，并将通过输出部输出生成的摘要内容。
14.一种广播接收装置的摘要内容服务方法，包括如下步骤：
将多个视频帧的像素值进行比较而检测用于摘要内容服务的事件区域；
如果接收到视频帧，则从接收的视频帧检测与所述检测的事件区域对应的区域，并通过感测所述对应的区域的文字变化而检测事件发生与否；以及
基于感测到事件的发生的结果，来生成摘要内容。
15.如权利要求14所述的摘要内容服务方法，其中，
检测的步骤包括如下步骤：
将多个视频帧中的第一视频帧以及第二视频帧之间的彼此对应的各个像素区域的像素差和预设的临界值进行比较，并计算具有小于所述临界值的像素差的像素区域的数量；
如果具有小于所述临界值的像素差的像素区域的数量小于预设的临界像素数量，则判断具有小于所述临界值的像素差的像素区域是否被连续地检测出预设的临界次数以上；以及
如果连续地检测出所述预设的临界次数以上，则基于具有小于所述临界值的像素差的像素区域来检测并存储所述事件区域。
CN201480077664.6A 2014-04-11 2014-08-06 用于摘要内容服务的广播接收装置及方法 Active CN106134216B (zh)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
KR10-2014-0043536 2014-04-11
KR10-2014-0043597 2014-04-11
KR10-2014-0043524 2014-04-11
KR20140043639 2014-04-11
KR20140043641 2014-04-11
KR20140043536 2014-04-11
KR20140043524 2014-04-11
KR10-2014-0043641 2014-04-11
KR20140043597 2014-04-11
KR10-2014-0043639 2014-04-11
KR10-2014-0100489 2014-08-05
KR1020140100489A KR102217186B1 (ko) 2014-04-11 2014-08-05 요약 컨텐츠 서비스를 위한 방송 수신 장치 및 방법
PCT/KR2014/007280 WO2015156452A1 (ko) 2014-04-11 2014-08-06 요약 컨텐츠 서비스를 위한 방송 수신 장치 및 방법

Publications (2)

Publication Number Publication Date
CN106134216A true CN106134216A (zh) 2016-11-16
CN106134216B CN106134216B (zh) 2020-09-04

Family

ID=54400307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480077664.6A Active CN106134216B (zh) 2014-04-11 2014-08-06 用于摘要内容服务的广播接收装置及方法

Country Status (8)

Country Link
US (1) US20160261929A1 (zh)
EP (1) EP3110165B1 (zh)
JP (1) JP6419306B2 (zh)
KR (1) KR102217186B1 (zh)
CN (1) CN106134216B (zh)
BR (1) BR112015002635A2 (zh)
MX (1) MX364802B (zh)
RU (1) RU2669574C2 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108307250A (zh) * 2018-01-23 2018-07-20 浙江大华技术股份有限公司 一种生成视频摘要的方法及装置
CN108833969A (zh) * 2018-06-28 2018-11-16 腾讯科技（深圳）有限公司 一种直播流的剪辑方法、装置以及设备
CN109743589A (zh) * 2018-12-26 2019-05-10 百度在线网络技术（北京）有限公司 文章生成方法及装置
CN114846808A (zh) * 2019-12-26 2022-08-02 多玩国株式会社 内容发布系统、内容发布方法以及内容发布程序

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104038717B (zh) * 2014-06-26 2017-11-24 北京小鱼在家科技有限公司 一种智能录制系统
US20150379353A1 (en) * 2014-06-27 2015-12-31 Nokia Corporation Method and apparatus for role identification during multi-device video recording
KR20160074288A (ko) * 2014-12-18 2016-06-28 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR20160104493A (ko) * 2015-02-26 2016-09-05 삼성전자주식회사 방송 수신 장치 및 그 제어 방법
US10025986B1 (en) * 2015-04-27 2018-07-17 Agile Sports Technologies, Inc. Method and apparatus for automatically detecting and replaying notable moments of a performance
US10805668B2 (en) * 2015-05-20 2020-10-13 DISH Technologies L.L.C. Apparatus, systems and methods for trick function viewing of media content
AU2015396643A1 (en) * 2015-05-22 2017-11-30 Playsight Interactive Ltd. Event based video generation
US10356456B2 (en) * 2015-11-05 2019-07-16 Adobe Inc. Generating customized video previews
US10575036B2 (en) 2016-03-02 2020-02-25 Google Llc Providing an indication of highlights in a video content item
EP3306495B1 (en) * 2016-10-04 2023-07-12 Joaquin Sufuentes Method and system for associating recorded videos with highlight and event tags to facilitate replay services
KR102608466B1 (ko) * 2016-11-22 2023-12-01 삼성전자주식회사 영상 처리 방법 및 영상 처리 장치
US10999622B2 (en) 2017-03-28 2021-05-04 Turner Broadcasting System, Inc. Platform for publishing graphics to air
KR102474551B1 (ko) * 2017-04-24 2022-12-06 주식회사 넥슨코리아 사용자 단말의 사용자와의 인터랙션 방법 및 장치
GB2565999A (en) * 2017-05-15 2019-03-06 Antony Clark Roger System for producing video recordings
US10430924B2 (en) * 2017-06-30 2019-10-01 Quirklogic, Inc. Resizable, open editable thumbnails in a computing device
CN110945473A (zh) * 2017-07-31 2020-03-31 索尼公司 信息处理装置和信息处理方法
US10715883B2 (en) 2017-09-06 2020-07-14 Rovi Guides, Inc. Systems and methods for generating summaries of missed portions of media assets
US10182271B1 (en) * 2017-12-20 2019-01-15 Rovi Guides, Inc. Systems and methods for playback of summary media content
US11373404B2 (en) * 2018-05-18 2022-06-28 Stats Llc Machine learning for recognizing and interpreting embedded information card content
KR102585777B1 (ko) 2018-05-29 2023-10-10 삼성전자주식회사 전자 장치 및 그 제어방법
US10885942B2 (en) 2018-09-18 2021-01-05 At&T Intellectual Property I, L.P. Video-log production system
KR102219250B1 (ko) * 2018-10-30 2021-02-24 주식회사 아프리카티비 영상 제공 방법 및 이를 이용한 영상 제공 장치
US11252483B2 (en) 2018-11-29 2022-02-15 Rovi Guides, Inc. Systems and methods for summarizing missed portions of storylines
US11087161B2 (en) 2019-01-25 2021-08-10 Gracenote, Inc. Methods and systems for determining accuracy of sport-related information extracted from digital video frames
US11010627B2 (en) 2019-01-25 2021-05-18 Gracenote, Inc. Methods and systems for scoreboard text region detection
US10997424B2 (en) 2019-01-25 2021-05-04 Gracenote, Inc. Methods and systems for sport data extraction
US11036995B2 (en) 2019-01-25 2021-06-15 Gracenote, Inc. Methods and systems for scoreboard region detection
US11805283B2 (en) 2019-01-25 2023-10-31 Gracenote, Inc. Methods and systems for extracting sport-related information from digital video frames
KR102652647B1 (ko) * 2019-10-25 2024-04-01 주식회사 케이티 주요 장면 이벤트를 검출하여 타임 슬라이스 영상을 생성하는 서버, 방법 및 컴퓨터 프로그램
KR102466526B1 (ko) * 2019-11-29 2022-11-14 네이버 주식회사 경기 영상에 대한 이벤트의 태깅을 위한 전자 장치 및 그의 동작 방법
US11837262B2 (en) 2019-11-29 2023-12-05 Naver Corporation Electronic device for tagging event in sports play video and operating method thereof
US11295746B2 (en) * 2020-07-15 2022-04-05 Gracenote, Inc. System and method for multi-modal podcast summarization
KR102450432B1 (ko) * 2020-11-19 2022-10-04 주식회사 핏투게더 스포츠 이벤트를 검출하는 방법 및 이를 수행하는 시스템
CN115049755A (zh) * 2021-03-09 2022-09-13 京东方科技集团股份有限公司 一种图片生成方法、装置、设备以及存储介质
KR102467081B1 (ko) * 2021-04-05 2022-11-11 한밭대학교 산학협력단 동영상 검토 시스템, 방법 그리고 프로그램
WO2023243754A1 (ko) * 2022-06-17 2023-12-21 주식회사 엔씨소프트 지정된 모션이 캡쳐된 시점을 추출하는 전자 장치 및 방법

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805733A (en) * 1994-12-12 1998-09-08 Apple Computer, Inc. Method and system for detecting scenes and summarizing video sequences
US20030141665A1 (en) * 2002-01-28 2003-07-31 Baoxin Li Summarization of sumo video content
CN1538351A (zh) * 2003-04-01 2004-10-20 视觉上代表性的视频缩略图的生成
CN101013444A (zh) * 2007-02-13 2007-08-08 华为技术有限公司 一种自适应生成足球视频摘要的方法和装置
CN101299214A (zh) * 2007-04-30 2008-11-05 讯连科技股份有限公司 对运动视频进行摘要的装置及视频播放系统
CN101303695A (zh) * 2007-05-08 2008-11-12 讯连科技股份有限公司 用于处理运动视频的装置
CN101501729A (zh) * 2006-07-27 2009-08-05 视频技术公司 事件检测方法和使用所述方法的视频监视系统
CN101599179A (zh) * 2009-07-17 2009-12-09 北京邮电大学 场地运动精彩镜头集锦自动生成方法
US20110138418A1 (en) * 2009-12-04 2011-06-09 Choi Yoon-Hee Apparatus and method for generating program summary information regarding broadcasting content, method of providing program summary information regarding broadcasting content, and broadcasting receiver
CN102254160A (zh) * 2011-07-12 2011-11-23 央视国际网络有限公司 视频比分的检测识别方法及装置
US20120219271A1 (en) * 2008-11-17 2012-08-30 On Demand Real Time Llc Method and system for segmenting and transmitting on-demand live-action video in real-time
US20130282532A1 (en) * 2012-01-13 2013-10-24 Amro SHIHADAH Systems and methods for presentation and analysis of media content

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7296282B1 (en) * 1999-01-22 2007-11-13 Koplar Interactive Systems International Llc Interactive optical cards and other hand-held devices with increased connectivity
US8051446B1 (en) * 1999-12-06 2011-11-01 Sharp Laboratories Of America, Inc. Method of creating a semantic video summary using information from secondary sources
US20020083473A1 (en) * 2000-12-21 2002-06-27 Philips Electronics North America Corporation System and method for accessing a multimedia summary of a video program
JP4615166B2 (ja) * 2001-07-17 2011-01-19 パイオニア株式会社 映像情報要約装置、映像情報要約方法及び映像情報要約プログラム
US7474698B2 (en) * 2001-10-19 2009-01-06 Sharp Laboratories Of America, Inc. Identification of replay segments
WO2003051031A2 (en) * 2001-12-06 2003-06-19 The Trustees Of Columbia University In The City Of New York Method and apparatus for planarization of a material by growing and removing a sacrificial film
US7184955B2 (en) * 2002-03-25 2007-02-27 Hewlett-Packard Development Company, L.P. System and method for indexing videos based on speaker distinction
AU2003265318A1 (en) * 2002-08-02 2004-02-23 University Of Rochester Automatic soccer video analysis and summarization
JP4424590B2 (ja) * 2004-03-05 2010-03-03 株式会社Ｋｄｄｉ研究所 スポーツ映像の分類装置
WO2006009521A1 (en) * 2004-07-23 2006-01-26 Agency For Science, Technology And Research System and method for replay generation for broadcast video
KR100612874B1 (ko) * 2004-11-22 2006-08-14 삼성전자주식회사 스포츠 동영상의 요약 방법 및 장치
KR100754529B1 (ko) * 2005-11-28 2007-09-03 삼성전자주식회사 동영상 요약 서비스 장치 및 그 방법
KR100764175B1 (ko) * 2006-02-27 2007-10-08 삼성전자주식회사 맞춤형 방송 서비스를 위한 동영상의 중요 자막을 검출하는장치 및 방법
JP2007288697A (ja) * 2006-04-19 2007-11-01 Sanyo Electric Co Ltd 録画再生装置
JP5034516B2 (ja) * 2007-01-26 2012-09-26 富士通モバイルコミュニケーションズ株式会社 ハイライトシーン検出装置
GB2447053A (en) * 2007-02-27 2008-09-03 Sony Uk Ltd System for generating a highlight summary of a performance
JP4992592B2 (ja) * 2007-07-26 2012-08-08 ソニー株式会社 情報処理装置及び情報処理方法、並びにプログラム
US9524072B1 (en) * 2007-08-29 2016-12-20 The Directv Group, Inc. Method and system for forming content in a fantasy sporting event
US7983442B2 (en) * 2007-08-29 2011-07-19 Cyberlink Corp. Method and apparatus for determining highlight segments of sport video
US8301618B2 (en) * 2008-02-26 2012-10-30 Microsoft Corporation Techniques to consume content and metadata
JPWO2010073355A1 (ja) * 2008-12-26 2012-05-31 富士通株式会社 番組データ処理装置、方法、およびプログラム
KR101628237B1 (ko) * 2009-01-21 2016-06-22 삼성전자주식회사 하이라이트 영상 구성 방법 및 장치
WO2011099299A1 (ja) * 2010-02-10 2011-08-18 パナソニック株式会社 映像抽出装置、撮影装置、プログラム及び記録媒体
US20120236201A1 (en) * 2011-01-27 2012-09-20 In The Telling, Inc. Digital asset management, authoring, and presentation techniques
US9699513B2 (en) * 2012-06-01 2017-07-04 Google Inc. Methods and apparatus for providing access to content
US20130347018A1 (en) * 2012-06-21 2013-12-26 Amazon Technologies, Inc. Providing supplemental content with active media
US9497406B2 (en) * 2013-03-11 2016-11-15 Coachmyvideo.Com, Llc Methods and systems of creation and catalog of media recordings
US10721530B2 (en) * 2013-07-29 2020-07-21 Koninklijke Kpn N.V. Providing tile video streams to a client
US20150058708A1 (en) * 2013-08-23 2015-02-26 Adobe Systems Incorporated Systems and methods of character dialog generation
US9363222B2 (en) * 2013-09-05 2016-06-07 Yapp Media, LLC System and method for selective user moderation of social media channels

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805733A (en) * 1994-12-12 1998-09-08 Apple Computer, Inc. Method and system for detecting scenes and summarizing video sequences
US20030141665A1 (en) * 2002-01-28 2003-07-31 Baoxin Li Summarization of sumo video content
CN1538351A (zh) * 2003-04-01 2004-10-20 视觉上代表性的视频缩略图的生成
CN101501729A (zh) * 2006-07-27 2009-08-05 视频技术公司 事件检测方法和使用所述方法的视频监视系统
CN101013444A (zh) * 2007-02-13 2007-08-08 华为技术有限公司 一种自适应生成足球视频摘要的方法和装置
CN101299214A (zh) * 2007-04-30 2008-11-05 讯连科技股份有限公司 对运动视频进行摘要的装置及视频播放系统
CN101303695A (zh) * 2007-05-08 2008-11-12 讯连科技股份有限公司 用于处理运动视频的装置
US20120219271A1 (en) * 2008-11-17 2012-08-30 On Demand Real Time Llc Method and system for segmenting and transmitting on-demand live-action video in real-time
CN101599179A (zh) * 2009-07-17 2009-12-09 北京邮电大学 场地运动精彩镜头集锦自动生成方法
US20110138418A1 (en) * 2009-12-04 2011-06-09 Choi Yoon-Hee Apparatus and method for generating program summary information regarding broadcasting content, method of providing program summary information regarding broadcasting content, and broadcasting receiver
CN102254160A (zh) * 2011-07-12 2011-11-23 央视国际网络有限公司 视频比分的检测识别方法及装置
US20130282532A1 (en) * 2012-01-13 2013-10-24 Amro SHIHADAH Systems and methods for presentation and analysis of media content

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108307250A (zh) * 2018-01-23 2018-07-20 浙江大华技术股份有限公司 一种生成视频摘要的方法及装置
CN108307250B (zh) * 2018-01-23 2020-10-30 浙江大华技术股份有限公司 一种生成视频摘要的方法及装置
CN108833969A (zh) * 2018-06-28 2018-11-16 腾讯科技（深圳）有限公司 一种直播流的剪辑方法、装置以及设备
CN109743589A (zh) * 2018-12-26 2019-05-10 百度在线网络技术（北京）有限公司 文章生成方法及装置
CN109743589B (zh) * 2018-12-26 2021-12-14 百度在线网络技术（北京）有限公司 文章生成方法及装置
CN114846808A (zh) * 2019-12-26 2022-08-02 多玩国株式会社 内容发布系统、内容发布方法以及内容发布程序
CN114846808B (zh) * 2019-12-26 2024-03-12 多玩国株式会社 内容发布系统、内容发布方法以及存储介质

Also Published As

Publication number Publication date
MX364802B (es) 2019-05-08
BR112015002635A2 (pt) 2017-07-04
CN106134216B (zh) 2020-09-04
MX2016013106A (es) 2017-05-01
EP3110165A1 (en) 2016-12-28
JP6419306B2 (ja) 2018-11-07
KR20150118002A (ko) 2015-10-21
KR102217186B1 (ko) 2021-02-19
EP3110165A4 (en) 2017-08-09
RU2015104057A3 (zh) 2018-05-11
EP3110165B1 (en) 2019-10-02
US20160261929A1 (en) 2016-09-08
RU2015104057A (ru) 2018-05-11
RU2669574C2 (ru) 2018-10-12
JP2017517995A (ja) 2017-06-29

Similar Documents

Publication Publication Date Title
CN106134216A (zh) 用于摘要内容服务的广播接收装置及方法
US11917255B2 (en) Methods, systems, and media for presenting media content in response to a channel change request
US11134214B2 (en) Detection of transitions between text and non-text frames in a video stream
US10200748B2 (en) System and method for commercial detection in digital media environments
KR101419937B1 (ko) 기호 추출 장치, 기호 추출 방법 및 기호 추출 프로그램이 기록된 컴퓨터 판독가능한 기록 매체
EP3410727B1 (en) System and method for detecting advertisements on the basis of fingerprints
KR101318459B1 (ko) 수신기 상에서 오디오비주얼 문서를 시청하는 방법 및이러한 문서를 시청하기 위한 수신기
CN101373482B (zh) 信息处理设备和信息处理方法
CN105373768A (zh) 提供图像内容的方法和设备
KR20000009742A (ko) 동영상에서의 특정인물 등장구간 검색 시스템
CN103024607B (zh) 用于显示摘要视频的方法和设备
CN105933764A (zh) 广播接收装置及其控制方法
TW201206166A (en) Linking real time media context to related applications and services
CN104661078A (zh) 视频显示装置及其操作方法
CN108153882A (zh) 一种数据处理方法及装置
KR20160035106A (ko) 영상처리장치, 영상처리방법 및 컴퓨터 판독가능 기록매체
CN111615008B (zh) 基于多设备体验的智能摘要生成和字幕阅读系统
US20150078730A1 (en) Signal recording apparatus, camera recorder, and signal processing system
KR101930488B1 (ko) 연동형 서비스 제공을 위한 메타데이터 생성 방법 및 그를 위한 장치
CN112055253A (zh) 独立字幕流的添加复用方法和装置
JP2011044871A (ja) シーンラベル生成装置、シーンラベル生成方法及びコンテンツ配信サーバ
WO2019098624A1 (ko) 디스플레이장치 및 그 제어방법
US20150179228A1 (en) Synchronized movie summary
KR102161705B1 (ko) 섹션 정보 생성 장치 및 이를 이용하여 섹션 정보를 생성하는 방법
JP2015089076A (ja) 録画再生装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant