KR20150042163A - Apparatus and method for processing multimedia contents - Google Patents
Apparatus and method for processing multimedia contents Download PDFInfo
- Publication number
- KR20150042163A KR20150042163A KR20150042367A KR20150042367A KR20150042163A KR 20150042163 A KR20150042163 A KR 20150042163A KR 20150042367 A KR20150042367 A KR 20150042367A KR 20150042367 A KR20150042367 A KR 20150042367A KR 20150042163 A KR20150042163 A KR 20150042163A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- content
- change
- state change
- user state
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 34
- 230000008921 facial expression Effects 0.000 claims description 10
- 230000008451 emotion Effects 0.000 claims description 4
- 230000002996 emotional effect Effects 0.000 claims description 4
- 230000001360 synchronised effect Effects 0.000 claims description 2
- 238000003672 processing method Methods 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
Landscapes
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- Economics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
본 발명은 멀티미디어 콘텐츠 처리 방법 및 장치에 관한 것이며, 특히 컨텐츠 감상 경험을 기록하고 재생함으로써 원격 사용자간에 콘텐츠를 동시에 감상하는 듯한 경험을 제공하는 멀티미디어 콘텐츠 처리 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for processing multimedia contents, and more particularly, to a method and apparatus for processing multimedia contents that provide an experience of simultaneously viewing contents among remote users by recording and reproducing contents viewing experiences.
근래 들어 멀티미디어 콘텐츠를 제공하는 온 라인 서비스 또는 콘텐츠 재생 장치가 일반화되고 있다. BACKGROUND ART [0002] In recent years, an online service or a content reproducing apparatus for providing multimedia contents is becoming popular.
종래의 온 라인 서비스 또는 콘텐츠 재생 장치에서 여러 사용자가 동시에 콘텐츠를 감상하는 듯한 경험을 얻기 위해서는 화상 채팅을 이용한다. In the conventional online service or content reproduction apparatus, a video chat is used to acquire an experience in which a plurality of users are simultaneously viewing content.
즉, 종래 온 라인 서비스 또는 콘텐츠 재생 장치에서 화상 채팅을 이용하여 콘텐츠를 감상하는 다른 사용자의 상태를 화면에 표시함으로서 여러 사용자가 동시에 콘텐츠를 감상하는 듯한 경험을 제공한다. That is, in the conventional online service or the content reproducing apparatus, the status of another user who is watching the content by using the video chat is displayed on the screen, thereby providing an experience that multiple users simultaneously enjoy the content.
그러나 종래의 컨텐츠의 동시 감상 방법은 원격 사용자간에 같은 시간에 콘텐츠 재생 기기를 사용하고 동시에 네트워크에 접속하고 있어야 하는 불편함이 있다. However, the conventional method of simultaneous listening of contents has the inconvenience that the remote user must use the content reproducing device at the same time and simultaneously access the network.
본 발명이 해결하고자하는 과제는 컨텐츠 재생 화면과 사용자 감상 경험이 함께 표시되는 화면을 이용하여 원격 사용자간에 콘텐츠를 동시에 감상하는 듯한 경험을 제공하는 멀티미디어 콘텐츠 처리 방법 및 장치를 제공하는 데 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a multimedia content processing method and apparatus for providing an experience of simultaneously viewing content among remote users by using a screen in which a content reproduction screen and a user's viewing experience are displayed together.
과제를 해결하기 위하여, 본 발명은 콘텐츠 감상 경험을 기록한 멀티미디어 콘텐츠 처리 방법에 있어서,According to an aspect of the present invention, there is provided a method of processing multimedia content recording a content viewing experience,
콘텐츠 재생중 콘텐츠를 감상한 사용자 상태 변화의 기록 정보를 검지하는 과정;Detecting recording information of a change in the user status of the content while watching the content;
상기 검지된 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태 변화 이력을 표시하는 과정;Displaying a user state change history based on the detected user state change history information;
상기 사용자의 상태 변화 이력중에서 사용자의 상태 변화 지점이 선택되면 그 사용자 상태 변화 시점에 해당하는 콘텐츠를 재생하는 과정을 포함하는 것을 특징으로 한다. And reproducing the content corresponding to the user state change point when the user's state change point is selected from the user's state change history.
상기의 다른 과제를 해결하기 위하여, 본 발명은 콘텐츠 감상 경험을 기록하는 멀티미디어 콘텐츠 처리 방법에 있어서, According to another aspect of the present invention, there is provided a multimedia content processing method for recording a content viewing experience,
콘텐츠 재생시 사용자 감상 경험 수집을 위한 입력 장치를 이용하여 사용자의 감상 모습을 기록하는 과정;A step of recording the impression of a user by using an input device for collecting a user's appreciation experience during content reproduction;
상기 기록된 사용자의 감상 모습에서 사용자 상태 변화를 체크하여 상기 사용자 상태의 변화가 일어난 시간과 그 사용자 상태를 기록하는 과정을 포함하는 것을 특징으로 한다.And recording a time at which the change of the user state occurred and a user state thereof by checking a changed state of the user in the recorded state of the user's appreciation.
상기의 다른 과제를 해결하기 위하여, 본 발명은 콘텐츠 감상 경험을 재생하는 멀티미디어 콘텐츠 처리 방법에 있어서,According to another aspect of the present invention, there is provided a multimedia content processing method for reproducing a content viewing experience,
콘텐츠 재생시 콘텐츠를 감상한 사용자 상태 변화의 기록 정보를 검지하는 과정;Detecting recording information of a change in the user state of the content while watching the content;
상기 검지된 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태 변화 지점마다 인디케이터를 표시하는 과정;Displaying an indicator for each user state change point based on the detected record information of the user state change;
상기 사용자 상태 변화 지점의 인디케이터마다 사용자 감상 상태를 나타내는 아이콘들을 표시하는 과정을 포함하는 것을 특징으로 한다.And displaying icons indicating a user's listening state for each indicator of the user state change point.
상기의 또 다른 과제를 해결하기 위하여, 본 발명은 멀티미디어 콘텐츠 처리 장치에 있어서, According to another aspect of the present invention, there is provided an apparatus for processing multimedia contents,
콘텐츠 재생시 콘텐츠를 감상하는 사용자 감상 과정을 수집하는 사용자 감상 입력부;A user appreciation input unit for collecting a user appreciation process for enjoying a content when a content is reproduced;
재생중인 콘텐츠와 사용자 감상 기록 정보를 표시하는 표시부;A display unit for displaying content being played and user appreciation record information;
상기 사용자 감상 입력부를 통해 입력되는 사용자 감상 정보로부터 사용자 상태의 변화가 발생된 시간과 그 사용자 상태를 기록하고, 콘텐츠 재생시 사용자의 상태 변화 이력을 상기 표시부에 표시하고, 사용자의 상태 변화 이력에서 사용자의 상태 변화 지점이 선택되면 그 선택된 사용자 상태 변화의 시점에 해당하는 콘텐츠를 재생하는 제어부를 포함하는 것을 특징으로 한다. Wherein the history information includes a history of a change in the user's state and a state of the user from the user's appreciation information inputted through the user's appreciation input unit and displays the history of the user's state change on the display unit, When the state change point of the selected user state is selected, a content corresponding to the selected user state change time point is reproduced.
상술한 바와 같이 본 발명에 의하면, 시간과 공간의 제약을 초월하여 콘텐츠를 여러 사람이 동시에 감상하는 경험을 제공할 수 있다. 또한 사람의 감정 정보에 따라 콘텐츠를 재 분류하고, 그 감정 정보에 따라 콘텐츠를 선별적으로 검색할 수 있다. As described above, according to the present invention, it is possible to provide an experience that allows a plurality of people to enjoy a content at a time while exceeding the time and space constraints. Also, the contents can be reclassified according to the human emotion information, and the contents can be selectively searched according to the emotion information.
도 1은 본 발명에 따른 멀티미디어 콘텐츠 처리 장치의 블록도이다.
도 2는 본 발명에 따른 콘텐츠 감상 경험을 기록하는 멀티미디어 콘텐츠 처리 방법을 보이는 흐름도이다.
도 3은 본 발명에 따른 콘텐츠 감상 경험을 기록하는 멀티미디어 콘텐츠 처리 방법을 보이는 흐름도이다.
도 4는 본 발명에 따른 컨텐츠 감상 경험 정보와 콘텐츠를 표시하는 재생 바의 일 실시예를 도시한 것이다.
도 5는 본 발명에 따른 컨텐츠 감상 경험 정보와 콘텐츠를 함께 재생하는 콘텐츠 제공 시스템의 일 예를 도시한 것이다. 1 is a block diagram of an apparatus for processing multimedia contents according to the present invention.
FIG. 2 is a flowchart illustrating a multimedia content processing method for recording a content viewing experience according to the present invention.
3 is a flowchart illustrating a multimedia content processing method for recording a content viewing experience according to the present invention.
FIG. 4 illustrates an embodiment of a playback bar for displaying content viewing experience information and contents according to the present invention.
FIG. 5 illustrates an example of a content providing system for playing back content experiencing information and contents according to the present invention.
이하 첨부된 도면을 참조로하여 본 발명의 바람직한 실시예를 설명하기로 한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.
도 1은 본 발명에 따른 멀티미디어 콘텐츠 처리 장치의 블록도이다.1 is a block diagram of an apparatus for processing multimedia contents according to the present invention.
도 1의 멀티미디어 콘텐츠 처리 장치는 키 입력부(110), 사용자 감상 입력부(120), 표시부(130), 저장부(140), 제어부(150)로 구성된다.1 includes a
키 입력부(110)는 키 패드 또는 터치 스크린등으로 이루어지며, 복수개의 숫자/문자 입력 키와 사용자와의 인터페이스를 위한 기능 키등을 구비하고 있다. The
특히, 키 입력부(110)는 미리 정해진 키를 이용하여 표시부(130)에서 디스플레이 된 콘텐츠 정보 및 아이콘들을 선택한다. In particular, the
사용자 감상 입력부(120)는 콘텐츠 재생시 사용자 감상 경험을 수집한다. 즉, 사용자 감상 입력부(120)는 영상 입력부(122), 음성 입력부(124), 텍스트 입력부(126)로 구분할 수 있다. 영상 입력부(122)는 콘텐츠를 감상하는 사용자의 화상 정보를 카메라로 촬영하고, 그 촬영된 사용자의 화상 정보를 제어부(150)로 입력한다. 그리고 음성 입력부(124)는 콘텐츠를 감상하는 사용자의 음성 정보를 마이크로 수신하고, 그 사용자의 음성 정보를 제어부(150)로 입력한다. 그리고 텍스트 입력부(126)는 콘텐츠를 감상하는 사용자의 텍스트 정보를 제어부(150)로 입력한다. The user
표시부(130)는 CRT(Cathode-Ray Tube)나 LCD(Liquid Crystal Display)등으로 이루어질 수 있으며, 제어부(150)에서 발생하는 각종 문자나 저장부(140)에 저장된 콘텐츠를 영상 신호로 표시한다. 특히, 표시부(130)는 제어부(150)에서 생성되는 사용자의 감상 기록 정보중 사용자의 상태 변화 이력을 표시한다.The
저장부(140)는 다수의 프로그램과 데이터를 저장하기 위한 롬(ROM:Read Only Memory) 및 RAM(Random Access Memory), 음성 메모리등으로 이루어지며, 멀티미디어 콘텐츠들이나 제어부(150)에서 생성되는 사용자의 감상 기록 정보를 저장한다. The
제어부(150)는 콘텐츠 재생시 사용자 감상 입력부(120)를 통해 입력되는 화상, 음성, 텍스트를 이용하여 사용자의 감상 모습을 저장부(140)에 기록하고, 그 기록된 사용자의 감상 모습에서 사용자 상태 변화를 체크하여, 사용자 상태의 변화가 일어난 시간과 그 사용자 상태를 저장부(140)에 기록한다.The
또한 제어부(150)는 콘텐츠 재생시 컨텐츠와 별개로 저장 공간에 기록된 사용자의 상태 변화에 대한 기록 정보를 검출하고, 검지된 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태 변화 이력을 표시하고, 사용자의 상태 변화 이력중에서 사용자의 상태 변화 지점을 선택할 때마다 사용자 상태 변화 시점에 해당하는 콘텐츠를 재생한다. In addition, the
도 2는 본 발명에 따른 콘텐츠 감상 경험을 기록하는 멀티미디어 콘텐츠 처리 방법을 보이는 흐름도이다. FIG. 2 is a flowchart illustrating a multimedia content processing method for recording a content viewing experience according to the present invention.
먼저, 사용자에 의해 선택된 멀티미디어 컨텐츠의 재생을 시작한다(210 과정). First, playback of the multimedia content selected by the user is started (operation 210).
이어서, 컨텐츠 재생중 카메라나 마이크등과 같은 사용자 감상 입력 장치를 이용하여 콘텐츠를 감상하는 사용자 상태를 관찰한다. 이때 카메라 또는 마이크를 통해 입력되는 화상 및 음성 및 텍스트등으로 사용자의 콘텐츠 감상 과정을 기록한다(220 과정). Then, during the reproduction of the contents, the user observing the contents is observed using the user's appreciation input device such as a camera or a microphone. At this time, the process of enjoying the user's content is recorded with the image, voice, and text input through the camera or the microphone (step 220).
이어서, 콘텐츠를 감상하는 사용자의 표정이나 음성 또는 맥박과 같은 사용자 상태를 측정한다(230 과정). 이때 사용자 상태를 측정하는 기술은 여러 가지 실시예가 있을 수 있다. 예를 들면, 웃음, 슬픔, 놀람, 실망을 나타내는 표정에 연관된 복수개의 표정 템플릿이 저장부(140)에 미리 저장된다. 그리고 콘텐츠 재생중에 콘텐츠를 감상하는 사용자의 표정 정보를 미리 저장된 표정 템플릿과 비교해가면서 사용자의 상태를 파악할 수 있다. 다른 실시예로 사용자의 상태는 뇌파 또는 맥박 수를 이용하여 측정할 수도 있다. Then, the user's state such as the user's facial expression or the voice or pulse to listen to the content is measured (step 230). At this time, the technique for measuring the user state may be various embodiments. For example, a plurality of facial expression templates associated with expressions indicating laughter, sadness, surprise, and disappointment are stored in advance in the
이어서, 사용자 상태를 웃음, 슬픔, 놀람, 실망과 같은 표정들로 분류하고, 그 분류된 사용자 표정들에 따라 자동으로 사용자 상태 변화를 체크한다(240 과정).Then, the user state is classified into facial expressions such as laughter, sadness, surprise, disappointment, and the user state change is automatically checked according to the classified user facial expressions (operation 240).
이어서, 사용자 상태 변화가 체크되면 사용자 상태의 변화가 일어난 시간과 그 사용자 상태를 기록한다(250 과정). 예를 들면, 콘텐츠를 감상하는 사용자가 놀라는 표정에 해당하는 사용자 상태 변화를 체크하면 그 사용자의 상태 변화가 발생한 시작 및 종료 시간과, 사용자의 ID, 사용자의 상태 정보를 해당 콘텐츠와 동기화하여 기록한다. 이때 사용자의 상태 정보는 화상 또는 음성 또는 텍스트로 나타낼 수 있다.Then, when the change of the user state is checked, the time and the user state of the change of the user state are recorded (operation 250). For example, if a user viewing a content checks a user state change corresponding to a surprising expression, the start and end times of the user's state change, the user's ID, and the state information of the user are synchronized with the corresponding content do. At this time, the status information of the user can be expressed as an image, voice, or text.
따라서 사용자 상태의 변화가 일어난 시간과 그 사용자 상태 정보를 해당 컨텐츠와 결합한다. 즉, 사용자 상태의 변화가 일어난 시간과 그 사용자 상태 정보를 이용하여 사용자 감상 경험에 대한 메타 데이터로 생성하고, 그 메타 데이터를 콘텐츠와 결합한다.Therefore, the time when the change of the user state occurs and the user state information are combined with the corresponding contents. That is, it generates metadata for the user's viewing experience using the time at which the user state changes and the user state information, and combines the metadata with the content.
그러나 사용자 상태 변화가 체크되지 않으면 콘텐츠 재생을 완료하였는가를 체크한다(260).However, if the user state change is not checked, it is checked whether the content reproduction is completed (260).
이때 콘텐츠 재생을 완료하였으면 사용자 감상 기록을 종료하고, 콘텐츠 재생을 완료하지 않았으면 다시 사용자의 콘텐츠 감상 과정을 기록하는 단계(220)로 돌아간다. At this time, if the content reproduction is completed, the user's appreciation record is terminated, and if the content reproduction is not completed, the process returns to the
도 3은 본 발명에 따른 콘텐츠 감상 경험을 재생하는 멀티미디어 콘텐츠 처리 방법을 보이는 흐름도이다.3 is a flowchart illustrating a method of processing multimedia contents for reproducing a content listening experience according to the present invention.
먼저, 사용자에 의해 선택된 멀티미디어 컨텐츠 및 사용자 감상 기록 정보를 재생한다(310 과정). 이때 사용자 감상 기록 정보는 콘텐츠에 동기화 되어 재생된다. 여기서 사용자 감상 기록 정보는 사용자의 상태 변화가 발생한 시작 및 종료 시간과, 사용자의 ID, 사용자의 상태 정보와 같은 사용자 상태 변화에 대한 기록 정보를 나타낸다. First, the multimedia content and the user's appreciation record information selected by the user are reproduced (step 310). At this time, the user's appreciation record information is reproduced in synchronization with the content. Herein, the user's appreciation record information indicates record information about a change in the user's state, such as the start and end times of the user's state change, the user's ID, and the user's state information.
이어서, 콘텐츠 재생시 메터 데이터 형태의 사용자 감상 기록 정보를 참조하여 콘텐츠를 감상한 사용자 상태 변화에 대한 기록 정보를 검출한다(315 과정).Next, in
이어서, 검출된 사용자 상태 변화에 대한 기록 정보에 근거하여 사용자 상태 변화 이력을 재생 바에 표시한다(320 과정). Then, the user state change history is displayed on the playback bar based on the detected record information of the user state change (operation 320).
이때 사용자 상태 변화 이력은 전체 컨텐츠 재생 동안의 사용자 상태 변화 시간, 사용자 ID, 사용자 상태 정보를 포함한다.At this time, the user state change history includes the user state change time, the user ID, and the user state information during the entire contents reproduction.
따라서, 콘텐츠 재생을 시작하면 사용자 감상 기록 정보에 근거하여 현재 콘텐츠 재생 지점의 인디케이터와 함께 사용자 상태 변화 지점의 인디케이터를 재생 바에 표시한다. 그리고 사용자의 상태 변화가 감지된 재생 지점마다 사용자의 아이디 및 사용자 표정 상태를 나타내는 아이콘(Icon)을 표시한다. Therefore, when content reproduction is started, an indicator of the user state change point is displayed on the playback bar together with the indicator of the current content reproduction point based on the user appreciation history information. Then, an icon (Icon) indicating the user's ID and the user's facial expression state is displayed for each reproduction point where the user's state change is detected.
이어서, 사용자 입력을 검출한다(330 과정).Then, a user input is detected (operation 330).
이어서, 사용자 입력이 검출되면 재생 바에 표시된 특정 아이콘이 선택되는가를 체크한다(340 과정).Then, if a user input is detected, it is checked whether a specific icon displayed on the playback bar is selected (operation 340).
이어서, 아이콘이 선택되면 현재 콘텐츠 재생 시점에서 선택된 아이콘이 가리키는 콘텐츠 재생 시점으로 이동하여(350 과정) 그 재생 시점의 콘텐츠 재생을 수행한다(370 과정). If the icon is selected, the icon is moved to the content reproduction point indicated by the icon selected at the current content reproduction point (step 350), and the content is reproduced at the reproduction point (step 370).
그러나 아이콘이 선택되지 않으면 현재의 콘텐츠를 계속하여 재생한다(370 과정). However, if the icon is not selected, the current content is continuously played back (step 370).
이어서, 콘텐츠 재생을 완료하였는가를 체크한다(380 과정).Then, it is checked whether the content reproduction is completed (step 380).
이때 콘텐츠 재생을 완료하였으면 멀티미디어 재생을 종료하고, 콘텐츠 재생을 완료하지 않았으면 다시 사용자 입력 검출 단계(330 과정)로 돌아간다. At this time, if the content reproduction is completed, the multimedia reproduction is terminated. If the content reproduction is not completed, the process returns to the user input detection step (330).
다른 실시예로, 사용자 상태 정보가 포함된 콘텐츠들은 정렬, 스킵등과 같은 다양한 네비게이션 알고리듬에 의해 검색될 수 있다. In another embodiment, content containing user state information may be retrieved by various navigation algorithms such as sorting, skipping, and the like.
예를 들면, 사용자의 특정 상태 변화에 해당하는 콘텐츠만을 재생하기를 원하면 사용자의 특정 상태 변화 정보들이 선별적으로 선택된다. 이어서, 사용자의 감상 기록 정보중 선택된 사용자의 특정 상태 변화를 나타내는 아이콘만을 표시한다. 그리고 표시된 아이콘에 해당되는 콘텐츠만을 선별적으로 재생하거나 스킵한다. For example, if it is desired to reproduce only the content corresponding to the user's specific state change, the user's specific state change information is selectively selected. Then, only the icon indicating the change of the specific state of the selected user among the viewing history information of the user is displayed. Then, only the content corresponding to the displayed icon is selectively reproduced or skipped.
또 다른 실시예로 사용자의 상태 변화 이력을 나타내는 아이콘은 사용자 상태 변화가 있는 시점의 전, 후에 임시로 표시되고 일정 시간 후 숨겨진다.
In yet another embodiment, the icon representing the user's state change history is temporarily displayed before and after the change of the user state, and is hidden after a certain time.
*도 4는 본 발명에 따른 컨텐츠 감상 경험 정보와 콘텐츠를 표시하는 재생 바의 일 실시예를 도시한 것이다.FIG. 4 shows an embodiment of a playback bar for displaying content experiencing information and contents according to the present invention.
콘텐츠 재생시 메터 데이터를 참조하여 콘텐츠를 감상한 사용자 상태 변화의 기록 정보를 검출한다.The recording information of the change in the user state in which the content is viewed by referring to the meta data when the content is reproduced is detected.
이때 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태의 변화가 일어난 시간 정보와 사용자 상태 정보를 포함하는 사용자 감상 이력 정보가 재생바 에 표시된다. At this time, based on the recording information of the user state change, the user's viewing history information including the time information of the change of the user state and the user state information is displayed on the playback bar.
콘텐츠 재생이 시작되면 재생 바에는 전체 콘텐츠중에서 현재 재생 지점의 인디케이터(430)와 함께 사용자 상태 변화 지점의 인디케이터(420, 440, 450)가 표시된다. 그리고 사용자 상태 변화 지점의 인디케이터(420, 440, 450)마다 사용자 감상 상태를 나타내는 아이콘들(422, 442, 452)이 표시된다. 하나의 아이콘(420)에는 사용자의 ID(424)와 사용자 감정 상태(426)를 표시한다. 여기서 사용자 감정 상태는 웃음 또는 실망과 같은 사용자 표정을 나타낸다. When the content reproduction is started, the
예를 들면, 콘텐츠 재생 시간중 사용자 상태 변화들이 발생한 시간이 각각 5:00분 - 6:00분, 50:00분 - 55:00분, 1:10:00 - 1:11:00 라고 하자. 그러면 콘텐츠 재생시 사용자 상태 변화 시간에 해당하는 사용자 상태 변화 지점의 인디케이터들(420, 440, 450)에 각각 사용자의 ID와 사용자 감정 상태를 나타내는 아이콘들(422, 442, 452)이 표시된다. 이에 따라 사용자는 아이콘들(422, 442, 452)에 표시된 사용자 표정 정보를 보면서 자신이 원하는 장면을 선별할 수 있거나 원하지 않는 장면을 스킵할 수 있다. 예를 들면, 재생 바에서 아이콘(422)이 선택되면 사용자 상태 변화가 발생한 시간 5:00분 - 6:00 에 기록된 콘텐츠를 시청할 수 있다. For example, let's say that the time at which user state changes occurred during the content playback time are 5:00 - 6:00, 50:00 - 55:00, and 1:10:00 - 1:11:00, respectively. Then,
이에 따라 멀티미디어 기기의 사용자는 코믹 프로그램을 보면서 친구가 보고 웃은 장면만 선별하여 시청할 수 있으며, 또한 공포 영화를 시청시 친구의 감상 기록 정보를 참조하여 잔인하고 놀라게 하는 장면을 스킵할 수 있다.Accordingly, the user of the multimedia device can selectively view only the scenes that the friend looks at while watching the comic program, and can skip the cruel and surprising scenes by referring to the impression record information of the friend when watching the horror movie.
도 5는 본 발명에 따른 컨텐츠 감상 경험 정보와 콘텐츠를 함께 재생하는 콘텐츠 제공 시스템의 일 예를 도시한 것이다. FIG. 5 illustrates an example of a content providing system for playing back content experiencing information and contents according to the present invention.
도 5를 참조하면, 제1디스플레이 장치(510), 제2디스플레이 장치(520), 콘텐츠 처리 장치(530)는 서로 유선/무선으로 연결된다. Referring to FIG. 5, the
콘텐츠 처리 장치(530)에서 컨텐츠를 선택하면 제1디스플레이 장치(510)에 콘텐츠가 출력된다. 이때 콘텐츠 재생이 시작되면 사용자 감상 이력 정보가 제2디스플레이 장치(520)에 아이콘 형태들로 표시된다. 사용자가 아이콘들 중하나를 선택하면 콘텐츠 재생 시점은 그 선택된 아이콘에 해당하는 콘텐츠 재생 시점으로 이동한다. 그리고 선택된 아이콘에 해당하는 사용자 상태 정보(532)가 화상 정보로 표시된다. 예를 들면, 도 5에 도시된 바와 같이 특정 아이콘에 해당하는 콘텐츠 재생 시간이 5:00분 - 6:00분라고 하면 콘텐츠 처리 장치(530)는 전체 콘텐츠 재생 시간중 5:00분 - 6:00분에 위치한 콘텐츠를 재생한다. When content is selected in the
또한 재생되는 콘텐츠와 사용자의 상태 변화 이력 정보는 도 5에 도시된 바와 같이 각각 별도의 디스플레이 장치들(510, 520)에 표시될 수 있고, 콘텐츠 처리 장치(530)에 구비된 디스플레이부에 모두 표시될 수 있다. 5, the contents to be reproduced and the user's status change history information may be displayed on
또한 본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, hard disk, floppy disk, flash memory, optical data storage, And the like. The computer readable recording medium may also be distributed over a networked computer system and stored and executed as computer readable code in a distributed manner.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구 범위에 기재된 내용과 동등한 범위내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다. It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. Therefore, the scope of the present invention should not be limited to the above-described embodiments, but should be construed to include various embodiments within the scope of the claims.
Claims (25)
상기 콘텐츠 처리 장치에서, 콘텐츠 재생중 상기 콘텐츠와 별개로 저장된 사용자 상태 변화와 사용자 상태 변화가 발생한 시간에 해당하는 사용자 상태 변화의 기록 정보를 검출하는 과정;
상기 콘텐츠 처리 장치에서, 상기 검출된 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태 변화가 발생한 시간의 인디케이터와 상기 시간 동안 발생 된 사용자 상태 변화의 아이콘을 포함하는 상기 사용자 상태 변화의 이력을 재생 바에 표시하는 과정;
상기 콘텐츠 처리 장치에서, 상기 재생 바에 표시된 사용자의 상태 변화의 이력으로부터 선택된 상기 사용자 상태 변화 지점에 해당하는 콘텐츠를 재생하는 과정을 포함하는 멀티미디어 콘텐츠 처리 방법. A method for processing multimedia content in a content processing apparatus,
Detecting, in the content processing apparatus, record information of a user state change corresponding to a user state change stored at the time of content reproduction and a user state change occurring at the time of content reproduction;
The content processing apparatus displays a history of the user state change including an indicator of a time at which the user state change occurred and an icon of the user state change generated during the time based on the detected record information of the user state change, Process;
And reproducing, at the content processing apparatus, a content corresponding to the user state change point selected from the history of the user's state change displayed on the playback bar.
콘텐츠 재생중 상기 사용자의 상태 변화가 감지되는 지점마다 사용자의 상태 이력을 나타내는 아이콘을 재생 바에 표시하는 것임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법. The method as claimed in claim 1, wherein the step of displaying the status change history of the user comprises:
And displaying an icon representing a user's history history on a playback bar at a point where a change in the user's status is detected during content playback.
콘텐츠 재생중 현재 재생 지점의 인디케이터와 함께 사용자 상태 변화 지점의 인디케이터를 표시하고,
상기 사용자 상태 변화 지점의 인디케이터마다 사용자 감상 상태를 나타내는 아이콘들을 표시하는 것임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법. The method of claim 1, wherein the step of displaying the history change history of the user on the playback bar comprises:
The indicator of the user state change point is displayed together with the indicator of the current playback point during content playback,
Wherein icons indicating the user's listening state are displayed for each indicator of the user state change point.
상기 사용자의 상태 변화 지점에 사용자의 아이디 및 사용자 상태를 표시하는 것임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법.The method of claim 1, wherein the step of displaying the history change history of the user on the playback bar comprises:
Wherein the user ID and the user status are displayed at a state change point of the user.
상기 사용자 상태 변화가 있는 시점의 전, 후에 임시로 표시되고 일정 시간 후 숨기는 것임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법.2. The method according to claim 1,
Wherein the multimedia content is temporarily displayed before and after the time when the user status change occurs, and is hidden after a predetermined time.
상기 사용자의 상태 변화 지점들이 선별적으로 선택되면 사용자의 감상 기록 정보중 상기 선택된 사용자의 상태 변화 지점에 해당하는 콘텐츠들이 선별적으로 재생되고, 그렇지 않은 콘텐츠들은 스킵되는 과정을 더 포함하는 멀티미디어 처리 방법.The method of claim 1,
A step of selectively reproducing contents corresponding to a state change point of the selected user among the viewing history information of the user when the state change points of the user are selectively selected, .
상기 콘텐츠 처리 장치에서, 콘텐츠 재생시 콘텐츠를 감상한 사용자 상태 변화가 발생한 지점과 상기 사용자 상태 정보를 포함하는 사용자 상태 변화의 기록 정보를 검출하는 과정;
상기 콘텐츠 처리 장치에서, 상기 검출된 사용자 상태 변화의 기록 정보에 근거하여 사용자 상태 변화 지점마다 상기 사용자 상태 변화가 발생한 지점과 상기 사용자 상태 정보의 인디케이터를 재생 바에 표시하는 과정;
상기 콘텐츠 처리 장치에서, 상기 재생 바에 표시된 사용자 상태 변화 지점의 인디케이터마다 사용자 상태 변화 시간, 사용자 아이디 및 사용자 감상 상태를 나타내는 아이콘들을 표시하는 과정을 포함하는 멀티미디어 콘텐츠 처리 방법.A method for processing multimedia content in a content processing apparatus,
Detecting, at the content processing apparatus, record information of a user state change including a point where a change in the user state that has watched the content when the content is played back and the user state information;
Displaying in the playback bar an indicator of the user state information and a point where the user state change occurs for each user state change point based on the detected record information of the user state change;
And displaying, in the content processing apparatus, icons indicating a user state change time, a user ID, and a user's appreciation state for each indicator of a user state change point displayed on the playback bar.
콘텐츠 재생시 입력 장치를 이용하여 상기 콘텐츠에 대한 사용자 상태 변화를 검출하는 과정;
상기 콘텐츠 재생 동안 사용자 상태 변화가 발생 된 시점에서 상기 검출된 사용자 상태 변화를 사용자 상태 변화의 이력으로써 기록하는 과정을 포함하며,
상기 사용자 상태 변화의 이력은 사용자 상태 변화 시간, 사용자 아이디 및 사용자 감정 상태를 포함하는 것을 특징으로 하는 멀티미디어 콘텐츠 처리 방법.A method for processing multimedia contents in a content processing apparatus,
Detecting a user state change with respect to the content using an input device when reproducing the content;
And recording the detected user state change as a history of the user state change at the time when the user state change occurs during the content playback,
Wherein the history of the user state change includes a user state change time, a user ID, and a user emotion state.
화상 또는 음성 또는 문자중 적어도 한 개 이상을 이용해 사용자의 감상 모습으로서 기록된 것임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법. 20. The method of claim 19,
Wherein the content is recorded as a viewing state of the user by using at least one of an image, a voice, or a character.
상기 사용자 상태를 분류하고, 그 분류된 사용자 상태에 따라 사용자 상태 변화를 검출하는 과정임을 특징으로 하는 멀티미디어 콘텐츠 처리 방법.The method of claim 19, wherein the detecting the user state change comprises:
Classifying the user state, and detecting a user state change according to the classified user state.
콘텐츠 재생시 콘텐츠를 감상하는 사용자 상태 정보를 수집하는 입력부;
재생중인 콘텐츠와 사용자 상태 정보를 표시하는 표시부;
상기 사용자 감상 입력부를 통해 입력되는 사용자 상태 정보로부터 사용자 상태의 변화가 발생 된 시간과 그 사용자 상태를 상기 콘텐츠와 별개로 기록하고, 콘텐츠 재생시 상기 사용자 상태 변화의 시점마다 사용자 상태 변화가 발생 된 시간의 인디케이터와 상기 시간 동안 발생 된 사용자 상태 변화의 아이콘을 포함하는 사용자의 상태 변화 이력을 상기 표시부에 표시하고, 상기 표시부에 표시된 사용자의 상태 변화 이력에서 사용자의 상태 변화 지점이 선택되면 그 선택된 사용자 상태 변화의 시점에 해당하는 콘텐츠를 재생하는 제어부를 포함하는 멀티미디어 콘텐츠 처리 장치. An apparatus for processing multimedia contents,
An input unit for collecting user status information for listening to the content when the content is played back;
A display unit for displaying content being played and user status information;
A time at which a change in the user state is generated and a user state thereof are recorded separately from the content from the user state information input through the user appreciation input unit, And an icon of a change in the user state generated during the time is displayed on the display unit. When a state change point of the user is selected in the user's state change history displayed on the display unit, And a control unit for reproducing a content corresponding to a time point of the change.
콘텐츠를 감상하는 사용자의 화상 정보를 생성하는 영상 입력부;
콘텐츠를 감상하는 사용자의 음성 정보를 생성하는 영상 입력부;
콘텐츠를 감상하는 사용자의 텍스트 정보를 생성하는 텍스트 입력부를 구비하는 것을 특징으로 하는 멀티미디어 콘텐츠 처리 장치.24. The apparatus of claim 23, wherein the user appreciation input unit
A video input unit for generating image information of a user viewing the content;
A video input unit for generating audio information of a user viewing the content;
And a text input unit for generating text information of a user who is listening to the content.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150042367A KR101718896B1 (en) | 2015-03-26 | 2015-03-26 | Apparatus and method for processing multimedia contents |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150042367A KR101718896B1 (en) | 2015-03-26 | 2015-03-26 | Apparatus and method for processing multimedia contents |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080059791A Division KR20100000336A (en) | 2008-06-24 | 2008-06-24 | Apparatus and method for processing multimedia contents |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150042163A true KR20150042163A (en) | 2015-04-20 |
KR101718896B1 KR101718896B1 (en) | 2017-03-22 |
Family
ID=53035366
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150042367A KR101718896B1 (en) | 2015-03-26 | 2015-03-26 | Apparatus and method for processing multimedia contents |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101718896B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115834764A (en) * | 2022-11-29 | 2023-03-21 | 咪咕文化科技有限公司 | Multimedia file playing method and device, computer equipment and storage medium |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020072952A1 (en) * | 2000-12-07 | 2002-06-13 | International Business Machines Corporation | Visual and audible consumer reaction collection |
KR100828371B1 (en) * | 2006-10-27 | 2008-05-08 | 삼성전자주식회사 | Method and Apparatus of generating meta data of content |
WO2008090859A1 (en) * | 2007-01-22 | 2008-07-31 | Sony Corporation | Information processing device and method, and program |
US20090165030A1 (en) * | 2007-12-21 | 2009-06-25 | Microsoft Corporation | Obtaining User Reactions to Video |
-
2015
- 2015-03-26 KR KR1020150042367A patent/KR101718896B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020072952A1 (en) * | 2000-12-07 | 2002-06-13 | International Business Machines Corporation | Visual and audible consumer reaction collection |
KR100828371B1 (en) * | 2006-10-27 | 2008-05-08 | 삼성전자주식회사 | Method and Apparatus of generating meta data of content |
WO2008090859A1 (en) * | 2007-01-22 | 2008-07-31 | Sony Corporation | Information processing device and method, and program |
US20090165030A1 (en) * | 2007-12-21 | 2009-06-25 | Microsoft Corporation | Obtaining User Reactions to Video |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115834764A (en) * | 2022-11-29 | 2023-03-21 | 咪咕文化科技有限公司 | Multimedia file playing method and device, computer equipment and storage medium |
Also Published As
Publication number | Publication date |
---|---|
KR101718896B1 (en) | 2017-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9564174B2 (en) | Method and apparatus for processing multimedia | |
KR20060131981A (en) | Method of generating a content item having a specific emotional influence on a user | |
JPWO2006025284A1 (en) | Stream playback device | |
JP2009508379A (en) | Video navigation method and apparatus | |
US20130222526A1 (en) | System and Method of a Remote Conference | |
JP2011130279A (en) | Content providing server, content reproducing apparatus, content providing method, content reproducing method, program and content providing system | |
JP2009239729A (en) | Device, method and program for informing content scene appearance | |
KR101440168B1 (en) | Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method | |
JP4737213B2 (en) | Information processing device | |
US11315607B2 (en) | Information processing apparatus, information processing method, and non-transitory computer readable medium | |
JP2006229453A (en) | Program presentation system | |
KR101718896B1 (en) | Apparatus and method for processing multimedia contents | |
JP4709929B2 (en) | Electronic device and display control method | |
JP2002314917A (en) | Information reproducing system | |
JP2011193371A (en) | Information management apparatus, information terminal and method for viewing information content | |
JP2020009018A (en) | Communication terminal, content server, content recommendation system, control device, and control method | |
JP5073535B2 (en) | CONTENT REPRODUCTION DEVICE, CONTENT REPRODUCTION METHOD, CONTENT REPRODUCTION SYSTEM, CONTENT REPRODUCTION PROGRAM, AND RECORDING MEDIUM CONTAINING THE PROGRAM | |
JP2017199058A (en) | Recognition device, image content presentation system, program | |
KR20090025441A (en) | Service method to input tip on playing screen, user terminal and recorder | |
KR101481689B1 (en) | Method and apparatus for detecting multimedia contents using number information | |
JP5198609B2 (en) | Electronic device, display control method, and program | |
KR101530281B1 (en) | Device and method for recording dramatic video based on user's emotion | |
JP6096095B2 (en) | Content reproduction method, content reproduction apparatus, and content reproduction program | |
JP2014215305A (en) | Dynamic image reproduction device and program | |
JP2019008420A (en) | Attention degree calculation program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20200227 Year of fee payment: 4 |