KR102553258B1

KR102553258B1 - Apparatus and method for playbacking multimedia content

Info

Publication number: KR102553258B1
Application number: KR1020160105352A
Authority: KR
Inventors: 모닐 파르마르; 마니쉬 챠브라
Original assignee: 삼성전자 주식회사
Priority date: 2015-09-18
Filing date: 2016-08-19
Publication date: 2023-07-07
Also published as: KR20170034311A

Abstract

전자 장치의 동작 방법은 다수의 사용자들에 대하여 멀티미디어 컨텐츠(multimedia content)를 디스플레이(display)하는 과정과, 상기 다수의 사용자들 중 제1 사용자가 화면에 디스플레이되는 상기 멀티미디어 컨텐츠를 시청하지(viewing) 않음을 검출하는 과정과, 상기 검출에 따라 상기 디스플레이되는 멀티미디어 컨텐츠의 제1 부분을 기록하는 과정과, 상기 제1 사용자가 상기 화면에 디스플레이되는 상기 멀티미디어 컨텐츠를 시청하기 시작함을 검출하는 과정과, 상기 다수의 사용자들에 대한 상기 멀티미디어 컨텐츠와 상기 멀티미디어 컨텐츠의 상기 제1 부분을 디스플레이하는 과정을 포함한다.A method of operating an electronic device includes the steps of displaying multimedia content for a plurality of users, and viewing the multimedia content displayed on a screen by a first user among the plurality of users. detecting that the multimedia content is displayed on the screen; and displaying the multimedia content and the first portion of the multimedia content to the plurality of users.

Description

Apparatus and method for playing back multimedia contents {APPARATUS AND METHOD FOR PLAYBACKING MULTIMEDIA CONTENT}

본 개시(disclosure)는 일반적으로 멀티미디어 컨텐츠(multimedia content)에 관한 것으로, 보다 구체적으로 멀티미디어 컨텐츠를 플레이백(playback)하기 위한 장치 및 방법에 관한 것이다.This disclosure relates generally to multimedia content, and more particularly to apparatus and methods for playing back multimedia content.

다양한 장치들이 멀티미디어 컨텐츠(multimedia content)를 재생하기 위하여 이용될 수 있다. 다양한 장치들은 사용자와의 편리한 상호작용을 위해 다양한 특징들을 제공한다. 장치들에서 이용될 수 있는 특징들 중 하나는 플레이백 옵션(playback option)이다. 플레이백 옵션은 중지된 멀티미디어 컨텐츠를 다시 재생하는 것을 의미한다. 일부 예들에서, 재생되고 있는 멀티미디어 컨텐츠가 중지되고 멀티미디어 컨텐츠가 다시 재생되는 것은 명시적인 사용자 명령에 기반한다. 다른 예들에서, 멀티미디어 컨텐츠가 재생되는 것이 명시적인 사용자 명령에 기반하는 반면, 재생되고 있는 멀티미디어 컨텐츠가 중지되는 것은 자동으로 수행되고 특정한 조건들에 기반한다. Various devices may be used to play multimedia content. Various devices provide various features for convenient interaction with users. One of the features available in the devices is the playback option. The playback option refers to replaying stopped multimedia content. In some examples, stopping the multimedia content being played and replaying the multimedia content is based on an explicit user command. In other examples, playing multimedia content is based on an explicit user command, while pausing the multimedia content being played is performed automatically and is based on specific conditions.

일반적으로 단일 사용자에 대하여 사용자 명령에 기반하는 멀티미디어 컨텐츠를 플레이백하는 방법 또는 자동으로 멀티미디어 컨텐츠를 플레이백하는 방법들이 일반적으로 이용된다. In general, a method of playing multimedia content based on a user command for a single user or a method of automatically playing multimedia content is generally used.

상술한 바와 같은 논의를 바탕으로, 본 개시(disclosure)는, 멀티미디어 컨텐츠(multimedia content)를 플레이백(playback)하는 장치 및 방법을 제공한다.Based on the above discussion, the present disclosure provides an apparatus and method for playing back multimedia content.

또한, 본 개시는, 다수의 사용자가 시청하는 멀티미디어 컨텐츠를 플레이백하는 장치 및 방법을 제공한다.In addition, the present disclosure provides an apparatus and method for playing multimedia content viewed by a plurality of users.

또한, 본 개시는, 타임 스탬프(time stamp)를 이용하여 멀티미디어 컨텐츠를 플레이백하는 장치 및 방법을 제공한다.In addition, the present disclosure provides an apparatus and method for playing back multimedia content using a time stamp.

본 개시의 다양한 실시 예들에 따르면, 전자 장치의 동작 방법은 다수의 사용자들에 대하여 멀티미디어 컨텐츠(multimedia content)를 디스플레이(display)하는 과정과, 상기 다수의 사용자들 중 제1 사용자가 화면에 디스플레이되는 상기 멀티미디어 컨텐츠를 시청하지(viewing) 않음을 검출하는 과정과, 상기 검출에 따라 상기 디스플레이되는 멀티미디어 컨텐츠의 제1 부분을 기록하는 과정과, 상기 제1 사용자가 상기 화면에 디스플레이되는 상기 멀티미디어 컨텐츠를 시청하기 시작함을 검출하는 과정과, 상기 다수의 사용자들에 대한 상기 멀티미디어 컨텐츠와 상기 멀티미디어 컨텐츠의 상기 제1 부분을 디스플레이하는 과정을 포함한다.According to various embodiments of the present disclosure, a method of operating an electronic device includes a process of displaying multimedia content for a plurality of users, and displaying a first user among the plurality of users on a screen. The step of detecting that the multimedia content is not viewed, and the step of recording a first part of the displayed multimedia content according to the detection, and the first user watching the multimedia content displayed on the screen. and detecting a start to do so, and displaying the multimedia content and the first portion of the multimedia content to the plurality of users.

본 개시의 다양한 실시 예들에 따르면, 전자 장치는 다수의 사용자들에 대하여 멀티미디어 컨텐츠(multimedia content)를 디스플레이(display)하는 표시부와, 상기 다수의 사용자들 중 제1 사용자가 화면에서 디스플레이되는 상기 멀티미디어 컨텐츠를 시청(viewing)하지 않음을 검출하는 검출부와, 상기 검출에 따라 상기 디스플레이되는 멀티미디어 컨텐츠의 제1 부분을 기록하는 저장부를 포함한다. 상기 검출부는, 상기 제1 사용자가 상기 화면에 디스플레이되는 상기 멀티미디어 컨텐츠를 시청하기 시작함을 검출하고, 상기 표시부는, 상기 다수의 사용자들에 대한 상기 멀티미디어 컨텐츠와 상기 멀티미디어 컨텐츠의 상기 제1 부분을 디스플레이한다.According to various embodiments of the present disclosure, an electronic device includes a display unit for displaying multimedia content for a plurality of users, and the multimedia content displayed on a screen by a first user among the plurality of users. and a detection unit for detecting that the user is not viewing the video, and a storage unit for recording a first portion of the displayed multimedia content according to the detection. The detection unit detects that the first user starts viewing the multimedia content displayed on the screen, and the display unit detects the multimedia content for the plurality of users and the first part of the multimedia content. display

본 개시의 다양한 실시 예들에 따른 장치 및 방법은, 다수의 사용자들에 대한 멀티미디어 컨텐츠(multimedia content)를 플레이백(playback)할 수 있다. Devices and methods according to various embodiments of the present disclosure may play back multimedia content for multiple users.

본 개시에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들을 아래의 기재로부터 본 개시가 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable in the present disclosure are not limited to the effects mentioned above, and other effects not mentioned may be clearly understood by those skilled in the art from the description below. will be.

도 1은 본 개시의 다양한 실시 예들에 따른 전자 장치의 기능적 구성의 예를 도시한다.
도 2는 본 개시의 다양한 실시 예들에 따른 다수의 사용자에 대한 멀티미디어 컨텐츠(multimedia content)를 플레이백하기 위한 전자 장치의 기능적 구성의 예를 도시한다.
도 3은 본 개시의 다양한 실시 예들에 따른 다수의 사용자에 대한 멀티미디어 컨텐츠의 플레이백에 대한 흐름도의 예를 도시한다.
도 4는 본 개시의 다양한 실시 예들에 따른 멀티 뷰 모드(multi view mode)에서 라이브 컨텐츠(live content)의 자동 기록(auto recording) 및 플레이백에 대한 흐름도의 예를 도시한다.
도 5는 본 개시의 다양한 실시 예들에 따른 멀티 뷰 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 6은 본 개시의 다양한 실시 예들에 따른 PIP(picture-in-picture) 모드 또는 스플릿 화면 모드(split screen mode)에서 라이브 컨텐츠의 자동 기록 및 플레이백에 대한 흐름도의 예를 도시한다.
도 7은 본 개시의 다양한 실시 예들에 따른 스플릿 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 8은 본 개시의 다양한 실시 예들에 따른 PIP 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 9는 본 개시의 다양한 실시 예들에 따른 사용자가 주의를 기울이지 않은 경우 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 10은 본 개시의 다양한 실시 예들에 따른 라이브 컨텐츠의 자동 기록 및 제2 전자 장치에서의 플레이백에 대한 흐름도의 예를 도시한다.
도 11은 본 개시의 다양한 실시 예들에 따른 라이브 컨텐츠의 자동 기록 및 제2 전자 장치에서의 플레이백의 예를 도시한다.
도 12는 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백에 대한 흐름도의 예를 도시한다.
도 13은 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 14은 본 개시의 다양한 실시 예들에 따른 4명의 사용자에 대한 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다.
도 15는 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프(time stamp) 로부터 시작하는 컨텐츠의 디스플레이에 대한 흐름도의 예를 도시한다.
도 16은 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도의 예를 도시한다.
도 17은 본 개시의 다양한 실시 예들에 따른 스플릿 화면 모드 또는 PIP 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도의 예를 도시한다.
도 18은 본 개시의 다양한 실시 예들에 따른 제2 전자 장치에서의 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도의 예를 도시한다.
도 19는 본 개시의 다양한 실시 예들에 따른 트릭 플레이 모드 또는 하이라이트 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도의 예를 도시한다.
도 20은 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이의 예를 도시한다.
도 21은 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이하기 위한 전자 장치의 기능적 구성의 예를 도시한다.
도 22는 본 개시의 다양한 실시 예들에 따른 도 2에서 설명되는 전자 장치 200의 구성과 비교하여 더 적은 수의 컴포넌트들을 포함하는 전자 장치의 기능적 구성의 예를 도시한다.1 illustrates an example of a functional configuration of an electronic device according to various embodiments of the present disclosure.
2 illustrates an example of a functional configuration of an electronic device for playing back multimedia content for multiple users according to various embodiments of the present disclosure.
3 illustrates an example flow diagram for playback of multimedia content for multiple users according to various embodiments of the present disclosure.
4 illustrates an example of a flowchart for auto recording and playback of live content in a multi view mode according to various embodiments of the present disclosure.
5 illustrates an example of automatic recording and playback of live content in a multi-view mode according to various embodiments of the present disclosure.
6 illustrates an example of a flowchart for automatic recording and playback of live content in a picture-in-picture (PIP) mode or a split screen mode according to various embodiments of the present disclosure.
7 illustrates an example of automatic recording and playback of live content in a split screen mode according to various embodiments of the present disclosure.
8 illustrates an example of automatic recording and playback of live content in PIP mode according to various embodiments of the present disclosure.
9 illustrates an example of automatic recording and playback of live content when a user does not pay attention according to various embodiments of the present disclosure.
10 illustrates an example of a flowchart for automatic recording of live content and playback in a second electronic device according to various embodiments of the present disclosure.
11 illustrates an example of automatic recording of live content and playback in a second electronic device according to various embodiments of the present disclosure.
12 illustrates an example of a flowchart for automatic recording and playback of live content in a full screen mode according to various embodiments of the present disclosure.
13 illustrates an example of automatic recording and playback of live content in a full screen mode according to various embodiments of the present disclosure.
14 illustrates an example of automatic recording and playback of live content for 4 users according to various embodiments of the present disclosure.
15 illustrates an example of a flowchart for display of content starting from a stored time stamp according to various embodiments of the present disclosure.
16 illustrates another example of a flowchart for display of content starting from a stored time stamp in a full screen mode according to various embodiments of the present disclosure.
17 illustrates another example of a flowchart for display of content starting from a stored time stamp in a split screen mode or a PIP mode according to various embodiments of the present disclosure.
18 illustrates another example of a flowchart for display of content starting from a stored time stamp in a second electronic device according to various embodiments of the present disclosure.
19 illustrates another example of a flowchart for display of content starting from a stored time stamp in a trick play mode or a highlight mode according to various embodiments of the present disclosure.
20 illustrates an example of displaying content starting from a stored time stamp according to various embodiments of the present disclosure.
21 illustrates an example of a functional configuration of an electronic device for displaying content starting from a stored time stamp according to various embodiments of the present disclosure.
FIG. 22 illustrates an example of a functional configuration of an electronic device including fewer components compared to the configuration of the electronic device 200 described in FIG. 2 according to various embodiments of the present disclosure.

본 개시에서 사용되는 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 개시에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 개시에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 개시에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 개시에서 정의된 용어일지라도 본 개시의 실시 예들을 배제하도록 해석될 수 없다. Terms used in the present disclosure are only used to describe a specific embodiment, and may not be intended to limit the scope of other embodiments. Singular expressions may include plural expressions unless the context clearly dictates otherwise. Terms used herein, including technical or scientific terms, may have the same meaning as commonly understood by one of ordinary skill in the art described in this disclosure. Among the terms used in the present disclosure, terms defined in general dictionaries may be interpreted as having the same or similar meanings as those in the context of the related art, and unless explicitly defined in the present disclosure, ideal or excessively formal meanings. not be interpreted as In some cases, even terms defined in the present disclosure cannot be interpreted to exclude embodiments of the present disclosure.

이하에서 설명되는 본 개시의 다양한 실시 예들에서는 하드웨어적인 접근 방법을 예시로서 설명한다. 하지만, 본 개시의 다양한 실시 예들에서는 하드웨어와 소프트웨어를 모두 사용하는 기술을 포함하고 있으므로, 본 개시의 다양한 실시 예들이 소프트웨어 기반의 접근 방법을 제외하는 것은 아니다. In various embodiments of the present disclosure described below, a hardware access method is described as an example. However, since various embodiments of the present disclosure include technology using both hardware and software, various embodiments of the present disclosure do not exclude software-based access methods.

본 개시는 멀티미디어 컨텐츠(multimedia content)를 플레이백(playback)하기 위한 장치 및 방법에 관한 것이다. 상기 멀티미디어 컨텐츠를 플레이백하는 것은 기록된 멀티미디어 컨텐츠를 재생하는 것을 의미할 수 있다.The present disclosure relates to an apparatus and method for playing back multimedia content. Playing back the multimedia content may mean playing recorded multimedia content.

본 개시에서 이용되는 디스플레이 모드(예: 프레젠테이션 모드(presentation mode), 전체 화면 모드(full screen mode), PIP(picture-in-picture) 모드, 스플릿 화면 모드(split screen mode), 멀티 뷰 모드(multi view mode), 하이라이트 모드(highlight mode), 트릭 플레이 모드(trick play mode), 및 증강 모드(augmented mode))를 나타내는 용어, 멀티미디어 컨텐츠(예: 라이브 컨텐츠(live content) 및 스트리밍 컨텐츠(streaming content))를 나타내는 용어, 및 전자 장치 내의 컴포넌트들(components)을 나타내는 용어 등은 설명의 편의를 위한 것이다. 따라서, 본 개시가 후술되는 용어들에 한정되는 것은 아니며, 동등한 기술적 의미를 가지는 다른 용어들이 본 개시에 적용될 수 있다. Display modes used in the present disclosure (eg, presentation mode, full screen mode, picture-in-picture (PIP) mode, split screen mode, multi-view mode) view mode), highlight mode, trick play mode, and augmented mode), and multimedia content (e.g., live content and streaming content) ), and terms indicating components in an electronic device, etc. are for convenience of description. Therefore, the present disclosure is not limited to the terms described below, and other terms having equivalent technical meanings may be applied to the present disclosure.

도 1은 본 개시의 다양한 실시 예들에 따른 전자 장치 100의 기능적 구성의 예를 도시한다.1 illustrates an example of a functional configuration of an electronic device 100 according to various embodiments of the present disclosure.

도 1을 참고하면, 전자 장치 100은 표시부 101, 검출부 102, 저장부 103, 및 통신부 104를 포함한다. 본 발명의 다양한 실시 예들에서 전자 장치 100은 도 1에 도시된 구성들이 필수적인 것은 아니어서, 도 1에 도시된 구성들보다 많은 구성들을 가지거나, 또는 그보다 적은 구성들을 가지는 것으로 구현될 수 있다.Referring to FIG. 1 , an electronic device 100 includes a display unit 101, a detection unit 102, a storage unit 103, and a communication unit 104. In various embodiments of the present disclosure, the electronic device 100 may have more or fewer components than the components shown in FIG. 1 since the components shown in FIG. 1 are not essential.

표시부 101은 전자 장치 100에 의해 처리되는 멀티미디어 컨텐츠를 디스플레이한다. 즉, 표시부 101은 사용자에게 시각적인 출력을 보여준다. 이러한 시각적 출력은 텍스트(text), 그래픽(graphic), 비디오(video)와 이들의 조합의 형태로 나타난다. 일 실시 예에서, 표시부 101은 멀티미디어 컨텐츠를 시청하기 시작하는 다수의 사용자들 중 한 사용자를 위해 기록된 멀티미디어 컨텐츠의 일부분의 포맷을 디스플레이한다. 예를 들어, 상기 포맷은 재생되는 멀티미디어 컨텐츠, 멀티미디어 컨텐츠의 하이라이트, 멀티미디어 컨텐츠의 요약(summary), 기록된 멀티미디어 컨텐츠의 일부분의 플레이백, 또는 재생되는 멀티미디어 컨텐츠의 패스트 플레이백일 수 있다. 표시부 101은 여러 가지 디스플레이가 이용될 수 있다. 예를 들면, 이에 한정하지는 않지만, LCD(liquid crystal display), LED(Light Emitting Diode), LPD(light emitting polymer display), OLED(Organic Light Emitting Diode), AMOLED(Active Matrix Organic Light Emitting Diode) 또는 FLED(Flexible LED)를 사용할 수 있다. The display unit 101 displays multimedia content processed by the electronic device 100 . That is, the display unit 101 shows a visual output to the user. This visual output appears in the form of text, graphics, video, and combinations thereof. In an embodiment, the display unit 101 displays a format of a portion of recorded multimedia content for one user among a plurality of users who start viewing the multimedia content. For example, the format may be playback of multimedia content, highlight of multimedia content, summary of multimedia content, playback of a portion of recorded multimedia content, or fast playback of playback of multimedia content. The display unit 101 may use various displays. For example, but not limited to, liquid crystal display (LCD), light emitting diode (LED), light emitting polymer display (LPD), organic light emitting diode (OLED), active matrix organic light emitting diode (AMOLED) or FLED (Flexible LED) can be used.

검출부 102는 사용자(들)의 존재(presence)/부재(absence) 또는 사용자(들)의 시선 방향을 검출한다. 일 실시 예에서, 검출부 102는 전자 장치 100의 주변 환경을 촬영한 이미지 내에 사용자가 존재한다면, 사용자의 존재를 검출한다. 검출부 102는 일정 주기 간격으로 전자 장치 100의 주변 환경을 촬영하여 촬영된 이미지 내에 사용자가 존재하지 않는다면, 사용자의 부재를 검출한다. 다른 실시 예에서, 검출부 102는 사용자의 눈을 촬영하고, 촬영된 이미지에서 사용자의 동공을 검출하고, 검출된 사용자의 동공 위치에 기초하여 사용자의 시선을 검출하고, 이러한 시선 검출 동작을 연속적으로 수행하여 사용자의 시선 이동 또는 시선 경로를 검출한다. The detection unit 102 detects the presence/absence of the user(s) or the gaze direction of the user(s). In an embodiment, the detection unit 102 detects the presence of a user if the user exists in an image obtained by capturing the surrounding environment of the electronic device 100 . The detection unit 102 photographs the surrounding environment of the electronic device 100 at regular intervals and detects the absence of the user if the user does not exist in the photographed image. In another embodiment, the detection unit 102 photographs the user's eyes, detects the user's pupils in the photographed image, detects the user's gaze based on the detected pupil position of the user, and continuously performs the gaze detection operation. to detect the user's gaze movement or gaze path.

저장부 103은 전자 장치 100에 의해 실행되는 하나 또는 그 이상의 프로그램들을 저장할 수 있고, 입/출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. 예를 들어, 상기 입/출력되는 데이터들은 동영상, 이미지, 사진, 오디오 등의 파일 또는 멀티미디어 컨텐츠를 포함할 수 있다. 저장부 103은 멀티미디어 컨텐츠를 저장하는 역할을 담당하며, 실시간으로 획득된 멀티미디어 컨텐츠는 일시적인 저장 장치에 저장할 수 있고, 저장하기로 확정된 멀티미디어 컨텐츠는 오래 보관 가능한 저장 장치에 저장할 수 있다. The storage unit 103 may store one or more programs executed by the electronic device 100 and may perform a function for temporarily storing input/output data. For example, the input/output data may include files such as videos, images, photos, and audio, or multimedia contents. The storage unit 103 is responsible for storing multimedia contents, and can store multimedia contents obtained in real time in a temporary storage device, and store multimedia contents determined to be stored in a long-term storage device.

통신부 104는 전자 장치 100에서 기록된 멀티미디어 컨텐츠가 다른 외부 전자 장치에서 디스플레이 되도록, 다른 외부 전자 장치와 무선 통신을 수행한다. 즉, 통신부 104는 전자 장치 100의 다른 구성요소(들)로부터 수신된 명령 또는 데이터를 다른 외부 전자 장치로 송신한다. 다양한 실시 예들에서, 통신부 101은 주변의 외부 전자 장치와 무선 통신을 수행하기 위한 모듈(예: 근거리 통신 모듈, 원거리 통신 모듈 등)을 포함할 수 있다. 예를 들어, 통신부 101은 이동 통신 모듈, 무선 랜(WLAN, wireless local area network) 모듈, 근거리 통신 모듈, 그리고 위치 산출 모듈 등을 포함하여 구성될 수 있다.The communication unit 104 performs wireless communication with other external electronic devices so that the multimedia content recorded in the electronic device 100 is displayed on the other external electronic devices. That is, the communication unit 104 transmits commands or data received from other element(s) of the electronic device 100 to other external electronic devices. In various embodiments, the communication unit 101 may include a module (eg, a short-distance communication module, a long-distance communication module, etc.) for performing wireless communication with a nearby external electronic device. For example, the communication unit 101 may include a mobile communication module, a wireless local area network (WLAN) module, a short-distance communication module, and a location calculation module.

예를 들어, 전자 장치 100은 멀티미디어 플레이백 장치, 핸드헬드(handheld) 장치, 및 사용자 입력 장치 중 하나일 수 있다. 예를 들어, 상기 멀티미디어 플레이백 장치, 상기 핸드헬드 장치, 및 상기 사용자 입력 장치는 텔레비전(television), 스마트폰(smartphone), 스마트 유리(smart glass), 타블릿(tablet), 디스플레이 장치, 및 셋-탑 박스(set-top box) 중 하나일 수 있다.For example, the electronic device 100 may be one of a multimedia playback device, a handheld device, and a user input device. For example, the multimedia playback device, the handheld device, and the user input device may include a television, a smartphone, a smart glass, a tablet, a display device, and a three- It can be one of the set-top boxes.

도 2는 본 개시의 다양한 실시 예들에 따른 다수의 사용자에 대한 멀티미디어 컨텐츠를 플레이백하기 위한 전자 장치 200의 기능적 구성의 예를 도시한다. 전자 장치 200은 디스플레이 모듈(module)/장치 201, 검출 모듈 202, 비디오 기록 모듈 203, 멀티 뷰 디스플레이 모듈 204, 비디오 플레이어 모듈 205, 하이라이트 검출기 모듈 206, 멀티미디어 타임 스탬프 저장 모듈(multimedia time stamp storage module) 207, 및 외부 장치 상호작용 모듈 208을 포함한다. 2 illustrates an example of a functional configuration of an electronic device 200 for playing back multimedia content for multiple users according to various embodiments of the present disclosure. The electronic device 200 includes a display module/device 201, a detection module 202, a video recording module 203, a multi-view display module 204, a video player module 205, a highlight detector module 206, a multimedia time stamp storage module. 207, and external device interaction module 208.

디스플레이 모듈/장치 201은 다수의 사용자들에 대한 멀티미디어 컨텐츠를 디스플레이한다. 상기 멀티미디어 컨텐츠는 전자 장치 200에 미리 저장된 컨텐츠 또는 스트리밍된 컨텐츠일 수 있다.The display module/device 201 displays multimedia content for multiple users. The multimedia content may be content previously stored in the electronic device 200 or content streamed.

검출 모듈 202는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출한다. 일 실시 예에서, 검출 모듈 202는 다수의 사용자들 중 한 사용자의 부재 또는 한 사용자의 시선이 전자 장치 200으로 향하지 않는 것을 검출한다. 또한, 검출 모듈 202는 한 사용자가 멀티미디어 컨텐츠를 시청하기 시작하는 것과 관련된 조건을 검출한다. 일 실시 예에서, 검출 모듈 202는 한 사용자의 존재 또는 한 사용자의 시선이 전자 장치 200으로 향하는 것을 검출한다.The detection module 202 detects a condition related to one of the plurality of users not viewing the multimedia content. In an embodiment, the detection module 202 detects the absence of one of the plurality of users or the fact that the gaze of one user is not directed toward the electronic device 200 . Also, the detection module 202 detects a condition related to a user starting to view multimedia content. In an embodiment, the detection module 202 detects the presence of a user or the gaze of a user toward the electronic device 200 .

비디오 기록 모듈 203은 디스플레이되는 멀티미디어 컨텐츠의 일부분을 기록한다. 일 실시 예에서, 비디오 기록 모듈 203은 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건이 검출된 시점부터 디스플레이되는 멀티미디어 컨텐츠를 기록한다. The video recording module 203 records a portion of displayed multimedia content. In an embodiment, the video recording module 203 records the displayed multimedia content from the time when a condition related to the fact that one of the plurality of users does not watch the multimedia content is detected.

멀티 뷰 디스플레이 모듈 204는 다수의 사용자들에 대한 멀티미디어 컨텐츠 및 프레젠테이션 모드에서 멀티미디어 컨텐츠를 시청하기 시작하는 제1 사용자에 대응하는 기록된 멀티미디어 컨텐츠의 일부분의 포맷을 제공한다. 상기 프레젠테이션 모드는 컨텐츠를 디스플레이하는 방식을 의미한다. 예를 들어, 프레젠테이션 모드는 전체 화면 모드, PIP 모드, 스플릿 화면 모드, 멀티 뷰 모드, 또는 증강 모드를 의미할 수 있다. 상기 전체 화면 모드는, 화면 전체에 멀티미디어 컨텐츠가 디스플레이되는 것을 의미한다. 상기 PIP 모드는, 화면 전체에 멀티미디어 컨텐츠가 디스플레이되면서, 화면 속 다른 화면에 다른 멀티미디어 컨텐츠가 디스플레이되는 것을 의미한다. 상기 스플릿 화면 모드는, 2개로 나누어진 화면 각각에 다른 멀티미디어 컨텐츠가 디스플레이되는 것을 의미한다. 상기 멀티 뷰 모드는, 다수의 사용자들이 동일한 화면에서 디스플레이되는 서로 다른 멀티미디어 컨텐츠들을 시청하는 것을 의미한다. 상기 증강 모드는 다수의 사용자들이 동일한 가상현실에서 서로 다른 멀티미디어 컨텐츠들을 시청하는 것을 의미한다. The multi-view display module 204 provides multimedia content for multiple users and a format of a portion of the recorded multimedia content corresponding to a first user starting to view the multimedia content in a presentation mode. The presentation mode refers to a method of displaying content. For example, the presentation mode may mean a full screen mode, a PIP mode, a split screen mode, a multi-view mode, or an augmented mode. The full screen mode means that multimedia content is displayed on the entire screen. The PIP mode means that different multimedia contents are displayed on different screens within the screen while multimedia contents are displayed on the entire screen. The split screen mode means that different multimedia contents are displayed on each divided screen. The multi-view mode means that a plurality of users watch different multimedia contents displayed on the same screen. The augmented mode means that a plurality of users watch different multimedia contents in the same virtual reality.

비디오 플레이어 모듈 205는 기록된 멀티미디어 컨텐츠의 일부분을 재생한다. 비디오 플레이어 모듈 205는 기록된 멀티미디어 컨텐츠의 일부분을 패스트 플레이백(fast playback) 또는 플레이백한다. 상기 패스트 플레이백은 기록된 멀티미디어 컨텐츠를 빠르게 재생하는 것을 의미한다. The video player module 205 plays a portion of the recorded multimedia content. The video player module 205 performs fast playback or playback of a portion of the recorded multimedia content. The fast playback means playing recorded multimedia contents quickly.

하이라이트 검출기 모듈 206은 기록된 멀티미디어 컨텐츠의 일부분 내의 하이라이트들을 검출한다. 일 실시 예에서, 하이라이트 검출기 모듈 206은 멀티미디어 컨텐츠의 일부분이 기록되는 동안 또는 기록된 멀티미디어 컨텐츠의 일부분이 재생되는 동안 하이라이트를 검출할 수 있다. 상기 하이라이트는 멀티미디어 컨텐츠를 시청하는 사용자의 반응(예: 웃음)에 기반하여 결정될 수 있다. 다른 실시 예에서, 상기 하이라이트는 멀티미디어 컨텐츠에서의 특별한 효과를 검출(예: 축구 경기에서 골(goal)이 들어 갔을 때의 함성을 검출하는 것)하여 결정될 수 있다. 또한, 기록된 멀티미디어 컨텐츠의 일부분이 재생되는 동안, 하이라이트 검출기 모듈 206은 기록된 멀티미디어 컨텐츠의 일부분에 대한 하이라이트의 포맷 또는 기록된 멀티미디어 컨텐츠의 일부분에 대한 요약을 검출한다. 상기 요약은 기록된 멀티미디어 컨텐츠 전체를 디스플레이할 시간이 없는 경우, 기록된 멀티미디어 컨텐츠의 중요한 일부만을 디스플레이하는 것을 의미한다. A highlight detector module 206 detects highlights within a portion of recorded multimedia content. In one embodiment, the highlight detector module 206 may detect highlights while a portion of the multimedia content is being recorded or while a portion of the recorded multimedia content is being played. The highlight may be determined based on a user's reaction (eg, laughter) while viewing the multimedia content. In another embodiment, the highlight may be determined by detecting a special effect in the multimedia content (eg, detecting a shout when a goal is scored in a soccer game). Also, while a portion of the recorded multimedia content is playing, the highlight detector module 206 detects a format of a highlight for the portion of the recorded multimedia content or a summary of the portion of the recorded multimedia content. The summary means displaying only an important part of the recorded multimedia contents when there is no time to display the entire recorded multimedia contents.

멀티미디어 타임 스탬프 저장 모듈 207은 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건에 대응하는 멀티미디어 컨텐츠의 일부분의 타임 스탬프 정보를 저장한다. 상기 타임 스탬프 정보는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건이 검출된 시점에 대한 정보를 포함한다. 멀티미디어 타임 스탬프 저장 모듈 207은 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건에 대응하는 멀티미디어 컨텐츠의 다른 부분의 다른 타임 스탬프 정보를 더 저장할 수 있다. The multimedia time stamp storage module 207 stores time stamp information of a portion of multimedia content corresponding to a condition related to the fact that one of the plurality of users does not watch the multimedia content. The time stamp information includes information about a time point when a condition related to the fact that one of the plurality of users does not watch multimedia content is detected. The multimedia time stamp storage module 207 may further store other time stamp information of another part of the multimedia content corresponding to a condition related to the fact that one of the plurality of users does not watch the multimedia content.

외부 장치 상호작용 모듈 208은 기록된 멀티미디어 컨텐츠의 일부분이 다른 전자 장치에서 디스플레이되도록 한다. 일 실시 예에서, 외부 장치 상호작용 모듈 208은 다른 전자 장치에게 기록된 멀티미디어 컨텐츠에 대한 정보를 송신한다. The external device interaction module 208 allows a portion of the recorded multimedia content to be displayed on another electronic device. In one embodiment, the external device interaction module 208 transmits information about recorded multimedia content to another electronic device.

일 실시 예에서, 검출 모듈 202, 비디오 기록 모듈 203, 멀티 뷰 디스플레이 모듈 204, 비디오 플레이어 모듈 205, 하이라이트들 검출 모듈 206, 멀티미디어 타임 스탬프 저장 모듈 207, 및 외부 장치 상호작용 모듈 208과 같은 시스템의 모든 컴포넌트들은 단일 개체를 형성하도록 통합될 수 있다. In one embodiment, all aspects of the system such as detection module 202, video recording module 203, multi-view display module 204, video player module 205, highlights detection module 206, multimedia timestamp storage module 207, and external device interaction module 208 Components can be integrated to form a single entity.

다른 실시 예에서, 디스플레이 모듈/장치 201은 검출 모듈 202, 비디오 기록 모듈 203, 멀티 뷰 디스플레이 모듈 204, 비디오 플레이어 모듈 205, 하이라이트 검출 모듈 206, 멀티미디어 타임 스탬프 저장 모듈 207, 및 외부 장치 상호작용 모듈 208을 포함할 수 있다. In another embodiment, the display module/device 201 includes a detection module 202, a video recording module 203, a multi-view display module 204, a video player module 205, a highlight detection module 206, a multimedia timestamp storage module 207, and an external device interaction module 208. can include

도 3은 본 개시의 실시 예들에 따른 다수의 사용자에 대한 멀티미디어 컨텐츠의 플레이백에 대한 흐름도 300의 예를 도시한다. 3 illustrates an example flow diagram 300 for playback of multimedia content to multiple users according to embodiments of the present disclosure.

도 3을 참고하면, 301 단계에서, 전자 장치 100은 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출한다. 일 실시 예에서, 전자 장치 100에 설치된 센서(sensor)는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출할 수 있다. 예를 들어, 상기 센서는 카메라(camera), 근접 검출기(proximity detector), 존재 검출기(presence detector), 및 지문 검출기 중 하나일 수 있다. 다른 실시 예에서, 전자 장치 100은 다수의 사용자들 중 다른 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출할 수 있다. Referring to FIG. 3 , in step 301, the electronic device 100 detects a condition related to a user not viewing multimedia content among a plurality of users. In an embodiment, a sensor installed in the electronic device 100 may detect a condition related to a user not viewing multimedia content among a plurality of users. For example, the sensor may be one of a camera, proximity detector, presence detector, and fingerprint detector. In another embodiment, the electronic device 100 may detect a condition related to the fact that another user among a plurality of users does not watch multimedia content.

302 단계에서, 전자 장치 100은 다수의 사용자들 중 한 사용자에 대응하는 멀티미디어 컨텐츠의 일부분을 기록한다(record). 일 실시 예에서, 전자 장치 100은 디스플레이 멀티미디어 컨텐츠 전체를 기록할 수 있다. 다른 실시 예에서, 전자 장치 100은 다수의 사용자들 중 다른 사용자에 대응하는 멀티미디어 컨텐츠의 다른 부분을 기록할 수 있다.In step 302, the electronic device 100 records a portion of multimedia content corresponding to one user among multiple users. In one embodiment, the electronic device 100 may record all of the displayed multimedia content. In another embodiment, the electronic device 100 may record another part of multimedia content corresponding to another user among a plurality of users.

303 단계에서, 전자 장치 100은 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하기 시작하는 것과 관련된 조건을 검출한다. 예를 들어, 전자 장치 100은 전자 장치 100의 검출 영역 내에 존재하는 다수의 사용자들 중 한 사용자를 검출한다. 다른 예를 들어, 전자 장치 100은 전자 장치 100으로 향하는 다수의 사용자들 중 한 사용자의 시선을 검출한다. 일 실시 예에서, 전자 장치 100은 다수의 사용자들 중 다른 사용자가 멀티미디어 컨텐츠를 시청하기 시작하는 것과 관련된 조건을 검출한다.In step 303, the electronic device 100 detects a condition related to the start of viewing multimedia content by one of the plurality of users. For example, the electronic device 100 detects one user among a plurality of users existing within a detection area of the electronic device 100 . For another example, the electronic device 100 detects a gaze of one user among a plurality of users directed toward the electronic device 100 . In an embodiment, the electronic device 100 detects a condition related to another user among a plurality of users starting to watch multimedia content.

304 단계에서, 전자 장치 100은 다수의 사용자들에 대한 멀티미디어 컨텐츠와 한 사용자에 대응하는 멀티미디어 컨텐츠의 일부분을 디스플레이한다. 일 실시 예에서, 전자 장치 100은 프레젠테이션 모드에서 다수의 사용자들 중 한 사용자에 대응하는 기록된 멀티미디어 컨텐츠의 일부분의 포맷 및 다수의 사용자들에 대한 멀티미디어 컨텐츠를 동시에 디스플레이한다. 예를 들어, 상기 포맷은 상기 기록된 부분의 하이라이트, 상기 기록된 부분의 플레이백, 상기 기록된 부분의 요약, 및 상기 기록된 부분의 패스트 플레이백 중 적어도 하나일 수 있다. 다른 실시 예에서, 전자 장치 100은 전체 화면 모드, PIP 모드, 스플릿 화면 모드, 멀티 뷰 모드, 및 증강 모드 중 하나에서 다수의 사용자 들 중 한 사용자에 대응하는 상기 기록된 멀티미디어 컨텐츠의 일부분의 포맷 및 다수의 사용자들에 대한 멀티미디어 컨텐츠를 동시에 디스플레이한다. 예를 들어, 상기 멀티미디어 컨텐츠는 브로드캐스팅(broadcasting)되는 컨텐츠, 스트리밍(streaming)되는 컨텐츠, 전자 장치 100에 미리 저장된 컨텐츠 중 하나일 수 있다. 또 다른 실시 예에서, 전자 장치 100은 프레젠테이션 모드에서 다수의 사용자들 중 다른 사용자에 대응하는 기록된 멀티미디어 컨텐츠의 다른 부분의 포맷 및 다수의 사용자들에 대한 멀티미디어 컨텐츠를 동시에 디스플레이할 수 있다.In step 304, the electronic device 100 displays multimedia contents for multiple users and a portion of the multimedia contents corresponding to one user. In an embodiment, the electronic device 100 simultaneously displays a format of a portion of recorded multimedia content corresponding to one user among multiple users and multimedia content for multiple users in a presentation mode. For example, the format may be at least one of a highlight of the recorded portion, a playback of the recorded portion, a summary of the recorded portion, and a fast playback of the recorded portion. In another embodiment, the electronic device 100 determines the format of a portion of the recorded multimedia content corresponding to one user among multiple users in one of full screen mode, PIP mode, split screen mode, multi-view mode, and augmented mode; and It displays multimedia contents for multiple users at the same time. For example, the multimedia content may be one of broadcasting content, streaming content, and pre-stored content in the electronic device 100 . In another embodiment, the electronic device 100 may simultaneously display formats of different portions of recorded multimedia content corresponding to different users among multiple users and multimedia content for multiple users in a presentation mode.

도 4는 본 개시의 다양한 실시 예들에 따른 멀티 뷰 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백에 대한 흐름도 400의 예를 도시한다. 도 4에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다. 4 illustrates an example flow diagram 400 for automatic recording and playback of live content in a multi-view mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 4 may be performed by the electronic device 200 .

도 4를 참고하면, 401 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 시청(watch)하고 있다. 상기 라이브 컨텐츠는 제1 사용자 및 제2 사용자가 함께 시청하기 시작한 멀티미디어 컨텐츠를 의미한다. Referring to FIG. 4 , in step 401 , the first user and the second user are watching live content displayed by the display module/device 201 . The live content refers to multimedia content that the first user and the second user start to watch together.

402 단계에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 예를 들어, 검출 모듈 202는 제1 사용자 및 제2 사용자의 얼굴을 식별하여 제1 사용자 및 제2 사용자의 존재를 검출할 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다. In step 402, the detection module 202 detects the presence of a first user and a second user. For example, the detection module 202 may detect the existence of the first user and the second user by identifying the faces of the first user and the second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

403 단계에서, 제2 사용자는 자리를 비우거나 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 403, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

404 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 404, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

405 단계에서, 라이브 컨텐츠가 디스플레이 모듈/장치 201에서 중단되지 않고 디스플레이되는 동안, 비디오 기록 모듈 203은 라이브 컨텐츠를 기록하기 시작한다. 비디오 기록 모듈 203은 검출 모듈 202로부터 제2 사용자의 부재를 나타내는 정보를 수신한 후, 라이브 컨텐츠를 기록하기 시작한다. In step 405, while the live content is uninterruptedly displayed on the display module/device 201, the video recording module 203 starts recording the live content. The video recording module 203 starts recording live content after receiving the information indicating the absence of the second user from the detection module 202 .

406 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 406 , the second user returns to his seat or starts paying attention to the display module/device 201 . That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

407 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.In step 407, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 .

408 단계에서, 제1 사용자가 동일한 디스플레이 모듈/장치 201의 전체 화면에서의 라이브 컨텐츠를 시청하는 동안, 멀티 뷰 디스플레이 모듈 204는 디스플레이 모듈/장치 201의 전체 화면에서 제2 사용자에 대하여 기록된 컨텐츠를 디스플레이한다. 멀티 뷰 디스플레이 모듈 204는 검출 모듈 202로부터 제2 사용자의 존재를 나타내는 정보를 수신한 후 디스플레이 모듈/장치 201의 전체 화면에서 제2 사용자에 대하여 기록된 컨텐츠를 디스플레이한다. In step 408, while the first user watches the live content on the full screen of the same display module/device 201, the multi-view display module 204 displays the recorded content for the second user on the full screen of the display module/device 201. display The multi-view display module 204 displays recorded content for the second user on the entire screen of the display module/device 201 after receiving information indicating the presence of the second user from the detection module 202 .

도 5는 본 개시의 다양한 실시 예들에 따른 멀티 뷰 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 도 5에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.5 illustrates an example of automatic recording and playback of live content in a multi-view mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 5 may be performed by the electronic device 200 .

도 5를 참고하면, 도 5의 (a)에서, 디스플레이 모듈/장치 201은 라이브 컨텐츠 501을 디스플레이한다. 제1 사용자 및 제2 사용자는 함께 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 시청하고 있다. Referring to FIG. 5 , in (a) of FIG. 5 , a display module/device 201 displays live content 501 . The first user and the second user are watching live content on the display module/device 201 together.

도 5의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 검출 모듈 202는 카메라일 수 있다. 예를 들어, 검출 모듈 202는 제1 사용자 및 제2 사용자 각각의 목소리를 식별하여 제1 사용자 및 제2 사용자의 존재를 검출할 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다. In FIG. 5B , the detection module 202 detects the presence of a first user and a second user. The detection module 202 may be a camera. For example, the detection module 202 may detect the presence of the first user and the second user by identifying the voices of the first user and the second user, respectively. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 5의 (c)에서, 제2 사용자가 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠 501을 디스플레이 하는 동안, 비디오 기록 모듈 203은 백그라운드(background)에서 라이브 컨텐츠 501의 기록을 시작한다. 상기 백그라운드에서 라이브 컨텐츠 501을 기록하는 것은 비디오 기록 모듈 203이 라이브 컨텐츠 501을 디스플레이하는 디스플레이 모듈/장치 201에 영향을 미치지 않고, 라이브 컨텐츠 501을 기록하는 것을 의미한다. In (c) of FIG. 5 , if the second user is away, the detection module 202 detects the absence of the second user. While the display module/device 201 displays the live content 501 to the first user, the video recording module 203 starts recording the live content 501 in the background. Recording the live content 501 in the background means that the video recording module 203 records the live content 501 without affecting the display module/device 201 displaying the live content 501 .

도 5의 (d)에서, 제2 사용자가 돌아오면, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 멀티 뷰 디스플레이 모듈 204는 멀티 뷰 디스플레이 모드에서 기록된 컨텐츠 502를 플레이백한다. In (d) of FIG. 5 , when the second user returns, the detection module 202 detects the presence of the second user. The multi-view display module 204 plays the recorded content 502 in the multi-view display mode.

도 6은 본 개시의 다양한 실시 예들에 따른 PIP 모드 또는 스플릿 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백에 대한 흐름도 600의 예를 도시한다. 도 6에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.6 illustrates an example flow diagram 600 for automatic recording and playback of live content in a PIP mode or a split screen mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 6 may be performed by the electronic device 200 .

도 6을 참고하면, 601 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 시청하고 있다.Referring to FIG. 6 , in step 601 , the first user and the second user are viewing live content displayed by the display module/device 201 .

602 단계에서, 검출 모듈 202가 제1 사용자 및 제2 사용자의 존재를 검출한다. 예를 들어, 검출 모듈 202가 지문을 인식할 수 있는 경우, 검출 모듈 202는 제1 사용자 및 제2 사용자의 지문을 식별하여, 제1 사용자 및 제2 사용자의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In step 602, the detection module 202 detects the presence of a first user and a second user. For example, if the detection module 202 can recognize a fingerprint, the detection module 202 identifies the fingerprints of the first user and the second user, and detects the existence of the first user and the second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

603 단계에서, 제2 사용자는 자리를 비우거나 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 603, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

604 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 604, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

605 단계에서, 라이브 컨텐츠가 디스플레이 모듈/장치 201에서 중단되지 않고 디스플레이 되는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠를 기록하기 시작한다. 비디오 기록 모듈 203은 검출 모듈 202로부터 제2 사용자의 부재를 나타내는 정보를 수신한 후, 라이브 컨텐츠를 기록하기 시작한다.In step 605, while the live content is uninterruptedly displayed on the display module/device 201, the video recording module 203 starts recording the live content in the background. The video recording module 203 starts recording live content after receiving the information indicating the absence of the second user from the detection module 202 .

606 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 606, the second user returns to his seat or starts paying attention to the display module/device 201. That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

607 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다. 제1 사용자가 디스플레이 모듈/장치 201의 화면의 일부분에서의 라이브 컨텐츠를 보는 동안, 디스플레이 모듈/장치 201은 PIP 모드 또는 스플릿 화면 모드에서 디스플레이 모듈/장치 201의 화면의 나머지 부분에 제2 사용자에 대한 기록된 컨텐츠를 디스플레이한다. In step 607, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 . While the first user views live content on a portion of the screen of the display module/device 201, the display module/device 201 displays the remaining portion of the screen of the display module/device 201 in PIP mode or split screen mode for the second user. Display recorded content.

도 7은 본 개시의 다양한 실시 예들에 따른 스플릿 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 7 illustrates an example of automatic recording and playback of live content in a split screen mode according to various embodiments of the present disclosure.

도 7을 참고하면, 도 7의 (a)에서, 디스플레이 모듈/장치 201은 라이브 컨텐츠 701을 디스플레이한다. 제1 사용자 및 제2 사용자는 함께 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 보고 있다. Referring to FIG. 7 , in (a) of FIG. 7 , a display module/device 201 displays live content 701 . The first user and the second user are viewing live content on the display module/device 201 together.

도 7의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 예를 들어, 제1 사용자 및 제2 사용자가 검출 모듈 202와 기능적으로 결합된 웨어러블 장치(wearable device)를 착용하고 있는 경우, 검출 모듈 202는 웨어러블 장치가 검출 모듈 202의 검출 영역 내에 존재하는 경우, 제1 사용자 및 제2 사용자의 존재를 검출할 수 있다. 검출 모듈 202는 카메라일 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In FIG. 7B , the detection module 202 detects the presence of the first user and the second user. For example, when the first user and the second user are wearing a wearable device functionally coupled to the detection module 202, the detection module 202 detects that the wearable device is present within the detection area of the detection module 202, The existence of the first user and the second user may be detected. The detection module 202 may be a camera. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 7의 (c)에서, 제2 사용자가 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠 701을 계속 디스플레이 하는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠 701을 기록하기 시작한다. In (c) of FIG. 7 , if the second user is away, the detection module 202 detects the absence of the second user. While the display module/device 201 continues to display the live content 701 to the first user, the video recording module 203 starts recording the live content 701 in the background.

도 7의 (d)에서, 제2 사용자가 돌아오면, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 제1 사용자가 디스플레이 모듈/장치 201의 화면의 일부분에서의 라이브 컨텐츠 701을 보는 동안, 디스플레이 모듈/장치 201은 스플릿 화면 모드에서 디스플레이 모듈/장치 201의 화면의 나머지 부분에 제2 사용자에 대한 기록된 컨텐츠 702를 플레이백한다.In (d) of FIG. 7 , when the second user returns, the detection module 202 detects the presence of the second user. While the first user views the live content 701 on a portion of the screen of the display module/device 201, the display module/device 201 displays the recorded content 701 for the second user on the remaining portion of the screen of the display module/device 201 in the split screen mode. Play content 702.

도 8은 본 개시의 다양한 실시 예들에 따른 PIP 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 8 illustrates an example of automatic recording and playback of live content in PIP mode according to various embodiments of the present disclosure.

도 8을 참고하면, 도 8의 (a)에서, 디스플레이 모듈/장치 201은 라이브 컨텐츠 801을 디스플레이한다. 제1 사용자 및 제2 사용자는 함께 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 보고 있다.Referring to FIG. 8 , in (a) of FIG. 8 , a display module/device 201 displays live content 801 . The first user and the second user are viewing live content on the display module/device 201 together.

도 8의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 검출 모듈 202는 카메라일 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In FIG. 8B , the detection module 202 detects the presence of a first user and a second user. The detection module 202 may be a camera. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 8의 (c)에서, 제2 사용자가 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠 801을 계속 디스플레이 하는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠를 기록하기 시작한다. In (c) of FIG. 8 , if the second user is away, the detection module 202 detects the absence of the second user. While the display module/device 201 continues to display the live content 801 to the first user, the video recording module 203 starts recording the live content in the background.

도 8의 (d)에서, 제2 사용자가 돌아오면, 검출모듈 202는 제2 사용자의 존재를 검출한다. PIP 모드에서, 제1 사용자를 위한 라이브 컨텐츠 801은 디스플레이 모듈/장치 201의 화면의 더 큰 부분(larger portion)에서 디스플레이되고, 제2 사용자를 위한 기록된 컨텐츠 802는 디스플레이 모듈/장치 201의 화면의 더 작은 부분(smaller portion)에서 플레이백된다. 일 실시 예에서, PIP 모드에서, 제1 사용자를 위한 라이브 컨텐츠 801이 디스플레이 모듈/장치 201의 화면의 더 작은 부분에서 디스플레이되고, 제2 사용자를 위한 기록된 컨텐츠 802가 디스플레이 모듈/장치 201의 화면의 더 큰 부분에서 디스플레이될 수 있다.In (d) of FIG. 8 , when the second user returns, the detection module 202 detects the presence of the second user. In PIP mode, the live content 801 for the first user is displayed in a larger portion of the screen of the display module/device 201, and the recorded content 802 for the second user is displayed in a larger portion of the screen of the display module/device 201. It is played back in a smaller portion. In one embodiment, in the PIP mode, the live content 801 for the first user is displayed in a smaller portion of the screen of the display module/device 201 and the recorded content 802 for the second user is displayed on the screen of the display module/device 201. can be displayed in a larger portion of

도 9는 다양한 실시 예들에 따른 사용자가 주의를 기울이지 않은 경우 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 9 illustrates an example of automatic recording and playback of live content when a user does not pay attention according to various embodiments.

도 9를 참고하면, 도 9의 (a)에서, 제1 사용자 및 제2 사용자는 함께 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 보고 있다. Referring to FIG. 9 , in (a) of FIG. 9 , the first user and the second user are viewing live content displayed by the display module/device 201 together.

도 9의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In FIG. 9B , the detection module 202 detects a first user and a second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 9의 (c)에서, 제2 사용자가 몇몇 이유(예: 제2 사용자가 통화를 하거나, 졸거나, 머리를 돌리거나, 다른 어떤 이유로 주의를 기울이지 못함)로 인해 디스플레이 모듈/장치 201에 주의를 기울이지 못하면, 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠 901을 계속 디스플레이하는 동안, 검출 모듈 202는 제2 사용자가 디스플레이 모듈/장치 201에 주의를 기울이지 못하는 것을 검출하고, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠 901의 기록을 시작한다. In Fig. 9(c), the second user pays attention to the display module/device 201 due to some reason (e.g., the second user is talking on the phone, sleeping, turning his head, or not paying attention for some other reason). If not, while the display module/device 201 continues to display the live content 901 for the first user, the detection module 202 detects that the second user is not paying attention to the display module/device 201, and the video recording module 203 starts recording live content 901 in the background.

도 9의 (d)에서, 제2 사용자가 디스플레이 모듈/장치 201에 주의를 기울이기 시작하면, 검출 모듈 202는 제2 사용자가 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다는 것이 검출하고, 비디오 플레이어 모듈 205는 스플릿 화면 모드에서 제1 사용자를 위한 라이브 컨텐츠 901을 디스플레이 모듈/장치 201의 화면의 일부분에 디스플레이하고, 제2 사용자를 위한 기록된 컨텐츠 902를 디스플레이 모듈/장치 201의 화면의 나머지 부분에서 플레이백한다. In (d) of FIG. 9 , when the second user starts paying attention to the display module/device 201, the detection module 202 detects that the second user starts paying attention to the display module/device 201, and the video The player module 205 displays the live content 901 for the first user on a portion of the screen of the display module/device 201 in split screen mode, and the recorded content 902 for the second user on the remaining portion of the screen of the display module/device 201. play back from

도 10은 본 개시의 다양한 실시 예들에 따른 라이브 컨텐츠의 자동 기록 및 제2 전자 장치에서의 플레이백에 대한 흐름도 1000의 예를 도시한다. 도 10에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.10 illustrates an example of a flowchart 1000 for automatic recording of live content and playback on a second electronic device according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 10 may be performed by the electronic device 200 .

도 10을 참고하면, 1001 단계에서, 제1 사용자 및 제2 사용자가 제1 디스플레이 모듈/장치 201에서 라이브 컨텐츠를 시청하고 있다. Referring to FIG. 10 , in step 1001, the first user and the second user are viewing live content on the first display module/device 201.

1002 단계에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In step 1002, the detection module 202 detects the presence of a first user and a second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1003 단계에서, 제2 사용자는 자리를 비우거나 제1 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 1003, the second user leaves the seat or does not pay attention to the first display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

1004 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1004, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1005 단계에서, 라이브 컨텐츠가 제1 디스플레이 모듈/장치 201에서 중단되지 않고 디스플레이되는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠를 기록하기 시작한다. 비디오 기록 모듈 203은 검출 모듈 202로부터 제2 사용자의 부재를 나타내는 정보를 수신한 후, 라이브 컨텐츠를 기록하기 시작한다.In step 1005, while the live content is uninterruptedly displayed on the first display module/device 201, the video recording module 203 starts recording the live content in the background. The video recording module 203 starts recording live content after receiving the information indicating the absence of the second user from the detection module 202 .

1006 단계에서, 제2 사용자는 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 1006 , the second user returns or starts paying attention to the display module/device 201 . That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

1007 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.In step 1007, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 .

1008 단계에서, 제1 사용자가 제1 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 보는 동안, 검출 모듈 202는 외부 장치 상호작용 모듈 208에게 제2 사용자의 존재를 나타내는 정보를 송신한다. 외부 장치 상호작용 모듈 208은 제2 디스플레이 모듈/장치가 제2 사용자를 위해 기록된 컨텐츠를 디스플레이하도록 한다. 일 실시 예에서, 외부 장치 상호작용 모듈 208은 다른 전자 장치에게 기록된 멀티미디어 컨텐츠에 대한 정보를 송신한다.In step 1008 , while the first user is viewing the live content on the first display module/device 201 , the detection module 202 transmits information indicating the presence of the second user to the external device interaction module 208 . The external device interaction module 208 causes the second display module/device to display recorded content for a second user. In one embodiment, the external device interaction module 208 transmits information about recorded multimedia content to another electronic device.

도 11은 본 개시의 다양한 실시 예들에 따른 라이브 컨텐츠의 자동 기록 및 제2 전자 장치에서의 플레이백의 예를 도시한다. 11 illustrates an example of automatic recording of live content and playback in a second electronic device according to various embodiments of the present disclosure.

도 11을 참고하면, 도 11의 (a)에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠 1101을 보고 있다. Referring to FIG. 11 , in (a) of FIG. 11 , a first user and a second user are viewing live content 1101 displayed by a display module/device 201 .

도 11의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 검출 모듈 202는 카메라일 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In (b) of FIG. 11 , the detection module 202 detects the existence of a first user and a second user. The detection module 202 may be a camera. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 11의 (c)에서, 제2 사용자가 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠 501을 계속 디스플레이 하는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠 1101의 기록을 시작한다. In (c) of FIG. 11 , when the second user is away, the detection module 202 detects the absence of the second user. While the display module/device 201 continues to display the live content 501 to the first user, the video recording module 203 starts recording the live content 1101 in the background.

도 11의 (d)에서, 제2 사용자가 돌아오면, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 제1 사용자가 제1 디스플레이 모듈/장치에서 중단되지 않고 재생되는 라이브 컨텐츠 1101을 보는 동안, 외부 장치 상호작용 모듈 208은 제2 사용자가 기록된 컨텐츠 1102를 보도록 하기 위하여 기록된 컨텐츠 1102를 제2 전자 장치로 송신한다. 그러나, 외부 장치 상호작용 모듈 208이 라이브 컨텐츠 1101을 제2 전자 장치로 송신하는 동안, 제1 디스플레이 모듈/장치 210은 제2 사용자를 위한 기록된 컨텐츠 1102를 제공(render)할 수 있다.In (d) of FIG. 11 , when the second user returns, the detection module 202 detects the presence of the second user. While the first user views the live content 1101 being played back uninterrupted on the first display module/device, the external device interaction module 208 transmits the recorded content 1102 to the second electronic device to allow the second user to view the recorded content 1102. send to device However, while the external device interaction module 208 transmits the live content 1101 to the second electronic device, the first display module/device 210 may render the recorded content 1102 for the second user.

도 12는 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백에 대한 흐름도의 예를 도시한다. 도 12에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.12 illustrates an example of a flowchart for automatic recording and playback of live content in a full screen mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 12 may be performed by the electronic device 200 .

도 12를 참고하면, 1201 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이 하는 라이브 컨텐츠를 시청하고 있다. Referring to FIG. 12 , in step 1201, the first user and the second user are viewing live content displayed by the display module/device 201.

1202 단계에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다. In step 1202, the detection module 202 detects the presence of a first user and a second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1203 단계에서, 제2 사용자는 자리를 비우거나 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 1203, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

1204 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1204, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1205 단계에서, 라이브 컨텐츠가 제1 사용자에 의한 시청을 위하여 디스플레이 모듈/장치 201에서 중단되지 않고 디스플레이되는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠를 기록하기 시작한다. 비디오 기록 모듈 203은 검출 모듈 202로부터 제2 사용자의 부재를 나타내는 정보를 수신한 후, 라이브 컨텐츠를 기록하기 시작한다.In step 1205, while the live content is uninterruptedly displayed on the display module/device 201 for viewing by the first user, the video recording module 203 starts recording the live content in the background. The video recording module 203 starts recording live content after receiving the information indicating the absence of the second user from the detection module 202 .

1206 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 1206, the second user returns to his seat or begins paying attention to the display module/device 201. That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

1207 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다. 검출 모듈 202는 멀티 뷰 디스플레이 모듈 204를 작동시킨다. In step 1207, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 . The detection module 202 activates the multi-view display module 204.

1208 단계에서, 멀티 뷰 디스플레이 모듈 204는 전체 화면 모드에서 하이라이트 검출기 모듈 206을 이용하여 제2 사용자를 위해 저장된 컨텐츠의 하이라이트들 및 제1 사용자를 위한 라이브 컨텐츠를 디스플레이한다. 일 실시 예에서, 멀티 뷰 디스플레이 모드 204는 스플릿 화면 모드 또는 PIP 모드에서 하이라이트 검출기 모듈 206을 이용하여 제2 사용자를 위해 저장된 컨텐츠의 하이라이트들 및 제1 사용자에 대한 라이브 컨텐츠를 디스플레이한다. 다른 실시 예에서, 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠를 디스플레이 하고, 다른 전자 장치의 디스플레이 모듈/장치는 다른 전자 장치의 하이라이트 검출기 모듈을 이용하여 제2 사용자를 위해 저장된 컨텐츠의 하이라이트들을 디스플레이한다.In step 1208, the multi-view display module 204 displays highlights of stored content for the second user and live content for the first user using the highlight detector module 206 in full screen mode. In one embodiment, the multi-view display mode 204 displays live content for the first user and highlights of the stored content for the second user using the highlight detector module 206 in a split screen mode or PIP mode. In another embodiment, a display module/device 201 displays live content for a first user, and a display module/device of another electronic device uses a highlight detector module of another electronic device to highlight stored content for a second user. display them

1209 단계에서, 멀티 뷰 디스플레이 모듈 204는 제2 사용자가 빨리 감기(fast forward))를 사용하도록 하면서, 디스플레이 모듈/장치 201의 전체 화면 모드에서 제1 사용자에 대한 라이브 컨텐츠 및 제2 사용자에 대한 기록된 컨텐츠를 디스플레이 한다. 상기 빨리 감기는 디스플레이되는 컨텐츠가 빠르게 재생되도록 제어하는 트릭 플레이 모드의 제어 기능을 의미한다. 일 실시 예에서, 멀티 뷰 디스플레이 모드 204는 제2 사용자가 저장된 컨텐츠가 빠르게 재생되도록 하는 트릭 플레이를 이용하도록 하면서, 디스플레이 모듈/장치 201의 스플릿 화면 모드 또는 PIP 모드에서 제1 사용자에 대한 라이브 컨텐츠 및 제2 사용자에 대한 기록된 컨텐츠를 디스플레이한다. 다른 실시 예에서, 디스플레이 모듈/장치 201이 제1 사용자에 대한 라이브 컨텐츠를 디스플레이 하고, 다른 전자 장치의 디스플레이 모듈/장치는 제2 사용자가 기록된 컨텐츠가 빠르게 재생되도록 하는 트릭 플레이를 이용하도록 하면서, 제2 사용자에 대한 기록된 컨텐츠를 디스플레이한다. 본 개시의 구현에 있어서, 상기 1208 단계와 1209 단계 중 하나의 단계가 선택적으로 수행된다.In step 1209, the multi-view display module 204 records the live content for the first user and the second user in the full screen mode of the display module/device 201 while allowing the second user to use fast forward. display the content. The fast-forward means a control function of a trick play mode for controlling displayed content to be reproduced quickly. In one embodiment, the multi-view display mode 204 allows the second user to use a trick play to quickly play the stored content, while displaying live content and content for the first user in a split screen mode or PIP mode of the display module/device 201 . Display the recorded content for the second user. In another embodiment, a display module/device 201 displays live content for a first user, and a display module/device of another electronic device allows a second user to use a trick play to quickly play recorded content, Display the recorded content for the second user. In an embodiment of the present disclosure, one of steps 1208 and 1209 is selectively performed.

1210 단계에서, 제2 사용자가 저장된 컨텐츠를 보는 것을 종료하면, 디스플레이 모듈/장치 201은 멀티 뷰 모드를 종료한다. 멀티 뷰 모드가 종료된 후, 2명의 사용자들은 디스플레이 모듈/장치 201에서 동일한 라이브 컨텐츠를 본다.In step 1210, when the second user ends viewing the stored content, the display module/device 201 ends the multi-view mode. After the multi-view mode ends, the two users view the same live content on the display module/device 201 .

도 13은 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 13 illustrates an example of automatic recording and playback of live content in a full screen mode according to various embodiments of the present disclosure.

도 13을 참고하면, 도 13의 (a)에서, 제1 사용자 및 제2 사용자는 함께 디스플레이 모듈/장치 201이 디스플레이 하는 라이브 컨텐츠 1301을 보고 있다. Referring to FIG. 13 , in (a) of FIG. 13 , the first user and the second user both watch live content 1301 displayed by the display module/device 201 .

도 13의 (b)에서, 검출 모듈 202는 제1 사용자 및 제2 사용자를 검출한다. 검출 모듈 202는 카메라일 수 있다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In (b) of FIG. 13 , the detection module 202 detects a first user and a second user. The detection module 202 may be a camera. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

도 13의 (c)에서, 제2 사용자가 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치201이 제1 사용자에 대한 라이브 컨텐츠 1301을 계속 디스플레이하는 동안, 비디오 기록 모듈 203은 백그라운드에서 라이브 컨텐츠 1301의 기록을 시작한다. In (c) of FIG. 13 , when the second user is away, the detection module 202 detects the absence of the second user. While the display module/device 201 continues to display the live content 1301 to the first user, the video recording module 203 starts recording the live content 1301 in the background.

도 13의 (d)에서, 제2 사용자가 돌아오면, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 멀티 뷰 디스플레이 모듈 204는 기록된 컨텐츠 1302를 하이라이트들의 형태로 플레이백되거나 멀티 뷰 모드의 트릭 플레이 모드에서 플레이백한다. 멀티 뷰 디스플레이 모듈 204는 기록된 컨텐츠 1302를 기록된 컨텐츠 1302의 재생을 제어하는 트릭 플레이 모드에서 플레이백한다. 상기 트릭 플레이 모드의 제어 기능은 재생 1303, 정지 1304, 빨리 감기 1305, 및 빨리 되감기(fast rewind) 1306을 포함할 수 있다. 제2 사용자가 기록된 컨텐츠 1302를 빠르게 보기 위해 빨리 감기 1305를 사용하여 기록된 컨텐츠 1302를 다 보면, 멀티 뷰 디스플레이 모드는 종료되고 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201에서의 동일한 라이브 컨텐츠 1301을 본다. In (d) of FIG. 13 , when the second user returns, the detection module 202 detects the presence of the second user. The multi-view display module 204 plays back the recorded content 1302 in the form of highlights or trick-play mode of the multi-view mode. The multi-view display module 204 plays back the recorded content 1302 in a trick play mode that controls playback of the recorded content 1302 . The control function of the trick play mode may include play 1303, stop 1304, fast forward 1305, and fast rewind 1306. When the second user finishes watching the recorded content 1302 using fast-forward 1305 to quickly view the recorded content 1302, the multi-view display mode ends and the first user and the second user share the same live view on the display module/device 201. View content 1301.

도 14는 본 개시의 다양한 실시 예들에 따른 4명의 사용자에 대한 라이브 컨텐츠의 자동 기록 및 플레이백의 예를 도시한다. 본 개시의 구현은 사용자의 수(number)에 제한되지 않는다. 14 illustrates an example of automatic recording and playback of live content for 4 users according to various embodiments of the present disclosure. Implementations of the present disclosure are not limited to the number of users.

도 14를 참고하면, 도 14의 (a)에서, 4명의 사용자들(제1 사용자, 제2 사용자, 제3 사용자, 및 제4 사용자)은 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 시청하고 있다. 검출 모듈 202 는 4명의 사용자들을 모두 검출한다. 검출 모듈 202는 카메라일 수 있다.Referring to FIG. 14 , in (a) of FIG. 14 , four users (a first user, a second user, a third user, and a fourth user) are watching live content on the display module/device 201. . The detection module 202 detects all four users. The detection module 202 may be a camera.

도 14의 (b)에서, 제3 사용자 및 제4 사용자가 자리를 비우면, 검출모듈 202는 제3 사용자 및 제4 사용자의 부재를 검출한다. 디스플레이 모듈/장치 201이 제1 사용자 및 제2 사용자를 위해 라이브 컨텐츠를 중단시키지 않고 재생하는 동안, 비디오 기록 모듈 203은 제3 사용자를 위한 컨텐츠 및 제4 사용자를 위한 컨텐츠를 기록한다. In (b) of FIG. 14 , when the third user and the fourth user are away, the detection module 202 detects the absence of the third user and the fourth user. While the display module/device 201 uninterruptedly reproduces live content for the first and second users, the video recording module 203 records content for the third user and content for the fourth user.

도 14의 (c)에서, 제2 사용자 또한 자리를 비우면, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 디스플레이 모듈/장치 210이 제1 사용자를 위해 라이브 컨텐츠를 중단시키지 않고 재생하는 동안, 비디오 기록 모듈 203은 백그라운드에서 제2 사용자를 위한 컨텐츠를 기록한다. 일 실시 예에서, 상기 라이브 컨텐츠가 스트리밍된 컨텐츠 및 전자 장치에 저장되어 있는 컨텐츠 중 하나인 경우, 비디오 기록 모듈 203은 백그라운드에서 제2 사용자를 위한 컨텐츠를 기록하지 않을 수 있다.In (c) of FIG. 14 , if the second user is also away, the detection module 202 detects the absence of the second user. While the display module/device 210 uninterruptedly reproduces live content for the first user, the video recording module 203 records content for the second user in the background. In one embodiment, when the live content is one of streamed content and content stored in an electronic device, the video recording module 203 may not record content for the second user in the background.

도 14의 (d)에서, 제2 사용자 및 제3 사용자가 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작하면, 검출 모듈 202는 제2 사용자 및 제3 사용자의 존재를 검출한다. 디스플레이 모듈/장치 201은 전체 화면 모드에서 제2 사용자를 위해 기록된 컨텐츠 및 제3 사용자를 위해 기록된 컨텐츠를 재생한다. 제2 사용자를 위해 기록된 컨텐츠의 재생은 제3 사용자를 위해 기록된 컨텐츠의 재생 및 제1 사용자를 위해 기록된 컨텐츠의 재생과 독립적이다. 일 실시 예에서, 제2 사용자를 위해 기록된 컨텐츠 및 제3 사용자를 위해 기록된 컨텐츠의 재생은 PIP 모드 및 스플릿 화면 모드 중 하나에서 수행되거나 제2 전자 장치에서 수행될 수 있다. 제2 사용자를 위해 기록된 컨텐츠의 재생 및 제3 사용자를 위해 기록된 컨텐츠의 재생은 재생, 중지, 빨리 감기, 또는 빨리 되감기와 같은 다양한 제어 기능들을 갖춘 트릭 플레이 모드에서 기록된 컨텐츠를 재생하는 형태 또는 하이라이트들을 재생하는 형태일 수 있다. 디스플레이 모듈/장치 201은 각 사용자가 트릭 플레이 기능들에 대한 독립적인 제어를 가지는 멀티 유저 트릭 플레이 모드에서 제2 사용자를 위해 기록된 컨텐츠 및 제3 사용자를 위해 기록된 컨텐츠를 디스플레이한다. In Fig. 14(d), when the second user and the third user return or start paying attention to the display module/device 201, the detection module 202 detects the presence of the second user and the third user. The display module/device 201 plays content recorded for the second user and content recorded for the third user in full screen mode. Playback of content recorded for the second user is independent of playback of content recorded for the third user and playback of content recorded for the first user. In an embodiment, reproduction of content recorded for the second user and content recorded for the third user may be performed in one of a PIP mode and a split screen mode, or may be performed in the second electronic device. Playback of recorded content for the second user and playback of recorded content for the third user is a form of playing the recorded content in trick play mode with various control functions such as play, stop, fast forward, or fast rewind. Alternatively, it may be a form of reproducing highlights. The display module/device 201 displays recorded content for a second user and recorded content for a third user in a multi-user trick-play mode where each user has independent control over trick-play functions.

도 14의 (e)에서, 제4 사용자가 돌아오면, 검출 모듈 202는 제4 사용자의 존재를 검출한다. 멀티 뷰 디스플레이 모듈 204는 제4 사용자가 트릭 플레이 기능들에 대한 독립적인 제어를 가지는 멀티 유저 트릭 플레이 모드에서 제4 사용자를 위해 기록된 컨텐츠를 플레이백한다. In (e) of FIG. 14 , when the fourth user returns, the detection module 202 detects the existence of the fourth user. The multi-view display module 204 plays the recorded content for a fourth user in a multi-user trick-play mode in which the fourth user has independent control over trick-play functions.

도 14의 (f)에서, 제2 사용자가 트릭 플레이 모드에서 제어 기능 중 빨리 감기 기능을 이용하여 제2 사용자를 위해 기록된 컨텐츠를 다 보면, 제2 사용자와 관련된 전체 화면이 종료되고, 제1 사용자 및 제2 사용자는 단일 화면에서 라이브 컨텐츠를 시청한다. In (f) of FIG. 14 , when the second user finishes viewing the content recorded for the second user by using the fast-forward function among the control functions in the trick play mode, the entire screen related to the second user ends, and the first user The user and the second user watch live content on a single screen.

도 15는 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 흐름도 1500의 예를 도시한다. 도 15에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.15 illustrates an example flow diagram 1500 for display of content starting from a stored time stamp according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 15 may be performed by the electronic device 200 .

도 15를 참고하면, 1501 단계에서, 검출 모듈 202는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출한다. 일 실시 예에서, 검출 모듈 202는 다수의 사용자들 중 한 사용자의 부재 또는 사용자의 시선이 전자 장치 200으로 향하지 않는 것을 의미할 수 있다. Referring to FIG. 15 , in step 1501, a detection module 202 detects a condition related to a user not viewing multimedia content among a plurality of users. In an embodiment, the detection module 202 may mean that one of the plurality of users is absent or the user's gaze is not directed toward the electronic device 200 .

1502 단계에서, 멀티미디어 타임 스탬프 저장 모듈 207은 멀티미디어 컨텐츠의 일부분의 타임 스탬프 정보를 저장한다. 상기 타임 스탬프 정보는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건이 검출된 시점에 대한 정보를 포함한다. In step 1502, the multimedia time stamp storage module 207 stores time stamp information of a portion of multimedia content. The time stamp information includes information about a time point when a condition related to the fact that one of the plurality of users does not watch multimedia content is detected.

1503 단계에서, 검출 모듈 202는 다수의 사용자들 중 한 사용자가 멀티미디어 컨텐츠를 시청하기 시작하는 것과 관련된 조건을 검출한다. 일 실시 예에서, 검출 모듈 202는 한 사용자의 존재 또는 한 사용자의 시선이 전자 장치 200으로 향하는 것을 의미할 수 있다.In step 1503, the detection module 202 detects a condition related to a user among multiple users starting to view multimedia content. In an embodiment, the detection module 202 may indicate the existence of a user or the gaze of a user toward the electronic device 200 .

1504 단계에서, 멀티 뷰 디스플레이 모듈 204는 프레젠테이션 모드에서 다수의 사용자들 중 한 사용자에 대응하는 멀티미디어 컨텐츠의 일부분의 포맷 및 다수의 사용자들에 대한 멀티미디어 컨텐츠를 동시에 제공한다. 상기 포맷은 타임 스탬프 정보에 기반한다. In step 1504, the multi-view display module 204 simultaneously provides a format of a portion of multimedia content corresponding to one user among multiple users and multimedia content to multiple users in a presentation mode. The format is based on time stamp information.

도 16은 본 개시의 다양한 실시 예들에 따른 전체 화면 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도 1600의 예를 도시한다. 도 16에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.16 illustrates another example flow diagram 1600 for display of content starting from a stored time stamp in full screen mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 16 may be performed by the electronic device 200 .

도 16을 참고하면, 1601 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 시청하고 있다. 상기 라이브 컨텐츠는 스트리밍 컨텐츠이다. Referring to FIG. 16 , in step 1601, the first user and the second user are viewing live content displayed by the display module/device 201. The live content is streaming content.

1602 단계에서, 검출 모듈 202는 제1 사용자 및 제2 사용자의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.In step 1602, the detection module 202 detects the presence of a first user and a second user. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1603 단계에서, 제2 사용자는 자리를 비우거나, 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 1603, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

1604 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1604, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1605 단계에서, 디스플레이 모듈/장치 201이 라이브 컨텐츠의 재생이 중단되지 않도록 라이브 컨텐츠를 디스플레이하는 동안, 타임 스탬프 저장 모듈 207은 제2 사용자의 부재가 검출되는 시점과 관련되는 라이브 컨텐츠의 타임 스탬프를 저장한다. In step 1605, while the display module/device 201 displays the live content so that the reproduction of the live content is not interrupted, the time stamp storage module 207 stores a time stamp of the live content related to the point in time when the absence of the second user is detected. do.

1606 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 1606, the second user returns to his seat or starts paying attention to the display module/device 201. That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

1607 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.At step 1607, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 .

1608 단계에서, 제1 사용자가 동일한 디스플레이 모듈/장치 201의 전체 화면에서의 라이브 컨텐츠를 시청하는 동안, 멀티 뷰 디스플레이 모듈 204는 동일한 디스플레이 모듈/장치 201의 전체 화면에서 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이한다.In step 1608, while the first user is watching the live content in the full screen of the same display module/device 201, the multi-view display module 204 displays the saved timestamp for the second user in the full screen of the same display module/device 201. Display content starting from .

도 17은 본 개시의 다양한 실시 예들에 따른 스플릿 화면 모드 또는 PIP 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도 1700의 예를 도시한다. 도 17에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.17 illustrates another example flow diagram 1700 for display of content starting from a stored time stamp in a split screen mode or PIP mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 17 may be performed by the electronic device 200 .

도 17을 참고하면, 1701 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 시청하고 있다. 상기 라이브 컨텐츠는 스트리밍 컨텐츠이다. Referring to FIG. 17 , in step 1701, the first user and the second user are viewing live content displayed by the display module/device 201. The live content is streaming content.

1702 단계에서, 검출 모듈 202는 2명의 사용자들의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.At step 1702, the detection module 202 detects the presence of two users. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1703 단계에서, 제2 사용자는 자리를 비우거나, 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 1703, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

1704 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1704, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1705 단계에서, 디스플레이 모듈/장치 201이 라이브 컨텐츠의 재생이 중단되지 않도록 라이브 컨텐츠를 디스플레이하는 동안, 타임 스탬프 저장 모듈 207은 제2 사용자의 부재가 검출되는 시점과 관련되는 라이브 컨텐츠의 타임 스탬프를 저장한다. In step 1705, while the display module/device 201 displays the live content so that the playback of the live content is not interrupted, the time stamp storage module 207 stores a time stamp of the live content related to the point in time when the absence of the second user is detected. do.

1706 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 1706, the second user returns to his seat or begins paying attention to the display module/device 201. That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

1707 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.In step 1707, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 .

1708 단계에서, 제1 사용자가 스플릿 화면 모드 또는 PIP 모드에서 동일한 디스플레이 모듈/장치 201의 화면의 일부분에서의 라이브 컨텐츠를 시청하는 동안, 디스플레이 모듈/장치 201은 디스플레이 모듈/장치 201의 화면의 나머지 부분에서 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이한다.In step 1708, while the first user watches live content on a portion of the screen of the same display module/device 201 in split screen mode or PIP mode, the display module/device 201 displays the remaining portion of the screen of the display module/device 201. display the content starting from the stored time stamp for the second user.

도 18은 본 개시의 다양한 실시 예들에 따른 제2 전자 장치에서의 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도 1800의 예를 도시한다. 도 18에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.18 illustrates another example of a flowchart 1800 for display of content starting from a stored time stamp in a second electronic device according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 18 may be performed by the electronic device 200 .

1801 단계에서, 제1 사용자 및 제2 사용자는 제1 디스플레이 모듈/장치 201이 디스플레이하는 라이브 컨텐츠를 시청하고 있다. 상기 라이브 컨텐츠는 스트리밍 컨텐츠이다.In step 1801, the first user and the second user are viewing live content displayed by the first display module/device 201. The live content is streaming content.

1802 단계에서, 검출 모듈 202는 2명의 사용자들의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.At step 1802, the detection module 202 detects the presence of two users. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1803 단계에서, 제2 사용자는 자리를 비우거나, 제1 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 제1 디스플레이 모듈/장치 201로 향하지 않는다.In step 1803, the second user leaves the seat or does not pay attention to the first display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's gaze does not go to the first display module/device 201 .

1804 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1804, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1805 단계에서, 제1 디스플레이 모듈/장치 201이 라이브 컨텐츠를 중단되지 않게 디스플레이하는 동안, 타임 스탬프 저장 모듈 207은 제2 사용자의 부재가 검출되는 시점과 관련된 라이브 컨텐츠의 타임 스탬프를 저장한다. In step 1805, while the first display module/device 201 displays the live content uninterruptedly, the time stamp storage module 207 stores a time stamp of the live content related to the time point at which the absence of the second user is detected.

1806 단계에서, 제2 사용자는 자리로 돌아오거나, 제1 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 제1 디스플레이 모듈/장치 201로 향한다.In step 1806 , the second user returns to his seat or starts paying attention to the first display module/device 201 . That is, the second user comes into the detection area of the detection module 202 or the second user's line of sight is directed to the first display module/device 201 again.

1807 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 제1 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.In step 1807, the detection module 202 detects the presence of a second user. That is, the detection module 202 detects that the second user exists within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the first display module device 201 .

1808 단계에서, 제1 사용자가 제1 디스플레이 모듈/장치 201의 라이브 컨텐츠를 시청하는 동안, 검출 모듈 202는 외부 장치 상호작용 모듈 208에게 제2 사용자의 존재를 나타내는 정보를 송신한다. 외부 장치 상호작용 모듈 208은 제2 디스플레이 모듈/장치가 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이하도록 한다. 일 실시 예에서, 외부 장치 상호작용 모듈 208은 제2 전자 장치에게 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠에 대한 정보를 송신한다.In step 1808, while the first user is watching the live content of the first display module/device 201, the detection module 202 sends information indicating the existence of the second user to the external device interaction module 208. The external device interaction module 208 causes the second display module/device to display content starting from the stored time stamp for the second user. In one embodiment, the external device interaction module 208 transmits to the second electronic device information about the content starting from the stored time stamp for the second user.

도 19는 본 개시의 다양한 실시 예들에 따른 트릭 플레이 모드 또는 하이라이트 모드에서 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이에 대한 다른 흐름도 1900의 예를 도시한다. 도 19에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.19 illustrates another example flow diagram 1900 for display of content starting from a stored time stamp in a trick play mode or a highlight mode according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 19 may be performed by the electronic device 200 .

도 19를 참고하면, 1901 단계에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 시청하고 있다. 상기 라이브 컨텐츠는 스트리밍 컨텐츠일 수 있다. Referring to FIG. 19 , in step 1901 , the first user and the second user are viewing live content on the display module/device 201 . The live content may be streaming content.

1902 단계에서, 검출 모듈 202는 2명의 사용자들의 존재를 검출한다. 일 실시 예에서, 검출 모듈 202는 제1 사용자의 시선 방향과 제2 사용자의 시선 방향을 검출할 수 있다.At step 1902, the detection module 202 detects the presence of two users. In an embodiment, the detection module 202 may detect the first user's gaze direction and the second user's gaze direction.

1903 단계에서, 제2 사용자는 자리를 비우거나, 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 밖에 존재하거나, 제2 사용자의 시선은 디스플레이 모듈/장치 201로 향하지 않는다.In step 1903, the second user leaves the seat or does not pay attention to the display module/device 201. That is, the second user exists outside the detection area of the detection module 202 or the second user's line of sight is not directed to the display module/device 201 .

1904 단계에서, 검출 모듈 202는 제2 사용자의 부재를 검출한다. 즉, 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 밖에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향하지 않음을 검출할 수 있다.In step 1904, the detection module 202 detects the absence of the second user. That is, the detection module 202 detects that the second user exists outside the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is not directed toward the display module device 201 .

1905 단계에서, 디스플레이 모듈/장치 201이 라이브 컨텐츠의 재생이 중단되지 않도록 라이브 컨텐츠를 디스플레이하는 동안, 타임 스탬프 저장 모듈 207은 제2 사용자의 부재가 검출되는 시점과 관련되는 라이브 컨텐츠의 타임 스탬프를 저장한다. In step 1905, while the display module/device 201 displays the live content so that the playback of the live content is not interrupted, the time stamp storage module 207 stores a time stamp of the live content related to the point in time when the absence of the second user is detected. do.

1906 단계에서, 제2 사용자는 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작한다. 즉, 제2 사용자는 검출 모듈 202의 검출 영역 내에 들어오거나, 제2 사용자의 시선은 다시 디스플레이 모듈/장치 201로 향한다.At step 1906, the second user returns to his/her seat or begins paying attention to the display module/device 201. That is, the second user enters the detection area of the detection module 202, or the second user's line of sight returns to the display module/device 201.

1907 단계에서, 검출 모듈 202는 제2 사용자의 존재를 검출한다. 검출 모듈 202는 제2 사용자가 검출 모듈 202의 검출 영역 내에 존재함을 검출한다. 일 실시 예에서, 검출 모듈 202는 제2 사용자의 시선이 디스플레이 모듈 장치 201로 향함을 검출할 수 있다.In step 1907, the detection module 202 detects the presence of a second user. The detection module 202 detects that the second user is present within the detection area of the detection module 202 . In an embodiment, the detection module 202 may detect that the gaze of the second user is directed toward the display module device 201 .

1908 단계에서, 멀티 뷰 디스플레이 모듈 204는 디스플레이 모듈/장치 201의 전체 화면 모드에서 제1 사용자에 대한 라이브 컨텐츠 및 하이라이트 검출기 모듈 206을 이용하여 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠의 하이라이트들을 디스플레이한다. In step 1908, the multi-view display module 204 detects live content for the first user in the full screen mode of the display module/device 201 and highlights of the content starting from the stored timestamp for the second user using the highlight detector module 206. display

1909 단계에서, 멀티 뷰 디스플레이 모듈 204는 제2 사용자가 빨리 감기를 사용하도록 하면서, 디스플레이 모듈/장치 201의 전체 화면 모드에서 제1 사용자에 대한 라이브 컨텐츠 및 제2 사용자에 대한 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이한다. 상기 빨리 감기는 디스플레이되는 컨텐츠가 빠르게 재생되도록 제어하는 트릭 플레이 모드의 제어 기능을 의미한다.In step 1909, the multi-view display module 204 starts from the live content for the first user and the stored timestamp for the second user in the full screen mode of the display module/device 201, while allowing the second user to use fast-forward. display the content. The fast-forward means a control function of a trick play mode for controlling displayed content to be reproduced quickly.

1910 단계에서, 제2 사용자가 저장된 타임 스탬프로부터 시작하는 컨텐츠를 보는 것을 종료하면, 멀티 뷰 모드는 종료되고 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201에서 동일한 라이브 컨텐츠를 시청한다. In step 1910, when the second user finishes viewing the content starting from the stored time stamp, the multi-view mode ends and the first user and the second user watch the same live content on the display module/device 201.

도 20은 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프로부터 시작하는 컨텐츠의 디스플레이 2000의 예를 도시한다. 도 20에서 설명되는 전자 장치 200에 포함된 다양한 모듈들의 동작들은 전자 장치 200에 의해 수행될 수 있다.20 illustrates an example of a display 2000 of content starting from a stored time stamp according to various embodiments of the present disclosure. Operations of various modules included in the electronic device 200 described in FIG. 20 may be performed by the electronic device 200 .

도 20을 참고하면, 도 20의 (a)에서, 제1 사용자 및 제2 사용자는 디스플레이 모듈/장치 201에서의 라이브 컨텐츠를 시청한다. 검출 모듈 202는 제1 사용자 및 제2 사용자를 검출한다. 상기 라이브 컨텐츠는 스트리밍 컨텐츠일 수 있다. 예를 들어, 상기 라이브 컨텐츠는 웹 어플리케이션(web application)을 통해 스트리밍된 컨텐츠일 수 있다.Referring to FIG. 20 , in (a) of FIG. 20 , the first user and the second user watch live content on the display module/device 201 . The detection module 202 detects a first user and a second user. The live content may be streaming content. For example, the live content may be content streamed through a web application.

도 20의 (b)에서, 제2 사용자는 자리를 비우거나 디스플레이 모듈/장치 201에 주의를 기울이지 않는다. 검출 모듈 202는 제2 사용자의 부재 또는 제2 사용자가 라이브 컨텐츠를 시청하지 않음을 검출한다. 제2 사용자의 부재 또는 제2 사용자가 라이브 컨텐츠를 시청하지 않음과 관련된 타임 스탬프는 "t2"로 저장된다. 제2 사용자가 자리로 돌아오거나 디스플레이 모듈/장치 201에 주의를 기울이기 시작하면, 검출 모듈 202는 제2 사용자의 존재 또는 제2 사용자에 의한 컨텐츠의 시청을 검출한다.In (b) of FIG. 20 , the second user is away or not paying attention to the display module/device 201 . The detection module 202 detects that the second user is absent or the second user is not watching the live content. A time stamp associated with the absence of the second user or the second user not watching the live content is stored as “t2”. When the second user returns to his/her seat or starts paying attention to the display module/device 201, the detection module 202 detects the presence of the second user or viewing of content by the second user.

도 20의 (c)에서, 검출 모듈 202는 멀티 뷰 디스플레이 모듈 204를 작동시킨다. 제1 사용자가 동일한 디스플레이 모듈/장치 201의 전체 화면에서의 라이브 컨텐츠를 보는 동안, 멀티 뷰 디스플레이 모듈 204는 디스플레이 모듈/장치 201의 전체 화면에서 제2 사용자에 대한 저장된 타임 스탬프 "t2"로부터 시작하는 컨텐츠를 디스플레이한다. 멀티 뷰 디스플레이 모듈 204는 기록된 컨텐츠의 재생을 제어하는 것을 허용하는 트릭 플레이 모드에서 제2 사용자에 대한 저장된 타임 스탬프 "t2"로부터 시작하는 컨텐츠를 디스플레이한다.In (c) of FIG. 20 , the detection module 202 activates the multi-view display module 204 . While the first user views the live content in full screen of the same display module/device 201, the multi-view display module 204 starts from the stored time stamp “t2” for the second user in full screen of the display module/device 201. display the content. The multi-view display module 204 displays the content starting from the stored time stamp “t2” for the second user in a trick play mode that allows controlling the playback of the recorded content.

도 20의 (d)에서, 제1 사용자가 디스플레이 모듈/장치 201의 화면의 일부분에서의 라이브 컨텐츠를 시청하는 동안, 멀티 뷰 디스플레이 모듈 204는 스플릿 화면 모드인 디스플레이 모듈/장치 201의 화면의 나머지 부분에서 제2 사용자에 대한 저장된 타임 스탬프 "t2"로부터 시작하는 컨텐츠를 디스플레이한다. In (d) of FIG. 20 , while the first user watches live content on a portion of the screen of the display module/device 201, the multi-view display module 204 displays the remaining portion of the screen of the display module/device 201 in a split screen mode. displays the content starting from the stored time stamp “t2” for the second user.

도 20의 (e)에서, 제1 사용자가 디스플레이 모듈/장치 201의 화면에서의 라이브 컨텐츠를 보는 동안, 멀티 뷰 디스플레이 모듈 204는 PIP 모드인 디스플레이 모듈/장치 201의 화면에서 제2 사용자에 대한 저장된 타임 스탬프 "t2"로부터 시작하는 컨텐츠를 디스플레이한다. In (e) of FIG. 20 , while the first user is viewing live content on the screen of the display module/device 201, the multi-view display module 204 displays stored information for the second user on the screen of the display module/device 201 in PIP mode. Display content starting from time stamp “t2”.

도 20의 (f)에서, 제1 사용자가 제1 디스플레이 모듈/장치 201의 화면에서의 라이브 컨텐츠를 시청하는 동안, 외부 장치 상호작용 모듈 208은 제2 디스플레이 모듈/장치에서 제2 사용자에 대한 저장된 타임 스탬프 "t2"로부터 시작하는 컨텐츠가 디스플레이되도록 제2 디스플레이 모듈/장치와 상호작용한다. In (f) of FIG. 20 , while a first user is watching live content on the screen of the first display module/device 201, the external device interaction module 208 is configured to store stored data for the second user on the second display module/device. Interacts with the second display module/device to display content starting from time stamp “t2”.

일 실시 예에서, 다수의 사용자들 중 한 사용자는 디스플레이 모듈/장치 201에서 디스플레이되는 팝업(pop up) 창을 통해 도 20의 (c) 내지 (f)에서 설명되는 전자 장치 200의 다양한 모드들 중 적어도 하나를 선택할 수 있다. 다른 실시 예에서, 도 20의 (c) 내지 (f)에서 설명되는 전자 장치 200의 다양한 모드들은 사용자가 미리 설정한 설정들에 의해 결정될 수 있다. 또 다른 실시 예에서, 도 20의 (c) 내지 (f)에서 설명되는 전자 장치 200의 다양한 모드들은 전자 장치 200의 성능에 따라 결정될 수 있다.In one embodiment, one of the plurality of users selects one of the various modes of the electronic device 200 described in FIG. 20 (c) to (f) through a pop-up window displayed on the display module/device 201. You can choose at least one. In another embodiment, various modes of the electronic device 200 described in (c) to (f) of FIG. 20 may be determined by user preset settings. In another embodiment, various modes of the electronic device 200 described in (c) to (f) of FIG. 20 may be determined according to the performance of the electronic device 200 .

도 15 내지 20에서 설명되는 실시 예들에서, 기록된 컨텐츠를 플레이백하는 방법은 적어도 한 명의 사용자가 멀티미디어 컨텐츠를 시청하지 않는 것과 관련된 조건을 검출함에 따라, 디스플레이 되는 멀티미디어 컨텐츠의 일부분의 타임 스탬프 정보를 저장하는 단계 및 상기 적어도 한 명의 사용자가 멀티미디어 컨텐츠를 시청하는 것과 관련된 조건을 검출함에 따라, 상기 적어도 한 명의 사용자에 대한 저장된 타임 스탬프로부터 시작하는 멀티미디어 컨텐츠를 디스플레이 하는 단계를 포함한다. 따라서, 일 실시 예에서, 도 15 내지 20에서 설명되는 방법을 구현하는 전자 장치는 도 2에서 설명되는 전자 장치 200의 구성과 비교하여 더 적은 수의 컴포넌트들을 포함하는 전자 장치일 수 있다.In the embodiments described in FIGS. 15 to 20 , the method for playing back recorded content includes time stamp information of a portion of displayed multimedia content upon detecting a condition related to at least one user not viewing the multimedia content. storing and, upon detecting a condition associated with the at least one user viewing multimedia content, displaying the multimedia content starting from the stored time stamp for the at least one user. Accordingly, in one embodiment, an electronic device implementing the method described in FIGS. 15 to 20 may be an electronic device including fewer components than the configuration of the electronic device 200 described in FIG. 2 .

도 21은 본 개시의 다양한 실시 예들에 따른 저장된 타임 스탬프로부터 시작하는 컨텐츠를 디스플레이하기 위한 전자 장치 2100의 기능적 구성의 예를 도시한다.21 illustrates an example of a functional configuration of an electronic device 2100 for displaying content starting from a stored time stamp according to various embodiments of the present disclosure.

전자 장치 2100은 디스플레이 모듈/장치 2101, 검출 모듈 2102, 멀티미디어 타임 스탬프 저장 모듈 2103, 멀티 뷰 디스플레이 모듈 2104, 비디오 플레이어 모듈 2105, 하이라이트 검출기 모듈 2106, 및 외부 장치 상호작용 모듈 2107을 포함한다.The electronic device 2100 includes a display module/device 2101, a detection module 2102, a multimedia time stamp storage module 2103, a multi-view display module 2104, a video player module 2105, a highlight detector module 2106, and an external device interaction module 2107.

디스플레이 모듈/장치 2101은 다수의 사용자들에 대하여 멀티미디어 컨텐츠를 디스플레이한다. 상기 멀티미디어 컨텐츠는 스트리밍 컨텐츠일 수 있다.The display module/device 2101 displays multimedia content to multiple users. The multimedia content may be streaming content.

검출 모듈 2102는 다수의 사용자들 중 제1 사용자가 화면에서 디스플레이되는 멀티미디어 컨텐츠를 시청하지 않는 것과 관련되는 조건을 검출한다. 또한, 검출 모듈 2102는 제1 사용자가 화면에서 디스플레이되는 멀티미디어 컨텐츠를 시청하기 시작하는 것과 관련되는 조건을 검출하도록 더 구성된다. The detection module 2102 detects a condition related to the fact that a first user among multiple users does not watch the multimedia content displayed on the screen. Moreover, the detection module 2102 is further configured to detect a condition related to the first user starting to watch the multimedia content displayed on the screen.

멀티미디어 타임 스탬프 저장 모듈 2103은 제1 사용자가 화면에서 디스플레이되는 멀티미디어 컨텐츠를 시청하지 않는 것과 관련되는 조건에 대응하는 멀티미디어 컨텐츠의 일부분에 대한 타임 스탬프 정보를 저장한다. 일 실시 예에서, 멀티미디어 컨텐츠 타임 스탬프 저장 모듈 2103은 다수의 사용자들 중 제2 사용자가 화면에서 디스플레이되는 멀티미디어 컨텐츠를 시청하지 않는 것과 관련되는 조건에 대응하는 디스플레이되는 멀티미디어 컨텐츠의 다른 부분의 다른 타임 스탬프 정보를 추가적으로 저장할 수 있다. The multimedia time stamp storage module 2103 stores time stamp information for a portion of multimedia content corresponding to a condition related to the fact that the first user does not watch the multimedia content displayed on the screen. In an embodiment, the multimedia content time stamp storage module 2103 stores another time stamp of another part of the displayed multimedia content corresponding to a condition related to the fact that a second user among the plurality of users does not watch the multimedia content displayed on the screen. Additional information can be stored.

멀티 뷰 디스플레이 모듈 2104는 화면에서 디스플레이되는 멀티미디어 컨텐츠를 시청하기 시작하는 제1 사용자에 따라, 멀티 뷰 디스플레이 모듈 2104는 다수의 사용자들에 대한 멀티미디어 컨텐츠를 함께 제공하는 것과 동시에 프레젠테이션 모드에서 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 포맷을 제공한다.The multi-view display module 2104 provides the multimedia contents for a plurality of users together according to the first user who starts viewing the multimedia contents displayed on the screen, and the stored time stamp in the presentation mode. It provides the format of multimedia contents starting from information.

비디오 플레이어 모듈 2105는 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 일부분을 재생한다. 비디오 플레이어 모듈 2105는 일반적인 플레이백을 수행하거나 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 패스트 플레이백을 수행할 수 있다.Video player module 2105 plays a portion of multimedia content starting from the stored time stamp information. The video player module 2105 may perform normal playback or fast playback of multimedia content starting from the stored time stamp information.

하이라이트 검출기 모듈 2106은 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠 내의 하이라이트들을 검출한다. 하이라이트 검출기 모듈 2106은 비디오 플레이어 모듈 2105가 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠를 재생하는 동안, 하이라이트 검출기 모듈 2106은 하이라이트들을 검출할 수 있다. 일 실시 예에서, 비디오 플레이어 모듈 2105가 멀티미디어 컨텐츠를 재생하는 동안, 하이라이트 검출기 모듈 2106은 멀티미디어 컨텐츠의 하이라이트의 포맷 또는 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 요약을 제공할 수 있다. Highlight detector module 2106 detects highlights in multimedia content starting from the stored time stamp information. The highlight detector module 2106 may detect highlights while the video player module 2105 plays multimedia content starting from the stored time stamp information. In an embodiment, while the video player module 2105 is playing multimedia content, the highlight detector module 2106 may provide a format of the highlight of the multimedia content or a summary of the multimedia content starting from the stored time stamp information.

외부 장치 상호작용 모듈 2107은 다른 전자 장치에서 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 일부분이 재생되거나 멀티미디어 컨텐츠의 하이라이트의 포맷 또는 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 요약이 제공되도록 다른 전자 장치와 상호작용한다.The external device interaction module 2107 allows other electronic devices to play a portion of the multimedia content starting from the stored time stamp information or to provide a format of a highlight of the multimedia content or a summary of the multimedia content starting from the stored time stamp information in another electronic device. interact with the device.

일 실시 예에서, 다른 전자 장치에서 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 일부분이 재생되거나 멀티미디어 컨텐츠의 하이라이트의 포맷 또는 상기 저장된 타임 스탬프 정보로부터 시작하는 멀티미디어 컨텐츠의 요약이 제공되는 경우, 전자 장치 2100은 멀티 뷰 디스플레이 모듈 2104 및 비디오 플레이어 모듈 2105를 포함하지 않을 수 있다. 다른 실시 예에서, 전자 장치 2100이 하이라이트 모드 및 트릭 플레이 모드에서 멀티미디어 컨텐츠의 일부분을 플레이백하지 않을 수 있다.In one embodiment, when a part of the multimedia content starting from the stored time stamp information is reproduced or a format of a highlight of the multimedia content or a summary of the multimedia content starting from the stored time stamp information is provided in another electronic device, the electronic device 2100 may not include the multi-view display module 2104 and the video player module 2105. In another embodiment, the electronic device 2100 may not play a part of the multimedia content in the highlight mode and trick play mode.

도 22는 본 개시의 다양한 실시 예들에 따른 도 2에서 설명되는 전자 장치 200의 구성과 비교하여 더 적은 수의 컴포넌트들을 포함하는 전자 장치 2200의 기능적 구성의 예를 도시한다.22 illustrates an example of a functional configuration of an electronic device 2200 including fewer components compared to the configuration of the electronic device 200 described in FIG. 2 according to various embodiments of the present disclosure.

전자 장치 2200은 디스플레이 모듈/장치 2201 및 검출 모듈 2202를 포함한다. 또한, 전자 장치 2200은 비디오 기록 모듈 2203 및 멀티미디어 타임 스탬프 저장 모듈 2204 중 적어도 하나를 포함할 수 있다. 또한, 전자 장치 2200은 멀티 뷰 디스플레이 모듈 2205 및 외부 장치 상호작용 모듈 2206 중 적어도 하나를 포함할 수 있다. 또한, 전자 장치 2200은 멀티미디어 컨텐츠를 재생하기 위한 비디오 플레이어 모듈 2207을 포함할 수 있다.The electronic device 2200 includes a display module/device 2201 and a detection module 2202 . Also, the electronic device 2200 may include at least one of a video recording module 2203 and a multimedia time stamp storage module 2204. Also, the electronic device 2200 may include at least one of a multi-view display module 2205 and an external device interaction module 2206 . Also, the electronic device 2200 may include a video player module 2207 for playing multimedia content.

본 개시의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합의 형태로 구현될(implemented) 수 있다. Methods according to the embodiments described in the claims or specification of the present disclosure may be implemented in the form of hardware, software, or a combination of hardware and software.

소프트웨어로 구현하는 경우, 하나 이상의 프로그램(소프트웨어 모듈)을 저장하는 컴퓨터 판독 가능 저장 매체가 제공될 수 있다. 컴퓨터 판독 가능 저장 매체에 저장되는 하나 이상의 프로그램은, 전자 장치(device) 내의 하나 이상의 프로세서에 의해 실행 가능하도록 구성된다(configured for execution). 하나 이상의 프로그램은, 전자 장치로 하여금 본 개시의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들을 실행하게 하는 명령어(instructions)를 포함한다. When implemented in software, a computer readable storage medium storing one or more programs (software modules) may be provided. One or more programs stored in a computer-readable storage medium are configured for execution by one or more processors in an electronic device. The one or more programs include instructions that cause the electronic device to execute methods according to embodiments described in the claims or specification of the present disclosure.

이러한 프로그램(소프트웨어 모듈, 소프트웨어)은 랜덤 액세스 메모리 (random access memory), 플래시(flash) 메모리를 포함하는 불휘발성(non-volatile) 메모리, 롬(ROM: Read Only Memory), 전기적 삭제가능 프로그램가능 롬(EEPROM: Electrically Erasable Programmable Read Only Memory), 자기 디스크 저장 장치(magnetic disc storage device), 컴팩트 디스크 롬(CD-ROM: Compact Disc-ROM), 디지털 다목적 디스크(DVDs: Digital Versatile Discs) 또는 다른 형태의 광학 저장 장치, 마그네틱 카세트(magnetic cassette)에 저장될 수 있다. 또는, 이들의 일부 또는 전부의 조합으로 구성된 메모리에 저장될 수 있다. 또한, 각각의 구성 메모리는 다수 개 포함될 수도 있다. Such programs (software modules, software) may include random access memory, non-volatile memory including flash memory, read only memory (ROM), and electrically erasable programmable ROM. (EEPROM: Electrically Erasable Programmable Read Only Memory), magnetic disc storage device, Compact Disc-ROM (CD-ROM), Digital Versatile Discs (DVDs), or other forms of It can be stored on optical storage devices, magnetic cassettes. Alternatively, it may be stored in a memory composed of a combination of some or all of these. In addition, each configuration memory may be included in multiple numbers.

또한, 상기 프로그램은 인터넷(Internet), 인트라넷(Intranet), LAN(Local Area Network), WLAN(Wide LAN), 또는 SAN(Storage Area Network)과 같은 통신 네트워크, 또는 이들의 조합으로 구성된 통신 네트워크를 통하여 접근(access)할 수 있는 부착 가능한(attachable) 저장 장치(storage device)에 저장될 수 있다. 이러한 저장 장치는 외부 포트를 통하여 본 개시의 실시 예를 수행하는 장치에 접속할 수 있다. 또한, 통신 네트워크상의 별도의 저장장치가 본 개시의 실시 예를 수행하는 장치에 접속할 수도 있다. In addition, the program may be performed through a communication network such as the Internet, an Intranet, a Local Area Network (LAN), a Wide LAN (WLAN), or a Storage Area Network (SAN), or a communication network composed of a combination thereof. It can be stored on an attachable storage device that can be accessed. Such a storage device may be connected to a device performing an embodiment of the present disclosure through an external port. In addition, a separate storage device on a communication network may be connected to a device performing an embodiment of the present disclosure.

상술한 본 개시의 구체적인 실시 예들에서, 개시에 포함되는 구성 요소는 제시된 구체적인 실시 예에 따라 단수 또는 복수로 표현되었다. 그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 본 개시가 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성 요소라 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다. In the specific embodiments of the present disclosure described above, components included in the disclosure are expressed in singular or plural numbers according to the specific embodiments presented. However, the singular or plural expressions are selected appropriately for the presented situation for convenience of explanation, and the present disclosure is not limited to singular or plural components, and even components expressed in plural are composed of the singular number or singular. Even the expressed components may be composed of a plurality.

한편 본 개시의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 개시의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 개시의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다. Meanwhile, in the detailed description of the present disclosure, specific embodiments have been described, but various modifications are possible without departing from the scope of the present disclosure. Therefore, the scope of the present disclosure should not be limited to the described embodiments and should not be defined by the scope of the claims described below as well as those equivalent to the scope of these claims.

Claims

In the method of operating an electronic device,
A process of displaying multimedia content to a plurality of users;
At a first point in time, detecting that a first user among the plurality of users is not viewing the multimedia content displayed on the screen;
recording a first portion starting from the first point in time of the displayed multimedia content according to the detection;
detecting that the first user starts to watch the multimedia content displayed on the screen at a second time point after the first time point;
and displaying, from the second point of view, the multimedia content for the plurality of users in a first area and the first part of the multimedia content in a second area different from the first area.

The method of claim 1,
detecting that a second user among the plurality of users does not watch the multimedia content displayed on the screen;
recording a second portion of the displayed multimedia content;
detecting that the second user starts viewing the multimedia content displayed on the screen;
and displaying the multimedia content for the plurality of users and the recorded second portion of the multimedia content corresponding to the second user.

The method of claim 1,
The process of detecting that a first user among the plurality of users does not watch the multimedia content displayed on the screen,
and detecting that the first user does not exist within a detection area of the electronic device or that the first user's gaze is not directed toward the electronic device.

The method of claim 1,
The process of detecting that the first user starts to watch the multimedia content displayed on the screen,
and detecting that the first user is present in a detection area of the electronic device or detecting that the first user's gaze is directed toward the electronic device.

The method of claim 1,
wherein the first portion is at least one of a highlight of the recorded first portion and a summary of the recorded first portion.

The method of claim 1,
The first part detects that the first user starts to watch the multimedia content displayed on the screen from a first time point when it is detected that the first user does not watch the multimedia content displayed on the screen. Part of the multimedia content corresponding to the time interval up to the second point in time.

The method of claim 1,
The process of displaying the multimedia content and the first part of the multimedia content to the plurality of users,
to the multiple users in one of full screen mode, picture-in picture mode, split screen mode, multi view mode, and augmented mode. and displaying the multimedia content for the first user and the first portion of the multimedia content corresponding to the first user.

The method of claim 1,
The process of displaying the multimedia content and the first part of the multimedia content to the plurality of users,
displaying the multimedia content for the plurality of users;
Transmitting information about the first part of the multimedia content corresponding to the first user to another electronic device;
The first part of the multimedia content is displayed on the other electronic device.

The method of claim 1,
The process of recording the first part of the displayed multimedia content,
Storing time stamp information of the first portion of the displayed multimedia content;
The time stamp information is information about a point in time when it is detected that the first user does not watch the multimedia content displayed on the screen.

The method of claim 9,
The process of displaying the multimedia content for the plurality of users and the first portion of the multimedia content corresponding to the first user,
and displaying the multimedia content for the plurality of users and the first portion of the multimedia content corresponding to the first user based on the stored time stamp information.

In electronic devices,
A display unit for displaying multimedia content for a plurality of users;
At a first point in time, a detection unit for detecting that a first user among the plurality of users is not viewing the multimedia content displayed on the screen;
A storage unit for recording a first portion starting from a first point in time of the displayed multimedia content according to the detection;
The detection unit detects that the first user starts to watch the multimedia content displayed on the screen at a second time point after the first time point;
The display unit displays the multimedia contents for the plurality of users in a first area and the first part of the multimedia contents in a second area different from the first area, from the second point of view.

The method of claim 11,
The detection unit detects that a second user among the plurality of users does not watch the multimedia content displayed on the screen;
The storage unit records a second part of the displayed multimedia content,
The detection unit detects that the second user starts viewing the multimedia content displayed on the screen;
wherein the display unit displays the multimedia content for the plurality of users and the recorded second portion of the multimedia content corresponding to the second user.

The method of claim 11,
wherein the detection unit detects that the first user does not exist within a detection area of the electronic device or that the first user's gaze is not directed toward the electronic device.

The method of claim 11,
wherein the detection unit detects that the first user is present within a detection area of the electronic device or that the first user's gaze is directed toward the electronic device.

The method of claim 11,
wherein the first portion is at least one of a highlight of the recorded first portion and a summary of the recorded first portion.

The method of claim 11,
In the first part, the first user starts to watch the multimedia content displayed on the screen from a first time point when a condition related to the first user not viewing the multimedia content displayed on the screen is detected. A device that is part of the multimedia content corresponding to a time interval up to a second point in time when a condition related to doing is detected.

The method of claim 11,
The display unit may operate the display unit in one of a full screen mode, a picture-in picture mode, a split screen mode, a multi view mode, and an augmented mode. An apparatus for displaying the multimedia content for users of and the first portion of the multimedia content corresponding to the first user.

The method according to claim 11, further comprising a communication unit,
The display unit displays the multimedia content for the plurality of users,
The communication unit transmits information about the first part of the multimedia content corresponding to the first user to another electronic device,
The first part of the multimedia content is displayed on the other electronic device.

The method of claim 11,
The storage unit stores time stamp information of the first part of the displayed multimedia content,
The time stamp information is information about a point in time when it is detected that the first user does not watch the multimedia content displayed on the screen.

The method of claim 19
wherein the display unit displays the multimedia contents for the plurality of users and the first part of the multimedia contents corresponding to the first user, based on the stored time stamp information.