KR101919475B1 - 사용자 인터페이스 제공 장치 및 방법 - Google Patents

Abstract

본 발명은 사용자가 복수의 재생되는 프레임에 기반하여 원하는 영상을 선택하도록 하기 위해 복수의 영상을 동시에 재생하는 사용자 인터페이스 제공 장치 및 방법에 관한 것이다.
이를 달성하기 위하여 사용자 인터페이스 제공 장치가, 재생되는 복수의 영상을 동시에 표시하는 표시부와; 복수의 영상을 동시에 재생하고, 상기 복수의 영상 중 선택된 영상을 재생하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.

Description

사용자 인터페이스 제공 장치 및 방법{DEVICE AND METHODFOR PROVIDING USER INTERFACE }

본 발명은 영상 처리 분야에 관한 것으로, 더욱 상세하게는 하나의 디스플레이에 복수의 영상 스트림을 동시에 표시할 수 있는 사용자 인터페이스 제공 장치 및 방법에 관한 것이다.

요즈음 PC 및 랩탑에서부터 PDA, 휴대폰, 디지털 태블릿 기기 등 많은 기기들은 영상 디스플레이 성능을 갖추고 있다. 일반적으로 동영상 및 화상은 이와 관련한 디지털 정보를 보여주는 메뉴에서 선택되어 진다. 그러나 현재 사용자 인터페이스들은 다른 동영상 또는 다른 대상을 나타내는 정지 영상 및 제목만을 제공하고 있다. 선행 기술에 따른 사용자 인터페이스들은 상기 기기에 의해 생성된 (일부 경우에서는, 사용자에 의해 선택될 수 있다) 동영상의 한 프레임만을 나타내기 때문에, 하나의 프레임으로부터 검색될 수 있는 정보가 한정되고 충분하지 못하다는 문제점이 발생되고 있다. 예를 들면, 상업적 영화들은 항상 영화사 로고로 시작하기 때문에 많은 영화는 동일한 썸(thumb)을 가질 수 있을 것이다. 또 다른 예로는, 동영상에서 중요한 정보를 포함하고 있지 않은 시간에서 썸(thumb)이 선택되는 것이다. 이러한 경우, 더 많은 정보를 얻기 위해 사용자는 자신이 원하는 동영상을 선택하기 전에 더 많은 정보 자원을 찾거나, 특정 동영상의 재생을 시작하여 부분적으로 시청을 할 것이다. 이러한 과정은 자연적으로 시간이 소요되며 비효율적이다.

따라서, 선택 메뉴에 나타나는 다양한 영상에 관한 동적 정보를 표시하는 수단을 제공하는 것이 대단히 바람직하다는 사실은 분명하다.

본 발명의 목적은 선택 메뉴에서 이용할 수 있는 복수의 영상과 관련하여 동적인 방법으로 증대된 정보를 동시에 표시하는 사용자 인터페이스 제공 장치 및 방법을 제공하는 것이다.

본 발명의 또 다른 목적은 복수의 영상이 동시에 재생되는 것과 같이 복수의 영상을 표시할 수 있는 사용자 인터페이스 제공 장치 및 방법을 제공하는 것이다.

본 발명의 또 다른 목적은 동시에 재생되는 복수의 서로 다른 영상들을 선택 메뉴에 표시하여 사용자가 확대된 화면 또는 전체 화면으로 재생하기를 원하는 하나의 영상을 복수의 영상에서 선택가능 하도록 하는 사용자 인터페이스 제공 장치 및 방법을 제공하는 것이다.

본 발명의 또 다른 목적은 동일한 영상에서 재생되는 복수의 세그먼트를 동시에 표시하고 사용자가 확대된 화면 또는 전체 화면으로 재생하기를 원하는 하나의 세그먼트를 복수의 세그먼트에서 선택가능 하도록 하는 사용자 인터페이스 제공 장치 및 방법을 제공하는 것이다.

본 발명의 다른 목적들 및 이점들은 하기 설명 과정에서 명확히 이해될 것이다.

상기 목적을 달성하기 위한 사용자 인터페이스 제공 장치가, 재생되는 복수의 영상을 동시에 표시하는 표시부와; 복수의 영상을 동시에 재생하고, 상기 복수의 영상 중 선택된 영상을 재생하도록 제어하는 제어부를 포함하는 것을 특징으로 한다.

또한 상기 목적을 달성하기 위한 사용자 인터페이스 제공 방법은, 복수의 영상을 동시에 재생하는 과정과; 상기 복수의 영상 중 소정의 영상이 선택되면, 상기 선택된 영상을 재생하는 과정을 포함하는 것을 특징으로 한다.

사용자 인터페이스 제공 장치 및 방법으로 통해 멀티 영상을 동시에 화면에 표시함으로써 사용자의 경험뿐만 아니라 사용자 인터페이스의 효율성을 향상시킬 수 있다. 또한, 현재 이미 알려진 썸네일에 비해 각 동영상에 대한 많은 정보를 사용자에게 제공할 수 있기 때문에 사용자가 보기를 원하는 동영상을 용이하게 선택하도록 도와준다.

도 1은 본 발명의 실시 예에 따른 라이브 영상 갤러리를 설명하기 위한 도면.
도 2는 본 발명의 실시 예에 따른 라이브 챕터를 설명하기 위한 도면.
도 3은 본 발명의 실시 예에 따른 타임 라인 미리보기를 도시한 도면
도 4는 본 발명의 실시 예에 따라 타임 라인 미리보기를 통해 동영상을 검색하는 과정을 도시한 흐름도.
도 5는 본 발명의 실시 예에 따른 라이브 연락처 리스트를 설명하기 위한 도면.
도 6은 본 발명의 실시 예에 따른 하드웨어 복호기의 동작을 설명하기 위한 도면.
도 7은 본 발명의 실시 예에 따른 휴대단말기의 구성도.

멀티 영상을 동시에 화면에 표시하는 것은 사용자의 경험뿐만 아니라 사용자 인터페이스의 효율성을 향상시킬 수 있다. 따라서, 영상 갤러리에서 특정 동영상을 검색하는 경우, 멀티 디스플레이 효과는 사용자가 동시에 재생되고 있는 복수의 동영상을 미리 볼 수 있게 해준다. 이는 현재 알려진 이미지 썸네일에 비해 각 동영상에 대해 많은 정보를 사용자에게 제공하고 사용자가 보기를 원하는 동영상을 선택하는 것을 도와준다.

상기 라이브 썸은 상기 갤러리에 포함된 동영상들에 관한 더 많은 정보를 포함하고 있기 때문에, 사용자가 용이하게 동영상을 선택할 수 있다. 게다가, 라이브 컨텐츠는 정지된 컨텐츠보다 훨씬 더 흥미롭기 때문에 사용자가 더 나은 경험을 할 수 있게 해준다.

본 발명은 복수 스트림의 병렬 복호화 또는 동일한 스트림의 다른 시간대의 병렬 복호화를 통해 사용자의 화면에 복수의 스트림을 한번에 표시하도록 한다.

하드웨어 복호 자원은 복호 인스턴스(instance)의 수에 한정되어 있기 때문에 한정된 수의 동영상을 병렬적으로 복호화할 수 있다. 각각의 인스턴스는 오직 하나의 동영상을 복호화할 수 있다. 이러한 한계점을 극복하기 위해, 다중화 및 버퍼링 기술이 이용된다. 이는 하기의 단일 인스턴스 하드웨어 복호기가 H264로 부호화된 세 개의 동영상들을 복호화하기 위해 이용되는 경우를 예로 들어 설명한다. 기본적으로 상기 복호기는 하나의 동영상을 복호화하는 것을 의미한다. 본 발명에 따르면, 각각의 동영상 스트림은 복수의 서브스트림으로 분할된다. 각 서브 스트림은 하나의 I-프레임과 다음 I-프레임 이전까지 연속하는 프레임들을 포함하기 때문에, 서로 다른 동영상들 간의 전환이 가능하다. 상기 복호기의 출력에서, 상기 결과적 원 동영상은 세 개의 출력 스트림으로 다시 분할된다. 상기 하드웨어 복호기가 초기 파라미터(해상도, 코덱 등)를 충분히 빠르게 변경시킬 수 없는 경우, 각 동영상의 오프라인의 일부를 미리 선택된 형식 및 해상도로 복호화하고 부호화하는 것이 하나의 선택 방법이다. 이러한 경우, 상기 복호기는 서로 다른 동영상들을 재시작할 필요가 없다.

상기와 같은 방법을 이용함으로 인해 동영상 렌더딩에 어느 정도의 지연이 발생한다. 상기 지연은 상기 복호기가 서브스트림을 복호화하기 위해 소요된 시간에 2를 곱하고 I-프레임을 복호화하기 위해 소요된 시간을 더하여 산출된다.

동시에 복호화될 수 있는 동영상의 개수는 해상도의 입력 및 출력, 동영상 포맷, 및 복호 효율성 등과 같은 많은 파라미터에 따라 달라진다. 본 발명의 분야에 통상적인 지식을 가진 자는 자신이 이용가능한 하드웨어에 따라 동시에 복호화될 수 있는 동영상의 수를 용이하게 확인할 수 있을 것이다. 예를 들면, 삼성 S5PC110 기기를 사용하는 경우, 480 x 270 의 소스 해상도를 가진 12개의 동영상을 200 x 120의 출력 해상도로 복호화할 수 있다. 많은 동영상이 동시에 동일한 화면에 표시되기 때문에 작은 출력 해상도일지라도 충분하다.

상기 복호기의 동작을 도 6에서 개략적으로 도시하고 있으며, 상기 도 6은 본 발명의 실시 예에 따른 하드웨어 복호기의 동작을 설명하기 위한 도면이다. 설명의 편의를 위해, 하기 단계들은 멀티 스트림 모드 (도 6 참조)에서 세 개의 동영상에 대한 상기 복호기의 동작 과정 동안 발생한다.

1) 상기 하드웨어 복호기가 초기화되어 제1 동영상을 처리한다 (해상도 및 코덱과 같은 동영상 파라미터가 이용된다).

2) 상기 제1 동영상의 제1 서브 스트림이 상기 하드웨어 복호기에 전송된다. 상기 제1 서브 스트림은 프레임 단위로 복호기에 기록된다.

3) 결과적 원 이미지들(raw images)은 도 6에 도시된 출력 버퍼 1에 저장된다.

4) 상기 하드웨어 복호기는 초기화되어 제2 동영상을 처리한다 (해상도 및 코덱과 같은 동영상 파라미터가 이용된다).

5) 상기 제2 동영상의 제1 서브 스트림이 상기 하드웨어 복호기에 전송된다. 다시, 각 프레임 단위로 상기 복호기에 기록된다.

6) 결과적 원 이미지들(raw images)은 도 6에 도시된 출력 버퍼 2에 저장된다.

7) 상기 하드웨어 복호기는 초기화되어 제3 동영상을 처리한다 (해상도 및 코덱과 같은 동영상 파라미터가 이용된다).

8) 상기 제3 동영상의 제1 서브 스트림이 상기 하드웨어 복호기에 전송된다.

9) 결과적 원 이미지들(raw images)은 도 6에 도시된 출력 버퍼 3에 저장된다.

10) 상기 출력 버퍼 3의 상기 제1 프레임이 준비되면, 상기 세 개의 동영상의 렌더링이 시작될 수 있다. 이러한 한정은 상기 과정에 지연을 일으킨다. 상기 지연은 상기 두 개의 서브 스트림에 대한 복호기의 처리 시간의 두 배를 더하고 상기 제3 동영상의 서브 스트림의 I-프레임에 대한 복호 처리 시간을 더하여 산출될 수 있다.

11) 상기 과정은 다시 단계 1로 되돌아간다. 이번 경우에는, 각 동영상의 제2 서브 스트림이 복호화되고, 상기 과정이 반복된다.

본 발명에 따른 상기 방법을 수행하기 위해, 상기 복호기는 모든 동영상의 초당 프레임(FPS: Frames Per Second)의 합보다 빠른 프레임 속도로 복호화할 수 있을 만큼 빨라야 한다. 예를 들면, 상기 세 개의 동영상의 프레임 속도가 30 FPS인 경우, 상기 복호기는 3 x 30 = 90 FPS의 프레임 속도로 복호화할 수 있어야 한다. 일부의 경우에 있어서는, 상기 한계를 극복하기 위해, 상기 동영상의 라이터(lighter) 버전 또는 동영상의 일부분을 오프라인을 통해 준비할 필요가 있다.

따라서, 본 발명을 통해 사용자는 사용자의 갤러리에 포함된 동영상에 관한 정보 데이터와 더욱 흥미로운 GUI를 유용하게 사용할 수 있다. 또한, 본 발명에 의해, 사용자는 각지 다른 스트림의 렌더링 속도를 선택적으로 제어할 수 있다. 따라서, 사용자는 표시되는 각각의 동영상과 관계없이 실시간, 빠른 속도, 느린 속도 중 하나를 선택할 수 있다. 또한, 본 발명에 따르면 사용자는 동일한 GUI에서 라이브 썸과 정지 썸을 선택적으로 통합할 수 있다.

따라서, 예를 들면, 미디어 갤러리는 영상에 대한 라이브 썸과 정지 영상에 대한 정지 썸을 포함할 수 있다.

본 발명의 기술적 특징은 하기를 포함한다:

·사용자가 동시에 복수의 영상 스트림을 렌더링할 수 있도록 하는 하드웨어/소프트웨어 엔진.

·지정된 버퍼에 출력되는 각각의 스트림.

·원하는 GUI 설계에 대한 대역폭을 복호화하기 위해 동영상 전 처리 트랜스코딩(transcoding)을 하는 엔진.

예를 들면, 영상 갤러리를 가지고 있고 12개의 풀 HD (1920 x 1080 해상도) 동영상을 동시에 디스플레이하기를 희망하는 경우, 상기 하드웨어 엔진 자원들은 상기 12개의 풀 HD 동영상들을 병렬적으로 복호화할 수 없으나, 12개의 작은 동영상(240 x 180 해상도)으로 복호화할 수 있을 것이다. 상기 전 처리 엔진은 높은 해상도에서 낮은 해상도로 상기 12개 동영상을 트랜스코딩함으로 인해 상기 GUI는 적은 해상도 자원을 이용할 것이다. 12개의 동영상을 화면에 동시에 표시하기 때문에, 실제 표시되는 해상도는 낮으며, 따라서 풀 HD 해상도가 필요하지 않다.

·동적으로 스트림을 추가/제거할 수 있는 GUI 설계자(본 발명의 최초 수신인 및 이를 이용하여 GUI를 제작할 사람);

·GUI 설계자는 스트림의 현재 재생 위치를 선택할 수 있다.

·GUI 설계자는 스트림의 랜더링 속도를 선택할 수 있다.

·GUI 설계자는 기기의 배터리 상태에 따라 (라이브 랜더링에서는 전력 소비가 증가하기 때문에) 상기 썸이 라이브 또는 정지되도록 선택할 수 있다.

이하에서는 특정 예들을 통해 본 발명을 더 설명한다.

라이브 영상 갤러리

도 1은 본 발명의 실시 예에 따른 라이브 영상 갤러리를 설명하기 위한 도면이다. 상기 도 1에 도시된 썸들은 정지된 것이 아니며, 동영상이 썸들에서 재생되고 있다. 상기 라이브 영상 갤러리는 사용자가 화면에 표시되는 다양한 동영상들을 동시에 볼 수 있게 해주며 동시에 각각의 동영상에 대한 정보를 획득할 수 있게 해준다. 상기 도 1의 예에서는, 손가락으로 동영상을 스와이핑하여 다른 동영상들을 스크롤 한다. 미리보기 썸들 중 하나를 터치하여 영상 재생기를 통해 특정 동영상을 재생할 수 있다.

라이브 챕터( chapter ) (시간 기준) 선택 UI

도 2는 본 발명의 실시 예에 따른 라이브 챕터를 설명하기 위한 도면이다. 상기 도 2에 도시된 썸들은 정지된 것이 아니라 동시에 재생되고 있다는 것을 유의하여야 한다. 동시에 병렬적으로 동일한 영상으로부터 서로 다른 챕터들을 스트리밍하는 것은 상기에서 언급한 바와 같이 수행된다. 따라서, 사용자는 각 챕터로부터 짧은 세그먼트를 보게 될 것이기 때문에, 정지 썸에 의해 제공되는 것보다 훨씬 더 풍부한 정보를 바탕으로 적절한 챕터를 선택할 수 있다. 특정 장면을 터치하여 디폴트 동영상 재생기를 통해 상기 희망하는 챕터의 동영상을 재생한다.

본 발명의 일 실시 예에 따르면, 상기 화면상에서 손가락으로 스와이핑하는방향에 따라 표시된 챕터들을 우측 또는 좌측으로 스크롤한다. 또한 본 발명의 일 실시 예에 따르면, 두 손가락을 모으거나 펼치는 동작을 통해 손가락을 모은 지점에서부터 확대 또는 축소될 수 있다.

라이브 앞으로 감기/되감기

본 발명에 의해 가능한 또 다른 방법으로는 앞으로 감기 및 되감기 동작의 효과적인 수행 방법이다. 상기 방법은 도 3 내지 4에 도시되어 있다. 상기 도 3은 본 발명의 실시 예에 따른 타임 라인 미리보기를 도시한 도면이고, 상기 도 4는 본 발명의 실시 예에 따라 타임 라인 미리보기를 통해 동영상을 검색하는 과정을 도시한 흐름도이다. 상기 도 3 내지 상기 도 4에 도시된 예에 따르면, 일단 사용자가 영상 재생기를 통해 동영상을 보는 경우, 라이브 앞으로 감기/되감기를 통해 타임 라인대로 동영상들을 검색할 수 있다.

상기 도 4에 도시된 흐름도는 사용자 인터페이스의 예를 도시한다.

상기 도 4를 참조하면, 사용자는 동영상을 시청한다(401단계). 사용자가 상기 동영상에서 다른 타임 라인을 시청하고자 화면을 터 치입력하면(402단계). 상기 도 3과 같은 타임 라인 미리 보기(300)가 표시된다(403단계), 상기 도 3과 같은 타임 라인 미리보기(300)를 통해 재생되는 동영상의 각기 다른 시간에 해당하는 작은 라이브 썸들을 보여준다. 이때 상기 동영상은 백그라운드로 동시에 계속 재생되고 있다. 예를 들면, 상기 도 3에서 1로 표기된 라이브 썸은 10분 전의 동영상의 보여줄 수 있으며, 2로 표기된 라이브 썸은 5분 전의 동영상을 보여줄 수 있으며, 3으로 포기된 라이브 썸은 현재의 동영상을 보여줄 수 있으며, 4로 표기된 라이브 썸은 5분 후의 동영상을 보여줄 수 있으며, 5로 표기된 라이브 썸은 10분 후의 동영상을 보여줄 수 있다. 상기 예에서 초기 “타임 그리드(time grid)”는 5분이다.

사용자가 손가락으로 상기 타임라인 미리보기 영역을 스와이프(swipe)하면(404단계), 스와이프된 방향이 판단되고(405단계) 상기 타임 라인 미리보기(300)에 표시되는 썸들은 스와이프된 방향으로 스크롤되어 5분 간격의 이전/나중 장면을 표시한다(406단계). 상기 스와이프 방향이 좌측이면 상기 타임 라인 미리보기(300)에 표시되는 마지막 썸 보다 이후 시간의 썸들이 표시된다. 그리고, 상기 스와이프 방향이 우측이면 상기 타임 라인 미리보기(300)에 표시된 첫번 째 썸 보다 이전 시간의 썸들이 나타난다. 예를 들면, 사용자가 좌측으로 두 개의 썸을 스와이프하면, 상기 표시되는 라이브 썸들은 썸 1에서는 현재 장면을, 썸 2에서는 5분 후 장면을, 썸 3에서는 10분 후 장면을, 썸 4에서는 15분 후 장면을, 썸 5에서는 20분 후 장면을 보여줄 것이다.

사용자가 상기 타임 그리드를 변경하고자 하는 경우, 상기 썸들 중 하나를 터치입력 한다. 이를 통해 상기 타임 그리드를 반으로 줄어들 수 있으며, 즉, 각 표시된 썸들 간의 시간이 5분이 아닌 2분 30초가 될 것이며, 상기 타임 라인 미리보기(300)에 표시되는 복수의 썸들 중 중앙에 위치되는 썸에는 상기 입력된 썸의 시간을 렌더링하게 할 것이다. 상기 예에서, 사용자가 20분 후에 표시되는 장면인 썸 5를 입력할 경우, 새로운 타임라인 미리보기는 하기의 썸들을 포함하여 표시한다.

미리보기 썸 1 - 15분 후 장면

미리보기 썸 2 - 17분 30초 후 장면

미리보기 썸 3 - 20분 후 장면

미리보기 썸 4 - 22분 30초 후 장면

미리보기 썸 5 - 25분 후 장면

이는 실제 타임 그리드가 2분 30초인 것을 의미한다.

상기 타임 그리드를 변경하는 또 다른 방법으로는 백 버튼(back butten)(301)을 입력하는 것이며, 상기 백 버튼(301)의 입력에 따라 타임그리드가 이전 값으로 돌아가도록 설정할 수 있다.사용자가 상기 타임 라인 미리보기(300)에 표시되는 썸들 중 시청하기를 원하는 시간 위치를 알고 있는 경우, 사용자는 해당 썸 에서 손가락을 이용하여 위로 스와이핑한다(405단계). 그러면 현재 재생 시간은 상기 선택된 썸의 시간 위치로 점프하여 재생을 하고, 상기 타임 라인 미리보기(300)는 숨겨진다.(407단계).

또한 상기 재생 중인 동영상에 표시되는 타임 라인 미리보기가 사용자에 의해 터치입력되면(408단계), 상기 타임라인 미리보기는 일정 크기로 확대되고(409단계), 사용자에 의해 백 버튼(Back butten)이 터치입력되면(410), 상기 재생 중인 동영상에 표시되는 타임 라인 미리보기가 일정 크기로 축소된다(411단계).

또한 상기 동영상 재생 중 타임 라인 미리보기가 표시되는 동안 사용자에 의해 화면이 입력되면(412단계), 상기 타임 라인 미리보기가 숨겨진다(413단계).

라이브 연락처 리스트

스트림의 병렬 복호화는 "라이브 연락처 리스트"를 생성함으로써 연락처 리스트를 향상시키기 위해 이용될 수 있다. 상기 연락처 리스트 상에서 이름 옆에 정지 이미지를 포함시키는 대신에, 사용자는 해당하는 사람의 짧은 영상을 촬영하여 본 발명에 따라 동작하는 리스트에서 상기 촬영한 영상을 사용할 수 있다. 상기 사용자 인터페이스는 사용자가 각각의 연락처를 보여주는 동영상들을 동시에 볼 수 있게 해준다. 이는 상기 연락처 리스트 애플리케이션이 더욱더 사용자에게 매력적으로 느낄 수 있게 해준다. 화면상에서 손가락을 위로 또는 아래로 스와이핑하면 다른 연락처들이 스크롤 될 것이다. 그 중 하나의 연락처를 선택하면 상세한 연락처 정보를 보여주며, 현재 연락처 애플리케이션에서와 같은 다양한 선택사항들이 가능할 것이다.

도 5는 본 발명의 실시 예에 따른 라이브 연락처 리스트를 설명하기 위한 도면으로써, 상기 도 5에서 보여지는 썸들 각각은 정지된 썸이 아닌, 짧은 영상을 재생하고 있다.

도 7은 본 발명의 실시 예에 따른 휴대단말기의 구성도이다.

상기 도 7을 참조하면, 제어부(710)는 휴대단말기의 전반적인 동작을 제어한다.

또한 상기 제어부(710)는 상기 도 1과 같이 서로 다른 영상을 각각 재생하는 복수의 라이브 썸(thumb)으로 표시되는 라이브 영상 갤러리를 표시하도록 제어할 수 있으며, 상기 도 2와 같이 하나의 동영상에 포함된 복수의 라이브 챕터를 동시에 재생하면서 표시하도록 제어할 수 있다.

또한 상기 제어부(710)는 상기 도 3- 도 4와 같이, 재생 중인 동영상에 타임 라인 미리보기를 표시하고, 사용자의 스이와프 동작에 따른 타임 라인 미리보기를 제어하며, 타임 라인 미리보기에서 사용자에 의해 선택된 썸의 시간으로 점프하여 동영상을 재생하도록 제어할 수 있다.

또한 상기 제어부(710)는 상기 도 5와 같이, 라이브 연락처 리스트에서 서로 다른 각각의 영상을 재생하도록 제어할 수 있다.

또한 상기 제어부(710)는 상기 도 6과 같이 복수의 영상을 동시에 재생하기 위한 하드웨어 복호기를 제어할 수 있다.

표시부(720)는 서로 다른 영상을 동시에 재생하면서 표시하는 복수의 라이브 썸을 표시하고, 하나의 동영상에 포함된 복수의 라이브 챕터를 동시에 표시한다.

또한 상기 표시부(720)는 동영상 재생 중 서로 다른 시간을 가지는 영상을 표시하는 복수의 썸을 포함하는 타임 라인 미리보기를 표시하고, 서로 다른 각각의 영상을 재생하는 라이브 연락처 리스트를 표시한다.

Claims (16)

1. 사용자 인터페이스 제공 장치로서,
   상기 사용자 인터페이스 제공 장치는 영상을 표시하는 표시부 및 제어부를 포함하고, 상기 제어부는 사용자가 영상을 시청하고 상기 표시부를 누르는 것에 응답하여, 사용자로 하여금 원하는 영상 서브스트림을 선택하도록 허용할 목적으로 상기 표시부상에 복수의 영상 서브스트림이 동시에 재생되도록 제어하고,
   상기 제어부는,
   동시에 재생되는 상기 복수의 영상 서브스트림은, 상기 동시에 재생되는 복수의 영상 서브스트림이 타임라인 미리보기를 포함하고 상기 영상은 상기 타임라인 미리보기의 배경에서 재생되도록, 상이한 시점들로부터 획득된 영상의 세그먼트들을 포함하고,
   상기 동시에 재생되는 복수의 영상 서브스트림 중 하나가 사용자에 의하여 터치되고 제1 방향으로 스와이프되는 경우, 상기 영상은 터치된 영상 서브스트림의 시점부터 시작하여 스크린상에서 재생되고, 상기 타임라인 미리보기는 더 이상 디스플레이되지 않고,
   상기 동시에 재생되는 복수의 영상 서브스트림은 상기 영상 내의 상기 복수의 영상 서브스트림의 시점의 순서로 상기 타임라인 미리보기 내에서 배열되고, 상기 상이한 시점들은 상기 영상 내에서 제1 시간량만큼 떨어져 있고,
   상기 동시에 재생되는 복수의 영상 서브스트림 중 하나가 사용자에 의하여 눌러지고 스와이프되지 않는 경우, 상기 타임라인 미리보기가 상기 스크린상에 디스플레이되는 동안 상기 타임라인 미리보기는 상기 제1 시간량이 상기 제1 시간량보다 작은 제2 시간량으로 축소되도록 제어하는, 사용자 인터페이스 제공 장치.
2. 사용자 인터페이스 제공 방법에 있어서, 상기 방법은:
   영상을 재생하는 단계;
   스크린을 누르는 사용자 입력을 수신하는 단계;
   사용자로 하여금 원하는 영상 서브스트림을 선택할 수 있도록 허용할 목적으로, 스크린 상에서 복수의 영상 서브스트림을 동시에 재생하는 단계;
   를 포함하고,
   동시에 재생되는 상기 복수의 영상 서브스트림은, 상기 동시에 재생되는 복수의 영상 서브스트림이 타임라인 미리보기를 포함하고 상기 영상은 상기 타임라인 미리보기의 배경에서 재생되도록, 상이한 시점들로부터 획득된 영상의 세그먼트들을 포함하고,
   상기 방법은 상기 동시에 재생되는 복수의 영상 서브스트림 중 하나 상의 사용자 터치 입력을 수신하는 단계를 더 포함하고, 상기 사용자 터치 입력은 제1 방향으로 스와이프되는 입력이며, 상기 영상을 터치된 영상 서브스트림의 시점부터 시작하여 상기 스크린상에서 재생하고 상기 타임라인 미리보기를 더 이상 디스플레이하지 않는 입력이고,
   상기 동시에 재생되는 상기 복수의 영상 서브스트림은 상기 영상 내의 상기 복수의 영상 서브스트림의 시점의 순서로 상기 타임라인 미리보기 내에서 배열되고, 상이한 시점들은 상기 영상 내에서 제1 시간량만큼 떨어져 있고,
   상기 동시에 재생되는 상기 복수의 영상 서브스트림 중 하나가 사용자에 의하여 눌러지고 스와이프되지 않는 경우, 상기 방법은 상기 타임라인 미리보기가 상기 스크린상에 디스플레이되는 동안 상기 타임라인 미리보기를 상기 제1 시간량이 상기 제1 시간량보다 작은 제2 시간량으로 축소되도록 줌하는 단계를 더 포함하는, 방법.
   
   
3. 삭제
4. 삭제
5. 삭제
6. 삭제
7. 삭제
8. 삭제
9. 삭제
10. 삭제
11. 삭제
12. 삭제
13. 삭제
14. 삭제
15. 삭제
16. 삭제

Images