KR101267872B1 - A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images - Google Patents
A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images Download PDFInfo
- Publication number
- KR101267872B1 KR101267872B1 KR1020130013178A KR20130013178A KR101267872B1 KR 101267872 B1 KR101267872 B1 KR 101267872B1 KR 1020130013178 A KR1020130013178 A KR 1020130013178A KR 20130013178 A KR20130013178 A KR 20130013178A KR 101267872 B1 KR101267872 B1 KR 101267872B1
- Authority
- KR
- South Korea
- Prior art keywords
- video
- thumbnail
- thumbnail images
- displayed
- combination
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000012545 processing Methods 0.000 claims description 10
- 230000009471 action Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 8
- 210000003811 finger Anatomy 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000007796 conventional method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/93—Regeneration of the television signal or of selected parts thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
본 발명은 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치에 관한 것으로, 더욱 상세하게는 방송 프로그램을 포함한 동영상 시청(혹은 재생) 시 화면의 일부분에 썸네일 이미지들을 연속하여 배치하고, 상기 배치된 썸네일의 시간 간격, 공간 간격 또는 이들의 조합을 사용자가 자유롭게 제스처, 마우스 또는 이들의 조합에 의한 동작을 통해서 조절할 수 있게 함으로써 동영상의 원하는 위치 또는 장면을 쉽게 찾을 수 있도록 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치에 관한 것이다.
The present invention relates to a method for providing a video search user interface using a thumbnail and a device thereof, and more particularly, to continuously arranged thumbnail images on a portion of a screen when watching (or playing) a video including a broadcast program. Video navigation users with thumbnails that make it easy to find the desired location or scene of a video by allowing the user to freely adjust the time interval, space interval, or a combination of the thumbnails through gestures, mouse or any combination of them. A method and apparatus for providing an interface are provided.
최근 방송 프로그램을 포함한 동영상은 전통적인 텔레비전뿐만 아니라, 컴퓨터(예: PC, 노트북, 넷북, 태블릿 PC 등)나 휴대 단말기(예: 스마트폰, 패드, 전용 단말기 등)를 통해서도 장소에 관계없이 재생이나 시청이 가능하다. 또한 인터넷과 IP 네트워크 인프라의 고도화 및 스트리밍 기술의 발달에 따라 온디맨드(On-Demand) 방식으로 동영상 서비스를 제공하기도 한다.Movies, including recent broadcast programs, can be played or watched not only on traditional television, but also on computers (e.g. PCs, laptops, netbooks, tablet PCs, etc.) or mobile terminals (e.g. smartphones, pads, dedicated terminals, etc.) This is possible. In addition, with the advancement of the Internet and IP network infrastructure and the development of streaming technology, the video service is provided on-demand.
종래에 동영상 탐색을 위하여 썸네일 이미지를 활용하는 것은 유튜브를 비롯한 동영상 스트리밍 서비스나 동영상 파일 플레이어에서 많이 사용되고 있다.Conventionally, the use of thumbnail images for video search is widely used in video streaming services or video file players including YouTube.
이러한 종래의 방법들은 썸네일 이미지들을 동영상에서의 시간 순서에 따라 고정된 시간 간격으로 화면에 배치하여, 썸네일 이미지들 중의 하나를 사용자가 선택하면 선택된 썸네일 이미지에 대응되는 위치로 동영상의 재생 위치를 이동하는 형태를 사용한다. 이러한 방법은 화면에 배치할 수 있는 썸네일 이미지들의 수에 제한이 있기 때문에 동영상의 전체 재생 시간을 한 화면에 배치할 썸네일 이미지 수로 나눈 값에 해당하는 시간 간격으로 썸네일 이미지들을 배치하거나, 또는 이보다 더 좁은 시간 간격으로 썸네일 이미지들을 화면에 배치하되 사용자로 하여금 화면을 스크롤하여 화면에 표시되지 못한 썸네일 이미지들을 화면 안으로 이동 배치할 수 있도록 하는 것이다.Such conventional methods arrange thumbnail images on the screen at fixed time intervals according to the time sequence in the video, and when the user selects one of the thumbnail images, the playback position of the video is moved to a position corresponding to the selected thumbnail image. Use the form. Because this method limits the number of thumbnail images that can be placed on the screen, place thumbnail images at a time interval that is equal to the total duration of the movie divided by the number of thumbnail images to place on one screen, or narrower than this. The thumbnail images are arranged on the screen at time intervals, but the user can scroll the screen to move and place thumbnail images that are not displayed on the screen.
그러나 이러한 종래의 방법들은 사용자가 자신의 의도에 맞게 편리하게 동영상의 위치를 탐색하는 데에는 한계가 있다. 동영상의 전체 재생 시간을 균등하게 나누어 썸네일 이미지들을 한 화면 내에 배치한 경우는 썸네일 이미지들 간의 시간 간격이 커서 사용자가 원하는 지점을 세부적으로 찾기는 어렵다. 반면, 썸네일 이미지들 간의 시간 간격을 좁게 하여 한 화면 내에 썸네일 이미지들을 모두 배치하지 않고 화면 스크롤을 통해 썸네일 이미지들을 탐색하도록 하는 경우는 사용자가 동영상 전체적인 장면 변화를 한눈에 파악하기 어려운 문제가 있다.However, these conventional methods have a limitation in that the user can conveniently search for the position of the video according to his intention. When the thumbnail images are evenly divided in the entire playback time of the video, the time interval between the thumbnail images is large, so that it is difficult to find the desired point in detail. On the other hand, when the time interval between the thumbnail images is narrowed so that the thumbnail images can be searched through the screen scroll without all the thumbnail images disposed on one screen, it is difficult for a user to grasp the overall scene change at a glance.
한편 종래 기술로서 한국공개특허 제2009-0086715호(2009.08.14.)는 썸네일 이미지 표시 장치 및 방법에 관한 것으로서, 메모리에 저장된 영상 데이터의 썸네일 이미지를 생성하되, 영상 데이터별로 미리 설정된 시간 간격에 따라 복수 개의 썸네일 이미지를 생성한 후, 생성된 썸네일 이미지를 영상 데이터별로 화면의 소정 영역에 표시하되, 각 영역에서 영상 데이터별 복수 개의 썸네일 이미지들이 미리 설정된 시간 간격에 따라 연속적으로 표시되도록 하는 것으로, 생성된 썸네일 이미지들을 소정의 시간 간격으로 표시하는데 그칠 뿐, 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하거나, 동영상 내의 원하는 지점을 세부적으로 찾을 수 있도록 하는 방법에 대해서는 아무런 시사가 없다.On the other hand, Korean Patent Laid-Open Publication No. 2009-0086715 (2009.08.14.) Relates to a thumbnail image display apparatus and method, which generates a thumbnail image of image data stored in a memory, at a predetermined time interval for each image data. After generating a plurality of thumbnail images, the generated thumbnail image is displayed on a predetermined area of the screen for each image data, and in each area, the plurality of thumbnail images for each image data are continuously displayed at predetermined time intervals. The displayed thumbnail images are displayed only at predetermined time intervals, and there is no suggestion on how to grasp the overall scene change of the video at a glance or to find the desired point in the video in detail.
또한, 최근에는 터치스크린(touch screen) 윈도우에 기반을 둔 다양한 단말이 활용되고 있는 실정에서, 상기 터치스크린 상에서 터치(혹은 멀티 터치) 기능을 활용하여 동영상 플레이를 편리하게 제어하거나 동영상에 포함된 특정 장면을 탐색하는 것이 필요한 실정이다. 그러나 종래 기술은 동영상에 포함된 특정 장면을 탐색하거나 플레이어를 제어하는 것에 썸네일을 활용하고 있지만, 상기 썸네일과 터치 기능을 통합적으로 활용하여 전체 동영상의 장면 변화를 한눈에 볼 수 있도록 하거나, 특정 해당 장면을 세밀하게 탐색하는 방법은 아직 제공되지 않아 사용자들이 많은 불편함을 느끼고 있는 실정이다.In addition, recently, various terminals based on a touch screen window have been utilized, and by using a touch (or multi-touch) function on the touch screen to conveniently control the video play or to include a specific part of the video. It is necessary to explore the scene. However, while the conventional technology utilizes thumbnails to search for a specific scene included in a video or to control a player, the thumbnail and touch functions are integrated to provide a view of a scene change of the entire video at a glance or a specific corresponding scene. There is not yet a method for searching in detail so that users feel a lot of inconvenience.
따라서 사용자가 동영상 플레이 중에 원하는 장면을 탐색하여 특정 시청 시점으로 동영상 플레이 시점을 변경하거나 전체적인 프로그램의 구성을 한눈에 파악하기 위해, 터치스크린 윈도우에서 썸네일의 디스플레이를 자유롭게 조작할 수 있도록 하여 사용자로 하여금 보다 효과적으로 동영상 시청이 가능하도록 하는 사용자 인터페이스 처리가 필요하다.
Therefore, the user can freely manipulate the display of the thumbnails in the touch screen window in order to search the desired scene during the video play to change the video play time to a specific viewing point or to understand the overall program configuration at a glance. There is a need for user interface processing that enables effective video viewing.
본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 사용자가 원하는 바에 따라 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하고, 또한 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있도록 하는 방법을 제공하는데 그 목적이 있다.The present invention was created to improve the above problems, and provides a method for allowing the user to grasp the overall scene change of the video at a glance and to find the desired point in the video in detail. The purpose is.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 특히 터치스크린 윈도우를 포함하는 단말에서 동영상 플레이를 수행할 때 썸네일을 자유자재로 조작할 수 있도록 하여 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하고, 또한 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있도록 하는 방법을 제공하는데 그 목적이 있다.In addition, the present invention was created to improve the above problems, in particular, when performing a video play in a terminal including a touch screen window to freely manipulate the thumbnail to grasp the overall scene changes of the video at a glance Its purpose is to provide a way to find the desired point in the video in detail.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 특정 동영상에 대한 썸네일의 리스트를 줌-인 혹은 줌-아웃하여 사용자가 원하는 장면을 탐색하는데 편리성을 제공하는데 그 목적이 있다.In addition, the present invention was created to solve the above problems, and has an object of providing a convenience for searching a scene desired by a user by zooming in or zooming out a list of thumbnails for a specific video.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해서, 복수의 동영상을 포함하는 연속되는 프로그램의 시청에 있어서 인접 프로그램 간의 해당 장면 탐색을 자유롭게 수행할 수 있는 수단을 제공하는데 그 목적이 있다.
Another object of the present invention is to provide a means for freely performing a corresponding scene search between adjacent programs in viewing a continuous program including a plurality of moving images in order to solve the above problems.
본 발명의 일 측면에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법은 동영상 디스플레이 화면상에 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 표시하는 제1 단계; 상기 표시된 복수의 썸네일 이미지 또는 재생 화면상의 특정 입력으로부터 탐색하고자 하는 사용자의 동작을 해석하는 제2 단계; 상기 해석된 동작에 따라 디스플레이할 복수의 썸네일 이미지의 공간 간격, 시간 간격 또는 이들의 조합을 계산하는 제3 단계; 및 상기 계산된 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 새롭게 디스플레이하는 제4 단계를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, a method for providing a video search user interface using a thumbnail may include: displaying a plurality of thumbnail images on a video display screen at predetermined space intervals, time intervals, or a combination thereof; A second step of analyzing a user's motion to search from the displayed plurality of thumbnail images or a specific input on a playback screen; Calculating a space interval, a time interval, or a combination of the plurality of thumbnail images to be displayed according to the interpreted operation; And a fourth step of newly displaying a plurality of thumbnail images at the calculated space interval, time interval, or a combination thereof.
여기서 제1 단계의 복수의 썸네일 이미지의 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합으로 표시하되 표시할 썸네일의 수가 많아짐에 따라 썸네일 이미지들을 스크롤할 수 있도록 하는 것이며, 제2 단계의 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함하는 입력이며, 상기 특정 입력은 미리 정해진 입력 패턴에 따라 동영상을 좁은 시간 간격 혹은 넓은 시간 간격으로 탐색하는 명령으로 해석되는 것이고, 상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 것이며, 사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 것을 특징으로 한다.
In this case, the display of the plurality of thumbnail images in the first stage may be performed at equal time intervals, spatial intervals, or a combination thereof, and the thumbnail images may be scrolled as the number of thumbnails to be displayed increases. Is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is interpreted as a command for searching a video at a narrow time interval or a wide time interval according to a predetermined input pattern. When the specific input is applied to a specific location on the displayed area, the still image of the video at the corresponding location is displayed as a thumbnail image, and when the user selects a specific thumbnail image, the display for loading the video at the corresponding location is the thumbnail. And is displayed on the image.
한편, 본 발명의 또 다른 일 측면에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치는 동영상 데이터를 로컬 저장소인 메모리, 하드디스크, 네트워크를 통한 저장 수단 또는 이들의 조합에 의한 저장수단으로부터 읽거나 수신하여 재생하는 동영상재생부; 복수의 썸네일 이미지를 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 디스플레이 화면에 상기 복수의 썸네일 이미지를 시간 순으로 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 표시하는 썸네일 이미지 처리부; 및 사용자로부터의 특정 입력에 따라 상기 복수의 썸네일 이미지를 특정 시간 간격, 공간 간격 또는 이들의 조합에 따라 복수의 썸네일 이미지의 간격을 제어하는 썸네일 간격 제어부;를 포함하는 것을 특징으로 한다.Meanwhile, the apparatus for providing a video search user interface using a thumbnail according to another aspect of the present invention reads or receives video data from a storage means by local memory, a hard disk, a storage means via a network, or a combination thereof. Video playback unit to play by; A thumbnail image processing unit generating a plurality of thumbnail images from video data or received from a network and displaying the plurality of thumbnail images on a display screen at a predetermined spatial interval, time interval or a combination thereof in chronological order; And a thumbnail interval controller configured to control the plurality of thumbnail images according to a specific input from a user according to a specific time interval, a space interval, or a combination thereof.
여기서 본 발명의 또 다른 일 측면에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치는 상기 동영상을 디스플레이하거나 사용자로부터 제스처, 마우스, 터치 혹은 이들의 조합을 포함하는 입력을 수신하는 동영상 디스플레이 및 터치 입력부;를 더 포함하는 것이며, 상기 복수의 썸네일 이미지 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하되 표시할 복수의 썸네일 이미지의 수가 많아짐에 따라 상기 복수의 썸네일 이미지를 스크롤할 수 있도록 하는 수단;을 더 포함하고, 상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함하는 입력이며, 상기 특정 입력은 미리 정해진 패턴에 따라 동영상을 좁거나 넓은 시간 간격 혹은 공간 간격으로 탐색하는 명령으로 해석되며, 상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 것이고, 사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 것을 특징으로 한다.
The apparatus for providing a video search user interface using a thumbnail according to another aspect of the present invention includes a video display and a touch input unit for displaying the video or receiving an input including a gesture, a mouse, a touch, or a combination thereof from a user; The plurality of thumbnail images may be displayed at equal time intervals, space intervals, or a combination thereof, and the plurality of thumbnail images may be scrolled as the number of thumbnail images to be displayed increases. The apparatus further comprises a means, wherein the specific input is an input including a gesture, a mouse, a touch, or a combination thereof, wherein the specific input is a command for searching a video at a narrow or wide time interval or a space interval according to a predetermined pattern. The plurality of thumbnail images are interpreted When the specific input is applied to a specific position on the area to be displayed, the still image of the video at the corresponding position is displayed as a thumbnail image, and when the user selects a specific thumbnail image, a display for loading the video at the corresponding position is the thumbnail image. It is characterized by being displayed on.
한편, 본 발명의 또 다른 일 측면에 따른 기록매체는, 상기 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체인 것을 특징으로 한다.
On the other hand, the recording medium according to another aspect of the present invention is characterized in that the computer-readable recording medium recording a program for executing the video search user interface providing method using the thumbnail.
본 발명은 사용자가 원하는 바에 따라 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하고, 또한 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있도록 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치에 관한 것으로, 특히 터치패널 윈도우를 포함하는 단말에서 동영상 플레이를 수행할 때, 특정 동영상에 대한 썸네일의 리스트를 손가락 터치를 통해서 줌-인 혹은 줌-아웃하여 사용자가 원하는 장면을 탐색하는데 편리성을 향상시키고, 또한 복수의 동영상을 포함하는 연속되는 프로그램의 시청에 있어서도 인접 프로그램 간의 해당 장면 탐색을 자유롭게 수행할 수 있도록 편리성을 향상시키는 효과가 있다.
The present invention relates to a method and apparatus for providing a video search user interface using thumbnails that enable a user to grasp the overall scene change of a video at a glance and to precisely find a desired point in the video. In particular, when performing a video play on a terminal including a touch panel window, a list of thumbnails for a specific video is zoomed in or zoomed out using a finger touch to improve convenience of searching for a scene desired by a user. In addition, even when viewing a continuous program including a plurality of moving pictures, there is an effect of improving convenience so that the scene can be freely searched between adjacent programs.
도 1은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상에서 원하는 장면을 탐색하는 장치의 블록도.
도 2는 본 발명의 일 실시예에 따른 썸네일을 디스플레이의 재생 화면상에 전개하여 동영상에서 원하는 장면을 탐색하는 방법을 설명하기 위한 예시도.
도 3은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상 탐색에 대한 처리 흐름도.
도 4는 본 발명의 일 실시예에 따른 디스플레이의 재생 화면상에서 표시될 수 있는 부가 기능에 대해 예시도.
도 5는 본 발명의 일 실시예에 따른 현재 재생되고 있는 지점을 포함하여 임의의 지점을 터치하였을 경우 해당 지점의 정지영상을 썸네일 이미지로 표시해 주는 예시도.
도 6은 본 발명의 일 실시예에 따라 사용자가 특정 썸네일 이미지를 선택할 경우 해당 위치의 동영상을 로딩하는 것을 설명하기 위한 예시도.1 is a block diagram of an apparatus for searching a desired scene in a video using a thumbnail according to an embodiment of the present invention.
FIG. 2 is an exemplary view for explaining a method of searching for a desired scene in a moving image by spreading a thumbnail on a playback screen of a display according to an embodiment of the present invention; FIG.
3 is a flowchart illustrating a video search using thumbnails according to an embodiment of the present invention.
4 illustrates an additional function that may be displayed on a playback screen of a display according to an embodiment of the present invention.
5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched, including a point currently being played according to an embodiment of the present invention.
6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치의 일 실시예를 설명한다.Hereinafter, a method and apparatus for providing a video search user interface using a thumbnail according to the present invention will be described with reference to the accompanying drawings.
먼저, 본 발명에서 ‘썸네일 이미지‘라고 함은 디스플레이 화면에 재생할 전체 사이즈의 이미지에 대해서 그 사이즈를 대략 엄지손가락 정도로 축소시킨 이미지를 일컫는 것으로, 상기 축소시킨 정도는 디스플레이 화면의 크기에 따라 변경될 수 있다.First, in the present invention, the "thumbnail image" refers to an image of which the size is reduced to about a thumb for an image of the full size to be played on the display screen, and the degree of reduction may be changed according to the size of the display screen. have.
또한, 본 발명에서 ‘동영상 탐색 사용자인터페이스’라고 함은 특정 동영상을 소정의 간격으로 샘플링하여 상기 샘플링된 시점의 이미지에 대하여 썸네일 이미지를 생성하고, 상기 썸네일 이미지를 통해서 동영상을 탐색하기 위한 사용자인터페이스를 의미한다.In addition, in the present invention, the "video search user interface" refers to a user interface for sampling a specific video at predetermined intervals, generating a thumbnail image with respect to the sampled time point, and searching for a video through the thumbnail image. it means.
본 발명에서는 디스플레이상의 재생화면과 썸네일 이미지의 사이즈에 따라 시간 간격, 공간 간격 또는 이들의 조합에 의해 썸네일 이미지 리스트에 표시될 썸네일 이미지의 수가 결정되므로, 상기 시간 간격과 공간 간격 또는 이들의 조합은 시간 간격, 공간 간격, 이들의 조합 혹은 단순히 간격이라는 용어만으로 기재하여도 시간 간격, 공간 간격 또는 이들의 조합을 모두 참조한 복수의 썸네일 이미지가 디스플레이 상에 표시되는 간격을 의미한다.In the present invention, the number of thumbnail images to be displayed in the thumbnail image list is determined by the time interval, the space interval, or a combination thereof according to the size of the playback screen and the thumbnail image on the display. The term “interval, space interval, a combination thereof, or simply the term“ interval ”refers to an interval in which a plurality of thumbnail images referring to the time interval, the space interval, or a combination thereof are displayed on the display.
아울러 본 발명에서 썸네일 이미지는 디스플레이 화면에서 일정시간 사용자의 입력 행위가 감지되지 않으면 자동적으로 화면에서 사라지게 할 수 있다. 또한 사용자가 일정 행위를 다시 수행하면 이를 감지하여 복수의 썸네일 이미지가 화면에 나타나도록 설정할 수 있다.In addition, in the present invention, the thumbnail image may be automatically disappeared from the screen if the user's input behavior is not detected for a certain time on the display screen. In addition, when the user performs a certain action again, the user may be configured to display a plurality of thumbnail images on the screen.
여기서 상기 사용자의 입력 행위는 제스처, 마우스, 터치 또는 이들의 조합에 의해서 수행될 수 있으며, 상기 제스처, 마우스, 터치 또는 이들의 조합은 특정 명령어로 해석된다. 예를 들어 제스처 중에서 손가락을 컵 모양(예: U자형)으로 움직이면 썸네일 이미지 리스트가 줌-아웃(축소)되어 더 넓은 영역(혹은 전체 영역)을 탐색할 수 있도록 해 주는 명령어로 인식하게 하고, 반대로 캡 모양(예: 역 U자형)으로 움직이면 썸네일 이미지 리스트가 줌-인(확대)되어 좁은 영역을 더 자세히 탐색할 수 있도록 하는 것이다. 또한, 마우스를 왼쪽에서 오른쪽으로 드래그하면 썸네일 이미지 리스트가 줌-인(확대)되고, 반대 방향으로 드래그하면 썸네일 이미지 리스트가 줌-아웃(축소)되도록 명령어 약속을 정의할 수 있다. 이는 터치에 있어서도 다양한 명령어 패턴을 만들어 사용할 수 있음을 시사한다. 또한 이러한 제스처, 마우스, 터치 또는 이들의 조합에 의한 동작을 특정 명령어로 메핑하는 것은 통상의 기술자라면 얼마든지 자유롭게 정의하여 사용할 수 있으므로, 상기 예시한 것에 제한되는 것이 아님이 분명하다.
Here, the user's input action may be performed by a gesture, a mouse, a touch, or a combination thereof, and the gesture, the mouse, the touch, or a combination thereof may be interpreted as a specific command. For example, if you move your finger in a cup (for example, U-shaped) during a gesture, the thumbnail image list is zoomed out (reduced) and recognized as a command that allows you to navigate a wider area (or entire area). When you move to a cap shape (such as an inverted U-shape), the thumbnail image list is zoomed in (zoom in) to allow you to explore more narrow areas. In addition, you can define a command appointment to drag the mouse from left to right to zoom in (zoom in) the thumbnail image list, and to drag in the opposite direction to zoom out (zoom out) of the thumbnail image list. This suggests that various command patterns can be created and used in touch. In addition, it is obvious that the mapping of the gesture, the mouse, the touch, or a combination thereof with a specific command may be freely defined and used by those skilled in the art.
도 1은 본 발명의 일 실시예에 따른 썸네일을 활용하여 동영상에서 원하는 장면을 탐색하는 사용자인터페이스 장치의 블록도로서, 동영상을 디스플레이하거나 사용자로부터 터치 입력을 수신하는 동영상 디스플레이 및 터치 입력부(1), 동영상 데이터를 로컬 저장소인 메모리 혹은 하드디스크(3)에서 읽거나 또는 네트워크로부터 수신하여 재생하는 동영상재생부(21)와, 썸네일 이미지들을 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 화면에 썸네일 이미지들을 시간 순으로 표시하는 썸네일 이미지 처리부(23)와, 사용자로부터 썸네일 이미지들의 시간 간격을 좁히거나 넓히도록 하는 제어 정보를 입력 받고 그에 따라 시간 간격, 공간 간격 또는 이들의 조합에 대한 제어를 수행하는 썸네일 간격 제어부(22)를 포함하는 것을 특징으로 한다. 또한 상기 동영상 재생부(21), 썸네일 이미지 처리부(23) 및 썸네일 간격 제어부(22)를 통틀어 동영상 제어부(2)라고 하며, 상기 동영상 제어부에서 수행하는 기능은 단말기 자체의 마이크로프로세서 혹은 중앙처리장치(CPU)에 의해서 수행되거나, 네트워크상의 클라우드 컴퓨팅 서버에서도 수행될 수 있도록 구성 가능하다.1 is a block diagram of a user interface device that searches for a desired scene in a video using thumbnails according to an embodiment of the present invention. The video display and
여기서 동영상 재생부(21)는 로컬 저장소(3)에 저장된 동영상을 재생할 수 있도록 하는 역할을 수행하는 것으로, 사용자로부터 동영상의 재생에 필요한 제어 명령을 입력받아 그에 따라 동영상을 재생하는 역할을 수행한다.In this case, the
또한 상기 썸네일 이미지 처리부(23)는 화면상에서 한 번에 보여주기에 적당한 썸네일 이미지들의 수를 계산한 후 해당 수만큼 동영상 전체를 구간별로 나누고 동영상으로부터 소정의 시간(예: 1초) 간격으로 추출하여 생성하여 둔 썸네일 이미지들 중에서 각 구간의 중간지점에 해당하는 썸네일 이미지들을 화면에 시간 순으로 표시하는 역할을 수행한다.In addition, the thumbnail
그리고 상기 썸네일 간격 제어부(22)는, 사용자가 손가락으로 멀티터치를 사용하여 터치스크린 디스플레이 화면상에 표시된 썸네일 이미지들의 공간 간격을 좁히거나 넓히는 동작을 입력함으로써 썸네일 이미지들의 시간 간격을 좁히거나 넓히는 제어를 수행한다.The
이상에서 설명한 동영상재생부(21), 썸네일 이미지 처리부(23) 및 썸네일 간격 제어부(22) 간의 상호 작용에 의해서, 사용자는 다음과 같은 시나리오를 통해 동영상에서 원하는 장면을 손쉽게 찾을 수 있다.By the interaction between the
또한 동영상 디스플레이 및 터치 입력부(1)는 동영상을 디스플레이하는 출력부와 터치 동작을 입력받는 입력부가 하나의 수단으로 통합되어 있는 경우를 나타내고 있으나, 이는 예시에 불과하므로 입력수단과 출력수단이 분리되어 구성되는 경우를 배제하는 것이 아니다.
In addition, the video display and the
도 2는 본 발명의 일 실시예에 따른 썸네일(11)을 디스플레이 재생 화면(10)에 전개하여 동영상에서 원하는 장면을 탐색하는 방법을 설명하기 위한 예시도이다. 설명을 단순화하기 위해서 예를 들어, 동영상의 전체 재생 시간이 1시간짜리이고, 화면에 표시하기 적당한 썸네일 이미지들의 개수가 6개일 경우, 10분의 시간 간격을 가진 6개의 썸네일 이미지들이 디스플레이 화면상에 균등한 공간간격을 두고 표시된다. 이 경우, 0초, 10분, 20분, 30분, 40분, 50분 시점의 썸네일 이미지들이 표시되도록 한다.FIG. 2 is an exemplary diagram for describing a method of searching for a desired scene in a video by deploying the
예를 들어, 사용자가 디스플레이 화면에 표시된 썸네일 이미지들 중에서 두 번째(예: 썸네일(2))와 세 번째 썸네일(예: 썸네일(3)) 이미지를 두 손가락으로 터치하여 벌리면(예: 줌-인 동작), 썸네일 간격 제어부는 사용자의 멀티터치 입력을 선택된 썸네일 이미지들 사이의 시간 영역을 더 자세히 탐색하고자 하는 동작으로 해석하고, 즉 썸네일 이미지들의 시간 간격을 줄이려는 의도로 해석하고, 썸네일 이미지들의 시간 간격을 10분에서 5분으로 줄여서 표시하도록 썸네일 이미지 처리부에 요청한다. 즉, 썸네일 이미지 처리부는 사용자가 선택한 썸네일 이미지들에 대응되는 시간 영역을 중심으로 5분 간격의 썸네일 이미지들을 선택하여 화면에 표시한다. 예를 들어, 5분, 10분, 15분, 20분, 25분, 30분 시점의 썸네일 이미지들을 순서대로 화면에 표시하도록 설정할 수 있다. 또한 사용자가 디스플레이 화면에 표시된 썸네일 이미지들 중에서 두 번째(예: 썸네일(2))와 세 번째 썸네일(예: 썸네일(3)) 이미지를 두 손가락으로 터치하여 좁히면(예: 줌-아웃 동작), 썸네일 간격 제어부는 사용자의 멀티터치 입력을 선택된 썸네일 이미지들 사이의 시간 영역을 더 넓게 탐색하고자 하는 동작으로 해석하고, 즉 썸네일 이미지들의 시간 간격을 넓히려는 의도로 해석하고, 예컨대 썸네일 이미지들의 시간 간격을 10분에서 20분으로 넓혀서 표시하도록 썸네일 이미지 처리부에 요청한다. 즉, 상기 시간 간격은 사용자가 터치하여 벌리거나 좁히는 동작에 의해서 점차 세밀하게 혹은 점차 넓은 시간 간격으로 조정 가능함이 당연하고 이로 인한 제약은 없다. 또한 상기 시간 간격, 공간 간격 또는 이들의 조합은 이전에 디스플레이되었던 시간 간격, 공간간격 또는 이들의 조합으로부터 새로이 계산되어 디스플레이 된다.For example, if a user touches two fingers apart to open the second (eg thumbnail (2)) and third thumbnail (eg thumbnail (3)) images displayed on the display screen (eg zoom-in) Operation), the thumbnail interval control unit interprets the user's multi-touch input as an operation for further exploring the time area between the selected thumbnail images, that is, the intention of reducing the time interval of the thumbnail images, and the time of the thumbnail images. Ask the thumbnail image processing unit to display the interval from 10 minutes to 5 minutes. That is, the thumbnail image processing unit selects and displays thumbnail images on the screen at intervals of five minutes with respect to the time area corresponding to the thumbnail images selected by the user. For example, thumbnail images of 5, 10, 15, 20, 25, and 30 minutes may be set to be displayed on the screen in order. Also, when the user touches two fingers to narrow the second image (e.g. thumbnail (2)) and the third thumbnail (e.g. thumbnail (3)) displayed on the display screen (e.g. zoom-out gesture) The thumbnail interval control unit interprets the user's multi-touch input as an operation for navigating the time domain between the selected thumbnail images more broadly, that is, to intentionally widen the time interval of the thumbnail images, for example, the time interval of the thumbnail images. Asks the thumbnail image processing unit to display a range of 10 to 20 minutes. In other words, the time interval can be adjusted in a fine or gradually wider time interval by the user to open or narrow the touch is not limited by this. In addition, the time interval, space interval, or a combination thereof is newly calculated and displayed from the previously displayed time interval, space interval, or a combination thereof.
도 2에서 썸네일 이미지(11)는 재생 화면(12)의 일부분에 디스플레이되면 족하고 그 위치에 대한 제약은 없다. 또한 한 번에 디스플레이 가능한 썸네일 이미지의 수는 전체 재생화면의 크기와 썸네일의 크기에 따라 달라질 수 있으며, 이는 사용자의 설정이나 미리 설정된 값에 따라 결정될 수 있다. 아울러 프로그래스-바(12)와 플레이/정지-바(13) 등의 표시는 항상 활성화되어 있도록 설정하거나, 해당 부분에 터치 입력이 감지되는 경우에 나타나도록 설정할 수 있다.In FIG. 2, the
또한 썸네일 이미지의 크기도 전체 재생화면의 크기와 표시할 썸네일 이미지의 수에 따라 가변적으로 설정할 수 있을 뿐만아니라, 사용자가 멀티터치 동작으로 썸네일 이미지의 크기를 크게 하였다가 줄였다가 조정할 수 있다. 즉, 손가락 터치를 활용하여 썸네일 이미지를 대각선 방향으로 벌려주면 썸네일 이미지가 더 크게 설정되고 이에 따라 전체 재생화면에 디스플레이되는 썸네일의 수는 줄어들게된다. 다만 이 경우에 좀 더 확대된 썸네일 이미지를 사용자에게 디스플레이하므로 사용자가 썸네일을 통해서 동영상을 탐색하기에 편리할 수 있다. 반대로 손가락 터치를 활용하여 썸네일 이미지를 대각선 방향으로 좁혀주면(세로 혹은 가로 방향으로만 좁혀 주어도 됨) 썸네일 이미지가 더 작게 설정되고 이에 따라 전체 재생화면에 디스플레이되는 썸네일의 수는 늘어나게 된다. 다만, 이 경우에 사용자가 동영상의 전체적인 화면 변화를 좀 더 용이하게 파악할 수 있고, 썸네일 이미지 각각의 크기는 줄어들게 되므로 그 크기가 지나치게 줄어들면 사용자가 썸네일 이미지를 보고 동영상의 특정 장면을 탐색하기 곤란할 지경에 이를 수도 있다.
In addition, the size of the thumbnail image can be set variable according to the size of the entire playback screen and the number of thumbnail images to be displayed, and the user can increase and decrease the size of the thumbnail image by using a multi-touch operation. In other words, when the thumbnail image is opened in a diagonal direction by using a finger touch, the thumbnail image is set larger, and accordingly, the number of thumbnails displayed on the entire playback screen is reduced. However, in this case, the thumbnail image is displayed to the user so that it may be convenient for the user to browse the video through the thumbnail. On the contrary, if the thumbnail image is narrowed diagonally using a finger touch (it may be narrowed vertically or horizontally), the thumbnail image is set smaller and accordingly, the number of thumbnails displayed on the entire playback screen increases. However, in this case, the user can more easily grasp the overall screen change of the video, and the size of each thumbnail image is reduced, so if the size is excessively reduced, it may be difficult for the user to see the thumbnail image and navigate to a specific scene of the video. You can also reach
도 3은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상 탐색에 대한 처리 흐름도이다. 먼저 동영상 플레이가 진행되고 있거나 플레이를 준비하고 있는 상황에서, 썸네일 이미지들을 표시하는 명령이 입력되면, 디스플레이의 재생 화면상에 균등한 공간 간격, 시간 간격 또는 이들의 조합에 따라 복수의 썸네일 이미지를 표시(S10)한다. 다음으로 사용자가 복수의 썸네일 이미지를 통해서 좀 더 세밀하거나 혹은 좀 더 넓은 범위의 동영상 탐색을 원하는 경우, 썸네일 이미지 리스트 혹은 재생 화면상의 터치를 감지하여 탐색하고자 하는 동작을 해석(S20)한다. 이어서 상기 해석된 동작에 따라 디스플레이할 복수의 썸네일 이미지의 시간 간격, 공간 간격 또는 이들의 조합을 계산(S30)하며, 계산된 시간 간격, 공간 간격 또는 이들의 조합으로 복수의 썸네일 이미지들을 다시 디스플레이(S40)한다.3 is a flowchart illustrating a video search using a thumbnail according to an embodiment of the present invention. First, when a video play is in progress or ready to play, when a command for displaying thumbnail images is input, a plurality of thumbnail images are displayed on the display screen at equal space intervals, time intervals, or a combination thereof. (S10). Next, when the user wants to search a video in a more detailed or wider range through a plurality of thumbnail images, an operation for detecting and searching for a thumbnail image list or a touch on the playback screen is interpreted (S20). Subsequently, a time interval, a space interval, or a combination of the plurality of thumbnail images to be displayed is calculated according to the interpreted operation (S30), and the plurality of thumbnail images are displayed again at the calculated time interval, the space interval, or a combination thereof. S40).
상기와 같은 본 발명에서 제시한 상기와 같은 일실시예를 통하여, 사용자는 처음에는 동영상의 전체적인 장면 변화를 파악하고, 좀 더 자세히 탐색하기 원하는 동영상의 구간이 있을 경우, 사용자가 직접 원하는 구간에 대한 썸네일 이미지들의 시간 간격, 공간 간격 또는 이들의 조합을 제어하여 동영상에서 원하는 지점을 편리하게 찾을 수 있다.
Through one embodiment as described above in the present invention as described above, the user first grasps the overall scene change of the video, and if there is a section of the video that you want to explore in more detail, By controlling the time interval, space interval, or a combination of the thumbnail images, it is convenient to find a desired point in the video.
도 4는 본 발명의 일 실시예에 따른 디스플레이의 재생 화면상에서 표시될 수 있는 부가 기능에 대해 예시도이다. 먼저 인포메이션 아이콘(100)은 시청하거나 재생하고 있는 동영상과 관련한 채널번호/프로그램 제목(101)이나 텍스트/TV 정보(102)에 대해서 사용자에게 표시해 주는 기능이며, 버턴/터치 잠금(lock) 아이콘(103)은 터치로 동작하는 디스플레이 화면에서 버턴이나 터치 입력을 인식하지 못하도록 잠그는(locking) 기능을 수행하며, 이는 동영상 재생 중에 사용자의 부주의로 인한 원하지 않는 오동작을 방지하기 위함이다. 메뉴 아이콘(104)는 사용자에게 동영상 플레이와 관련한 부가적인 동작에 대한 명령을 입력받기 위한 메뉴를 표시해 주는 기능을 수행한다.4 is an exemplary diagram of additional functions that may be displayed on a playback screen of a display according to an embodiment of the present invention. First, the
상기 부가 기능은 사용자로부터 일정시간 아무런 동작이 없을 경우 화면에서 사라졌다가, 사용자가 특정 명령(예: 제스처, 마우스, 터치 또는 이들의 조합)을 입력하면 화면에 나타나도록 설정할 수 있으며, 상기 화면에 나타나는 위치에 대해서는 아무런 제한이 없다.
The additional function may disappear from the screen when there is no action from the user for a predetermined time, and may be set to appear on the screen when the user inputs a specific command (for example, a gesture, a mouse, a touch, or a combination thereof). There is no limit as to where it appears.
도 5는 본 발명의 일 실시예에 따른 현재 재생되고 있는 지점을 포함하여 임의의 지점을 터치하였을 경우 해당 지점의 정지영상(still image)을 썸네일 이미지로 표시해 주는 예시도이다. 즉, 특정 동영상의 재생 시점과 관계없이 임의의 위치에 특정 입력(예: 터치, 마우스, 제스처 또는 이들의 조합)을 가하면, 이를 인식하여 해당 지점의 정지영상을 썸네일 이미지로 표시해 주는 것이 가능하다. 이러한 기능은 디스플레이 화면상에서 썸네일 이미지가 표시되다가 일정시간 아무런 입력이 감지되지 않으면 상기 썸네일 이미지는 화면에서 사라지게 되고, 다시 사용자가 특정 입력을 가하면 그 위치에 다시 썸네일 이미지가 나타나게 된다.FIG. 5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched including a point currently being reproduced according to an exemplary embodiment of the present invention. That is, when a specific input (for example, a touch, a mouse, a gesture, or a combination thereof) is applied to an arbitrary position irrespective of the playback time of the specific video, it may be recognized and displayed as a thumbnail image of the still image at the corresponding point. In such a function, when a thumbnail image is displayed on a display screen and no input is detected for a predetermined time, the thumbnail image disappears from the screen, and when the user applies a specific input, the thumbnail image is displayed again at that position.
사용자로부터 특정 입력을 감지할 경우, 썸네일 이미지 리스트를 디스플레이의 재생 화면상에 표시할 수 있으나, 또한 단일의 썸네일 이미지만 해당 입력이 감지된 위치에 표시하도록 설정할 수 있다.
When detecting a specific input from the user, the thumbnail image list can be displayed on the playback screen of the display, but only a single thumbnail image can be set to be displayed at the detected position.
도 6은 본 발명의 일 실시예에 따라 사용자가 특정 썸네일 이미지를 선택할 경우 해당 위치의 동영상을 로딩하는 것을 설명하기 위한 예시도이다. 사용자가 특정 썸네일 이미지를 선택하면 해당 썸네일이 지정하는 위치의 동영상을 로딩하고, 로딩된 동영상의 위치로부터 새로이 플레이를 시작한다. 이때 사용자의 선택으로부터 실제 해당 위치의 동영상이 로딩되어 플레이되기 까지 시간이 필요하므로, 이에 대한 시각적인 효과를 표시해주는 것이다.6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention. When the user selects a specific thumbnail image, the video is loaded at the location designated by the thumbnail, and play starts from the location of the loaded video. In this case, since a time is required from the user's selection until the video of the actual position is loaded and played, the visual effect is displayed.
상기 시각적인 효과는 다양하게 묘사할 수 있는 것이고, 통상의 기술자라면 상기 묘사하는 방법에 제약을 받지 않고 자유롭게 변형하여 사용할 수 있음이 당연하다.
The visual effects can be described in various ways, and a person of ordinary skill in the art can be freely modified and used without being restricted by the method described above.
한편, 본 발명의 일실시예에 따른 썸네일을 활용한 동영상 탐색 화면의 제공은 상기 썸네일 이미지를 다양하게 변형하여 표시할 수 있는바, 예를 들어 썸네일 이미지의 처음(썸네일 (1))과 끝(썸네일 (7)), 그리고 중간(썸네일 (4))만 썸네일 이미지를 표시하고, 상기 썸네일 (1), 썸네일 (4) 및 썸네일 (7) 사이에 존재하는 썸네일 이미지는 그 수가 너무 많아 표시하기 곤란한 경우, 겹치게 표시할 수 있다. 다만, 사용자가 특정 겹쳐진 썸네일 이미지의 특정 부분을 터치할 경우 터치된 부분의 해당 썸네일 이미지가 팝업되어 겹쳐서 표시되지 않았던 부분이 나타나도록 표시할 수 있다.On the other hand, the provision of a video search screen using a thumbnail according to an embodiment of the present invention can be variously modified to display the thumbnail image, for example, the beginning (thumbnail (1)) and the end ( Thumbnails (7), and only the middle (thumbnail (4)) display thumbnail images, and the thumbnail images existing between the thumbnails (1), thumbnails (4) and thumbnails (7) are too many to display In this case, it may display overlappingly. However, when a user touches a specific part of a specific overlapped thumbnail image, the corresponding thumbnail image of the touched part may pop up to display a part which is not overlapped.
또한 모든 썸네일 이미지를 재생 화면에 상호 겹치도록 리스팅하고, 사용자가 손가락 터치, 마우스 선택, 제스처 또는 이들의 조합을 통하여 특정 썸네일 이미지를 선택하면 해당 썸네일 이미지가 겹쳐진 썸네일 이미지 리스트 상에서 전면으로 팝업되어 표시되도록 설정할 수 있다.
It also lists all thumbnail images on the playback screen so that they overlap, and when a user selects a particular thumbnail image through finger touch, mouse selection, gestures, or a combination thereof, the thumbnail image pops up in front of the list of overlapping thumbnail images. Can be set.
이상으로 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, I will understand the point. Accordingly, the technical scope of the present invention should be defined by the following claims.
1: 동영상 디스플레이 및 터치 입력부
2: 제어부 3: 메모리
10: 재생(플레이) 화면 11: 썸네일 이미지
12: 프로그레스-바 13: 플레이/정지-바
21: 동영상 재생부 22: 썸네일 간격 제어부
23: 썸네일 이미지 처리부
100: 인포메이션 아이콘
101: 채널 및 프로그램 정보 디스플레이 영역
102: 해당 프로그램의 유익한 정보 디스플레이 영역
103: 버튼 잠금 아이콘 104: 메뉴 아이콘
105: 동영상 로딩 진행 표시1: video display and touch input
2: control section 3: memory
10: Playback (Play) Screen 11: Thumbnail Image
12: Progress-Bar 13: Play / Stop-Bar
21: video playback unit 22: thumbnail interval control unit
23: thumbnail image processing unit
100: Information icon
101: Channel and program information display area
102: informative display area of the program
103: Button Lock Icon 104: Menu Icon
105: Display video loading progress
Claims (12)
동영상 디스플레이 화면상의 일정부분에 시간순으로 미리 설정된 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 표시하는 제1 단계;
상기 표시된 복수의 썸네일 이미지 또는 동영상 재생 화면상의 특정 입력으로부터 동영상을 탐색하고자 하는 사용자의 동작을 해석하는 제2 단계;
상기 해석된 동작에 따라 새롭게 표시할 복수의 썸네일 이미지의 공간 간격, 시간 간격 또는 이들의 조합을 계산하는 제3 단계; 및
상기 계산된 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 새롭게 표시하는 제4 단계를 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.
In the method of providing a video navigation user interface using thumbnails to easily find the desired location or scene in the video,
Displaying a plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof pre-set in a chronological order on a portion of a moving image display screen;
A second step of analyzing a motion of a user who wants to search for a video from a specific input on the displayed plurality of thumbnail images or video playback screens;
Calculating a space interval, a time interval, or a combination of the plurality of thumbnail images to be newly displayed according to the interpreted operation; And
And a fourth step of newly displaying a plurality of thumbnail images at the calculated spatial intervals, time intervals, or a combination thereof.
제1 단계의 복수의 썸네일 이미지의 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합으로 표시하되 표시할 썸네일의 수가 많아짐에 따라 썸네일 이미지들을 스크롤할 수 있도록 하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.
The method according to claim 1,
The display of the plurality of thumbnail images in the first step may be performed at equal time intervals, space intervals, or a combination thereof, and the thumbnail images may be scrolled as the number of thumbnails to be displayed increases. How to provide navigational user interface.
제2 단계의 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함하는 입력이며, 상기 특정 입력은 미리 정해진 입력 패턴에 따라 동영상을 좁은 시간 간격 혹은 넓은 시간 간격으로 탐색하는 명령으로 해석되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.
The method according to claim 1,
The specific input of the second step is an input including a gesture, a mouse, a touch, or a combination thereof, wherein the specific input is interpreted as a command for searching a video at a narrow time interval or a wide time interval according to a predetermined input pattern. How to provide a video navigation user interface using thumbnails.
상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.
The method according to claim 1,
When the particular input is applied to a specific position on the region where the plurality of thumbnail images are displayed, a still image for the video of the position is displayed as a thumbnail image, the video search user interface providing method using a thumbnail.
사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.
The method according to claim 1,
When a user selects a specific thumbnail image, a display for loading a video of a corresponding position is displayed on the thumbnail image.
동영상 데이터를 로컬 저장소인 메모리 혹은 하드디스크, 네트워크를 통한 저장 수단 또는 이들의 조합에 의한 저장수단으로부터 읽거나 수신하여 재생하는 동영상재생부;
복수의 썸네일 이미지를 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 동영상 디스플레이 화면상의 일정부분에 시간순으로 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 상기 복수의 썸네일 이미지를 표시하는 썸네일 이미지 처리부; 및
사용자로부터의 특정 입력에 따라 상기 복수의 썸네일 이미지를 특정 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하는 간격을 제어하는 썸네일 간격 제어부;를 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
In the device for providing a video user interface using thumbnails to easily find the desired location or scene in the video,
A moving picture reproducing unit which reads or receives and reproduces moving picture data from a memory or hard disk which is a local storage, a storage means by a storage means via a network, or a combination thereof;
A thumbnail image processing unit which generates a plurality of thumbnail images from video data or receives from a network and displays the plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof in a chronological order on a portion of the video display screen; And
Thumbnail interval control unit for controlling the interval for displaying the plurality of thumbnail images in accordance with a specific input from a user at a specific time interval, space interval or a combination thereof; video navigation user interface using a thumbnail Provision device.
상기 동영상을 디스플레이하거나 사용자로부터 제스처, 마우스, 터치 혹은 이들의 조합을 포함하는 입력을 수신하는 동영상 디스플레이 및 터치 입력부;를 더 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
The method of claim 6,
And a video display and a touch input unit configured to display the video or to receive an input including a gesture, a mouse, a touch, or a combination thereof from a user.
상기 복수의 썸네일 이미지 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하되 표시할 복수의 썸네일 이미지의 수가 많아짐에 따라 상기 복수의 썸네일 이미지를 스크롤할 수 있도록 하는 수단;을 더 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
The method of claim 6,
The plurality of thumbnail images display may be displayed at equal time intervals, space intervals, or a combination thereof, and means for scrolling the plurality of thumbnail images as the number of thumbnail images to be displayed increases. Apparatus for providing a user interface for video searching using thumbnails, characterized in that.
상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함한 입력이며, 상기 특정 입력은 미리 정해진 패턴에 따라 동영상을 좁거나 넓은 시간 간격 혹은 공간 간격으로 탐색하는 명령으로 해석되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
The method of claim 6,
The specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is interpreted as a command for searching a video at a narrow or wide time interval or a space interval according to a predetermined pattern. Device that provides user interface for video search.
상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
The method of claim 6,
When the particular input is applied to a specific position on an area where the plurality of thumbnail images are displayed, the apparatus for providing a video searching user interface using a thumbnail, wherein the still image of the video at the corresponding position is displayed as a thumbnail image.
사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.
The method of claim 6,
When a user selects a specific thumbnail image, a display for loading a video of a corresponding position is displayed on the thumbnail image.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130013178A KR101267872B1 (en) | 2013-02-06 | 2013-02-06 | A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images |
| PCT/KR2013/011984 WO2014123303A1 (en) | 2013-02-06 | 2013-12-20 | Method for providing video search user interface utilizing thumbnails and device therefor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020130013178A KR101267872B1 (en) | 2013-02-06 | 2013-02-06 | A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101267872B1 true KR101267872B1 (en) | 2013-05-27 |
Family
ID=48666925
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020130013178A KR101267872B1 (en) | 2013-02-06 | 2013-02-06 | A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR101267872B1 (en) |
| WO (1) | WO2014123303A1 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180027851A (en) * | 2016-09-07 | 2018-03-15 | (주)잼투고 | Computer Implemented Method and User Device for Searching Video Section Using Touch Sensitive User Interface |
| KR20210130687A (en) * | 2014-12-15 | 2021-11-01 | 조은형 | Method for reproduing contents and electronic device performing the same |
| KR20220035695A (en) * | 2020-09-14 | 2022-03-22 | 네이버 주식회사 | Method and system for requesting thumbnail for seeking of live video being played |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102373460B1 (en) | 2014-09-15 | 2022-03-11 | 삼성전자주식회사 | Method and apparatus for displaying object |
| CN107211181B (en) * | 2015-02-06 | 2020-08-11 | Lg电子株式会社 | Display device |
| US10820034B2 (en) | 2017-05-26 | 2020-10-27 | At&T Intellectual Property I, L.P. | Providing streaming video from mobile computing nodes |
| CN112199552B (en) * | 2020-10-12 | 2024-03-19 | 北京达佳互联信息技术有限公司 | Video image display method and device, electronic equipment and storage medium |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101352230B1 (en) * | 2007-08-27 | 2014-01-15 | 삼성전자주식회사 | Apparatus and method for displaying thumbnail |
| KR20100113922A (en) * | 2009-04-14 | 2010-10-22 | 에스케이 텔레콤주식회사 | Method for displaying multimedia contents, touch screen terminal and computer-readable recording medium with program therefor |
| KR20100115547A (en) * | 2009-04-20 | 2010-10-28 | 에스케이 텔레콤주식회사 | Method for zooming contents, touch screen terminal and computer-readable recording medium with program therefor |
-
2013
- 2013-02-06 KR KR1020130013178A patent/KR101267872B1/en active IP Right Grant
- 2013-12-20 WO PCT/KR2013/011984 patent/WO2014123303A1/en active Application Filing
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210130687A (en) * | 2014-12-15 | 2021-11-01 | 조은형 | Method for reproduing contents and electronic device performing the same |
| US11507265B2 (en) | 2014-12-15 | 2022-11-22 | Eunhyung Cho | Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded |
| KR102486401B1 (en) | 2014-12-15 | 2023-01-06 | 조은형 | Method for reproduing contents and electronic device performing the same |
| KR20230008904A (en) * | 2014-12-15 | 2023-01-16 | 조은형 | Method for reproduing contents and electronic device performing the same |
| US11720243B2 (en) | 2014-12-15 | 2023-08-08 | Eunhyung Cho | Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded |
| US11733854B2 (en) | 2014-12-15 | 2023-08-22 | Eunhyung Cho | Method for generating and reproducing multimedia content, electronic device for performing same, and recording medium in which program for executing same is recorded |
| KR102654959B1 (en) * | 2014-12-15 | 2024-04-04 | 조은형 | Method for reproduing contents and electronic device performing the same |
| KR20180027851A (en) * | 2016-09-07 | 2018-03-15 | (주)잼투고 | Computer Implemented Method and User Device for Searching Video Section Using Touch Sensitive User Interface |
| KR101939806B1 (en) | 2016-09-07 | 2019-01-17 | (주)잼투고 | Computer Implemented Method and User Device for Searching Video Section Using Touch Sensitive User Interface |
| KR20220035695A (en) * | 2020-09-14 | 2022-03-22 | 네이버 주식회사 | Method and system for requesting thumbnail for seeking of live video being played |
| KR102487558B1 (en) * | 2020-09-14 | 2023-01-11 | 네이버 주식회사 | Method and system for requesting thumbnail for seeking of live video being played |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2014123303A1 (en) | 2014-08-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101267872B1 (en) | A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images | |
| US11042260B2 (en) | Method for providing graphical user interface (GUI), and multimedia apparatus applying the same | |
| US10353577B2 (en) | Method and system for implementing content navigation or selection using touch-based input | |
| US10324612B2 (en) | Scroll bar with video region in a media system | |
| US8881049B2 (en) | Scrolling displayed objects using a 3D remote controller in a media system | |
| US9009594B2 (en) | Content gestures | |
| KR101307716B1 (en) | Methods and systems for scrolling and pointing in user interfaces | |
| CA2821418C (en) | Method and apparatus for controlling touch screen using timeline bar, recording medium with program for the same recorded therein, and user terminal having the same | |
| US8194037B2 (en) | Centering a 3D remote controller in a media system | |
| EP2417517B1 (en) | Directional touch remote | |
| US20130067332A1 (en) | Media seek bar | |
| US20090158222A1 (en) | Interactive and dynamic screen saver for use in a media system | |
| US20080165141A1 (en) | Gestures for controlling, manipulating, and editing of media files using touch sensitive devices | |
| US20090153475A1 (en) | Use of a remote controller Z-direction input mechanism in a media system | |
| TW201239742A (en) | Method and apparatus for navigating a hierarchical menu based user interface | |
| JP2008536196A (en) | Method and system for enhancing television applications using 3D pointing | |
| US20120327121A1 (en) | Methods for touch screen control of paperless recorders | |
| EP3059973A1 (en) | System and method for multi-track playback of media content | |
| KR20130040609A (en) | User terminal device and method for controlling a renderer thereof | |
| Hürst et al. | Interactive video browsing on mobile devices | |
| KR101371417B1 (en) | Method for providing contents list by touch on touch screen and multimedia device thereof | |
| KR101399234B1 (en) | Enhanced user interface based on gesture input for motion picture authoring tool on a mobile device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| A302 | Request for accelerated examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20160425 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20190507 Year of fee payment: 7 |