WO2014123303A1 - Method for providing video search user interface utilizing thumbnails and device therefor - Google Patents

Method for providing video search user interface utilizing thumbnails and device therefor Download PDF

Info

Publication number
WO2014123303A1
WO2014123303A1 PCT/KR2013/011984 KR2013011984W WO2014123303A1 WO 2014123303 A1 WO2014123303 A1 WO 2014123303A1 KR 2013011984 W KR2013011984 W KR 2013011984W WO 2014123303 A1 WO2014123303 A1 WO 2014123303A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
thumbnail
thumbnail images
user interface
time interval
Prior art date
Application number
PCT/KR2013/011984
Other languages
French (fr)
Korean (ko)
Inventor
정운교
Original Assignee
(주)티비스톰
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)티비스톰 filed Critical (주)티비스톰
Publication of WO2014123303A1 publication Critical patent/WO2014123303A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Definitions

  • the present invention relates to a method for providing a video search user interface using a thumbnail and a device thereof, and more particularly, to continuously arranged thumbnail images on a portion of a screen when watching (or playing) a video including a broadcast program.
  • Video navigation users with thumbnails that make it easy to find the desired location or scene of a video by allowing the user to freely adjust the time interval, space interval, or a combination of the thumbnails through gestures, mouse or any combination of them.
  • a method and apparatus for providing an interface are provided.
  • Movies including recent broadcast programs, can be played or watched not only on traditional television, but also on computers (e.g. PCs, laptops, netbooks, tablet PCs, etc.) or mobile terminals (e.g. smartphones, pads, dedicated terminals, etc.) This is possible.
  • computers e.g. PCs, laptops, netbooks, tablet PCs, etc.
  • mobile terminals e.g. smartphones, pads, dedicated terminals, etc.
  • the video service is provided on-demand.
  • thumbnail images for video search is widely used in video streaming services or video file players including YouTube.
  • Such conventional methods arrange thumbnail images on the screen at fixed time intervals according to the time sequence in the video, and when the user selects one of the thumbnail images, the playback position of the video is moved to a position corresponding to the selected thumbnail image. Use the form. Because this method limits the number of thumbnail images that can be placed on the screen, place thumbnail images at a time interval that is equal to the total duration of the movie divided by the number of thumbnail images to place on one screen, or narrower than this.
  • the thumbnail images are arranged on the screen at time intervals, but the user can scroll the screen to move and place thumbnail images that are not displayed on the screen.
  • Korean Patent Laid-Open Publication No. 2009-0086715 (2009.08.14.) Relates to a thumbnail image display apparatus and method, which generates a thumbnail image of image data stored in a memory, at a predetermined time interval for each image data. After generating a plurality of thumbnail images, the generated thumbnail image is displayed on a predetermined area of the screen for each image data, and in each area, the plurality of thumbnail images for each image data are continuously displayed at predetermined time intervals. The displayed thumbnail images are displayed only at predetermined time intervals, and there is no suggestion on how to grasp the overall scene change of the video at a glance or to find the desired point in the video in detail.
  • the user can freely manipulate the display of the thumbnails in the touch screen window in order to search the desired scene during the video play to change the video play time to a specific viewing point or to understand the overall program configuration at a glance.
  • the present invention was created to improve the above problems, and provides a method for allowing the user to grasp the overall scene change of the video at a glance and to find the desired point in the video in detail.
  • the purpose is.
  • the present invention was created to improve the above problems, in particular, when performing a video play in a terminal including a touch screen window to freely manipulate the thumbnail to grasp the overall scene changes of the video at a glance Its purpose is to provide a way to find the desired point in the video in detail.
  • the present invention was created to solve the above problems, and has an object of providing a convenience for searching a scene desired by a user by zooming in or zooming out a list of thumbnails for a specific video.
  • Another object of the present invention is to provide a means for freely performing a corresponding scene search between adjacent programs in viewing a continuous program including a plurality of moving images in order to solve the above problems.
  • the display of the plurality of thumbnail images may be displayed at equal time intervals, space intervals, or a combination thereof. As the number of thumbnails increases, thumbnail images can be scrolled.
  • the specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is previously input.
  • the video may be interpreted as a command for searching at a narrow time interval or a wide time interval.
  • the method of providing a video search user interface using a thumbnail when the specific input is applied to a specific position on an area where the plurality of thumbnail images is displayed, the still image of the video at the corresponding position is displayed as a thumbnail image. It may further comprise the step.
  • the method of providing a video search user interface using a thumbnail when the user selects a specific thumbnail image, the method of loading a video of a corresponding position may be further displayed on the thumbnail image.
  • the plurality of thumbnail images are displayed on the video display screen at once, and on the display screen.
  • the number of thumbnail images that can be displayed at one time may vary depending on the size of the entire playback screen and the size of the thumbnails.
  • the step of newly displaying the plurality of thumbnail images may include displaying the plurality of thumbnail images.
  • the plurality of thumbnail images may be displayed by narrowing the time interval of the images.
  • the step of newly displaying the plurality of thumbnail images may include displaying the plurality of thumbnail images.
  • the plurality of thumbnail images may be displayed by widening the time interval of the images.
  • an input pattern of a command for searching the video at a narrow time interval may be a zoom-out operation.
  • an input pattern of a command for searching the video at a wide time interval may be a zoom-in operation.
  • a video playback unit for reading or receiving the video data from the storage means by the local storage of memory, hard disk, storage means via a network or a combination thereof;
  • a thumbnail image processing unit which generates a plurality of thumbnail images from video data or receives from a network and displays the plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof in chronological order on a portion of the video display screen;
  • a thumbnail interval control unit configured to control an interval for displaying the plurality of thumbnail images according to a specific input from a user at a specific time interval, a space interval, or a combination thereof.
  • An apparatus for providing a video search user interface using a thumbnail comprising: a video display and a touch input unit for displaying the video or receiving an input including a gesture, a mouse, a touch, or a combination thereof from a user; Can be.
  • the plurality of thumbnail images are displayed at equal time intervals, space intervals, or a combination thereof, and as the number of thumbnail images to be displayed increases. And means for scrolling through the plurality of thumbnail images.
  • the specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is a narrow or wide time for a video according to a predetermined pattern. It can be interpreted as a command to search by interval or space interval.
  • the apparatus for providing a video search user interface using a thumbnail when the specific input is applied to a specific position on an area where the plurality of thumbnail images is displayed, the still image of the video at the corresponding position is displayed as a thumbnail image. can do.
  • a display for loading a video at a corresponding position may be displayed on the thumbnail image.
  • the thumbnail interval controller narrows the time interval of the plurality of thumbnail images
  • the thumbnail image processor may display the plurality of thumbnail images of which the time interval is narrowed.
  • the thumbnail interval controller extends the time interval of the plurality of thumbnail images
  • the thumbnail image processor may display the plurality of thumbnail images of which the time interval is extended.
  • an input pattern of a command for searching the video at a narrow time interval is a zoom-out operation
  • an input pattern of a command for searching the video at a wide time interval May be a zoom-in operation
  • a computer-readable recording medium having recorded thereon a program for executing the method for providing a video search user interface using the thumbnail can be provided.
  • FIG. 1 is a block diagram of an apparatus for searching a desired scene in a video using a thumbnail according to an embodiment of the present invention.
  • FIG. 2 is an exemplary diagram for describing a method of searching for a desired scene in a moving image by developing a thumbnail on a playback screen of a display according to an exemplary embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating a video search using a thumbnail according to an embodiment of the present invention.
  • FIG. 4 is an exemplary diagram of additional functions that may be displayed on a playback screen of a display according to an embodiment of the present invention.
  • FIG. 5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched, including a point currently being played, according to an exemplary embodiment of the present invention.
  • FIG. 6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention.
  • the "thumbnail image” refers to an image of which the size is reduced to about a thumb for an image of the full size to be played on the display screen, and the degree of reduction may be changed according to the size of the display screen.
  • the "video search user interface” refers to a user interface for sampling a specific video at predetermined intervals, generating a thumbnail image with respect to the sampled time point, and searching for a video through the thumbnail image. it means.
  • the number of thumbnail images to be displayed in the thumbnail image list is determined by the time interval, the space interval, or a combination thereof according to the size of the playback screen and the thumbnail image on the display.
  • the term “interval, space interval, a combination thereof, or simply the term“ interval ” refers to an interval in which a plurality of thumbnail images referring to the time interval, the space interval, or a combination thereof are displayed on the display.
  • the thumbnail image may be automatically disappeared from the screen if the user's input behavior is not detected for a certain time on the display screen.
  • the user may be configured to display a plurality of thumbnail images on the screen.
  • the user's input action may be performed by a gesture, a mouse, a touch, or a combination thereof, and the gesture, the mouse, the touch, or a combination thereof may be interpreted as a specific command.
  • a gesture for example, U-shaped
  • the thumbnail image list is zoomed out (reduced) and recognized as a command that allows you to navigate a wider area (or entire area).
  • a cap shape such as an inverted U-shape
  • the thumbnail image list is zoomed in (zoom in) to allow you to explore more narrow areas.
  • the video display and touch input unit 1 displays a video or receives a touch input from a user.
  • a video player 21 for reading video data from a memory or hard disk 3 which is local storage or receiving and playing back from a network, and generating thumbnail images from the video data or receiving them from a network to display thumbnail images on a screen.
  • Thumbnail interval control unit 23 to display the thumbnail image processing unit 23 to display in order, and control information to narrow or widen the time interval of the thumbnail images from the user and to control the time interval, space interval, or a combination thereof accordingly. Characterized in that it comprises 22 do.
  • the video player 21, the thumbnail image processor 23, and the thumbnail interval controller 22 are collectively called a video controller 2, and the function performed by the video controller is a microprocessor or a central processing unit of the terminal itself ( Or a cloud computing server on a network.
  • the video player 21 plays a role of playing a video stored in the local storage 3, and receives a control command for playing a video from a user and plays the video accordingly.
  • the thumbnail image processing unit 23 calculates the number of thumbnail images suitable to be displayed at a time on the screen, divides the entire video by the corresponding number of sections and extracts the video at intervals of a predetermined time (for example, 1 second) from the video. It plays a role of displaying thumbnail images corresponding to the midpoint of each section among the created thumbnail images in chronological order.
  • the thumbnail interval controller 22 controls a user to narrow or widen the time interval of the thumbnail images by inputting an operation of narrowing or widening the spatial interval of the thumbnail images displayed on the touch screen display using a multi-touch with a finger. Perform.
  • the user can easily find a desired scene in the video through the following scenario.
  • the video display and the touch input unit 1 show a case in which an output unit for displaying a video and an input unit for receiving a touch action are integrated as one means, but this is only an example, and thus the input unit and the output unit are separated. It does not exclude the case.
  • FIG. 2 is an exemplary diagram for describing a method of searching for a desired scene in a video by deploying the thumbnail 11 to the display playback screen 10 according to an embodiment of the present invention.
  • the total duration of a movie is 1 hour and the number of thumbnail images suitable for display on the screen is six
  • six thumbnail images with a time interval of 10 minutes are displayed on the display screen. Displayed evenly spaced. In this case, thumbnail images at the time points of 0 second, 10 minutes, 20 minutes, 30 minutes, 40 minutes, and 50 minutes are displayed.
  • the thumbnail interval control unit interprets the user's multi-touch input as an operation for further exploring the time area between the selected thumbnail images, that is, the intention of reducing the time interval of the thumbnail images, and the time of the thumbnail images.
  • Ask the thumbnail image processing unit to display the interval from 10 minutes to 5 minutes. That is, the thumbnail image processing unit selects and displays thumbnail images on the screen at intervals of five minutes with respect to the time area corresponding to the thumbnail images selected by the user. For example, thumbnail images of 5, 10, 15, 20, 25, and 30 minutes may be set to be displayed on the screen in order.
  • the thumbnail interval control unit interprets the user's multi-touch input as an operation for navigating the time domain between the selected thumbnail images more broadly, that is, to intentionally widen the time interval of the thumbnail images, for example, the time interval of the thumbnail images. Asks the thumbnail image processing unit to display a range of 10 to 20 minutes. In other words, the time interval can be adjusted in a fine or gradually wider time interval by the user to open or narrow the touch is not limited by this. In addition, the time interval, space interval, or a combination thereof is newly calculated and displayed from the previously displayed time interval, space interval, or a combination thereof.
  • the thumbnail image 11 is satisfied if it is displayed on a part of the reproduction screen 12, and there is no restriction on its position.
  • the number of thumbnail images that can be displayed at one time may vary depending on the size of the entire playback screen and the size of the thumbnail, which may be determined by a user's setting or a preset value.
  • the display of the progress bar 12 and the play / stop bar 13 may be set to always be activated, or may be set to appear when a touch input is detected in the corresponding part.
  • the size of the thumbnail image can be set variable according to the size of the entire playback screen and the number of thumbnail images to be displayed, and the user can increase and decrease the size of the thumbnail image by using a multi-touch operation.
  • the thumbnail image is set larger, and accordingly, the number of thumbnails displayed on the entire playback screen is reduced.
  • the thumbnail image is displayed to the user so that it may be convenient for the user to browse the video through the thumbnail.
  • the thumbnail image is narrowed diagonally using a finger touch (it may be narrowed vertically or horizontally), the thumbnail image is set smaller and accordingly, the number of thumbnails displayed on the entire playback screen increases.
  • the user can more easily grasp the overall screen change of the video, and the size of each thumbnail image is reduced, so if the size is excessively reduced, it may be difficult for the user to see the thumbnail image and navigate to a specific scene of the video. You can also reach
  • FIG. 3 is a flowchart illustrating a video search using a thumbnail according to an embodiment of the present invention.
  • a video play is in progress or ready to play
  • a command for displaying thumbnail images is input
  • a plurality of thumbnail images are displayed on the display screen at equal space intervals, time intervals, or a combination thereof.
  • S10 space intervals, time intervals, or a combination thereof.
  • S20 an operation for detecting and searching for a thumbnail image list or a touch on the playback screen is interpreted.
  • a time interval, a space interval, or a combination of the plurality of thumbnail images to be displayed is calculated according to the interpreted operation (S30), and the plurality of thumbnail images are displayed again at the calculated time interval, the space interval, or a combination thereof. S40).
  • the user first grasps the overall scene change of the video, and if there is a section of the video that you want to explore in more detail, By controlling the time interval, space interval, or a combination of the thumbnail images, it is convenient to find a desired point in the video.
  • the information icon 100 is a function for displaying a channel number / program title 101 or text / TV information 102 related to a video being watched or played to the user, and the button / touch lock icon 103 ) Performs a function of locking a button or a touch input not to recognize a touch screen on a touch screen, in order to prevent an unwanted malfunction due to user's carelessness during video playback.
  • the menu icon 104 performs a function of displaying a menu for receiving a command for an additional operation related to video play.
  • the additional function may disappear from the screen when there is no action from the user for a predetermined time, and may be set to appear on the screen when the user inputs a specific command (for example, a gesture, a mouse, a touch, or a combination thereof). There is no limit as to where it appears.
  • FIG. 5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched including a point currently being reproduced according to an exemplary embodiment of the present invention. That is, when a specific input (for example, a touch, a mouse, a gesture, or a combination thereof) is applied to an arbitrary position irrespective of the playback time of the specific video, it may be recognized and displayed as a thumbnail image of the still image at the corresponding point. In such a function, when a thumbnail image is displayed on a display screen and no input is detected for a predetermined time, the thumbnail image disappears from the screen, and when the user applies a specific input, the thumbnail image is displayed again at that position.
  • a specific input for example, a touch, a mouse, a gesture, or a combination thereof
  • the thumbnail image list can be displayed on the playback screen of the display, but only a single thumbnail image can be set to be displayed at the detected position.
  • FIG. 6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention.
  • the video is loaded at the location designated by the thumbnail, and play starts from the location of the loaded video.
  • the visual effect is displayed.
  • the provision of a video search screen using a thumbnail can be variously modified to display the thumbnail image, for example, the beginning (thumbnail (1)) and the end ( Thumbnails (7), and only the middle (thumbnail (4)) display thumbnail images, and the thumbnail images existing between the thumbnails (1), thumbnails (4) and thumbnails (7) are too many to display In this case, it may display overlappingly. However, when a user touches a specific part of a specific overlapped thumbnail image, the corresponding thumbnail image of the touched part may pop up to display a part which is not overlapped.
  • thumbnail images on the playback screen so that they overlap, and when a user selects a particular thumbnail image through finger touch, mouse selection, gestures, or a combination thereof, the thumbnail image pops up in front of the list of overlapping thumbnail images. Can be set.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

The present invention relates to a method for providing a video search user interface utilizing thumbnails and a device therefor. The method comprises the steps of: sequentially displaying a plurality of thumbnail images at a preset spatial interval, time interval or the combination thereof on a certain portion of a video display screen; analyzing a motion of a user for searching for videos from a specific input applied to the plurality of displayed thumbnail images or a playback image; calculating a spatial interval, time interval or the combination thereof of a plurality of thumbnail images to be newly displayed according to the analyzed motion; and newly displaying the plurality of thumbnail images by using the calculated spatial interval, time interval, or the combination thereof.

Description

썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치Method of providing video user interface using thumbnail and its device
본 발명은 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치에 관한 것으로, 더욱 상세하게는 방송 프로그램을 포함한 동영상 시청(혹은 재생) 시 화면의 일부분에 썸네일 이미지들을 연속하여 배치하고, 상기 배치된 썸네일의 시간 간격, 공간 간격 또는 이들의 조합을 사용자가 자유롭게 제스처, 마우스 또는 이들의 조합에 의한 동작을 통해서 조절할 수 있게 함으로써 동영상의 원하는 위치 또는 장면을 쉽게 찾을 수 있도록 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치에 관한 것이다.The present invention relates to a method for providing a video search user interface using a thumbnail and a device thereof, and more particularly, to continuously arranged thumbnail images on a portion of a screen when watching (or playing) a video including a broadcast program. Video navigation users with thumbnails that make it easy to find the desired location or scene of a video by allowing the user to freely adjust the time interval, space interval, or a combination of the thumbnails through gestures, mouse or any combination of them. A method and apparatus for providing an interface are provided.
최근 방송 프로그램을 포함한 동영상은 전통적인 텔레비전뿐만 아니라, 컴퓨터(예: PC, 노트북, 넷북, 태블릿 PC 등)나 휴대 단말기(예: 스마트폰, 패드, 전용 단말기 등)를 통해서도 장소에 관계없이 재생이나 시청이 가능하다. 또한 인터넷과 IP 네트워크 인프라의 고도화 및 스트리밍 기술의 발달에 따라 온디맨드(On-Demand) 방식으로 동영상 서비스를 제공하기도 한다.Movies, including recent broadcast programs, can be played or watched not only on traditional television, but also on computers (e.g. PCs, laptops, netbooks, tablet PCs, etc.) or mobile terminals (e.g. smartphones, pads, dedicated terminals, etc.) This is possible. In addition, with the advancement of the Internet and IP network infrastructure and the development of streaming technology, the video service is provided on-demand.
종래에 동영상 탐색을 위하여 썸네일 이미지를 활용하는 것은 유튜브를 비롯한 동영상 스트리밍 서비스나 동영상 파일 플레이어에서 많이 사용되고 있다.Conventionally, the use of thumbnail images for video search is widely used in video streaming services or video file players including YouTube.
이러한 종래의 방법들은 썸네일 이미지들을 동영상에서의 시간 순서에 따라 고정된 시간 간격으로 화면에 배치하여, 썸네일 이미지들 중의 하나를 사용자가 선택하면 선택된 썸네일 이미지에 대응되는 위치로 동영상의 재생 위치를 이동하는 형태를 사용한다. 이러한 방법은 화면에 배치할 수 있는 썸네일 이미지들의 수에 제한이 있기 때문에 동영상의 전체 재생 시간을 한 화면에 배치할 썸네일 이미지 수로 나눈 값에 해당하는 시간 간격으로 썸네일 이미지들을 배치하거나, 또는 이보다 더 좁은 시간 간격으로 썸네일 이미지들을 화면에 배치하되 사용자로 하여금 화면을 스크롤하여 화면에 표시되지 못한 썸네일 이미지들을 화면 안으로 이동 배치할 수 있도록 하는 것이다.Such conventional methods arrange thumbnail images on the screen at fixed time intervals according to the time sequence in the video, and when the user selects one of the thumbnail images, the playback position of the video is moved to a position corresponding to the selected thumbnail image. Use the form. Because this method limits the number of thumbnail images that can be placed on the screen, place thumbnail images at a time interval that is equal to the total duration of the movie divided by the number of thumbnail images to place on one screen, or narrower than this. The thumbnail images are arranged on the screen at time intervals, but the user can scroll the screen to move and place thumbnail images that are not displayed on the screen.
그러나 이러한 종래의 방법들은 사용자가 자신의 의도에 맞게 편리하게 동영상의 위치를 탐색하는 데에는 한계가 있다. 동영상의 전체 재생 시간을 균등하게 나누어 썸네일 이미지들을 한 화면 내에 배치한 경우는 썸네일 이미지들 간의 시간 간격이 커서 사용자가 원하는 지점을 세부적으로 찾기는 어렵다. 반면, 썸네일 이미지들 간의 시간 간격을 좁게 하여 한 화면 내에 썸네일 이미지들을 모두 배치하지 않고 화면 스크롤을 통해 썸네일 이미지들을 탐색하도록 하는 경우는 사용자가 동영상 전체적인 장면 변화를 한눈에 파악하기 어려운 문제가 있다.However, these conventional methods have a limitation in that the user can conveniently search for the position of the video according to his intention. When the thumbnail images are evenly divided in the entire playback time of the video, the time interval between the thumbnail images is large, so that it is difficult to find the desired point in detail. On the other hand, when the time interval between the thumbnail images is narrowed so that the thumbnail images can be searched through the screen scroll without all the thumbnail images disposed on one screen, it is difficult for a user to grasp the overall scene change at a glance.
한편 종래 기술로서 한국공개특허 제2009-0086715호(2009.08.14.)는 썸네일 이미지 표시 장치 및 방법에 관한 것으로서, 메모리에 저장된 영상 데이터의 썸네일 이미지를 생성하되, 영상 데이터별로 미리 설정된 시간 간격에 따라 복수 개의 썸네일 이미지를 생성한 후, 생성된 썸네일 이미지를 영상 데이터별로 화면의 소정 영역에 표시하되, 각 영역에서 영상 데이터별 복수 개의 썸네일 이미지들이 미리 설정된 시간 간격에 따라 연속적으로 표시되도록 하는 것으로, 생성된 썸네일 이미지들을 소정의 시간 간격으로 표시하는데 그칠 뿐, 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하거나, 동영상 내의 원하는 지점을 세부적으로 찾을 수 있도록 하는 방법에 대해서는 아무런 시사가 없다.On the other hand, Korean Patent Laid-Open Publication No. 2009-0086715 (2009.08.14.) Relates to a thumbnail image display apparatus and method, which generates a thumbnail image of image data stored in a memory, at a predetermined time interval for each image data. After generating a plurality of thumbnail images, the generated thumbnail image is displayed on a predetermined area of the screen for each image data, and in each area, the plurality of thumbnail images for each image data are continuously displayed at predetermined time intervals. The displayed thumbnail images are displayed only at predetermined time intervals, and there is no suggestion on how to grasp the overall scene change of the video at a glance or to find the desired point in the video in detail.
또한, 최근에는 터치스크린(touch screen) 윈도우에 기반을 둔 다양한 단말이 활용되고 있는 실정에서, 상기 터치스크린 상에서 터치(혹은 멀티 터치) 기능을 활용하여 동영상 플레이를 편리하게 제어하거나 동영상에 포함된 특정 장면을 탐색하는 것이 필요한 실정이다. 그러나 종래 기술은 동영상에 포함된 특정 장면을 탐색하거나 플레이어를 제어하는 것에 썸네일을 활용하고 있지만, 상기 썸네일과 터치 기능을 통합적으로 활용하여 전체 동영상의 장면 변화를 한눈에 볼 수 있도록 하거나, 특정 해당 장면을 세밀하게 탐색하는 방법은 아직 제공되지 않아 사용자들이 많은 불편함을 느끼고 있는 실정이다.In addition, recently, various terminals based on a touch screen window have been utilized, and by using a touch (or multi-touch) function on the touch screen to conveniently control the video play or to include a specific part of the video. It is necessary to explore the scene. However, while the conventional technology utilizes thumbnails to search for a specific scene included in a video or to control a player, the thumbnail and touch functions are integrated to provide a view of a scene change of the entire video at a glance or a specific corresponding scene. There is not yet a method for searching in detail so that users feel a lot of inconvenience.
따라서 사용자가 동영상 플레이 중에 원하는 장면을 탐색하여 특정 시청 시점으로 동영상 플레이 시점을 변경하거나 전체적인 프로그램의 구성을 한눈에 파악하기 위해, 터치스크린 윈도우에서 썸네일의 디스플레이를 자유롭게 조작할 수 있도록 하여 사용자로 하여금 보다 효과적으로 동영상 시청이 가능하도록 하는 사용자 인터페이스 처리가 필요하다.Therefore, the user can freely manipulate the display of the thumbnails in the touch screen window in order to search the desired scene during the video play to change the video play time to a specific viewing point or to understand the overall program configuration at a glance. There is a need for user interface processing that enables effective video viewing.
본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 사용자가 원하는 바에 따라 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하고, 또한 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있도록 하는 방법을 제공하는데 그 목적이 있다.The present invention was created to improve the above problems, and provides a method for allowing the user to grasp the overall scene change of the video at a glance and to find the desired point in the video in detail. The purpose is.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 특히 터치스크린 윈도우를 포함하는 단말에서 동영상 플레이를 수행할 때 썸네일을 자유자재로 조작할 수 있도록 하여 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있도록 하고, 또한 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있도록 하는 방법을 제공하는데 그 목적이 있다.In addition, the present invention was created to improve the above problems, in particular, when performing a video play in a terminal including a touch screen window to freely manipulate the thumbnail to grasp the overall scene changes of the video at a glance Its purpose is to provide a way to find the desired point in the video in detail.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해 창작된 것으로서, 특정 동영상에 대한 썸네일의 리스트를 줌-인 혹은 줌-아웃하여 사용자가 원하는 장면을 탐색하는데 편리성을 제공하는데 그 목적이 있다.In addition, the present invention was created to solve the above problems, and has an object of providing a convenience for searching a scene desired by a user by zooming in or zooming out a list of thumbnails for a specific video.
또한 본 발명은 상기와 같은 문제점을 개선하기 위해서, 복수의 동영상을 포함하는 연속되는 프로그램의 시청에 있어서 인접 프로그램 간의 해당 장면 탐색을 자유롭게 수행할 수 있는 수단을 제공하는데 그 목적이 있다.Another object of the present invention is to provide a means for freely performing a corresponding scene search between adjacent programs in viewing a continuous program including a plurality of moving images in order to solve the above problems.
본 발명의 일실시예에 따르면, 동영상 디스플레이 화면상에 일정부분에 시간순으로 미리 설정된 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 표시하는 단계; 상기 표시된 복수의 썸네일 이미지 또는 재생 화면상의 특정 입력으로부터 동영상을 탐색하고자 하는 사용자의 동작을 해석하는 단계; 상기 해석된 동작에 따라 새롭게 표시할 복수의 썸네일 이미지의 공간 간격, 시간 간격 또는 이들의 조합을 계산하는 단계; 및 상기 계산된 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 새롭게 표시하는 단계를 포함하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법을 제공할 수 있다. According to an embodiment of the present invention, displaying a plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof pre-set in chronological order on a moving portion of the video display screen; Interpreting a user's motion to search for a video from the plurality of displayed thumbnail images or a specific input on a playback screen; Calculating a space interval, a time interval, or a combination of the plurality of thumbnail images to be newly displayed according to the interpreted operation; And a new display of a plurality of thumbnail images at the calculated space interval, time interval, or a combination thereof to provide a method for providing a video search user interface using a thumbnail.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 복수의 썸네일 이미지를 표시하는 단계에서 복수의 썸네일 이미지의 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합으로 표시하되 표시할 썸네일의 수가 많아짐에 따라 썸네일 이미지들을 스크롤할 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, in the displaying of the plurality of thumbnail images, the display of the plurality of thumbnail images may be displayed at equal time intervals, space intervals, or a combination thereof. As the number of thumbnails increases, thumbnail images can be scrolled.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 사용자의 동작을 해석하는 단계에서 상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함하는 입력이며, 상기 특정 입력은 미리 정해진 입력 패턴에 따라 동영상을 좁은 시간 간격 혹은 넓은 시간 간격으로 탐색하는 명령으로 해석될 수 있다. In the method for providing a video search user interface using a thumbnail according to the present invention, in the step of interpreting the user's motion, the specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is previously input. According to a predetermined input pattern, the video may be interpreted as a command for searching at a narrow time interval or a wide time interval.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 단계를 더 포함할 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, when the specific input is applied to a specific position on an area where the plurality of thumbnail images is displayed, the still image of the video at the corresponding position is displayed as a thumbnail image. It may further comprise the step.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 단계를 더 포함할 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, when the user selects a specific thumbnail image, the method of loading a video of a corresponding position may be further displayed on the thumbnail image.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 복수의 썸네일 이미지를 표시하는 단계에서, 상기 복수의 썸네일 이미지는 상기 동영상 디스플레이 화면상에 한 번에 표시되며, 상기 디스플레이 화면상에 한 번에 표시가능한 썸네일 이미지의 수는 전체 재생화면의 크기와 썸네일의 크기에 따라 달라질 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, in the displaying of the plurality of thumbnail images, the plurality of thumbnail images are displayed on the video display screen at once, and on the display screen. The number of thumbnail images that can be displayed at one time may vary depending on the size of the entire playback screen and the size of the thumbnails.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 특정 입력이 동영상을 좁은 시간 간격으로 탐색하는 명령으로 해석되면, 상기 복수의 썸네일 이미지를 새롭게 표시하는 단계는 상기 복수의 썸네일 이미지들의 시간 간격을 좁혀서 상기 복수의 썸네일 이미지들을 표시할 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, if the specific input is interpreted as a command for searching a video at a narrow time interval, the step of newly displaying the plurality of thumbnail images may include displaying the plurality of thumbnail images. The plurality of thumbnail images may be displayed by narrowing the time interval of the images.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 특정 입력이 동영상을 넓은 시간 간격으로 탐색하는 명령으로 해석되면, 상기 복수의 썸네일 이미지를 새롭게 표시하는 단계는 상기 복수의 썸네일 이미지들의 시간 간격을 넓혀서 상기 복수의 썸네일 이미지들을 표시할 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, if the specific input is interpreted as a command for searching a video at a wide time interval, the step of newly displaying the plurality of thumbnail images may include displaying the plurality of thumbnail images. The plurality of thumbnail images may be displayed by widening the time interval of the images.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 동영상을 좁은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-아웃 동작일 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, an input pattern of a command for searching the video at a narrow time interval may be a zoom-out operation.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법에 있어서, 상기 동영상을 넓은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-인 동작일 수 있다. In the method of providing a video search user interface using a thumbnail according to the present invention, an input pattern of a command for searching the video at a wide time interval may be a zoom-in operation.
본 발명의 다른 실시예에 따르면, 동영상 데이터를 로컬 저장소인 메모리, 하드디스크, 네트워크를 통한 저장 수단 또는 이들의 조합에 의한 저장수단으로부터 읽거나 수신하여 재생하는 동영상재생부; 복수의 썸네일 이미지를 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 동영상 디스플레이 화면상의 일정부분에 시간 순으로 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 상기 복수의 썸네일 이미지를 표시하는 썸네일 이미지 처리부; 및 사용자로부터의 특정 입력에 따라 상기 복수의 썸네일 이미지를 특정 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하는 간격을 제어하는 썸네일 간격 제어부를 포함하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치를 제공할 수 있다. According to another embodiment of the present invention, a video playback unit for reading or receiving the video data from the storage means by the local storage of memory, hard disk, storage means via a network or a combination thereof; A thumbnail image processing unit which generates a plurality of thumbnail images from video data or receives from a network and displays the plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof in chronological order on a portion of the video display screen; And a thumbnail interval control unit configured to control an interval for displaying the plurality of thumbnail images according to a specific input from a user at a specific time interval, a space interval, or a combination thereof. can do.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 동영상을 디스플레이하거나 사용자로부터 제스처, 마우스, 터치 혹은 이들의 조합을 포함하는 입력을 수신하는 동영상 디스플레이 및 터치 입력부;를 더 포함할 수 있다. An apparatus for providing a video search user interface using a thumbnail according to the present invention, the apparatus comprising: a video display and a touch input unit for displaying the video or receiving an input including a gesture, a mouse, a touch, or a combination thereof from a user; Can be.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 복수의 썸네일 이미지 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하되 표시할 복수의 썸네일 이미지의 수가 많아짐에 따라 상기 복수의 썸네일 이미지를 스크롤할 수 있도록 하는 수단;을 더 포함할 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, the plurality of thumbnail images are displayed at equal time intervals, space intervals, or a combination thereof, and as the number of thumbnail images to be displayed increases. And means for scrolling through the plurality of thumbnail images.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함한 입력이며, 상기 특정 입력은 미리 정해진 패턴에 따라 동영상을 좁거나 넓은 시간 간격 혹은 공간 간격으로 탐색하는 명령으로 해석될 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, the specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is a narrow or wide time for a video according to a predetermined pattern. It can be interpreted as a command to search by interval or space interval.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시할 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, when the specific input is applied to a specific position on an area where the plurality of thumbnail images is displayed, the still image of the video at the corresponding position is displayed as a thumbnail image. can do.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시될 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, when a user selects a specific thumbnail image, a display for loading a video at a corresponding position may be displayed on the thumbnail image.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 특정 입력이 동영상을 좁은 시간 간격으로 탐색하는 명령으로 해석되면, 상기 썸네일 간격 제어부는 상기 복수의 썸네일 이미지들의 시간 간격을 좁히고, 상기 썸네일 이미지 처리부는 상기 시간 간격이 좁혀진 상기 복수의 썸네일 이미지들을 표시할 수 있다. In the apparatus for providing a video searching user interface using a thumbnail according to the present invention, when the specific input is interpreted as a command for searching a video at a narrow time interval, the thumbnail interval controller narrows the time interval of the plurality of thumbnail images, The thumbnail image processor may display the plurality of thumbnail images of which the time interval is narrowed.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 특정 입력이 동영상을 넓은 시간 간격으로 탐색하는 명령으로 해석되면, 상기 썸네일 간격 제어부는 상기 복수의 썸네일 이미지들의 시간 간격을 넓히고, 상기 썸네일 이미지 처리부는 상기 시간 간격이 넓혀진 상기 복수의 썸네일 이미지들을 표시할 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, if the specific input is interpreted as a command for searching for a video at a wide time interval, the thumbnail interval controller extends the time interval of the plurality of thumbnail images, The thumbnail image processor may display the plurality of thumbnail images of which the time interval is extended.
본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치에 있어서, 상기 동영상을 좁은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-아웃 동작이고, 상기 동영상을 넓은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-인 동작일 수 있다. In the apparatus for providing a video search user interface using a thumbnail according to the present invention, an input pattern of a command for searching the video at a narrow time interval is a zoom-out operation, and an input pattern of a command for searching the video at a wide time interval May be a zoom-in operation.
본 발명의 또 다른 실시예에 따르면, 상기 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공할 수 있다. According to another embodiment of the present invention, a computer-readable recording medium having recorded thereon a program for executing the method for providing a video search user interface using the thumbnail can be provided.
본 발명에 의하면, 사용자가 원하는 바에 따라 동영상의 전체적인 장면 변화를 한눈에 파악할 수 있다. According to the present invention, it is possible to grasp the overall scene change of the video at a glance as desired by the user.
본 발명에 의하면, 동영상 내에서 원하는 지점을 세밀하게 찾을 수 있다. According to the present invention, it is possible to find the desired point in the video in detail.
본 발명에 의하면, 사용자가 원하는 장면을 탐색하는데 편리성을 향상시킬 수 있다. According to the present invention, convenience for searching for a scene desired by a user can be improved.
본 발명에 의하면, 복수의 동영상을 포함하는 연속되는 프로그램의 시청에 있어서도 인접 프로그램 간의 해당 장면 탐색을 자유롭게 수행할 수 있도록 편리성을 향상시킬 수 있다. According to the present invention, it is possible to improve convenience for freely performing the scene search between adjacent programs even when viewing a continuous program including a plurality of moving images.
도 1은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상에서 원하는 장면을 탐색하는 장치의 블록도이다. 1 is a block diagram of an apparatus for searching a desired scene in a video using a thumbnail according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 따른 썸네일을 디스플레이의 재생 화면상에 전개하여 동영상에서 원하는 장면을 탐색하는 방법을 설명하기 위한 예시도이다. FIG. 2 is an exemplary diagram for describing a method of searching for a desired scene in a moving image by developing a thumbnail on a playback screen of a display according to an exemplary embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상 탐색에 대한 처리 흐름도이다. 3 is a flowchart illustrating a video search using a thumbnail according to an embodiment of the present invention.
도 4는 본 발명의 일 실시예에 따른 디스플레이의 재생 화면상에서 표시될 수 있는 부가 기능에 대해 예시도이다4 is an exemplary diagram of additional functions that may be displayed on a playback screen of a display according to an embodiment of the present invention.
도 5는 본 발명의 일 실시예에 따른 현재 재생되고 있는 지점을 포함하여 임의의 지점을 터치하였을 경우 해당 지점의 정지영상을 썸네일 이미지로 표시해 주는 예시도이다. 5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched, including a point currently being played, according to an exemplary embodiment of the present invention.
도 6은 본 발명의 일 실시예에 따라 사용자가 특정 썸네일 이미지를 선택할 경우 해당 위치의 동영상을 로딩하는 것을 설명하기 위한 예시도이다. 6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 따른 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법 및 그 장치의 일 실시예를 설명한다.Hereinafter, a method and apparatus for providing a video search user interface using a thumbnail according to the present invention will be described with reference to the accompanying drawings.
먼저, 본 발명에서 ‘썸네일 이미지‘라고 함은 디스플레이 화면에 재생할 전체 사이즈의 이미지에 대해서 그 사이즈를 대략 엄지손가락 정도로 축소시킨 이미지를 일컫는 것으로, 상기 축소시킨 정도는 디스플레이 화면의 크기에 따라 변경될 수 있다.First, in the present invention, the "thumbnail image" refers to an image of which the size is reduced to about a thumb for an image of the full size to be played on the display screen, and the degree of reduction may be changed according to the size of the display screen. have.
또한, 본 발명에서 ‘동영상 탐색 사용자인터페이스’라고 함은 특정 동영상을 소정의 간격으로 샘플링하여 상기 샘플링된 시점의 이미지에 대하여 썸네일 이미지를 생성하고, 상기 썸네일 이미지를 통해서 동영상을 탐색하기 위한 사용자인터페이스를 의미한다.In addition, in the present invention, the "video search user interface" refers to a user interface for sampling a specific video at predetermined intervals, generating a thumbnail image with respect to the sampled time point, and searching for a video through the thumbnail image. it means.
본 발명에서는 디스플레이상의 재생화면과 썸네일 이미지의 사이즈에 따라 시간 간격, 공간 간격 또는 이들의 조합에 의해 썸네일 이미지 리스트에 표시될 썸네일 이미지의 수가 결정되므로, 상기 시간 간격과 공간 간격 또는 이들의 조합은 시간 간격, 공간 간격, 이들의 조합 혹은 단순히 간격이라는 용어만으로 기재하여도 시간 간격, 공간 간격 또는 이들의 조합을 모두 참조한 복수의 썸네일 이미지가 디스플레이 상에 표시되는 간격을 의미한다.In the present invention, the number of thumbnail images to be displayed in the thumbnail image list is determined by the time interval, the space interval, or a combination thereof according to the size of the playback screen and the thumbnail image on the display. The term “interval, space interval, a combination thereof, or simply the term“ interval ”refers to an interval in which a plurality of thumbnail images referring to the time interval, the space interval, or a combination thereof are displayed on the display.
아울러 본 발명에서 썸네일 이미지는 디스플레이 화면에서 일정시간 사용자의 입력 행위가 감지되지 않으면 자동적으로 화면에서 사라지게 할 수 있다. 또한 사용자가 일정 행위를 다시 수행하면 이를 감지하여 복수의 썸네일 이미지가 화면에 나타나도록 설정할 수 있다.In addition, in the present invention, the thumbnail image may be automatically disappeared from the screen if the user's input behavior is not detected for a certain time on the display screen. In addition, when the user performs a certain action again, the user may be configured to display a plurality of thumbnail images on the screen.
여기서 상기 사용자의 입력 행위는 제스처, 마우스, 터치 또는 이들의 조합에 의해서 수행될 수 있으며, 상기 제스처, 마우스, 터치 또는 이들의 조합은 특정 명령어로 해석된다. 예를 들어 제스처 중에서 손가락을 컵 모양(예: U자형)으로 움직이면 썸네일 이미지 리스트가 줌-아웃(축소)되어 더 넓은 영역(혹은 전체 영역)을 탐색할 수 있도록 해 주는 명령어로 인식하게 하고, 반대로 캡 모양(예: 역 U자형)으로 움직이면 썸네일 이미지 리스트가 줌-인(확대)되어 좁은 영역을 더 자세히 탐색할 수 있도록 하는 것이다. 또한, 마우스를 왼쪽에서 오른쪽으로 드래그하면 썸네일 이미지 리스트가 줌-인(확대)되고, 반대 방향으로 드래그하면 썸네일 이미지 리스트가 줌-아웃(축소)되도록 명령어 약속을 정의할 수 있다. 이는 터치에 있어서도 다양한 명령어 패턴을 만들어 사용할 수 있음을 시사한다. 또한 이러한 제스처, 마우스, 터치 또는 이들의 조합에 의한 동작을 특정 명령어로 메핑하는 것은 통상의 기술자라면 얼마든지 자유롭게 정의하여 사용할 수 있으므로, 상기 예시한 것에 제한되는 것이 아님이 분명하다.Here, the user's input action may be performed by a gesture, a mouse, a touch, or a combination thereof, and the gesture, the mouse, the touch, or a combination thereof may be interpreted as a specific command. For example, if you move your finger in a cup (for example, U-shaped) during a gesture, the thumbnail image list is zoomed out (reduced) and recognized as a command that allows you to navigate a wider area (or entire area). When you move to a cap shape (such as an inverted U-shape), the thumbnail image list is zoomed in (zoom in) to allow you to explore more narrow areas. In addition, you can define a command appointment to drag the mouse from left to right to zoom in (zoom in) the thumbnail image list, and to drag in the opposite direction to zoom out (zoom out) of the thumbnail image list. This suggests that various command patterns can be created and used in touch. In addition, it is obvious that the mapping of the gesture, the mouse, the touch, or a combination thereof with a specific command may be freely defined and used by those skilled in the art.
도 1은 본 발명의 일 실시예에 따른 썸네일을 활용하여 동영상에서 원하는 장면을 탐색하는 사용자인터페이스 장치의 블록도로서, 동영상을 디스플레이하거나 사용자로부터 터치 입력을 수신하는 동영상 디스플레이 및 터치 입력부(1), 동영상 데이터를 로컬 저장소인 메모리 혹은 하드디스크(3)에서 읽거나 또는 네트워크로부터 수신하여 재생하는 동영상재생부(21)와, 썸네일 이미지들을 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 화면에 썸네일 이미지들을 시간 순으로 표시하는 썸네일 이미지 처리부(23)와, 사용자로부터 썸네일 이미지들의 시간 간격을 좁히거나 넓히도록 하는 제어 정보를 입력 받고 그에 따라 시간 간격, 공간 간격 또는 이들의 조합에 대한 제어를 수행하는 썸네일 간격 제어부(22)를 포함하는 것을 특징으로 한다. 또한 상기 동영상 재생부(21), 썸네일 이미지 처리부(23) 및 썸네일 간격 제어부(22)를 통틀어 동영상 제어부(2)라고 하며, 상기 동영상 제어부에서 수행하는 기능은 단말기 자체의 마이크로프로세서 혹은 중앙처리장치(CPU)에 의해서 수행되거나, 네트워크상의 클라우드 컴퓨팅 서버에서도 수행될 수 있도록 구성 가능하다.1 is a block diagram of a user interface device that searches for a desired scene in a video using thumbnails according to an embodiment of the present invention. The video display and touch input unit 1 displays a video or receives a touch input from a user. A video player 21 for reading video data from a memory or hard disk 3 which is local storage or receiving and playing back from a network, and generating thumbnail images from the video data or receiving them from a network to display thumbnail images on a screen. Thumbnail interval control unit 23 to display the thumbnail image processing unit 23 to display in order, and control information to narrow or widen the time interval of the thumbnail images from the user and to control the time interval, space interval, or a combination thereof accordingly. Characterized in that it comprises 22 do. In addition, the video player 21, the thumbnail image processor 23, and the thumbnail interval controller 22 are collectively called a video controller 2, and the function performed by the video controller is a microprocessor or a central processing unit of the terminal itself ( Or a cloud computing server on a network.
여기서 동영상 재생부(21)는 로컬 저장소(3)에 저장된 동영상을 재생할 수 있도록 하는 역할을 수행하는 것으로, 사용자로부터 동영상의 재생에 필요한 제어 명령을 입력받아 그에 따라 동영상을 재생하는 역할을 수행한다.In this case, the video player 21 plays a role of playing a video stored in the local storage 3, and receives a control command for playing a video from a user and plays the video accordingly.
또한 상기 썸네일 이미지 처리부(23)는 화면상에서 한 번에 보여주기에 적당한 썸네일 이미지들의 수를 계산한 후 해당 수만큼 동영상 전체를 구간별로 나누고 동영상으로부터 소정의 시간(예: 1초) 간격으로 추출하여 생성하여 둔 썸네일 이미지들 중에서 각 구간의 중간지점에 해당하는 썸네일 이미지들을 화면에 시간 순으로 표시하는 역할을 수행한다.In addition, the thumbnail image processing unit 23 calculates the number of thumbnail images suitable to be displayed at a time on the screen, divides the entire video by the corresponding number of sections and extracts the video at intervals of a predetermined time (for example, 1 second) from the video. It plays a role of displaying thumbnail images corresponding to the midpoint of each section among the created thumbnail images in chronological order.
그리고 상기 썸네일 간격 제어부(22)는, 사용자가 손가락으로 멀티터치를 사용하여 터치스크린 디스플레이 화면상에 표시된 썸네일 이미지들의 공간 간격을 좁히거나 넓히는 동작을 입력함으로써 썸네일 이미지들의 시간 간격을 좁히거나 넓히는 제어를 수행한다.The thumbnail interval controller 22 controls a user to narrow or widen the time interval of the thumbnail images by inputting an operation of narrowing or widening the spatial interval of the thumbnail images displayed on the touch screen display using a multi-touch with a finger. Perform.
이상에서 설명한 동영상재생부(21), 썸네일 이미지 처리부(23) 및 썸네일 간격 제어부(22) 간의 상호 작용에 의해서, 사용자는 다음과 같은 시나리오를 통해 동영상에서 원하는 장면을 손쉽게 찾을 수 있다.By the interaction between the video player 21, the thumbnail image processor 23, and the thumbnail interval controller 22 described above, the user can easily find a desired scene in the video through the following scenario.
또한 동영상 디스플레이 및 터치 입력부(1)는 동영상을 디스플레이하는 출력부와 터치 동작을 입력받는 입력부가 하나의 수단으로 통합되어 있는 경우를 나타내고 있으나, 이는 예시에 불과하므로 입력수단과 출력수단이 분리되어 구성되는 경우를 배제하는 것이 아니다.In addition, the video display and the touch input unit 1 show a case in which an output unit for displaying a video and an input unit for receiving a touch action are integrated as one means, but this is only an example, and thus the input unit and the output unit are separated. It does not exclude the case.
도 2는 본 발명의 일 실시예에 따른 썸네일(11)을 디스플레이 재생 화면(10)에 전개하여 동영상에서 원하는 장면을 탐색하는 방법을 설명하기 위한 예시도이다. 설명을 단순화하기 위해서 예를 들어, 동영상의 전체 재생 시간이 1시간짜리이고, 화면에 표시하기 적당한 썸네일 이미지들의 개수가 6개일 경우, 10분의 시간 간격을 가진 6개의 썸네일 이미지들이 디스플레이 화면상에 균등한 공간간격을 두고 표시된다. 이 경우, 0초, 10분, 20분, 30분, 40분, 50분 시점의 썸네일 이미지들이 표시되도록 한다.FIG. 2 is an exemplary diagram for describing a method of searching for a desired scene in a video by deploying the thumbnail 11 to the display playback screen 10 according to an embodiment of the present invention. To simplify the description, for example, if the total duration of a movie is 1 hour and the number of thumbnail images suitable for display on the screen is six, six thumbnail images with a time interval of 10 minutes are displayed on the display screen. Displayed evenly spaced. In this case, thumbnail images at the time points of 0 second, 10 minutes, 20 minutes, 30 minutes, 40 minutes, and 50 minutes are displayed.
예를 들어, 사용자가 디스플레이 화면에 표시된 썸네일 이미지들 중에서 두 번째(예: 썸네일(2))와 세 번째 썸네일(예: 썸네일(3)) 이미지를 두 손가락으로 터치하여 벌리면(예: 줌-인 동작), 썸네일 간격 제어부는 사용자의 멀티터치 입력을 선택된 썸네일 이미지들 사이의 시간 영역을 더 자세히 탐색하고자 하는 동작으로 해석하고, 즉 썸네일 이미지들의 시간 간격을 줄이려는 의도로 해석하고, 썸네일 이미지들의 시간 간격을 10분에서 5분으로 줄여서 표시하도록 썸네일 이미지 처리부에 요청한다. 즉, 썸네일 이미지 처리부는 사용자가 선택한 썸네일 이미지들에 대응되는 시간 영역을 중심으로 5분 간격의 썸네일 이미지들을 선택하여 화면에 표시한다. 예를 들어, 5분, 10분, 15분, 20분, 25분, 30분 시점의 썸네일 이미지들을 순서대로 화면에 표시하도록 설정할 수 있다. 또한 사용자가 디스플레이 화면에 표시된 썸네일 이미지들 중에서 두 번째(예: 썸네일(2))와 세 번째 썸네일(예: 썸네일(3)) 이미지를 두 손가락으로 터치하여 좁히면(예: 줌-아웃 동작), 썸네일 간격 제어부는 사용자의 멀티터치 입력을 선택된 썸네일 이미지들 사이의 시간 영역을 더 넓게 탐색하고자 하는 동작으로 해석하고, 즉 썸네일 이미지들의 시간 간격을 넓히려는 의도로 해석하고, 예컨대 썸네일 이미지들의 시간 간격을 10분에서 20분으로 넓혀서 표시하도록 썸네일 이미지 처리부에 요청한다. 즉, 상기 시간 간격은 사용자가 터치하여 벌리거나 좁히는 동작에 의해서 점차 세밀하게 혹은 점차 넓은 시간 간격으로 조정 가능함이 당연하고 이로 인한 제약은 없다. 또한 상기 시간 간격, 공간 간격 또는 이들의 조합은 이전에 디스플레이되었던 시간 간격, 공간간격 또는 이들의 조합으로부터 새로이 계산되어 디스플레이 된다.For example, if a user touches two fingers apart to open the second (eg thumbnail (2)) and third thumbnail (eg thumbnail (3)) images displayed on the display screen (eg zoom-in) Operation), the thumbnail interval control unit interprets the user's multi-touch input as an operation for further exploring the time area between the selected thumbnail images, that is, the intention of reducing the time interval of the thumbnail images, and the time of the thumbnail images. Ask the thumbnail image processing unit to display the interval from 10 minutes to 5 minutes. That is, the thumbnail image processing unit selects and displays thumbnail images on the screen at intervals of five minutes with respect to the time area corresponding to the thumbnail images selected by the user. For example, thumbnail images of 5, 10, 15, 20, 25, and 30 minutes may be set to be displayed on the screen in order. Also, when the user touches two fingers to narrow the second image (e.g. thumbnail (2)) and the third thumbnail (e.g. thumbnail (3)) displayed on the display screen (e.g. zoom-out gesture) The thumbnail interval control unit interprets the user's multi-touch input as an operation for navigating the time domain between the selected thumbnail images more broadly, that is, to intentionally widen the time interval of the thumbnail images, for example, the time interval of the thumbnail images. Asks the thumbnail image processing unit to display a range of 10 to 20 minutes. In other words, the time interval can be adjusted in a fine or gradually wider time interval by the user to open or narrow the touch is not limited by this. In addition, the time interval, space interval, or a combination thereof is newly calculated and displayed from the previously displayed time interval, space interval, or a combination thereof.
도 2에서 썸네일 이미지(11)는 재생 화면(12)의 일부분에 디스플레이되면 족하고 그 위치에 대한 제약은 없다. 또한 한 번에 디스플레이 가능한 썸네일 이미지의 수는 전체 재생화면의 크기와 썸네일의 크기에 따라 달라질 수 있으며, 이는 사용자의 설정이나 미리 설정된 값에 따라 결정될 수 있다. 아울러 프로그래스-바(12)와 플레이/정지-바(13) 등의 표시는 항상 활성화되어 있도록 설정하거나, 해당 부분에 터치 입력이 감지되는 경우에 나타나도록 설정할 수 있다.In FIG. 2, the thumbnail image 11 is satisfied if it is displayed on a part of the reproduction screen 12, and there is no restriction on its position. In addition, the number of thumbnail images that can be displayed at one time may vary depending on the size of the entire playback screen and the size of the thumbnail, which may be determined by a user's setting or a preset value. In addition, the display of the progress bar 12 and the play / stop bar 13 may be set to always be activated, or may be set to appear when a touch input is detected in the corresponding part.
또한 썸네일 이미지의 크기도 전체 재생화면의 크기와 표시할 썸네일 이미지의 수에 따라 가변적으로 설정할 수 있을 뿐만아니라, 사용자가 멀티터치 동작으로 썸네일 이미지의 크기를 크게 하였다가 줄였다가 조정할 수 있다. 즉, 손가락 터치를 활용하여 썸네일 이미지를 대각선 방향으로 벌려주면 썸네일 이미지가 더 크게 설정되고 이에 따라 전체 재생화면에 디스플레이되는 썸네일의 수는 줄어들게된다. 다만 이 경우에 좀 더 확대된 썸네일 이미지를 사용자에게 디스플레이하므로 사용자가 썸네일을 통해서 동영상을 탐색하기에 편리할 수 있다. 반대로 손가락 터치를 활용하여 썸네일 이미지를 대각선 방향으로 좁혀주면(세로 혹은 가로 방향으로만 좁혀 주어도 됨) 썸네일 이미지가 더 작게 설정되고 이에 따라 전체 재생화면에 디스플레이되는 썸네일의 수는 늘어나게 된다. 다만, 이 경우에 사용자가 동영상의 전체적인 화면 변화를 좀 더 용이하게 파악할 수 있고, 썸네일 이미지 각각의 크기는 줄어들게 되므로 그 크기가 지나치게 줄어들면 사용자가 썸네일 이미지를 보고 동영상의 특정 장면을 탐색하기 곤란할 지경에 이를 수도 있다.In addition, the size of the thumbnail image can be set variable according to the size of the entire playback screen and the number of thumbnail images to be displayed, and the user can increase and decrease the size of the thumbnail image by using a multi-touch operation. In other words, when the thumbnail image is opened in a diagonal direction by using a finger touch, the thumbnail image is set larger, and accordingly, the number of thumbnails displayed on the entire playback screen is reduced. However, in this case, the thumbnail image is displayed to the user so that it may be convenient for the user to browse the video through the thumbnail. On the contrary, if the thumbnail image is narrowed diagonally using a finger touch (it may be narrowed vertically or horizontally), the thumbnail image is set smaller and accordingly, the number of thumbnails displayed on the entire playback screen increases. However, in this case, the user can more easily grasp the overall screen change of the video, and the size of each thumbnail image is reduced, so if the size is excessively reduced, it may be difficult for the user to see the thumbnail image and navigate to a specific scene of the video. You can also reach
도 3은 본 발명의 일 실시예에 따른 썸네일을 활용한 동영상 탐색에 대한 처리 흐름도이다. 먼저 동영상 플레이가 진행되고 있거나 플레이를 준비하고 있는 상황에서, 썸네일 이미지들을 표시하는 명령이 입력되면, 디스플레이의 재생 화면상에 균등한 공간 간격, 시간 간격 또는 이들의 조합에 따라 복수의 썸네일 이미지를 표시(S10)한다. 다음으로 사용자가 복수의 썸네일 이미지를 통해서 좀 더 세밀하거나 혹은 좀 더 넓은 범위의 동영상 탐색을 원하는 경우, 썸네일 이미지 리스트 혹은 재생 화면상의 터치를 감지하여 탐색하고자 하는 동작을 해석(S20)한다. 이어서 상기 해석된 동작에 따라 디스플레이할 복수의 썸네일 이미지의 시간 간격, 공간 간격 또는 이들의 조합을 계산(S30)하며, 계산된 시간 간격, 공간 간격 또는 이들의 조합으로 복수의 썸네일 이미지들을 다시 디스플레이(S40)한다.3 is a flowchart illustrating a video search using a thumbnail according to an embodiment of the present invention. First, when a video play is in progress or ready to play, when a command for displaying thumbnail images is input, a plurality of thumbnail images are displayed on the display screen at equal space intervals, time intervals, or a combination thereof. (S10). Next, when the user wants to search a video in a more detailed or wider range through a plurality of thumbnail images, an operation for detecting and searching for a thumbnail image list or a touch on the playback screen is interpreted (S20). Subsequently, a time interval, a space interval, or a combination of the plurality of thumbnail images to be displayed is calculated according to the interpreted operation (S30), and the plurality of thumbnail images are displayed again at the calculated time interval, the space interval, or a combination thereof. S40).
상기와 같은 본 발명에서 제시한 상기와 같은 일실시예를 통하여, 사용자는 처음에는 동영상의 전체적인 장면 변화를 파악하고, 좀 더 자세히 탐색하기 원하는 동영상의 구간이 있을 경우, 사용자가 직접 원하는 구간에 대한 썸네일 이미지들의 시간 간격, 공간 간격 또는 이들의 조합을 제어하여 동영상에서 원하는 지점을 편리하게 찾을 수 있다.Through one embodiment as described above in the present invention as described above, the user first grasps the overall scene change of the video, and if there is a section of the video that you want to explore in more detail, By controlling the time interval, space interval, or a combination of the thumbnail images, it is convenient to find a desired point in the video.
도 4는 본 발명의 일 실시예에 따른 디스플레이의 재생 화면상에서 표시될 수 있는 부가 기능에 대해 예시도이다. 먼저 인포메이션 아이콘(100)은 시청하거나 재생하고 있는 동영상과 관련한 채널번호/프로그램 제목(101)이나 텍스트/TV 정보(102)에 대해서 사용자에게 표시해 주는 기능이며, 버턴/터치 잠금(lock) 아이콘(103)은 터치로 동작하는 디스플레이 화면에서 버턴이나 터치 입력을 인식하지 못하도록 잠그는(locking) 기능을 수행하며, 이는 동영상 재생 중에 사용자의 부주의로 인한 원하지 않는 오동작을 방지하기 위함이다. 메뉴 아이콘(104)는 사용자에게 동영상 플레이와 관련한 부가적인 동작에 대한 명령을 입력받기 위한 메뉴를 표시해 주는 기능을 수행한다.4 is an exemplary diagram of additional functions that may be displayed on a playback screen of a display according to an embodiment of the present invention. First, the information icon 100 is a function for displaying a channel number / program title 101 or text / TV information 102 related to a video being watched or played to the user, and the button / touch lock icon 103 ) Performs a function of locking a button or a touch input not to recognize a touch screen on a touch screen, in order to prevent an unwanted malfunction due to user's carelessness during video playback. The menu icon 104 performs a function of displaying a menu for receiving a command for an additional operation related to video play.
상기 부가 기능은 사용자로부터 일정시간 아무런 동작이 없을 경우 화면에서 사라졌다가, 사용자가 특정 명령(예: 제스처, 마우스, 터치 또는 이들의 조합)을 입력하면 화면에 나타나도록 설정할 수 있으며, 상기 화면에 나타나는 위치에 대해서는 아무런 제한이 없다.The additional function may disappear from the screen when there is no action from the user for a predetermined time, and may be set to appear on the screen when the user inputs a specific command (for example, a gesture, a mouse, a touch, or a combination thereof). There is no limit as to where it appears.
도 5는 본 발명의 일 실시예에 따른 현재 재생되고 있는 지점을 포함하여 임의의 지점을 터치하였을 경우 해당 지점의 정지영상(still image)을 썸네일 이미지로 표시해 주는 예시도이다. 즉, 특정 동영상의 재생 시점과 관계없이 임의의 위치에 특정 입력(예: 터치, 마우스, 제스처 또는 이들의 조합)을 가하면, 이를 인식하여 해당 지점의 정지영상을 썸네일 이미지로 표시해 주는 것이 가능하다. 이러한 기능은 디스플레이 화면상에서 썸네일 이미지가 표시되다가 일정시간 아무런 입력이 감지되지 않으면 상기 썸네일 이미지는 화면에서 사라지게 되고, 다시 사용자가 특정 입력을 가하면 그 위치에 다시 썸네일 이미지가 나타나게 된다.FIG. 5 is an exemplary view of displaying a still image of a corresponding point as a thumbnail image when an arbitrary point is touched including a point currently being reproduced according to an exemplary embodiment of the present invention. That is, when a specific input (for example, a touch, a mouse, a gesture, or a combination thereof) is applied to an arbitrary position irrespective of the playback time of the specific video, it may be recognized and displayed as a thumbnail image of the still image at the corresponding point. In such a function, when a thumbnail image is displayed on a display screen and no input is detected for a predetermined time, the thumbnail image disappears from the screen, and when the user applies a specific input, the thumbnail image is displayed again at that position.
사용자로부터 특정 입력을 감지할 경우, 썸네일 이미지 리스트를 디스플레이의 재생 화면상에 표시할 수 있으나, 또한 단일의 썸네일 이미지만 해당 입력이 감지된 위치에 표시하도록 설정할 수 있다.When detecting a specific input from the user, the thumbnail image list can be displayed on the playback screen of the display, but only a single thumbnail image can be set to be displayed at the detected position.
도 6은 본 발명의 일 실시예에 따라 사용자가 특정 썸네일 이미지를 선택할 경우 해당 위치의 동영상을 로딩하는 것을 설명하기 위한 예시도이다. 사용자가 특정 썸네일 이미지를 선택하면 해당 썸네일이 지정하는 위치의 동영상을 로딩하고, 로딩된 동영상의 위치로부터 새로이 플레이를 시작한다. 이때 사용자의 선택으로부터 실제 해당 위치의 동영상이 로딩되어 플레이되기 까지 시간이 필요하므로, 이에 대한 시각적인 효과를 표시해주는 것이다.6 is an exemplary diagram for explaining loading a video of a corresponding position when a user selects a specific thumbnail image according to an embodiment of the present invention. When the user selects a specific thumbnail image, the video is loaded at the location designated by the thumbnail, and play starts from the location of the loaded video. In this case, since a time is required from the user's selection until the video of the actual position is loaded and played, the visual effect is displayed.
상기 시각적인 효과는 다양하게 묘사할 수 있는 것이고, 통상의 기술자라면 상기 묘사하는 방법에 제약을 받지 않고 자유롭게 변형하여 사용할 수 있음이 당연하다.The visual effects can be described in various ways, and a person of ordinary skill in the art can be freely modified and used without being restricted by the method described above.
한편, 본 발명의 일실시예에 따른 썸네일을 활용한 동영상 탐색 화면의 제공은 상기 썸네일 이미지를 다양하게 변형하여 표시할 수 있는바, 예를 들어 썸네일 이미지의 처음(썸네일 (1))과 끝(썸네일 (7)), 그리고 중간(썸네일 (4))만 썸네일 이미지를 표시하고, 상기 썸네일 (1), 썸네일 (4) 및 썸네일 (7) 사이에 존재하는 썸네일 이미지는 그 수가 너무 많아 표시하기 곤란한 경우, 겹치게 표시할 수 있다. 다만, 사용자가 특정 겹쳐진 썸네일 이미지의 특정 부분을 터치할 경우 터치된 부분의 해당 썸네일 이미지가 팝업되어 겹쳐서 표시되지 않았던 부분이 나타나도록 표시할 수 있다.On the other hand, the provision of a video search screen using a thumbnail according to an embodiment of the present invention can be variously modified to display the thumbnail image, for example, the beginning (thumbnail (1)) and the end ( Thumbnails (7), and only the middle (thumbnail (4)) display thumbnail images, and the thumbnail images existing between the thumbnails (1), thumbnails (4) and thumbnails (7) are too many to display In this case, it may display overlappingly. However, when a user touches a specific part of a specific overlapped thumbnail image, the corresponding thumbnail image of the touched part may pop up to display a part which is not overlapped.
또한 모든 썸네일 이미지를 재생 화면에 상호 겹치도록 리스팅하고, 사용자가 손가락 터치, 마우스 선택, 제스처 또는 이들의 조합을 통하여 특정 썸네일 이미지를 선택하면 해당 썸네일 이미지가 겹쳐진 썸네일 이미지 리스트 상에서 전면으로 팝업되어 표시되도록 설정할 수 있다.It also lists all thumbnail images on the playback screen so that they overlap, and when a user selects a particular thumbnail image through finger touch, mouse selection, gestures, or a combination thereof, the thumbnail image pops up in front of the list of overlapping thumbnail images. Can be set.
이상으로 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.Although the present invention has been described with reference to the embodiments illustrated in the drawings, this is merely exemplary, and various modifications and equivalent other embodiments are possible for those skilled in the art to which the art pertains. I will understand the point. Therefore, the technical protection scope of the present invention will be defined by the claims below.

Claims (20)

  1. 동영상 디스플레이 화면상에 일정부분에 시간순으로 미리 설정된 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 표시하는 단계; Displaying a plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof pre-set in a chronological order on a moving image display screen;
    상기 표시된 복수의 썸네일 이미지 또는 재생 화면상의 특정 입력으로부터 동영상을 탐색하고자 하는 사용자의 동작을 해석하는 단계; Interpreting a user's motion to search for a video from the plurality of displayed thumbnail images or a specific input on a playback screen;
    상기 해석된 동작에 따라 새롭게 표시할 복수의 썸네일 이미지의 공간 간격, 시간 간격 또는 이들의 조합을 계산하는 단계; 및 Calculating a space interval, a time interval, or a combination of the plurality of thumbnail images to be newly displayed according to the interpreted operation; And
    상기 계산된 공간 간격, 시간 간격 또는 이들의 조합으로 복수의 썸네일 이미지를 새롭게 표시하는 단계를 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.And displaying a plurality of thumbnail images newly at the calculated space interval, time interval, or a combination thereof.
  2. 제 1 항에 있어서, 상기 복수의 썸네일 이미지를 표시하는 단계에서 The method of claim 1, wherein displaying the plurality of thumbnail images
    복수의 썸네일 이미지의 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합으로 표시하되 표시할 썸네일의 수가 많아짐에 따라 썸네일 이미지들을 스크롤할 수 있도록 하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.The display of a plurality of thumbnail images is displayed at equal time intervals, space intervals, or a combination thereof, and provides a video search user interface using thumbnails, wherein the thumbnail images can be scrolled as the number of thumbnails to be displayed increases. Way.
  3. 제 1 항에 있어서, 상기 사용자의 동작을 해석하는 단계에서 The method of claim 1, wherein interpreting the user's motion
    상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함하는 입력이며, 상기 특정 입력은 미리 정해진 입력 패턴에 따라 동영상을 좁은 시간 간격 혹은 넓은 시간 간격으로 탐색하는 명령으로 해석되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.The specific input may be an input including a gesture, a mouse, a touch, or a combination thereof. The specific input may be interpreted as a command for searching a video at a narrow time interval or a wide time interval according to a predetermined input pattern. How to provide a video navigation user interface using.
  4. 제 1 항에 있어서,The method of claim 1,
    상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 단계를 더 포함하는 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.When the specific input is applied to a specific position on the region where the plurality of thumbnail images are displayed, displaying a still image for the video of the corresponding position as a thumbnail image, wherein the video search user interface using thumbnails is further included. How to Provide.
  5. 제 1 항에 있어서,The method of claim 1,
    사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 단계를 더 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법.When the user selects a specific thumbnail image, the display for loading a video of the location is displayed on the thumbnail image further comprising the method of providing a video search user interface using a thumbnail.
  6. 제 1 항에 있어서, 상기 복수의 썸네일 이미지를 표시하는 단계에서 The method of claim 1, wherein displaying the plurality of thumbnail images
    상기 복수의 썸네일 이미지는 상기 동영상 디스플레이 화면상에 한 번에 표시되며, 상기 디스플레이 화면상에 한 번에 표시가능한 썸네일 이미지의 수는 전체 재생화면의 크기와 썸네일의 크기에 따라 달라지는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법. The plurality of thumbnail images are displayed on the video display screen at once, and the number of thumbnail images that can be displayed on the display screen at one time varies depending on the size of the entire playback screen and the size of the thumbnails. How to provide a video navigation user interface using.
  7. 제 3 항에 있어서, The method of claim 3, wherein
    상기 특정 입력이 동영상을 좁은 시간 간격으로 탐색하는 명령으로 해석되면, If the specific input is interpreted as a command to search the video at narrow time intervals,
    상기 복수의 썸네일 이미지를 새롭게 표시하는 단계는 상기 복수의 썸네일 이미지들의 시간 간격을 좁혀서 상기 복수의 썸네일 이미지들을 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법. In the displaying of the plurality of thumbnail images, the method of providing a video search user interface using a thumbnail may include displaying the plurality of thumbnail images by narrowing time intervals of the plurality of thumbnail images.
  8. 제 3 항에 있어서, The method of claim 3, wherein
    상기 특정 입력이 동영상을 넓은 시간 간격으로 탐색하는 명령으로 해석되면, If the specific input is interpreted as a command to search the video at a wide time interval,
    상기 복수의 썸네일 이미지를 새롭게 표시하는 단계는 상기 복수의 썸네일 이미지들의 시간 간격을 넓혀서 상기 복수의 썸네일 이미지들을 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법. In the displaying of the plurality of thumbnail images, the method of providing a video search user interface using a thumbnail may include displaying the plurality of thumbnail images by extending a time interval of the plurality of thumbnail images.
  9. 제 3 항에 있어서, The method of claim 3, wherein
    상기 동영상을 좁은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-아웃 동작인 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법. The method of providing a video search user interface using a thumbnail, wherein an input pattern of a command for searching the video at a narrow time interval is a zoom-out operation.
  10. 제 3 항에 있어서, The method of claim 3, wherein
    상기 동영상을 넓은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-인 동작인 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법. The method of providing a video search user interface using a thumbnail, wherein an input pattern of a command for searching the video at a wide time interval is a zoom-in operation.
  11. 동영상 데이터를 로컬 저장소인 메모리, 하드디스크, 네트워크를 통한 저장 수단 또는 이들의 조합에 의한 저장수단으로부터 읽거나 수신하여 재생하는 동영상재생부;A moving picture reproducing unit for reading or receiving and reproducing moving picture data from a storage device by a memory, a hard disk, a storage means via a network, or a combination thereof, which is a local storage;
    복수의 썸네일 이미지를 동영상 데이터로부터 생성하거나 또는 네트워크로부터 수신하여 동영상 디스플레이 화면상의 일정부분에 시간 순으로 소정의 공간 간격, 시간 간격 또는 이들의 조합으로 상기 복수의 썸네일 이미지를 표시하는 썸네일 이미지 처리부; 및 A thumbnail image processing unit which generates a plurality of thumbnail images from video data or receives from a network and displays the plurality of thumbnail images at predetermined space intervals, time intervals, or a combination thereof in chronological order on a portion of the video display screen; And
    사용자로부터의 특정 입력에 따라 상기 복수의 썸네일 이미지를 특정 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하는 간격을 제어하는 썸네일 간격 제어부;를 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.Thumbnail interval control unit for controlling the interval for displaying the plurality of thumbnail images in accordance with a specific input from a user at a specific time interval, space interval or a combination thereof; video navigation user interface using a thumbnail Provision device.
  12. 제 11 항에 있어서,The method of claim 11,
    상기 동영상을 디스플레이하거나 사용자로부터 제스처, 마우스, 터치 혹은 이들의 조합을 포함하는 입력을 수신하는 동영상 디스플레이 및 터치 입력부;를 더 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.And a video display and a touch input unit configured to display the video or to receive an input including a gesture, a mouse, a touch, or a combination thereof from a user.
  13. 제 11 항에 있어서, The method of claim 11,
    상기 복수의 썸네일 이미지 표시는 균등한 시간 간격, 공간 간격 또는 이들의 조합에 따라 표시하되 표시할 복수의 썸네일 이미지의 수가 많아짐에 따라 상기 복수의 썸네일 이미지를 스크롤할 수 있도록 하는 수단;을 더 포함하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.The plurality of thumbnail images may be displayed at equal time intervals, spatial intervals, or a combination thereof, and means for scrolling the plurality of thumbnail images as the number of thumbnail images to be displayed increases. Apparatus for providing a user interface for video searching using thumbnails, characterized in that.
  14. 제 11 항에 있어서,The method of claim 11,
    상기 특정 입력은 제스처, 마우스, 터치 또는 이들의 조합을 포함한 입력이며, 상기 특정 입력은 미리 정해진 패턴에 따라 동영상을 좁거나 넓은 시간 간격 혹은 공간 간격으로 탐색하는 명령으로 해석되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.The specific input is an input including a gesture, a mouse, a touch, or a combination thereof, and the specific input is interpreted as a command for searching a video at a narrow or wide time interval or a space interval according to a predetermined pattern. Device that provides user interface for video search.
  15. 제 11 항에 있어서,The method of claim 11,
    상기 복수의 썸네일 이미지가 표시되는 영역상의 특정 위치에 상기 특정 입력을 가했을 경우, 해당 위치의 동영상에 대한 정지영상을 썸네일 이미지로 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.When the particular input is applied to a specific position on an area where the plurality of thumbnail images are displayed, the apparatus for providing a video searching user interface using a thumbnail, wherein the still image of the video at the corresponding position is displayed as a thumbnail image.
  16. 제 11 항에 있어서,The method of claim 11,
    사용자가 특정 썸네일 이미지를 선택하였을 경우 해당 위치의 동영상을 로딩하는 표시가 상기 썸네일 이미지 상에 표시되는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.When a user selects a specific thumbnail image, a display for loading a video of a corresponding position is displayed on the thumbnail image.
  17. 제 14 항에 있어서, 상기 특정 입력이 동영상을 좁은 시간 간격으로 탐색하는 명령으로 해석되면, 15. The method of claim 14, wherein if the specific input is interpreted as a command to search the video at narrow time intervals,
    상기 썸네일 간격 제어부는 상기 복수의 썸네일 이미지들의 시간 간격을 좁히고, 상기 썸네일 이미지 처리부는 상기 시간 간격이 좁혀진 상기 복수의 썸네일 이미지들을 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.The thumbnail interval controller narrows the time interval of the plurality of thumbnail images, the thumbnail image processing unit is a video search user interface providing apparatus using a thumbnail, characterized in that for displaying the plurality of thumbnail images of the narrowed time interval.
  18. 제 14 항에 있어서, 상기 특정 입력이 동영상을 넓은 시간 간격으로 탐색하는 명령으로 해석되면, 15. The method of claim 14, wherein if the specific input is interpreted as a command to search for a video at wide time intervals,
    상기 썸네일 간격 제어부는 상기 복수의 썸네일 이미지들의 시간 간격을 넓히고, 상기 썸네일 이미지 처리부는 상기 시간 간격이 넓혀진 상기 복수의 썸네일 이미지들을 표시하는 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치.The thumbnail interval controller extends the time interval of the plurality of thumbnail images, the thumbnail image processing unit is a video search user interface providing apparatus using a thumbnail, characterized in that for displaying the plurality of thumbnail images of the extended time interval.
  19. 제 14 항에 있어서, 상기 동영상을 좁은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-아웃 동작이고, 상기 동영상을 넓은 시간 간격으로 탐색하는 명령의 입력 패턴은 줌-인 동작인 것을 특징으로 하는 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 장치. The thumbnail of claim 14, wherein the input pattern of the command for searching the video at a narrow time interval is a zoom-out operation, and the input pattern of the command for searching the video at a wide time interval is a zoom-in operation. Device for providing video user interface using the device.
  20. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서, 상기 썸네일을 활용한 동영상 탐색 사용자인터페이스 제공 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.The computer-readable recording medium according to any one of claims 1 to 10, further comprising a program for executing a method for providing a video search user interface utilizing the thumbnail.
PCT/KR2013/011984 2013-02-06 2013-12-20 Method for providing video search user interface utilizing thumbnails and device therefor WO2014123303A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2013-0013178 2013-02-06
KR1020130013178A KR101267872B1 (en) 2013-02-06 2013-02-06 A method and apparatus for providing user interfaces of a video search by utilizing thumbnail images

Publications (1)

Publication Number Publication Date
WO2014123303A1 true WO2014123303A1 (en) 2014-08-14

Family

ID=48666925

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2013/011984 WO2014123303A1 (en) 2013-02-06 2013-12-20 Method for providing video search user interface utilizing thumbnails and device therefor

Country Status (2)

Country Link
KR (1) KR101267872B1 (en)
WO (1) WO2014123303A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016043478A1 (en) * 2014-09-15 2016-03-24 삼성전자 주식회사 Method for displaying object on device and device therefor
WO2016126048A1 (en) * 2015-02-06 2016-08-11 엘지전자 주식회사 Display device
US10820034B2 (en) 2017-05-26 2020-10-27 At&T Intellectual Property I, L.P. Providing streaming video from mobile computing nodes
CN112199552A (en) * 2020-10-12 2021-01-08 北京达佳互联信息技术有限公司 Video image display method and device, electronic equipment and storage medium

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102319456B1 (en) * 2014-12-15 2021-10-28 조은형 Method for reproduing contents and electronic device performing the same
KR101939806B1 (en) * 2016-09-07 2019-01-17 (주)잼투고 Computer Implemented Method and User Device for Searching Video Section Using Touch Sensitive User Interface
KR102487558B1 (en) * 2020-09-14 2023-01-11 네이버 주식회사 Method and system for requesting thumbnail for seeking of live video being played

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090021524A (en) * 2007-08-27 2009-03-04 삼성전자주식회사 Apparatus and method for displaying thumbnail
KR20100113922A (en) * 2009-04-14 2010-10-22 에스케이 텔레콤주식회사 Method for displaying multimedia contents, touch screen terminal and computer-readable recording medium with program therefor
KR20100115547A (en) * 2009-04-20 2010-10-28 에스케이 텔레콤주식회사 Method for zooming contents, touch screen terminal and computer-readable recording medium with program therefor

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090021524A (en) * 2007-08-27 2009-03-04 삼성전자주식회사 Apparatus and method for displaying thumbnail
KR20100113922A (en) * 2009-04-14 2010-10-22 에스케이 텔레콤주식회사 Method for displaying multimedia contents, touch screen terminal and computer-readable recording medium with program therefor
KR20100115547A (en) * 2009-04-20 2010-10-28 에스케이 텔레콤주식회사 Method for zooming contents, touch screen terminal and computer-readable recording medium with program therefor

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016043478A1 (en) * 2014-09-15 2016-03-24 삼성전자 주식회사 Method for displaying object on device and device therefor
US10585569B2 (en) 2014-09-15 2020-03-10 Samsung Electronics Co., Ltd. Method for displaying object on device and device therefor
US10996832B2 (en) 2014-09-15 2021-05-04 Samsung Electronics Co., Ltd. Method for displaying object on device and device therefor
WO2016126048A1 (en) * 2015-02-06 2016-08-11 엘지전자 주식회사 Display device
US10462526B2 (en) 2015-02-06 2019-10-29 Lg Electronics Inc. Display device
US10820034B2 (en) 2017-05-26 2020-10-27 At&T Intellectual Property I, L.P. Providing streaming video from mobile computing nodes
US11128906B2 (en) 2017-05-26 2021-09-21 At&T Intellectual Property I, L.P. Providing streaming video from mobile computing nodes
US11563996B2 (en) 2017-05-26 2023-01-24 At&T Intellectual Property I, L.P. Providing streaming video from mobile computing nodes
CN112199552A (en) * 2020-10-12 2021-01-08 北京达佳互联信息技术有限公司 Video image display method and device, electronic equipment and storage medium
CN112199552B (en) * 2020-10-12 2024-03-19 北京达佳互联信息技术有限公司 Video image display method and device, electronic equipment and storage medium

Also Published As

Publication number Publication date
KR101267872B1 (en) 2013-05-27

Similar Documents

Publication Publication Date Title
WO2014123303A1 (en) Method for providing video search user interface utilizing thumbnails and device therefor
US10331328B2 (en) Information processing apparatus, information processing method, and program
KR101307716B1 (en) Methods and systems for scrolling and pointing in user interfaces
US10353577B2 (en) Method and system for implementing content navigation or selection using touch-based input
RU2541125C2 (en) Information processing device, information processing method and programme
US10705702B2 (en) Information processing device, information processing method, and computer program
US11188192B2 (en) Information processing device, information processing method, and computer program for side menus
EP2652581A2 (en) Method and apparatus for controlling touch screen using timeline bar, recording medium with program for the same recorded therein, and user terminal having the same
US20120005628A1 (en) Display Device, Display Method, and Program
US20090153389A1 (en) Scroll bar with video region in a media system
WO2023011181A1 (en) Landscape screen interaction method and apparatus, electronic device, and storage medium
WO2017039243A1 (en) Content viewing device and method for displaying content viewing options thereon
US20090158222A1 (en) Interactive and dynamic screen saver for use in a media system
US20110145745A1 (en) Method for providing gui and multimedia device using the same
WO2013125921A1 (en) Method and apparatus for controlling screen by tracking head of user through camera module, and computer-readable recording medium therefor
TW201239742A (en) Method and apparatus for navigating a hierarchical menu based user interface
WO2023024921A1 (en) Video interaction method and apparatus, and device and medium
WO2013054995A1 (en) User terminal device and method for controlling a renderer thereof
Hürst et al. Interactive video browsing on mobile devices
WO2014196743A1 (en) Touchscreen input method and apparatus
CN106231438A (en) A kind of menu call-out method and device
WO2014021499A1 (en) Apparatus and method for multi-touch recognition capable of discriminating touch on object
WO2024076205A1 (en) Device and method for providing reactive video from which flickering is removed by using background image
WO2012118342A2 (en) Method and apparatus for controlling a user terminal having a touch screen, recording medium therefor, and user terminal comprising the recording medium
CN112714363A (en) Video browsing method, device, terminal and storage medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13874550

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13874550

Country of ref document: EP

Kind code of ref document: A1