KR101034439B1

KR101034439B1 - Multimedia device control system based on pattern recognition in touch screen

Info

Publication number: KR101034439B1
Application number: KR1020050006797A
Authority: KR
Inventors: 공민종
Original assignee: 엘지전자 주식회사
Priority date: 2005-01-25
Filing date: 2005-01-25
Publication date: 2011-05-12
Also published as: KR20060085850A

Abstract

본 발명은 터치 스크린(Touch Screen)을 포함하는 멀티미디어 콘텐츠 재생기기에서, 사전에 약속된 특정 패턴(Pattern)을 터치 스크린을 통해서 입력하면 그 패턴을 기기의 특정 기능에 대한 조절 명령으로 인식하여 해당 기능을 제어해 줄 수 있도록 한 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어방법과 그 장치에 관한 것이다.According to the present invention, when a predetermined pattern is input through a touch screen in a multimedia content player including a touch screen, the pattern is recognized as a control command for a specific function of the device and the corresponding function is recognized. The present invention relates to a method and apparatus for controlling a multimedia device based on touch screen pattern recognition.

본 발명은 멀티미디어 콘텐츠를 재생하는 기기에서 특정 조절기능에 대응하는 명령으로 인식하기 위한 소정의 특정 패턴을 등록하여 저장하고, 멀티미디어 콘텐츠의 재생중에 사용자가 터치 스크린을 통해서 입력한 패턴을 인식하여 상기 저장된 특정 패턴과 비교하고, 상기 사용자가 입력한 패턴과 일치되는 특정 패턴을 확인하여 그 확인된 특정 패턴에 대응하는 조절기능을 수행시켜 줌으로써, 별도의 UI없이 콘텐츠의 재생, 정지, 탐색, 변속제어, 음량조절, 북마크 처리 등을 쉽고 간편하며, 빠르게 조절할 수 있도록 한 패턴 인식 기반의 멀티미디어 콘텐츠 재생 제어 시스템을 제공한다.The present invention registers and stores a predetermined pattern for recognizing a command corresponding to a specific control function in a device for playing multimedia content, and recognizes the pattern input by the user through the touch screen during playback of the multimedia content. Compared to a specific pattern, and checks a specific pattern that matches the pattern input by the user and performs an adjustment function corresponding to the identified specific pattern, thereby playing, stopping, searching, shifting, controlling content without a separate UI. It provides a pattern recognition based multimedia content playback control system that enables easy, simple and quick volume control, bookmark processing, etc.

멀티미디어 콘텐츠, 패턴인식, 기능조절Multimedia contents, pattern recognition, function control

Description

MULTIMEDIA DEVICE CONTROL SYSTEM BASED ON PATTERN RECOGNITION IN TOUCH SCREEN}

도1은 본 발명에 따른 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어장치의 블록 구성도1 is a block diagram of an apparatus for controlling a multimedia device based on touch screen pattern recognition according to the present invention.

도2는 본 발명에 사용되는 패턴들의 실시예를 나타낸 도면2 illustrates an embodiment of patterns used in the present invention.

도3은 본 발명에 따른 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어방법의 플로우차트3 is a flowchart of a method for controlling a multimedia device based on touch screen pattern recognition according to the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

10: 프로세서 20: 터치 스크린10: processor 20: touch screen

21: 디스플레이부 22: 터치 입력부21: display unit 22: touch input unit

30: 메모리부 31: 패턴 정보 저장부30: memory unit 31: pattern information storage unit

40: A/V 재생부 50: 출력장치40: A / V playback section 50: output device

본 발명은 터치 스크린(Touch Screen)을 포함하는 멀티미디어 콘텐츠 재생기기에서, 사전에 약속된 특정 패턴(Pattern)을 터치 스크린을 통해서 사용자가 입력 하면 그 입력 패턴을 기기의 특정 기능에 대한 조절 명령으로 인식하여 해당 기능을 제어해 줄 수 있도록 한 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어방법과 그 장치에 관한 것이다.According to the present invention, when a user inputs a predetermined pattern through a touch screen in a multimedia content player including a touch screen, the input pattern is recognized as a control command for a specific function of the device. The present invention relates to a method for controlling a multimedia device based on touch screen pattern recognition and a device for controlling a corresponding function.

터치 스크린을 포함하는 PC나 PDA, 스마트 폰, PMP(휴대용 멀티미디어 재생기), MP3 플레이어 등이 보급되고 있다. 이들 기기에서는 오디오 뿐만 아니라, 동영상이나 정지 영상 등의 멀티미디어 콘텐츠(Multimedia Contents)를 재생하는 기능이 보편화되어 있다.PCs, PDAs, smart phones, portable multimedia players (PMPs), MP3 players, and the like, including touch screens, are becoming popular. In these devices, not only audio, but also a function of playing multimedia contents such as moving images and still images is common.

이러한 콘텐츠 들은 그 특성상, 재생(Play), 정지(Stop), 일시정지(Pause), 빨리감기(FF), 빨리 되감기(REW), 음량 증가(Volum Up), 음량 감소(Volum Down), 영상 회전(Rotate) 등의 조절 기능이 반드시 수반된다.These contents are characterized by Play, Stop, Pause, Fast Forward (FF), Fast Rewind (REW), Volume Up, Volume Down, and Image Rotation. Control functions such as (Rotate) are necessarily accompanied.

기존의 터치 스크린을 포함하는 멀티미디어 재생기능을 갖는 기기에서는 사용자가 기기의 터치 스크린 상에 구현된 특정 항목을 억세스(Access) 함으로써 상기한 여러 가지 조절 기능을 사용할 수 있게 되어 있다.In a device having a multimedia playback function including a conventional touch screen, the user can use the above-described various adjustment functions by accessing a specific item implemented on the touch screen of the device.

따라서, 멀티미디어 기기에서 콘텐츠를 재생할 경우에는 상기 조절 기능을 위한 사용자 인터페이스(UI)를 항상 디스플레이 장치에 보여주는 방법을 사용하던가, 혹은 사용자가 원하는 시점에서 상기 조절 기능을 위한 UI를 화면에 나타내 주는 방법(예를 들면 OSD 기능 사용)을 사용해야 한다. 그런데 전자의 방법은 디스플레이 장치를 비효율적으로 사용하기 때문에 후자의 방법을 더 많이 사용하고 있다.Therefore, when playing content on a multimedia device, a method of always showing a user interface (UI) for the adjustment function on a display device or a method for displaying the UI for the adjustment function on a screen at a desired time of the user ( Use the OSD function, for example). However, the former method uses the latter method more because it uses the display device inefficiently.

이러한 방법들은 모두, 조절 기능을 실행하기 위해서 특정 위치 상에 나타낸 UI를 억세스(Pointing) 해야 한다. 그렇지만 휴대성과 이동성에 기반한 단말기의 경우는 그 특성상 디스플레이 장치(터치 스크린 장치)의 크기가 제한될 수 밖에 없고, 이와 같이 디스플레이 장치의 크기가 작은 기기에서는 UI의 크기 또한 따라서 작아질 수 밖에 없는 구조 상의 제약이 있기 때문에, 이러한 이유로 터치 스크린용 펜을 사용하고 있다. 그렇지만, 기기 조작을 위해서 일일이 펜을 사용해야 하는 것은 사실 상 불편한 것이며, 또한, 디스플레이 장치 전체(Full Screen)를 이용하여 동영상이나 정지 영상을 재생하면서 동시에 조절 기능을 OSD로 구현하는 경우, 즉 후자의 경우는 현재 재생중인 콘텐츠를 OSD가 가리게 되어 해당 멀티미디어 콘텐츠 인식에 장애가 되는 문제점이 있다.All of these methods require accessing the UI displayed on a specific location in order to perform the adjustment function. However, in the case of a terminal based on portability and mobility, the size of the display device (touch screen device) can not be limited due to its characteristics. Because of the limitations, touch pens are used for this reason. However, it is actually inconvenient to use the pen for the operation of the device, and also to implement the adjustment function in the OSD while playing back a moving image or still image using the full display device, that is, the latter case. The OSD obscures the currently playing content, which impedes the recognition of the corresponding multimedia content.

본 발명은 터치 스크린을 포함하며 멀티미디어 콘텐츠를 재생할 수 있는 기능을 탑재한 기기에서 터치 스크린에 사용자가 입력하는 패턴의 인식을 이용해서 빠른 실행(Quick Running)을 구현할 수 있도록 하는데 그 목적이 있다.An object of the present invention is to enable a quick running using a recognition of a pattern input by a user on a touch screen in a device including a touch screen and equipped with a function capable of playing multimedia contents.

본 발명은 터치 스크린을 포함하는 멀티미디어 콘텐츠 재생기기에서, 기존의 조절용 UI 기반 기기 조작방법에 비해서 쉽고 빠른 조절기능을 구현하기 위한 방법으로서, 터치 스크린에 사용자가 특정한 패턴을 입력하면 해당 패턴에 따라 미리 약속된 조절기능이 동작되도록 한 패턴 인식 기반의 멀티미디어 재생 제어방법과 그 장치를 제공하는데 목적이 있다.The present invention is a method for implementing an easy and fast adjustment function in the multimedia content playback device including a touch screen, compared to the existing UI-based device operation method, when the user inputs a specific pattern on the touch screen in advance according to the pattern It is an object of the present invention to provide a method and apparatus for controlling multimedia reproduction based on pattern recognition for operating a promised adjustment function.

본 발명은 터치 스크린을 포함하는 멀티미디어 콘텐츠 재생기기에서, 오디오/동영상/정지영상 등의 콘텐츠를 이용하는 경우, 터치 스크린을 이용해서 미리 약속된 조절 기능을 간단하게 사용할 수 있는 방법으로서, 특히 변속 및 탐색제어 (FF/REW), 재생/정지 제어(PLAY/STOP/PAUSE), 음량제어(VOLUME CONTROL), 북마크 처리(BOOK MARK START/STOP) 등의 기능 조절을 별도의 UI가 없는 상황에서도 구현할 수 있는 패턴 인식 기반의 멀티미디어 재생 제어방법과 그 장치를 제공하는데 목적이 있다.The present invention is a method that can easily use a predetermined adjustment function using the touch screen when using a content such as audio / video / still image in a multimedia content playback device including a touch screen, in particular shifting and searching Functions such as control (FF / REW), play / stop control (PLAY / STOP / PAUSE), volume control (VOLUME CONTROL) and bookmark processing (BOOK MARK START / STOP) can be implemented even in the absence of a separate UI. It is an object of the present invention to provide a method and apparatus for controlling multimedia reproduction based on pattern recognition.

상기 목적을 달성하기 위한 본 발명의 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어방법은,Touch screen pattern recognition based multimedia device control method of the present invention for achieving the above object,

터치 스크린을 포함하며, 멀티미디어 콘텐츠의 재생기능을 갖는 기기에 있어서, 멀티미디어 기기의 특정한 조절기능에 대응하는 조절명령으로 인식하기 위한 특정 패턴을 등록하여 저장하는 단계; 터치 스크린을 통해서 입력된 패턴을 인식하여 상기 등록된 특정 패턴과 비교하는 단계; 상기 입력된 패턴이 상기 등록된 패턴과 일치하는 경우 해당 특정 패턴이 지시하는 상기 조절명령에 따라 기기를 제어하는 단계; 를 포함하여 이루어지는 것을 특징으로 한다.A device comprising a touch screen and having a function of playing multimedia content, the device comprising: registering and storing a specific pattern for recognizing an adjustment command corresponding to a specific adjustment function of a multimedia device; Recognizing a pattern input through a touch screen and comparing the pattern with the registered specific pattern; If the input pattern matches the registered pattern, controlling the device according to the adjustment command indicated by the specific pattern; Characterized in that comprises a.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴에 의하여 동영상 재생시의 변속, 탐색, 정지/재생, 음량조절, 회전, 북마크 처리 등의 조절이 수행되는 것을 특징으로 한다.In addition, in the method of controlling a pattern recognition-based multimedia device of the present invention, the control of the shift, search, stop / play, volume control, rotation, bookmark processing, etc., during video playback is performed by the specific pattern.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴에 의하여 정지영상 재생시의 재생정지, 이미지 탐색, 회전 등의 조절이 수행되는 것을 특징으로 한다.In addition, in the pattern recognition-based multimedia device control method of the present invention, it is characterized in that the adjustment of the playback stop, image search, rotation, etc. at the time of still image playback by the specific pattern.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴에 의하여 오디오 재생시의 변속, 탐색, 정지/재생, 음량조절, 북마크 처리 등의 조절이 수행되는 것을 특징으로 한다.In addition, in the method of controlling a pattern recognition-based multimedia device of the present invention, it is characterized in that the adjustment of the shift, search, stop / play, volume control, bookmark processing, etc. during audio playback is performed by the specific pattern.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴은 동일한 하나의 패턴이라고 하더라도 멀티미디어 콘텐츠의 종류에 따라 각각 다른 조절 명령으로 인식될 수 있음을 특징으로 한다.In the method of controlling a pattern recognition-based multimedia device according to the present invention, the specific pattern may be recognized as a different control command according to the type of multimedia content even if the same pattern is used.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴은 터치, 방향성을 갖는 직선이나 곡선 드래그(Drag), 체크(V) 패턴을 사용하는 것을 특징으로 한다.In addition, in the pattern recognition-based multimedia device control method of the present invention, the specific pattern is characterized by using a straight line, curved drag (Drag), check (V) pattern having a touch, directionality.

또한 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법에서, 상기 특정 패턴을 사용자가 정의하여 등록할 수 있도록, 사용자가 터치 스크린을 이용해서 특정 패턴을 구성하는 단계, 상기 구성된 특정 패턴을 기기의 조절기능 중의 하나와 대응시켜 등록하는 단계; 로 이루어진 사용자 정의 패턴 등록과정을 더 포함하는 것을 특징으로 한다.In addition, in the method of controlling a pattern recognition-based multimedia device of the present invention, the user configures a specific pattern by using a touch screen so that the user can define and register the specific pattern. Registering in correspondence with one; It characterized in that it further comprises a custom pattern registration process consisting of.

또한 상기 목적을 달성하기 위한 본 발명의 터치 스크린 패턴 인식 기반의 멀티미디어 기기 제어장치는,In addition, the multimedia device control apparatus based on the touch screen pattern recognition of the present invention for achieving the above object,

터치 스크린을 포함하며, 멀티미디어 콘텐츠의 재생기능을 갖는 기기에 있어서, 영상 디스플레이 및 사용자의 기기 조작을 위한 터치 스크린; 멀티미디어 기기의 특정한 조절기능에 대응하는 조절명령으로 인식하기 위한 특정 패턴을 등록하여 저장하는 패턴 저장수단; 상기 터치 스크린을 통해서 입력된 패턴을 상기 저장된 특정 패턴과 비교하여 상기 입력된 패턴이 상기 등록된 패턴과 일치하는 경우 해당 특정 패턴이 지시하는 상기 조절명령에 따라 기기를 제어하는 제어수단; 상기 제어수단의 제어를 받아 멀티미디어 콘텐츠를 재생하는 재생수단; 을 포함하여 구성된 것을 특징으로 한다.An apparatus comprising a touch screen and having a function of playing multimedia content, the apparatus comprising: a touch screen for displaying an image and manipulating a device; Pattern storage means for registering and storing a specific pattern for recognizing the control command corresponding to the specific control function of the multimedia apparatus; Control means for comparing the pattern input through the touch screen with the stored specific pattern and controlling the device according to the adjustment command indicated by the specific pattern when the input pattern matches the registered pattern; Playback means for playing multimedia content under control of the control means; And a control unit.

또한 본 발명의 패턴 인식 기반 멀티미디어 제어장치에서, 상기 특정 패턴은 멀티미디어 콘텐츠 재생시의 재생/정지, 탐색, 변속제어, 음량조절, 회전, 북마크 처리의 조절 기능에 대응하는 것을 특징으로 한다.In addition, in the pattern recognition-based multimedia control device of the present invention, the specific pattern is characterized in that it corresponds to the control function of playback / stop, search, shift control, volume control, rotation, bookmark processing during multimedia content playback.

이하, 첨부된 도면을 참조하여 본 발명의 패턴 인식 기반 멀티미디어 기기 제어방법 및 그 장치의 실시예를 설명한다.Hereinafter, a method and apparatus for controlling a pattern recognition based multimedia device according to the present invention will be described with reference to the accompanying drawings.

도1은 본 발명에 따른 패턴 인식 기반의 멀티미디어 재생기기의 구성을 보여준다. 도1을 참조하면 본 발명에 따른 멀티미디어 재생기기는, 패턴 인식 및 멀티미디어 콘텐츠의 재생을 제어하는 프로세서(10)와, 영상 디스플레이 및 사용자의 기기 조작 명령을 입력하기 위한 터치 스크린(20)과, 패턴 인식 기반의 멀티미디어 조절기능에 대응하는 특정 패턴 정보가 저장된 패턴 정보 저장부(31)를 포함하는 메모리부(30)와, 상기 프로세서(10)의 제어를 받아 오디오 및 동영상, 정지영상 등의 멀티미디어 콘텐츠를 재생하는 A/V 재생부(40)와, 오디오 신호 출력을 위한 출력장치(50)를 포함하여 구성된다.1 shows a configuration of a pattern recognition based multimedia player according to the present invention. Referring to FIG. 1, a multimedia player according to the present invention includes a processor 10 for controlling pattern recognition and reproduction of multimedia content, a touch screen 20 for inputting an image display, and a device operation command of a user, and a pattern. A memory unit 30 including a pattern information storage unit 31 storing specific pattern information corresponding to a recognition-based multimedia control function, and multimedia contents such as audio, video, and still images under the control of the processor 10; And an output device 50 for outputting an audio signal.

도1에 표현된 멀티미디어 기기의 일반적인 동작부터 살펴본다.The general operation of the multimedia apparatus illustrated in FIG. 1 will now be described.

프로세서(10)는 사용자가 터치 스크린(20)의 디스플레이부(21)에 표시되는 UI를 이용해서 입력하는 기기 조작 명령을 터치 입력부(22)를 통해서 인식하고, 인식된 기기 조작 명령에 따라 메모리부(30)를 구동하여 필요한 데이터를 디스플레이 부(21)에 표시해 주거나 해당 명령에 따른 기기의 동작 제어를 수행한다. 이 때 멀티미디어 콘텐츠에 대한 재생이 요구된 경우에는 A/V 재생부(40)에서 상기 메모리부(30)에 저장된 멀티미디어 콘텐츠를 재생하여 디스플레이부(21)에 표시해주거나, 스피커 등의 출력장치(50)를 통해서 출력해 준다.The processor 10 recognizes, via the touch input unit 22, a device operation command input by a user using a UI displayed on the display unit 21 of the touch screen 20, and according to the recognized device operation command, The controller 30 displays the necessary data on the display unit 21 or controls the operation of the device according to the corresponding command. In this case, when the reproduction of the multimedia content is requested, the A / V playback unit 40 plays the multimedia content stored in the memory unit 30 and displays the multimedia content on the display unit 21 or outputs the device 50 such as a speaker. )

이와 같이 멀티미디어 콘텐츠를 재생하는 중에 사용자가 터치 스크린(20)을 통해서 특정 패턴을 입력하면 프로세서(10)는 입력된 패턴을 인식하고 그 인식된 패턴을 패턴 정보 저장부(31)에 저장된 특정 패턴과 비교하며, 일치되는 특정 패턴이 있으면 그 특정 패턴이 의미하는 특정 조절기능을 수행하게 된다.When the user inputs a specific pattern through the touch screen 20 while playing the multimedia content as described above, the processor 10 recognizes the input pattern and converts the recognized pattern into a specific pattern stored in the pattern information storage unit 31. In comparison, if there is a specific pattern that matches, it performs the specific control function that specific pattern means.

상기 패턴 정보 저장부(31)에 저장되는 특정 패턴과 그 특정 패턴이 의미하게 되는 특정 조절기능의 예를 도2에 표현하였다. 도2에 나타낸 특정 패턴은 예시된 것이며, 본 발명에서 사용되는 특정 패턴은 도2에 표현된 것으로 제한되지는 않는다.2 shows an example of a specific pattern stored in the pattern information storage unit 31 and a specific adjustment function of the specific pattern. The specific pattern shown in FIG. 2 is illustrated, and the specific pattern used in the present invention is not limited to that represented in FIG.

상기 도2에 나타낸 특정 패턴과 그 패턴에 대응하는 조절기능은 사전에 구성되어 패턴 정보 저장부(31)에 저장된다. 상기 특정 패턴은 기기의 제작 단계에서 미리 작성되어 저장될 수도 있지만, 필요에 따라서는 사용자가 직접 특정 패턴을 특정 조절기능에 대응시켜 등록해 주는 방법도 가능하다.The specific pattern shown in FIG. 2 and an adjustment function corresponding to the pattern are configured in advance and stored in the pattern information storage unit 31. The specific pattern may be created and stored in advance in the manufacturing stage of the device, but if necessary, the user may register the specific pattern in correspondence with a specific control function.

즉, 본 발명에서 '패턴 등록모드'를 두고, 사용자가 터치 스크린(20)을 이용해서 사용자가 정의하는 특정한 패턴을 입력하고, 이 것을 기기의 특정한 조절 기능에 대응시켜 주면 프로세서(10)에서 사용자가 정의한 특정 패턴을 사용자가 정의한 특정 조절기능에 등록시켜 패턴 정보 저장부(31)에 저장해 주는 것이다. 이후에 는 사용자가 정의하여 등록시켜 놓은 상기 특정 패턴이 입력되었을 때 그 패턴에 해당하는 사용자 정의 조절기능을 수행하는 것이다. 따라서, 도2에 나타낸 특정 패턴은 그 확장이나 축소가 가능하다.That is, in the present invention, in the pattern registration mode, when the user inputs a specific pattern defined by the user using the touch screen 20 and corresponds this to a specific adjustment function of the device, the user of the processor 10 Registers a specific pattern defined by the user to a specific control function defined by the user and stores it in the pattern information storage unit 31. Subsequently, when the specific pattern registered and registered by the user is input, a user-defined control function corresponding to the pattern is performed. Therefore, the specific pattern shown in Fig. 2 can be expanded or reduced.

도2에 나타낸 특정 패턴들은 동일한 패턴이라고 하더라도 현재 재생중인 멀티미디어 콘텐츠의 종류에 따라 각각 다른 명령으로 인식할 수 있음을 함께 보여주고 있다. 이와 같이 특정 패턴을 현재 재생중인 멀티미디어 콘텐츠의 종류에 따라 적절한 명령으로 인식함으로써, 등록시킬 패턴의 수를 줄이고 메모리 공간을 보다 더 효율적으로 운용할 수 있게 된다.The specific patterns shown in FIG. 2 show that the same patterns can be recognized by different commands depending on the type of multimedia content currently being played. As such, by recognizing a specific pattern with an appropriate command according to the type of multimedia content currently being played, it is possible to reduce the number of patterns to be registered and to operate the memory space more efficiently.

도2에 예시한 특정 패턴과 그에 따른 기기 조절기능을 살펴본다.It looks at the specific pattern illustrated in Figure 2 and the device adjustment function accordingly.

1회 터치(Spot) 패턴의 경우는 동영상 재생(Play)일 경우에 일시정지(Pause)와 복귀(Resume)를 토글(Toggle)로 인식한다. 즉, 1회의 짧은 터치는 현재 재생중인 동영상을 재생 일시정지(Pause)시켜 주고, 다시 1회의 짧은 터치가 이루어지면 일시정지 직전의 상태로 복귀(Resume)시켜 주는 동작을 토글로 수행하는 것이다.In the case of a single touch pattern, pause and resume are recognized as toggles when playing a video. That is, one short touch pauses the playback of the video currently being played and resumes the state immediately before the pause when the first short touch is made.

또한 1회 터치 패턴은 기기가 현재 동영상에 대한 변속 탐색(FF/REW) 중일 경우에는 재생(Play) 명령으로 인식한다. 즉, 현재 동영상에 대한 빨리 감기(FF)나 빨리 되감기(REW)가 수행중인 경우에 1회 터치가 이루어지면 재생(Play)으로 전환시키는 것이다.In addition, the one-touch pattern is recognized as a play command when the device is in the shift search (FF / REW) of the current video. That is, when a single touch is made when fast forwarding (FF) or fast rewinding (REW) is performed on the current video, the screen switches to play.

1회 터치 패턴은 정지영상 재생일 경우는 사용하지 않는 패턴이지만, 오디오 재생 중인 경우에는 마찬가지로 재생 일시정지(Pause)와 복귀(Resume)의 토글 동작으로 인식하며, 오디오의 변속 탐색(FF/REW)인 경우에는 재생(Play) 명령으로 인식 한다. 즉, 현재 오디오에 대한 빨리 감기(FF)나 빨리 되감기(REW)가 수행중인 경우에 1회 터치가 이루어지면 재생(Play)으로 전환시키는 것이다.The one-touch pattern is not used when playing still images, but when audio is being played, it is recognized as a toggle action of Pause and Resume, and audio shift search (FF / REW) is performed. Is recognized as a Play command. That is, when a single touch is made when fast forwarding (FF) or fast rewinding (REW) is performed on the current audio, it is switched to play.

다음, 길게 터치하는 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우, 정지 영상일 경우, 오디오 재생일 경우 모두 정지(Stop)로 인식한다.Next, the case of a long touch pattern will be described. The input of this pattern is recognized as Stop when both the content currently being played is a moving picture, a still picture, and audio playback.

다음, 오른쪽 방향의 드래그(Drag) 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 빨리 감기(FF)의 탐색 조절 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상일 경우에는 다음 순번의 이미지(Next Image)를 탐색하는 명령으로 인식하며, 현재 재생 중인 콘텐츠가 오디오인 경우는 빨리 감기(FF)의 탐색 조절 명령으로 인식한다.Next, the case of the drag pattern in the right direction will be described. Input of this pattern is recognized as a fast forward (FF) search control command when the currently playing content is a video, and as a command to search for the next image when the currently playing content is a still picture. If the content currently being played is audio, it is recognized as a fast forward (FF) search control command.

다음, 왼쪽 방향의 드래그(Drag) 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 빨리 되감기(REW)의 탐색 조절 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상일 경우에는 이전 순번의 이미지(Before Image)를 탐색하는 명령으로 인식하며, 현재 재생 중인 콘텐츠가 오디오인 경우는 빨리 되감기(REW)의 탐색 조절 명령으로 인식한다.Next, look at the case of the drag pattern in the left direction. The input of this pattern is recognized as a search control command for fast rewind (REW) when the currently playing content is a video, and as a command for searching the previous image when the currently playing content is a still image. If the content currently being played is audio, it is recognized as a search adjustment command for fast rewind (REW).

다음, 위쪽 방향의 드래그(Drag) 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 음량 증가(Volume Up) 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상일 경우는 유효하지 않으며, 현재 재생 중인 콘텐츠가 오디오인 경우에는 음량 증가(Volume Up) 명령으로 인식한다.Next, the case of the drag pattern in the upward direction will be described. Input of this pattern is recognized as a Volume Up command when the currently playing content is a video.It is not valid when the currently playing content is a still image.The volume is increased when the currently playing content is audio. Volume Up) command.

다음, 아래 쪽 방향의 드래그(Drag) 패턴인 경우를 살펴본다. 이 패턴의 입 력은 현재 재생 중인 콘텐츠가 동영상일 경우 음량 감소(Volume Down) 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상일 경우는 사용하지 않으며(Invalid), 현재 재생 중인 콘텐츠가 오디오인 경우에는 음량 감소(Volume Down) 명령으로 인식한다.Next, the case of a drag pattern in the downward direction will be described. Input of this pattern is recognized as the Volume Down command when the currently playing content is a video, and is not used when the currently playing content is a still image (Invalid) and when the currently playing content is audio. Is recognized as a Volume Down command.

다음, 시계 방향의 곡선 드래그(CW Drag) 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 시계 방향으로 90도 회전시키는 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상인 경우에도 시계 방향으로 90도 회전시키는 명령으로 인식하며, 현재 재생 중인 콘텐츠가 오디오인 경우는 사용하지 않는다. 즉, 유효하지 않은 패턴이다.Next, the case of the CW drag pattern in the clockwise direction will be described. The input of this pattern is recognized as a command to rotate 90 degrees clockwise when the currently playing content is a video, and as a command to rotate 90 degrees clockwise even when the currently playing content is a still image. Do not use if the content is audio. That is, it is an invalid pattern.

다음, 반시계 방향의 곡선 드래그(CCW Drag) 패턴인 경우를 살펴본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 반시계 방향으로 90도 회전시키는 명령으로 인식하고, 현재 재생 중인 콘텐츠가 정지 영상인 경우에도 반시계 방향으로 90도 회전시키는 명령으로 인식하며, 현재 재생 중인 콘텐츠가 오디오인 경우는 사용하지 않는다.Next, the case of a counterclockwise curved drag pattern will be described. The input of this pattern is recognized as a command to rotate 90 degrees counterclockwise when the currently playing content is a video, and as a command to rotate 90 degrees counterclockwise even when the currently playing content is a still image. Do not use if the content being played is audio.

다음, 체크(V) 형으로 드래그하는 패턴인 경우를 살펴 본다. 이 패턴의 입력은 현재 재생 중인 콘텐츠가 동영상일 경우 및 오디오 재생일 경우에는 북마크의 시작과 중지(Book Mark Start/Stop)로 인식하며, 현재 재생 중인 콘텐츠가 정지 영상일 경우는 사용하지 않는다.Next, look at the case of the pattern dragging to the check (V) type. The input of this pattern is recognized as the start and stop of a bookmark when the currently playing content is a video and the audio playback, and is not used when the currently playing content is a still picture.

지금까지 설명한 바와 같이 본 발명에서 정의되는 특정 패턴과 그에 따른 기기 조절명령(기능조절)은 동일한 패턴이라고 하더라도 현재 재생 중인 콘텐츠의 종 류에 따라 다른 명령으로 인식할 수 있음을 보였다. 또한, 상기 특정 패턴은 제작 단계에서 미리 정의되어 저장된 것을 선택하여 사용할 수도 있지만, 앞서 설명한 바와 같이 사용자가 특정한 패턴을 특정 조절 기능에 대응시켜 등록시켜 주는 방법으로 확장하거나, 혹은 필요하지 않다고 판단되는 패턴을 제거하여 축소시켜 주는 것도 가능하다.As described above, it has been shown that a specific pattern defined in the present invention and a device control command (function control) according to the present invention can be recognized as different commands depending on the type of the content being played even if the same pattern is used. In addition, although the specific pattern may be selected and used in advance in the manufacturing step, it may be used, but as described above, the user may expand or register the specific pattern in correspondence with a specific adjustment function, or the pattern determined to be unnecessary. It can also be reduced by removing.

도2에서 보듯이, 패턴은 각각의 멀티미디어 콘텐츠에 따라 수행하는 조절기능이 다소 차이가 있을 수 있으나, 동일한 패턴에 대하여 현재 어떤 콘텐츠를 재생중인가에 따라 링크(link) 되어야 할 동작만 달라질 뿐이기 때문에 메모리 공간을 효율적으로 사용할 수 있다.As shown in FIG. 2, the pattern may have a slightly different control function according to each multimedia content, but only the operation to be linked depends on which content is currently being played for the same pattern. Therefore, the memory space can be used efficiently.

도3은 동영상, 정지영상, 오디오 재생 시에 터치 스크린을 통해 패턴이 입력되면 미리 입력되어 있는 패턴과 비교하여 유효한 패턴인가를 판별하고, 유효한 패턴이면 해당 조절 기능을 수행하게 되는 일련의 흐름을 보여주고 있다.FIG. 3 shows a series of flows for determining whether a valid pattern is compared with a previously input pattern when a pattern is input through a touch screen when playing a video, still image, or audio, and performing a corresponding adjustment function when the pattern is valid. Giving.

제1 단계(S10)는 패턴 입력단계이다. 즉, 터치 스크린(20)을 통해서 사용자가 특정한 패턴을 입력하는 단계이다.The first step S10 is a pattern input step. That is, the user inputs a specific pattern through the touch screen 20.

제2 단계(S20)는 상기 사용자가 터치 스크린(20)을 이용해서 입력한 특정 패턴을 인식하는 단계이다. 즉, 사용자가 터치 스크린(20) 상에 손이나 펜 등의 터치 오브젝트(Touch Object)를 이용해서 특정한 패턴을 그려 넣으면 이를 인식하는 단계이다.The second step S20 is a step of recognizing a specific pattern input by the user using the touch screen 20. That is, when a user draws a specific pattern on the touch screen 20 using a touch object such as a hand or a pen, the user recognizes this pattern.

제3 단계(S30)는 상기 사용자가 입력한 패턴과 패턴 정보 저장부(31)에 저장된 특정 패턴을 서로 비교하여 사용자 입력 패턴이 유효한 패턴, 즉 사전에 등록되 어 있는 패턴에 해당하는지의 여부를 판별하는 단계이다. 이 단계(S30)의 판별 결과 유효하지 않은 패턴을 입력했다면 오류 메시지를 출력하는 제4 단계(S40)로 이행하여 패턴 입력 오류(인식 불가)를 사용자에게 알려주고 종료한다.The third step S30 compares the pattern input by the user with a specific pattern stored in the pattern information storage unit 31 to determine whether the user input pattern corresponds to a valid pattern, that is, a pattern registered in advance. This step is to determine. If an invalid pattern is inputted as a result of the determination in step S30, the process proceeds to step S40 in which an error message is output, and informs the user of the pattern input error (not recognized) and ends.

그러나, 사용자가 입력한 패턴이 유효한 패턴이라면 제5 단계(S50)로 이행하여 현재 수행중인 동작을 검색한다. 즉, 현재 멀티미디어 콘텐츠를 재생하고 있는 중인지와 멀티미디어 콘텐츠를 재생중이라면 어떤 종류의 콘텐츠를 재생중인가를 판별하는 것이다.However, if the pattern input by the user is a valid pattern, the process proceeds to step S50 to search for an operation currently being performed. That is, it is to determine whether the multimedia content is currently being played and what kind of content is being played if the multimedia content is being played.

제5 단계(S50)의 판별 결과에 따라 다음의 제6 단계(S61,S62,S63) 중의 어느 하나의 조절을 수행한다.According to the determination result of the fifth step S50, one of the following sixth steps S61, S62, and S63 is adjusted.

단계(S61)는 현재 재생 중인 콘텐츠가 동영상인 경우에 해당한다. 현재 재생 중인 콘텐츠가 동영상인 경우에는 앞서 도2를 참조하여 설명한 바와 같이, 인식된 패턴에 따라 프로세서(10)에서 동영상 콘텐츠에 대한 재생, 정지, 변속 탐색, 회전, 음량 증감, 북마크 처리 등의 기기 제어를 수행하게 된다.Step S61 corresponds to a case where the content currently being played is a video. When the currently playing content is a video, as described above with reference to FIG. 2, the processor 10 plays, stops, shifts, rotates, changes the volume, and processes bookmarks for the video content according to the recognized pattern. Control will be performed.

단계(S62)는 현재 재생 중인 콘텐츠가 정지 영상인 경우에 해당한다. 현재 재생 중인 콘텐츠가 정지영상인 경우에는 앞서 도2를 참조하여 설명한 바와 같이, 인식된 패턴에 따라 프로세서(10)에서 정지 영상 콘텐츠에 대한 이미지 탐색, 정지, 음량 증감, 회전 등의 기기 제어를 수행하게 된다.Step S62 corresponds to the case where the content currently being played is a still image. If the content currently being played is a still image, as described above with reference to FIG. 2, the processor 10 performs device control such as image search, stop, volume increase and decrease, and the like for the still image content according to the recognized pattern. Done.

단계(S63)는 현재 재생 중인 콘텐츠가 오디오인 경우에 해당한다. 현재 재생 중인 콘텐츠가 오디오인 경우에는 앞서 도2를 참조하여 설명한 바와 같이, 인식된 패턴에 따라 오디오 콘텐츠에 대한 재생, 정지, 변속 탐색, 음량 증감, 북마크 처 리 등의 기기 제어를 수행하게 된다.Step S63 corresponds to the case where the content currently being played is audio. If the content currently being played is audio, as described above with reference to FIG. 2, device control such as play, stop, shift search, volume increase and decrease, bookmark processing, etc. of the audio content is performed according to the recognized pattern.

지금까지는 멀티미디어 콘텐츠의 재생 조절기능에 대해서 설명하였으나, 본 발명은 콘텐츠 재생과 관련된 제어 이외에도 다른 기능조절에 대해서도 적용할 수 있다. 예를 들어 'X' 패턴을 입력하면 전원을 오프시키는 경우를 들 수 있다. Although the reproduction control function of the multimedia content has been described so far, the present invention can be applied to other function adjustments in addition to the control related to the content reproduction. For example, inputting the 'X' pattern turns off the power.

또한 앞서 설명한 본 발명에서의 '특정 패턴'은 모양으로 정의되는 패턴 뿐만 아니라, 넓은 의미에서 '문자'도 하나의 패턴으로 인식하는 것으로 확장될 수 있다. 예를 들어, 'S'를 현재 재생중인 동영상의 정지(Stpo) 명령으로 인식한다던가, 'F'를 현재 재생 중인 동영상의 빨리감기(FF) 명령으로 인식하는 등의 확장된 패턴 인식도 가능한 것이다.In addition, the 'specific pattern' in the present invention described above may be extended to recognize not only a pattern defined by a shape, but also a 'letter' in a broad sense as a pattern. For example, extended pattern recognition such as recognizing 'S' as a stop (Stpo) command of the currently playing video or recognizing 'F' as a fast forward (FF) command of the currently playing video is also possible.

본 발명의 패턴 인식 기반 멀티미디어 기기 제어 시스템은 제한된 스크린 크기를 갖는 이동 단말기에 특히 유용하다. 즉, 스마트 폰이나 PDA, PMP 등과 같이 터치 스크린을 입력 및 영상 출력장치로 사용하는 단말기에서, 제한된 크기의 스크린에 멀티미디어 콘텐츠를 재생하는 중에 별도의 UI를 위한 화면 전환이나 OSD 등을 사용하지 않고도 간단하게 해당 콘텐츠의 재생 상태의 조절기능을 수행할 수 있기 때문이다.The pattern recognition based multimedia device control system of the present invention is particularly useful for a mobile terminal having a limited screen size. That is, in a terminal that uses a touch screen as an input and video output device such as a smart phone, PDA, or PMP, it is simple without using a screen switching or OSD for playing a multimedia content on a limited size screen. This is because it is possible to adjust the playback state of the corresponding content.

본 발명은 터치 스크린을 갖는 멀티미디어 재생기기에서 사용자가 터치 스크린을 통해서 입력하는 패턴을 특정 기능에 대한 조절 명령으로 인식함으로써, 보다 쉽고 간단하게 특정한 조절기능을 수행할 수 있게 된다.The present invention enables a user to perform a specific adjustment function more easily and simply by recognizing a pattern input by a user through a touch screen as a control command for a specific function in a multimedia player having a touch screen.

또한 본 발명은 터치 스크린이 부착된 멀티미디어 재생기기의 경우 소프트웨 어(도3의 제어 수순)를 탑재함으로써 구현 가능하기 때문에 하드웨어적인 설계와 제작 및 비용 부담이 없는 장점이 있다.In addition, the present invention can be implemented by mounting the software (control procedure of Figure 3) in the case of a multimedia player with a touch screen, there is an advantage that there is no hardware design and production and cost burden.

또한 본 발명에 의하면 간단한 조절기능을 구현하는 데는 터치 펜을 사용하지 않아도 무방하기 때문에 사용이 편리한 장점이 있다.In addition, according to the present invention there is an advantage that it is convenient to use because it does not need to use a touch pen to implement a simple adjustment function.

특히, 본 발명은 AV 출력 기능이 있는 기기의 경우, TV나 오디오 기기와 같은 외부기기와 연결하여 사용할 때, 기기를 쉽게 원격 제어기(Remote Controller)와 같이 사용할 수도 있는 장점이 있다.Particularly, in the case of a device having an AV output function, when the device is used in connection with an external device such as a TV or an audio device, the device may be easily used as a remote controller.

Claims

In the device including a touch screen, having a function of playing multimedia content,

Registering and storing a specific pattern for recognizing the control command corresponding to the specific control function of the multimedia apparatus; Recognizing a pattern input through a touch screen and comparing the pattern with the registered specific pattern; If the input pattern matches the registered pattern, controlling the device according to the adjustment command indicated by the specific pattern; Touch screen pattern recognition based multimedia device control method comprising a.

The method according to claim 1, wherein the control of the shift, search, stop / play, volume control, rotation, bookmark processing, etc., during video playback is performed according to the specific pattern.

The method of claim 1, wherein the controlling of the playback stop, the image search, the rotation, and the like during the playback of the still image is performed by the specific pattern.

The method of claim 1, wherein the shifting, searching, stopping / playing, volume control, bookmark processing, and the like during audio playback are performed by the specific pattern.

The method of claim 1, wherein the specific pattern is recognized as a different control command according to the type of multimedia content even though the specific pattern is the same.

The method of claim 1, wherein the specific pattern uses a touch, a straight line having a directivity, a curved drag, or a check (V) pattern.

The method of claim 1, wherein the user configures a specific pattern by using a touch screen so that the user can define and register the specific pattern, and registering the configured specific pattern in correspondence with one of the adjustment functions of the device. ; Method of controlling a multimedia device based on the touch screen pattern recognition, further comprising a user-defined pattern registration process.

A touch screen for displaying an image and operating a user's device; Pattern storage means for registering and storing a specific pattern for recognizing an adjustment command corresponding to a specific adjustment function of the multimedia apparatus; Control means for comparing the pattern input through the touch screen with the stored specific pattern and controlling the device according to the adjustment command indicated by the specific pattern when the input pattern matches the registered pattern; Playback means for playing multimedia content under control of the control means; Multimedia device control apparatus based on the touch screen pattern recognition, characterized in that configured to include.

The apparatus of claim 8, wherein the specific pattern corresponds to an adjustment function of play / stop, search, shift control, volume control, rotation, and bookmark processing during multimedia content playback. .