KR101457351B1 - multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same - Google Patents

multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same Download PDF

Info

Publication number
KR101457351B1
KR101457351B1 KR1020130059658A KR20130059658A KR101457351B1 KR 101457351 B1 KR101457351 B1 KR 101457351B1 KR 1020130059658 A KR1020130059658 A KR 1020130059658A KR 20130059658 A KR20130059658 A KR 20130059658A KR 101457351 B1 KR101457351 B1 KR 101457351B1
Authority
KR
South Korea
Prior art keywords
operation mode
area
gesture
touch screen
control
Prior art date
Application number
KR1020130059658A
Other languages
Korean (ko)
Inventor
김용석
이재인
전용신
Original Assignee
강원대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 강원대학교산학협력단 filed Critical 강원대학교산학협력단
Priority to KR1020130059658A priority Critical patent/KR101457351B1/en
Application granted granted Critical
Publication of KR101457351B1 publication Critical patent/KR101457351B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Disclosed are a multimedia apparatus using transparent control areas and gesture patterns based on a touchscreen and a multimedia control method using the same. The multimedia apparatus using transparent control areas and gesture patterns based on a touchscreen includes the touchscreen in which the transparent control areas are divided to control video, and which outputs an input signal according to a selection of any one of the transparent control areas by a user′s touch; a processing unit which determines an operation mode according to the input signal, and displays a processing image corresponding to the operation mode on the touchscreen; and a memory unit which stores information and video information according to the operation mode, wherein the operation mode is one of an area operation mode executed according to the transparent control areas and a gesture operation mode executed according to the recognition of the user′s specific gesture.

Description

터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치 및 이를 이용한 멀티미디어 제어 방법{multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same}TECHNICAL FIELD [0001] The present invention relates to a multimedia device using a transparent control area based on a touch screen and a gesture pattern, and a multimedia control method using the multi-

본 발명은 멀티미디어 장치 및 방법에 관한 것으로, 보다 상세하게는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치 및 이를 이용한 멀티미디어 제어 방법에 관한 것이다.
The present invention relates to a multimedia device and method, and more particularly, to a multimedia device using a transparent control area based on a touch screen and a gesture pattern, and a multimedia control method using the same.

터치 스크린을 포함하는 PC나 PDA, 스마트 폰, PMP(휴대용 멀티미디어 재생기), MP3 플레이어 등이 보급되고 있다. 이들 기기에서는 오디오 뿐만 아니라, 동영상이나 정지 영상 등의 멀티미디어 콘텐츠(Multimedia Contents)를 재생하는 기능이 보편화되어 있다.PCs, PDAs, smart phones, PMPs (portable multimedia players), and MP3 players, including touch screens, are becoming popular. In these devices, not only audio but also a function of reproducing multimedia contents (multimedia contents) such as moving images and still images are widely used.

이러하나 콘텐츠들은 그 특성상, 재생(Play), 정지(Stop), 일시정지(Pause), 빨리감기(FF), 빨리 되감기(REW), 음량증가(Volum Up), 음량 감소(Volum Down), 영상회전(Rotate) 등의 조절 기능이 반드시 수반된다.These contents are characterized by their characteristics such as Play, Stop, Pause, FF, REW, Volum Up, Volum Down, Rotation and other control functions must be accompanied.

기존의 터치 스크린을 포함하는 멀티미디어 재생기능을 갖는 기기에서는 사용자가 기긱의 터치 스크린 상에 구현된 특징 항목을 억세스(Access) 함으로써 상기한 여러 가지 조절 기능을 사용할 수 있게 되어 있다.In a device having a multimedia playback function including an existing touch screen, the user can access the feature items implemented on the touch screen of the device to use various control functions as described above.

따라서, 멀티미디어 기기에서 콘텐츠를 재생할 경우에는 상기 조절 기능을 위한 사용자 인터페이스(UI)를 항상 디스플레이 장치에 보여주는 방법을 사용하던가, 혹은 사용자가 원하는 시점에서 상기 조절 기능을 위한 UI를 화면에 나타내 주는 방법(예를 들면 OSD 기능 사용)을 사용해야 한다.Accordingly, in the case of reproducing the contents from the multimedia device, a method of always displaying the UI for the adjustment function on the display device, or a method of displaying the UI for the adjustment function on the screen at a desired point of time For example using the OSD function).

그런데 전자의 방법은 디스플레이 장치를 비효율적으로 사용하기 때문에 후자의 방법을 더 많이 사용하고 있다.However, the former method uses the latter method more because it uses the display device inefficiently.

이러한 방법들 모두, 조절 기능을 실행하기 위해서 특정 위치 상에 나타낸 UI를 엑세스(Access)해야 한다. 그렇지만 휴대성과 이동성에 기반한 단말기의 경우 그 특성상 디스플레이 장치(터치 스크린 장치)의 크기가 제한될 수 밖에 없고, 이와 같이 디스플레이 장치의 크기가 작은 기기에서는 UI의 크기 또한 작아질 수 밖에 없는 구조 상의 제약이 있기 때문에, 이러한 이유로 터치 스크린용 펜을 사용하고 있다. All of these methods require access to the UI displayed at a specific location to perform the adjustment function. However, in the case of a terminal based on portability and mobility, the size of a display device (a touch screen device) is inevitably limited. In the case of a device having a small display device, the size of the UI is also limited. Because of this, the pen for the touch screen is used for this reason.

그렇지만, 기기 조작을 위해서 일일이 펜을 사용해야 하는 것은 사실상 불편한 것이며, 또한 디스플레이 장치 전체(Full Screen)를 이용하여 동영상이나 정지영상을 재생하면서 동시에 조절 기능을 OSD로 구현하는 경우, 즉 후자의 경우는 현재 재생중인 콘텐츠를 OSD가 가리게 되어 해당 멀티미디어 콘테츠 인식에 장애가 되는 문제점이 있다.
However, it is actually inconvenient to use a pen for the operation of the apparatus. In addition, when a video or still image is reproduced using the full screen of the display device and the adjustment function is implemented by the OSD, There is a problem that the OSD obstructs the recognition of the multimedia contents.

한국공개특허 제10-2008-0104858호Korean Patent Laid-Open No. 10-2008-0104858 한국공개특허 제10-2006-0085850호Korean Patent Publication No. 10-2006-0085850 한국공개특허 제10-2011-0063985호Korean Patent Publication No. 10-2011-0063985 한국공개특허 제10-2011-0034740호Korean Patent Publication No. 10-2011-0034740 한국공개특허 제10-2011-0065615호Korean Patent Publication No. 10-2011-0065615

본 발명이 해결하고자 하는 과제는 터치 스크린을 포함하며 멀티미디어 콘텐츠를 재생할 수 있는 기능을 탑재한 기기에서 터치 스크린에 제어 영역 및 사용자가 입력하는 패턴의 인식을 이용해서 빠른 실행(Quick Running)을 구현할 수 있도록 하는데 그 목적이 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a device capable of reproducing multimedia contents including a touch screen and capable of implementing Quick Running using a control region and a pattern recognition input by a user on a touch screen It has its purpose.

본 발명은 터치 스크린을 포함하는 멀티미디어 콘텐츠 재생기기에서, 기존의 조절용 UI 기반 기기 조작방법에 비해서 쉽고 빠른 조절기능을 구현하기 위한 방법으로서, 터치 스크린에 사용자가 특정한 패턴을 입력하면 해당 패턴에 따라 미리 약속된 조절기능이 동작되는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치 및 방법을 제공하는 데 그 목적이 있다.The present invention relates to a method for implementing an easy and quick adjustment function in a multimedia content playback device including a touch screen as compared to a conventional UI-based device manipulation method for controlling the user. When a user inputs a specific pattern on a touch screen, It is an object of the present invention to provide a multimedia device and method using a transparent control area based on a touch screen and a gesture pattern in which a predetermined adjustment function is operated.

본 발명은 별도의 UI가 없는 상황에서도 구현할 수 있는 제어 영역별 및 패턴 인식을 이용한 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치 및 방법을 제공하는 데 그 목적이 있다.
An object of the present invention is to provide a multimedia device and method using a gesture pattern and a transparent control area based on a touch screen using a control area and pattern recognition, which can be implemented even without a separate UI.

상기 과제를 해결하기 위한 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치는 동영상을 제어하기 위한 복수 개의 투명 제어 영역이 구획되고, 사용자의 터치를 통해 상기 복수 개의 투명 제어 영역 중 어느 하나에서 발생되는 입력 신호를 출력하는 터치 스크린(100); 상기 입력 신호에 따른 동작 모드를 판단한 후, 상기 동작 모드에 해당하는 처리 영상을 상기 터치 스크린(100) 상에서 구현하는 처리부(200); 및 상기 동작 모드에 따른 정보와 상기 동영상이 저장된 메모리 부(300);를 포함하고, 상기 동작 모드는, 상기 투명 제어 영역에 발생되는 터치 신호로 구동되는 영역별 동작 모드와 사용자의 특정 제스처 인식에 따라 구동되는 제스처 동작 모드를 포함하는 것을 특징으로 한다.
According to an aspect of the present invention, there is provided a multimedia device using a touch screen-based transparent control area and a gesture pattern, the multimedia device including a plurality of transparent control areas for controlling moving pictures, A touch screen 100 for outputting an input signal generated in any one of the transparent control areas; A processing unit (200) for determining an operation mode according to the input signal and implementing a processed image corresponding to the operation mode on the touch screen (100); And a memory unit (300) in which the information according to the operation mode and the moving image are stored, wherein the operation mode is a mode in which the operation mode for each region driven by the touch signal generated in the transparent control region and the specific gesture recognition And a gesture operation mode driven in accordance with the gesture.

삭제delete

상기 터치 스크린(100)은 표면에 가해지는 압력에 반응하는 센서를 이용하여 사용자 조작에 의한 터치(touch) 또는 드래그(drag)를 감지하는 터치 감지부(110)를 포함하는 것을 특징으로 한다.
The touch screen 100 includes a touch sensing unit 110 for sensing a touch or a drag by a user's operation using a sensor responsive to a pressure applied to a surface.

상기 터치 감지부(110)는 감압식, 정전식, 적외선방식, 초음파방식, 광학방식 및 변형률계(Strain Gauge) 방식 중 어느 하나의 방식으로 동작되는 것을 특징으로 한다.
The touch sensing unit 110 may be operated in any one of a depressurization type, an electrostatic type, an infrared type, an ultrasonic type, an optical type, and a strain gauge type.

상기 처리부(200)는 상기 입력신호에 따른 좌표 또는 제스처 패턴을 인식한 후, 상기 좌표 또는 제스처 패턴에 해당되는 처리 신호를 출력하는 좌표/패턴인식 부(210); 상기 처리 신호에 따라 상기 영역별 동작 모드와 상기 제스처 동작 모드 중 어느 하나를 판단한 후, 해당 모드의 구동 신호 및 상기 구동 신호의 상응하는 데이터를 메모리 부로부터 호출하는 MCU(220); 상기 구동 신호 및 호출된 상기 데이터를 수신하여 상기 터치 스크린(100) 상에 구현하는 A/V 재생부(230);를 포함하는 것을 특징으로 한다.
The processor 200 recognizes a coordinate or a gesture pattern according to the input signal and then outputs a processing signal corresponding to the coordinate or the gesture pattern. An MCU (220) for determining one of the operation mode for each area and the gesture operation mode according to the processing signal and then calling the corresponding data of the driving signal and the driving signal from the memory unit; And an A / V reproducing unit 230 receiving the driving signal and the called data and implementing the same on the touch screen 100.

상기 MCU(220)는 상기 처리 신호에 따라 상기 영역별 동작 모드의 동작 신호인 제1 동작 신호 또는 상기 제스처 동작 모드의 동작 신호인 제2 동작 신호를 출력하는 모드 선택부(221); 상기 제1 동작 신호를 수신하여 동작되고, 상기 좌표에 상응하는 상기 제어 영역의 해당 데이터의 저장 위치값을 상기 메모리 부로 출력하여 상기 좌표에 해당되는 데이터를 상기 메모리 부에서 취득하는 제1 동작 모듈(222); 및 상기 제2 동작 신호를 수신하여 동작되고, 상기 제스처 패턴에 상응하는 해당 데이터의 저장 위치값을 상기 메모리 부로 출력하여 상기 제스처 패턴에 해당되는 데이터를 상기 메모리 부에서 취득하는 제2 동작 모듈(223);을 포함하는 것을 특징으로 한다.
The MCU 220 includes a mode selection unit 221 for outputting a first operation signal, which is an operation signal of the per-area operation mode, or a second operation signal, which is an operation signal of the gesture operation mode, according to the process signal; A first operation module that is operated by receiving the first operation signal and outputs the storage position value of the corresponding data of the control area corresponding to the coordinate to the memory unit and acquires data corresponding to the coordinates from the memory unit 222); And a second operation module (223) which is operated by receiving the second operation signal and outputs a storage position value of the corresponding data corresponding to the gesture pattern to the memory unit to acquire data corresponding to the gesture pattern from the memory unit ). ≪ / RTI >

상기 메모리 부(300)는, 동영상이 저장된 동영상 저장부(310); 상기 제어 영역에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제1 맵핑 테이블 저장부(320); 및 상기 제스처 패턴에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제2 맵핑 테이블 저장부(330)를 포함하고, 상기 제1 맵핑 테이블 저장부(320) 및 상기 제2 맵핑 테이블 저장부(330)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리, 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체인 것을 특징으로 한다.
The memory unit 300 includes a moving picture storage unit 310 in which moving pictures are stored; A first mapping table storage unit 320 in which control command data corresponding to the control area is stored as a mapping table; And a second mapping table storage unit (330) storing control command data corresponding to the gesture pattern as a mapping table. The first mapping table storage unit (320) and the second mapping table storage unit (330) A flash memory type, a hard disk type, a multimedia card micro type, a card type memory, a random access memory (RAM), a static random access memory (SRAM) A read only memory (ROM), an electrically erasable programmable read-only memory (EEPROM), a programmable read-only memory (PROM) magnetic memory, a magnetic disk, and an optical disk.

상기 터치 스크린(100)은 전체 영역 상에, 동영상 선택 영역, 옵션 영역, 재생/일시정지 영역, 재생위치 선택 영역, 앞으로 가기 영역, 뒤로 가기 영역이 투명하게 분할 구획되는 것을 특징으로 한다.
The touch screen 100 is characterized in that the moving picture selection area, the option area, the playback / pause area, the reproduction position selection area, the forward area, and the back area are divided in a transparent manner on the entire area.

상기 제1 맵핑 테이블 저장부(320)는 복수 개의 제어 명령을 맵핑 테이블로 저장하며, 상기 제어명령은 재생, 정지, 일시정지, 앞으로 감기, 뒤로 감기, 앞으로 건너뛰기, 뒤로 건너뛰기, 배속, 음량조절 중 적어도 하나를 포함하는 것을 특징으로 한다.
The first mapping table storage unit 320 stores a plurality of control commands in a mapping table, and the control commands include a playback command, a playback command, a playback command, a playback command, a playback command, And / or regulation.

상기 제2 맵핑 테이블 저장부(330)는 사용자의 특정 제스처 패턴 정보를 맵핑 테이블로 저장하며, 상기 제스처 패턴 정보는 문자, 숫자, 도형 중 적어도 하나를 포함하는 것을 특징으로 한다.
The second mapping table storage unit 330 stores the specific gesture pattern information of the user as a mapping table, and the gesture pattern information includes at least one of letters, numbers, and graphics.

상기 과제를 해결하기 위한 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법은 상기 터치 스크린 상에 영역별 동작 모드 및 제스처 동작 모드 중 어느 하나의 동작 모드를 선택하는 선택 단계; 상기 영역별 동작 모드 또는 상기 제스처 동작 모드 수행 시, 상기 멀티미디어 제어에 필요한 제어 명령을 각 동작 모드에 맞게 설정하는 설정 단계; 상기 터치 스크린 상에 발생되는 터치 정보에 따라 상기 영역별 동작 모드 또는 상기 제스처 동작 모드를 인식하는 인식 단계; 및 각 동작 모드에 맞게 설정된 상기 제어 명령에 따라 상기 멀티미디어를 상기 터치 스크린 상에 표시하는 표시 단계를 포함하는 것을 특징으로 한다.
According to an aspect of the present invention, there is provided a multimedia control method using a transparent control region and a gesture pattern based on a touch screen, the method comprising: selecting one of an operation mode for each region and a gesture operation mode on the touch screen; ; Setting a control command necessary for the multimedia control according to each operation mode when the per-area operation mode or the gesture operation mode is performed; A recognizing step of recognizing the per-area operation mode or the gesture operation mode according to the touch information generated on the touch screen; And a display step of displaying the multimedia on the touch screen according to the control command set for each operation mode.

상기 설정 단계는 상기 영역별 동작 모드 시, 표시부 내에 구획된 투명 제어 영역의 위치를 사용자가 선택적으로 배치하는 단계를 포함하는 것을 특징으로 한다.
And the setting step includes the step of the user selectively arranging the position of the transparent control area partitioned in the display part in the operation mode for each area.

상기 설정 단계는 상기 제스처 동작 모드 시, 상기 멀티미디어 제어에 필요한 제어 명령을 사용자의 특정 제스처 패턴으로 저장하는 단계를 포함하는 것을 특징으로 한다.
And the setting step may include storing the control command necessary for the multimedia control in a specific gesture pattern of the user in the gesture operation mode.

본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법을 수행하는 프로그램이 기록된 컴퓨터 판독이 가능한 기록 매체는 상기 터치 스크린 상에 영역별 동작 모드 및 제스처 동작 모드 중 어느 하나의 동작 모드를 선택하는 선택 단계; 상기 영역별 동작 모드 또는 상기 제스처 동작 모드 수행 시, 상기 멀티미디어 제어에 필요한 제어 명령을 각 동작 모드에 맞게 설정하는 설정 단계; 상기 터치 스크린 상에 발생되는 터치 정보에 따라 상기 영역별 동작 모드 또는 상기 제스처 동작 모드를 인식하는 인식 단계; 및 각 동작 모드에 맞게 설정된 상기 제어 명령에 따라 상기 멀티미디어를 상기 터치 스크린 상에 표시하는 표시 단계를 기록한 코드를 포함한다.
A computer readable recording medium on which a program for performing a multimedia control method using a transparent control region based on a touch screen and a gesture pattern according to an exemplary embodiment of the present invention is recorded, A selecting step of selecting any one of the operation modes; Setting a control command necessary for the multimedia control according to each operation mode when the per-area operation mode or the gesture operation mode is performed; A recognizing step of recognizing the per-area operation mode or the gesture operation mode according to the touch information generated on the touch screen; And a display step of displaying the multimedia on the touch screen according to the control command set for each operation mode.

본 발명에 따르면, 동영상 재생 중에 화면 상에 배치된 동영상 제어 인터페이스를 화면 전체 영역에 분산 배치하되, 상기 동영상 제어 인터페이스는 투명 제어 영역으로 설계함으로써, 사용자는 투명 제어 영역의 터치만을 이용하여 동영상의 재생을 제어할 수 있으며, 또한, 동영상이 재생되는 화면상에 사용자의 특정 제스처 패턴을 입력하여 재생 중인 동영상을 제어할 수 있다.According to the present invention, the moving image control interface disposed on the screen during the moving image reproduction is distributed and arranged in the entire area of the screen. By designing the moving image control interface as the transparent control area, In addition, it is possible to input a specific gesture pattern of a user on a screen on which a moving image is reproduced, thereby controlling a moving image.

따라서, 본 발명은 동영상이 재생 중인 화면상에 나타나는 조작 인터페이스를 투명 조작 인터페이스로 대체하여 사용자의 동영상 감상을 향상시켜주며, 기존의 조작 인터페이스는 화면의 일 부분에 국한되어 조작에 따른 터치의 실수가 발생되었으나, 본 발명은 화면 전체에 동영상을 제어하기 위한 투명 제어 영역이 설정되어 터치에 따른 실수를 현저히 줄여줄 수 있다.Therefore, the present invention can improve the user's appreciation of moving pictures by replacing the operation interface appearing on the screen during reproduction of the moving picture with the transparent operation interface. The existing operation interface is limited to a part of the screen, However, according to the present invention, a transparent control area for controlling a moving picture is set in the entire screen, thereby making it possible to significantly reduce the number of mistakes due to a touch.

또한, 간단한 조절기능을 구현하는 데는 터치 펜을 사용하지 않아도 무방하기 때문에 사용이 편리한 장점이 있다.In addition, there is an advantage that it is convenient to use because it is not necessary to use a touch pen to implement a simple adjustment function.

또한, 소규모의 제한된 스크린 크기를 갖는 이동 단말기에 특히 유용하다. 즉, 스마트 폰이나 PDA, PMP 등과 같이 터치 스크린을 입력 및 영상 출력장치로 사용하는 단말기에서, 제한된 크기의 스크린에 멀티미디어를 재생하는 중에 별도의 UI를 위한 화면 전환이나 OSD 등을 사용하지 않고도 간단하게 해당 멀티미디어의 재생 상태의 조절을 용이하게 수행할 수 있다는 이점이 있다.
It is also particularly useful for mobile terminals with a small, limited screen size. In other words, in a terminal using a touch screen as an input and a video output device such as a smart phone, a PDA, and a PMP, it is possible to easily and conveniently display multimedia contents on a limited size screen without using a screen switching or OSD for a separate UI There is an advantage that it is possible to easily control the reproduction state of the multimedia.

도 1은 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치를 나타낸 블럭도이다.
도 2는 도 1에 도시된 터치 스크린 상에 구획된 투명 제어 영역들을 나타낸 일 예시도이다.
도 3은 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법을 설명하기 위한 플로우 차트이다.
도 4는 영역별 동작 모드를 선택하기 위한 가이드 정보의 일 예를 나타낸 예시도이다.
도 5는 영역별 동작 모드 선택 후, 나타나는 가이드 정보의 일 예를 나타낸 예시도이다.
도 6은 제스처 동작 모드를 선택하기 위한 가이드 정보의 일 예를 나타낸 예시도이다.
도 7은 제스처 동작 모드 선택 후, 터치 스크린 상에 나타나는 가이드 정보의 일 예를 나타낸 예시도이다.
도 8은 영역별 동작 모드로 수행되는 상태에서 사용자가 동영상 조작을 수행하는 일 예를 나타낸 도면이다.
도 9는 제스처 동작 모드로 수행되는 상태에서 사용자가 동영상 조작을 수행하는 일 예를 나타낸 도면이다.FIG. 1 is a block diagram illustrating a multimedia device using a transparent control area based on a touch screen and a gesture pattern according to an exemplary embodiment of the present invention. Referring to FIG.
FIG. 2 is an exemplary view showing transparent control areas partitioned on the touch screen shown in FIG. 1. FIG.
3 is a flowchart illustrating a multimedia control method using a transparent control area based on a touch screen and a gesture pattern according to an embodiment of the present invention.
4 is an exemplary view showing an example of guide information for selecting an operation mode for each area.
5 is an exemplary view showing an example of guide information appearing after selecting an operation mode for each area.
6 is an exemplary view showing an example of guide information for selecting a gesture operation mode.
7 is an exemplary view showing an example of guide information appearing on the touch screen after the gesture operation mode is selected.
8 is a diagram illustrating an example of a user performing a moving picture operation in a state of being performed in a region-specific operation mode.
9 is a diagram illustrating an example of a user performing a moving picture operation in a gesture operation mode.

이하, 본 발명의 바람직한 실시 예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a detailed description of preferred embodiments of the present invention will be given with reference to the accompanying drawings. In the following description of the present invention, detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

본 발명의 개념에 따른 실시 예는 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있으므로 특정 실시 예들을 도면에 예시하고 본 명세서 또는 출원에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예를 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
Embodiments in accordance with the concepts of the present invention can make various changes and have various forms, so that specific embodiments are illustrated in the drawings and described in detail in this specification or application. It is to be understood, however, that it is not intended to limit the embodiments according to the concepts of the present invention to the particular forms of disclosure, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between. Other expressions that describe the relationship between components, such as "between" and "between" or "neighboring to" and "directly adjacent to" should be interpreted as well.

본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. The singular expressions include plural expressions unless the context clearly dictates otherwise. In this specification, the terms "comprises ",or" having ", or the like, specify that there is a stated feature, number, step, operation, , Steps, operations, components, parts, or combinations thereof, as a matter of principle.

이하 도면을 참조하여 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치를 설명하도록 한다.Hereinafter, a multimedia device using a touch screen-based transparent control area and a gesture pattern according to an embodiment of the present invention will be described with reference to the drawings.

도 1은 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치를 나타낸 블럭도이다.FIG. 1 is a block diagram illustrating a multimedia device using a transparent control area based on a touch screen and a gesture pattern according to an exemplary embodiment of the present invention. Referring to FIG.

도 2는 도 1에 도시된 터치 스크린 상에 구획된 제어 영역들을 나타낸 일 예시도이다.FIG. 2 is an exemplary view showing control areas partitioned on the touch screen shown in FIG. 1. FIG.

도 1에 도시된 바와 같이, 본 발명의 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치는 터치 스크린(100), 처리부(200), 메모리 부(300)를 포함한다.As shown in FIG. 1, the multimedia device using the touch screen-based transparent control area and the gesture pattern of the present invention includes a touch screen 100, a processing unit 200, and a memory unit 300.

상기 터치 스크린(100)은 동영상을 제어하기 위한 복수 개의 투명 제어 영역이 구획되고, 사용자의 터치를 통해 상기 복수 개의 투명 제어 영역 중 어느 하나의 선택에 따른 입력 신호를 출력한다.The touch screen 100 is divided into a plurality of transparent control areas for controlling moving images and outputs an input signal according to a selection of one of the plurality of transparent control areas through a touch of a user.

상기 처리부(200)는 상기 입력 신호에 따른 동작 모드를 판단한 후, 상기 동작 모드에 해당하는 처리 영상을 상기 터치 스크린 상에서 구현하는 기능을 수행한다.The processing unit 200 determines an operation mode according to the input signal, and then implements a processing image corresponding to the operation mode on the touch screen.

상기 동작 모드는 상기 투명 제어 영역에 따라 구동되는 영역별 동작 모드와 사용자의 특정 제스처 인식에 따라 구동되는 제스처 동작 모드 중 어느 하나를 포함한다.Wherein the operation mode includes any one of a region-specific operation mode driven according to the transparent control region and a gesture operation mode driven according to a user's specific gesture recognition.

보다 구체적으로, 상기 동작 모드는 동영상 재생 중에 동작되는 모드로서, 기존의 화면 상에 위치하는 동영상 제어를 위한 인터페이스의 존재 없이 동영상 재생 중에 기 설정된 투명 제어 영역의 터치만을 이용하여 동영상을 제어하는 모드일 수 있다.More specifically, the operation mode is a mode operated during moving picture playback, and is a mode for controlling a moving picture using only a touch of a transparent control area preset during moving picture playback without the existence of an interface for moving picture control located on an existing screen .

예를 들어, 영역별 동작 모드는 동영상 재생이 되는 터치 스크린 상에 사용자가 기 설정된 투명 제어 영역을 터치함에 따라 터치 스크린상에 재생되는 해당 동영상을 제어하는 방식이다.For example, the area-specific operation mode controls a corresponding moving image to be reproduced on the touch screen by touching a predetermined transparent control area on the touch screen, which is a moving image reproduction.

또한, 상기 제스처 동작 모드는 동영상 재생 중에 동작되는 모드로서, 기존의 화면 상에 위치하는 동영상 제어를 위한 인터페이스의 존재 없이 동영상 재생 중에 터치 스크린 상에 사용자의 특정 제스처 패턴을 통해 터치 스크린 상에 재생되는 해당 동영상을 제어하는 방식이다.The gesture operation mode is a mode in which the gesture operation mode is operated during moving picture playback and is reproduced on the touch screen through the user's specific gesture pattern on the touch screen during the moving picture playback without the existence of an interface for controlling the moving picture located on the existing screen It controls the video.

이하에서 각 동작 모드의 조작 방법에 대해 보다 상세하게 설명하도록 한다.
Hereinafter, an operation method of each operation mode will be described in more detail.

상기 메모리 부(300)는 각 동작 모드에 따른 동영상 제어 명령 및 동영상 정보가 저장된다.The memory unit 300 stores moving picture control commands and moving picture information according to each operation mode.

보다 구체적으로, 상기 터치 스크린(100)은 영상을 디스플레이하고, 또한 터치 스크린 표면에 가해지는 압력에 반응하는 센서 등을 이용하여 사용자 조작에 의한 터치(touch)나 드래그(drag)등을 감지하고, 상기 영역별 동작 모드와 제스처 동작 모드에 따른 조작 화면 및 소정 형태의 가이드 정보를 디스플레이 한다. 이때 터치 스크린상에서 터치 감지 방법은 압력 방식이나 정전용량 방식 등을 이용할 수 있다.More specifically, the touch screen 100 displays an image and detects a touch or a drag by a user operation using a sensor or the like which responds to a pressure applied to the surface of the touch screen, An operation screen according to the area-specific operation mode and the gesture operation mode, and guide information of a predetermined form. At this time, the touch sensing method on the touch screen can use a pressure method, a capacitance method, or the like.

상기 터치 스크린(100)은 터치 감지부(110) 및 표시부(120)를 포함한다.The touch screen 100 includes a touch sensing unit 110 and a display unit 120.

상기 표시부(120)는 도 2를 참조하면, 표면 전체 영역이 복수 개의 투명 제어 영역들로 구성되며, 동영상 선택 영역, 옵션 영역, 재생/일시정지 영역, 재생위치 선택 영역, 앞으로 가기 영역, 뒤로 가기 영역 등이 투명하게 분할 구획된다.Referring to FIG. 2, the display unit 120 includes a plurality of transparent control areas, and includes a video selection area, an option area, a playback / pause area, a playback position selection area, a forward area, Area and the like are transparently divided and partitioned.

각 투명 제어 영역의 구획의 크기는 고정값을 갖도록 설정되며, 각 투명 제어 영역은 특정 위치 번호가 부여된다. 예를 들어, 동영상 선택의 위치는 1, 옵션의 위치는 2, 뒤로 가기는 3, 앞으로 가기는 4, 재생 위치 선택의 위치는 6, 재생/일시정지의 위치는 5로 설정된다. 다만, 각 투명 제어 영역의 배치는 사용자의 선택에 따라 조절할 수 있다.The size of each transparent control area is set to have a fixed value, and each transparent control area is given a specific position number. For example, the position of the video selection is set to 1, the position of the option is set to 2, the backward to 3, the forward to 4, the position of the playback position to 6, and the position of the playback / However, the arrangement of each transparent control area can be adjusted according to the user's selection.

예를 들어, 동영상 선택의 위치는 5, 옵션의 위치는 3, 뒤로 가기는 2, 앞으로 가기는 4, 재생 위치 선택의 위치는 1, 재생/일시정지의 위치는 6으로 사용자가 재 설정 가능하며, 이에 대한 구체적인 조작 설명은 아래에서 설명하도록 한다.
For example, the user can reset the video selection position to 5, the option position to 3, the backward to 2, the forward to 4, the playback position selection to 1, and the play / A detailed description of the operation will be described below.

상기 터치 감지부(110)는 사용자의 터치를 감지하여 감지된 지점의 투명 제어 영역에 따른 입력신호를 출력하는 기능을 수행하며, 상기 입력신호는 좌표신호로 출력된다.The touch sensing unit 110 senses a user's touch and outputs an input signal corresponding to a transparent control region of the sensed point, and the input signal is output as a coordinate signal.

보다 구체적으로, 상기 터치 감지부(110)는 감압식, 정전식 및 적외선 방식 중 어느 하나의 방식으로 동작될 수 있다.More specifically, the touch sensing unit 110 may be operated in any one of a depressurization type, an electrostatic type, and an infrared type.

상기 터치 감지부(110)가 감압식 감지부일 경우, 터치 스크린에 가해지는 물리적 압력에 의해 터치 스크린 내부의 저항값과 전류 변화가 발생하게 되고, 이를 기초로 터치된 지점의 좌표를 측정하는 방식이다.When the touch sensing unit 110 is a pressure sensitive type sensing unit, a resistance value and a current change are generated inside the touch screen due to the physical pressure applied to the touch screen, and the coordinate of the touched point is measured based on the resistance value.

상기 터치 감지부(110)가 정전식 감지부일 경우, 사용자가 손가락으로 터치 스크린을 터치하게 되면, 터치 스크린에 흐르던 전류가 손가락으로 이동하게 되고, 이를 기초로 발생된 전류의 변화를 감지해 터치된 지점의 좌표를 측정하는 방식으로 동작한다.When the touch sensing unit 110 is an electrostatic sensing unit, when a user touches the touch screen with a finger, a current flowing through the touch screen is moved by the finger, and a change in the current generated based on the current is sensed, It works by measuring the coordinates of the point.

상기 터치 감지부(110)가 적외선방식 감지부일 경우, 적외선이 직진성을 가지고 있어서, 장애물이 있으면 차단되어 진행하지 못하는 속성을 활용한다. 따라서, 사용자가 터치 스크린을 터치하게 되면, 터치 스크린 중 사용자가 터치한 부분에 의해 가로방향과 세로방향에서 나오는 적외선이 차단되고, 이를 기초로 차단된 부분의 X, Y좌표를 읽어 사용자가 터치한 지점의 좌표를 측정하도록 동작한다.When the touch sensing unit 110 is an infrared type sensing unit, the infrared ray has a straight-line property, and if there is an obstacle, the touch sensing unit 110 utilizes the property that it can not proceed because it is blocked. Accordingly, when the user touches the touch screen, the infrared rays coming from the horizontal direction and the vertical direction are blocked by the portion touched by the user of the touch screen, and based on the read X and Y coordinates of the blocked portion, And to measure the coordinates of the point.

물론, 이상에서의 설명은 예시적 사항에 불과하며, 본 발명의 터치 감지부(110)는 감압식, 정전식, 적외선방식 중 어느 하나의 방식으로 동작된다고 설명하였으나, 이외의 다른 감지 방법을 이용하여 사용자의 터치를 감지할 수도 있음은 물론이다.It is to be understood that the above description is merely exemplary and that the touch sensing unit 110 of the present invention is operated in any one of a depressurization type, an electrostatic type, and an infrared type, It is needless to say that the touch of the user can be detected.

이에 대한 예로는, 초음파방식, 광학방식 및 변형률계(Strain Gauge) 방식 등을 들 수 있다.Examples thereof include an ultrasonic wave method, an optical method, and a strain gauge method.

초음파방식은 터치 스크린의 네 꼭지점에 음파 발신기와 음파 수신기를 장착한 뒤 반사경으로 터치 스크린의 표면에 좌표평면을 만들어, 화면을 터치하려는 물체가 일으키는 파장의 교란으로 좌표를 측정하는 방식이다.The ultrasonic method is a method of measuring the coordinates by disturbance of the wavelength caused by the object to be touched by making a coordinate plane on the surface of the touch screen by attaching a sound wave transmitter and a sound wave receiver to the four vertices of the touch screen.

광학방식은 적외선 조명이 화면을 터치하려는 물체의 그림자를 생성하면, 터치 스크린의 꼭지점에 장착된 적외선 카메라가 이를 촬영하여, 촬영된 그림자를 기초로 좌표를 측정하는 방식이다.In the optical system, when an infrared light generates a shadow of an object to be touched by a screen, the infrared camera mounted on the vertex of the touch screen captures the touched point and measures coordinates based on the taken shade.

변형률계(Strain Gauge) 방식은, 터치 스크린의 네 꼭지점에 장착된 스프링과 변형률계로 압력을 감지하여, 감지된 압력을 기초로 터치된 지점의 좌표를 측정하는 방식이다. 이 외에도 다른 방식에 따른 터치 감지 방법을 이용할 수 있다.
The strain gauge method is a method of measuring the coordinates of the touched point based on the sensed pressure by sensing the pressure with a spring and strain meter mounted on the four corners of the touch screen. Other methods of touch sensing are available.

상기 처리부(200)는 좌표/패턴인식 부(210), MCU(220), A/V 재생부(230)를 포함한다.The processing unit 200 includes a coordinate / pattern recognizing unit 210, an MCU 220, and an A / V reproducing unit 230.

상기 좌표/패턴인식 부(210)는 상기 입력신호에 따른 좌표 또는 제스처 패턴을 인식한 후, 상기 좌표 또는 제스처 패턴에 해당되는 처리 신호를 출력하는 기능을 수행한다.The coordinate / pattern recognition unit 210 recognizes a coordinate or a gesture pattern according to the input signal, and then outputs a processing signal corresponding to the coordinate or the gesture pattern.

상기 MCU(220)는 상기 처리 신호에 따라 상기 영역별 동작 모드와 상기 제스처 동작 모드 중 어느 하나를 판단한 후, 해당 모드의 구동 신호 및 상기 구동 신호의 상응하는 데이터를 메모리 부(300)로부터 호출하는 기능을 수행한다.The MCU 220 determines one of the operation mode and the gesture operation mode according to the processing signal and then calls the corresponding data of the driving signal and the driving signal of the corresponding mode from the memory unit 300 Function.

보다 구체적으로, 상기 MCU(220)는 모드 선택부(221), 제1 동작 모듈(222), 제2 동작 모듈(223)을 포함한다.More specifically, the MCU 220 includes a mode selection unit 221, a first operation module 222, and a second operation module 223.

상기 모드 선택부(221)는 상기 처리 신호에 따라 상기 영역별 동작 모드의 동작 신호인 제1 동작 신호 또는 상기 제스처 동작 모드의 동작 신호인 제2 동작 신호를 출력하는 기능을 수행한다.The mode selector 221 outputs a first operation signal, which is an operation signal of the per-area operation mode, or a second operation signal, which is an operation signal of the gesture operation mode, according to the process signal.

상기 제1 동작 모듈(222)은 상기 제1 동작 신호를 수신하여 동작되고, 상기 좌표에 상응하는 상기 투명 제어 영역의 해당 데이터의 저장 위치값을 상기 메모리 부(300)로 출력하여 상기 좌표에 해당되는 데이터를 상기 메모리 부(300)에서 취득하는 기능을 수행한다.The first operation module 222 is operated by receiving the first operation signal and outputs the storage position value of the corresponding data of the transparent control area corresponding to the coordinate to the memory unit 300, And acquires data from the memory unit 300.

상기 제2 동작 모듈(223)은 상기 제2 동작 신호를 수신하여 동작되고, 상기 제스처 패턴에 상응하는 해당 데이터의 저장 위치값을 상기 메모리 부(300)로 출력하여 상기 제스처 패턴에 해당되는 데이터를 상기 메모리 부(300)에서 취득하는 기능을 수행한다.The second operation module 223 is operated by receiving the second operation signal. The second operation module 223 outputs the storage position value of the corresponding data corresponding to the gesture pattern to the memory unit 300 to store data corresponding to the gesture pattern And performs the function to be acquired from the memory unit 300.

상기 A/V 재생부(230)는 호출된 상기 데이터를 수신하여 상기 표시부(120) 상에 구현하는 기능을 수행한다.
The A / V reproducing unit 230 receives the called data and implements the received data on the display unit 120.

상기 메모리 부(300)는 동영상이 저장된 동영상 저장부(310), 상기 투명 제어 영역에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제1 맵핑 테이블 저장부 (320) 및 상기 제스처 패턴에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제2 맵핑 테이블 저장부(330)를 포함한다.The memory unit 300 includes a moving picture storage unit 310 in which moving pictures are stored, a first mapping table storage unit 320 in which control command data corresponding to the transparent control area is stored as a mapping table, And a second mapping table storage unit 330 in which data is stored as a mapping table.

상기 제1 맵핑 테이블 저장부(320) 및 상기 제2 맵핑 테이블 저장부(330)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체일 수 있다.
The first mapping table storage unit 320 and the second mapping table storage unit 330 may be a flash memory type, a hard disk type, a multimedia card micro type, , A card type memory (e.g., SD or XD memory), a random access memory (RAM), a static random access memory (SRAM), a read only memory (ROM), an electrically erasable programmable read only memory (EEPROM) A programmable read-only memory (PROM), a magnetic memory, a magnetic disk, or an optical disk.

보다 구체적으로, 상기 제1 맵핑 테이블 저장부(320)는 복수 개의 제어 명령을 저장하며, 상기 제어명령은 재생, 정지, 일시정지, 앞으로 감기, 뒤로 감기, 앞으로 건너뛰기, 뒤로 건너뛰기, 배속, 음량조절 중 적어도 하나를 포함할 수 있다.More specifically, the first mapping table storage unit 320 stores a plurality of control commands, and the control commands may include at least one of a playback command, a stop command, a pause command, a fast forward command, a fast forward command, And volume control.

상기 제2 맵핑 테이블 저장부(330)는 사용자의 특정 제스처 패턴 정보를 저장하며, 상기 제스처 패턴 정보는 문자, 숫자, 도형 중 적어도 하나를 포함할 수 있다.The second mapping table storage unit 330 stores the specific gesture pattern information of the user, and the gesture pattern information may include at least one of letters, numbers, and graphics.

즉, 본 발명의 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치는 동영상 재생 중에 동작되는 모드로서, 기존의 화면 상에 위치하는 동영상 제어를 위한 인터페이스의 존재 없이 동영상 재생 중에 기 설정된 투명 제어 영역의 터치만을 이용하여 동영상의 재생을 제어할 수 있다.That is, the multimedia device using the touch screen-based transparent control area and the gesture pattern of the present invention is a mode operated during moving picture playback, It is possible to control the reproduction of the moving picture using only the touch of the area.

따라서, 본 발명은 동영상 재생 화면상에 나타나는 인터페이스를 투명 인터페이스로 대체하여 사용자의 동영상 감상을 향상시킬 수 있다. 또한, 기존의 조작 인터페이스는 화면의 일 부분에 국한되어 조작에 따른 터치의 실수가 발생되었으나, 본 발명에서는 화면 전체에 투명 제어 영역이 설정되어 터치에 따른 실수를 현저히 줄여줄 수 있다.
Accordingly, the present invention can improve a user's appreciation of a moving image by replacing an interface displayed on a moving image playback screen with a transparent interface. In addition, although the conventional operation interface is limited to a part of the screen, a mistake of touching according to the operation is generated. However, in the present invention, a transparent control area is set in the entire screen, thereby making it possible to significantly reduce mistakes due to the touch.

본 발명의 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치는 상기 메모리 부(300)가 탑재된 PDC(Personal Digital Cellular)폰, PCS(Personal Communication Service)폰, PHS(Personal Handyphone System)폰, CDMA-2000(1X, 3X)폰, WCDMA(Wideband CDMA)폰, 듀얼 밴드/듀얼 모드(Dual Band/Dual Mode)폰, GSM(Global Standard for Mobile)폰, MBS(Mobile Broadband System)폰, DMB(Digital Multimedia Broadcasting)폰, 스마트(Smart) 폰, 핸드폰 등과 같은 통신 기능이 포함될 수 있는 휴대용 기기, PDA(Personal Digital Assistant), 핸드 헬드 PC(Hand-Held PC), 노트북 컴퓨터, 랩탑 컴퓨터, 와이브로(WiBro) 단말기, MP3 플레이어, MD 플레이어 등과 같은 휴대 단말기, 그리고 국제 로밍(Roaming) 서비스와 확장된 이동 통신 서비스를 제공하는 IMT-2000(International Mobile Telecommunication-2000) 단말기 등을 포함하는 모든 종류의 핸드 헬드 기반의 무선 통신 장치를 의미하는 휴대용 전기전자장치로서, CDMA(Code Division Multiplexing Access) 모듈, 블루투스(Bluetooth) 모듈, 적외선 통신 모듈(Infrared Data Association), 유무선 랜 카드 및 GPS(Global Positioning System)를 통한 위치 추적이 가능하도록 하기 위해 GPS 칩이 탑재된 무선 통신 장치와 같은 소정의 통신 모듈을 구비할 수 있으며, 마이크로프로세서를 탑재함으로써 일정한 연산 동작을 수행할 수 있는 단말기를 통칭하는 개념으로 해석될 수 있다.
The multimedia device using the touch screen-based transparent control area and the gesture pattern according to the present invention may be applied to a PDA (Personal Digital Cellular) phone, a PCS (Personal Communication Service) phone, a PHS (Personal Handyphone System) , A CDMA-2000 (1X, 3X) phone, a WCDMA (Wideband CDMA) phone, a dual band / dual mode phone, a GSM (global standard for mobile) phone, a MBS (Personal Digital Assistant), a hand-held PC (PC), a notebook computer, a laptop computer, a WiBro (personal digital assistant), and the like, which may include communication functions such as a digital multimedia broadcasting A mobile terminal such as a WiBro terminal, an MP3 player, an MD player and the like, and an International Mobile Telecommunication-2000 (IMT-2000) terminal providing an international roaming service and an extended mobile communication service. group The present invention relates to a portable electric / electronic device which is a portable electric / electronic device having a location through a Code Division Multiplexing Access (CDMA) module, a Bluetooth module, an Infrared Data Association, a wired / wireless LAN card, and a Global Positioning System In order to enable tracking, a predetermined communication module such as a wireless communication device on which a GPS chip is mounted may be provided, and it may be interpreted as a concept collectively referred to as a terminal capable of performing a certain calculation operation by mounting a microprocessor.

도 3은 본 발명의 실시 예에 따른 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법을 설명하기 위한 플로우 차트이다. 3 is a flowchart illustrating a multimedia control method using a transparent control area based on a touch screen and a gesture pattern according to an embodiment of the present invention.

도 4는 영역별 동작 모드를 선택하기 위한 가이드 정보의 일 예를 나타낸 예시도이다. 4 is an exemplary view showing an example of guide information for selecting an operation mode for each area.

도 5는 영역별 동작 모드 선택 후, 나타나는 가이드 정보의 일 예를 나타낸 예시도이다. 5 is an exemplary view showing an example of guide information appearing after selecting an operation mode for each area.

도 6은 제스처 동작 모드를 선택하기 위한 가이드 정보의 일 예를 나타낸 예시도이다. 6 is an exemplary view showing an example of guide information for selecting a gesture operation mode.

도 7은 제스처 동작 모드 선택 후, 터치 스크린 상에 나타나는 가이드 정보의 일 예를 나타낸 예시도이다.7 is an exemplary view showing an example of guide information appearing on the touch screen after the gesture operation mode is selected.

도 3에 도시된 바와 같이, 본 발명의 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법(S100)은 선택 단계(S110), 설정 단계(S120), 인식 단계(S130), 표시 단계(S140)를 포함한다.3, the multimedia control method S100 using the touch screen-based transparent control area and the gesture pattern according to the present invention includes a selection step S110, a setting step S120, a recognition step S130, (S140).

선택 단계(S110)는 터치 스크린(100) 상에 영역별 동작 모드 및 제스처 동작 모드 중 어느 하나의 동작 모드를 선택하는 단계일 수 있다.The selecting step S110 may be a step of selecting one of an operation mode for each area and a gesture operation mode on the touch screen 100. [

설정 단계(S120)는 상기 영역별 동작 모드 또는 상기 제스처 동작 모드로 수행 시, 상기 멀티미디어 제어에 필요한 제어 명령을 각 동작 모드에 맞게 설정하는 단계일 수 있다.The setting step S120 may be a step of setting a control command necessary for the multimedia control according to each operation mode when performing the operation in the area-specific operation mode or the gesture operation mode.

인식 단계(S130)는 상기 터치 스크린 상에 선택된 상기 영역별 동작 모드 또는 상기 제스처 동작 모드를 인식하는 단계일 수 있다.The recognition step S130 may be a step of recognizing the area-specific operation mode or the gesture operation mode selected on the touch screen.

표시 단계(S140)는 각 동작 모드에 맞게 설정된 상기 제어 명령이 적용된 상기 멀티미디어를 상기 터치 스크린 상에 표시하는 단계일 수 있다.The display step S140 may be a step of displaying on the touch screen the multimedia to which the control command set for each operation mode is applied.

보다 구체적으로, 상기 설정 단계(S120)는 영역별 동작 모드로 수행할 경우, 표시부 내에 구획된 투명 제어 영역의 위치를 사용자가 원하고자 하는 위치로 변경하는 단계와 상기 제스처 동작 모드로 수행할 경우, 상기 멀티미디어 제어에 필요한 제어 명령을 사용자의 특정 제스처 패턴으로 저장하는 단계를 포함한다.(이하에 기재된 표 1 및 표 2를 참조)More specifically, the setting step (S120) includes the steps of: changing a position of the transparent control area partitioned in the display unit to a position desired by the user when the operation mode is performed in each area; And storing the control command necessary for the multimedia control in a specific gesture pattern of the user (see Table 1 and Table 2 described below).

[표 1][Table 1]

Figure 112013046601869-pat00001
Figure 112013046601869-pat00001

표 1은 영역별 동작 모드 시, 표시부 내에 구획된 제어 영역에 해당하는 제어 명령들과 스크린 상의 구역을 예시적으로 지정한 표이다.Table 1 is a table in which control commands corresponding to the control areas partitioned in the display unit and areas on the screen are illustratively designated in the area-specific operation mode.

본 발명의 표시부(120)는 5개의 영역이 구획되어 있으며, 각각의 영역의 좌표값은 고정값을 갖도록 설정되며, 각각의 위치값은 가변될 수 있다.The display unit 120 of the present invention is divided into five regions, and the coordinate values of the respective regions are set to have fixed values, and the respective position values can be varied.

예를 들어, 동영상 선택이 1, 옵션이 2, 앞으로 가기가 3, 뒤로 가기가 4, 재생/일시정지가 5로 처음 지정된 후, 변경 시, 동영상 선택이 5, 옵션이 4, 앞으로 가기가 3, 뒤로 가기가 2, 재생/일시정지가 1의 위치로 사용자가 선택적으로 가변시킬 수 있다.For example, if the video selection is 1, the option is 2, the forward is 3, the backward is 4, the playback / pause is 5, then the video selection is 5, the option is 4, , The backward position is 2, and the playback / pause is 1 position.

또한, 앞으로 가기, 뒤로 가기의 경우, 원하고자 하는 시간을 사용자가 임의로 선택할 수 있도록 설계될 수 있다. 가령, 5초→10초로 변경 선택할 수 있다. 나머지 제어명령은 고정값을 갖도록 설계되며, 표 1의 제어명령과 스크린 상의 구역 변경 간의 대응정보는 단지 이해를 돕기 위한 예일 뿐, 이에 한정되는 것은 아니다. Also, in the case of going forward or backward, the user can be designed to arbitrarily select a desired time. For example, it can be changed to 5 seconds → 10 seconds. The rest of the control commands are designed to have fixed values, and the correspondence information between the control commands in Table 1 and the zone changes on the screen is just an example to aid understanding, but is not limited thereto.

[표 2][Table 2]

Figure 112013046601869-pat00002
Figure 112013046601869-pat00002

표 2는 제스처 동작 모드 시, 사용자의 특정 제스처를 인식하여 원하고자 제어 명령의 패턴을 예시적으로 나타낸 표이다.Table 2 is a table that exemplarily shows a pattern of a control command to recognize a specific gesture of a user in a gesture operation mode.

표 2를 참조하면, 사용자는 원하고자 하는 제어 명령을 특정 문자, 숫자, 기호를 통해 메모리 부에 저장하여 필요 시 선택적으로 스크린 상에 구현되는 영상을 제어할 수 있다.Referring to Table 2, the user can control desired images selectively on the screen by storing the desired control command in the memory unit through specific characters, numbers, and symbols.

표 2의 제어명령과 패턴정보 간의 대응정보는 단지 이해를 돕기 위한 예일 뿐, 이에 한정되는 것은 아니다. 또한, 표 2에 예시되지 않은 제어명령들도 가능한데, 예를 들면, 배속, 음향제거, 음향증가, 음향감소, 시작, 끝 등의 제어명령도 특정 패턴으로 입력할 수 있다.
The correspondence information between the control command and the pattern information in Table 2 is merely an example for facilitating understanding, but is not limited thereto. Control commands not illustrated in Table 2 are also possible. For example, control commands such as double speed, sound cancellation, sound increase, sound reduction, start and end can be input in a specific pattern.

상기 선택 단계(S110)는 영역별 동작 모드 또는 제스처 동작 모드 중 어느 하나를 선택하는 단계일 수 있으며, 즉, 동영상 제어를 위한 동작 모드를 사용자가 선택하기 위한 단계이다. 이때, 표시부(120) 상에는 가이드 정보가 나타난다.The selecting step (S110) may be a step of selecting one of the operation mode for each area or the gesture operation mode, that is, a step for the user to select an operation mode for moving picture control. At this time, guide information is displayed on the display unit 120.

상기 가이드 정보는 사용자에게 영역별 동작 모드와 제스처 동작 모드 중 어느 하나를 선택하기 위한 표시 정보이다. 이하에서는 사용자가 영역별 동작 모드를 선택할 경우와 제스처 패턴 인식 모드를 선택할 경우에 나타나는 가이드 정보들의 예를 설명하도록 한다.The guide information is display information for selecting one of an operation mode for each area and a gesture operation mode. Hereinafter, an example of guide information appearing when a user selects a gesture pattern recognition mode and a region-specific operation mode is described.

먼저, 도 4를 참조, 사용자가 영역별 동작 모드(A)를 선택할 경우, 터치 스크린 상에는 도 5를 참조, 제1 설정 가이드가 표시되며, 제1 설정 가이드는 동영상 선택, 옵션, 뒤로 가지, 앞으로 가기, 재생/일시 정지, 재생 위치 선택 등에 제어 명령이 표시된 제어 영역들이 표시된 정보일 수 있다.5, the first setting guide is displayed on the touch screen, and the first setting guide is displayed on the touch screen in order to select a moving image, an option, a backward direction, a forward direction, The control areas in which the control command is displayed, such as playback, pause, playback position selection, etc., may be displayed.

상기 투명 제어 영역들 각각은 터치 스크린 상에 배치되는 위치가 숫자로 표시되며, 사용자는 상기 투명 제어 영역들을 원하고자 하는 위치에 배치시킬 수 있다. 예를 들어, 해당 영역을 터치하면, " ? " 상에 원하고자 하는 지점의 숫자를 기입하여 터치한 해당 영역의 배치를 변경할 수 있다.
Each of the transparent control areas is represented by a number arranged on the touch screen, and the user can place the transparent control areas at a desired position. For example, when touching the area, the number of the desired point on the "?" Can be written to change the arrangement of the corresponding area to be touched.

다음으로, 도 6을 참조, 사용자가 제스처 동작 모드(B)를 선택할 경우, 표시부(120) 상에는, 도 7을 참조, 제2 설정 가이드가 표시되며, 제2 설정 가이드는 동영상 선택, 옵션, 뒤로 가기, 앞으로 가기, 재생/일시 정지, 재생 위치 선택 등에 따른 사용자의 특정 제스처가 문자, 숫자, 도형 등의 형태로 표시된 정보일 수 있다.7, the second setting guide is displayed on the display unit 120, and the second setting guide is displayed on the display unit 120 in the case of selecting the moving picture, the option, The specific gesture of the user according to the top, forward, playback / pause, selection of the reproduction position and the like may be information displayed in the form of letter, number, figure or the like.

이때, 제2 설정 가이드 내에는 제어 명령들의 패턴 정보가 전, 후로 표시되며, 사용자는 설정된 값을 변경하여 사용할 수 있다.At this time, the pattern information of the control commands are displayed before and after in the second setting guide, and the user can change the set values and use them.

사용자가 터치 스크린을 통해서 입력하는 패턴을 특정 기능에 대한 조절 명령으로 인식함으로써, 간단하게 특정한 조절기능을 수행할 수 있게 된다.
By recognizing the pattern inputted by the user through the touch screen as an adjustment command for a specific function, it is possible to perform a specific adjustment function simply.

도 8은 영역별 동작 모드로 수행되는 상태에서 사용자가 동영상 조작을 수행하는 일 예를 나타낸 도면이다. 도 9는 제스처 동작 모드로 수행되는 상태에서 사용자가 동영상 조작을 수행하는 일 예를 나타낸 도면이다.
8 is a diagram illustrating an example of a user performing a moving picture operation in a state of being performed in a region-specific operation mode. 9 is a diagram illustrating an example of a user performing a moving picture operation in a gesture operation mode.

즉, 본 발명은 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용하여 동영상 재생 중에 화면 상에 배치된 동영상 제어 인터페이스를 화면 전체 영역에 분산 배치하되, 상기 동영상 제어 인터페이스는 투명 제어 영역으로 설계함으로써, 사용자는 투명 제어 영역의 터치만을 이용하여 동영상의 재생을 제어할 수 있으며, 또한, 동영상이 재생되는 화면상에 사용자의 특정 제스처 패턴을 입력하여 재생 중인 동영상을 제어할 수 있다.(도 8 및 도 9를 참조)
That is, according to the present invention, a moving picture control interface disposed on the screen during the moving picture reproduction is distributed and arranged in the entire screen area using the transparent control area and the gesture pattern based on the touch screen, and the moving picture control interface is designed as a transparent control area, The user can control the reproduction of the moving picture using only the touch of the transparent control area and also can input the specific gesture pattern of the user on the screen on which the moving picture is reproduced to control the moving picture being played back. 9)

따라서, 본 발명은 동영상이 재생 중인 화면 상에 나타나는 조작 인터페이스를 투명 조작 인터페이스로 대체하여 사용자의 동영상 감상을 향상시켜주며, 기존의 조작 인터페이스는 화면의 일 부분에 국한되어 조작에 따른 터치의 실수가 발생되었으나, 본 발명은 화면 전체에 동영상을 제어하기 위한 투명 제어 영역이 설정되어 터치에 따른 실수를 현저히 줄여줄 수 있다.Therefore, the present invention can improve the user's appreciation of moving pictures by replacing the operation interface appearing on the screen during reproduction of the moving picture with the transparent operation interface. The existing operation interface is limited to a part of the screen, However, according to the present invention, a transparent control area for controlling a moving picture is set in the entire screen, thereby making it possible to significantly reduce the number of mistakes due to a touch.

또한, 간단한 조절기능을 구현하는 데는 터치 펜을 사용하지 않아도 무방하기 때문에 사용이 편리한 장점이 있다.In addition, there is an advantage that it is convenient to use because it is not necessary to use a touch pen to implement a simple adjustment function.

본 발명의 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치 및 이를 이용한 제어 방법은 소규모의 제한된 스크린 크기를 갖는 이동 단말기에 특히 유용하다. 즉, 스마트 폰이나 PDA, PMP 등과 같이 터치 스크린을 입력 및 영상 출력장치로 사용하는 단말기에서, 제한된 크기의 스크린에 멀티미디어를 재생하는 중에 별도의 UI를 위한 화면 전환이나 OSD 등을 사용하지 않고도 간단하게 해당 멀티미디어의 재생 상태의 조절을 용이하게 수행할 수 있다.
The multimedia device using the touch screen-based transparent control area and the gesture pattern of the present invention and the control method using the same are particularly useful for a mobile terminal having a small screen size. In other words, in a terminal using a touch screen as an input and a video output device such as a smart phone, a PDA, and a PMP, it is possible to easily and conveniently display multimedia contents on a limited size screen without using a screen switching or OSD for a separate UI It is possible to easily control the reproduction state of the multimedia.

또한 본 발명은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, hard disk, floppy disk, flash memory, optical data storage, And the like. The computer readable recording medium may also be distributed over a networked computer system and stored and executed as computer readable code in a distributed manner.

한편, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and detail may be made therein without departing from the spirit and scope of the present invention.

100: 터치 스크린 110: 터치 감지부
120: 표시부 200: 처리부
210: 좌표/패턴 인식부 220: MCU
221: 모드 선택부 222: 제1 동작모듈
223: 제2 동작모듈 230: A/V 재생부
300: 메모리 부 310: 동영상 저장부
320: 제1 맵핑 테이블 저장부 330: 제2 맵핑 테이블 저장부100: touch screen 110: touch sensing unit
120: display unit 200:
210: coordinate / pattern recognition unit 220: MCU
221: mode selection unit 222: first operation module
223: second operation module 230: A / V reproducing section
300: memory unit 310: moving picture storage unit
320: First mapping table storage unit 330: Second mapping table storage unit

Claims (14)

동영상을 제어하기 위한 복수 개의 투명 제어 영역이 구획되고, 사용자의 터치를 통해 상기 복수 개의 투명 제어 영역 중 어느 하나에서 발생되는 입력 신호를 출력하는 터치 스크린(100);
상기 입력 신호에 따른 동작 모드를 판단한 후, 상기 동작 모드에 해당하는 처리 영상을 상기 터치 스크린(100) 상에서 구현하는 처리부(200); 및
상기 동작 모드에 따른 정보와 상기 동영상이 저장된 메모리 부(300);를 포함하고,
상기 동작 모드는,
상기 투명 제어 영역에 발생되는 터치 신호로 구동되는 영역별 동작 모드와 사용자의 특정 제스처 인식에 따라 구동되는 제스처 동작 모드를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
A touch screen (100) partitioned by a plurality of transparent control areas for controlling a moving picture and outputting an input signal generated in any one of the plurality of transparent control areas through a touch of a user;
A processing unit (200) for determining an operation mode according to the input signal and implementing a processed image corresponding to the operation mode on the touch screen (100); And
And a memory unit (300) in which information according to the operation mode and the moving image are stored,
The operation mode includes:
And a gesture operation mode that is driven according to a specific gesture recognition of the user, the gesture operation mode being driven by a touch signal generated in the transparent control area, and a gesture operation mode based on the touch screen based transparent control area and the gesture pattern. .
삭제delete 제1항에 있어서,
상기 터치 스크린(100)은,
표면에 가해지는 압력에 반응하는 센서를 이용하여 사용자 조작에 의한 터치(touch) 또는 드래그(drag)를 감지하는 터치 감지부(110)를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
The method according to claim 1,
The touch screen (100)
And a touch sensing unit (110) for sensing a touch or a drag by a user operation using a sensor responsive to a pressure applied to a surface of the touch screen. Multimedia device using pattern.
제3항에 있어서,
상기 터치 감지부(110)는,
감압식, 정전식, 적외선방식, 초음파방식, 광학방식 및 변형률계(Strain Gauge) 방식 중 어느 하나의 방식으로 동작되는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
The method of claim 3,
The touch sensing unit (110)
Wherein the touch panel is operated in any one of a pressure reduction type, an electrostatic type, an infrared type, an ultrasonic type, an optical type, and a strain gauge type.
제1항에 있어서,
상기 처리부(200)는,
상기 입력신호에 따른 좌표 또는 제스처 패턴을 인식한 후, 상기 좌표 또는 제스처 패턴에 해당되는 처리 신호를 출력하는 좌표/패턴인식 부(210);
상기 처리 신호에 따라 상기 영역별 동작 모드와 상기 제스처 동작 모드 중 어느 하나를 판단한 후, 해당 모드의 구동 신호 및 상기 구동 신호의 상응하는 데이터를 메모리 부로부터 호출하는 MCU(220);
상기 구동 신호 및 호출된 상기 데이터를 수신하여 상기 터치 스크린(100) 상에 구현하는 A/V 재생부(230);를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
The method according to claim 1,
The processing unit (200)
A coordinate / pattern recognition unit 210 for recognizing a coordinate or gesture pattern according to the input signal and outputting a processing signal corresponding to the coordinate or gesture pattern;
An MCU (220) for determining one of the operation mode for each area and the gesture operation mode according to the processing signal and then calling the corresponding data of the driving signal and the driving signal from the memory unit;
And an A / V reproducing unit (230) for receiving the driving signal and the called data and implementing the same on the touch screen (100). Device.
제5항에 있어서,
상기 MCU(220)는,
상기 처리 신호에 따라 상기 영역별 동작 모드의 동작 신호인 제1 동작 신호 또는 상기 제스처 동작 모드의 동작 신호인 제2 동작 신호를 출력하는 모드 선택부(221);
상기 제1 동작 신호를 수신하여 동작되고, 상기 좌표에 상응하는 상기 제어 영역의 해당 데이터의 저장 위치값을 상기 메모리 부로 출력하여 상기 좌표에 해당되는 데이터를 상기 메모리 부에서 취득하는 제1 동작 모듈(222); 및
상기 제2 동작 신호를 수신하여 동작되고, 상기 제스처 패턴에 상응하는 해당 데이터의 저장 위치값을 상기 메모리 부로 출력하여 상기 제스처 패턴에 해당되는 데이터를 상기 메모리 부에서 취득하는 제2 동작 모듈(223);을 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
6. The method of claim 5,
The MCU 220,
A mode selection unit (221) for outputting a first operation signal, which is an operation signal of the per-area operation mode, or a second operation signal, which is an operation signal of the gesture operation mode, according to the processing signal;
A first operation module that is operated by receiving the first operation signal and outputs the storage position value of the corresponding data of the control area corresponding to the coordinate to the memory unit and acquires data corresponding to the coordinates from the memory unit 222); And
A second operation module (223) operated by receiving the second operation signal and outputting a storage position value of the corresponding data corresponding to the gesture pattern to the memory unit to acquire data corresponding to the gesture pattern from the memory unit, And a gesture pattern generating unit for generating a gesture pattern based on the gesture pattern.
제1항에 있어서,
상기 메모리 부(300)는,
동영상이 저장된 동영상 저장부(310);
상기 제어 영역에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제1 맵핑 테이블 저장부(320); 및
상기 제스처 패턴에 해당되는 제어 명령 데이터가 맵핑 테이블로 저장된 제2 맵핑 테이블 저장부(330)를 포함하고,
상기 제1 맵핑 테이블 저장부(320) 및 상기 제2 맵핑 테이블 저장부(330)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리, 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체인 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
The method according to claim 1,
The memory unit 300,
A moving picture storage unit 310 in which a moving picture is stored;
A first mapping table storage unit 320 in which control command data corresponding to the control area is stored as a mapping table; And
And a second mapping table storage unit (330) in which control command data corresponding to the gesture pattern is stored as a mapping table,
The first mapping table storage unit 320 and the second mapping table storage unit 330 may be a flash memory type, a hard disk type, a multimedia card micro type, , A card type memory, a random access memory (RAM), a static random access memory (SRAM), a read only memory (ROM), an electrically erasable programmable read-only memory (EEPROM), a programmable read- Wherein the control unit is a storage medium of at least one of a disc, a disc, and an optical disc.
제3항에 있어서,
상기 터치 스크린(100)은,
전체 영역 상에, 동영상 선택 영역, 옵션 영역, 재생/일시정지 영역, 재생위치 선택 영역, 앞으로 가기 영역, 뒤로 가기 영역이 투명하게 분할 구획되는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
The method of claim 3,
The touch screen (100)
Wherein the moving picture selection area, the option area, the playback / pause area, the playback position selection area, the forward area, and the backward area are divided in a transparent manner on the entire area, .
제4항에 있어서,
상기 제1 맵핑 테이블 저장부(320)는,
복수 개의 제어 명령을 맵핑 테이블로 저장하며, 상기 제어명령은 재생, 정지, 일시정지, 앞으로 감기, 뒤로 감기, 앞으로 건너뛰기, 뒤로 건너뛰기, 배속, 음량조절 중 적어도 하나를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
5. The method of claim 4,
The first mapping table storage unit 320 stores,
Wherein the control command includes at least one of playback, stop, pause, fast forward, fast forward, skip forward, skip backward, fast speed, and volume control Multimedia device using touch screen based transparent control area and gesture pattern.
제4항에 있어서,
상기 제2 맵핑 테이블 저장부(330)는,
사용자의 특정 제스처 패턴 정보를 맵핑 테이블로 저장하며, 상기 제스처 패턴 정보는 문자, 숫자, 도형 중 적어도 하나를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 장치.
5. The method of claim 4,
The second mapping table storage unit 330 stores,
Wherein the gesture pattern information includes at least one of a character, a number, and a graphic, and stores the specific gesture pattern information of the user as a mapping table.
터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법에 있어서,
상기 터치 스크린 상에 영역별 동작 모드 및 제스처 동작 모드 중 어느 하나의 동작 모드를 선택하는 선택 단계;
상기 영역별 동작 모드 또는 상기 제스처 동작 모드 수행 시, 상기 멀티미디어 제어에 필요한 제어 명령을 각 동작 모드에 맞게 설정하는 설정 단계;
상기 터치 스크린 상에 발생되는 터치 정보에 따라 상기 영역별 동작 모드 또는 상기 제스처 동작 모드를 인식하는 인식 단계; 및
각 동작 모드에 맞게 설정된 상기 제어 명령에 따라 상기 멀티미디어를 상기 터치 스크린상에 표시하는 표시 단계를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법
A multimedia control method using a transparent control area based on a touch screen and a gesture pattern,
A selecting step of selecting one of an operation mode for each area and a gesture operation mode on the touch screen;
Setting a control command necessary for the multimedia control according to each operation mode when the per-area operation mode or the gesture operation mode is performed;
A recognizing step of recognizing the per-area operation mode or the gesture operation mode according to the touch information generated on the touch screen; And
And displaying the multimedia on the touch screen in accordance with the control command set for each operation mode. The multimedia control method using the touch screen based transparent control area and the gesture pattern
제11항에 있어서,
상기 설정 단계는,
상기 영역별 동작 모드 시, 표시부 내에 구획된 투명 제어 영역의 위치를 사용자가 선택적으로 배치하는 단계를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법
12. The method of claim 11,
Wherein, in the setting step,
The method of claim 1, further comprising the step of: a user selecting a position of a transparent control area partitioned within the display unit in the area-specific operation mode.
제11항에 있어서,
상기 설정 단계는,
상기 제스처 동작 모드 시, 상기 멀티미디어 제어에 필요한 제어 명령을 사용자의 특정 제스처 패턴으로 저장하는 단계를 포함하는 것을 특징으로 하는 터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법
12. The method of claim 11,
Wherein, in the setting step,
And storing the control command necessary for the multimedia control in a specific gesture pattern of the user in the gesture operation mode. The multimedia control method using the transparent control area and the gesture pattern based on the touch screen
터치 스크린 기반의 투명 제어 영역과 제스처 패턴을 이용한 멀티미디어 제어 방법을 수행하는 프로그램이 기록된 컴퓨터 판독이 가능한 기록 매체에 있어서,
상기 터치 스크린 상에 영역별 동작 모드 및 제스처 동작 모드 중 어느 하나의 동작 모드를 선택하는 선택 단계;
상기 영역별 동작 모드 또는 상기 제스처 동작 모드 수행 시, 상기 멀티미디어 제어에 필요한 제어 명령을 각 동작 모드에 맞게 설정하는 설정 단계;
상기 터치 스크린 상에 발생되는 터치 정보에 따라 상기 영역별 동작 모드 또는 상기 제스처 동작 모드를 인식하는 인식 단계; 및
각 동작 모드에 맞게 설정된 상기 제어 명령에 따라 상기 멀티미디어를 상기 터치 스크린 상에 표시하는 표시 단계를 기록한 코드를 포함하는 기록 매체.A computer-readable recording medium on which a program for performing a multimedia control method using a transparent control area based on a touch screen and a gesture pattern is recorded,
A selecting step of selecting one of an operation mode for each area and a gesture operation mode on the touch screen;
Setting a control command necessary for the multimedia control according to each operation mode when the per-area operation mode or the gesture operation mode is performed;
A recognizing step of recognizing the per-area operation mode or the gesture operation mode according to the touch information generated on the touch screen; And
And a display step of displaying the multimedia on the touch screen according to the control command set for each operation mode.
KR1020130059658A 2013-05-27 2013-05-27 multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same KR101457351B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130059658A KR101457351B1 (en) 2013-05-27 2013-05-27 multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130059658A KR101457351B1 (en) 2013-05-27 2013-05-27 multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same

Publications (1)

Publication Number Publication Date
KR101457351B1 true KR101457351B1 (en) 2014-11-03

Family

ID=52288457

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130059658A KR101457351B1 (en) 2013-05-27 2013-05-27 multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same

Country Status (1)

Country Link
KR (1) KR101457351B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11054930B2 (en) 2016-06-28 2021-07-06 Samsung Electronics Co., Ltd Electronic device and operating method therefor
CN114640873A (en) * 2022-03-29 2022-06-17 联想(北京)有限公司 Control method and device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060085850A (en) * 2005-01-25 2006-07-28 엘지전자 주식회사 Multimedia device control system based on pattern recognition in touch screen
KR20080104858A (en) * 2007-05-29 2008-12-03 삼성전자주식회사 Method and apparatus for providing gesture information based on touch screen, and information terminal device including the same
KR20110034740A (en) * 2009-09-29 2011-04-06 에스케이텔레콤 주식회사 Portable device and related control method for video content through manipulation of object in the video content

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060085850A (en) * 2005-01-25 2006-07-28 엘지전자 주식회사 Multimedia device control system based on pattern recognition in touch screen
KR20080104858A (en) * 2007-05-29 2008-12-03 삼성전자주식회사 Method and apparatus for providing gesture information based on touch screen, and information terminal device including the same
KR20110034740A (en) * 2009-09-29 2011-04-06 에스케이텔레콤 주식회사 Portable device and related control method for video content through manipulation of object in the video content

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11054930B2 (en) 2016-06-28 2021-07-06 Samsung Electronics Co., Ltd Electronic device and operating method therefor
CN114640873A (en) * 2022-03-29 2022-06-17 联想(北京)有限公司 Control method and device

Similar Documents

Publication Publication Date Title
US20230068100A1 (en) Widget processing method and related apparatus
KR102051418B1 (en) User interface controlling device and method for selecting object in image and image input device
US10579248B2 (en) Method and device for displaying image by using scroll bar
KR101990567B1 (en) Mobile apparatus coupled with external input device and control method thereof
KR102462364B1 (en) Method of displaying an image by using a scroll bar and apparatus thereof
KR102158098B1 (en) Method and apparatus for image layout using image recognition
JP6308214B2 (en) Display control device, display control method, and recording medium
US9116595B2 (en) Device, method, and storage medium storing program
KR102155836B1 (en) Mobile terminal for controlling objects display on touch screen and method therefor
US20130167090A1 (en) Device, method, and storage medium storing program
US9372613B2 (en) Scrolling method and electronic device thereof
KR20140104709A (en) Method for synthesizing images captured by portable terminal, machine-readable storage medium and portable terminal
US20130086523A1 (en) Device, method, and storage medium storing program
US20170262137A1 (en) User interface display method and apparatus therefor
US20160004420A1 (en) Electronic device and computer program product
KR20150025214A (en) Method for displaying visual object on video, machine-readable storage medium and electronic device
KR20150021722A (en) Method, apparatus and recovering medium for screen display by executing scroll
KR102091710B1 (en) Coordinate sensing apparatus and method for controlling thereof
KR20160035865A (en) Apparatus and method for identifying an object
KR102123406B1 (en) A mobile terminal comprising a touch screen supporting a multi touch and method for controlling the mobile terminal
KR20150025450A (en) Method, apparatus and recovering medium for clipping of contents
KR20160018269A (en) Device and method for controlling the same
KR102295823B1 (en) Method of providing an interface using a mobile device and a wearable device
KR101457351B1 (en) multi-meida apparatus using transparent control area and gesture pattern information based on touch screen and multi-meida control Method using the same
EP2775385A2 (en) Mobile apparatus having function of pre-action on object and control method thereof

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20181008

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191001

Year of fee payment: 6