KR100842733B1 - 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법 - Google Patents

터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법 Download PDF

Info

Publication number
KR100842733B1
KR100842733B1 KR1020070011722A KR20070011722A KR100842733B1 KR 100842733 B1 KR100842733 B1 KR 100842733B1 KR 1020070011722 A KR1020070011722 A KR 1020070011722A KR 20070011722 A KR20070011722 A KR 20070011722A KR 100842733 B1 KR100842733 B1 KR 100842733B1
Authority
KR
South Korea
Prior art keywords
sound source
source object
input event
multimedia
multimedia file
Prior art date
Application number
KR1020070011722A
Other languages
English (en)
Inventor
종인원
곽세진
백성환
김진용
홍노경
나택균
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070011722A priority Critical patent/KR100842733B1/ko
Priority to US11/969,382 priority patent/US20080189613A1/en
Priority to EP08000161.3A priority patent/EP1953632B1/en
Priority to CN2008100088110A priority patent/CN101241414B/zh
Application granted granted Critical
Publication of KR100842733B1 publication Critical patent/KR100842733B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output

Abstract

본 발명은 터치스크린을 구비한 멀티미디어 재생장치의 사용자 인터페이스 방법에 관한 것으로써, 멀티미디어 파일 재생 시 시각적으로 재생속성을 표시 및 제어하기 위해, 멀티미디어 파일 재생 시, 상기 터치스크린의 제1 영역에 적어도 하나의 음원객체를 표시하는 과정과, 상기 제1 영역에 입력 이벤트가 발생하면, 상기 발생한 입력 이벤트의 종류를 판단하는 과정과, 상기 판단된 입력 이벤트의 종류에 따라 상기 음원객체의 형태를 변형하고, 상기 재생중인 멀티미디어 파일의 재생을 제어하는 과정을 갖는다. 이에 따라 멀티미디어 파일 재생 시 시각적으로 재생속성을 표시하고 터치스크린을 터치/드래그 함으로써 재생속성을 용이하게 변경 할 수 있다.
터치스크린, 사용자 인터페이스, 멀티미디어, 재생속성

Description

터치스크린을 구비한 멀티미디어 재생장치의 사용자 인터페이스 방법{Method for User Interface of Multimedia playing device with touch screen}
도 1은 본 발명의 실시 예에 따른 사용자 인터페이스를 수행하기 위한 멀티미디어 재생장치의 구성을 나타낸 블록도
도 2는 본 발명의 실시 예에 따른 멀티미디어 재생장치의 사용자 인터페이스 방법을 순차적으로 나타낸 흐름도.
도 3a 및 도 3b는 도 2의 입력 이벤트에 대응하여 음원객체의 형태를 변경하는 과정에 대한 상세 흐름도.
도 4a 및 도 4b는 도 3a의 터치 이벤트에 대응하여 음원객체의 형태를 변경하는 화면의 예를 도시한 도면.
도 5a 및 도 5b는 도 3b의 수직방향의 드래그 이벤트에 대응하여 음원객체의 형태를 변경하는 화면의 예를 도시한 화면.
도 6a 및 도 6b는 도 3b의 수직방향의 드래그 이벤트에 대응하여 음원객체의 형태를 변경하는 다른 화면의 예를 도시한 도면.
도 7a 및 도 7b는 도 3b의 수평방향의 드래그 이벤트에 대응하여 음원객체의 형태를 변경하는 화면의 예를 도시한 도면.
도 8a 및 도 8b는 도 3b의 수평방향의 드래그 이벤트에 대응하여 음원객체의 형태를 변경하는 다른 화면의 예를 도시한 도면.
본 발명은 멀티미디어 재생장치에 관한 것으로서, 더욱 상세하게는, 멀티미디어 재생장치의 재생속성을 시각적으로 표시 및 제어하기 위한 방법에 관한 것이다.
최근 들어 사용자의 입력을 용이하게 하기위해 터치스크린을 구비하는 멀티미디어 재생장치가 증가하는 추세이다. 이에 따라, 사용자는 단순한 터치동작으로 멀티미디어 파일을 재생할 수 있다. 멀티미디어 재생장치는 멀티미디어 파일 재생 중 파일제목을 화면에 표시함으로써, 사용자는 별도의 입력 없이도 파일 제목을 알 수 있다. 하지만 파일제목 외의 다른 정보(예컨대, 빠르기, 음색 등)를 알고 싶을 때 사용자는 별도의 입력을 수행하여야 한다. 예를 들어 메뉴를 선택하여 해당 파일의 속성을 확인하여야 한다. 파일 재생 중, 메뉴를 선택하여 곡의 속성을 확인하는 사이에 사용자는 재생되는 파일에 집중 할 수 없게 된다.
또한, 멀티미디어 파일 재생 시, 사용자가 이전에 설정한 재생속성(예컨대, 음색, 빠르기, 볼륨)에 따라 재생된다. 만약, 사용자가 재생속성을 변경하고 싶은 경우, 재생을 중지하고, 설정메뉴에 진입하여 재생속성을 변경하여야 한다. 즉, 종래의 멀티미디어 재생장치는 멀티미디어 재생 중 바로 재생속성을 변경하는데 어려움이 있다.
본 발명의 목적은 멀티미디어 재생장치의 멀티미디어 재생 시, 멀티미디어 파일의 재생상태를 표시하기 위한 방법을 제공하기 위한 것이다.
본 발명의 다른 목적은 멀티미디어 재생상태를 터치스크린을 이용하여 용이하게 제어하는 방법을 제공하는데 있다.
이러한 목적들을 달성하기 위하여, 본 발명의 실시 예에 따른 터치스크린을 구비한 멀티미디어 재생장치의 사용자 인터페이스 방법은 멀티미디어 파일 재생 시, 상기 터치스크린의 제1 영역에 적어도 하나의 음원객체를 표시하는 과정과, 상기 제1 영역에 입력 이벤트가 발생하면, 상기 발생한 입력 이벤트의 종류를 판단하는 과정과, 상기 판단된 입력 이벤트의 종류에 따라 상기 음원객체의 형태를 변형하고, 상기 재생중인 멀티미디어 파일의 재생을 제어하는 과정을 포함한다.
실시 예를 설명하기에 앞서, 본 명세서에 사용되는 일부 용어에 대하여 그 의미를 다음과 같이 정의한다.
1. 음원객체 : 음원의 음색정보, 주파수대역출력정보, 볼륨정보 및 재생속도정보를 포함하는 애니메이션이다.
2. 입력 이벤트: 사용자에 의해 터치스크린에 입력되는 신호이다.
예를 들어, 입력 이벤트는 터치 이벤트와 드래그 이벤트가 있다.
본 발명에 멀티미디어 재생장치는 멀티미디어 파일(예컨대, 음악파일, 동영상 파일 등)을 재생하는 모듈을 가지고 장치이다. 예를 들어, PDA(Personal Digital Assistant), 핸드 헬드 PC(Hand-Held PC), 노트북 컴퓨터, MP3 플레이어, 휴대 멀티미디어 플레이어(Portable Multimedia Player; 이하 'PMP'라 칭함) 등을 포함한다. 덧붙여, 멀티미디어 재생장치는 멀티미디어 파일 재생 모듈을 구비한 이동통신 단말기도 포함한다. 이하의 일 예에서는 멀티미디어 재생장치를 예로 들어 설명하기로 한다.
이하, 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다.
실시 예를 설명함에 있어서 본 발명이 속하는 기술 분야에 익히 알려져 있고 본 발명과 직접적으로 관련이 없는 기술 내용에 대해서는 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 요지를 흐리지 않고 더욱 명확히 전달하기 위함이다.
본 발명에 따른 터치스크린을 구비한 멀티미디어 재생장치의 사용자 인터페이스 방법을 설명하기에 앞서, 그 방법을 수행할 수 있는 멀티미디어 재생장치의 개략적인 구성에 대하여 도 1의 블록도를 참조하여 간략히 설명한다.
저장부(110)는 프로그램 메모리 및 데이터 메모리로 구성된다. 프로그램 메모리는 멀티미디어 재생장치(100)의 동작 프로그램 및 본 발명의 실시 예에 따라 터치스크린(120)을 이용한 사용자 인터페이스를 제공하기 위한 프로그램을 저장한다. 그리고 데이터 메모리는 프로그램 수행 중에 발생되는 데이터를 저장한다. 또한, 데이터 메모리는 하나 이상의 멀티미디어 파일(예컨대, 오디오 파일, 동영상 파일)을 저장하는 멀티미디어 저장영역(111)과 멀티미디어 파일의 재생 제어정보 (예컨대, 볼륨정보, 음색정보, 빠르기정보 등)를 저장하는 재생제어정보 저장영역(113)을 포함한다. 여기서 멀티미디어 저장영역(111)은 외부로부터 다운로드 받은 멀티미디어 파일을 저장하는 것이 가능하다.
터치스크린(120)은 표시부(121)와 터치센서(125)를 포함한다. 표시부(121)는 멀티미디어 재생장치(100)의 상태를 표시한다. 이때, 표시부(121)는 LCD로 구현되며, LCD 제어부, 표시 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비하고, 멀티미디어 재생장치(100)의 동작 상태 및 다수의 정보를 텍스트, 이미지, 애니메이션, 아이콘 등으로 표시한다. 멀티미디어 파일 재생 시, 표시부(121)는 제어부(130)의 제어 하에 터치스크린(120) 상에 음원객체를 표시한다.
터치센서(125)는 표시부(121)에 장착되며, 터치 감지모듈(127)과 신호변환모듈(129)을 구비한다. 터치 감지모듈(127)은 입력 이벤트가 발생하면, 그에 따른 물리량(예컨대, 저항, 정전용량 등)의 변화를 검출하여 입력 이벤트의 발생을 감지한다. 이어서, 터치 감지모듈(127)은 감지된 입력 이벤트의 물리량을 신호변화모듈(129)로 전송한다. 여기서, 입력 이벤트는 사용자의 조작신호가 터치스크린(120)에 입력되는 것이다. 신호변환모듈(129)은 입력 이벤트에 따른 물리량의 변화를 디지털 신호로 변환한다. 신호변환모듈(129)은 물리량의 변화로 발생된 입력 이벤트가 터치 이벤트인지 드래그 이벤트인지 판단한다. 또한, 신호변환모듈(129)은 터치 감지모듈(127)에 의해 감지된 입력 이벤트의 발생 좌표를 감지한다.
제어부(130)는 멀티미디어 재생장치(100)의 전반적인 동작을 제어하는 기능을 수행한다. 특히, 제어부(130)는 멀티미디어 파일 재생 중에 적어도 하나의 음원 객체를 표시부(121)를 통해 표시한다. 예를 들어, 제어부(130)는 파형을 가진 음원객체를 표시부(121)에 표시한다. 이때, 표시된 음원객체의 파형은 주파수대역출력정보, 볼륨정보 및 재생속도정보를 표시한다. 구체적으로, 주파수대역출력정보는 파형의 형태를 나타낸다. 파형의 특정지점의 높이가 높으면, 해당 주파수대역출력 값이 높고, 파형의 특정지점이 높이가 낮으면, 주파수대역출력 값이 낮다. 그리고, 볼륨정보는 파형의 진폭을 나타낸다. 파형의 가장 높은 지점과 가장 낮은 지점의 진폭이 높으면 볼륨이 크고, 가장 높은 지점과 가장 낮은 지점의 진폭이 낮으면 볼륨이 작다. 그리고, 재생속도정보는 파형의 진동수를 나타낸다. 파형의 진동수가 높으면 재생속도가 빠르고, 진동수가 낮으면 재생속도가 느리다.
덧붙여, 제어부(130)는 제1 음색정보(예컨대, 클래식 음색, 락 음색, 댄스 음색 등)를 포함하는 서로 다른 음원객체를 표시부(121)를 통해 표시한다. 또한, 제어부(130)는 제2 음색정보(예컨대, 보컬 음색, 멜로디 음색)를 포함하는 서로 다른 음원객체를 표시부(121)를 통해 표시할 수도 있다. 이때, 제어부(130)는 각각의 음원객체를 파형을 가진 에니메이션 형태로 표시부(121)에 표시하고, 각각의 음원객체는 중첩되지 않으며, 상하 방향으로 인접하여 표시된다. 각각의 음원객체를 나타내는 파형은 선의 굵기, 색상, 투명도 중 적어도 하나에 의해 구분된다.
다음으로, 멀티미디어 파일 재생 중에 음원객체에 입력 이벤트가 발생하면, 제어부(130)는 터치센서(125)를 제어하여 발생된 입력 이벤트의 종류를 판단한다. 이어서, 제어부(130)는 판단된 입력 이벤트의 종류에 따라 표시된 음원객체의 형태를 변형하고, 재생중인 멀티미디어 파일의 재생을 제어한다.
예를 들어, 제어부(130)는 발생된 입력 이벤트의 종류가 터치 이벤트이면, 특정 음원객체가 선택되었는지 판단한다. 특정 음원객체가 선택되었으면, 제어부(130)는 재생중인 멀티미디어 파일의 음색을 선택된 특정 음원객체에 대응하여 변경한다. 구체적으로, 제어부(130)는 선택된 특정 음원객체를 확인하고, 해당 음원객체의 주파수대역출력 값에 따라 변경전의 멀티미디어 파일의 주파수대역출력 값을 변경한다. 이때, 선택된 특정 음원객체가 클래식 음색을 나타낸 음원객체이면, 제어부(130)는 저주파(예컨대, 125Hz)의 출력을 높여 클래식 음색으로 해당 멀티미디어 파일을 재생한다. 그리고, 선택된 특정 음원객체가 보컬을 나타내는 음원객체이면, 제어부(130)는 사람의 목소리 주파수대역에 해당하는 주파수의 출력을 낮추어 멀티미디어 파일을 재생한다. 이로써, 사용자는 해당 멀티미디어 파일의 보컬부분을 제외한 멜로디만 들을 수 있다.
다른 예를 들어, 제어부(130)는 발생된 입력 이벤트의 종류가 드래그 이벤트이면, 드래그 이벤트의 시작과 종료좌표를 확인하여 드래그 이벤트의 방향을 판단한다. 구체적으로, 제어부(130)는 터치센서(125)를 제어하여 판단된 드래그 이벤트의 방향이 수직방향이면, Y좌표의 간격을 계산하여 계산된 간격에 대응하여 볼륨의 크기를 제어한다. 이때, 드래그 이벤트의 방향이 위에서 아래 방향이면, 제어부(130)는 볼륨을 줄이고, 드래그 이벤트의 방향이 아래에서 위 방향이면 제어부(130)는 볼륨을 높이는 것이 바람직하다.
또한, 제어부(130)는 터치센서(125)를 제어하여 판단된 드래그 이벤트의 방향이 수평방향이면, X좌표의 간격을 계산하여 계산된 간격에 대응하여 재생속도를 제어한다. 이때, 드래그 이벤트의 방향이 좌에서 우방향이면, 제어부(130)는 재생속도를 계산된 간격에 대응하여 줄이고, 우에서 좌방향이면, 제어부(130)는 재생속도를 계산된 간격에 대응하여 높이는 것이 바람직하다.
덧붙여, 제어부(130)는 터치센서(125)를 제어하여 판단된 드래그 이벤드의 방향이 대각선방향이면, X좌표의 간격과 Y좌표의 간격을 계산하여 계산된 간격이 큰 방향으로 판단한다. 이어서, 판단된 드래그 이벤트의 방향에 대응하여 볼륨 또는 재생속도를 제어한다.
마지막으로, 제어부(130)는 변경된 음원객체의 형태에 대응한 재생 제어정보를 저장부(110)에 저장한다. 제어부(130)는 오디오 처리부(140)를 제어하여 변경된 음원객체의 형태에 대응하여 멀티미디어 파일의 재생한다.
오디오 처리부(140)는 제어부(130)에서 발생되는 각종 오디오 신호를 스피커(SPK)에서 출력할 수 있는 형태의 신호로 처리하는 역할을 한다. 특히, 오디오 처리부(140)는 제어부(130)의 제어 하에 변경된 음원객체의 형태에 대응하여 멀티미디어 파일의 재생한다.
도 2는 본 발명의 실시 예에 따른 멀티미디어 재생장치의 사용자 인터페이스 방법을 순차적으로 나타낸 흐름도이다. 도 3a는 터치 이벤트에 대응하여 음원객체의 형태를 변형하는 과정에 대한 상세 흐름도이고, 도 3b는 드래그 이벤트에 대응하여 음원객체의 형태를 변형하는 과정에 대한 상세 흐름도이다.
도 1 및 도 2를 참조하면, 제어부(130)는 현재 멀티미디어 파일이 재생중인지 판단한다(S200). 현재 멀티미디어 파일이 재생중이면, 제어부(130)는 터치스크 린(120) 상의 제1 영역에 적어도 하나의 음원객체를 표시한다(S210). 예를 들어, 제어부(130)는 적어도 하나의 파형을 가진 음원객체를 표시한다. 이때, 각각의 음원객체는 음색정보를 나타내고, 파형은 주파수대역출력정보, 볼륨정보 및 재생속도정보를 나타낸다. 구체적으로, 주파수대역출력정보는 파형의 형태를 나타낸다. 파형의 특정지점이 높으면, 해당 주파수대역출력 값이 다른 주파수대역출력 값보다 높고, 파형의 특정지점이 낮으면, 해당 주파수대역출력 값이 다른 주파수대역출력 값보다 낮다. 그리고, 파형의 가장 높은 지점과 가장 낮은 지점의 차이가 크면, 볼륨이 크고, 차이가 낮으면 볼륨이 작은 것이 바람직하다. 그리고, 파형의 진동수가 짧으면 재생속도가 빠르고, 진동수가 길면 재생속도가 느린 것이 바람직하다. 이때, 제1 표시영역은 화면의 가로 방향으로 3등분했을 경우, 가운데 영역임이 바람직하다.
제어부(130)는 터치센서(125)를 제어하여 제1 영역에 입력 이벤트의 발생여부를 판단한다(S220). 제1 영역에 입력 이벤트의 발생이 있으면, 제어부(130)는 입력 이벤트의 종류에 대응하여 음원객체 형태를 변경한다(S300). 상기와 같이 제1 영역의 한번의 입력 이벤트의 발생에 의해 음원객체의 형태를 변경하지 않고, 제1 영역의 입력 이벤트의 발생이 있으면, 제어부(130)는 제1 영역을 확대하여 표시하고, 다른 입력 이벤트의 입력이 있으면, 해당 입력 이벤트의 종류에 대응하여 음원객체의 형태를 변경하는 것이 가능하다. 이때, 제1 영역에 표시된 음원객체의 확대비율은 화면 전체에 표시되는 것이 바람직하나, 사용자의 설정에 따라 변경 가능함은 물론이다. 음원객체 형태를 변경하는 과정에 대한 상세한 설명은 도 3a 및 도 3b를 참조하여 설명한다.
도 3a를 참조하면, 제어부(130)는 터치 이벤트의 발생에 따라 특정 음원객체가 선택되었는지 판단한다(S310). 예를 들어, 도 4a 도시된 바와 같이 제어부(130)는 제1 음색정보(예컨대, 클래식 음색, 락 음색, 댄스 음색 등)를 포함하는 적어도 하나의 음원객체를 파형으로 표시부(121)에 표시한다. 그리고, 음색정보를 포함한 각각의 음원객체는 중첩되지 않고, 상하 방향으로 인접하여 표시되어 있고, 각각의 음원객체를 나타내는 파형은 선의 굵기에 의해 구분되어 있다. 덧붙여, 각각의 음원객체를 나타내는 파형은 선의 굵기 뿐만 아니라, 색상, 투명도 중 적어도 하나에 의해 구분된다. 각각의 음원객체를 구별하기 위한 선의 굵기, 색상, 및 투명도는 미리 설정되어 있음이 바람직하다. 하지만, 사용자의 선택정보에 의해 음원객체를 구별하기 위한 값을 변경하는 것이 가능함은 물론이다.
다른 예를 들어, 도 4b에 도시된 바와 같이, 제어부(130)는 제2 음색정보(예컨대, 보컬 음색, 멜로디 음색)를 포함하는 파형을 가진 음원객체로 표시부(121)에 표시한다.
특정 음원객체가 선택되었으면, 제어부(130)는 표시된 특정 음원객체를 다른 음원객체와 구분하여 표시한다(S315). 예를 들어, 도 4a, 또는 도 4b에 도시된 바와 같이, 선택된 음원객체는 선택되지 않은 음원객체와 다른 색상으로 표시한다.
도 3b를 참조하면, 제어부(130)는 드래그 이벤트의 시작 및 종료 좌표를 확인한다(S351). 제어부(130)는 확인된 시작 및 종료좌표로부터 드래그 이벤트의 방향을 판단한다(S352). 드래그 이벤트의 방향이 수직방향이면, 제어부(130)는 시작 및 종료좌표의 Y좌표 간격을 계산한다(S353). 이이서, 제어부(130)는 계산된 Y좌표 간격과 드래그 이벤트의 방향에 대응하여 음원객체의 형태를 변경한다(S354). 예를 들어, 도 5a에 도시된 바와 같이, 드래그 이벤트의 방향이 아래에서 위방향이면, 도 5b에 도시된 바와 같이, 음원객체의 진폭을 높여 표시한다. 다른 예를 들어, 도 6a에 도시된 바와 같이, 드래그 이벤트의 방향이 위에서 아래 방향이면, 도 6b에 도시된 바와 같이, 음원객체의 진폭을 낮추어 표시한다.
한편, 드래그 이벤트의 방향이 수평방향이면, 제어부(130)는 시작 및 종료좌표의 X좌표 간격을 계산한다(S355). 이어서, 제어부(130)는 계산된 X좌표 간격과 드래그 이벤트의 방향에 대응하여 음원객체의 형태를 변경한다(S356). 예를 들어, 도 7a에 도시된 바와 같이, 드래그 이벤트의 방향이 좌에서 우방향이면, 도 7b에 도시된 바와 같이, 음원의 진동수를 낮추어 표시한다. 다른 예를 들어, 도 8a에 도시된 바와 같이, 드래그 이벤트의 방향이 우에서 좌방향이면, 도 8b에 도시된 바와 같이, 음원의 진동수를 높여 표시한다.
다시 도 2를 참조하면, 제어부(130)는 변형된 음원객체의 형태에 따라 멀티미디어 파일의 재생을 제어한다(S230).
예를 들어, 특정 음원객체가 선택된 경우, 제어부(130)는 선택된 음원객체를 확인하고, 해당 음원객체의 주파수대역출력 값에 따라 변경전의 멀티미디어 파일의 주파수대역출력 값을 변경한다. 이때, 선택된 특정 음원객체가 클래식 음색을 나타낸 음원객체이면, 제어부(130)는 저주파(예컨대, 125Hz)의 출력을 높여 멀티미디어 파일의 음색을 클래식 음색으로 변경하여 재생한다. 그리고, 선택된 음원객체가 보 컬을 나타내는 음원객체이면, 제어부(130)는 사람의 목소리 주파수대역에 해당하는 주파수의 출력을 낮추어 멀티미디어 파일을 재생한다. 이로써, 사용자는 해당 멀티미디어 파일의 보컬부분을 제외한 멜로디만을 들을 수 있다.
다른 예를 들어, 음원객체의 형태가 변형된 경우, 제어부(130)는 변경된 음원객체의 형태에 대응하여 멀티미디어 파일을 재생한다. 도 5a에 도시된 음원객체의 형태가 도 5b에 도시된 음원객체 형태로 변형되면, 제어부(130)는 음원객체의 진폭에 따라 재생중인 멀티미디어 파일의 볼륨을 낮춘다. 또한, 도 6a에 도시된 음원객체의 형태가 도 6b에 도시된 음원객체 형태로 변형되면, 제어부(130)는 음원객체의 진폭에 따라 재생중인 멀티미디어 파일의 볼륨을 높인다.
덧붙여, 도 7a에 도시된 음원객체의 형태가 도 7b에 도시된 음원객체 형태로 변형되면, 제어부(130)는 음원객체의 진동수에 따라 재생중인 멀티미디어 파일의 재생속도를 낮춘다. 또한, 도 8a에 도시된 음원객체의 형태가 도 8b에 도시된 음원객체 형태로 변형되면, 제어부(130)는 음원객체의 진동수에 따라 재생중인 멀티미디어 파일의 재생속도를 높인다.
다시 도 2를 참조하면, 제어부(130)는 멀티미디어 파일 재생 종료신호의 입력이 있는지 확인한다(S240).이어서, 제어부(130)는 멀티미디어 파일 재생 종료신호의 입력이 있으면, 제어부(130)는 멀티미디어 파일의 재생을 종료한다(S250).
본 실시 예에서는 음원객체가 파형으로 표시되는 것에 대해 설명했지만. 음원객체는 임의의 도형이나, 선의 형태로 표시될 수 있음은 물론이다.
이상에서는 본 발명에서 특정의 바람직한 실시 예에 대하여 도시하고 또한 설명하였다. 그러나, 본 발명은 상술한 실시 예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
본 발명에 따르면, 멀티미디어 재생장치에 음원객체를 파형으로 표시하여 시각적으로 멀티미디미어 파일의 재생상태를 용이하게 알 수 있고, 터치스크린에 터치/ 드래그 이벤트가 입력됨에 따라 재생상태를 쉽게 제어할 수 있다.

Claims (11)

  1. 터치스크린을 구비한 멀티미디어 재생장치의 사용자 인터페이스 방법에 있어서,
    멀티미디어 파일 재생 시, 상기 터치스크린의 제1 영역에 적어도 하나의 음원객체를 표시하는 과정과,
    상기 음원객체에 입력 이벤트가 발생하면, 상기 입력 이벤트의 종류를 판단하는 과정과,
    상기 입력 이벤트의 종류에 따라 상기 음원객체의 형태를 변형하고, 상기 재생중인 멀티미디어 파일의 재생을 제어하는 과정을 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  2. 제1 항에 있어서, 상기 음원객체는
    음색정보, 볼륨정보, 주파수대역출력정보 및 재생속도정보를 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  3. 제2 항에 있어서, 상기 제1 영역에 적어도 하나의 음원객체를 표시하는 과정은
    음색을 나타내는 복수의 음원객체를 표시하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  4. 제3 항에 있어서, 상기 발생한 입력 이벤트의 종류를 판단하는 과정은
    상기 제1 영역에 제1 입력 이벤트가 발생하면, 상기 제1 영역을 확대하여 표시하는 과정과,
    상기 확대된 제1 영역에 제2 입력 이벤트가 발생하면, 상기 발생한 제2 입력 이벤트의 종류를 판단하는 과정을 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  5. 제4 항에 있어서, 상기 입력 이벤트 종류는
    터치 이벤트와 드래그 이벤트 중 어느 하나임을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  6. 제5 항에 있어서, 상기 멀티미디어 파일의 재생을 제어하는 과정은
    상기 판단된 제2 입력 이벤트의 종류가 터치 이벤트이면, 상기 제2 입력 이벤트가 특정 음원객체를 선택하였는지 판단하는 과정과,
    상기 제2 입력 이벤트가 특정 음원객체를 선택하였으면, 상기 재생중인 멀티미디어 파일의 음색을 상기 선택된 특정 음원객체에 대응하여 변경하는 과정을 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  7. 제5 항에 있어서, 상기 멀티미디어 파일의 재생을 제어하는 과정은
    상기 판단된 제2 입력 이벤트의 종류가 드래그 이벤트이면, 상기 드래그 이벤트의 시작 및 종료좌표를 확인하여 상기 제2 입력 이벤트의 방향을 확인하는 과정과,
    상기 제2 입력 이벤트의 방향이 수직방향이면, 상기 시작 및 종료좌표로부터 Y좌표의 간격을 계산하는 과정과,
    계산된 Y좌표의 간격과 상기 제2 입력 이벤트의 방향에 대응하여 상기 재생중인 멀티미디어 파일의 볼륨을 변경하는 과정을 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  8. 제7 항에 있어서, 상기 멀티미디어 파일의 재생을 제어하는 과정은
    상기 드래그 이벤트의 방향이 수평방향이면, 상기 시작 및 종료좌표로부터 X좌표의 간격을 계산하는 과정과,
    계산된 X좌표의 간격과 상기 제2 입력 이벤트의 방향에 대응하여 상기 재생중인 멀티미디어 파일의 재생속도를 변경하는 과정을 더 포함하는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  9. 제 5항에 있어서, 상기 음원객체는
    음원의 대응하는 파형임을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  10. 제9 항에 있어서, 상기 음원객체는
    상기 파형의 굵기, 색상, 투명도 중 적어도 어느 하나에 의해 구분되는 것을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
  11. 제10 항에 있어서, 상기 멀티미디어 파일은
    동영상 파일 또는 오디오 파일임을 특징으로 하는 멀티미디어 재생장치의 사용자 인터페이스 방법.
KR1020070011722A 2007-02-05 2007-02-05 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법 KR100842733B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020070011722A KR100842733B1 (ko) 2007-02-05 2007-02-05 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법
US11/969,382 US20080189613A1 (en) 2007-02-05 2008-01-04 User interface method for a multimedia playing device having a touch screen
EP08000161.3A EP1953632B1 (en) 2007-02-05 2008-01-07 A user interface method for a multimedia playing device having a touch screen
CN2008100088110A CN101241414B (zh) 2007-02-05 2008-01-24 具有触摸屏的多媒体播放装置的用户接口方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070011722A KR100842733B1 (ko) 2007-02-05 2007-02-05 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법

Publications (1)

Publication Number Publication Date
KR100842733B1 true KR100842733B1 (ko) 2008-07-01

Family

ID=39322762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070011722A KR100842733B1 (ko) 2007-02-05 2007-02-05 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법

Country Status (4)

Country Link
US (1) US20080189613A1 (ko)
EP (1) EP1953632B1 (ko)
KR (1) KR100842733B1 (ko)
CN (1) CN101241414B (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100101817A (ko) * 2009-03-10 2010-09-20 엘지전자 주식회사 멀티 미디어 파일을 재생하는 이동 단말기 및 이동 단말기의 제어 방법
KR20110087154A (ko) * 2010-01-25 2011-08-02 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
KR20120006673A (ko) * 2010-07-13 2012-01-19 엘지전자 주식회사 멀티미디어 재생 장치 및 그 재생 방법
KR20180096857A (ko) * 2017-02-20 2018-08-30 네이버 주식회사 멀티미디어 콘텐츠의 재생을 제어하기 위한 방법 및 시스템
WO2022216099A1 (ko) * 2021-04-08 2022-10-13 주식회사 버시스 사용자 입력에 기반하여 사운드를 제공하는 전자 장치 및 그 동작 방법
US11579838B2 (en) 2020-11-26 2023-02-14 Verses, Inc. Method for playing audio source using user interaction and a music application using the same

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10375223B2 (en) 2008-08-28 2019-08-06 Qualcomm Incorporated Notifying a user of events in a computing device
US20100064261A1 (en) * 2008-09-09 2010-03-11 Microsoft Corporation Portable electronic device with relative gesture recognition mode
KR101544475B1 (ko) * 2008-11-28 2015-08-13 엘지전자 주식회사 터치를 통한 입출력 제어
US20100146388A1 (en) * 2008-12-05 2010-06-10 Nokia Corporation Method for defining content download parameters with simple gesture
CN101813982B (zh) * 2010-03-10 2012-05-30 鸿富锦精密工业(深圳)有限公司 具有运动响应功能的电子装置及其执行输入操作的方法
JP5494337B2 (ja) 2010-07-30 2014-05-14 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
DE102011108318A1 (de) 2011-07-22 2013-01-24 Novomatic Ag Elektronisches Spiel- und/oder Unterhaltungsgerät
PL2791921T3 (pl) 2013-01-14 2018-04-30 Novomatic Ag Elektroniczne urządzenie do gry i/lub rozrywki
CN103218163B (zh) * 2013-03-28 2015-12-23 广东欧珀移动通信有限公司 一种调节音量的方法、装置及移动设备
US20150193196A1 (en) * 2014-01-06 2015-07-09 Alpine Electronics of Silicon Valley, Inc. Intensity-based music analysis, organization, and user interface for audio reproduction devices
KR20150116037A (ko) * 2014-04-03 2015-10-15 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR20160018268A (ko) * 2014-08-08 2016-02-17 삼성전자주식회사 라인 인터랙션을 이용하여 컨텐트를 제어하는 방법 및 장치
US9990113B2 (en) 2015-09-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control
AU2016101424A4 (en) * 2015-09-08 2016-09-15 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
CN106101405B (zh) * 2016-06-07 2019-12-13 王宇 在移动终端上对音频数据进行编辑或修改的方法及装置
US20220222033A1 (en) * 2021-01-11 2022-07-14 Rovi Guides, Inc. Customized volume control in small screen media players
USD1012125S1 (en) * 2022-03-11 2024-01-23 Juvyou (Europe) Limited Display screen with animated graphical user interface
USD1012126S1 (en) * 2022-03-11 2024-01-23 Juvyou (Europe) Limited Display screen with an icon

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002034023A (ja) 2000-07-17 2002-01-31 Sony Corp 双方向通信システム、表示装置、ベース装置および双方向通信方法
JP2005316745A (ja) 2004-04-28 2005-11-10 Kiko Kagi Kofun Yugenkoshi 開始位置及び移動方向により定義される入力方法、コントロールモジュール及びその電子製品
KR20060008735A (ko) * 2004-07-24 2006-01-27 주식회사 대우일렉트로닉스 터치패드가 장착된 리모콘
US20060161871A1 (en) 2004-07-30 2006-07-20 Apple Computer, Inc. Proximity detector in handheld device

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5812688A (en) * 1992-04-27 1998-09-22 Gibson; David A. Method and apparatus for using visual images to mix sound
US6154601A (en) * 1996-04-12 2000-11-28 Hitachi Denshi Kabushiki Kaisha Method for editing image information with aid of computer and editing system
AU3407497A (en) * 1996-06-24 1998-01-14 Van Koevering Company Musical instrument system
JP3196678B2 (ja) * 1997-02-07 2001-08-06 株式会社村田製作所 表面波装置
US6686918B1 (en) * 1997-08-01 2004-02-03 Avid Technology, Inc. Method and system for editing or modifying 3D animations in a non-linear editing environment
CN1253640A (zh) * 1997-12-29 2000-05-17 皇家菲利浦电子有限公司 用于表示输入参数权重的图形用户界面
US7107110B2 (en) * 2001-03-05 2006-09-12 Microsoft Corporation Audio buffers with audio effects
US6703550B2 (en) * 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
US20050190199A1 (en) * 2001-12-21 2005-09-01 Hartwell Brown Apparatus and method for identifying and simultaneously displaying images of musical notes in music and producing the music
US20040137984A1 (en) * 2003-01-09 2004-07-15 Salter Hal C. Interactive gamepad device and game providing means of learning musical pieces and songs
US20040239622A1 (en) * 2003-05-30 2004-12-02 Proctor David W. Apparatus, systems and methods relating to improved user interaction with a computing device
JP2008508631A (ja) * 2004-08-02 2008-03-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 浮動小数点値を設定するタッチスクリーンスライダ
US20060075347A1 (en) * 2004-10-05 2006-04-06 Rehm Peter H Computerized notetaking system and method
US7774707B2 (en) * 2004-12-01 2010-08-10 Creative Technology Ltd Method and apparatus for enabling a user to amend an audio file
WO2006100980A1 (ja) * 2005-03-18 2006-09-28 Pioneer Corporation 音声信号処理装置及びそのためのコンピュータプログラム
US7869892B2 (en) * 2005-08-19 2011-01-11 Audiofile Engineering Audio file editing system and method
US7957547B2 (en) * 2006-06-09 2011-06-07 Apple Inc. Sound panner superimposed on a timeline
US7623755B2 (en) * 2006-08-17 2009-11-24 Adobe Systems Incorporated Techniques for positioning audio and video clips
US20080084400A1 (en) * 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
CN102867526A (zh) * 2007-02-14 2013-01-09 缪斯亚米有限公司 用于分布式音频文件编辑的门户网站
KR101498623B1 (ko) * 2008-06-25 2015-03-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002034023A (ja) 2000-07-17 2002-01-31 Sony Corp 双方向通信システム、表示装置、ベース装置および双方向通信方法
JP2005316745A (ja) 2004-04-28 2005-11-10 Kiko Kagi Kofun Yugenkoshi 開始位置及び移動方向により定義される入力方法、コントロールモジュール及びその電子製品
KR20060008735A (ko) * 2004-07-24 2006-01-27 주식회사 대우일렉트로닉스 터치패드가 장착된 리모콘
US20060161871A1 (en) 2004-07-30 2006-07-20 Apple Computer, Inc. Proximity detector in handheld device

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100101817A (ko) * 2009-03-10 2010-09-20 엘지전자 주식회사 멀티 미디어 파일을 재생하는 이동 단말기 및 이동 단말기의 제어 방법
KR101589307B1 (ko) 2009-03-10 2016-01-27 엘지전자 주식회사 멀티 미디어 파일을 재생하는 이동 단말기 및 이동 단말기의 제어 방법
KR20110087154A (ko) * 2010-01-25 2011-08-02 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
KR101646141B1 (ko) * 2010-01-25 2016-08-08 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
KR20120006673A (ko) * 2010-07-13 2012-01-19 엘지전자 주식회사 멀티미디어 재생 장치 및 그 재생 방법
KR101701838B1 (ko) * 2010-07-13 2017-02-02 엘지전자 주식회사 멀티미디어 재생 장치 및 그 재생 방법
KR20180096857A (ko) * 2017-02-20 2018-08-30 네이버 주식회사 멀티미디어 콘텐츠의 재생을 제어하기 위한 방법 및 시스템
KR101949493B1 (ko) 2017-02-20 2019-02-19 네이버 주식회사 멀티미디어 콘텐츠의 재생을 제어하기 위한 방법 및 시스템
US11579838B2 (en) 2020-11-26 2023-02-14 Verses, Inc. Method for playing audio source using user interaction and a music application using the same
WO2022216099A1 (ko) * 2021-04-08 2022-10-13 주식회사 버시스 사용자 입력에 기반하여 사운드를 제공하는 전자 장치 및 그 동작 방법

Also Published As

Publication number Publication date
EP1953632B1 (en) 2018-02-21
EP1953632A3 (en) 2011-03-09
CN101241414B (zh) 2010-12-22
CN101241414A (zh) 2008-08-13
US20080189613A1 (en) 2008-08-07
EP1953632A2 (en) 2008-08-06

Similar Documents

Publication Publication Date Title
KR100842733B1 (ko) 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법
US10599394B2 (en) Device, method, and graphical user interface for providing audiovisual feedback
JP6670954B2 (ja) 触覚フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
US8367922B2 (en) Music composition method and system for portable device having touchscreen
KR101419701B1 (ko) 멀티미디어 재생장치에서 멀티 터치를 이용한 재생 제어 방법
JP3686906B2 (ja) 音楽ゲームプログラム及び音楽ゲーム装置
EP2760014B1 (en) Interactive score curve for adjusting audio parameters of a user's recording.
US20130325154A1 (en) Apparatus and method for high speed visualization of audio stream in an electronic device
AU2009295348A1 (en) Video and audio content system
WO2017028686A1 (zh) 一种信息处理方法、终端设备及计算机存储介质
JP2010055274A (ja) 再生装置、再生方法、およびプログラム
JP6721570B2 (ja) 楽曲再生システム、データ出力装置、及び楽曲再生方法
JP2014520352A (ja) エンハンスされたメディア記録およびプレイバック
CN111831250B (zh) 音频处理方法、装置、存储介质及电子设备
CN112883223A (zh) 音频展示方法、装置、电子设备及计算机存储介质
JP2006189471A (ja) プログラム、歌唱力判定方法、ならびに、判定装置
CN102246224B (zh) 用于修改数字音乐内容的回放的方法和设备
JP2016193052A (ja) ゲーム装置及びゲームプログラム
JP2012247558A (ja) 情報処理装置、情報処理方法及び情報処理プログラム
JP5589741B2 (ja) 楽曲編集装置およびプログラム
KR20070120359A (ko) 음파 크기 디스플레이 장치 및 그 방법
KR100841047B1 (ko) 곡 데이터 편집 기능 및 mp3기능이 내장된 휴대용 플레이어
JP2003150155A (ja) 演奏練習装置、演奏練習方法、プログラム及び記録媒体
JP2011215347A (ja) タイミング指定装置、曲再生装置、カラオケシステム及びタイミング指定方法
KR101476526B1 (ko) 스마트기기를 이용한 음악 학습방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130530

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140529

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20150528

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20160530

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20180530

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20190530

Year of fee payment: 12