KR101575677B1 - 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템 - Google Patents

디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템 Download PDF

Info

Publication number
KR101575677B1
KR101575677B1 KR1020140041222A KR20140041222A KR101575677B1 KR 101575677 B1 KR101575677 B1 KR 101575677B1 KR 1020140041222 A KR1020140041222 A KR 1020140041222A KR 20140041222 A KR20140041222 A KR 20140041222A KR 101575677 B1 KR101575677 B1 KR 101575677B1
Authority
KR
South Korea
Prior art keywords
haptic effect
file
effect data
terminal device
client
Prior art date
Application number
KR1020140041222A
Other languages
English (en)
Other versions
KR20150116241A (ko
Inventor
윤주영
Original Assignee
택추얼센스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 택추얼센스 주식회사 filed Critical 택추얼센스 주식회사
Priority to KR1020140041222A priority Critical patent/KR101575677B1/ko
Publication of KR20150116241A publication Critical patent/KR20150116241A/ko
Application granted granted Critical
Publication of KR101575677B1 publication Critical patent/KR101575677B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

본 발명은 다양한 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등을 반영하여 다양한 햅틱 효과를 제공하되 크리에이터(creator)에 의한 창의적이고 다양한 햅틱 효과 데이터 제공에 대한 동기를 부여하면서 디지털 음원 데이터와 관련된 저작권 문제를 발생시키지 않고 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있는 새로운 온라인 비즈니스 모델 및 시스템을 제공한다. 본 발명에 따르면, 미디어 파일의 음원, 영상 등과 결합된 새로운 햅틱 효과를 단말 장치 사용자에게 경험하게 하여 새롭고 신선한 재미와 느낌을 제공하는 온라인 서비스 제공이 가능하고, 시각, 청각 외에 촉각이라는 새로운 감각을 미디어에 통합시킨 새로운 파라다임의 미디어의 창출이 가능하다.

Description

디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템 {Method and system for providing client's terminal with haptic effect based on digital sound source data via on-line network}
본 발명은 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템에 관한 것으로서, 보다 상세하게는 단말 장치에 저장된 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등을 반영하여 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있고, 이에 따라 다양한 음원에 따른 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있는 방법 및 시스템에 관한 것이다.
구체적으로, 본 발명은 각종 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일에 포함되어 있는 디지털 음원 데이터에 대응하는 햅틱 효과 데이터를 디지털 음원 데이터와 분리하여 생성, 저장하고 온라인 네트워크를 통해 클라이언트의 단말장치에 제공함으로써 음원 데이터의 유통에 따른 저작권 문제를 방지할 수 있는 방법 및 시스템에 관한 것이다.
또한, 본 발명은 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일의 메타 데이터를 햅틱 효과 데이터 생성시 별도로 추출 생성하여 이를 대응하는 햅틱 효과 데이터와 매핑하여 저장하고, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일을 저장하고 있는 클라이언트의 단말 장치에서는 메타 데이터를 이용하여 온라인 네트워크를 통해 햅틱 효과 데이터를 햅틱 효과 서비스 서버에서 제공받아 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 디지털 음원 데이터의 사운드와 햅틱 효과를 함께 재생할 수 있는 방법 및 시스템에 관한 것이다.
추가로, 본 발명은 햅틱 효과 데이터의 소스 파일을 햅틱 효과 서비스 서버에서 인코딩한 후 클라이언트에게 유통하게 하고, 인코딩된 햅틱 효과 데이터 실행 파일의 다운로드 회수, 스트리밍 회수 등의 사용량에 따라 수익을 객관적으로 배분하게 하여 햅틱 효과 데이터 파일의 불법 유통을 방지하고 햅틱 효과 서비스 서버에서 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있게 하는 방법 및 시스템에 관한 것이다.
일반적으로 햅틱 기술이란 조이스틱, 마우스, 키보드, 터치스크린 등과 같은 각종 게임기나 컴퓨터의 입력장치를 조작하면서 사용자가 진동, 운동감, 힘 등을 느낄 수 있게 조작되어 사용자에게 컴퓨터 가상체험 등과 같이 보다 실감나는 정보를 전달하는 기술을 의미한다.
기존의 컴퓨터 기술에서는 인간과 컴퓨터가 시각, 청각 정보를 이용하여 정보를 주고 받았으나, 사용자가 보다 구체적이고 실감나는 정보를 원하게 됨으로써, 이를 충족시키기 위해 촉각 정보를 전달하는 햅틱 기술이 개발되었다.
최근에 햅틱 기술은 컴퓨터 촉각 기술을 일컫는 용어로 사용되고 있는데, 노트북, 스마트폰, 태블릿 PC 등의 정보통신 단말기나 비디오 게임 콘솔, 리모트 컨트롤 등의 전자기기가 발달함에 따라 이들 기기를 이용하여 사용자에게 시각, 청각 정보 외에 촉감을 느낄 수 있게 하는 햅틱 기술이 주목받고 있다. 특히 최근에는 스마트폰의 광범위한 보급과 함께 스마트폰 내에 햅틱 효과를 재생할 수 있는 장치와 이를 제어하는 소프트웨어가 제공되어 스마트폰을 손에 쥐고 있을 때 사용자에게 다양한 햅택 효과를 제공할 수 있게 되었다.
또한, 햅틱 기술은 게임 등을 할 때 시각 정보나 청각 정보와 관련된 효과를 사용자에게 진동으로 전달하는 기능을 벗어나 음원의 재생과 연계하여 스마트폰을 손에 쥐고 사운드를 듣고 있는 사용자에게 사운드와 연계된 진동 효과를 손으로 전달하는 기능으로의 확장을 꾀하고 있다.
이와 관련하여 대한민국 등록특허공보 제10-1121785호에서는 종래의 햅틱 기술이 음악과 관련하여 음악의 선율을 반영하기 보다는 미리 정의된 방식으로 햅틱 효과를 발생하도록 하는데 그치고 있는 한계를 감안하여 음량의 변화에 따른 햅틱 효과를 제공하는 기술을 개시하고 있다. 그러나, 상기 선행기술은 단말 장치에 저장된 소리 데이터의 음량 크기 차(변화 없음, 증가함, 감소함)만을 이용하고 있어 다양한 햅틱 효과, 즉 음악의 음계, 높낮이, 강도, 박자, 화음 등을 반영할 수 없는 단조로운 햅틱 효과만 제공하는 한계가 있어 다양한 음원에 따른 다양한 햅틱 효과를 얻을 수는 없었다. 또한, 상기 선행기술에서는 단말장치 내에 햅틱 효과 생성 장치가 반드시 탑재되어야 하기 때문에 단순히 햅틱 효과 재생 장치 만이 설치되는 경우 보다 단말 장치의 가격이 높게 되고 크리에이터(creator)에 의한 창의적이고 다양한 햅틱 효과 제공은 반영하기 어려운 한계가 있었다.
또한, 대한민국 공개특허공보 제10-2010-0121051호에서는 휴대단말에서 문자메시지를 통한 햅틱 서비스 구현 방법을 개시하고 있으나, 이는 단순히 문자메시지 발송시 발신자의 감정이나 의사에 대응되는 한정된 햅틱 효과를 문자메시지 수신자의 단말기에서 출력할 수 있을 뿐이어서 사전 설정된 정보에 의해 서비스 서버에 저장된 몇가지의 제한된 단조로운 햅틱 효과 밖에 제공할 수 없는 한계가 있었고, 음원 데이터에 기반한 다양한 햅틱 효과를 제공할 수 없었을 뿐만아니라 햅틱 효과를 재생되는 음원 데이터의 소리와 연계하여 재생하는 것도 아니었다.
또한, 대한민국 공개특허공보 제10-2011-0062644호에서는 단말기를 통하여 사용자가의 호 연결이 입력되면 복수의 햅틱링 중에서 사용자가 선택한 햅틱링을 통화연결음으로 상대방 단말기로 전송하여 사용자의 감정상태를 상대방에게 전달하는 햅틱링 서비스 제공 시스템 및 방법을 개시하고 있으나, 이는 발신자 단말기에 저장된 햅틱링이나 햅틱링 제공서버에 저장된 햅틱링을 선택메뉴를 통해서만 선택할 수 있는 햅틱 효과의 제한이 있었으며, 자신의 감정상태에 대응하는 제한된 햅틱링을 상대방에게 전달하는 것에 머무는 것이었다.
따라서, 본 발명이 속하는 기술분야에서는 전술한 바와 같은 종래의 단조로운 햅틱 기술 및 햅틱 효과 제공 서비스의 개선에 대한 요구가 여전히 존재하고 있다고 할 수 있다.
대한민국 등록특허공보 제10-1121785호 (2012.03.09) 대한민국 공개특허공보 제10-2010-0121051호 (2010.11.17) 대한민국 공개특허공보 제10-2011-0062644호 (2011.06.10)
본 발명은 상기와 같은 문제점을 해결하는데 그 목적이 있는 발명으로서, 단말 장치에 저장된 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등을 반영하여 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있고, 이에 따라 다양한 음원에 따른 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있는 방법 및 시스템을 제공하는데 그 목적이 있다.
구체적으로, 본 발명은 각종 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일에 포함되어 있는 디지털 음원 데이터에 대응하는 햅틱 효과 데이터를 디지털 음원 데이터와 분리하여 생성, 저장하고 온라인 네트워크를 통해 클라이언트의 단말장치에 제공함으로써 음원 데이터의 유통에 따른 저작권 문제를 방지할 수 있는 방법 및 시스템을 제공하는데 그 목적이 있다.
또한, 본 발명은 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일의 메타 데이터를 햅틱 효과 데이터 생성시 별도로 추출 생성하여 이를 대응하는 햅틱 효과 데이터와 매핑하여 저장하고, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일을 저장하고 있는 클라이언트의 단말 장치에서는 메타 데이터를 이용하여 온라인 네트워크를 통해 햅틱 효과 데이터를 햅틱 효과 서비스 서버에서 제공받아 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 디지털 음원 데이터의 사운드와 햅틱 효과를 함께 재생할 수 있는 방법 및 시스템을 제공하는데 그 목적이 있다.
추가로, 본 발명은 햅틱 효과 데이터의 소스 파일을 햅틱 효과 서비스 서버에서 인코딩한 후 클라이언트에게 유통하게 하고, 인코딩된 햅틱 효과 데이터 실행 파일의 다운로드 회수, 스트리밍 회수 등의 사용량에 따라 수익을 객관적으로 배분하게 하여 햅틱 효과 데이터 파일의 불법 유통을 방지하고 햅틱 효과 서비스 서버에서 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있게 하는 방법 및 시스템을 제공하는데 그 목적이 있다.
전술한 바와 같은 종래기술의 문제점을 감안하여 본 발명자는 예의 연구개발을 거듭한 결과, 다양한 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등을 반영하여 다양한 햅틱 효과를 제공하되 크리에이터(creator)에 의한 창의적이고 다양한 햅틱 효과 데이터 제공에 대한 동기를 부여하면서 디지털 음원 데이터와 관련된 저작권 문제를 발생시키지 않고 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있는 새로운 온라인 비즈니스 모델 및 시스템을 개발하기에 이르렀다.
한편, 이하의 본 발명의 명세서에서 사용하는 용어 중 "단말 장치"란 통상의 이동통신 단말기, 스마트폰, 태블릿 PC, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), 디지털 카메라, 휴대용 게임기, MP3 플레이어, 스마트 TV에 유무선으로 연결되는 리모콘, 퍼스널 컴퓨터나 노트북 컴퓨터에 유무선으로 연결되는 마우스 또는 비디오 게임 콘솔 등을 모두 포함하는 의미이다.
또한, 본 발명의 명세서에서 사용하는 용어 중 "디지털 음원 데이터"란 각종 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일에 포함되어 있는 디지털 신호의 사운드 데이터로서 PCM(Pulse Code Modulation) 등의 디지털 방식으로 저장되고, 햅틱 효과 데이터 생성의 기초가 되는 데이터를 의미한다.
다음으로, 본 발명의 명세서에서 사용하는 용어 중 "햅틱 효과 데이터"란 디지털 음원 데이터로부터 생성되어 단말 장치 사용자에게 다양한 진통 패턴을 제공할 수 있는 데이터로서, 전기 에너지를 진동 형태의 역학 에너지로 전환할 수 있는 진동 소자를 구동시켜 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등이 반영된 다양한 진통 패턴을 시간의 경과에 따라 단말 장치 사용자에게 제공할 수 있는 데이터를 의미한다.
추가로, 본 발명의 명세서에서 사용하는 용어 중 "메타 데이터"란 데이터에 관한 구조화된 데이터로서, 다른 데이터를 설명해 주는 데이터 또는 속성정보라고도 하는데, 대량의 정보 가운데에서 찾고 있는 정보를 효율적으로 찾아내서 이용하기 위해 일정한 규칙에 따라 콘텐츠에 대하여 부여되는 데이터를 의미한다. 여기에는 콘텐츠의 위치와 내용, 작성자에 관한 정보, 권리 조건, 이용 조건, 이용 내력 등이 기록되어 있다. 또한, "매핑"이란 하나의 값을 다른 값으로 또는 한 데이터 집합을 다른 데이터 집합으로 번역하거나, 2개의 데이터 집합 사이에 1:1 대응 관계를 설정하는 것을 의미한다.
본 발명의 일실시예의 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법은,
(a) 크리에이터(creator)의 단말장치에서 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일에 포함되어 있는 디지털 음원 데이터를 기반으로 햅틱 효과 데이터를 상기 디지털 음원 데이터와 분리하여 생성하는 단계와,
(b) 상기 크리에이터의 단말장치는 상기 미디어 파일로부터 메타 데이터를 상기 햅틱 효과 데이터 생성시 별도로 추출 생성하여 상기 햅틱 효과 데이터의 소스 파일과 함께 상기 단말장치에 제공된 메모리에 저장하는 단계와,
(c) 상기 크리에이터 단말장치로부터 상기 햅틱 효과 데이터의 소스 파일과 이에 대응하는 메타 데이터를 온라인 네트워크를 통해 햅틱 효과 서비스 서버로 전송하는 단계와,
(d) 상기 햅틱 효과 서비스 서버에서는 수신된 햅틱 효과 데이터의 소스 파일을 인코딩하여 햅틱 효과 데이터 실행 파일로 변환하고, 상기 변환된 햅틱 효과 데이터 실행 파일과 수신된 메타 데이터를 매핑하여 상기 햅틱 효과 서비스 서버에 제공된 데이터 베이스에 저장하는 단계와,
(e) 미디어 파일을 저장하고 있는 클라이언트의 단말 장치에서 상기 미디어 파일로부터 메타 데이터를 추출하고 추출된 메타 데이터를 상기 햅틱 효과 서비스 서버로 전송하는 단계와,
(f) 상기 햅틱 효과 서비스 서버는 수신된 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일을 수신된 메타 데이터를 이용하여 상기 데이터 베이스에서 검색하는 단계와,
(g) 상기 햅틱 효과 서비스 서버에서는 상기 데이터 베이스에서 검색된 햅틱 효과 데이터 실행 파일을 상기 클라이언트의 단말 장치로 전송하는 단계와,
(h) 상기 클라이언트의 단말 장치에서는 수신된 햅틱 효과 데이터 실행 파일을 실행하여 햅틱 효과를 재생하는 단계를 포함한다.
본 발명의 일실시예의 방법에 있어서, 상기 클라이언트의 단말 장치에서는 수신된 햅틱 효과 데이터 실행 파일을 상기 미디어 파일과 동기화시켜 실행하는 것을 특징으로 한다. 이러한 경우, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 사운드 및 동영상과 햅틱 효과를 동기화시켜 함께 재생할 수 있다.
본 발명의 일실시예의 방법에 있어서, 상기 (g) 단계에서 상기 검색된 햅틱 효과 데이터 실행 파일은 상기 클라이언트의 단말 장치에 다운로드 방식 또는 스트리밍 방식으로 전송되는 것을 특징으로 한다.
본 발명의 일실시예의 방법은, 상기 햅틱 효과 데이터 실행 파일의 다운로드 회수 및 스트리밍 회수에 따라 햅틱 효과 데이터의 생성, 유통 및 사용에 따른 수익 분배 및 과금을 수행하는 단계를 더 포함할 수 있다.
본 발명의 일실시예의 방법에 있어서, 상기 (a) 단계에서는 상기 디지털 음원 데이터의 음계, 높낮이, 강도, 박자 및 화음에 기초하여 햅틱 효과 데이터를 생성하는 것을 특징으로 한다. 또한, 상기 (a) 단계에서 햅틱 효과 데이터를 생성한 후 햅틱 효과를 테스트하여 확인하는 것을 더 포함할 수 있다.
본 발명의 일실시예의 방법에 있어서, 상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 데이터의 소스 파일은 재생되지 않고, 상기 햅틱 효과 데이터 실행 파일 만을 재생할 수 있는 것을 특징으로 한다.
본 발명의 일실시예의 방법에 있어서, 상기 (d) 단계에서는 상기 햅틱 효과 데이터의 소스 파일과 상기 메타 데이터를 추가로 매핑하여 데이터 베이스에 저장하는 것을 추가로 포함할 수 있다.
본 발명의 일실시예의 방법에 있어서, 상기 메타 데이터는 상기 미디어 파일의 파일명, 제목, 참여 음악가, 파일 크기, 수정한 날짜, 비트전송률 및 재생길이로 구성된 군으로부터 선택된 적어도 하나일 수 있다.
본 발명의 일실시예의 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 시스템은,
음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일에 포함되어 있는 디지털 음원 데이터를 기반으로 햅틱 효과 데이터를 상기 디지털 음원 데이터와 분리하여 생성하고, 상기 미디어 파일로부터 메타 데이터를 상기 햅틱 효과 데이터 생성시 별도로 추출 생성하여 상기 햅틱 효과 데이터의 소스 파일과 함께 메모리에 저장하는 크리에이터(creator)의 단말장치와,
상기 크리에이터 단말장치로부터 상기 햅틱 효과 데이터의 소스 파일과 이에 대응하는 메타 데이터가 온라인 네트워크를 통해 전송되고, 수신된 햅틱 효과 데이터의 소스 파일을 인코딩하여 햅틱 효과 데이터 실행 파일로 변환하며, 상기 변환된 햅틱 효과 데이터 실행 파일과 수신된 메타 데이터를 매핑하여 데이터 베이스에 저장하는 햅틱 효과 서비스 서버와,
미디어 파일을 저장하고 있고 상기 미디어 파일로부터 메타 데이터를 추출하고 추출된 메타 데이터를 상기 햅틱 효과 서비스 서버로 전송하는 클라이언트의 단말 장치를 포함하되,
상기 햅틱 효과 서비스 서버는 상기 클라이언트의 단말 장치로부터 수신된 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일을 수신된 메타 데이터를 이용하여 상기 데이터 베이스에서 검색하고, 상기 데이터 베이스에서 검색된 햅틱 효과 데이터 실행 파일을 상기 클라이언트의 단말 장치로 전송하며, 상기 클라이언트의 단말 장치에서는 수신된 햅틱 효과 데이터 실행 파일을 실행하여 햅틱 효과를 재생하는 것을 특징으로 한다.
본 발명의 일실시예의 시스템에 있어서, 상기 클라이언트의 단말 장치에서는 수신된 햅틱 효과 데이터 실행 파일을 상기 미디어 파일과 동기화시켜 실행하는 것을 특징으로 한다. 이러한 경우, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 사운드 및 동영상과 햅틱 효과를 동기화시켜 함께 재생할 수 있다.
본 발명의 일실시예의 시스템에 있어서, 상기 햅틱 효과 서비스 서버가 상기 데이터 베이스에서 검색한 햅틱 효과 데이터 실행 파일은 상기 클라이언트의 단말 장치에 다운로드 방식 또는 스트리밍 방식으로 전송되는 것을 특징으로 한다.
본 발명의 일실시예의 시스템은, 상기 햅틱 효과 서비스 서버와 상기 데이터 베이스에 연동된 결제 서비스 서버로서 상기 햅틱 효과 데이터 실행 파일의 다운로드 회수 및 스트리밍 회수에 따라 햅틱 효과 데이터의 생성, 유통 및 사용에 따른 수익 분배 및 과금을 수행하는 결제 서비스 서버를 더 포함할 수 있다.
본 발명의 일실시예의 시스템에 있어서, 상기 크리에이터의 단말 장치에서는 상기 디지털 음원 데이터의 음계, 높낮이, 강도, 박자 및 화음에 기초하여 햅틱 효과 데이터를 생성하는 것을 특징으로 한다. 또한, 상기 크리에이터의 단말 장치에서는 햅틱 효과 데이터를 생성한 후 햅틱 효과를 테스트하여 확인할 수 있다.
본 발명의 일실시예의 시스템에 있어서, 상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 데이터의 소스 파일은 재생되지 않고, 상기 햅틱 효과 데이터 실행 파일 만을 재생할 수 있는 것을 특징으로 한다.
본 발명의 일실시예의 시스템에 있어서, 상기 햅틱 효과 서비스 서버는 상기 햅틱 효과 데이터의 소스 파일과 상기 메타 데이터를 추가로 매핑하여 데이터 베이스에 저장할 수 있다.
본 발명의 일실시예의 시스템에 있어서, 상기 메타 데이터는 상기 미디어 파일의 파일명, 제목, 참여 음악가, 파일 크기, 수정한 날짜, 비트전송률 및 재생길이로 구성된 군으로부터 선택된 적어도 하나일 수 있다.
한편, 본 발명에 있어서, 상기 온라인 네트워크는 인터넷과 같은 유선 통신망, 무선 통신망, 무선 이동 통신망 또는 위성 방송망 등 다양한 통신망일 수 있다.
본 발명에 따르면, 단말 장치에 저장된 디지털 음원 데이터의 음계, 높낮이, 강도, 박자, 화음 등을 반영하여 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있고, 이에 따라 다양한 음원에 따른 다양한 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공할 수 있다.
또한, 본 발명은 각종 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일에 포함되어 있는 디지털 음원 데이터에 대응하는 햅틱 효과 데이터를 디지털 음원 데이터와 분리하여 생성, 저장하고 온라인 네트워크를 통해 클라이언트의 단말장치에 제공함으로써 음원 데이터의 유통에 따른 저작권 문제를 방지할 수 있다.
뿐만 아니라, 본 발명은 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일의 메타 데이터를 햅틱 효과 데이터 생성시 별도로 추출 생성하여 이를 대응하는 햅틱 효과 데이터와 매핑하여 저장하고, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 미디어 파일을 저장하고 있는 클라이언트의 단말 장치에서는 메타 데이터를 이용하여 온라인 네트워크를 통해 햅틱 효과 데이터를 햅틱 효과 서비스 서버에서 제공받아 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 디지털 음원 데이터의 사운드와 햅틱 효과를 함께 재생할 수 있다.
추가로, 본 발명은 햅틱 효과 데이터의 소스 파일을 햅틱 효과 서비스 서버에서 인코딩한 후 클라이언트에게 유통하게 하고, 인코딩된 햅틱 효과 데이터 실행 파일의 다운로드 회수, 스트리밍 회수 등의 사용량에 따라 수익을 객관적으로 배분하게 하여 햅틱 효과 데이터 파일의 불법 유통을 방지하고 햅틱 효과 서비스 서버에서 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있다.
따라서, 본 발명은 미디어 파일의 음원, 영상 등과 결합된 새로운 햅틱 효과를 단말 장치 사용자에게 경험하게 하여 새롭고 신선한 재미와 느낌을 제공하는 온라인 서비스 제공을 가능하게 하고, 시각, 청각 외에 촉각이라는 새로운 감각을 미디어에 통합시킨 새로운 파라다임의 미디어의 창출을 가능하게 한다.
도 1은 본 발명의 일실시예에 따른 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 시스템의 구성을 설명하는 블럭도이다.
도 2 및 도 3은 본 발명의 일실시예에 따른 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법을 설명하는 흐름도이다.
도 4는 클라이언트의 단말 장치에서 햅틱 효과 데이터 실행 파일을 미디어 파일과 동기화시켜 실행하는 것을 설명하는 도면이다.
도 5는 본 발명의 다른 실시예에 따른 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 시스템의 구성을 설명하는 블럭도이다.
이하, 본 발명을 실시예에 기초하여 보다 상세히 기술한다. 본 발명의 하기 실시예는 본 발명을 구체화하기 위한 것일 뿐 본 발명의 권리범위를 제한하거나 한정하는 것이 아님은 물론이다. 본 발명의 상세한 설명 및 실시예로부터 본 발명이 속하는 기술분야의 전문가가 용이하게 유추할 수 있는 것은 본 발명의 권리범위에 속하는 것으로 해석된다. 본 발명에 인용된 참고문헌은 본 발명에 참고로서 통합된다.
이하, 첨부된 도면을 참고로 하여 본 발명의 구체적인 실시예에 따른 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템을 설명한다.
우선, 본 발명의 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법은, 크리에이터의 단말장치(100)와, 클라이언트의 단말장치(500)와, 무선전화 통신망 및/또는 유무선 인터넷 망과 같은 온라인 네트워크(200)를 통해 크리에이터의 단말장치(100)로부터 햅틱 효과 데이터가 업로드되어 전송되고 클라이언트의 단말장치(500)로 햅틱 효과 데이터를 전송시키는 햅틱 효과 서비스 서버(300)를 포함하는 시스템(1000)에서 수행될 수 있다(도 1 참조).
도 1에 도시된 바와 같이, 크리에이터(creator)의 단말장치(100)는 예를 들어 퍼스널 컴퓨터(100a) 또는 스마트폰(100b)일 수 있는데, 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일에 포함되어 있는 디지털 음원 데이터를 기반으로 햅틱 효과 데이터의 소스 파일(예를 들어 .tsc 파일로 칭함)을 디지털 음원 데이터와 분리하여 생성한다. 이때, 크리에이터(creator)의 단말장치(100)에서는 상기 디지털 음원 데이터의 음계, 높낮이, 강도, 박자 및 화음 등에 기초하여 햅틱 효과 데이터를 생성할 수 있기 때문에 크리에이터(creator)에 의한 창의적이고 다양한 햅틱 효과 데이터를 생성·제공할 수 있다. 크리에이터는 햅틱 효과 생성 소프트웨어를 이용하여 음계, 높낮이, 강도, 박자 및 화음 등에 기초하여 햅택 효과를 시간의 경과에 따라 생성할 수 있고, 특히 사운드를 들을 때 각자의 느낌 등을 반영한 창의적인 햅틱 효과를 생성할 수 있다. 햅틱 효과 생성 소프트웨어는 당업계에서 널리 사용되는 소프트웨어를 사용할 수 있으며, 본 출원인이 개발한 것, 햅틱 효과 생성 소프트웨어 제조 회사로부터 온라인 또는 오프라인으로 제공되는 것 등을 사용할 수 있음은 물론이다.
그리고, 퍼스널 컴퓨터(100a)에서 생성된 햅틱 효과 데이터의 소스 파일(.tsc)은 스마트폰(100b)으로 전송된 후 스마트폰(100b)에서 이를 실행하여 햅틱 효과를 테스트할 수 있고, 스마트폰(100b)에서 생성된 햅틱 효과 데이터의 소스 파일(.tsc)은 바로 스마트폰(100b)에서 실행하여 햅틱 효과를 테스트할 수 있다.
또한, 크리에이터(creator)의 단말장치(100)에서는 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일로부터 메타 데이터를 햅틱 효과 데이터의 소스 파일(.tsc) 생성시 별도로 추출 생성하여 햅틱 효과 데이터의 소스 파일(.tsc)과 함께 메모리(미도시)에 등록·저장한다. 메타 데이터는 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일의 파일명, 제목, 참여 음악가, 파일 크기, 수정한 날짜, 비트전송률 및 재생길이 등일 수 있다.
햅틱 효과 서비스 서버(300)는 크리에이터 단말장치(100)로부터 햅틱 효과 데이터의 소스 파일(.tsc)과 이에 대응하는 메타 데이터를 전송받고, 햅틱 효과 데이터의 소스 파일(.tsc)을 인코딩하여 바이너리 형식의 햅틱 효과 데이터 실행 파일, 예를 들어 .tsb로 변환한다. 햅틱 효과 서비스 서버(300)는 변환된 햅틱 효과 데이터 실행 파일(.tsb) 및 햅틱 효과 데이터의 소스 파일(.tsc)을 메타 데이터와 매핑하여 데이터 베이스(340)에 저장한다. 햅틱 효과 서비스 서버(300)는 데이터 베이스 관리 서버(320)를 통해 데이터 베이스(340)에 소스 파일(.tsc), 실행 파일(.tsb), 메타 데이터, 매핑 관계 테이블 등 각종 데이터를 저장, 등록 및 관리한다.
또한, 햅틱 효과 서비스 서버(300)는 크리에이터와 클라이언트의 회원가입 절차(회원 ID 발급 등)를 진행하고, 회원 ID, 패스워드 등의 크리에이터 및 클라이언트의 회원 정보를 데이터 베이스(340)에 저장하여 관리한다. 그 밖에 햅틱 효과 서비스 서버(300)는 햅틱 효과 데이터 실행 파일(.tsb)의 유통, 사용, 결제 및 수익 분배와 관련한 사용자 정보, 결제 정보 및 정산 정보 등을 데이터 베이스(340)에 저장하고 관리한다.
클라이언트의 단말 장치(500)는 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일을 저장할 수 있는데, 미디어 파일로부터 메타 데이터를 추출하고 추출된 메타 데이터를 햅틱 효과 서비스 서버(300)로 전송하여 햅틱 효과 관련 서비스를 요청한다.
이러한 클라이언트의 단말 장치(500)의 요청에 응답하여 햅틱 효과 서비스 서버(300)는 클라이언트의 단말 장치(500)로부터 수신된 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일(.tsb)을 수신된 메타 데이터를 이용하여 직접 데이터 베이스(340)에서 검색하거나 데이터 베이스 관리 서버(320)를 통해 데이터 베이스(340)에서 검색한다.
그 결과, 햅틱 효과 서비스 서버(300)는 메타 데이터와 매핑되는 것으로 데이터 베이스(340)에서 검색된 햅틱 효과 데이터 실행 파일(.tsb)을 클라이언트의 단말 장치(500)로 전송하게 된다. 이때, 햅틱 효과 서비스 서버(300)는 검색된 햅틱 효과 데이터 실행 파일(.tsb)을 데이터 베이스(340)로부터 클라이언트의 단말 장치(500)로 다운로드 방식 또는 스트리밍 방식으로 전송할 수 있다.
그리고 클라이언트의 단말 장치(500)에서는 다운로드 방식 또는 스트리밍 방식으로 수신된 햅틱 효과 데이터 실행 파일(.tsb)을 실행하여 햅틱 효과를 재생하고, 바람직하게는 햅틱 효과 데이터 실행 파일(.tsb)을 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일과 동기화시켜 실행한다. 따라서, 본 발명에서는 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 사운드, 동영상과 햅틱 효과를 동기화시켜 함께 재생할 수 있게 된다.
이와 같이 본 발명은 햅틱 효과 데이터 실행 파일을 미디어 파일과 분리하여 생성 및 유통하기 때문에 음원 데이터와 관련한 저작권 문제를 미연에 방지할 수 있으며, 햅틱 효과 데이터 실행 파일은 미디어 파일의 메타 데이터를 이용하여 미디어 파일과 연계하여 재생할 수 있는 장점이 있는 것이다.
또한, 클라이언트의 단말 장치(500)에서는 햅틱 효과 데이터의 소스 파일(.tsc)은 재생되지 않고, 햅틱 효과 데이터 실행 파일(.tsb) 만을 재생할 수 있는 것을 특징으로 한다.
따라서, 본 발명은 햅틱 효과 서비스 서버(300)에서 인코딩 과정을 거치지 않은 햅틱 효과 데이터의 소스 파일의 불법 유통을 방지하고 햅틱 효과 서비스 서버(300)에서 햅틱 효과 데이터의 생성, 유통, 사용에 따른 수익 분배와 과금을 투명하게 통합관리할 수 있게 된다.
다음으로, 도 2 및 도 3을 참조하여, 본 발명에 따라 제공될 수 있는 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크(200)를 통해 클라이언트의 단말장치(500)에 제공하는 방법을 하나의 예시로서 설명한다.
도 2에 도시된 바와 같이, 크리에이터의 단말 장치(100), 예를 들어 퍼스널 컴퓨터(100a) 또는 스마트폰(100b)에서는 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일을 로딩한 후(S200), 미디어 파일의 디지털 음원 데이터를 기반으로 햅틱 효과 데이터를 생성하여 이를 햅틱 효과 데이터의 소스 파일(.tsc) 형식으로 저장하고(S210), 미디어 파일로부터 메타 데이터를 햅틱 효과 데이터의 소스 파일(.tsc) 생성시 별도로 추출 생성하여 햅틱 효과 데이터의 소스 파일(.tsc)과 함께 메모리(미도시)에 등록·저장한다(S220).
크리에이터의 단말장치(100)가 스마트폰(100b)인 경우(S230 단계에서 "YES"인 경우), 햅틱 효과 테스트를 스마트폰(100b)에서 바로 실행하고(S232), 상기 단말장치(100)가 퍼스널 컴퓨터(100a)인 경우(S230 단계에서 "NO"인 경우)에는 햅틱 효과 데이터의 소스 파일(.tsc)을 스마트폰(100b)으로 전송하여 햅틱 효과를 테스트한다(S234).
S232 단계 및 S234 단계에서 테스트 결과가 만족스럽지 못하면 다시 S210 단계로 복귀하여 햅틱 효과 데이터 생성 과정을 반복하고, 테스트 결과가 만족스러우면 S240 단계로 진행한다. 크리에이터의 단말장치(100)에서 햅틱 효과 서비스 서버(300)로 햅틱 효과 데이터의 소스 파일(.tsc)과 이에 대응하는 메타 데이터를 전송하고(S240), 햅틱 효과 서비스 서버(300)는 햅틱 효과 데이터의 소스 파일(.tsc) 등을 전송하는 단말장치(100)의 크리에이터가 회원인지 여부를 확인한다(S250).
만약, 회원인 경우(S250 단계에서 "YES"인 경우)에는 회원 인증 절차를 거쳐 바로 S270 단계로 진행하고, 회원이 아닌 경우(S250 단계에서 "NO"인 경우)에는 회원 가입 절차를 진행한 후 ID, 패스워드, 전화번호, 이메일 등의 크리에이터 정보를 데이터 베이스(340)에 저장한 후(S260), S270 단계로 진행한다.
햅틱 효과 서비스 서버(300)에서는 전송된 햅틱 효과 데이터의 소스 파일(.tsc)을 인코딩하여 바이너리 형식의 햅틱 효과 데이터 실행 파일(.tsb)로 변환한다(S270). 그리고 나서, 햅틱 효과 서비스 서버(300)는 햅틱 효과 데이터 실행 파일(.tsb) 및 햅틱 효과 데이터의 소스 파일(.tsc)을 메타 데이터와 매핑하여 데이터 베이스(340)에 저장한다(S280).
다음으로, S280 단계가 완료되면 도 3의 S300 단계 이후의 절차로 이행하게 된다.
클라이언트의 단말 장치(500)에서는 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 미디어 파일, 예를 들어 .mp3 파일 또는 .mp4 파일을 로딩하고, 이러한 미디어 파일로부터 메타 데이터를 추출한다(S300). 그리고 나서, 클라이언트의 단말 장치(500)에서는 추출된 메타 데이터를 햅틱 효과 서비스 서버(300)로 전송하여 햅틱 효과 관련 서비스를 요청한다(S310). 서비스 요청 내용은 추출된 메타 데이터, 즉 미디어 파일과 매핑되는 햅틱 효과 데이터 실행 파일(.tsb)을 햅틱 효과 서비스 서버(300)가 데이터 베이스(340)에서 검색하는 것을 요구하는 것이다.
햅틱 효과 서비스 서버(300)는 메타 데이터를 전송하는 단말장치(500)의 클라이언트가 회원인지 여부를 확인한다(S320).
만약, 회원인 경우(S320 단계에서 "YES"인 경우)에는 회원 인증 절차를 거쳐 바로 S340 단계로 진행하고, 회원이 아닌 경우(S320 단계에서 "NO"인 경우)에는 회원 가입 절차를 진행한 후 ID, 패스워드, 전화번호, 이메일 등의 클라이언트 정보를 데이터 베이스(340)에 저장한 후(S330), S340 단계로 진행한다.
햅틱 효과 서비스 서버(300)에서는 클라이언트의 단말 장치(500)의 요청에 따라 클라이언트의 단말 장치(500)에 로딩된 미디어 파일의 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일(.tsb)을 수신된 메타 데이터를 이용하여 데이터 베이스(340)에서 검색한다(S340).
그런 다음, 햅틱 효과 서비스 서버(300)에서는 수신된 메타 데이터와 매핑되는 것으로 데이터 베이스(340)에서 검색된 햅틱 효과 데이터 실행 파일(.tsb)을 클라이언트의 단말 장치(500)로 다운로드 방식 또는 스트리밍 방식으로 제공한다(S350).
그리고 클라이언트의 단말 장치(500)에서는 다운로드 방식 또는 스트리밍 방식으로 제공된 햅틱 효과 데이터 실행 파일(.tsb)을 미디어 파일과 동기화하여 실행시켜 사운드 및 동영상과 함께 햅틱 효과를 재생한다(S360).
한편, 도 4에는 클라이언트의 단말 장치(500)에서 햅틱 효과 데이터 실행 파일(.tsb)을 .mp3 파일 또는 .mp4 파일과 같은 미디어 파일과 동기화시켜 실행하는 것이 도시되어 설명되고 있다. 클라이언트의 단말 장치(500)에는 햅틱 효과를 나타내기 위한 진동 소자와 이를 제어하는 햅틱 효과 재생 소프트웨어가 구비된다. 진동 소자는 현재 시판되고 있는 스마트폰에 내장되어 있는 것이 사용될 수 있고, 햅틱 효과 재생 소프트웨어는 당업계에서 널리 사용되는 소프트웨어를 사용할 수 있으며 본 출원인이 개발한 것, 스마트폰 제조회사가 제공하는 것, 햅틱 효과 재생 소프트웨어 제조 회사로부터 온라인 또는 오프라인으로 제공되는 것 등을 사용할 수 있음은 물론이다.
도 4에 도시된 바와 같이, 클라이언트의 단말 장치(500)는 햅틱 효과 재생 소프트웨어를 온(ON)으로 실행시켜 햅틱 효과 데이터 실행 파일(.tsb)과, .mp3 파일 또는 .mp4 파일과 같은 미디어 파일을 읽은 후 햅틱 효과 데이터 실행 파일(.tsb)을 디코딩한다. 그리고 디코딩된 햅틱 효과 데이터에 따른 햅틱 효과 패턴의 재생과 미디어 파일의 재생을 동기화한다. 즉, 음악 컨텐츠 파일, 동영상 컨텐츠 파일 등의 사운드 및 동영상과 햅틱 효과 패턴을 동기화시켜 함께 재생한다. 이때 사용자는 느낌에 따라 햅틱 효과 패턴의 강도를 증가시키거나 감소시킬 수도 있다.
따라서, 본 발명은 미디어 파일의 음원, 영상 등과 결합된 새로운 햅틱 효과를 단말 장치 사용자에게 경험하게 하여 새롭고 신선한 재미와 느낌을 제공하는 온라인 서비스 제공을 가능하게 하고, 시각, 청각 외에 촉각이라는 새로운 감각을 미디어에 통합시킨 새로운 파라다임의 미디어의 창출을 가능하게 한다.
또한. 도 5에는 본 발명의 다른 실시예의 시스템(1000')이 도시되어 있는데, 햅틱 미디어 스토어 서버(400), 결제 서비스 서버(600), 햅틱 서비스 파트너 관리 서버(700)가 추가된 점을 제외하고는 도 1에 도시된 시스템(1000)과 동일하다.
도 5에 도시된 햅틱 미디어 스토어 서버(400)는 햅틱 효과 서비스 서버(300)와 클라이언트의 단말장치(500)를 중개하는 서버로서, 햅틱 효과 재생 소프트웨어의 다운로드 기능, 햅틱 효과 데이터 실행 파일(.tsb)의 다운로드 기능 등을 제공할 수 있다. 햅틱 미디어 스토어 서버(400)가 제공하는 햅틱 효과 재생 소프트웨어를 클라이언트의 단말장치(500)에 설치하면 사용자는 햅틱 효과 서비스 서버(300)로의 POC(Point Of Contact)를 제공받을 수 있고, 사용이 간편한 인터페이스 제공으로 햅틱 효과 데이터 실행 파일(.tsb)을 손쉽게 다운로드받거나 스트리밍 서비스를 제공받을 수 있다. 또한, 햅틱 미디어 스토어 서버(400)는 다국어 지원을 가능하게 하여 본 발명의 시스템(1000')을 글로벌 플랫폼(Global Platform)으로서 구축할 수 있게 하고, B2C, B2B 등의 IAP(In-App Purchase) 결제 수단을 제공할 수도 있다.
도 5에 도시된 결제 서비스 서버(600)는 햅틱 효과 데이터 실행 파일(.tsb)의 다운로드 회수 및 스트리밍 회수에 따라 햅틱 효과 데이터의 생성, 유통, 사용 및 결제에 따른 수익 분배 및 과금을 수행할 수 있다. 예를 들어, 결제 서비스 서버(600)는 크리에이터(Creator), 뮤직 서비스 공급자(Music Service Provider), MNO(Mobile network operator), MVNO(Mobile Virtual Network Operator) 등과 햅틱 효과 데이터 실행 파일의 판매수익에 대한 정산관리를 할 수 있다.
그리고, 도 5에 도시된 햅틱 서비스 파트너 관리 서버(700)는 클라이언트 회원 관리, 크리에이터 회원 관리를 햅틱 효과 서비스 서버(300)로부터 분리하여 수행할 수 있으며, MNO, MVNO 등과의 B2B 법인관리를 별도의 ID 체계로 관리할 수 있다.
이상 본 발명을 첨부된 도면 및 상기 실시예에 따라 설명하였으나, 본 발명은 첨부된 도면 및 개시된 실시예에 제한되는 것은 아니다. 당업자라면 본 발명의 취지에 따라 수정 변경이 가능하며, 이러한 수정 변경 또한 본 발명의 범위에 속한다는 것을 이해할 수 있을 것이다.
100: 크리에이터의 단말장치 200: 온라인 네트워크
300: 햅틱 효과 서비스 서버 320: 데이터 베이스 관리 서버
340: 데이터 베이스 400: 햅틱 미디어 스토어 서버
500: 클라이언트의 단말장치 600: 결제 서비스 서버
700: 햅틱 서비스 파트너 관리 서버

Claims (12)

  1. 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법에 있어서,
    (a) 크리에이터(creator)의 단말장치에서, 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일에 포함되어 있는 디지털 음원 데이터를 기반으로 복수 개의 햅틱 효과 데이터를 상기 디지털 음원 데이터와 분리하여 생성하는 단계와,
    (b) 상기 크리에이터의 단말장치는 상기 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 메타 데이터를 상기 햅틱 효과 데이터 생성시 별도로 추출 생성하여 상기 햅틱 효과 데이터의 소스 파일과 함께 상기 단말장치에 제공된 메모리에 저장하는 단계와,
    (c) 상기 크리에이터 단말장치로부터 상기 햅틱 효과 데이터의 소스 파일과 이에 대응하는 메타 데이터를 온라인 네트워크를 통해 햅틱 효과 서비스 서버로 전송하는 단계와,
    (d) 상기 햅틱 효과 서비스 서버에서는 상기 크리에이터 단말장치로부터 수신된 복수 개의 햅틱 효과 데이터의 소스 파일을 인코딩하여 복수 개의 햅틱 효과 데이터 실행 파일로 변환하고, 상기 변환된 복수 개의 햅틱 효과 데이터 실행 파일과 이들 각각에 대응하는 상기 크리에이터 단말장치로부터 수신된 메타 데이터를 매핑하여 상기 햅틱 효과 서비스 서버에 제공된 데이터 베이스에 저장하는 단계와,
    (e) 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일을 저장하고 있는 클라이언트의 단말 장치에서, 상기 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 메타 데이터를 추출하고 추출된 메타 데이터를 상기 햅틱 효과 서비스 서버로 전송하는 단계와,
    (f) 상기 햅틱 효과 서비스 서버는 상기 데이터 베이스에 저장된 복수 개의 햅틱 효과 데이터 실행 파일 중 상기 클라이언트의 단말 장치로부터 수신된 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일을 수신된 메타 데이터를 이용하여 상기 데이터 베이스에서 검색하는 단계와,
    (g) 상기 햅틱 효과 서비스 서버에서는, 상기 클라이언트의 단말 장치로부터 수신된 메타 데이터에 매핑되는 것으로 상기 데이터 베이스에서 검색된 햅틱 효과 데이터 실행 파일을 상기 클라이언트의 단말 장치로 전송하는 단계와,
    (h) 상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 서비스 서버로부터 수신된 햅틱 효과 데이터 실행 파일을 실행하여 햅틱 효과를 재생하는 단계를 포함하고,
    상기 햅틱 효과 데이터는 상기 디지털 음원 데이터와 분리되어 생성, 저장 및 전송되며,
    상기 클라이언트의 단말 장치에서는, 상기 클라이언트의 단말 장치에 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 추출된 메타 데이터에 매핑되는 상기 햅틱 효과 서비스 서버로부터 수신된 햅틱 효과 데이터 실행 파일과, 상기 클라이언트의 단말 장치에 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일을 동기화시켜 실행하는 것을 특징으로 하는 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 (g) 단계에서 상기 검색된 햅틱 효과 데이터 실행 파일은 상기 클라이언트의 단말 장치에 다운로드 방식 또는 스트리밍 방식으로 전송되는 것을 특징으로 하는 방법.
  4. 제3항에 있어서,
    상기 햅틱 효과 데이터 실행 파일의 다운로드 회수 및 스트리밍 회수에 따라 햅틱 효과 데이터의 생성, 유통 및 사용에 따른 수익 분배 및 과금을 수행하는 단계를 더 포함하는 방법.
  5. 제1항, 제3항 또는 제4항 중 어느 한 항에 있어서,
    상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 데이터의 소스 파일은 재생되지 않고, 상기 햅틱 효과 데이터 실행 파일 만을 재생할 수 있는 것을 특징으로 하는 방법.
  6. 제1항, 제3항 또는 제4항 중 어느 한 항에 있어서,
    상기 메타 데이터는 상기 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 파일명, 제목, 참여 음악가, 파일 크기, 수정한 날짜, 비트전송률 및 재생길이로 구성된 군으로부터 선택된 적어도 하나인 것을 특징으로 하는 방법.
  7. 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 시스템에 있어서,
    음악 컨텐츠 파일 또는 동영상 컨텐츠 파일에 포함되어 있는 디지털 음원 데이터를 기반으로 복수 개의 햅틱 효과 데이터를 상기 디지털 음원 데이터와 분리하여 생성하고, 상기 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 메타 데이터를 상기 햅틱 효과 데이터 생성시 별도로 추출 생성하여 상기 햅틱 효과 데이터의 소스 파일과 함께 메모리에 저장하는 크리에이터(creator)의 단말장치와,
    상기 크리에이터 단말장치로부터 상기 햅틱 효과 데이터의 소스 파일과 이에 대응하는 메타 데이터가 온라인 네트워크를 통해 전송되고, 상기 크리에이터 단말장치로부터 수신된 복수 개의 햅틱 효과 데이터의 소스 파일을 인코딩하여 복수 개의 햅틱 효과 데이터 실행 파일로 변환하며, 상기 변환된 복수 개의 햅틱 효과 데이터 실행 파일과 이들 각각에 대응하는 상기 크리에이터 단말장치로부터 수신된 메타 데이터를 매핑하여 데이터 베이스에 저장하는 햅틱 효과 서비스 서버와,
    음악 컨텐츠 파일 또는 동영상 컨텐츠 파일을 저장하고 있고, 상기 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 메타 데이터를 추출하고 추출된 메타 데이터를 상기 햅틱 효과 서비스 서버로 전송하는 클라이언트의 단말 장치를 포함하고,
    상기 햅틱 효과 서비스 서버는 상기 데이터 베이스에 저장된 복수 개의 햅틱 효과 데이터 실행 파일 중 상기 클라이언트의 단말 장치로부터 수신된 메타 데이터에 매핑되는 햅틱 효과 데이터 실행 파일을 수신된 메타 데이터를 이용하여 상기 데이터 베이스에서 검색하고, 상기 클라이언트의 단말 장치로부터 수신된 메타 데이터에 매핑되는 것으로 상기 데이터 베이스에서 검색된 햅틱 효과 데이터 실행 파일을 상기 클라이언트의 단말 장치로 전송하며, 상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 서비스 서버로부터 수신된 햅틱 효과 데이터 실행 파일을 실행하여 햅틱 효과를 재생하되,
    상기 햅틱 효과 데이터는 상기 디지털 음원 데이터와 분리되어 생성, 저장 및 전송되며,
    상기 클라이언트의 단말 장치에서는, 상기 클라이언트의 단말 장치에 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일로부터 추출된 메타 데이터에 매핑되는 상기 햅틱 효과 서비스 서버로부터 수신된 햅틱 효과 데이터 실행 파일과, 상기 클라이언트의 단말 장치에 저장된 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일을 동기화시켜 실행하는 것을 특징으로 하는 시스템.
  8. 삭제
  9. 제7항에 있어서,
    상기 햅틱 효과 서비스 서버가 상기 데이터 베이스에서 검색한 햅틱 효과 데이터 실행 파일은 상기 클라이언트의 단말 장치에 다운로드 방식 또는 스트리밍 방식으로 전송되는 것을 특징으로 하는 시스템.
  10. 제9항에 있어서,
    상기 햅틱 효과 서비스 서버와 상기 데이터 베이스에 연동된 결제 서비스 서버로서, 상기 햅틱 효과 데이터 실행 파일의 다운로드 회수 및 스트리밍 회수에 따라 햅틱 효과 데이터의 생성, 유통 및 사용에 따른 수익 분배 및 과금을 수행하는 결제 서비스 서버를 더 포함하는 시스템.
  11. 제7항, 제9항 또는 제10항 중 어느 한 항에 있어서,
    상기 클라이언트의 단말 장치에서는 상기 햅틱 효과 데이터의 소스 파일은 재생되지 않고, 상기 햅틱 효과 데이터 실행 파일 만을 재생할 수 있는 것을 특징으로 하는 시스템.
  12. 제7항, 제9항 또는 제10항 중 어느 한 항에 있어서,
    상기 메타 데이터는 상기 음악 컨텐츠 파일 또는 동영상 컨텐츠 파일의 파일명, 제목, 참여 음악가, 파일 크기, 수정한 날짜, 비트전송률 및 재생길이로 구성된 군으로부터 선택된 적어도 하나인 것을 특징으로 하는 시스템.
KR1020140041222A 2014-04-07 2014-04-07 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템 KR101575677B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140041222A KR101575677B1 (ko) 2014-04-07 2014-04-07 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140041222A KR101575677B1 (ko) 2014-04-07 2014-04-07 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20150116241A KR20150116241A (ko) 2015-10-15
KR101575677B1 true KR101575677B1 (ko) 2015-12-08

Family

ID=54356872

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140041222A KR101575677B1 (ko) 2014-04-07 2014-04-07 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101575677B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200133127A (ko) * 2019-05-17 2020-11-26 한국전자기술연구원 실시간 몰입형 콘텐츠 제공 시스템 및 이의 햅틱 효과 전송 방법

Also Published As

Publication number Publication date
KR20150116241A (ko) 2015-10-15

Similar Documents

Publication Publication Date Title
CN102884529B (zh) 用于社交摘要的可适配布局
US12002463B2 (en) Systems and methods for voice-based initiation of custom device actions
US11087752B2 (en) Systems and methods for voice-based initiation of custom device actions
JP5902298B2 (ja) Ｌｂｓを用いたソシアル音楽サービス提供方法とシステム及びその提供方法を実行するためのプログラムが記録された記録媒体
US20170359283A1 (en) Music creation app in messaging app
EA011524B1 (ru) Способ, система и устройство для поставки слоев мультимедийных данных
RU2620999C2 (ru) Звуковое представление сжатой пространственной контекстной информации
CN104272303A (zh) 播放列表生成
Taylor et al. Simplified Expressive Mobile Development with NexusUI, NexusUp, and NexusDrop.
JP2009193344A (ja) 複合コンテンツ情報作成システム、複合コンテンツ情報作成方法、端末装置、コンテンツ管理装置、及びプログラム
CN102831536A (zh) 中间伙伴
KR101644405B1 (ko) Ｓｎｓ 앱 기반의 모바일 메신저 서비스에서 햅틱 효과를 갖는 이모티콘을 온라인 네트워크를 통해 제공하는 방법 및 시스템
KR101575677B1 (ko) 디지털 음원 데이터를 기반으로 하는 햅틱 효과를 온라인 네트워크를 통해 클라이언트의 단말장치에 제공하는 방법 및 시스템
KR101633676B1 (ko) 온라인 네트워크를 통해 재생되는 동영상 컨텐츠를 기반으로 하는 햅틱 효과를 클라이언트의 단말장치에 제공하는 방법 및 시스템
KR101901112B1 (ko) 모바일 애플리케이션에서 유니코드의 전송을 통해 햅틱 효과를 갖는 이모지를 단말장치에 제공할 수 있는 방법 및 시스템
KR101575676B1 (ko) 온라인 네트워크를 통한 화자 간 메시지에 햅틱 효과를 부여하는 모바일 메신저 서비스 방법 및 시스템
KR101671262B1 (ko) 호 연결시 발신 단말의 아이덴티티를 나타내는 햅틱 효과 컨텐츠를 온라인 네트워크를 통해 수신 단말에 제공하는 모바일 앱 기반의 서비스 방법 및 시스템
JP2015138352A (ja) 出力共有端末、コンテンツ共有属性管理サーバ、出力共有方法、出力共有端末用プログラム
KR102541376B1 (ko) 사물마커토큰정보를 이용한 오픈소스기반 메타버스 플랫폼 접속방법
JPWO2011021632A1 (ja) 情報提供システム
JP2009110399A (ja) 通信システム及び通信端末
WO2020022136A1 (ja) コンテンツ共有方法およびコンテンツ共有システム
KR101690283B1 (ko) 태그 기반 컨텐츠 목록 제공 방법 및 이를 위한 장치
JP6257433B2 (ja) 通信端末のカラオケ用プログラム及び通信カラオケサーバ
JP2007213530A (ja) データ保存送信装置、それに用いるコンピュータプログラム及びそれを記録した記録媒体、並びに、データ再生方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180916

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20191229

Year of fee payment: 5