KR101595856B1 - 3d 캐릭터 기반 음성 sns 시스템 및 방법 - Google Patents

3d 캐릭터 기반 음성 sns 시스템 및 방법 Download PDF

Info

Publication number
KR101595856B1
KR101595856B1 KR1020140055507A KR20140055507A KR101595856B1 KR 101595856 B1 KR101595856 B1 KR 101595856B1 KR 1020140055507 A KR1020140055507 A KR 1020140055507A KR 20140055507 A KR20140055507 A KR 20140055507A KR 101595856 B1 KR101595856 B1 KR 101595856B1
Authority
KR
South Korea
Prior art keywords
character
information
sender
voice
operation information
Prior art date
Application number
KR1020140055507A
Other languages
English (en)
Other versions
KR20150129224A (ko
Inventor
진세형
Original Assignee
주식회사 소울핑거
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 소울핑거 filed Critical 주식회사 소울핑거
Priority to KR1020140055507A priority Critical patent/KR101595856B1/ko
Priority to PCT/KR2015/004373 priority patent/WO2015170850A1/ko
Publication of KR20150129224A publication Critical patent/KR20150129224A/ko
Application granted granted Critical
Publication of KR101595856B1 publication Critical patent/KR101595856B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/40—

Abstract

본 발명은 3D 캐릭터를 기반으로 음성 SNS(Social Network System)를 이용하는 것에 관한 것으로, 보다 상세하게는 개인이 소유한 계정과 연동된 어플, 소프트웨어, 위젯 및 메신져 등을 설치한 수신자에게 송신자의 생생한 음성데이터와 자신을 모델로 한 3D 캐릭터를 이용하고 감정 및 동작 표현기능을 첨부하여 생동감 있는 커뮤니케이션을 제공하는 SNS 시스템 및 방법에 관한 것이다.
또한, 음성데이터를 입력 받아 다양한 감정표현에 따른 동작이 포함된 송신자 모델의 3D 캐릭터를 이용하여 전달될 메시지를 구성하는 방법을 제안하는 것을 목적으로 한다.

Description

3D 캐릭터 기반 음성 SNS 시스템 및 방법{System and Method of Voice SNS of 3D Character-based}
본 발명은 3D 캐릭터를 기반으로 음성 SNS(Social Network System)를 이용하는 것에 관한 것으로, 보다 상세하게는 개인이 소유한 계정과 연동된 어플, 소프트웨어, 위젯 및 메신져 등을 설치한 수신자에게 송신자의 생생한 음성데이터와 자신을 모델로 한 3D 캐릭터를 이용하고 감정 및 동작 표현기능을 첨부하여 생동감 있는 커뮤니케이션을 제공하는 SNS 시스템 및 방법에 관한 것이다.
일반적으로 SNS(Social Network System)는 사용자 간의 자유로운 의사 소통과 정보 공유 그리고 인맥 확대 등을 통해 사회적 관계를 생성하고 강화시켜주는 온라인 플랫폼을 의미하는 것으로서, 최근에 스마트폰과 같은 휴대기기의 보급에 따라 SNS의 온라인 플랫폼 및 서비스 측면에 대한 개발이 활발히 이루어지고 있다.
종래에는 컴퓨터가 전자 통신 수단에 의해 연결되고 이러한 컴퓨터들이 실제 인간의 사회적 상호작용과 연락을 중개한다는 개념이 시도되면서 초창기 커뮤니티들로 인하여 사람들을 모아놓고 대화방에서 대화할 수 있게 해주는 채팅방과 개인 정보나 개인이 작성한 글들을 게시판에 기재하면서 서로 정보를 공유할 수 있는 홈페이지 및 블로그(Blog)와 같은 형식이 주를 이루어 SNS를 형성하고 있었다. 그러나 서로간의 정보 공유에 쓰이는 기술이 단순 텍스트로 구성된 글로 한정되다 보니 감정표현이 어려운 측면 때문에 자유로운 의사 소통에 맞는 생동감이 떨어지는 단점이 존재 한다.
이와 같은 단점을 보완한 유사한 종래 기술로서, 이모티콘(Emoticon)이 있다. 종래의 텍스트로만 주로 이루어지는 글에서 유일하게 감정표현을 하는 방법은 기호표시를 이용한 감정표현이 있었고, 이를 참고하여 각종 SNS 기업들이 감성마케팅으로 자신의 기업 마스코트를 이용한 귀여운 캐릭터에 감정표현을 입힌 이모티콘을 개발하면서 보다 나은 의사소통을 제공 받을 수 있게 되었다. 그러나 이러한 방식 역시 표면적인 감정표현일 뿐 생동감적인 부분에서 부족함을 느끼게 되었다.
이와 같은 문제점을 보완하기 위하여 의사소통 방식에 음성서비스와 결합하여 생동감을 높일 수 있는 SNS에 대한 종래 기술의 한 예가 한국공개특허 제 10-2012-0087251호 "사운드 컨텐츠 기반의 소셜 네트워크 서비스 시스템"에 도시되었다. 상기 선행기술은 종래의 텍스트만을 이용하여 타인에게 메시지를 전달하는 부분에서 탈피하여 사운드 컨텐츠 기반의 소셜 네트워크 서비스를 중심으로 사용자의 음성을 이용하여 타인에게 전달하는 기술을 기재하고 있으며, 음성을 사용자의 위치와 결합해서 원하는 사람/장소 등에 전송하게 되고, 기업에게 제공되는 소셜 네트워크 서비스는 맞춤형 광고 서비스를 통한 고객의 Q&A를 텍스트뿐만 아니라 음성으로도 제공되는 서비스를 기술하고 있으며 이용자의 기분상태를 나타내는 간단한 감성/감정표현 구성도 포함으로써 보다 감성/감정에 기반한 소셜 네트워크 서비스를 목적으로 보여주고 있었다.
그러나 상기 선행기술은 종래와는 다르게 텍스트와 음성으로 이루어진 메시지를 다른 사용자가 수신하여 정보를 얻을 수 있는 반면 상대방의 감성/감정을 이해하는 방법은 음성과 텍스트로 한정되는 문제점이 있으며 또한 감성/감정표현을 보완하는 부분으로 이모티콘 콘텐츠가 존재하지만 콘텐츠 보유량이 상당히 적어 상대방과 상대방에게 생동감 있는 커뮤니케이션을 전달하는 부분에서 여전히 문제점이 있었다.
또한, 3D 엔진을 포함한 스마트폰 등 개인 모바일 단말기의 보급이 급증하는 반면에 감성/감정을 나타내는 이모티콘과 같은 콘텐츠의 개발이 아직까지 2D에 머무르고 있어 생동감이 떨어지는 제한적인 문제점 또한 있었다.
한국공개특허 10-2012-0087251 (2012.08.07)
본 발명은 상기와 같은 종래 기술의 문제점을 해결하고자 도출된 것으로서, 음성데이터를 입력 받아 다양한 감정표현에 따른 동작이 포함된 사용자 모델의 3D 캐릭터를 이용하여 전달될 메시지를 구성하는 방법을 제공하는 것을 목적으로 한다.
본 발명은 미리 설정된 3D 캐릭터의 동작뿐만 아니라 다양한 동작을 지원하기 위해 3D 캐릭터 동작 제작툴 및 이미지센서를 통한 동작제작 방법을 제공하는 것을 목적으로 한다.
이러한 목적을 달성하기 위하여 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법은 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성하는 단계, 상기 음성데이터를 입력받는 것과 동시에 송신자로부터 3D 캐릭터 동작 정보를 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성하는 단계, 상기 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성하는 단계 및 생성된 3D 캐릭터 메시지를 중계서버에 전송하는 단계를 포함한다.
이 때, 상기 3D 캐릭터 동작 정보는 미리 저장된 스크립트 형식의 3D 동작 정보가 매칭된 동작 식별자를 포함한다.
한편 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법은 제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 상기 스크립트 형식의 3D 동작 정보를 제작하는 단계를 더 포함한다.
이 때, 상기 3D 캐릭터 동작 정보는 상기 스크립트 형식의 3D 동작 정보를 포함한다.
본 발명의 다른 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법은 중계서버로부터 3D 캐릭터 메시지를 수신 받아 음원 정보 동작 결합정보 및 송신자 식별정보를 추출하는 단계, 송신자 식별정보를 기초로 화면에 표시될 3D 캐릭터를 선택하는 단계, 상기 음원 정보를 재생하도록 제어하는 단계 및 상기 음원 정보가 재생되는 것과 동시에 상기 동작 결합정보에 포함된 싱크 정보를 기초로 싱크 정보가 나타내는 시점에 대응되는 상기 동작 결합정보에 포함된 3D 캐릭터 동작 정보에 따라 상기 선택된 3D 캐릭터의 동작이 실행되도록 3D 엔진을 제어하는 단계를 포함한다.
한편, 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 시스템은 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성하는 음원생성부, 상기 음성데이터를 입력받는 것과 동시에 송신자로부터 3D 캐릭터 동작 정보를 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성하는 동작생성부, 상기 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성하는 메시지생성부 및 생성된 3D 캐릭터 메시지를 중계서버에 전송하는 메시지전송부를 포함한다.
또한, 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 시스템은 제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 상기 스크립트 형식의 3D 동작 정보를 제작하는 3D 동작 정보 제작부를 더 포함한다.
본 발명의 다른 실시예에 따른 3D 캐릭터 기반 음성 SNS 시스템은 중계서버로부터 3D 캐릭터 메시지를 수신 받아 음원 정보 동작 결합정보 및 송신자 식별정보를 추출하는 데이터추출부, 송신자 식별정보를 기초로 화면에 표시될 3D 캐릭터를 선택하는 캐릭터선택부, 상기 음원 정보를 재생하도록 제어하는 음원제어부 및 상기 음원 정보가 재생되는 것과 동시에 상기 동작 결합정보에 포함된 싱크 정보를 기초로 싱크 정보가 나타내는 시점에 대응되는 상기 동작 결합정보에 포함된 3D 캐릭터 동작 정보에 따라 상기 선택된 3D 캐릭터의 동작이 실행되도록 3D 엔진을 제어하는 동작제어부를 포함한다.
본 발명은 송신자의 음성메시지와 동작이 포함된 송신자 모델의 3D 캐릭터를 제공함으로써, 실제 송신자가 화면을 통해 음성을 전달하는 것과 같은 생동감을 느끼게 할 수 있다.
본 발명은 3D 캐릭터의 동작표현을 제작할 수 있는 툴 및 이미지센서를 적용함으로써 대화 내용에 맞춰 송신자 특성에 맞는 동작을 구성하고, 구성된 동작을 다른 사용자와 공유할 수 있도록 하여 더욱 현실감 있는 커뮤니케이션이 가능하게 할 수 있다.
본 발명에 따르면 송신자의 음성데이터를 기반으로 음성의 톤, 크기 또는 빠르기의 변화 정보를 분석한 결과를 이용하여 전달할 음성데이터의 내용에 맞는 3D 캐릭터 메시지를 자동적으로 구성함으로써, 송신자가 음성을 녹음하는 것만으로 이에 부합되는 동작을 손쉽게 전달할 수 있다.
도 1은 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 시스템을 나타낸 전체 구성도이다.
도 2 및 도 3은 본 발명의 일 실시예에 따른 송신자의 3D 캐릭터의 동작 구현에 선택 따른 동작 결합정보가 구성되는 특성을 도시하는 도면이다.
도 4 는 본 발명의 일 실시예에 따른 3D 캐릭터를 송신자 식별정보에 따른 3D 캐릭터를 선택하는 데이터를 도시한 도면이다.
도 5는 본 발명의 일 실시예에 따라 3D 캐릭터 동작 정보에 동작 식별자가 첨부된 경우 3D 캐릭터 동작에 사용되는 스크립트 형식의 3D 동작 정보를 선정하여 3D엔진에 제공하는 도면이다.
도 6은 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법을 요약하여 나타낸 동작 흐름도이다.
도 7은 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법으로서, 송신자가 직접 제작한 스크립트 형식의 3D 캐릭터 동작 정보를 이용하여 3D 캐릭터 동작을 제어하는 방법을 나타낸 동작 흐름도 이다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략하기로 한다. 또한 본 발명의 실시예들을 설명함에 있어 구체적인 수치는 실시예에 불과하다.
본 발명은 3D 캐릭터 기반 음성 SNS를 사용하여 사용자간의 생동감 있는 커뮤니케이션을 구현하는 기술을 제공한다.
도 1은 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 시스템을 나타낸 전체 구성도이다.
도 1에서 도시된 3D 캐릭터 기반 음성 SNS의 시스템적 구성은 하나의 구성체로 설명이 가능하지만 설명의 편의상 두 가지 송신자 및 수신자 측면을 분리하여 설명하기로 한다.
송신자 단말기(100)는 음원생성부(110), 동작생성부(120), 메시지생성부(130), 메시지전송부(140) 및 3D 동작 정보 제작부(150)를 포함한다.
음원생성부(110)는 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성한다.
이 때, 음성데이터는 송신자가 직접 구두로 입력한 음성일 수도 있고, 녹음된 다양한 음성파일을 이용한 음성데이터일 수도 있다.
동작생성부(120)는 상기 음성데이터를 입력 받는 것과 동시에 송신자로부터 3D 캐릭터 동작 정보를 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성한다.
이 때, 동작생성부(120)에서 생성되는 동작 결합정보는 송신자가 어떤 방식으로 3D 캐릭터 동작을 구현할 것인지에 대한 선택에 따라 동작 결합정보에 포함되는 정보가 다르게 포함될 수 있으며 이 과정은 도 2 및 도 3을 통하여 상세히 설명될 수 있다.
도 2 및 도 3은 본 발명의 일 실시예에 따른 송신자의 3D 캐릭터의 동작 구현에 선택 따른 동작 결합정보가 구성되는 특성을 도시하는 도면이다.
도 2를 참조하면, 3D 캐릭터 기반 음성 SNS에 관련된 프로그램, 앱 및 위젯을 설치할 경우 미리 저장된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자가 제공되며 송신자는 입력하고 있는 음원 정보에 맞춰 원하는 싱크 위치에 필요한 동작 식별자를 입력하여 3D 캐릭터 동작 정보를 생성할 수 있다. 이 때, 도 2의 동작 식별자는 텍스트 형식으로 표기를 하였지만 다른 방법으로는 송신자를 모델로 한 3D 캐릭터가 감정표현에 따른 동작을 미리보기로 구현되면서 송신자는 음원 정보에 적합한 동작 식별자를 선택할 수도 있다.
이렇게 미리 저장된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자를 사용하여 3D 캐릭터 동작 정보를 생성하는 방법이 있는 반면 송신자가 직접 스크립트 형식의 3D 동작 정보를 제작하는 방법을 일 실시예로서 도 3을 참조하여 설명할 수 있다.
도 3을 참조하면, 송신자의 취향에 따라 스크립트 형식의 3D 동작 정보를 제작하는 도면이 도시된다. 이 때, 3D 동작 정보 제작부(150)을 이용함으로써 제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 상기 스크립트 형식의 3D 동작 정보를 제작한다.
한편, 3D 동작 정보 제작부(150)의 제작툴 또는 이미지센서를 이용하여 스크립트 형식의 3D 동작 정보를 제작할 경우 송신자는 입력하고 있는 음원 정보에 맞춰 원하는 싱크 위치에 자신이 제작한 스크립트 형식의 3D 동작 정보를 입력하여 3D 캐릭터 동작 정보를 생성할 수 있다. 이 때, 도 3의 송신자가 생성한 스크립트 형식의 3D 동작 정보를 텍스트로 기입하였으나, 도 2와 마찬가지로 송신자를 모델로 한 3D 캐릭터가 직접 송신자에 의해 제작된 감정표현 및 동작에 따라 미리보기 기능을 통해 송신자는 음원 정보에 적합한 스크립트 형식의 3D 동작 정보를 선택할 수도 있다.
이렇게 송신자가 수동적으로 원하는 동작 식별자 및 스크립트 형식의 3D 동작 정보를 선택하는 인터페이스가 있는 반면에 동작생성부(120)는 음원생성부(110)에서 입력 받은 음성데이터에 포함된 송신자의 음성 톤, 크기 또는 빠르기의 변화 정보를 분석하고, 분석된 결과에 따라 3D 캐릭터 동작 정보를 생성하며 또한 음성의 변화가 있는 시점을 기초로 싱크 정보를 자동적으로 생성해주는 편의적인 인터페이스도 제공될 수 있다.
한편, 메시지생성부(130)는 이렇게 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성한다. 이 때, 송신자 식별정보라 함은 송신자를 모델로 생성된 3D 캐릭터의 종류 및 모델을 식별하는 정보로써 전화번호, 이메일, 이름 및 단말기번호가 될 수 있다.
메시지전송부(140)는 생성된 3D 캐릭터 메시지를 중계서버에 전송한다.
이 때, 메시지전송부(140)는 텍스트로 구성된 스크립트 형식의 3D 동작 정보 또는 동작 식별자가 포함된 3D 캐릭터 메시지를 전송하기 때문에 종래와 같이 3D 모델링화된 데이터 또는 3D 영상패키지와 같은 무거운 데이터의 송수신으로 인한 통신 부하 및 지연과 같은 문제점을 해소하여 절감된 통신 비용으로 메시지전송부(140)가 사용될 수 있다.
또한, 중계서버는 스크립트 형식의 3D 동작 정보와 동작 식별자가 매칭된 데이터베이스를 포함하고, 송신자 단말기(100)에서 수신 받은 3D 캐릭터 메시지를 기반으로 상기 데이터베이스를 참조하여 3D 캐릭터의 동작 재생에 필요한 정보를 수신자 단말기(200)으로 제공하는 역할을 한다.
이 때, 송신자 단말기(100)로부터 송신자가 직접 제작한 스크립트 형식의 3D 캐릭터 동작 정보가 수신되는 경우 중계서버는 새로운 저장공간에 스크립트 형식의 3D 캐릭터 동작 정보를 저장하고 그에 매칭되는 동작 식별자를 부여하여 송신자 단말기(100)와 수신자 단말기(200)의 3D 캐릭터 기반 음성 SNS에 관련된 프로그램, 앱 및 위젯에 업데이트를 진행하여 다음에 같은 동작을 사용 시 간편하게 동작 식별자만 이용하여 3D 캐릭터 동작 정보를 구성하게 할 수 있다.
또한, 송신자단말기(100)에서 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성하는 것에 한정하지 않고, 송신자가 원하는 연예인 및 유명인 등을 선정하고 텍스트로 구성한 메시지를 수신자에게 전송할 때, 중계서버는 텍스트메시지를 송신자가 선택한 연예인 및 유명인 등의 목소리를 기반으로 축적한 음성변환모듈(Text to voice)을 이용하여 상기 텍스트메시지를 음원 정보로 변환하여 수신자단말기(200)에 제공될 수도 있다.
한편, 수신자 단말기(200)는 데이터추출부(210), 캐릭터선택부(220), 음원제어부(230) 및 동작제어부(240)을 포함한다.
데이터 추출부(210)는 중계서버로부터 3D 캐릭터 메시지를 수신 받아 음원 정보, 동작 결합정보 및 송신자 식별정보를 추출한다.
이 때, 데이터 추출부(210)는 3D 캐릭터 메시지를 수신 받는 동시에 중계서버로부터 3D 동작구현에 필요한 업데이트된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자 데이터를 수신 받아 3D 캐릭터 메시지에 대응할 수 있으며 안정된 상태에서 3D 캐릭터 메시지를 재생하기 위해서 메모리(Memory) 또는 스토리지(Storage)에 저장하는 과정이 선행될 수 있다.
이렇게 메모리 또는 스토리지에 저장된 과정이 선행되어서 업데이트된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자와 3D 캐릭터 메시지에서 추출된 각각의 데이터들은 각각의 캐릭터선택부(220), 음원제어부(230) 및 동작제어부(240)와 구분되어 전송될 수 있다.
도 4 는 본 발명의 일 실시예에 따른 3D 캐릭터를 송신자 식별정보에 따른 3D 캐릭터를 선택하는 예시를 나타낸 도면이다.
도 4를 참조하면, 캐릭터선택부(220)는 송신자 식별정보를 기초로 화면에 표시될 3D 캐릭터를 선택한다. 이 때, 캐릭터 선택부(220)는 데이터 추출부(210)에서 송신자 식별정보(전화번호, 이메일, 이름 또는 단말기번호)를 수신 받아 미리 저장되어 있거나 아님 송신자 식별정보를 수신할 때 같이 수신된 3D 캐릭터 선택용 데이터베이스를 이용하여 선택될 수 있다. 예를 들어 수신된 송신자 식별정보가 "노XX, NoXX@mail.com"일 경우 캐릭터 선택부(220)는 데이터베이스와 매칭하여 해당되는 3D 캐릭터를 선택하여 화면에 기초적인 출력을 실행하게 할 수 있다.
한편, 3D 캐릭터 선택 후 음원제어부(230)는 상기 음원 정보를 재생하도록 제어한다. 이에 따라 동작제어부(240)는 상기 음원 정보가 재생되는 것과 동시에 상기 동작 결합정보에 포함된 싱크 정보를 기초로 싱크 정보가 나타내는 시점에 대응되는 상기 동작 결합정보에 포함된 3D 캐릭터 동작 정보에 따라 상기 선택된 3D 캐릭터의 동작이 실행되도록 3D 엔진을 제어한다.
이 때, 동작제어부(240)의 3D 엔진은 종래의 3D 모델링화된 데이터 또는 3D 영상패키지 같은 무거운 데이터를 사용하지 않고, 텍스트로 구성된 스크립트 형식의 3D 동작 정보를 사용함으로써 단말기 내부적으로 부하가 걸리지 않는 만큼 다양한 동작 표현을 빠르게 구현할 수 있다.
또한, 동작제어부(240)는 일반적으로 3D 캐릭터 기반 음성 SNS에 관련하여 제공되는 3D 캐릭터의 동작 식별자를 이용하여 생성된 3D 캐릭터 동작 정보인 경우로 볼 수 있다.
도 5는 본 발명의 일 실시예에 따라 3D 캐릭터 동작 정보에 동작 식별자가 첨부된 경우 3D 캐릭터 동작에 사용되는 스크립트 형식의 3D 동작 정보를 선정하여 3D 엔진으로 전송하는 것을 도시한 도면이다.
도 5를 참조하면, 음원제어부(230)에서 음원 정보가 재생되는 동시에 동작제어부(240)는 데이터추출부(210)로부터 수신 받은 동작 결합정보에 기록된 싱크 정보 "2초"와 동작 식별자 "0001"를 이용하여 음원 정보가 재생한 시점에서 2초가 되면 동작제어부(240)는 스크립트 형식의 3D 동작 정보를 송신자 식별정보와 동작 식별자로 테이블화한 데이터베이스를 참조하여 동작 식별자 "0001"에 해당하는 스크립트 형식의 3D 동작 정보를 3D 엔진으로 전송할 수 있다.
본 명세서에서는 테이블화된 데이터베이스를 제시하였으나, 이는 하나의 실시예에 불과하며 본 발명의 사상은 이러한 실시예에 국한되지 않는다.
한편, 동작 식별자 대신 송신자가 직접 제작한 스크립트 형식의 3D 동작 정보가 3D 캐릭터 동작 정보로 첨부된 경우를 볼 수 있다.
이 때, 동작제어부(240)는 송신자 식별정보와 동작 식별자를 테이블화한 데이터베이스를 참조하지 않고 수신 받은 동작 결합정보에 기록된 싱크 정보와 송신자가 제작한 스크립트 형식의 3D 동작 정보만으로 싱크 정보에 맞춰서 3D 캐릭터 의 동작을 재생할 수도 있다. 한편 송신자가 직접 제작한 스크립트 형식의 3D 동작 정보는 데이터 전송 시 무거운 데이터로 구성될 수 있기 때문에 한번 송신자 단말기(100)에서 중계서버를 통하여 수신자 단말기(200)로 전송되는 과정에서, 중계서버는 송신자가 제작한 스크립트 형식의 3D 동작 정보에 동작 식별자를 부여하여 메모리 및 스토리지에 저장하고 송신자 및 수신자 양방향으로 업데이트된 스크립트 형식의 3D 동작 정보에 해당하는 동작 식별자를 전송할 수 있다.
이하 흐름도는 상기에 기술한 내용을 기반으로 간단히 설명하기로 한다.
도 6은 본 발명의 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법을 요약하여 나타낸 동작 흐름도이다.
도 6을 참조하면, 앞서 도1 내지 도5을 통하여 설명된 송신자 단말기(100)와 수신자 단말기(200)간의 3D 캐릭터 기반 음성 SNS 방법이 도시된다. 송신자 단말기(100)는 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성한다(S610). 음성데이터는 구두로 입력되는 음성데이터일 수도 있고 미리 녹음되거나 제작된 음성데이터 일 수도 있다.
송신자 단말기(100)는 상기 음성데이터를 입력 받는 것과 동시에 송신자로부터 3D 캐릭터 동작 정보를 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성한다(S620).
이 때, 싱크 정보는 3D 캐릭터 동작 정보를 재생시킬 때 음원 정보의 재생 시간을 기초로 3D 캐릭터 동작 정보에 적용 될 수 있고, 3D 캐릭터 동작 정보는 제작하지 않고 사용하는 방법을 수행했기 때문에 미리 저장된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자를 포함할 수 있다.
송신자 단말기(100)는 상기 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성한다(S630). 이 때, 송신자 식별정보는 3D 캐릭터의 일련번호와 같은 것으로 송신자의 개인정보와 대응되는 정보로 구성될 수 있다.
송신자 단말기(100)는 생성된 3D 캐릭터 메시지를 중계서버에 전송한다(S640). 이 때, 중계서버는 미리 제작된 스크립트 형식의 3D 동작 정보와 동작 식별자가 매칭된 데이터베이스를 포함하고, 송신자에게 받은 3D 캐릭터 메시지를 기반으로 데이터베이스를 참조하여 재생에 필요한 정보를 수신자 단말기(200)에 제공할 수도 있다.
수신자 단말기(200)는 중계서버로부터 3D 캐릭터 메시지를 수신 받아 음원 정보, 동작 결합정보 및 송신자 식별정보를 추출한다(S650). 이 때, 3D 캐릭터 메시지의 작동에 필요한 데이터를 3D 캐릭터 메시지를 수신 받는 동시에 중계서버의 데이터베이스에서 3D 캐릭터 동작에 필요한 데이터를 같이 수신 받을 수 있고, 정기적으로 3D 캐릭터 기반 음성 SNS 시스템, 프로그램, 앱 및 위젯과 중계서버 간의 동기화 작업을 진행하여 최신 적용된 데이터베이스를 메모리 또는 스토리지에 저장하는 과정이 선행되어 안정적인 3D 캐릭터 동작 구동을 도모할 수 있다.
수신자 단말기(200)는 송신자 식별정보를 기초로 화면에 표시될 3D 캐릭터를 선택한다(S660). 이 때, 송신자 식별정보와 매칭된 3D 캐릭터를 중계서버에서 수신 받은 데이터베이스에서 매칭되는 정보를 선택할 수도 있고, 기존에 저장해 놓은 데이터베이스를 참고하여 선택할 수도 있다.
수신자 단말기(200)는 음원 정보를 재생하도록 제어함(S670)과 동시에 상기 동작 결합정보에 포함된 싱크 정보를 기초로 싱크 정보가 나타내는 시점에 대응되는 상기 동작 결합정보에 포함된 3D 캐릭터 동작 정보에 따라 상기 선택된 3D 캐릭터의 동작이 실행되도록 3D 엔진을 제어한다(S680). 이 때 3D 캐릭터 동작 정보는 동작 정보를 제작하지 않고 사용하는 방법을 수행했기 때문에 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자가 첨부되어 있어 수신자 단말기(200)에 미리 저장된 데이터베이스를 참조하여 싱크에 맞는 3D 캐릭터 동작을 구현할 수 있다.
또는 본 발명의 다른 실시예로서, 3D 캐릭터 기반 음성 SNS의 송신자 단말기(100)에서 제작툴 또는 이미지센서를 이용하여 송신자가 직접 3D 캐릭터 동작에 사용되는 스크립트 형식의 3D 동작 정보를 제작하여 본 발명의 구성을 이용할 수도 있다.
도 7은 본 발명의 다른 일 실시예에 따른 3D 캐릭터 기반 음성 SNS 방법으로서, 송신자가 직접 제작한 스크립트 형식의 3D 캐릭터 동작 정보를 이용하여 3D 캐릭터 동작을 제어하는 방법을 나타낸 동작 흐름도 이다.
송신자 단말기(100)는 제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 상기 스크립트 형식의 3D 동작 정보를 제작한다(S710). 이 때 제작툴은 3D 캐릭터 기반 음성 SNS와 관련된 프로그램을 설치할 경우 제공되는 툴일 수도 있고, 송신자의 의뢰에 따라서 제작된 스크립트 형식의 3D 동작 정보 일 수 있다. 또한 이미지센서를 이용할 경우 스크립트 형식의 3D 동작 정보를 제작하는 방법은 촬영한 영상을 기초로 손, 발, 머리를 분석하여 스크립트 형식으로 동작을 제작할 수 있고, 각 부위에 마커를 부착하여 실시간으로 송신자에 해당하는 3D 캐릭터를 보면서 제작할 수도 있다.
이렇게 제작된 스크립트 형식의 3D 동작 정보는 단계 S610 부터 단계 S680까지를 똑같이 진행되지만 단계 S620에서는 3D 캐릭터 동작 메시지를 구성 시 기본으로 제공되는 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자 대신에 송신자가 직접 제작한 스크립트 형식의 3D 동작 정보가 첨부되어 3D 캐릭터 동작 정보를 생성하고, 단계 S680에서는 동작 식별자가 아닌 실질적으로 3D 동작에 필요한 스크립트 형식의 3D 동작 정보가 첨부되어 수신 받기 때문에 작동에 필요한 참고 데이터베이스 없이도 작동할 수 있는 다른 구성이 존재한다.
본 발명의 일 실시 예에 따른 3D 캐릭터 기반 음성 SNS 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
100: 송신자 단말기
110: 음원생성부 120: 동작생성부 130: 메시지생성부
140: 메시지전송부 150: 3D 동작 정보 제작부
200: 수신자 단말기
210: 데이터추출부 220: 캐릭터선택부 230: 음원제어부
240: 동작제어부

Claims (17)

  1. 3D 캐릭터 기반 음성 SNS 시스템에서 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성하는 단계;
    상기 시스템에서, 상기 음성데이터를 입력받는 것과 동시에 미리 저장된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자를 3D 캐릭터 동작 정보로서 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성하는 단계;
    상기 시스템에서, 상기 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성하는 단계; 및
    상기 시스템에서, 상기 생성된 3D 캐릭터 메시지를 중계서버에 전송하는 단계;
    를 포함하는 3D 캐릭터 기반 음성 SNS 방법
  2. 삭제
  3. 제1항에 있어서,
    상기 중계서버는
    상기 스크립트 형식의 3D 동작 정보와 상기 동작 식별자가 매칭된 데이터베이스를 포함하고,
    상기 송신자에게 받은 3D 캐릭터 메시지를 기반으로 상기 데이터베이스를 참조하여 재생에 필요한 정보를 수신자의 단말기에 제공하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 방법
  4. 제1항에 있어서,
    상기 동작 결합정보를 생성하는 단계는
    상기 입력 받은 음성데이터에 포함된 송신자 음성의 톤, 크기 또는 빠르기의 변화 정보를 분석하고, 상기 음성의 톤, 크기 또는 빠르기를 기초로 상기 스크립트 형식의 3D 동작 정보와 매칭할 수 있는 상기 동작 식별자를 포함하여 상기 3D 캐릭터 동작 정보로 생성하고, 변화가 있는 시점을 기초로 상기 싱크 정보를 생성하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 방법
  5. 제1항에 있어서,
    상기 시스템에서, 제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 스크립트 형식의 3D 동작 정보를 제작하는 단계;
    를 더 포함하고,
    상기 3D 캐릭터 동작 정보는 상기 스크립트 형식의 3D 동작 정보를 포함하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 방법
  6. 삭제
  7. 삭제
  8. 삭제
  9. 제1항, 제3항 내지 제5항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.
  10. 송신자로부터 입력 받은 음성데이터에 따라 3D 캐릭터에 사용될 음원 정보를 생성하는 음원생성부;
    상기 음성데이터를 입력받는 것과 동시에 미리 저장된 스크립트 형식의 3D 동작 정보와 매칭된 동작 식별자를 3D 캐릭터 동작 정보로서 수신하고, 상기 3D 캐릭터 동작 정보가 수신되는 시점을 기초로 싱크 정보를 생성하며, 상기 3D 캐릭터 동작 정보와 상기 싱크 정보를 결합하여 동작 결합정보를 생성하는 동작생성부;
    상기 생성된 동작 결합정보, 상기 음원 정보 및 송신자 식별정보를 포함하여 3D 캐릭터 메시지를 생성하는 메시지생성부; 및
    상기 생성된 3D 캐릭터 메시지를 중계서버에 전송하는 메시지전송부;
    를 포함하는 3D 캐릭터 기반 음성 SNS 시스템
  11. 삭제
  12. 제10항에 있어서,
    상기 중계서버는
    상기 스크립트 형식의 3D 동작 정보와 상기 동작 식별자가 매칭된 데이터베이스를 포함하고,
    상기 송신자에게 받은 3D 캐릭터 메시지를 기반으로 상기 데이터베이스를 참조하여 재생에 필요한 정보를 수신자의 단말기에 제공하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 시스템
  13. 제10항에 있어서,
    상기 동작생성부는
    상기 입력 받은 음성데이터에 포함된 송신자 음성의 톤, 크기 또는 빠르기의 변화 정보를 분석하고, 상기 음성의 톤, 크기 또는 빠르기를 기초로 상기 스크립트 형식의 3D 동작 정보와 매칭할 수 있는 상기 동작식별자를 포함하여 상기 3D 캐릭터 동작 정보를 생성하고, 변화가 있는 시점을 기초로 상기 싱크 정보를 생성하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 시스템
  14. 제10항에 있어서,
    제작툴 또는 이미지센서를 통하여 송신자가 직접 필요한 스크립트 형식의 3D 동작 정보를 제작하는 3D 동작 정보 제작부;
    를 더 포함하고,
    상기 3D 캐릭터 동작 정보는 상기 스크립트 형식의 3D 동작 정보를 포함하는 것을
    특징으로 하는 3D 캐릭터 기반 음성 SNS 시스템
  15. 삭제
  16. 삭제
  17. 삭제
KR1020140055507A 2014-05-09 2014-05-09 3d 캐릭터 기반 음성 sns 시스템 및 방법 KR101595856B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140055507A KR101595856B1 (ko) 2014-05-09 2014-05-09 3d 캐릭터 기반 음성 sns 시스템 및 방법
PCT/KR2015/004373 WO2015170850A1 (ko) 2014-05-09 2015-04-30 3d 캐릭터 기반 음성 sns 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140055507A KR101595856B1 (ko) 2014-05-09 2014-05-09 3d 캐릭터 기반 음성 sns 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20150129224A KR20150129224A (ko) 2015-11-19
KR101595856B1 true KR101595856B1 (ko) 2016-02-22

Family

ID=54392668

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140055507A KR101595856B1 (ko) 2014-05-09 2014-05-09 3d 캐릭터 기반 음성 sns 시스템 및 방법

Country Status (2)

Country Link
KR (1) KR101595856B1 (ko)
WO (1) WO2015170850A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019107639A1 (ko) * 2017-11-30 2019-06-06 주식회사 퍼니브라운 마리오네트 가수 음원발매 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000311251A (ja) * 1999-02-26 2000-11-07 Toshiba Corp アニメーション作成装置および方法、記憶媒体
KR100453500B1 (ko) * 2001-12-12 2004-10-20 (주)엔룩스 3차원 아바타 메일 서비스 방법 및 장치
KR100856786B1 (ko) * 2006-07-27 2008-09-05 주식회사 와이즌와이드 3ｄ 버추얼 에이전트를 사용한 멀티미디어 나레이션 저작시스템 및 그 제공 방법
KR100841925B1 (ko) * 2006-09-27 2008-06-30 한국전자통신연구원 디지털 캐릭터 동작생성 시스템 및 방법
KR20120087251A (ko) 2010-12-16 2012-08-07 주식회사 토크아크 사운드 컨텐츠 기반의 소셜 네트워크 서비스 시스템

Also Published As

Publication number Publication date
KR20150129224A (ko) 2015-11-19
WO2015170850A1 (ko) 2015-11-12

Similar Documents

Publication Publication Date Title
JP5815214B2 (ja) アニメーションスクリプト生成装置、アニメーション出力装置、受信端末装置、送信端末装置、携帯用端末装置及び方法
RU2488232C2 (ru) Сеть связи и устройства для преобразования текста в речь и текста в анимацию лица
CN1672178B (zh) 用于动画即时通信的方法和装置
US7124372B2 (en) Interactive communication between a plurality of users
RU2442294C2 (ru) Устройство и способ для обеспечения и отображения анимированных sms-сообщений
JP5612465B2 (ja) テキストメッセージにおける触覚コンテンツ
US9368102B2 (en) Method and system for text-to-speech synthesis with personalized voice
KR101628050B1 (ko) 텍스트 기반 데이터를 애니메이션으로 재생하는 애니메이션 시스템
CN113014732B (zh) 会议记录处理方法、装置、计算机设备和存储介质
KR101200559B1 (ko) 모바일 인스턴트 메신저에서 플래시콘을 제공하는 시스템,장치 및 방법
US10812430B2 (en) Method and system for creating a mercemoji
KR102076793B1 (ko) 음성을 통한 전자문서 제공 방법, 음성을 통한 전자문서 작성 방법 및 장치
CN110019058A (zh) 文件操作的共享方法和装置
KR100909954B1 (ko) 사용자기기를 이용한 감성 메시지 작성 및 표현 방법과이를 위한 사용자기기
JP7094486B2 (ja) 情報提供装置
KR20190131355A (ko) 대화용 애플리케이션의 운영 방법
KR20150129182A (ko) 메시지 제공 방법 및 메시지 제공 장치
KR20090075397A (ko) 이모티콘을 포함한 통신 메시지의 송수신 방법
KR101595856B1 (ko) 3d 캐릭터 기반 음성 sns 시스템 및 방법
KR20160010810A (ko) 실음성 표출 가능한 실사형 캐릭터 생성 방법 및 생성 시스템
KR101165300B1 (ko) 패턴애니메이션을 기반으로 하는 ｕｃｃ서비스 시스템
KR102186794B1 (ko) 커스텀 이모티콘을 생성하고 전송하는 장치 및 방법
WO2015175938A1 (en) Asynchronous auditory messaging facilitation apparatuses, methods and systems
KR20170103579A (ko) 가상현실 기반 감성진동 sns 시스템 및 그 방법
JP6698292B2 (ja) 情報処理システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20190201

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200309

Year of fee payment: 5