KR19990014233A - 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치 - Google Patents

3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치 Download PDF

Info

Publication number
KR19990014233A
KR19990014233A KR1019980030325A KR19980030325A KR19990014233A KR 19990014233 A KR19990014233 A KR 19990014233A KR 1019980030325 A KR1019980030325 A KR 1019980030325A KR 19980030325 A KR19980030325 A KR 19980030325A KR 19990014233 A KR19990014233 A KR 19990014233A
Authority
KR
South Korea
Prior art keywords
data
string
shape
data string
sound
Prior art date
Application number
KR1019980030325A
Other languages
English (en)
Other versions
KR100294372B1 (ko
Inventor
도시야 나카
요시유키 모치즈키
Original Assignee
모리시타 요이찌
마쓰시타 덴키 산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모리시타 요이찌, 마쓰시타 덴키 산교 가부시키가이샤 filed Critical 모리시타 요이찌
Publication of KR19990014233A publication Critical patent/KR19990014233A/ko
Application granted granted Critical
Publication of KR100294372B1 publication Critical patent/KR100294372B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H04L67/5651—Reducing the amount or size of exchanged application data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/508—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
    • H04L41/509—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to media content delivery, e.g. audio, video or TV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/329—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Architecture (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Stereophonic System (AREA)

Abstract

3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치(100)는 송신부(PCS);수신부(PCC);양방향으로 송신부(PCS)와 수신부(PCC)를 결합하는 전송부(TR)를 포함하고, 3-DCG에서 골격구조의 형상과 움직임 및 이 움직임으로 동기한 움을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)은 상기 송신부(PCS)로부터 수신부(PCC)로 각각 송신되어 상기 수신부(PCC)가 상기 움직임 데이터열(Sm)과 음 데이터열(Sa)을 동기하여 상기 3-DCG를 발생한다.

Description

3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치
본 발명은 인터넷과 같은 네트워크를 토대로 3차원 가상공간을 3차원 컴퓨터 그래픽(이하,3-DCG로 언급)으로 디스플레이하여 형성하는 데이터 열을 송수신하는 시스템에 관한것으로써, 특히, 복잡한 골격구조를 갖는 문자, 예컨데, 인간의 자연적인 움직임을 효율적으로 송수신하기 위해서 3차원 골격구조를 나타내는 데이터 열을 송수신하는 방법 및 장치에 관한 것이다.
최근에, 월드-와이드 웹(World-Wide Web)(WWW)과 같은 인터넷상에 가상 상점, 전자 무역 및 다양한 관련 홈페이지는 3-DCG를 적용할 수 있는 분야로서 상당한 관심을 가지고 일을 추진하고 있다. 특히, 인터넷의 급속한 발전에 감사하며, 가정에서 게임과 영화같은 고품질 3-DCG를 다루는 추세도 강력하게 추진되고 있다. 도 8에 도시된 바와 같이 클라이언트 PCC1-PCCn, 예컨데, 개인용 컴퓨터로 불리는 여러개의 기계들은 서버PCS라고 불리는 기계에 접속된다. 예컨데, WWW로 인터넷을 통하여 개인용 컴퓨터 또는 워크스테이션에 접속된다. 필요한 경우 상기 서버(PCS)로부터 다운로드된 음(sound), 문장 및 레이아웃과 같은 정보를 재구성함으로써, 상기 서버(PCS)로부터 송신된 정보를 클라이언트(PCC1-PCCn)가 얻을 수 있다. 일반적으로, 송신 제어 프로토콜/인터넷 프로토콜(Transmission Control Protocol/Internet Protocol)(TCP/IP)에 근거한 통신방법은 상기 서버(PCS)와 클라이언트(PCC1-PCCn)사이의 통신에 적용된다.
종래에, 상기 서버(PCS)로부터 제공된 데이터는 주로 문장 데이터와 영상 데이터로 제한되었다. 그러나, 최근에, 가상 현실 모델링 언어(Virtual Reality Modeling Language)(VRML) 및 이 VRML의 브라우져(browser)의 표준화 과정은 형상(shapes)과 배경같은 3-DCG의 전송을 추진하는 것이다. 상기 VRML은 간략하게 다음에 설명될 것이다. 하이버텍스트 마크업 언어(Hypertext Markup Language)(HTML)로 주로 영상과 문장을 구성하는 공지된 데이터 레이아웃에 있어서, 영상 데이터, 특히, 동화상 데이터를 전송하는데는 많은 시간과 비용이 필요하다. 따라서, 현존하는 장치는 네트워크 트래픽을 제한하고 있다. 다른한편, 3-DCG에 있어서, 형상, 시점정보(visual point) 및 광원을 포함한 모든 정보는 3 차원 데이터로 처리된다. 최근에, 컴퓨터 그래픽(이후, CG로 언급)기술은 CG에 의해 생성된 영상의 품질을 빠르게 개선하는 방향으로 진행되었다. 따라서, 데이터량의 관점에서, CG 데이터 자체를 전송하는 것이 효율적이다.
일반적으로, CG 데이터량이 종래의 영상 데이터량의 1/100 이하일 때 조차도, 상기 CG 데이터는 종래의 영상 데이터량과 동일한 양의 데이터를 갖는 영상을 디스플레이할 수 있다. 다르게 말하면, 상기 CG 데이터는 종래의 영상 데이터의 압축비보다 100배 이상의 압축비를 갖는다. 나아가서, 네트워크를 통하여 영상 데이터를 송신할 때, CG 데이터, 특히, 3-DCG 데이터를 표준으로 이용하는 것을 시도한다. 이러한 시도의 일예로서, 상기 언급된 VRML 방법이 제안되었다(VRML 버전2.0). 상기 VRML 버전 2.0은 원시(primitive)로 불리는 형상 데이터, 광원 데이터, 시점 데이터, 텍스처 데이터등의 데이터 포맷을 규정하고, 강체(rigid body)의 변위를 지정하는 방법을 규정한다. 이러한 데이터 포맷은 편리성 때문에 VR 포맷(VRF)으로 언급된다.
다른 한편, 종래의 CG는 최근에 실시간에 기초하여 영상을 형성하는 에니메이션 기술에 적용하는 것이 주목된다. 이러한 실시간 에니메이션 기술을 이용함으로써, CG 문자의 실제 움직임은 주로 상업용 메시지와 영화에서 재생된다. 예컨데, 인간과 같은 복잡한 형상은 골격구조에 의해 표현되고, 이러한 골격구조의 복잡한 움직임은 상기 골격을 연결하여 움직임량을 정의함으로써 자연적으로 재생될 수 있고, 이것은 순간적으로 변한다.
상기 인터넷상에 종래의 3-DCG 모델링 언어, 즉, VRML에 있어서, 인간과 같은 복잡한 구조의 형상으로 실시간에 움직임으로 분배하는 것은 불가능하다. 그 동안, 네트워크를 포함한 가상공간에서 가상 3차원 공간을 복수의 사용자가 공유하고, 이 공통의 3차원 공간내에 화신(avatars)을 대화식으로 구현한 시스템을 공식화하기는 또한 불가능하다. 또한, 상기 공통의 가상 3차원 공간에서 화신의 움직임과 동시에 실시간에서 음성과 음악을 송수신하는 것도 불가능하다.
따라서, 본 발명의 목적은 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치를 제공하는 것인데, 이것은 인간과 같은 복잡한 구조의 형상으로 실시간에 기초하여 움직임을 분배할 수 있고, 네트워크를 포함한 가상공간에서 가상 3차원 공간을 복수의 사용자가 공유함으로써, 가상공간의 화신들이 공통의 가상 3차원 공간에서 대화식으로 조작되고, 음성과 음악은 상기 공통의 가상 3차원 공간에 있는 화신의 움직임과 일치하여 실시간에 송수신될 수 있는 것이다.
본 발명의 목적을 달성하기 위해서, 본 발명에 따른 3차원 가상공간을 나타내는 데이터열을 송수신하는 장치는 송신부, 수신부 및 양방향으로 송신부와 수신부를 접속하는 전송수단을 포함하고;형상, 3-DCG의 골격구조에 대한 움직임 및 이 움직임과 일치하는 음을 나타내는 형상 데이터열, 움직임 데이터열 및 음 데이터열은 상기 송신부로부터 수신부로 송신되고, 그 결과 상기 수신부는 움직임 데이터열과 음 데이터열의 동기를 통하여 상기 3-DCG를 발생하며;상기 송신부는 상기 수신부로부터의 요청에 응답하여 실시간에 미리결정된 데이터열의 포맷에 따라 복수의 열로 형상 데이터열, 움직임 데이터열 및 음 데이터열을 동시에 송신하는 송신수단을 포함하고, 그 결과, 상기 전송수단은 상기 송신부로부터 수신부로 상기 열을 대화식으로 전송하며;상기 수신부는 상기 수신된 열의 종류와 포맷을 판별하기 위해서 상기 전송수단을 거쳐 송신부로부터 송신된 열을 수신하고, 상기 판별된 열을 상기 열에 필요한 복원처리를 위해서 실시간에 필요한 열을 수신하는 데이터열 수신수단과, 상기 수신부에 의해 수신된 열의 형상열 또는 미리 판독된 3차원 형상 데이터를 이용함으로써 3차원 가상공간에서 골격구조의 형상을 발생하고, 상기 열의 움직임열을 이용함으로써 골격구조의 형상을 움직이는 3차원 가상공간 발생수단, 및 음의 열을 포함하는 열인 경우에 상기 움직임열로 동기한 음의 열을 재생하는 음 발생수단을 포함한다.
그 동안, 형상, 3-DCG에서 골격구조의 움직임 및 이러한 움직임으로 동기한 음을 나타내는 형상 데이터열, 움직임 데이터열 및 음 데이터열이 송신부로부터 수신부로 송신됨으로써 상기 수신부가 움직임 데이터열과 음 데이터열의 동기를 통하여 상기 3-DCG를 발생하는 3차원 가상공간을 나타낸 데이터열을 송수신하는 방법은상기 수신부로부터의 요청에 응답하여 실시간상에 미리결정된 데이터열의 포맷에 따라 복수의 열로서 형상 데이터열, 움직임 데이터열 및 이 움직임 데이터열로 동기한 음 데이터열을 동시에 송신하는 제1단계;
상기 송신부로부터 수신부로 상기 열을 전송하기 위하여 양방향 방법으로 송신부와 수신부를 접속하는 제2단계;
상기 수신된 열의 종류와 포맷을 판별하기 위하여 상기 전송된 열을 수신하고 이 판별된 열을 복원하기 위해서 실시간에 기초하여 상기 열을 수신하는 제3단계;
상기 수신부에 의해 수신된 열중 형상열 또는 미리 판독된 3차원 형상 데이터를 이용함으로써 3차원 가상공간에 골격구조 형태를 발생하고, 상기 열중 움직임 열을 이용함으로써 상기 골격구조의 형상을 움직이는 제4단계; 및
상기 열이 한 개의 음열을 포함하는 경우에, 상기 움직임열로 동기한 음열을 재생하는 제5단계를 포함한다.
상기 언급된 본 발명의 방법 및 장치에 있어서, 인간과 같은 골격구조의 형상 데이터는 형상 데이터열과 같이 전송되고, 상기 골격의 기본적인 움직임은 상기 움직임 데이터열과 같이 운반되며, 상기 골격구조의 움직임을 수반하는 음데이터는 각각의 상기 데이터열을 동기 및 압축한 정보 및 상기 데이터열중에 해당하는 정보와 함께 상기 음 데이터열과 같이 전송된다.
따라서, 본 발명에 따라, 네트워크에 기초한 송수신 시스템에서 문자의 느린 이동 및 이러한 움직임으로 동기시킨 음정보는 사용자의 요청에 따라 대화식으로 송수신 될 수 있고, 상기 전송될 데이터량을 크게 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따라 3차원 가상공간을 나타내는 데이터열을 송수신하는 장치의 최소배치를 도시하는 블록도.
도 2는 도 1의 장치에 제공된 3-DCG 데이터열 송신부의 블록도.
도 3은 도 1의 장치에 제공된 3-DCG 데이터열 수신부의 블록도.
도 4는 본 발명의 3-DCG 데이터열의 포멧에 대한 일예를 도시하는 뷰도.
도 5는 본 발명의 3-DCG 데이터열의 포맷에 대한 다른 예를 도시하는 뷰도.
도 6은 본 발명의 3-DCG 데이터열과 같이 작용하는 에니메이션열의 패킷에 대한 모방도.
도 7은 본 발명의 3-DCG 데이터열과 같이 작용하는 움직임열의 패킷에 대한 모방도.
도 8은 복수의 클라이언트가 단일 서버에 접속되는 도 1의 장치를 도시하는 모방도.
도 9는 본 발명의 3-DCG 데이터열의 기본적인 골격구조에 대한 뷰 설명도.
도 10은 본 발명의 3-DCG 데이터열에 화신(avatar)의 골격구조를 나타내는 일반 가상 데이터 구조를 도시하는 모방도.
도 11은 도 10의 골격구조(초기 값)에 관한 움직임을 나타내는 데이터열의 포맷을 도시하는 모방도.
도 12는 본 발명의 3차원 전경에 대한 가상 현실 모델링 언어(Virtual Reality Modeling Language)(VRML)를 토대로 묘사한 예의 뷰 설명도.
도 13은 도 12의 묘사 예에 해당하는 전경 구조를 도시한 모방도.
도 14는 본 발명의 3-DCG 데이터열의 동기 방법에 대한 일예의 뷰 설명도.
도 15는 도 8의 많은 사용자 네트워크에서 3차원 공간의 공유를 도시하는 흐름도.
도 16은 도 1의 단일 사용자 네트워크에서 3차원 가상공간의 송수신을 도시하는 흐름도.
도 17은 본 발명의 3-DCG의 재생시간에 3-DCG 데이터열의 동기처리를 도시하는 흐름도.
도 18은 개인용 컴퓨터가 도 15 내지 도 17의 흐름도의 단계를 가지고 본 발명을 실행하는 프로그램을 기록하기 위하여 플로피 디스크를 이용하는 개인용 컴퓨터의 투시도.
이후, 본 발명의 일 실시예는 수반하는 도면을 참조로 설명된다. 도 1은 본 발명의 일 실시예에 따라 3차원 가상공간을 나타내는 데이터열을 송수신하는 장치(100)의 최소한 배치를 도시한다. 상기 장치(100)는 송신측에 배치된 서버(PCS), 수신측에 배치된 클라이언트(PCC) 및 상기 서버(PCS)와 클라이언트(PCC)를 결합하는 전송부(TR)에 의해 구성된다. 상기 서버(PCS)는 외부에서 일반적으로 제공된 열 인가 수단(authoring means)으로서 사용자에 의해 입력된 명령에 따라, 3차원 가상공간을 나타내는 3-DCG 데이터열을 발생한다. 이러한 열 인가 수단은 이후에 설명될 것이다.
상기 서버(PCS)는 사용자의 화신을 포함하는 3차원 가상공간을 형성하는 3-DCG 데이터열(DS)을 인코딩하여(포멧 변환) 인코딩한 데이터열(DS1)을 발생한다 . 그 동안, 상기 3-DCG 데이터열(DS) 및 인코딩한 데이터열(DS1)의 포맷(VRF)은 도 4, 5 및 11을 참조로 이후에 기술될 것이다. 양방향 방법으로 상기 서버(PCS)와 클라이언트(PCC)를 접속하는 전송부(TR)는 상기 서버(PCS)로부터 클라이언트(PCC)까지 인코딩한 데이터열(DS1)을 전송할 뿐만 아니라 상기 클라이언트(PCC)로부터 입력된 3-DCG 데이터상의 데이터를 수정한 서버(PCS)로 전송한다. 즉, 상기 서버(PCS)는 상기 입력된 인코딩 데이터열(DS1)의 포맷을 재변환함으로써 3-DCG 데이터열(DS)을 디코딩하여(포멧 변환), 상기 3차원 가상공간을 나타내는 3-DCG 영상을 재생한다. 그 동안, 상기 서버(PCS)에서 사용자의 화신을 조작함으로써 3차원 가상공간의 변화를 사용자가 일으키는 경우에, 상기 서버(PCS)는 상기 변화를 나타내는 영상 수정 데이터(DM)를 발생하여, 이 영상 수정 데이터(DM)를 전송부(TR)를 거쳐 상기 클라이언트(PCC)로 송신한다.
일반적으로, 상기 서버(PCS) 및 클라이언트(PCC)는 워크스테이션 및 개인용 컴퓨터와 같은 컴퓨터의 소프트웨어에 의해 주로 공식화된다. 상기 서버(PCS)는 3-DCG 데이터열 송신부(1)를 포함하는 반면, 상기 송신부(TR)는 3-DCG 데이터열 송신부(2)를 포함한다. 그 동안, 상기 클라이언트(PCC)는 3-DCG 데이터열 수신부(3), 3차원 가상공간 발생부(4) 및 음 발생부(5)를 포함한다. 상기 3차원 가상공간 발생부(4)는 데이터 버스에 의해 3-DCG 데이터열 수신부(3)에 접속되어 상기 3-DCG 데이터열 수신부(3)로부터 상기 3-DCG 데이터열(DS)의 입력을 수신한다. 상기 3차원 가상공간 발생부(4)는 상기 3-DCG 데이터열(DS)을 기초로 하여 3-DCG를 발생할 뿐만아니라 음 데이터열(Sa)을 발생한다. 상기 음 발생부(5)는 신호라인에 의해 3차원 가상공간 발생부에 접속되고, 상기 3차원 가상공간 발생부(4)로부터 음 데이터열(Sa)의 입력에 응답하여 음을 재생한다.
즉, 상기 장치(100)는 상기 3차원 데이터열 송신부(1)로부터 상기 인코딩된 데이터열(DS1)을 구성하는 복수의 3-DCG 데이터열을 동시에 송신한다. 상기 송신부(TR)를 거쳐 수신된 3-DCG 데이터열을 토대로 상기 클라이언트(PCC)는 음을 포함하는 3차원 에니메이션을 발생한다.
이러한 예로서, 단일 클라이언트(PCC)가 송신부(TR)를 통하여 단일 서버(PCS)에 접속되는 장치(100)의 배치를 간략하게 설명한다. 그러나, 복수의 클라이언트(PCCn)(n=자연수)가 도 8에 도시된 바와 같이 송신부(TR)를 경유하여 서버(PCS)에 접속될 수 있다는 것은 말할 필요도 없다.
도 2는 상기 서버(PCS)안에 3-DCG 데이터열 송신부(1)의 배치에 대한 일예를 도시한다. 상기 3-DCG 데이터열 송신부(1)는 양방향 신호라인에 의해 3차원 CG 데이터열 전송부(2)에 접속되어 클라이언트(PCC) 및 서버(PCS)에 의해 발생된 요청 신호(Sr)를 교한한다. 상기 3-DCG 데이터열 송신부(1)는 상기 화신의 골격 데이터열(Ss)을 발생하는 골격구조열 송신부(11)와, 상기 화신의 움직임 데이터열(Sm)을 발생하는 움직임열 송신부(12)와, 상기 화신의 음 데이터열(Sa)을 발생하는 음열 송신부(13)와, 상기 화신의 상기 골격 데이터열(Ss), 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 미리결정된 포맷으로 변환하기 위하여 인코딩을 실행하는 열변환기(14) 및 상기 장치(100)에서 클라이언트의 식별(ID)과 화신의 상태와 같은 상태들을 제어하는 상태 제어기(15)를 포함한다.
상기 열변환기(14)는 양방향 방법으로 골격구조열 송신부(11) 및 3-DCG 데이터열 전송부(2)에 접속되고, 상기 화신의 골격 데이터열(Ss)을 골격 데이터열(Ss1)로 인코딩하여, 상기 골격 데이터열(Ss1)을 상기 3-DCG 데이터열 전송부(2)로 제공한다. 유사하게, 상기 열변환기(14)는 양방향 방법으로 움직임열 송신부(12) 및 3-DCG 데이터열 전송부에 접속되고, 상기 화신의 움직임 데이터열(Sm)을 움직임 데이터열(Sm1)로 인코딩하여 상기 움직임 데이터열(Sm1)을 상기 3차원 데이터열 전송부(2)로 공급한다. 또한, 상기 열변환기(14)는 양방향 방법으로 음열 송신부(13) 및 3-DCG 데이터열 송신부(2)에 접속되고, 상기 음 데이터열(Sa)을 음 데이터열(Sa1)로 인코딩하여 상기 음 데이터열(Sa1)을 상기 3-DCG 데이터열 전송부(2)에 제공한다.
상기 클라이언트(PCC)로부터 송신된 요청신호(Sr)에 응답하여, 상기 3-DCM 데이터열 전송부(1)는 골격구조열 전송부(11), 움직임열 전송부(12) 및 음열 전송부(13)가 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 발생하여 열변환기(14)로 출력한다. 상기 골격 데이터열(Ss)은 골격구조의 계층관계를 정의하는 계층 데이터, 이 계층 데이터의 초기 상태를 나타내는 정보, 골격의 결합상태, 상기 골격에 해당하는 형상 및 상기 골격구조에 해당하는 관계를 포함한다. 상기 움직임 데이터열(Sm)은 상기 골격구조의 기본적인 움직임에 대한 정보를 포함한다. 상기 음 데이터열(Sa)은 상기 움직임 데이터열(Sm)에 의해 표현된 움직임 정보로 동기시킨 음을 나타내는 정보를 포함한다.
상기 열변환기(14)는 특별한 식별정보를 데이터열(Ss, Sm 및 Sa)로 각각 분리하여 다른 포맷의 골격 데이터열(Ss1), 움직임 데이터열(Sm1) 및 음 데이터열(Sa1)을 발생하여 상기 데이터열(Ss1, Sm1 및 Sa1)을 상기 3-DCG 데이터열 전송부(2)로 출력한다. 초기에 설명된 바와 같이, 가상 현실 모델링 언어(Virtual Reality Modeling Language)(VRML)의 포멧 및 이 VRML 포맷 중 확장된 한 개의 포맷은 데이터열(Ss1, Sm1 및 Sa1)의 포맷과 같이 양호하게 이용될 수 있다. 상기 VRML의 포맷은 VRML 버전 2.0으로 표준화된다. 그 동안, 열로 송신될 필요없는 CG형 데이터는 하이버텍스트 마크업 언어(Hyper Text Markup Language)(HTML)를 이용하여 네트워크를 경유하여 송신되거나 국부 기계상의 파일로부터 판독될 수 있다.
도 3은 3차원 CG 데이터열 수신부(3)에 대한 상세한 구성을 도시한다. 상기 3-DCG 데이터열 송신부(1)와 동일한 방법으로, 상기 3-DCG 데이터열 수신부(3)는 양방향 방법으로 3-DCG 데이터열 송신부(2)에 접속되어 상기 클라이언트(PCC) 및 서버(PCS)의 요청신호를 교환한다. 상기 3-DCG 데이터열 수신부(3)는 열변환기(31), 골격구조열 수신부(32), 움직임열 수신부(33) 및 음열 수신부(34)를 포함한다.
상기 열변환기(31)는 양방향 방법으로 3 방향 CG 데이터열 송신부(2) 및 골격구조열 수신부(32)에 접속된다. 상기 열변환기(31)는 상기 3-DCG 데이터열 송신부(2)를 통하여 상기 3-DCG 데이터열 송신부(1)로부터 입력된 골격 데이터열(Ss1)의 포맷을 다시 바꿔서 이 골격구조 데이터열(Ss1)을 디코딩하고, 상기 골격 데이터열(Ss)을 상기 골격구조열 수신부(32)에 제공한다. 이와 같이, 상기 열변환기(31)는 양방향 방법으로 3-DCG 데이터열 전송부(2) 및 움직임열 수신부(33)에 접속되고, 상기 움직임 데이터열(Sm1)을 상기 움직임 데이터열(Sm)로 디코딩하여 이 움직임 데이터열(Sm)을 상기 움직임열 수신부(33)에 제공한다. 또한, 상기 열변환기(31)는 상기 3-DCG 데이터열 전송부(2) 및 음열 수신부(34)에 접속되고, 상기 음 데이터열(Sa1)을 상기 음 데이터열(Sa)로 디코딩하여 상기 음 데이터열(Sa)을 음열 수신부(34)에 제공한다.
즉, 3-DCG 데이터열 송신부(1)로부터 송신된 골격 데이터열(Ss1), 움직임 데이터열(Sm1) 및 음 데이터열(Sal)은 상기 3-DCG 데이터열 전송부(2)를 경유하여 열변환기(31)에 입력된다. 이 열변환기(31)는 상기 입력된 데이터열(Ss1, Sm1, 및 Sa1)이 필요한 경우 역으로 최초의 포맷으로 변환하여 데이터열(Ss1, Sm1, 및 Sa1)을 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)로 각각 디코딩하고, 상기 데이터열(Ss, Sm, 및 Sa)을 골격구조열 수신부(32), 움직임열 수신부(33) 및 음열 수신부(34)로 출력한다. 상기 기술된 바와 같이, 상기 3-DCG 데이터열 전송부(2)로부터 전송된 인코딩한 3-DCG 데이터열(DS1)은 상기 열변환기(31)에 의해 상기 3-DCG 데이터열(DS)로 디코딩되고, 상기 3-DCG 데이터열(DS)은 상기 골격구조열 수신부(32), 움직임열 수신부(33) 및 음열 수신부(34)에 의해 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)과 같이 수신된다.
이후, 상기 장치(100)의 동작은 간단히 기술된다. 복수의 클라이언트(PCC)에서의 요청신호(Sr)에 응답하여, 상기 서버(PCS)의 3-DCG 데이터열 송신부(1)는 상기 화신의 골격구조에 대한 계층관계를 정의하는 계층 데이터와 이 계층 데이터의 초기상태상의 데이터, 상기 골격의 연결을 제한한 상태, 상기 골격에 해당하는 형상 및 상기 골격구조에 해당하는 관계를 상기 열과 같이 송신한다. 상기 열변환기(14)는 상기 3-DCG 데이터열(DS)의 포맷 변환과 압축을 실행하여 상기 인코딩된 데이터열(DS1)을 발생한다. 상기 3-DCG 데이터열(DS)이 복합형태(composite type)이고, 상기 3-DCG 데이터열(DS)는 움직임 또는 음에 대한 각각의 열로 분할되거나 골격 데이터열(Ss)은 필요한 경우 압축된다.
그 동안, 상기 화신의 골격 데이터는 본 출원인에 의해 1997년 4월 17일 출원된 일본 특허출원 제9-100453호에 상세히 기술된다. 그러나, 상기 화신의 골격 데이터구조는 도 9 및 도 10을 참조로 간단히 설명될 것이다.
본 발명의 3-DCG 데이터열(DS)의 표준 포맷(VRF)에 대한 제1 및 제1의 예는 도 4 및 5를 참조로 이하에 설명될 것이다. 도 4의 포맷 VRF의 제1예에 있어서, 각각의 데이터열, 예컨데, 골격 데이터열(Ss)은 메인 헤더(MH), 보조 헤더(SH) 및 데이터 바디(DB)로 구성된다. 상기 데이터의 종류, 상기 데이터의 순서, 압축과 신장사이의 식별, 상기 열의 개시시간 및 중지시간(또는 프레임 번호), 루프의 존재/비존재, 동기 재생에 이용된 시간 스템프의 존재/비존재, 재생 시간에서의 피치등은 메인헤더(MH)에 기록된다. 상기 데이터의 크기는 상기 데이터 바디(DB)와 한 쌍을 형성하는 보조 헤더(SH)에 기록된다. 다른방법으로 다음과 같은 설명을 열거하지 않았다면, 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)은 이러한 포맷(VRF)으로 표현된다.
복합형 데이터열에 지시된 도 5의 포맷(VRF)에 대한 제2예에 있어서, 움직임 데이터(MD)와 음 데이터(AD) 또는 움직임 데이터(MD)와 움직임 데이터(MD)중의 하나는 한 개의 열로 순차적으로 배열된다. 이러한 경우에, 순차적으로 배열된 제1 및 제2의 데이터는 재생시간에 서로 동기시켜야 한다. 상기 움직임 데이터(MD) 또는 음 데이터(AD)는 동기화에 필요한 길이를 각각 갖는 패킷으로 불리는 작은 단위로 분리된다. 이러한 데이터의 순서는 메인 헤더(MH)에 지정된다. 상기 도 6에 언급된 패킷의 일예는 에니메이션 열의 패킷을 도시하고, 도 7은 움직임열의 패킷을 도시한다.
이후, 상기 화신의 골격 데이터열(Ss) 및 움직임 데이터열(Sm)의 데이터구조는 도 9, 10, 및 11를 참조로 설명된다. 초기에, 도 9는 기본적인 골격구조를 도시한다. 편리성 때문에, 상기 화신의 팔꿈치의 골격구조는 기술된다. 즉, 2개의 링크(LK1 및 LK2)는 조인트(J)에 의한 계층관계로 서로 접속된다. 예컨데, 상기 링크(LK1)가 상박(upper arm)이고 링크(LK2)가 전완(forearm)이라고 가정하면, 상기 수직 계층구조는 링크(LK1)가 부모이고 링크(LK2)가 어린아이로 형성된다.
다음, 도 10은 화신 전체에 대한 일반 계층구조를 도시한다. 도 10에 있어서, 실선에 의해 도시된 각 블록은 도 9의 조인트(J)에 해당하고, 상기 파선에 의해 도시된 각 블록은 각 계층 시스템의 경계를 나타낸다. 즉, 이러한 예로서, 3개의 시스템(R1, R2 및 R3)은 메인 바디의 루트(R)로부터 이끌어진다. 원래의 시스템(R1)에 있어서, 오른쪽 다리의 사타구니(JR1-1), 오른쪽 무릎(JR1-2), 오른쪽 발목(JR1-3) 및 오른쪽 발끝(JR1-4)은 계층적으로 보다 깊이 옮겨져서 상기 화신의 루트(R)에 접속된 오른쪽 다리 시스템(R1)은 형성된다. 이와 같이, 상기 왼쪽 다리 시스템(R2)은 상기 왼쪽 다리의 허벅지(JR2-1), 왼쪽 무릎(JR2-2), 왼쪽 발목(JR2-3) 및 왼쪽 발끝(JR2-4)에 의해 형성된다. 그러나, 상기 시스템(R3)이 상반신을 나타내기 때문에, 3개의 제2시스템(R31, R32, 및 R33)은 팰비스(pelvis)(JR3-1)에서 분기한다. 상기 제2의 시스템(R31)은 오른쪽 목덜미(JR31-1), 오른쪽 어깨(JR31-2), 오른쪽 팔꿈치(JR31-3), 오른쪽 손목(JR31-4) 및 오른쪽 손(JR31-5)의 계층으로 구성된 오른쪽 팔 시스템을 형성한다. 유사하게, 상기 제2시스템(R32)은 왼쪽 목덜미(JR32-1), 왼쪽 어깨(JR32-2), 왼쪽 팔꿈치(JR32-3), 왼쪽 손목(JR32-4) 및 왼쪽 손(JR32-5)의 계층으로 구성된 왼쪽 팔 시스템을 형성한다. 상기 제2의 시스템(R33)은 목(JR33-1) 및 정수리(JR33-2)의 계층으로 구성된 머리 시스템을 형성한다.
그 동안, 각 시스템의 계층을 더욱 깊숙이 들어가서 더욱 많은 층으로 분리되면, 실제 인간의 움직임과 매우 흡사하게 움직일 수 있는 화신을 표현하는 것이 가능하다. 예컨데, 오른쪽 및 왼쪽 손(JR31-5, JR32-5)에 손가락을 제공하는 경우, 각 손의 조인트에 해당하는 15개의 조인트는 제공될 수 있다.
도 11은 상기 언급된 골격구조(초기 값)에 해당하는 움직임 데이터가 움직임 데이터열(Sm)에 목록된 포맷을 도시한다. 상기 기본적인 움직임 데이터는 회전각에 대한 시간열 데이터인데, 위치 변수 시스템의 X축, Y축 및 Z축에 관한 각 조인트(J)의 회전각은 시간의 변환에 따라 표현된다. 더욱더, 상기 기본적인 움직임 데이터는 글로벌 변위 시스템에서 루트(R)의 위치변수(X, Y, Z)의 3요소 및 루트(R)의 위치 방향 벡터의 3요소를 포함하는 시간열 데이터이다. 이러한 방법으로 제공된 데이터는 시간열에 필요한 프레임에 개수와 동일한 횟수 만큼 반복된다.
상기 클라이언트(PCC)의 프로세싱은 다시 도 3을 참조로 설명된다. 상기 골격구조열 수신부(32), 움직임열 수신부(33) 및 음열 수신부(34)는 상기 3-DCG 데이터열 전송부(2)로부터 전송된 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 각각 수신한다. 일반적으로, 상기 수신측에 배치된 컴퓨터(PCC)에 있어서, 상기 각각의 열을 수신하는데 필요한 복수의 프로세스(또는 스레드(threads))는 동시에 발생된다. 이러한 프로세스 및 상기 3-DCG 데이터열 송신부(1)의 송신측에 배치된 상태 제어기(15)(도 2)는 요청신호(Sr)에 의해 서로 통신하고, 임의의 시간에 각각의 열의 개수와 상태를 검사한다.
또한, 골격구조열 수신부(32), 움직임열 수신부(33) 및 음열 수신부(34)에 있어서, 상기 열의 버퍼링은 임의의 시간에 각각의 열을 수신하는 복수의 프로세스를 통하여 공통 메모리에서 임의의 시간에 실행된다. 이러한 버퍼된 열은 상기 데이터열(Ss, Sm 및 Sa)을 상기 열중에서 시간의 동기를 통하여 3차원 가상공간 발생부(4)로 전달한다. 그 동안, 상기 골격구조열은 일반적인 HTTP를 이용함으로써 네트워크를 통하여 예비적으로 전송되거나 이전에 기술된 바와 같이 국부기기상의 파일을 판독하는 CG형 데이터를 토대로 재생된다. 또한, 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)은 상기 언급된 골격구조열의 동기에 기호하여 실시간상에 3차원 가상공간 발생부(4)에 전달된다.
상기 3차원 가상공간 발생부(4)에 있어서, 상기 열을 토대로 서버(PCS)의 3- DCG 데이터열 송신부(1)에서 발생된 3-DCG는 상기 3-DCG 데이터열 수신부(3)로부터 입력된다. 즉, 상기 3차원 가상공간 발생부(4)는 3차원 가상공간을 재현하는 VRML 브라우져를 이용함으로써 3차원 가상공간을 재생한다. 상기 3차원 가상공간 발생부(4)로부터의 트리거에 응답하여, 상기 공통버퍼에 일시적으로 기억된 데이터열은 상기 버커로부터 상기 열 수신부(32, 33, 34)의 프로세스로 동시에 보낸다음, 상기 VRML에 의해 한정된 3차원 가상공간의 지정된 노드로 보낸다. 상기 VRML의 노드에 있어서, 3차원 형상, 객체 생성음 및 골격 조인트의 형상은 미리 지정되었다.
도 12 및 13은 VRML 버전 2.0의 표기법으로 기술된 3차원 전경을 도시한다. 도 12는 상기 VRML의 표현을 도시하고, 도 13은 이러한 표현에 해당하는 전경 구조를 도시한다. 도 13에 있어서, 원은 노드로 불리고, 형상으로써 인용된 상기 노드는 3차원 공간의 객체 존재에 해당한다. 그 동안, 변형(Transform)으로서 인용된 노드는 변환(Translation), 회전등에 해당한다. 또한, 상기 3차원 형상상의 계층정보는 괄호에 의해 분리된 내포 관련(nest relation)으로 표현된다. 도 12는 변환 및 회전에 따른 변수의 값이 변할 때, 상기 2개의 객체 형상이 변환되고 변수의 변환된 값에 따라 회전되는 일예를 도시한다.
시간열에 특정한 3차원 골격구조의 각 조인트에 대한 회전값을 변경하여, 도 3의 움직임열 수신부(33)에 의해 수신됨으로써, 상기 골격구조의 각 조인트에 대한 위치는 상기 언급된 기본배치에 따라서 변경된다. 즉, 상기 3차원 공간에서 인간 또는 이와 유사한 골격구조를 갖는 것은 상기 움직임 열의 데이터에 기초하여 실시간상에 이동된다. 상기 음열에 관하여, 상기 음원에 해당하는 객체 노드 형상은 도 13에 도시된 트리구조에 의해 3차원 전경으로 설정된다. 사용자의 트리거에 응답하여, 상기 음열은 도 3의 음열 수신부(34)로부터 상기 음원에 해당하는 노드형상(도 12 및 13)으로 전달된다. 상기 VRML의 센서 노드는 사용자의 트리거와 같이 일반적으로 이용된다. 일반적인 개인용 컴퓨터의 경우에 있어서, 상기 수신된 음 데이터는 이것이 재현되는 것과 동일하게 상기 음 발생부(5)에 전달된다. 상기 음 발생부(5)는 음재생, 음원용 디지털 신호처리기(DSP)에 의해 구성된다. Wav, Aiff, MIDI등은 일반적으로 음 데이터에 이용되지만, PCM 데이터는 음성과 같은데 이용될 수 있다. 내부시간이 일반적으로 3차원 가상공간 발생부(4)안에서 통제되기 때문에, 상기 움직임열 및 음열은 개시시간과 중지시간을 지시함으로써 서로 동기화될 수 있다.
도 14는 시간열에서 3차원 가상공간 발생부(4)안에 CG열의 재생을 도시한다. 상기 기술된 바와 같이, 상기 음열은 상기 음 발생부(5)에 의해 발생되어 개시시간(t0) 및 중지시간(t1)을 설정함으로써 재현된다. 상기 움직임열은 수신측의 개인용 컴퓨터의 성능 및 3차원 전경의 복잡성에 따라 변한다. 따라서, 움직임은 뒤로 지연하거나 음을 앞선다. 이러한 제거에 의하여, 음과 움직임을 동기화하기 위해서, 시간 스템프(TS)를 이용하는 경우, 상기 음 데이터열(Sa)의 시간 스템프(TS)의 위치에서 움직임의 재생과 음의 재생을 동기화하기 쉽다. 즉, 움직임의 재생이 시간 스템프(TS)에 해당하는 임의의 위치에서 소리의 재생뒤로 지연하는 것을 안다면, 상기 해당 시간 스템프(TS)의 위치까지 움직임의 차후 재생을 스킵하는 처리는 상기 3차원 가상공간 발생부(4)에서 실행된다. 그 동안, 움직임의 재생이 해당하는 시간 스템프(TS)의 위치에서 종료되는 경우, 음의 재생이 상기 해당하는 시간 스템프(TS)의 위치에서 종료될 때 까지 움직임의 재생을 반복하는 처리는 3차원 가상공간 발생부(4)에서 실행된다. 택일적으로, 복잡한 형태의 CG 데이터열을 도 14의 하부에 도시된 바와 같이 제공하고, 이 데이터열을 동기에 대하여 최소의 패킷으로 분할하는 경우, 음과 움직임은 상기 패킷사이에 동기화하여 재생될 수 있다.
도 1을 참조로 초기에 언급된 열 인가 수단의 기본동작은 아래에 간단하게 기술된다. 상기 열 인가 수단은 임의의 데이터 길이를 갖는 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 동기화 하는데 필요한 임의의 길이를 갖는 데이터 세크먼트로 분할하여 데이터열(Ss, Sm, Sa)을 도 4 및 5로 도시된 패킷으로 변환한다. 상기 골격 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 데이터 길이는 조인트의 개수와 자유도(degree of freedom)와 같은 조건에 따라 임의적으로 결정되고, 움직임의 기간 및 음의 발생시간에 의해 결정된다. 또한, 동기화에 필요한 시간 스템프(TS)상의 정보는 도 14에 도시된 바와 같이 각각의 열에 부가된다. 또한, 상기 열은 새로운 열을 형성하기 위해서 필요한 만큼 서로 접속될 수 있다. 따라서, 이렇게 편집된 열은 상기 서버(PCS)에 등록된다.
이후, 본 발명의 장치(100)의 동작은 도 15, 16, 및 17의 흐름도를 참조로 기술된다. 도 15는 상기 서버(PCS) 및 복수의 클라이언트(PCC)가 상기 장치(100)에 도 8에 도시된 바와 같이 서로 접속되는 이른바 멀티 네트웍크의 3차원 공간에 공유하는 것을 도시한다. 도 8에 있어서, 복수의 클라이언트(PCC2 내지 PCCn)가 단일 서버(PCS)에 접속되고 3차원 공간이 서버(PCS)와 클라이언트(PCC2 내지 PCCn)에 의해 공유될 때 상기 클라이언트(PCC1)를 상기 서버(PCS)에 새롭게 접속하는 경우를 설명한다. 단계(S1)에 있어서, 상기 클라이언트(PCC1)는 상기 서버(PCS)로부터 ID를 요구한다. 단계(S3)에서, 상기 서버(PCS)는 상기 ID를 상기 클라이언트(PCC1)로 발행한다. 이 시간에, 상기 클라이언트(PCC1)의 화신은 상기 클라이언트(PCC1) 및 서버(PCS)의 3차원 가상공간에 나타난다. 단계(S5)에서, 사용자가 상기 클라이언트(PCC1)에서 화신을 동작시켰는지 여부를 판단한다. 단계(S5)에서, 예의 경우에, 상기 프로그램 흐름은 단계(S7)로 진행한다. 단계(S5)에서 다른 결정을 하면 반복된다. 단계(S7)에서, 상기 사용자의 동작을 기초로 하는 상기 화신의 움직임 정보를 포함하는 움직임 데이터열(Sm)의 영상 수정 데이터(DM)는 상기 클라이언트(PCC1)의 3-DCG 데이터열 수신부(1)에 의해 발생되고, 상기 전송부(TR)를 거쳐 상기 서버(PCS)의 3-DCG 데이터열 송신부(1)에 송신된다. 그 동안, 상기 서버(PCS)는 사용자, 즉, 영상 수정 데이터(DM)와 함께 송신된 상기 ID에 기초한 클라이언트(PCC1)를 식별한다.
단계(S9)에서, 상기 클라이언트(PCC1)로부터 서버(PCS)로 송신된 영상 수정 데이터(DM 및 ID)는 상기 클라이언트(PCC2 내지 PCCn)중 한 클라이언트로 전달되어야 한다. 그 동안, 단계(S9)에서의 결정은 일반적으로 상기 클라이언트(PCC1)로부터의 요청신호(Sr)에 기초하여 이루어 지지만, 단계(S1)에서 상기 클라이언트(PCC1)로부터 서버(PCS)로 앞서 제공될 수 있다. 단계(S11)에서, 클라이언트(PCC2 내지 PCCn)중의 한 개의 클라이언트가 상기 영상 수정 데이터(DM)가 전달되어야 하는 서버(PCS)에 현재 접속되었는 지에 대한 문의를 상기 클라이언트(PCC1)에 물어보고, 이 문의에 대한 대답을 상기 클라이언트(PCC1)로부터 받는다. 그러나, 단계(S11)에서의 이러한 정보는 클라이언트(PCC)와 서버(PCS)에서 미리 결정하여 말할 필요성이 없다. 상기 클라이언트(PCC1)의 화신의 움직임 정보가 단계(S13)에서 영상 수정 데이터(DM)에 의해 단계(S11)에서 클라이언트(PCC1)에 의해 지정된 클라이언트로 송신된후, 상기 프로그램 흐름은 단계(S5)로 복귀하고, 단계(S5)로부터 단계(S13)로의 처리는 클라이언트(PCC1)가 네트워트를 떠날 때 까지 반복된다.
다음, 도 16을 언급함으로써, 장치(100)의 도 1에 도시된 바와 같이 상기 단일의 클라이언트(PCC1)를 상기 서버(PCS)에 접속하는 소위 단일 사용자 네트워크에서 3차원 가상공간 데이터의 송수신은 설명된다. 초기에, 단계(S21)에서, 3차원 가상공간을 나타내는 3-DCG 데이터열(DS)을 판독하는 객체는 결정된다. 예컨데, 상기 3-DCG 데이터열(DS)이 클라이언트(PCC1)에 존재하는 경우에, 아니오의 판단은 단계(S21)에서 이루어지고, 상기 프로그램 흐름은 단계(S23)로 진행한다. 단계(S23)에서, 상기 3-DCG 데이터열(DS)은 상기 클라이언트(PCC1)의 기억부(도시않됨)로부터 판독되어 상기 PCC1의 3차원 가상공간 발생부(4)에 제공됨으로써, 3차원 가상공간 영상은 발생된다. 다른한편, 단계(S21)에서 예의 경우에, 상기 프로그램 흐름은 단계(S25)로 진행한다. 단계(S25)에서, 상기 3-DCG 데이터열(DS1)은 상기 서버(PCS)의 기억부(도시 않됨)로부터 판독되어 상기 PCC1의 3차원 가상공간 발생부(4)에 제공됨으로써, 3차원 가상공간 영상은 발생된다. 상기 클라이언트(PCC1)는 단계(S27)에서 상기 서버(PCS)로부터 ID를 요청하고, 상기 서버(PCS)는 단계(S29)에서 상기 ID를 클라이언트(PCC1)로 발행한다.
단계(S31)에서, 상기 클라이언트(PCC1)가 상기 화신의 3-DCG 데이터열(DS)을 판독하는 객체를 판독한다. 예컨데, 상기 화신의 3-DCG 데이터열(DS)이 클라이언트(PCC1)에 존재하는 경우, 상기 클라이언트(PCC1)로부터의 요청신호(Sr)는 상기 화신의 3-DCG 데이터열(DS)이 상기 서버(PCS)로부터 판독되는 것을 요구하지 않는다. 그 결과, 아니오의 판단은 단계(S31)에서 이루어지고, 상기 프로그램 흐름은 단계(S33)로 진행한다. 단계(33)에서, 상기 화신의 3-DCG 데이터열(DS)은 상기 클라이언트(PCC1)의 기억부로부터 판독되어 상기 클라이언트(PCC1)의 3차원 가상공간 발생부(4)에 제공된다. 다음, 상기 화신의 영상은 이 화신의 3-DCG 데이터열을 토대로 3차원 가상공간에서 발생된다. 다른한편, 단계(S31)에서 예의 경우에, 상기 프로그램 흐름은 단계(S35)로 진행한다. 단계(S35)에서, 상기 화신의 골격 데이터열(Ss) 및 움직임 데이터열(Sm)은 상기 클라이언트(PCC1)로부터의 요청신호(Sr)를 기초로하여 필요한 만큼 인코딩(포멧 변환)을 통하여 상기 PCS에 의해 클라이언트(PCC1)로 송신한다. 단계(S37)에서, 상기 서버(PCS)로부터 전송된 화신의 골격 데이터열(Ss)(Ss1) 및 움직임 데이터열(Sm)(Sm1)은 상기 클라이언트(PCC1)에 의해 수신된다.
단계(S39)에서, 상기 클라이언트(PCC1)에 의해 수신된 골격 데이터열(Ss)(Ss1) 및 움직임 데이터열(Sm)(Sm1)이 디코딩(역 포맷변환)에 제공되는지 여부를 판단한다. 단계(S39)에서 아니오인 경우에, 상기 프로그램 흐름은 단계(S41)로 진행한다. 단계(S41)에서, 상기 골격 데이터열(Ss) 및 움직임 데이터열(Sm)은 상기 열변환기(31)에 의해 역 포맷 변환에 제공됨이 없이 골격구조 수신부(32) 및 움직임열 수신부(33)를 경유하여 3차원 가상공간 발생부(4)에 제공된다. 다른한편, 단계(S39)에서, 프로그램 흐름은 단계(S43)로 진행한다. 단계(S43)에서, 골격 데이터열(Ss1) 및 움직임 데이터열(Sm1)은 상기 열변환기(31)에 의해 상기 골격 데이터열(Ss) 및 움직임 데이터열(Sm)안으로 디코딩(역 포맷 변환)에 제공된 다음, 상기 골격 데이터열(Ss) 및 움직임 데이터열(Sm)은 상기 골격구조열 수신부(32) 및 움직임열 수신부(33)에 의해 미리 결정된 단위로 분할되어 3차원 가상공간 발생부(4)에 제공된다. 따라서, 상기 화신의 움직임 변환을 반영하는 3차원 가상공간 영상은 3차원 가상공간 발생부(4)에서 발생된다.
다음, 상기 클라이언트(PCC)의 3차원 가상공간 발생부(4)에 의해 3-DCG의 재현시간에 3-DCG의 동기처리는 도 17을 참조로 설명된다. 단계(51)에서, 내부클럭(타임 센서)은 3-DCG 전경을 그리는 것을 개시하는 명령의 확인에 응답하여 3차원 가상공간 발생부(4)에 의해 리셋된다. 즉, 상기 서버(PCS)로부터의 요청에 응답하여, 각각의 클라이언트(PCC)는 동시에 내부클럭(타임 센서)을 리셋한다. 단계(S53)에서, 사용자가 클라이언트(PCC1)에서 화신을 동작시키는지 여부를 판단한다. 단계(S53)에서 예인 경우, 상기 프로그램 흐름은 단계(S5)로 진행한다. 다른게, 단계(S53)에서의 판단은 반복된다. 단계(S55)에서, 상기 VRML 포맷으로 설명되는 골결 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)은 3차원 가상공간 발생부(4)의 최초의 메모리(도시 않됨)로부터 판독된다. 단계(S57)에서, 동기 재현이 필요한지 여부를 각 데이터열의 메인 헤더(MH)의 설명에 기초하여 판단된다. 단계(S57)에서, 아니오인 경우에, 상기 프로그램 흐름은 단계(S59)로 진행한다. 상기 내부클럭(타임 센서)에 의해 VRML에 지정된 시간에서, 단계(S59)에서 상기 움직임 데이터열(Sm)을 재생할 뿐만아니라 음 발생부(5)에 의해 음 데이터열(Sa)을 재생한다. 즉, 음 데이터 포맷이 3차원 가상공간 발생부(4)로부터 음 발생부(5)로 개시신호와 함께 보내질 때, 음 재생은 상기 음 재생부(5)에 의해 즉시 개시된다.
이와 반대로, 단계(S57)에서, 예의 경우에, 상기 프로그램 흐름은 단계(S61)로 진행한다. 단계(S61)에서, 상기 3-DCG 데이터열(DS)의 내용이 음 데이터열(Sa)인지 여부를 판단한다. 단계(S61)에서 예인 경우에, 상기 프로그램 흐름은 단계(S63)로 진행한다. 단계(S63)에서, 도 14에 도시된 시간 스템프(TS)상의 정보는 상기 음 발생부(5)에 의해 상기 3차원 가상공간 발생부(4)로 피이드백 된다. 다른 한편, 상기 3-DCG 데이터열(DS)의 내용이 CG 데이터인 경우에, 아니오의 판단은 단계(S61)에서 이루어지고, 상기 프로그램 흐름은 단계(S65)로 진행한다. 단계(S65)에서, 상기 음 발생부(5)로부터 피이드백된 시간 스템프(TS)상의 정보는 동기신호와 같이 3차원 가상공간 발생부(4)로 입력되거나, 음 패킷의 경우에, 상기 종료신호는 동기신호와 같이 3차원 가상공간 발생부(4)에 입력된다. 단계(S67)에서, 상기 언급된 시간 스템프(TS)를 토대로, CG 데이터의 판독이 종료되었는지 여부를 판단한다. 단계(S67)에서 예인 경우에, 상기 프로그램 흐름은 단계(S69)로 흐른다. 단계(S69)에서, CG의 재생은 즉시 중단되고, 상기 프로그램 흐름은 단계(S71)로 진행한다. 그 동안, CG의 재현 타이밍은 상기 VRML의 내부 클럭(시간 센서)에 의해 조정된다. 단계(S71)에서, CG를 더욱 그리고 재현하는 3-DCG 데이터열(DS)이 상기 서버(PCS)로부터 3차원 가상공간 발생부(4)로 입력되는지 여부를 판단한다. 단계(S71)에서 예의 경우에, 상기 프로그램 흐름은 단계(S51)로 복귀한다. 다른 방법으로, 단계(S71)에서 판단은 반복적으로 이루어진다. 다른 한편, 단계(S67)에서 아니오의 경우에, 상기 프로그램 흐름은 단계(S73)로 진행한다. 단계(S73)에서, CG의 재생은 동기화 시간이 다음 시간 스템프(TS)에 의해 지시될 때 까지 연장되고, 그 프로그램 흐름은 단계(S71)로 진행한다. 따라서, 상기 재생 스템프는 서로 동기화 될 수 있다.
본 발명에 따라 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법은 도 15내지 도 17의 흐름도에 언급된 단계로 이루어지고, 컴퓨터가 본 발명의 방법을 실행하는 프로그램은 컴퓨터에 의해 판독가능한 기억매체에 기억될 수 있다. 이것을 종료하기 위해서, 인터넷과 접속가능한 개인용 컴퓨터(PC) 및 개인용 컴퓨터에 의해 판독가능한 플로피 디스크(FD)는 도 18에 도시된 바와 같이 각각 컴퓨터와 기억매체로써 이용될 수 있다.
그 동안, 지금까지 주어진 설명에 있어서, 본 발명은 인터넷의 양방향 통신에 적용되지만, 송신 시스템을 인터넷과 함께 이용할 때 위성 방송 시스템, 지상파 방송 시스템과 같은 송신 시스템에 유사하게 적용할 수 있다.
앞서 설명한 본 발명으로부터 명백해진 바와 같이, 인간 골격구조와 같은 골격구조의 형상 데이터는 형상 데이터열과 같이 전송되고, 상기 골격의 기본적인 움직임은 움직임 데이터열과 같이 전달되고, 상기 골격구조의 움직임을 수반하는 음데이터는 각 데이터열의 동기화 및 압축상의 정보 및 상기 데이터열에 해당하는 정보와 함께 음 데이터열로써 전송된다.
본 발명에 따라서, 상기 네트워크를 토대로 송수신 시스템에서 캐릭터의 부드러운 움직임 및 이러한 움직임으로 동기화한 음 정보는 사용자의 요청으로 송수신될 수 있고, 전송될 데이터 량을 크게 줄일 수 있다.

Claims (19)

  1. 3차원 가상공간을 나타내는 데이터열을 송수신하는 장치(100)에 있어서,
    송신부(PCS);
    수신부(PCC);
    양 방향으로 상기 송신부(PCS)와 수신부(PCC)를 접속하는 전송부(TR, 2)를 포함하고,
    3-DCG에서 골격구조의 형상과 움직임을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)은 상기 송신부(PCS)로부터 상기 수신부(PCC)로 송신됨으로써, 상기 수신부(PCC)는 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 동기시켜 상기 3-DCG를 발생하는데,
    상기 송신부(PCS)는
    상기 수신부(PCC)로부터의 요청(Sr)에 응답하여 실시간상에, 미리 결정된 데이터열의 포맷에 따라서 복수의 열(Ss1, Sm1, Sa1;DS1)과 같이 상기 형상 데이터열(Sa), 움직임 데이터열(Sm) 및 상기 움직임 데이터열(Sm)로 동기한 음 데이터열(Sa)을 동시에 송신함으로써, 상기 전송수단(TR, 2)이 상기 송신부(PCS)로부터 수신부(PCC)로 상기 열(Ss1, Sm1, Sa1;DS1)을 대화식으로 전송하는 송신수단(1)을 구비하고,
    상기 수신부(PCC)는
    상기 전송수단(TR)을 경유하여 상기 송신부(PCS)로부터 송신된 상기 열(DS1)을 수신하여 이 수신된 열(DS1)의 종류와 포맷(VRML)을 판별하고, 실시간을 기초로 필요한 열(Sm1, Sa1)을 수신하여 상기 판별된 열을 상기 열(Sm1, Sa1)에 필요한 복구 처리(restoration processings)에 제공하는 데이터열 수신수단(3);
    상기 수신부(PCC)에서 수신한 열(DS1)중에서 형상열(Ss1) 또는 미리 판독된 3차원 형상 데이터(DS1, DS)를 이용하여 상기 3차원 가상공간안에 골격구조의 형상을 발생하거나 3차원 가상공간을 발생하고, 상기 열(DS1)의 움직임 열(Sm1)을 이용하여 상기 골격구조의 형상을 움직이는 3차원 가상공간 발생수단(4); 및
    상기 열(DS1)이 음열(Sa1)을 포함하는 경우에, 상기 움직임열(Sm1)로 동기한 음열(Sa1)을 재생하는 음 발생수단(5)을 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  2. 제1항에 있어서,
    상기 송신부(PCS)는 상기 전송수단(TR, 2)을 경유하여 복수의 수신부(PCCn)에 접속되고,
    상기 3차원 가상공간 발생수단(4)은 상기 수신부(PCCn)중에서 한 개의 수신부로부터의 요청에 응답하여 송신될 데이터의 종류와 구간을 지정해서, 상기 데이터열 수신수단(3)에서 복구된 데이터열(DS)에서, 상기 지정된 데이터를 관리하며,
    상기 장치(100)는
    상기 관리된 데이터를 상기 수신부(PCCn)중 한 개의 수신부로 송신을 설정해서, 상기 송신부(PCS, 1)가 상기 요청(Sr)에 응답하여 상기 수신부(PCCn)중에 한 개의 수신부로 상기 관리된 데이터를 전송하는 수단(1)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  3. 제1항에 있어서,
    상기 송신수단(1)은 상기 송신될 각 데이터열(DS)에서 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별함으로써 한 개의 데이터열(DS)이상으로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 압축 또는 분할하여 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)용 판별수단(ID, MH)과 함께 상기 열(DSI)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 한 개의 열(DS1) 이상으로 상기 열(DS1)을 복구하고 상기 판별수단(ID, MH)을 토대로 상기 분할단위(패킷)로 서로 동시에 결합함으로써 상기 최초의 데이터열을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고,
    상기 장치(100)는 상기 판별수단(ID, MH)을 토대로 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 재생하는 수단(3)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  4. 제2항에 있어서,
    상기 송신수단(1)은 상기 각 데이터열(DS)에서 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 송신함으로써 한 개의 데이터열(DS)이상으로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 압축 또는 분할하여 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)용 판별수단(ID, MH)과 함께 상기 열(DSI)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 한 개의 열(DS1) 이상으로 상기 열(DS1)을 복구하고 상기 판별수단(ID, MH)을 토대로 상기 분할단위(패킷)로 서로 동시에 결합함으로써 상기 최초의 데이터열을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고,
    상기 장치(100)는 상기 판별수단(ID, MH)을 토대로 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 재생하는 수단(3)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  5. 제1항에 있어서,
    상기 송신수단(1)은 상기 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 송신함으로써, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조건, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 상기 움직임에 대해 최초의 데이터열을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하며,
    상기 장치(100)는
    복수의 움직임에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 수단(4)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  6. 제2항에 있어서,
    상기 송신수단(1)은 상기 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 송신함으로써, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조건, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 상기 복수의 움직임에 대한 최초의 데이터열(DS)을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하며,
    상기 장치(100)는
    복수의 움직임에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 수단(4)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  7. 제1항에 있어서,
    상기 송신수단(1)은 상기 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 송신함으로써, 복수의 움직임과 음에 대하여, 이 움직임과 음의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH) 및 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화 정보와 함께 상기 열(DS1)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임과 음에 대한 본래의 데이터열(DS)을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하며,
    상기 장치(100)는
    복수의 움직임과 음에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 수단(4); 및
    서로 동기시킨 음 데이터열(Sa) 및 움직임 데이터열(Sm)을 동시에 재생하는 수단(4)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  8. 제2항에 있어서,
    상기 송신수단(1)은 상기 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 송신함으로써, 복수의 움직임과 음에 대하여, 이 움직임과 음의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH) 및 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화 정보와 함께 상기 열(DS1)을 송신하는 수단(14)을 포함하고,
    상기 데이터열 수신수단(3)은 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임과 음에 대한 본래의 데이터열(DS)을 복구하는 수단(31)을 포함하고,
    상기 3차원 가상공간 발생수단(4)은 상기 각각의 복구된 데이터열(DS)로부터형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하며,
    상기 장치(100)는
    복수의 움직임과 음에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 수단(4) ;및
    서로 동기시킨 음 데이터열(Sa) 및 움직임 데이터열(Sm)을 동시에 재생하는 수단(4)을 더 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신장치.
  9. 3-DCG에서 골격구조의 형상과 움직임 및 이 움직임으로 동기한 음성을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 송신부(PCS)로부터 수신부(PCC)로 각각 송신함으로써 상기 수신부(PCC)가 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기를 통하여 상기 3-DCG를 발생하는 3차원 가상공간을 나타내는 데이터열 송수신방법에 있어서,
    상기 수신부(PCC)로부터의 응답을 기초로 실시간상에, 미리 결정된 데이터열(DS)의 포맷에 따라 복수의 열(Ss1, Sm1, Sa1;DS1)과 같이 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 상기 움직임 데이터열(Sm)로 동기한 음 데이터열(Sa)을 동시에 송신하는 제1단계(S35);
    상기 송신부(PCS)로부터 상기 수신부(PCC)로 상기 열(Ss1, Sm1, Sa1;DS1)을 전송하기 위하여 양방향으로 상기 송신부(PCS)와 수신부(PCC)를 접속하는 제2단계(S21-S37);
    상기 송신된 열을 수신하여 상기 수신된 열(DS1)의 종류와 포맷(VRML)을 판별하고, 실시간을 기초로 상기 열(Sm1, Sa1)을 수신하여 상기 판별된 열(Sm1, Sa1)을 상기 열(Sm1, Sa1)에 대한 복구처리를 행하는 제3단계(S39, S41, S43);
    상기 수신부(PCC)에서 수신한 열(DS1)중에서 형상열(Ss1) 또는 미리 판독된 3차원 형상 데이터(DS1, DS)를 이용하여 상기 3차원 가상공간안에 골격구조의 형상을 발생하거나 3차원 가상공간을 발생하고, 상기 열(DS1)의 움직임 열(Sm1)을 이용하여 상기 골격구조의 형상을 이동하는 제4단계(S51-S73); 및
    상기 열(DS1)이 음열(Sa1)을 포함하는 경우에, 상기 움직임열(Sm1)과 동기한 음열(Sa1)을 재생하는 제5단계(S61, S63)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  10. 제9항에 있어서,
    상기 제4단계(S51-S73)는 상기 제1단계(S35)에 접속된 복수의 수신부(PCCn)로부터의 요청(Sr)에 응답하여, 상기 제3단계(S39, S41, S43)에 의해 복구된 데이터열(DS)에 송신될 데이터의 종류와 구간을 지정하고, 이 지정된 데이터를 관리하고 상기 수신부(PCCn)중의 한 개로 상기 관리된 데이터의 송신을 설정함으로써 상기 송신부(PCS)가 상기 요청(Sr)에 응답하여 상기 수신부(PCCn)중의 한 개로 상기 관리된 데이터를 전송하는 단계(S35)를 구비하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  11. 제9항에 있어서,
    상기 제1단계(S35)는 송신될 상기 각각의 데이터열(DS)로부터 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 상기 데이터열(DS)을 한 개 이상의 데이터열(DS)로 설정하고, 이 데이터열(DS)을 미리 결정된 분할단위(패킷)로 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 한 개의 열(DS1)이상으로 상기 열(DS1)을 복구하고 상기 판별수단(ID, MH)을 토대로 상기 분할단위(패킷)로 서로 동시에 결합함으로써 상기 최초의 데이터열을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 상기 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 상기 판별수단(ID, MH)을 토대로 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 재생하는 단계(59)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  12. 제10항에 있어서,
    상기 제1단계(S35)는 송신될 상기 각각의 데이터열(DS)로부터 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하여 상기 데이터열(DS)을 한 개 이상의 데이터열(DS)로 설정하고, 이 데이터열(DS)을 미리 결정된 분할단위(패킷)로 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 한 개의 열(DS1)이상으로 상기 열(DS1)을 복구하고 상기 판별수단(ID, MH)을 토대로 상기 분할단위(패킷)로 서로 동시에 결합함으로써 상기 최초의 데이터열을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 상기 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 상기 판별수단(ID, MH)을 토대로 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 재생하는 단계(59)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  13. 제9항에 있어서,
    상기 제1단계(S35)는 상기 송신될 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별함으로써, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임에 대한 최초의 데이터열(DS)을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 단계(S41)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  14. 제10항에 있어서,
    상기 제1단계(S35)는 상기 송신될 각각의 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별함으로써, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH)과 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조건, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임에 대한 최초의 데이터열(DS)을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 복수의 움직임에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 단계(S41)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  15. 제9항에 있어서,
    상기 제1단계(S35)는 상기 각각의 송신될 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별함으로써, 복수의 움직임과 음에 대하여, 이 움직임과 음의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH) 및 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화 정보와 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임과 음에 대한 본래의 데이터열(DS)을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 상기 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 복수의 움직임과 음에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 단계(S59) 및 서로 동기시킨 음 데이터열(Sa) 및 움직임 데이터열(Sm)을 동시에 재생하는 단계(S59)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  16. 제10항에 있어서,
    상기 제1단계(S35)는 상기 각각의 송신될 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별함으로써, 복수의 움직임과 음에 대하여, 이 움직임과 음의 종류와 조합, 대응하는 3차원 골격구조의 형상 및 재생조건과 함께 한 개 이상의 데이터열로 상기 데이터열(DS)을 설정하고, 상기 데이터열(DS)을 미리 결정된 분할단위(패킷)로 상기 데이터열(DS)을 압축 또는 분할하여 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)에 대한 판별수단(ID, MH) 및 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화 정보와 함께 상기 열(DS1)을 송신하는 단계(S35)를 포함하고,
    상기 제3단계(S39, S41, S43)는 상기 각각의 송신된 열(DS1)로부터 형상열(Ss1), 움직임열(Sm1) 및 음열(Sa1)을 판별하고, 상기 열(DS1)을 한 개 이상의 열(DS1)로 복구하고 상기 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형태 및 재생조건에 기초하여 서로 상기 분할 단위(패킷)로 동시에 결합함으로써 복수의 움직임과 음에 대한 본래의 데이터열(DS)을 복구하는 단계(S43)를 포함하고,
    상기 제4단계(S51-S73)는 상기 각각의 복구된 데이터열(DS)로부터 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 판별하고, 복수의 움직임과 음에 대하여, 이 움직임의 종류와 조합, 해당하는 3차원 골격구조의 형상 및 재생조건을 토대로 지정된 골격구조의 형상 움직임을 재생하는 단계(S59) 및 서로 동기시킨 음 데이터열(Sa) 및 움직임 데이터열(Sm)을 동시에 재생하는 단계(S59)를 포함하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열 송수신방법.
  17. 인터넷과 접속하여 컴퓨터로 판독할 수 있는 기억매체(FD)에 있어서, 3-DCG의 골격구조에 대한 형상과 움직임 및 이 움직임으로 동기한 음성을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)이 송신부(PCS)로부터 수신부(PCC)로 각각 송신되어 상기 수신부(PCC)가 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기로 3-DCG를 발생하는 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법을 컴퓨터가 실행하는 프로그램을 기억하는 방법에 있어서,
    상기 수신부(PCC)로부터의 요청에 응답하여 실시간상에, 미리 결정된 데이터열(DS)의 포맷에 따라 복수의 열(Ss1, Sm1, Sa1;DS1)과 같이 상기 움직임 데이터열(Sm)로 동기한 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)을 동시에 송신하는 제1단계(S35);
    상기 송신부(PCS)로부터 상기 수신부(PCC)로 상기 열(Ss1, Sm1, Sa1;DS1)을 전송하기 위하여 양방향으로 상기 송신부(PCS)와 수신부(PCC)를 접속하는 제2단계(S21-S37);
    상기 전송된 열을 수신하여 상기 수신된 열(DS1)의 종류와 포맷(VRML)을 판별하고, 실시간을 기초로 상기 열(Sm1, Sa1)을 수신하여 상기 판별된 열(Sm1, Sa1)을 상기 열(Sm1, Sa1)에 대한 복구처리를 행하는 제3단계(S39, S41, S43);
    상기 수신부(PCC)에서 수신한 열(DS1)중에서 형상열(Ss1) 또는 미리 판독된 3차원 형상 데이터(DS1, DS)를 이용하여 상기 3차원 가상공간안에 골격구조의 형상을 발생하거나 3차원 가상공간을 발생하고, 상기 열(DS1)의 움직임 열(Sm1)을 이용하여 상기 골격구조의 형상을 이동하는 제4단계(S51-S73); 및
    상기 열(DS1)이 음열(Sa1)을 포함하는 경우에, 상기 움직임열(Sm1)과 동기한 음열(Sa1)을 재생하는 제5단계(S61, S63)를 포함하는 것을 특징으로 하는 컴퓨터가 실행하는 프로그램을 기억하는 방법.
  18. 3차원 가상공간을 나타내는 데이터열을 송수신하고, 양방향으로 송신부(PCS)와 수신부(PCC)를 접속하는 전송부(TR, 2) 및 수신부(PCC)를 포함하는 장치(100)에 이용하는 전송부(PCS)에 있어서,
    3-DCG의 골격구조에 대한 형상과 움직임 및 이 움직임으로 동기한 음성을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)이 상기 송신부(PCS)로부터 수신부(PCC)로 전송되어 상기 수신부(PCC)가 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화로 상기 3-DCG를 발생하고,
    상기 송신부(PCS)는
    상기 수신부(PCC)로부터의 요청(Sr)에 응답하여 실시간상에, 미리 결정된 데이터열의 포맷에 따라서 복수의 열(Ss1, Sm1, Sa1;DS1)과 같이 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 상기 움직임 데이터열(Sm)로 동기한 음 데이터열(Sa)을 동시에 송신함으로써, 상기 전송수단(TR2)이 상기 송신부(PCS)로부터 수신부(PCC)로 상기 열(Ss1, Sm1, Sa1;DS1)을 대화식으로 전송하는 송신수단(1)을 구비하는 것을 특징으로 하는 컴퓨터가 실행하는 프로그램을 기억하는 방법.
  19. 3차원 가상공간을 나타내는 데이터열을 송수신하고, 양방향으로 송신부(PCS)와 수신부(PCC)를 접속하는 전송부(TR, 2) 및 송신부(PCS)를 포함하는 장치(100)에 이용하는 수신부(PCC)에 있어서,
    3-DCG의 골격구조에 대한 형상과 움직임 및 이 움직임으로 동기한 음성을 나타내는 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 음 데이터열(Sa)이 상기 송신부(PCS)로부터 수신부(PCC)로 전송되어 상기 수신부(PCC)가 상기 움직임 데이터열(Sm) 및 음 데이터열(Sa)의 동기화로 상기 3-DCG를 발생하고,
    상기 송신부(PCS)는
    상기 수신부(PCC)로부터의 요청(Sr)에 응답하여 실시간상에, 미리 결정된 데이터열(DS)의 포맷(VRF)에 따라서 복수의 열(Ss1, Sm1, Sa1;DS1)로 동기한 상기 형상 데이터열(Ss), 움직임 데이터열(Sm) 및 상기 움직임 데이터열(Sm)로 동기한 음 데이터열(Sa)을 동시에 송신함으로써, 상기 전송수단(TR, 2)이 상기 송신부(PCS)로부터 수신부(PCC)로 상기 열(Ss1, Sm1, Sa1;DS1)을 대화식으로 전송하고,
    싱기 수신부(PCC)는
    상기 전송수단(TR)을 경유하여 상기 송신부(PCS)로부터 송신된 상기 열(DS1)을 수신하여 이 수신된 열(DS1)의 종류와 포맷(VRML)을 판별하고, 실시간을 기초로 필요한 열(Sm1, Sa1)을 수신하여 상기 판별된 열을 상기 열(Sm1, Sa1)에 필요한 복구 처리(restoration processings)에 제공하는 데이터열 수신수단(3);
    상기 수신부(PCC)에서 수신한 열(DS1)중에서 형상열(Ss1) 또는 미리 판독된 3차원 형상 데이터(DS1, DS)를 이용하여 상기 3차원 가상공간안에 골격구조의 형상을 발생하거나 3차원 가상공간을 발생하고, 상기 열(DS1)의 움직임 열(Sm1)을 이용하여 상기 골격구조의 형상을 움직이는 3차원 가상공간 발생수단(4); 및
    상기 열(DS1)이 음열(Sa1)을 포함하는 경우에, 상기 움직임열(Sm1)로 동기한 음열(Sa1)을 재생하는 음 발생수단(5)을 구비하는 것을 특징으로 하는 3차원 가상공간을 나타내는 데이터열을 송수신하는 장치의 수신부.
KR1019980030325A 1997-07-31 1998-07-28 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치 KR100294372B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP97-205857 1997-07-31
JP20585797 1997-07-31

Publications (2)

Publication Number Publication Date
KR19990014233A true KR19990014233A (ko) 1999-02-25
KR100294372B1 KR100294372B1 (ko) 2001-07-12

Family

ID=16513870

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019980030325A KR100294372B1 (ko) 1997-07-31 1998-07-28 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치

Country Status (5)

Country Link
US (1) US6512520B1 (ko)
EP (1) EP0899924B1 (ko)
KR (1) KR100294372B1 (ko)
CN (1) CN1310517C (ko)
DE (1) DE69837868T2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100914636B1 (ko) * 2001-05-29 2009-08-28 코닌클리케 필립스 일렉트로닉스 엔.브이. 비주얼 통신 신호를 전송하기 위한 방법, 비주얼 통신 신호를 전송하기 위한 송신기 및 비주얼 통신 신호를 수신하기 위한 수신기

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9721664D0 (en) * 1997-10-14 1997-12-10 Philips Electronics Nv Data management within a virtual environment browser
EP0973129A3 (en) * 1998-07-17 2005-01-12 Matsushita Electric Industrial Co., Ltd. Motion image data compression system
US7007295B1 (en) * 1998-12-24 2006-02-28 B3D, Inc. System and method for Internet streaming of 3D animated content
US6559845B1 (en) 1999-06-11 2003-05-06 Pulse Entertainment Three dimensional animation system and method
JP4011327B2 (ja) * 2000-11-15 2007-11-21 株式会社レクサー・リサーチ 表示オブジェクト提供装置、表示オブジェクト提供方式及び表示オブジェクト提供プログラム
JP2005507098A (ja) * 2001-03-21 2005-03-10 リサーチ イン モーション リミテッド コンテンツをメディアデバイスに提供するための方法および装置
WO2002076058A2 (en) 2001-03-21 2002-09-26 Research In Motion Limited Method and apparatus for providing content to media devices
US20040110490A1 (en) 2001-12-20 2004-06-10 Steele Jay D. Method and apparatus for providing content to media devices
EP1345179A3 (en) * 2002-03-13 2004-01-21 Matsushita Electric Industrial Co., Ltd. Method and apparatus for computer graphics animation
US7015826B1 (en) 2002-04-02 2006-03-21 Digital Angel Corporation Method and apparatus for sensing and transmitting a body characteristic of a host
JP4218336B2 (ja) * 2002-12-12 2009-02-04 ソニー株式会社 情報処理システム、サービス提供装置および方法、情報処理装置および方法、並びにプログラム
US8140698B2 (en) 2003-04-30 2012-03-20 International Business Machines Corporation Method and system for efficient data transmission in interactive networked environments
JP4559092B2 (ja) * 2004-01-30 2010-10-06 株式会社エヌ・ティ・ティ・ドコモ 携帯通信端末及びプログラム
KR20090002292A (ko) * 2007-06-26 2009-01-09 삼성전자주식회사 가상 캐릭터를 동기화하고 공유하는 장치 및 방법
US7809789B2 (en) * 2007-10-25 2010-10-05 Brian Mark Shuster Multi-user animation coupled to bulletin board
JP2010044736A (ja) * 2008-07-18 2010-02-25 Panasonic Electric Works Co Ltd 製品設計評価装置
KR20100073168A (ko) * 2008-12-22 2010-07-01 한국전자통신연구원 합성데이터 송/수신 장치 및 방법
JP2011039647A (ja) * 2009-08-07 2011-02-24 Sony Corp 情報提供装置および方法、端末装置および情報処理方法、並びにプログラム
ES2390298B1 (es) * 2010-04-16 2013-11-11 Telefónica, S.A. Procedimiento de transmisión de contenido visual.
US8943396B2 (en) 2011-07-18 2015-01-27 At&T Intellectual Property I, Lp Method and apparatus for multi-experience adaptation of media content
US9084001B2 (en) 2011-07-18 2015-07-14 At&T Intellectual Property I, Lp Method and apparatus for multi-experience metadata translation of media content with metadata
US9237362B2 (en) * 2011-08-11 2016-01-12 At&T Intellectual Property I, Lp Method and apparatus for multi-experience translation of media content with sensor sharing
US10628186B2 (en) 2014-09-08 2020-04-21 Wirepath Home Systems, Llc Method for electronic device virtualization and management

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07312750A (ja) * 1994-05-18 1995-11-28 Nippon Telegr & Teleph Corp <Ntt> 動画通信装置
WO1996012424A1 (en) * 1994-10-25 1996-05-02 Ronda Europa S.P.A. Multipurpose drawer for commercial furniture
US5793980A (en) * 1994-11-30 1998-08-11 Realnetworks, Inc. Audio-on-demand communication system
JPH08331562A (ja) * 1995-05-31 1996-12-13 Kokusai Electric Co Ltd 画像通信方式
JPH0984021A (ja) * 1995-09-19 1997-03-28 Nec Corp 画像データ転送システム
US6219045B1 (en) * 1995-11-13 2001-04-17 Worlds, Inc. Scalable virtual world chat client-server system
JP3337938B2 (ja) 1996-04-25 2002-10-28 松下電器産業株式会社 ３次元骨格構造の動き送受信装置、および動き送受信方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100914636B1 (ko) * 2001-05-29 2009-08-28 코닌클리케 필립스 일렉트로닉스 엔.브이. 비주얼 통신 신호를 전송하기 위한 방법, 비주얼 통신 신호를 전송하기 위한 송신기 및 비주얼 통신 신호를 수신하기 위한 수신기

Also Published As

Publication number Publication date
US6512520B1 (en) 2003-01-28
EP0899924A3 (en) 2005-08-03
KR100294372B1 (ko) 2001-07-12
CN1218241A (zh) 1999-06-02
CN1310517C (zh) 2007-04-11
DE69837868D1 (de) 2007-07-19
EP0899924A2 (en) 1999-03-03
EP0899924B1 (en) 2007-06-06
DE69837868T2 (de) 2008-02-07

Similar Documents

Publication Publication Date Title
KR100294372B1 (ko) 3차원 가상공간을 나타내는 데이터열을 송수신하는 방법 및 장치
US6961060B1 (en) Virtual space control data receiving apparatus,virtual space control data transmission and reception system, virtual space control data receiving method, and virtual space control data receiving program storage media
Doenges et al. MPEG-4: Audio/video and synthetic graphics/audio for mixed media
JP3566909B2 (ja) 三次元アニメーションシステム及び方法
US6697869B1 (en) Emulation of streaming over the internet in a broadcast application
US6222560B1 (en) Transmitter-receiver of three-dimensional skeleton structure motions and method thereof
US20010056575A1 (en) Method of relaying digital video &amp; audio data via a communications medium
JP3337938B2 (ja) ３次元骨格構造の動き送受信装置、および動き送受信方法
US6757432B2 (en) Apparatus for transmitting and/or receiving stream data and method for producing the same
JP2003069965A (ja) Ｂｉｆｓテキストフォーマットをｂｉｆｓバイナリフォーマットに変換するための装置
JP5160704B2 (ja) 放送においてインターネットを介してストリーミングをエミュレーションするリアルタイム・ビデオゲーム
US6753863B1 (en) System and method for streaming real time animation data file
JP3338382B2 (ja) ３次元仮想空間を表すデータストリームを送受信する装置及び方法
Naka et al. A compression/decompression method for streaming based humanoid animation
JPH10222698A (ja) ３次元仮想空間の通信装置、および通信方法
Matsuba et al. " Bottom, thou art translated": the making of VRML Dream
KR100317299B1 (ko) Ｍｐｅｇ-４ 화상회의를 위한 멀티미디어 정보구조와ｍｐｅｇ-４ 화상회의 시스템
Di Giacomo et al. Adaptation of virtual human animation and representation for MPEG
JP3428513B2 (ja) 多次元ストリームデータを用いた、送信装置、送信方法、受信装置、受信方法および通信システム
KR20000037456A (ko) 컴퓨터 네트워크를 통한 캐릭터 애니메이션 구현 방법 및시스템
Lin et al. A low bit-rate web-enabled synthetic head with speech-driven facial animation
JP2004086592A (ja) 動画像生成方法および動画像生成プログラム
JP2000348194A (ja) 仮想空間制御データ受信装置、仮想空間制御データ送受信システム、仮想空間制御データ受信方法、および仮想空間制御データ受信プログラム記録媒体
Shahabi et al. Media Immersion Environment (MIE)
Kitson Multimedia, visual computing, and the information superhighway

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]
FPAY Annual fee payment

Payment date: 20090410

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee