KR20080109055A - 통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체 - Google Patents

통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체 Download PDF

Info

Publication number
KR20080109055A
KR20080109055A KR1020087026601A KR20087026601A KR20080109055A KR 20080109055 A KR20080109055 A KR 20080109055A KR 1020087026601 A KR1020087026601 A KR 1020087026601A KR 20087026601 A KR20087026601 A KR 20087026601A KR 20080109055 A KR20080109055 A KR 20080109055A
Authority
KR
South Korea
Prior art keywords
communication
image
client device
chat
user
Prior art date
Application number
KR1020087026601A
Other languages
English (en)
Other versions
KR101001029B1 (ko
Inventor
마사히로 후지하라
Original Assignee
소니 컴퓨터 엔터테인먼트 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 컴퓨터 엔터테인먼트 인코포레이티드 filed Critical 소니 컴퓨터 엔터테인먼트 인코포레이티드
Publication of KR20080109055A publication Critical patent/KR20080109055A/ko
Application granted granted Critical
Publication of KR101001029B1 publication Critical patent/KR101001029B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148—Interfacing a video terminal to a particular transmission medium, e.g. ISDN
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/185—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast with management of multicast group membership

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

인터넷(30)에 접속되어 소정의 통신 그룹에 속하는 복수의 클라이언트 장치(1)는 비디오 카메라(11)에 의해 촬상된 영상에 따른 영상 데이터 및 마이크로폰(12)에 의해 입력된 음성에 따른 음성 데이터를 서로 송수신한다. 복수의 클라이언트 장치(1) 중 1개는 상기 통신 그룹에 속하는 클라이언트 장치(1)의 수를 판별하여 판별한 수에 따라 영상 데이터의 송신 품질을 결정한다. 상기 통신 그룹에 속하는 복수의 클라이언트 장치(1)는 상기 송신 품질에 따라 영상 데이터를 송신한다.
클라이언트 장치, 영상 데이터, 음성 데이터, 송신 품질

Description

통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체{COMMUNICATION SYSTEM, COMMUNICATION APPARATUS, COMMUNICATION PROGRAM AND COMPUTER READABLE STORAGE MEDIUM WITH COMMUNICATION PROGRAM STORED THEREIN}
본 발명은 복수의 통신 장치간에 영상 데이터 및 음성 데이터를 송수신하는 통신 시스템에 이용하기에 적합한 기술에 관한 것이다.
종래로부터 네트워크에 접속되는 복수의 원격회의 장치에 있어서, 음성 데이터와 영상 데이터를 실시간으로 쌍방향으로 송수신하는 원격회의 시스템이 있다(예를 들면, 특허문헌 1). 이러한 시스템에서는 유저는 실시간으로 다른 유저의 영상을 보면서 대화할 수 있으며 원격으로 회의에 참가할 수 있다.
[특허문헌 1] 일본국 공개특허공보 2001-57672호
그러나 이러한 시스템에서는 회의에 참가하는 인원수가 늘어날 때마다 송수신되는 데이터의 전송량이 증가할 가능성이 있다. 이로 인해, 데이터의 전송 효율이 저하될 우려가 있다. 이 결과, 영상을 원활하게 표시할 수 없어 유저의 편리성을 손상시킬 우려가 있다.
따라서 본 발명은 상술한 과제를 감안하여 이루어진 것으로서, 복수의 통신 장치간에서 영상 데이터 및 음성 데이터를 송수신하는 통신 시스템에 있어서, 서로 데이터를 송수신하는 통신 장치의 수가 증가하더라도 전송 효율의 저하를 억제하는 것이 가능한 통신 시스템을 제공하는 것을 목적으로 한다.
본 발명은 네트워크에 접속되는 복수의 통신 장치에 의해 형성된 소정의 통신 그룹에 속하는 1개의 통신 장치가, 촬상 수단에 의해 촬상된 영상에 따른 영상 데이터 및 음성입력 수단에 의해 입력된 음성에 따른 음성 데이터를 상기 통신 그룹에 속하는 다른 통신 장치에 송신하는 동시에, 상기 다른 통신 장치로부터 송신된 영상 데이터 및 음성 데이터를 수신하여 상기 영상 데이터에 의해 표시되는 영상을 표시 수단에 표시시키는 동시에, 음성 데이터에 의해 나타내지는 음성을 음성출력 수단에 출력시키는 통신 시스템에 있어서, 상기 통신 그룹에 속하는 통신 장치의 수를 판별하는 판별 수단과, 상기 판별 수단이 판별한 수에 따라 상기 영상 데이터의 송신 품질을 결정하는 결정 수단을 구비하고, 상기 복수의 통신 장치는 상기 결정 수단이 결정한 송신 품질에 따라 상기 영상 데이터를 송신하는 것을 특징으로 하는 통신 시스템을 제공한다.
<발명의 효과>
본 발명에 따르면, 소정의 통신 그룹 내에서 서로 영상 데이터 및 음성 데이터를 송수신하는 통신 장치의 수가 증가하더라도 전송 효율의 저하를 억제할 수 있다.
도 1은 본 발명의 하나의 실시형태에 따른 AV 채팅 시스템(SYM)의 개요를 나타내는 도면이다.
도 2는 동일 실시형태에 따른 클라이언트 장치의 내부구성을 나타내는 블록도이다.
도 3은 동일 실시형태에 따른 서버 장치의 내부구성을 나타내는 블록도이다.
도 4는 동일 실시형태에 따른 메뉴 화면(MG)을 예시하는 도면이다.
도 5는 동일 실시형태에 따른 메시지를 예시하는 도면이다.
도 6은 동일 실시형태에 따른 클라이언트 장치(1A)와 클라이언트 장치(1B)에서의 처리의 흐름을 나타내는 시퀀스 차트이다.
도 7은 동일 실시형태에 따른 메시지를 예시하는 도면이다.
도 8은 동일 실시형태에 따른 참가 유저의 인원수 및 송신 품질의 대응관계를 예시하는 도면이다.
도 9는 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 10은 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 11은 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 12는 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 13은 동일 실시형태에 따른 클라이언트 장치(1A), 클라이언트 장치(1B) 및 클라이언트 장치(1C)에서의 처리의 흐름을 나타내는 시퀀스 차트이다.
도 14는 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 15는 동일 실시형태에 따른 클라이언트 장치(1A), 클라이언트 장치(1B) 및 클라이언트 장치(1C)에서의 처리의 흐름을 나타내는 시퀀스 차트이다.
도 16은 (a), (b), (c), (d), (e)는 모두 동일 실시형태에 따른 채팅 화면을 예시하는 도면이다.
도 17은 본 발명의 변형예에 따른 참가 유저의 인원수 및 송신 품질의 대응관계를 예시하는 도면이다.
도 18은 동일 변형예에 따른 접속 환경 및 처리 환경과 프로필 정보의 대응관계를 예시하는 도면이다.
도 19는 동일 변형예에 따른 프로필 정보와 사용 모드의 대응관계를 예시하는 도면이다.
도 20은 본 발명의 다른 변형예에 따른 참가 유저의 인원수 및 송신 품질의 대응관계를 예시하는 도면이다.
도 21은 본 발명의 다른 변형예에 따른 참가 유저의 인원수 및 송신 품질의 대응관계를 예시하는 도면이다.
도 22는 본 발명의 다른 변형예에 따른 채팅 화면의 위치를 예시하는 도면이다.
<부호의 설명>
1 클라이언트 장치
2 서버 장치
10 모니터 장치
11 비디오 카메라
12 마이크로폰
20 컨트롤러
30 인터넷
41 CPU
43 메인 메모리
44 ROM
52 GPU
200 CPU
210 ROM
220 RAM
230 HD
230A 친구 관리 테이블
240 통신부
SYM AV 채팅 시스템
이하, 도면을 참조하여 본 발명의 실시형태에 대하여 설명한다. 한편, 각 도면에서 공통되는 부분에는 동일한 부호가 부여되어 있다. 또한 이러한 실시형태는 본 발명의 하나의 양태를 나타내는 것으로서, 이 발명을 한정하는 것이 아니며 본 발명의 범위에서 임의로 변경 가능하다.
[실시형태]
(1)구성
<AV(Audio Visual) 채팅 시스템의 구성>
도 1은 본 실시형태에 따른 AV 채팅 시스템(SYM)의 개요를 나타내는 모식도이다. AV 채팅 시스템(SYM)은 복수의 클라이언트 장치(1A, 1B, 1C)와 서버 장치(2)를 구비한다. 서버 장치(2)와 클라이언트 장치(1)의 각각은 인터넷(30)을 통해 데이터 통신을 행한다. 또한, 복수의 클라이언트 장치(1A, 1B, 1C)는 각각과 P2P(peer-to-peer)로 통신한다. 한편, 이들 클라이언트 장치(1A, 1B, 1C)의 각 유저를 유저(A, B, C)로 한다. 이후, 클라이언트 장치(1A, 1B, 1C)에 대하여 구별해서 기재할 필요가 없는 경우에는 간단히 클라이언트 장치(1)로 기재한다. 또한, 각 클라이언트 장치를 구별해서 기재할 필요가 있고, 각 클라이언트 장치의 각 구성 요소에 대하여 구별해서 기재할 필요가 있는 경우에는 각각 부호의 뒤에 A, B, C를 붙여 기재한다.
각 클라이언트 장치(1)에는 컨트롤러(20)와, 모니터 장치(10)와, 비디오 카메라(11)와, 마이크로폰(12)이 각각 도시하지 않는 접속 케이블을 통해 접속된다. 컨트롤러(20)는 유저에 의해 조작되는 조작 단말로서, 유저의 조작에 따른 조작 신호를 클라이언트 장치(1)에 공급한다. 비디오 카메라(11)는 촬상한 영상에 따른 영상 신호를 클라이언트 장치(1)에 공급한다. 마이크로폰(12)은 입력된 음성에 따른 음성 신호를 클라이언트 장치(1)에 공급한다. 모니터 장치(10)에는 클라이언트 장치(1)로부터 영상 신호가 공급된다. 모니터 장치(10)는 클라이언트 장치(1)로부터 공급된 영상 신호에 기초하여 화상을 표시한다.
상기 구성의 AV 채팅 시스템(SYM)에 있어서, AV 채팅에 참가하는 유저의 클라이언트 장치(1)는 비디오 카메라(11)로부터의 영상 신호에 따른 영상 데이터와, 마이크로폰(12)으로부터의 음성에 따른 음성 데이터를 채팅 스트리밍 데이터로서 AV 채팅에 참가하는 다른 클라이언트 장치(1)에 송신한다. 또한, 클라이언트 장치(1)는 AV 채팅에 참가하고 있는 다른 유저의 클라이언트 장치(1)로부터 인터넷(30)을 통해 송신된 채팅 스트리밍 데이터를 수신한다.
<클라이언트 장치의 내부회로구성>
다음으로 도 2를 참조하면서 클라이언트 장치(1)의 주요 내부구성에 대하여 설명한다. 도 2는 클라이언트 장치(1)의 주요 내부구성을 나타내는 블록도이다.
중앙연산처리장치(CPU:Central Processing Unit)(41) 및 그 주변장치 등으로 이루어지는 제어계(40)와, HD(Hard Disc)(45)와, 프레임 버퍼(53)에 묘화(描畵)를 행하는 화상처리장치(GPU:Graphic Processing Unit)(52) 등으로 이루어지는 그래픽 시스템(50)과, 악음(musical sound), 효과음 등을 발생시키는 음성처리장치(SPU:Sound Processing Unit)(61) 등으로 이루어지는 사운드 시스템(60)과, 어플리케이션 프로그램(application program)이 기록되어 있는 광디스크의 제어를 행하는 광디스크 제어부(70)와, 통신부(80)와, 인터페이스부(90)와, 상기의 각 부가 접속되어 있는 버스(bus) 등을 구비하여 구성되어 있다.
제어계(40)는 CPU(41)와, 끼어들기(interrupt) 제어나 다이렉트 메모리 액세스(DMA:Direct Memory Access) 전송의 제어 등을 행하는 주변장치 제어부(42)와, RAM(Random Access Memory)으로 이루어지는 메인 메모리(43)와, ROM(Read Only Memory)(44)을 구비하고 있다.
ROM(44)에는 클라이언트 장치(1)의 각 부를 제어하기 위한 오퍼레이팅 시스템(operating system) 등의 프로그램이나, 각종 기능을 실현시키기 위한 어플리케이션 프로그램이 기억되어 있다. CPU(41)는 ROM(44)에 기억되어 있는 오퍼레이팅 시스템을 메인 메모리(43)에 읽어내고, 읽어낸 오퍼레이팅 시스템을 실행함으로써 이 클라이언트 장치(1) 전체를 제어한다.
HD(45)에는 각종 데이터나 AV 채팅을 실현시키기 위한 프로그램(이하, AV 채팅 프로그램이라고 함) 등의 각종 어플리케이션 프로그램이 기억되어 있다. CPU(41)는 HD(45)에 기억되어 있는 AV 채팅 프로그램을 메인 메모리(43)에 읽어내고, 읽어낸 AV 채팅 프로그램을 실행한다. 이로 인해 실현되는 기능에 대해서는 후술하는 동작란에서 설명한다.
사운드 시스템(60)은 제어계(40)의 제어하, 음성 신호를 제어하는 SPU(61)와, 음성 재생시의 파형 데이터 등이 기록되는 사운드 버퍼(62)와, SPU(61)에 의해 발생되는 악음, 효과음 등을 출력하는 스피커(63)를 구비하고 있다. 사운드 시스템(60)에는 마이크로폰(12)에서 출력된 음성 신호가 입력된다. 사운드 시스템(60)은 입력된 음성 신호를 디지털 변환하고 음성 코덱에 의해 부호화하여 통신부(80)에 공급한다. 또한, 사운드 시스템(60)에는 인터넷(30)을 통해 취득된 음성 데이터가 통신부(80)로부터 공급된다. 사운드 시스템(60)은 상기 음성 데이터를 음성 코덱에 의해 복호하고 아날로그 변환하여 파형 데이터를 생성하고 이것을 사운드 버퍼(62)에 기록하고 이것을 스피커(63)에 공급한다.
광디스크 제어부(70)는 광디스크에 기록된 프로그램이나 데이터 등을 재생하는 광디스크 장치(71)와, 예를 들면 에러정정부호(ECC:Error Correcting Code)가 부가되어 기록되어 있는 프로그램, 데이터 등을 복호하는 디코더(72)와, 광디스크 장치(71)로부터의 데이터를 일시적으로 기억함으로써 광디스크로부터의 데이터의 읽어내기를 고속화하는 버퍼(73)를 구비하고 있다. 상기의 디코더(72)에는 서브CPU(74)가 접속되어 있다.
인터페이스부(90)는 병렬 I/0 인터페이스(PIO)(91)와 직렬 I/0 인터페이스(SIO)(92)를 구비하고 있다. 이들은 도시하지 않는 메모리 카드와 클라이언트 장치(1)를 접속하기 위한 인터페이스이다.
그래픽 시스템(50)은 지오메트리 트랜스퍼 엔진(GTE:Geometry Transfer Engine)(51)과, GPU(52)와, 프레임 버퍼(53)와, 화상 디코더(54)와, 표시부(3)를 구비하고 있다.
GTE(51)는 예를 들면 복수의 연산을 병렬로 실행하는 병렬 연산 기구를 구비하여, 상기 CPU(41)로부터의 연산 요구에 따라 좌표변환, 광원계산, 행렬 혹은 벡터 등의 연산을 고속으로 행한다. 그리고 제어계(40)는 GTE(51)에 따른 연산 결과에 기초하여 3각형이나 4각형 등의 기본적인 단위도형(polygon)의 조합으로서 3차원 모델을 정의하여 3차원상을 묘화하기 위한 각 폴리곤에 대응하는 묘화 명령을 GPU(52)에 보낸다.
GPU(52)는 제어계(40)로부터의 묘화 명령에 따라 프레임 버퍼(53)에 대하여 다각형(폴리곤) 등의 묘화를 행한다. 프레임 버퍼(53)는 GPU(52)에 의해 묘화된 화 상을 기억한다. 이 프레임 버퍼(53)는 이른바 듀얼포트 RAM으로 이루어지며, GPU(52)로부터의 묘화 혹은 메인 메모리(43)로부터의 전송과, 표시를 위한 읽어내기를 동시에 행할 수 있다. 또한, 이 프레임 버퍼(53)에는 비디오 출력으로서 출력되는 표시 영역 이외에 GPU(52)가 폴리곤 등의 묘화를 행할 때에 참조하는 컬러 룩업 테이블(CLUT:Color Look Up Table)이 기억되는 CLUT 영역과, 묘화시에 좌표변환되어 GPU(52)에 의해 묘화되는 폴리곤 등의 안에 삽입(매핑)되는 소재(텍스쳐)가 기억되는 텍스쳐 영역이 마련되어 있다. 이들 CLUT 영역과 텍스쳐 영역은 표시 영역의 변경 등에 따라 동적으로 변경된다.
화상 디코더(54)는 상기의 제어계(40)로부터의 제어에 의해, 정지화상 혹은 동화상의 부호화 및 복호화나, 디지털 변환 및 아날로그 변환 등의 각종 처리를 행한다.
이 그래픽 시스템(50)에는 비디오 카메라(11)로부터 영상 신호가 공급된다. 그래픽 시스템(50)은 이 영상 신호를 디지털 변환하고 영상 코덱에 의해 부호화(압축)하여 통신부(80)에 공급한다. 또한, 디지털 변환한 영상 신호를 모니터 장치(10)에 공급한다. 또한, 그래픽 시스템(50)에는 인터넷(30)을 통해 취득된 영상 데이터가 통신부(80)로부터 공급된다. 그래픽 시스템(50)은 이 영상 데이터를 영상 코덱에 의해 복호(신장)하고 이것을 아날로그 변환하여 모니터 장치(10)에 공급한다.
통신부(80)는 제어계(40)의 제어하, 인터넷(30)을 통해 다른 정보처리장치와의 데이터 통신을 제어한다. 통신부(80)는 그래픽 시스템(50)으로부터 공급된 영상 데이터와, 사운드 시스템(60)으로부터 공급된 음성 데이터를 채팅 스트리밍 데이터로서 인터넷을 통해 AV 채팅에 참가하고 있는 다른 클라이언트 장치(1)에 송신한다. 또한, 통신부(80)는 AV 채팅에 참가하고 있는 다른 클라이언트 장치(1)로부터 인터넷(30)을 통해 송신된 채팅 스트리밍 데이터를 수신하여, 이에 대하여 영상 데이터를 그래픽 시스템(50)에 공급하고, 음성 데이터를 사운드 시스템(60)에 공급한다.
<서버 장치의 구성>
다음으로 도 3을 참조하면서 서버 장치(2)의 주요 내부구성에 대하여 설명한다. 도 3은 서버 장치(2)의 주요 내부구성을 나타내는 블록도이다.
서버 장치(2)는 CPU(200)와, ROM(210)과, RAM(220)과, HD(Hard Disc)(230)와, 통신부(240)로 구성되며 이들은 버스를 통해 접속된다.
ROM(210)에는 서버 장치(2)의 각 부를 제어하기 위한 오퍼레이팅 시스템이나 각종 프로그램이 기억되어 있다. CPU(200)는 서버 장치(2)의 기동시에 ROM(210)에 기억되어 있는 오퍼레이팅 시스템을 RAM(220)에 읽어내고, 읽어낸 오퍼레이팅 시스템을 실행함으로써 서버 장치(2) 각 부의 동작을 제어한다.
통신부(240)는 CPU(200)의 제어하, 인터넷(30)을 통한 데이터 통신을 제어한다.
HD(230)에는 친구 관리 테이블(230A)이 기억되어 있다. 친구 관리 테이블(230A)에는 AV 채팅 시스템(SYM)이 이용 가능한 유저의 유저 정보가 친구 정보와 대응지어 기억되어 있다. 또한, 유저가 AV 채팅 시스템(SYM)을 이용하기 위한 소정 의 절차를 미리 행함으로써, 상기 유저의 유저 정보가 친구 관리 테이블(230A)에 기억된다. 여기서는 클라이언트 장치(1A, 1B, 1C)의 각 유저의 유저 정보가 미리 친구 관리 테이블(230A)에 기억되어 있는 것으로 한다. 유저 정보는 유저를 식별하기 위한 정보로서, 예를 들면 유저를 고유로 식별하기 위한 유저 ID, 유저의 메일 주소, 유저의 닉네임, 유저에 의해 선택된 아바타 등의 정보를 포함한다. 친구 정보는 유저에 의해 친구 등록이 미리 이루어진 다른 유저를 나타내는 것으로서, 다른 유저의 각 유저 정보가 나타난다. 친구 등록은 예를 들면 다음과 같이 이루어진다. 클라이언트 장치(1)의 유저가 컨트롤러(20)를 통해 소정의 조작을 행하면, 상기 클라이언트 장치(1)가 서버 장치(2)와, 친구로서 등록하는 다른 유저의 클라이언트 장치(1) 사이에서 데이터 통신을 행하고, 상기 다른 유저의 클라이언트 장치(1)로부터 등록을 허가하는 취지의 데이터를 수신함으로써 상기 다른 유저의 유저 정보가 친구 정보로서 등록된다.
(2)동작
다음으로 본 실시형태에 따른 동작에 대하여 설명한다.
한편, 클라이언트 장치(1)의 도시하지 않는 전원이 투입되어, ROM(44)에 기억된 오퍼레이팅 시스템 등의 프로그램이 CPU(41)에 의해 메인 메모리(43)에 읽어내져 실행되고, 유저에 의해 각각 지시가 입력됨으로써 ROM(44)이나 광디스크 장치(71)에 장착된 광디스크로부터 메인 메모리(43)에 읽어내진 각종 프로그램이 CPU(41)에 의해 실행되어 상술한 구성란에서 언급한 각종 기능이 실현된다.
또한, 서버 장치(2)의 도시하지 않는 전원이 투입되어, ROM(210)에 기억된 오퍼레이팅 시스템 등의 프로그램이 CPU(200)에 의해 RAM(220)에 읽어내져 실행되고, 유저에 의해 각각 지시가 입력됨으로써 RAM(220)에 읽어내진 게임 제어 프로그램 등의 각종 프로그램이 CPU(200)에 의해 실행되어 상술한 구성란에서 언급한 각종 기능이 실현된다.
한편, 본 실시형태에서는 AV 채팅 시스템(SYM)에 접속되는 복수의 클라이언트 장치(1) 중, 마스터가 되는 클라이언트 장치(1)에서 유저가 AV 채팅의 개시 및 다른 유저의 초대를 지시하고, 상기 다른 유저가 다른 클라이언트 장치(1)에서 AV 채팅에의 참가의 수용을 지시하면 이들 클라이언트 장치(1)간에서 AV 채팅이 행해진다. 즉, 이들 클라이언트 장치(1)에 의해 AV 채팅을 행하는 통신 그룹이 형성된다. 한편, 마스터는 참가자를 초대하는 권한 및 후술하는 토폴로지(topology)나 송신 품질을 결정하는 권한을 가진다. 여기서는 마스터로서 선출된 클라이언트 장치(1)를 클라이언트 장치(1A)로 한다. 또한, 이 AV 채팅에 참가할 수 있는 유저의 인원수, 즉, 이 통신 그룹에 속할 수 있는 클라이언트 장치(1)의 수를 '2'에서 '6'까지로 제한한다.
<AV 채팅의 개시 준비>
먼저, 유저(A)가 클라이언트 장치(1A)에 접속된 컨트롤러(20A)를 조작하여 메뉴 화면을 표시시키면, CPU(41A)는 통신부(80A)를 통해 서버 장치(2)에 액세스하여, 상기 유저의 유저 정보에 대응지어 기억되어 있는 친구 정보를 요구하는 취지의 리퀘스트 데이터를 서버 장치(2)에 송신한다. 이 리퀘스트 데이터에는 예를 들면 유저(A)의 유저 ID 등의 정보가 포함되어 있다. 한편 서버 장치(2)는 클라이언 트 장치(1A)로부터 송신된 리퀘스트 데이터를 수신하면, 상기 리퀘스트 데이터에 따라 HD(230)에 기억되어 있는 친구 관리 테이블(230A)을 참조하여 유저(A)의 유저 정보에 대응지어져 있는 친구 정보를 클라이언트 장치(1A)에 송신한다. 클라이언트 장치(1A)의 CPU(41A)는 서버 장치(2)로부터 송신된 친구 정보를 수신하면, 이어서 이 친구 정보를 이용한 메뉴 화면의 묘화 명령을 그래픽 시스템(50A)에 대하여 행한다. 그래픽 시스템(50A)이 상기 묘화 명령에 따라 메뉴 화면의 화상을 묘화한다. CPU(41A)는 묘화된 메뉴 화면의 화상에 따른 영상 신호를 모니터 장치(10A)에 공급한다. 이 결과, 모니터 장치(10A)에는 예를 들면 도 4에 나타내는 것과 같은 메뉴 화면(MG)이 표시된다. 상기 메뉴 화면(MG)에서는 AV 채팅의 기능을 상징하는 채팅 아이콘(IC1)이 표시되고, 상기 채팅 아이콘(IC1)의 상하방향으로, 상기 유저(A)에 의해 미리 등록되어 서버 장치(2)로부터 수신한 친구 정보가 전개 표시된다. 여기서 표시되는 친구 정보는 예를 들면, 친구로서 등록된 다른 유저의 아바타(FR1)나 닉네임(NM1) 등이다. 유저(A)가 컨트롤러(20A)를 조작하여 이 친구 정보 중에서 AV 채팅을 개시하고 싶은 상대를 선택하고, 또한 컨트롤러(20A)를 조작하여 옵션 메뉴의 표시를 지시하면 메뉴 화면의 우측에 옵션 메뉴(도시하지 않음)가 표시된다. 또한 유저(A)가 컨트롤러(20A)를 조작하여 이 옵션 메뉴에 표시되는 지시 내용에서 'AV 채팅의 개시'를 선택하여 AV 채팅의 개시를 지시하면, CPU(41A)는 AV 채팅 프로그램을 HD(45B)로부터 메인 메모리(43B)에 읽어내고 이것을 실행시킨다. 그리고 CPU(41A)는 유저에 의해 선택된 친구 정보를 참조하여 상기 친구 정보에 대응하는 유저에게 보내는 초대 메시지를 생성하고 이것을 모니터 장치(10)에 표시시킨다. 구체적으로는, 예를 들면 초대 메시지의 템플릿(template)이 HD(45)에 미리 기억되어 있으며, CPU(41A)는 HD(45)에 기억된 템플릿의 초대 메시지를 읽어내고 이것에 기초하여 친구 정보에 의해 표시되는 정보를 닉네임 등을 수신처로서 첨가하거나 하여 초대 메시지를 생성한다. 이와 같이 생성되어 모니터 장치(10)에 표시되는 초대 메시지를 예를 들어 도 5에 나타낸다.
이후의 동작의 흐름은 도 6에 나타내는 플로우 차트를 참조하면서 설명한다. 도 6은 클라이언트 장치(1A, 1B) 사이에서의 데이터 통신의 흐름을 나타내는 시퀀스 차트이다.
유저(A)가 컨트롤러(20)를 조작하여 이 초대 메시지의 송신을 결정 지시하면, 클라이언트 장치(1A)는 서버 장치(2)를 통해 상기 초대 메시지 수신처의 유저(여기서는, 유저(B)로 함)의 클라이언트 장치(1)(여기서는, 클라이언트 장치(1B)로 함)에 상기 초대 메시지를 송신한다(단계(S1)).
한편, 클라이언트 장치(1A)가 송신한 초대 메시지를 수신한 클라이언트 장치(1B)는 상기 초대 메시지를 모니터 장치(10B)에 표시시킨다. 모니터 장치(10B)에 표시되는 초대 메시지를 예를 들어 도 7에 나타낸다. 여기서, 상기 클라이언트 장치(1B)의 유저(B)가 컨트롤러(20B)를 조작하여 AV 채팅의 참가를 지시하면, 상기 클라이언트 장치(1B)는 AV 채팅 프로그램을 HD(45B)로부터 메인 메모리(43B)에 읽어내고 이것을 실행시킨다. 그리고 클라이언트 장치(1B)는 클라이언트 장치(1A)와의 사이에서 접속성을 체크하기 위해 접속 확인용 데이터를 클라이언트 장치(1A)에 송신한다(단계(S3)). 클라이언트 장치(1A)는 클라이언트 장치(1B)로부터 송신된 접 속 확인 데이터를 수신하면, 상기 데이터를 수신한 취지를 나타내는 접속 응답 데이터를 클라이언트 장치(1B)에 송신한다.
클라이언트 장치(1B)는 상기 접속 응답 데이터를 수신하면, 클라이언트 장치(1A)와 접속 가능하다고 판별하고, AV 채팅에 참가하는 취지를 나타내는 참가 응답 데이터를 클라이언트 장치(1A)에 송신한다(단계(S4)). 한편, 이 참가 응답 데이터에는 유저(B)의 유저 ID 등이 포함된다.
한편, 클라이언트 장치(1A)는 클라이언트 장치(1B)로부터 송신된 참가 응답 데이터를 수신하면, 클라이언트 장치(1A)는 토폴로지를 검토하여 결정하는 동시에, AV 채팅에 참가하고 있는 유저(이하, 참가 유저라고 함)의 인원수를 판별하여 각 클라이언트 장치(1)가 영상 데이터를 각각 송신할 때의 해상도 및 송신 빈도(이하, 송신 품질)를 결정한다. 예를 들면, 참가 유저의 인원수와 송신 품질의 대응관계를 도 8의 표에 나타낸다. 한편 해상도란, 영상 데이터를 구성하는 프레임 단위의 화상 데이터에 포함되는 화소에 대하여, 단위면적당 화소수를 나타내는 것이다. 여기서 이용하는 해상도는 VGA와 QVGA이다. QVGA란 해상도가 320×240픽셀인 것을 나타내며, VGA란 해상도가 640×480픽셀인 것을 나타내고 있다. 또한, 송신 빈도는 1초간 송신하는 프레임수(fps)로 나타내고 있다.
이 도 8에 나타내는 대응관계를 참조하면, 여기서 참가 유저의 인원수는 2명이기 때문에 단계(S5)에서 결정되는 송신 품질은 VGA 및 60fps가 된다. 또한, 여기서 결정되는 토폴로지는 클라이언트 장치(1A)와 클라이언트 장치(1B)의 2개의 노드가 단순히 접속되는 형태가 된다. 이어서, 단계(S6)에서 클라이언트 장치(1A)는 참 가를 받아들이는 취지를 나타내는 응답 데이터를 클라이언트 장치(1B)에 송신한다. 나아가, 단계(S8)에서 단계(S5)에서 결정한 토폴로지 및 송신 품질을 검토 결과 데이터로서 클라이언트 장치(1B)에 송신한다.
한편, 클라이언트 장치(1B)는 클라이언트 장치(1A)로부터 송신된 검토 결과 데이터를 수신하면, 상기 데이터에 응답하는 취지를 나타내는 결과 응답 데이터를 클라이언트 장치(1A)에 송신한다(단계(S9)).
이어서, 클라이언트 장치(1A)는 클라이언트 장치(1B)로부터 송신된 결과 응답 데이터를 수신하면, AV 채팅의 개시를 지시하는 취지의 개시 지시 데이터를 클라이언트 장치(1B)에 송신한다(단계(S10)). 또한, 클라이언트 장치(1A)는 도 9에 나타내는 것과 같은 채팅 화면(CH1)을 모니터 장치(10A)에 표시시킨다. 상기 채팅 화면(CH1)에서는 클라이언트 장치(1A)에 접속된 비디오 카메라(11A)로부터 입력되는 영상 신호에 따른 영상(DA1)을 화면 우측에 표시시킨다. 화면 좌측에는 상술한 클라이언트 장치(1B)로부터 송신되는 영상 데이터에 따른 영상을 표시시키기 위해, 클라이언트 장치(1B)로부터 영상 데이터가 송신되는 것을 대기한다. 또한, 클라이언트 장치(1A)는 클라이언트 장치(1A)에 접속된 비디오 카메라(11A)로부터 입력된 영상 신호에 따른 영상 데이터 및 마이크로폰(12A)으로부터 입력된 음성에 따른 음성 데이터를 채팅 스트리밍 데이터로서 통신부(80)를 통해 클라이언트 장치(1B)에 송신한다(단계(S11)).
한편, 클라이언트 장치(1B)는 클라이언트 장치(1A)로부터 송신된 개시 지시 데이터를 수신하면, 도 10에 나타내는 것과 같은 채팅 화면(CH2)을 모니터 장 치(10B)에 표시시킨다. 상기 채팅 화면(CH2)에서는, 클라이언트 장치(1B)에 접속된 비디오 카메라(11B)로부터 입력되는 영상 신호에 따른 영상(DB1)을 화면 우측에 표시시킨다. 화면 좌측에는 상술한 클라이언트 장치(1A)로부터 송신되는 화상 데이터에 따른 영상을 표시시키기 위해, 클라이언트 장치(1A)로부터 영상 데이터가 송신되는 것을 대기한다. 또한, 클라이언트 장치(1B)는 클라이언트 장치(1B)에 접속된 비디오 카메라(11B)로부터 입력된 영상 신호에 따른 영상 데이터 및 마이크로폰(12B)으로부터 입력된 음성에 따른 음성 데이터를 채팅 스트리밍 데이터로서 통신부(80B)를 통해 클라이언트 장치(1A)에 송신한다(단계(S11)).
한편, 단계(S11)에서 각 클라이언트 장치(1A, 1B)는 상술한 단계(S5)에서 결정된 토폴로지이며 또한 검토 결과 데이터에 표시되는 토폴로지에 기초하여 채팅 스트리밍 데이터를 송신한다. 또한, 채팅 스트리밍 데이터에 포함되는 영상 데이터에 있어서, 각 클라이언트 장치(1A, 1B)는 상술한 단계(S5)에서 결정된 송신 품질이며 또한 검토 결과 데이터에 표시되는 송신 품질에 의해 영상 데이터를 송신한다.
각 클라이언트 장치(1)는 자신의 장치에 접속되는 비디오 카메라(11)로부터의 영상 신호에 따른 영상을 채팅 화면 우측에 표시시키고, 타장치로부터 송신된 영상 데이터에 의해 표시되는 화상을 채팅 화면의 좌측에 표시시킨다. 이 결과, 클라이언트 장치(1A)에서는 도 11에 나타내는 것과 같은 채팅 화면(CH3)이 모니터 장치(10A)에 표시된다. 클라이언트 장치(1B)에서는 도 12에 나타내는 것과 같은 채팅 화면(CH4)이 모니터 장치(10B)에 표시된다. 또한, 각 클라이언트 장치(1)는 타장치 로부터 송신된 음성 데이터에 의해 나타내지는 음성을 스피커(63)로 출력시킨다. 이 결과, 각 클라이언트 장치(1)의 유저는 타장치의 유저의 영상을 보면서 대화를 할 수 있다.
한편, 여기서 클라이언트 장치(1)의 유저가 상기 클라이언트 장치(1)에 접속된 컨트롤러(20)를 조작하여 상술한 메뉴 화면(MG)의 표시를 지시하면, 모니터 장치(10)에 표시시키는 메뉴 화면(MG)에 있어서, 유저(A, B)가 참가하고 있는 AV 채팅의 채팅룸을 상징하는 채팅룸 아이콘(도시하지 않음)을 표시시키도록 해도 된다.
<참가 인원수의 증가>
다음으로 클라이언트 장치(1A)에 있어서, 또한 클라이언트 장치(1C)의 유저를 AV 채팅에 초대했을 경우의 동작의 흐름에 대하여 도 13을 참조하면서 설명한다. 도 13은 클라이언트 장치(1A, 1B, 1C) 사이에서의 데이터 통신의 흐름을 나타내는 시퀀스 차트이다. 한편, 상기와 공통되는 부분에 대해서는 그 설명을 생략한다.
클라이언트 장치(1A)에서는 클라이언트 장치(1B)와의 사이에서 AV 채팅의 실행 중에 유저(A)가 컨트롤러(20A)를 조작하여 메뉴 화면(MG)을 표시시켰다고 가정한다. 그리고 상기 메뉴 화면(MG)에서 표시되는 친구 정보에서 유저(B) 이외의 다른 유저(여기서는, 유저(C)로 함)의 친구 정보를 선택하고, 상기 친구 정보에 표시되는 유저(C)에 대한 상기 AV 채팅으로의 초대를 지시하였다고 가정한다. 그러면, 상술한 단계(S1)와 동일한 단계(S21)에서는, 클라이언트 장치(1C)에서 초대 메시지가 표시된다. 유저(C)가 컨트롤러(20C)를 조작하여 참가를 지시하면, 클라이언트 장치(1C)는 상술한 단계(S3)와 마찬가지로 하여 단계(S23)에서 클라이언트 장치(1A) 및 클라이언트 장치(1B)와 각각 접속 체크를 행한다. 한편 클라이언트 장치(1A)는 단계(S22)에서, 유저(C)가 참가하는 취지를 나타내는 그룹 데이터를 AV 채팅에 이미 참가하고 있는 유저의 클라이언트 장치(여기서는, 클라이언트 장치(1B)임)에 대하여 송신한다. 그룹 데이터에는 예를 들면, 클라이언트 장치(1C)의 유저 ID가 포함된다.
그리고 상술한 단계(S4)와 동일한 단계(S24)에서, 클라이언트 장치(1C)는 클라이언트 장치(1A, 1B)와 접속 가능하다고 판별하면, 참가 응답 데이터를 클라이언트 장치(1A)에 송신한다. 단계(S25)에서는 단계(S5)와 마찬가지로 하여 클라이언트 장치(1A)는 토폴로지 및 송신 품질을 결정한다. 여기서는 참가 유저의 인원수가 3명이 되었기 때문에, 도 8에 나타내는 대응관계에 따라 송신 품질을 예를 들면 QVGA 및 30fps로 결정한다. 또한, 여기서 결정하는 토폴로지는 클라이언트 장치(1A, 1B, 1C)의 3개의 노드가, 자신의 노드 이외의 다른 모든 노드와 각각 접속하는 풀 메쉬형(full mesh-type)의 형태가 된다. 이어서, 단계(S6)와 동일한 단계(S26)를 거친 후, 단계(S27)에서는 클라이언트 장치(1A)는 클라이언트 장치(1C)의 참가를 받아들이는 취지를 나타내는 그룹 데이터를 클라이언트 장치(1B)에 송신한다(단계(S27)). 나아가, 단계(S28)에서는 상술한 단계(S8)와 마찬가지로, 클라이언트 장치(1A)는 단계(S25)에서 결정한 토폴로지 및 송신 품질을 검토 결과 데이터로서 클라이언트 장치(1B, 1C)에 송신한다.
이후의 단계(S29, S30)에 대해서는 상술한 단계(S9, SlO)와 동일하기 때문에 그 설명을 생략한다. 또한, 단계(S31)에서 각 클라이언트 장치(1A, 1B, 1C)는 상술한 단계(S25)에서 결정된 토폴로지이며 또한 검토 결과 데이터에 표시되는 토폴로지에 따라 채팅 스트리밍 데이터를 송신한다. 또한, 채팅 스트리밍 데이터에 포함되는 영상 데이터에 있어서, 각 클라이언트 장치(1A, 1B, 1C)는 상술한 단계(S25)에서 결정된 송신 품질이며 또한 검토 결과 데이터에 표시되는 송신 품질에 의해 영상 데이터를 송신한다. 따라서, 클라이언트 장치(1A, 1B)에서는, 상술한 단계(S5)에서 결정된 송신 품질에서 상술한 단계(S25)에서 결정된 송신 품질로 변경하여 영상 데이터를 송신하게 된다.
이 결과, 클라이언트 장치(1A)의 모니터 장치(10A)에는 예를 들면, 도 14에 나타내는 것과 같은 채팅 화면(CH5)이 표시된다. 상기 채팅 화면(CH5)에서는, AV 채팅에 참가하는 각 유저의 영상이 예를 들면 도 11의 채팅 화면(CH3)보다도 작게 표시된다. 왜냐하면, 상술한 단계(S25)에서 결정된 송신 품질에서의 해상도가 VGA에서 QVGA로 변경되었기 때문이다. 또한, 마찬가지로 영상의 프레임마다의 갱신 빈도도 도 11에서의 채팅 화면(CH3)에 비해 늦어진다. 상술한 단계(S25)에서 결정된 송신 품질에서의 송신 빈도가 60fps에서 30fps로 변경되었기 때문이다.
한편, AV 채팅의 참가 유저의 인원수가 더욱 증가할 경우, 즉 클라이언트 장치(1A, 1B, 1C) 이외의 다른 클라이언트 장치(1)가 상기 AV 채팅을 행하는 통신 그룹에 참가하여 상기 통신 그룹에 속하는 클라이언트 장치(1)의 수가 더욱 증가할 경우에도 단계(S21∼S31)와 동일한 처리를 행한다. 또한 클라이언트 장치(1A)는, 참가 유저의 인원수가 6명에 달했다고 판별했을 경우에는, 유저가 상술한 메뉴 화 면(MG)에서 소망하는 친구 정보를 선택하더라도 AV 채팅으로의 초대를 지시할 수 없도록 제어한다.
<참가 인원수의 감소>
다음으로 참가 유저의 인원수가 감소할 경우에 대하여 설명한다. 예를 들면, 클라이언트 장치(1C)가 AV 채팅에서 이탈하는 경우에 대하여 도 15를 참조하면서 설명한다.
예를 들면, 클라이언트 장치(1C)의 유저(C)가 컨트롤러(20C)를 조작하여 상기 AV 채팅의 이탈(상기 AV 채팅을 행하는 통신 그룹에서의 이탈)을 지시하면, 클라이언트 장치(1C)는 AV 채팅의 이탈을 나타내는 이탈 통지 데이터를 클라이언트 장치(1A)에 송신한다(단계(S41)). 이 이탈 통지 데이터에는 유저(C)의 유저 ID가 포함되어 있다. 클라이언트 장치(1A)는 클라이언트 장치(1C)로부터 송신된 이탈 통지 데이터를 수신하면, 유저(C)의 클라이언트 장치(1C)가 채팅에서 이탈하는 취지를 나타내는 그룹 데이터를 상기 AV 채팅에 참가하고 있는 다른 모든 유저의 클라이언트 장치(여기서는, 클라이언트 장치(1B)임)에 송신한다(단계(S42)). 이어서, 클라이언트 장치(1A)는 상술한 단계(S5)와 마찬가지로 하여 단계(S45)에서 토폴로지의 결정 및 송신 품질을 결정한다. 여기서는 참가 유저의 인원수가 2명이 되기 때문에, 도 8에 나타내는 대응관계에 따라 송신 품질을 VGA 및 60fps로 결정한다. 그리고 상술한 단계(S8)와 마찬가지로 하여 단계(S48)에서, 클라이언트 장치(1A)는 단계(S45)에서 결정한 토폴로지 및 송신 품질을 검토 결과 데이터로서 클라이언트 장치(1B)에 송신한다.
이상과 같이 하여, AV 채팅에 참가하는 유저(이하, 참가 유저라고 함)의 인원수에 따라 영상 데이터의 송신 품질을 변경한다. 예를 들면, 도 16에 나타내는 바와 같이, 참가 유저의 인원수가 2명에서 1명씩 증가할 때마다, 채팅 화면은 (a), (b), (c), (d), (e)의 순서로 전이한다. 이들 화면에 표시되는 DA1, DB1, DC1, DD1, DE1, DF1은 자신의 장치의 비디오 카메라(11)로부터의 영상 신호에 따른 영상 및 AV 채팅에 참가하는 다른 유저의 클라이언트 장치(1)로부터 송신된 영상 데이터에 따른 각 영상이다. 또한 반대로, 참가 유저의 인원수가 6명에서 1명씩 감소할 때마다, 채팅 화면은 (e), (d), (c), (b), (a)의 순서로 전이한다. 또한, 상술한 도 8에 나타내는 대응관계에 따르면, 다른 유저의 각 영상의 표시에 대해서는 (a)일 때의 영상의 갱신 빈도는 약 60fps이고, (b) 및 (c)일 때의 영상의 갱신 빈도는 약 30fps이며, (d) 및 (e)일 때의 영상의 갱신 빈도는 약 20fps이다.
이러한 구성에 의해, 본 실시형태에서는 참가 유저의 인원수에 따라 영상 데이터의 송신 품질을 조정한다. 이러한 구성으로 인해, 참가 유저의 인원수가 늘어나더라도 영상 데이터의 전송량의 증가를 억제할 수 있으며 전송 효율의 저하를 억제할 수 있다. 또한, 참가 유저의 인원수가 줄어든 경우에는 송신 품질을 변경함으로써 참가 유저의 인원수가 줄기 전보다도 고품질의 영상 데이터를 제공할 수 있다. 단, 참가 유저의 인원수가 감소하는 경우에는 상술한 단계(S45)를 행하지 않아 송신 품질을 변경하지 않도록 구성해도 된다.
[변형예]
<변형예 1>
상술한 송신 품질을 결정할 때에는, 예를 들면 모니터 장치(10)에 표시시키는 채팅 화면의 화상 품질에 따라 참가 유저의 인원수 및 송신 품질의 대응관계를 다르게 해도 된다. 예를 들면, 모니터 장치(10)에 표시시키는 채팅 화면의 화상 품질을 고품질 모드와 표준 화질 모드 중 어느 하나로 설정할 수 있는 구성으로 한다. 그리고 상술한 단계(S5, S25 또는 S45)에서는, 고품질 모드인 경우에는 도 8에 나타내는 대응관계에 따라 송신 품질을 결정하고, 표준 화질 모드인 경우에는 도 17에 나타내는 대응 관계에 따라 송신 품질을 결정한다.
또한, 상술한 실시형태에서는 영상 데이터의 송신 품질로서 해상도 및 송신 빈도를 이용하였다. 그러나 본 발명에서는 이에 한하지 않고, 예를 들면 영상(화상)의 압축률이나, 화상을 표시하는 색 변이(color variation) 등을 송신 품질로서 이용하고, 이들을 참가 유저의 인원수에 따라 가변으로 하도록 해도 된다.
<변형예 2>
또한 상술한 단계(S5, S25 또는 S45)에서는, 각 클라이언트 장치(1)의 프로필 정보에 따라 송신 품질을 결정하도록 해도 된다. 프로필 정보란, 클라이언트 장치의 접속 환경이나 처리 환경을 나타내는 것이다. 구체적으로는, 예를 들면 접속 환경이란 데이터의 송수신을 행하는 전송 대역을 나타낸다. 처리 환경이란 CPU의 사용 가능률이나, 메인 메모리(43) 등의 메모리의 소비 가능량을 나타내는 것이다. 예를 들면, 클라이언트 장치(1)가 멀티프로세서를 포함하고 있는 경우, CPU 사용 가능률은 사용 가능한 서브 프로세서의 수를 나타내는 것이어도 된다. 예를 들면, 도 18에서는 접속 환경에 대하여 2개로 나누어, 전송 대역이 500kbps 이상인 경우 (광대역)와, 전송 대역이 500kbps 미만인 경우(협대역)로 나눈다. 또한, 처리 환경에 대해서도 2개로 나누어, 고소비 환경과 저소비 환경으로 나눈다. 고소비 환경은 CPU의 사용 가능률이 높고, 메모리의 소화 가능량이 많은 환경이다. 저소비 환경은 고소비 환경에 비해 CPU의 사용 가능률이 낮고, 메모리의 소비 가능량이 적은 환경이다. 각 클라이언트 장치(1)는 자신의 장치의 환경이 어느 것인지를 판별하여 프로필 정보를 생성한다. 예를 들면, 고소비 환경 및 광대역인 경우를 '환경 1'로 하고, 고소비 환경 및 협대역인 경우를 '환경 2'로 하고, 저소비 환경 및 광대역인 경우를 '환경 3'으로 하고, 저소비 환경 및 협대역인 경우를 '환경 4'로 하여 이들 '환경 1'∼'환경 4' 중 어느 하나를 나타내는 정보를 프로필 정보로서 생성한다. 이들 '환경 1'∼'환경 4'는 이 숫자의 순서대로 환경이 양호하다고 한다. 마스터 이외의 각 클라이언트 장치(1)는 이와 같이 생성한 프로필 정보를 상술한 단계(S4 또는 S24)에서, 참가 응답 데이터와 함께 마스터의 클라이언트 장치(1A)로 송신한다. 클라이언트 장치(1A)는 각 클라이언트 장치(1)로부터 프로필 정보를 수신하면, 자신의 장치의 프로필 정보와 함께 이들 프로필 정보를 검토하여 사용 모드를 결정한다. 사용 모드란, 참가 유저의 인원수와 송신 품질의 대응관계가 복수 설정되어 있는 경우, 이들을 식별하기 위한 모드이다. 예를 들면, 도 19는 프로필 정보와 사용 모드의 대응관계를 나타내고 있다. 이 도면에서의 '모드 1'은 도 8에 나타내는 대응관계에 대응지어져 있으며, '모드 2'는 도 17에 나타내는 대응관계에 대응지어져 있다. 클라이언트 장치(1A)는 각 프로필 정보에 표시되는 환경 1∼환경 4 중, 가장 양호하지 않은 환경을 추출한다. 그리고 추출한 환경에 대응하는 사용 모드를 선택하고, 상기 사용 모드를 참조하여 참가 유저의 인원수에 따른 송신 품질을 결정한다. 예를 들면, 모든 프로필 정보에서 '환경 1'이 표시되어 있는 경우, '모드 1'을 선택한다.
한편, 상술한 단계(S4 또는 S24) 이외에서도, 각 클라이언트 장치(1)는 접속 환경 및 처리 환경의 변경을 검출했을 경우, 상기 환경을 나타내는 프로필 정보를 마스터의 클라이언트 장치(1A)에 송신하도록 해도 된다. 마스터의 클라이언트 장치(1A)는 각 클라이언트 장치(1)로부터 프로필 정보를 수신할 때마다, 상술한 바와 같이 하여 송신 품질을 결정하는 처리를 행하도록 하면 된다.
이러한 구성에 의하면, AV 채팅에 참가하는 유저의 클라이언트 장치(1)의 접속 환경 및 처리 환경이 양호하지 않더라도 상기 클라이언트 장치(1)에 걸리는 부담을 경감할 수 있다.
<변형예 3>
상술한 AV 채팅 프로그램을 실행 중에 다른 컨텐츠를 재생할 경우, 클라이언트 장치(1A)가 단계(S5, S25 또는 S45)에서 송신 품질을 결정할 때에는 다른 컨텐츠를 재생하고 있지 않은 경우와 다른 대응관계를 따르도록 해도 된다. 한편, 컨텐츠란 사진 등의 화상이나 게임 프로그램 등을 의미하며, 컨텐츠의 재생이란 이들의 재생이나 실행을 의미한다. 그리고 예를 들면, AV 채팅 프로그램만 실행할 경우에는 도 8에 나타내는 대응관계에 따라 AV 채팅 프로그램의 타컨텐츠를 재생할 경우에는 예를 들면 도 20에 나타내는 대응관계에 따라 송신 품질을 결정하도록 해도 된다.
또한, AV 채팅을 실행하는 중에서의 컨텐츠의 재생에 따라, 상술한 참가 유저의 채팅 화상의 크기나 배치를 변경하도록 해도 된다. 예를 들면 도 21(a), (b), (c), (d), (e)에 나타내는 바와 같이, 게임 프로그램을 실행하고 있는 경우에는 화면 좌측에 게임 화상(GM1)을 표시시키고, 화면 우측에 참가 유저의 영상을 표시시키도록 한다. 동일 도면에서는 참가 유저의 인원수가 2명에서 1명씩 증가할 때마다, 채팅 화면은 (a), (b), (c), (d), (e)의 순서로 전이한다. 이들 화면에 표시되는 DA1, DB1, DC1, DD1, DE1, DF1은 자신의 장치의 비디오 카메라(11)로부터의 영상 신호에 따른 영상 및 AV 채팅에 참가하는 다른 유저의 클라이언트 장치(1)로부터 송신된 영상 데이터에 따른 각 영상이다. 또한 반대로, 참가 유저의 인원수가 6명에서 1명씩 감소할 때마다, 채팅 화면은 (e), (d), (c), (b), (a)의 순서로 전이한다. 이때, 다른 참가 유저의 클라이언트 장치(1)로부터 송신된 영상 데이터에 따른 영상을 참가 유저의 인원수에 따라 축소 또는 확대하여 표시하도록 해도 된다. 또한, 참가 유저의 영상을 표시하는 표시 영역을 고정적으로 마련하여 참가 유저의 인원수에 따라 각 유저의 영상이 상기 표시 영역 내에 들어가도록 상기 화상의 배치 및 크기를 조정하도록 해도 된다.
또한 예를 들면 게임 프로그램과 AV 채팅 프로그램을 연계시키도록 구성하고, 예를 들면 게임의 진행에 따라 참가 유저의 영상의 표시를 제어하도록 해도 된다. 예를 들면, 게임의 상황이 소정의 상황일 때에는 참가 유저의 영상을 표시시키고, 소정의 상황 이외일 때에는 참가 유저의 영상을 표시시키지 않도록 제어한다. 또한, 게임 내용에 따라 참가 유저의 영상을 표시하는 위치를 제어하도록 해도 된 다. 예를 들면, 캐릭터가 게임 화상에 표시되는 게임인 경우, AV 채팅에 유저가 참가하고 있을 때에는 상기 캐릭터의 표시위치에 참가 유저의 영상을 표시시키도록 제어한다.
<변형예 4>
클라이언트 장치(1A)가 상술한 다른 컨텐츠의 재생 중에 AV 채팅 프로그램을 실행하는 경우로서, 재생하는 컨텐츠가 표시양태 지정정보를 포함할 경우, 클라이언트 장치(1A)가, 컨텐츠의 재생에 따라 읽어내진 표시양태 지정정보에 의해 지정되는 모니터 장치(10)의 표시위치에 채팅 화상을 표시시켜도 된다. 한편, 컨텐츠란 게임 프로그램 등의 소정의 프로그램을 의미하며, 표시양태 지정정보는 소정의 프로그램의 실행(재생)에 의해 읽어내진다. 또한, 컨텐츠는 광디스크 등의 기억매체에 기억된 것 이외에, HD(45)에 기억된 것(인터넷(30)을 통해 다운로드된 것을 포함함) 등, 클라이언트 장치(1A)가 재생할 수 있는 각종 컨텐츠를 포함한다. 또한, 컨텐츠 재생의 진행(예를 들면 게임의 진행)에 따라 채팅 화상의 표시위치가 변경되도록 컨텐츠가 복수의 표시양태 지정정보를 포함하고 있어도 된다.
예를 들면 컨텐츠가 게임 프로그램인 경우, 게임 화상(GM1) 중 게임의 진행상 그리 중요하지 않은(게임의 진행을 방해하지 않는) 영역상에 겹쳐 채팅 화상이 표시되도록 표시양태 지정정보가 설정되어 기억되어 있다. 구체적으로는, 도 22(a)에 나타내는 바와 같이, 캐릭터의 진행방향이 게임 화상(GM1)의 좌측 방향에 설정되어 있는 장면에서는 채팅 화면의 영상(DA1, DB1, DC1, DD1, DE1)을 게임 화상(GM1)의 우측에 표시하도록 표시양태 지정정보를 설정하면 된다. 마찬가지로, 도 22(b), (c), (d)에 나타내는 바와 같이, 캐릭터의 진행방향이 게임 화상(GM1)의 우측 방향, 하측 방향 및 상측 방향으로 각각 설정되어 있는 장면에서는, 채팅 화면의 화상(DA1, DB1, DC1, DD1, DE1)을 게임 화상(GM1)의 좌측, 상측 및 하측에 각각 표시하도록 표시양태 지정정보를 설정하면 된다. 한편, 채팅 화면의 화상의 수는 참가 유저의 인원수에 따라 변화하며, 도 22의 예에서는 참가 유저가 5명인 경우를 나타내고 있다.
다음으로 클라이언트 장치(1A)에 있어서, 게임 프로그램(다른 컨텐츠)의 실행 중에 클라이언트 장치(1B, 1C) 사이에서 AV 채팅이 행해지고, 또한 게임 프로그램이 상기 표시양태 지정정보를 포함하는 경우에 그래픽 시스템(50)이 실행하는 처리에 대하여 도 2를 참조하여 설명한다.
먼저, 비디오 카메라(11)로부터 공급된 화상 데이터(자기의 채팅 화상 데이터)와, 다른 클라이언트 장치(1B, 1C)(도 1에 나타냄)로부터 송신되어 통신부(80)가 수신한 화상 데이터(다른 유저의 채팅 화상 데이터)를 메인 메모리(43) 내의 버퍼에 일시적으로 기입한다. 비디오 카메라(11)로부터 공급된 화상 데이터나 다른 클라이언트 장치(1B, 1C)로부터 수신한 화상 데이터가 압축되어 있는 경우에는 디코딩한 후에 버퍼에 기입한다. 한편, 각 채팅 화상 데이터가 기입되는 버퍼가 마련되는 장소는 메인 메모리(43) 내에 한정되는 것이 아니라, 다른 기억 영역 내이어도 된다.
다음으로 메인 메모리(43) 내의 버퍼로부터 자기의 채팅 화상 데이터와 다른 유저의 채팅 화상 데이터를 읽어내고, 게임의 진행에 따라 게임 프로그램으로부터 차차 공급되는 표시양태 지정정보에 따라, 읽어낸 각 채팅 화상 데이터를 프레임 버퍼(53)에 기입한다(각 채팅 화상을 프레임 버퍼(53)에 묘화한다).
표시양태 지정정보는 자기의 영상 및 다른 유저의 영상을 각각 표시하는 영역의 중심좌표의 위치나 폭 및 높이를 규정하는 표시위치 지정정보 이외에, 투과도를 규정하는 정보(예를 들면 α값)를 포함한다. 또한, 표시위치 지정정보는 X축 주위의 회전량이나 Y축 주위 회전량이나 Z축 주위의 회전량을 각각 규정하는 정보를 포함해도 된다.
각 채팅 화상 데이터를 프레임 버퍼(53)에 기입하는 처리는 AV 채팅 프로그램에 의해 실행되어도 되고, 게임 프로그램에 의해 실행되어도 된다. 상기 처리가 AV 채팅 프로그램에 의해 실행될 경우, 프레임 버퍼(53)에는 먼저 게임 프로그램에 의해 게임 화상이 묘화되고, 그 게임 화상의 위에서 각 채팅 화상이 AV 채팅 프로그램에 의해 덮어쓰여 묘화된다. 한편 상기 처리가 게임 프로그램에 의해 실행되는 경우, AV 채팅 프로그램에 의해 각 채팅 화상 데이터가 메인 메모리(43) 내의 버퍼로부터 게임 프로그램측에 공급되고, 게임 프로그램에 의해 실행되는 처리에 있어서, 채팅 화상이 게임 화상에 받아들여진 상태로 프레임 버퍼(53)에 묘화된다. 즉, 상기 처리가 AV 채팅 프로그램에 의존할 경우, 채팅 화상은 게임 화상에 덮어쓰여 묘화되고, 게임 프로그램에 의존할 경우, 채팅 화상은 게임 화상에 받아들여져 게임 화상의 일부로서 묘화된다.
또한, 참가 인원수 및 해상도에 따른 복수의 표시양태 패턴(상기 중심좌표의 위치나 폭 및 높이나 X축 주위의 회전량이나 Y축 주위 회전량이나 Z축 주위의 회전 량이나 투과도를 각각 규정하는 각 변수)은 클라이언트 단말(1A)의 메인 메모리에 미리 기억시켜도 된다. 이 경우, 게임 프로그램(다른 컨텐츠)이 포함하는 표시양태 지정정보는 표시양태 패턴을 특정하는 정보이면 된다.
<변형예 5>
상술한 실시형태에서는 각 클라이언트 장치(1)에 비디오 카메라(11)가 접속되고, AV 채팅의 참가 유저의 각 클라이언트 장치(1)는 비디오 카메라(11)가 촬상한 영상에 따른 영상 데이터를 다른 참가 유저의 클라이언트 장치(1)에 송신하는 구성으로 하였다. 그러나 비디오 카메라(11)가 접속되지 않은 클라이언트 장치(1)(미접속 장치라고 함)가 AV 채팅을 행하는 통신 그룹에 참가할 경우, 마이크로폰(12)에 입력된 음성에 따른 음성 데이터를 상기 통신 그룹에 속하는 다른 클라이언트 장치(1)에 송신함으로써 AV 채팅에 음성에 의해 참가한다. 또한, 상기 통신 그룹에 속하는 각 클라이언트 장치(1)는 미접속 장치의 유저의 유저 정보로서 기억되어 있는 아바타를 유저의 화상으로서 채팅 화면에 표시시키도록 해도 된다.
또한, 상술한 실시형태에서는 클라이언트 장치(1)는 자신의 장치에 접속된 비디오 카메라(11)에 의해 촬상된 영상도 채팅 화면에 표시시키도록 구성하였다. 그러나 이 영상은 이것을 채팅 화면에 표시시키지 않도록 구성해도 된다.
<변형예 6>
상술한 실시형태에서는, 컨트롤러(20)와 클라이언트 장치(1)는 케이블(13)을 통해 접속되어 통신을 행하는 구성으로 하였다. 그러나 컨트롤러(20)와 클라이언트 장치(1)는 케이블을 통하지 않고, 예를 들면 블루투스(등록상표) 등의 통신 방식에 의해 무선통신을 행하는 구성이어도 된다.
또한, 각 클라이언트 장치(1)끼리, 또는 클라이언트 장치(1)와 서버 장치(2)가 행하는 통신에 대해서도 유선통신이어도 되고 무선통신이어도 된다. 또한, 각 클라이언트 장치(1)와 서버 장치(2)는 인터넷(30)을 통해 접속되는 구성으로 하였지만, 다른 네트워크를 통해 접속되는 형태이어도 된다.
또한, 상술한 실시형태에서는 클라이언트 장치(1)와 모니터 장치(10), 비디오 카메라(11), 마이크로폰(12) 및 컨트롤러(20)를 각각 별체로 구성하도록 했지만, 이들 중 적어도 1개를 클라이언트 장치(1)와 일체적으로 형성하도록 해도 된다. 또한, 스피커(63)는 클라이언트 장치(1)에 내장되는 구성으로 하였지만, 이것을 클라이언트 장치(1)와 별체로 구성하고, 유선 또는 무선에 의해 클라이언트 장치(1)에 접속시키는 구성으로 해도 된다.
또한, 복수의 클라이언트 장치(1)가 통신을 행하는 경우의 접속 형태는 상술 한 바와 같이 풀 메쉬형이 아닌 다른 접속 형태이어도 된다.
또한, 마스터가 되는 클라이언트 장치(1)의 선정은 임의이어도 되고, 예를 들면 랜덤 넘버(random number)를 이용함으로써 행하도록 구성해도 되며, 또한 소정의 방법에 따라 행하도록 구성해도 된다. 또한, 마스터가 되는 클라이언트 장치를 선정하지 않고, 각 클라이언트 장치(1)가 AV 채팅에 참가하는 유저의 정보 및 상기 유저의 클라이언트 장치(1)의 정보를 관리하도록 구성해도 된다. 또한, 예를 들면 상술한 서버 장치(2)를 마스터로서 기능시키도록 해도 된다.
또한, 상술한 AV 채팅 시스템에서는 마스터가 되는 클라이언트 장치(1A)에서 의 유저(A)로부터 초대됨으로써, 다른 유저는 상술한 AV 채팅에 참가하도록 구성하였다. 그러나 본 발명에서는 이에 한하지 않고, 유저의 지시에 따라 클라이언트 장치(1)가 AV 채팅을 행하기 위한 채팅룸을 가상적으로 생성하여, 상기 채팅룸에 참가를 희망하는 다른 임의의 유저가 AV 채팅을 행할 수 있도록 구성해도 된다. 예를 들면, 다른 유저가 자신의 클라이언트 장치(1)에서 소정의 로그인 조작을 행함으로써, 상기 클라이언트 장치(1)가 채팅룸을 생성한 클라이언트 장치에 접속된다. 이로 인해, 다른 유저는 상기 채팅룸에 가상적으로 입실하여 AV 채팅을 행할 수 있다.
<변형예 7>
또한, 1개의 클라이언트 장치(1)가 속할 수 있는 통신 그룹은 1개에 한정되지 않으며 복수이어도 된다. 즉, 1개의 클라이언트 장치(1)에서 유저는 AV 채팅을 행하는 다른 복수의 통신 그룹에 참가하여 각각의 통신 그룹에서 AV 채팅을 행할 수 있도록 해도 된다. 이 경우, 상기 클라이언트 장치(1)에서 유저가 컨트롤러(20)를 조작하여 채팅 화면의 전환을 지시하면, 하나의 통신 그룹에서의 채팅 화면과, 다른 하나의 통신 그룹에서의 채팅 화면을 전환하도록 한다. 그리고 클라이언트 장치(1)는 모니터 장치(10)에 채팅 화면을 표시시킨 통신 그룹에 속하는 다른 클라이언트 장치(1)와 채팅 스트리밍 데이터의 송수신을 행한다. 이때, 클라이언트 장치(1)는 다른 통신 그룹에 속하는 클라이언트 장치(1)와는 채팅 스트리밍 데이터의 송수신을 행하지 않는다. 이러한 구성에서는, 예를 들면 채팅 화면에 표시시키는 참가 유저의 영상에 대응지어 인디케이터(indicator)를 표시시키고, 데이터의 송수 신을 행하는 경우와 그렇지 않은 경우로, 상기 인디케이터의 색을 변경하도록 해도 된다.
상술한 각 실시형태의 설명은 본 발명의 일례이다. 이로 인해 본 발명은 상술한 각 실시형태에 한정되지 않으며, 본 발명에 따른 기술적 사상을 일탈하지 않는 범위라면 상술한 실시형태 이외에도 다양한 변경이 가능한 것은 물론이다.
본 발명은 소정의 통신 그룹에 속하는 복수의 통신 장치간에 서로 영상 데이터 및 음성 데이터를 송수신하는 통신 시스템에 이용하기에 적합하다.

Claims (9)

  1. 네트워크에 접속되는 복수의 통신 장치에 의해 형성된 소정의 통신 그룹에 속하는 1개의 통신 장치가, 촬상 수단에 의해 촬상된 영상에 따른 영상 데이터 및 음성입력 수단에 의해 입력된 음성에 따른 음성 데이터를 상기 통신 그룹에 속하는 다른 통신 장치에 송신하는 동시에, 상기 다른 통신 장치로부터 송신된 영상 데이터 및 음성 데이터를 수신하여 상기 영상 데이터에 의해 표시되는 영상을 표시 수단에 표시시키는 동시에, 음성 데이터에 의해 나타내지는 음성을 음성출력 수단에 출력시키는 통신 시스템에 있어서,
    상기 통신 그룹에 속하는 통신 장치의 수를 판별하는 판별 수단과,
    상기 판별 수단이 판별한 수에 따라 상기 영상 데이터의 송신 품질을 결정하는 결정 수단을 포함하고,
    상기 복수의 통신 장치는 상기 결정 수단이 결정한 송신 품질에 따라 상기 영상 데이터를 송신하는 것을 특징으로 하는 통신 시스템.
  2. 제1항에 있어서,
    상기 송신 품질은 상기 영상 데이터의 해상도 및 송신 빈도 중 적어도 한쪽인 것을 특징으로 하는 통신 시스템.
  3. 제1항에 있어서,
    상기 결정 수단은 상기 통신 장치에서의 처리 환경 및 접속 환경 중 적어도 1개에 따라 상기 영상 데이터의 송신 품질을 결정하는 것을 특징으로 하는 통신 시스템.
  4. 제1항에 있어서,
    상기 통신 장치는 상기 영상 데이터에 의해 표시되는 영상과 함께, 상기 촬상 수단에 의해 촬상된 영상을 상기 표시 수단에 표시시키는 것을 특징으로 하는 통신 시스템.
  5. 제1항에 있어서,
    상기 통신 장치는,
    컨텐츠를 재생하는 재생 수단과,
    상기 재생 수단이 컨텐츠를 재생하고 있는지 여부에 따라, 상기 촬상 수단에 의해 촬상된 영상 및 상기 다른 통신 장치로부터 송신된 영상 데이터에 따른 영상 중 적어도 한쪽을 상기 표시 수단에 표시시킬 때의 표시 사이즈를 제어하는 표시제어 수단을 포함하는 것을 특징으로 하는 통신 시스템.
  6. 제1항에 있어서,
    상기 통신 장치는,
    영상의 표시위치를 지정하는 표시위치 지정정보를 포함하는 컨텐츠를 재생하 는 재생 수단과,
    상기 촬상 수단에 의해 촬상된 영상 및 상기 다른 통신 장치로부터 송신된 영상 데이터에 따른 영상 중 적어도 한쪽을 상기 재생 수단에 의한 컨텐츠의 재생 중에 상기 표시 수단에 표시시키는 경우, 상기 컨텐츠의 재생에 따라 상기 재생 수단이 읽어낸 상기 표시위치 지정정보에 의해 지정되는 표시위치에 상기 영상을 표시시키는 표시제어 수단을 포함하는 것을 특징으로 하는 통신 시스템.
  7. 네트워크에 접속되는 복수의 통신 장치에 의해 형성된 소정의 통신 그룹에 속하는 1개의 통신 장치로서,
    촬상 수단에 의해 촬상된 영상에 따른 영상 데이터 및 음성입력 수단에 의해 입력된 음성에 따른 음성 데이터를 상기 통신 그룹에 속하는 다른 통신 장치에 송신하는 동시에, 상기 다른 통신 장치로부터 송신된 영상 데이터 및 음성 데이터를 수신하는 통신 수단과,
    상기 통신 그룹에 속하는 통신 장치의 수를 판별하는 판별 수단과,
    상기 판별 수단이 판별한 수에 따라 상기 영상 데이터의 송신 품질을 결정하는 결정 수단과,
    상기 결정 수단이 결정한 송신 품질에 따라 상기 영상 데이터를 송신하는 것을 요구하는 품질요구 데이터를 상기 소정의 통신 그룹에 속하는 다른 통신 장치에 송신하는 품질통지 수단을 포함하는 것을 특징으로 하는 통신 장치.
  8. 네트워크에 접속되는 복수의 통신 장치에 의해 형성된 소정의 통신 그룹에 속하는 1개의 통신 장치를 가지는 컴퓨터에 실행시키기 위한 프로그램으로서,
    촬상 수단에 의해 촬상된 영상에 따른 영상 데이터 및 음성입력 수단에 의해 입력된 음성에 따른 음성 데이터를 상기 통신 그룹에 속하는 다른 통신 장치에 송신하는 송신 단계와,
    상기 다른 통신 장치로부터 송신된 영상 데이터 및 음성 데이터를 수신하는 수신 단계와,
    상기 통신 그룹에 속하는 통신 장치의 수를 판별하는 판별 단계와,
    상기 판별 단계에서 판별한 수에 따라 상기 영상 데이터의 송신 품질을 결정하는 결정 단계와,
    상기 결정 단계에서 결정한 송신 품질에 따라 상기 영상 데이터를 송신하는 것을 요구하는 송신 요구 데이터를 상기 소정의 통신 그룹에 속하는 다른 통신 장치에 송신하는 품질통지 단계를 상기 컴퓨터에 실행시키기 위한 통신 프로그램.
  9. 제8항에 기재된 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체.
KR1020087026601A 2006-05-02 2007-04-27 통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체 KR101001029B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JPJP-P-2006-128734 2006-05-02
JP2006128734 2006-05-02
JPJP-P-2006-306054 2006-11-10
JP2006306054A JP4767817B2 (ja) 2006-05-02 2006-11-10 通信システム、通信装置、通信プログラム、通信プログラムを記憶したコンピュータ読み取り可能な記憶媒体

Publications (2)

Publication Number Publication Date
KR20080109055A true KR20080109055A (ko) 2008-12-16
KR101001029B1 KR101001029B1 (ko) 2010-12-14

Family

ID=38667734

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020087026601A KR101001029B1 (ko) 2006-05-02 2007-04-27 통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체

Country Status (4)

Country Link
US (1) US8621088B2 (ko)
JP (1) JP4767817B2 (ko)
KR (1) KR101001029B1 (ko)
WO (1) WO2007129625A1 (ko)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8868448B2 (en) 2000-10-26 2014-10-21 Liveperson, Inc. Systems and methods to facilitate selling of products and services
US9819561B2 (en) 2000-10-26 2017-11-14 Liveperson, Inc. System and methods for facilitating object assignments
US8738732B2 (en) 2005-09-14 2014-05-27 Liveperson, Inc. System and method for performing follow up based on user interactions
US9432468B2 (en) 2005-09-14 2016-08-30 Liveperson, Inc. System and method for design and dynamic generation of a web page
US8274543B2 (en) * 2007-07-02 2012-09-25 Polycom, Inc. Tag-aware multipoint switching for conferencing
KR102597520B1 (ko) * 2007-09-26 2023-11-06 에이큐 미디어 인크 오디오-비주얼 내비게이션 및 통신
JP5448344B2 (ja) * 2008-01-08 2014-03-19 株式会社Ｎｔｔドコモ 情報処理装置およびプログラム
FR2929061B1 (fr) * 2008-03-20 2012-11-30 Alcatel Lucent Procede pour generer un ensemble d'identifiants d'utilisateurs associes a des informations de presentation d'utilisateurs,procede pour l'acces a ces informations, serveur et terminal associes
US8799200B2 (en) 2008-07-25 2014-08-05 Liveperson, Inc. Method and system for creating a predictive model for targeting webpage to a surfer
US8762313B2 (en) 2008-07-25 2014-06-24 Liveperson, Inc. Method and system for creating a predictive model for targeting web-page to a surfer
US8805844B2 (en) 2008-08-04 2014-08-12 Liveperson, Inc. Expert search
JP4435251B2 (ja) 2008-08-29 2010-03-17 株式会社東芝 映像表示装置、映像再生装置、映像表示方法および映像再生方法
US9892417B2 (en) 2008-10-29 2018-02-13 Liveperson, Inc. System and method for applying tracing tools for network locations
KR101717090B1 (ko) * 2009-06-09 2017-03-20 삼성전자주식회사 사용자 정보 제공방법 및 이를 적용한 디바이스
CN102474671B (zh) * 2009-08-12 2015-11-25 索尼计算机娱乐公司 信息处理系统及信息处理装置
EP2556449A1 (en) 2010-04-07 2013-02-13 Liveperson Inc. System and method for dynamically enabling customized web content and applications
JP5447207B2 (ja) * 2010-05-27 2014-03-19 キヤノンマーケティングジャパン株式会社 ウェブ会議システム、情報処理装置、およびその制御方法、プログラム
JP5339298B2 (ja) * 2010-05-27 2013-11-13 キヤノンマーケティングジャパン株式会社 情報処理装置、およびその制御方法、情報処理システム、プログラム、記録媒体。
JP5482495B2 (ja) * 2010-06-18 2014-05-07 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP5740972B2 (ja) * 2010-09-30 2015-07-01 ソニー株式会社 情報処理装置および情報処理方法
JP5626878B2 (ja) * 2010-10-20 2014-11-19 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 ビューイングシステム、携帯端末、サーバ、ビューイング方法
WO2012077392A1 (ja) * 2010-12-10 2012-06-14 三菱電機株式会社 マルチ画面表示システム
US9350598B2 (en) 2010-12-14 2016-05-24 Liveperson, Inc. Authentication of service requests using a communications initiation feature
US8918465B2 (en) 2010-12-14 2014-12-23 Liveperson, Inc. Authentication of service requests initiated from a social networking site
JP2012181704A (ja) * 2011-03-01 2012-09-20 Sony Computer Entertainment Inc 情報処理装置および情報処理方法
US8943002B2 (en) 2012-02-10 2015-01-27 Liveperson, Inc. Analytics driven engagement
US8805941B2 (en) 2012-03-06 2014-08-12 Liveperson, Inc. Occasionally-connected computing interface
US9563336B2 (en) 2012-04-26 2017-02-07 Liveperson, Inc. Dynamic user interface customization
US9672196B2 (en) 2012-05-15 2017-06-06 Liveperson, Inc. Methods and systems for presenting specialized content using campaign metrics
JP6092546B2 (ja) * 2012-08-22 2017-03-08 キヤノン株式会社 データ配信システムおよびその制御方法
US9270937B2 (en) 2013-12-26 2016-02-23 OnCam Inc. Real time stream provisioning infrastructure
US9264662B2 (en) 2013-12-30 2016-02-16 OnCam Inc. Chat preauthorization
CN106416149B (zh) 2014-03-31 2020-08-28 宝利通公司 用于优化多参与者全网状对等视频会话中的带宽利用的方法和系统
US11386442B2 (en) 2014-03-31 2022-07-12 Liveperson, Inc. Online behavioral predictor
WO2015184410A1 (en) 2014-05-30 2015-12-03 Highfive Technologies, Inc. Domain trusted video network
US20150350604A1 (en) * 2014-05-30 2015-12-03 Highfive Technologies, Inc. Method and system for multiparty video conferencing
CA2988120A1 (en) 2015-06-02 2016-12-08 Liveperson, Inc. Dynamic communication routing based on consistency weighting and routing rules
US10278065B2 (en) 2016-08-14 2019-04-30 Liveperson, Inc. Systems and methods for real-time remote control of mobile applications
WO2020090109A1 (ja) * 2018-11-02 2020-05-07 Ｎｅｃディスプレイソリューションズ株式会社 画像表示装置及び画像伝送方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0670040A (ja) 1992-08-19 1994-03-11 Fujitsu Ltd 多地点テレビ会議システムにおける表示形態変更方式
US5574934A (en) * 1993-11-24 1996-11-12 Intel Corporation Preemptive priority-based transmission of signals using virtual channels
CA2186795A1 (en) * 1995-11-17 1997-05-18 Cormac John Sreenan Resource management system for a broadband multipoint bridge
JPH10164533A (ja) 1996-11-26 1998-06-19 Canon Inc 画像通信方法及び装置
US6522352B1 (en) * 1998-06-22 2003-02-18 Motorola, Inc. Self-contained wireless camera device, wireless camera system and method
US7103846B1 (en) * 1999-06-02 2006-09-05 International Business Machines Corporation Collaborative application with indicator of concurrent users
JP4359968B2 (ja) 1999-08-19 2009-11-11 ソニー株式会社 通信装置および方法、並びに記録媒体
US20020002586A1 (en) * 2000-02-08 2002-01-03 Howard Rafal Methods and apparatus for creating and hosting customized virtual parties via the internet
JP2003153223A (ja) * 2001-11-13 2003-05-23 Nippon Telegr & Teleph Corp <Ntt> コラボレーションサービス提供システムと方法およびプログラム
EP2469716B1 (en) * 2002-06-26 2013-12-04 Yahoo! Inc. System and method for communicating images between intercommunicating users
US20040015551A1 (en) * 2002-07-18 2004-01-22 Thornton Barry W. System of co-located computers with content and/or communications distribution
US7627629B1 (en) * 2002-10-30 2009-12-01 Cisco Technology, Inc. Method and apparatus for multipoint conferencing
JP4053869B2 (ja) * 2002-12-05 2008-02-27 エヌ・ティ・ティ・コミュニケーションズ株式会社 ビデオ会議システム
US20040119814A1 (en) * 2002-12-20 2004-06-24 Clisham Allister B. Video conferencing system and method
US8117252B2 (en) * 2002-12-26 2012-02-14 Schaff Glen D Video-monitor/recording/playback system
DE10324422B4 (de) * 2003-05-28 2007-02-08 Infineon Technologies Ag Verfahren und Vorrichtung zur Abbildung eines abzubildenden Eingangswertes auf einen verschlüsselten abgebildeten Ausgangswert
JP2005020467A (ja) * 2003-06-26 2005-01-20 Matsushita Electric Ind Co Ltd Ｔｖ会議装置
JP4520229B2 (ja) * 2003-07-01 2010-08-04 株式会社エヌ・ティ・ティ・ドコモ 通信装置およびプログラム
US20050120128A1 (en) * 2003-12-02 2005-06-02 Wilife, Inc. Method and system of bandwidth management for streaming data
US7773581B2 (en) * 2004-03-19 2010-08-10 Ericsson Ab Method and apparatus for conferencing with bandwidth control
JP4655190B2 (ja) 2004-08-06 2011-03-23 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
US20060075055A1 (en) * 2004-10-06 2006-04-06 Andrew Littlefield System and method for integration of instant messaging and virtual environment clients
US7587454B2 (en) * 2004-12-08 2009-09-08 Nice Systems Ltd. Video streaming parameter optimization and QoS
US8861701B2 (en) * 2005-04-28 2014-10-14 Apple Inc. Multi-participant conference adjustments
US8892629B2 (en) * 2005-09-01 2014-11-18 Samsung Electronics Co., Ltd. System and method for displaying a virtual meeting room
US20070083666A1 (en) * 2005-10-12 2007-04-12 First Data Corporation Bandwidth management of multimedia transmission over networks

Also Published As

Publication number Publication date
US8621088B2 (en) 2013-12-31
KR101001029B1 (ko) 2010-12-14
JP2007325248A (ja) 2007-12-13
WO2007129625A1 (ja) 2007-11-15
US20090222572A1 (en) 2009-09-03
JP4767817B2 (ja) 2011-09-07

Similar Documents

Publication Publication Date Title
KR101001029B1 (ko) 통신 시스템, 통신 장치, 통신 프로그램, 통신 프로그램을 기억한 컴퓨터로 읽을 수 있는 기억매체
US8751944B2 (en) Communication system, communication apparatus, communication program, and computer-readable storage medium stored with the communication program
TWI608856B (zh) 資訊處理裝置、成像裝置、方法及程式
US8725819B2 (en) Chat system, server device, chat method, chat execution program, storage medium stored with chat execution program, information processing unit, image display method, image processing program, storage medium stored with image processing program
US8622840B2 (en) Information processing device and information processing method
JP6612019B2 (ja) 情報処理装置、制御データ送信方法および情報処理システム
US20070126874A1 (en) Image processing device, image processing method, and information storage medium
US20100125633A1 (en) On-line conversation system, on-line conversation server, on-line conversation control method, and information storage medium
JP2001160154A (ja) 仮想空間通信システムにおけるアバタ表示装置、アバタ表示方法および記憶媒体
JP4897404B2 (ja) 映像表示システム、映像表示装置、その制御方法及びプログラム
JP5162508B2 (ja) クライアント装置、画像表示方法、画像処理プログラム、画像処理プログラムが記憶された記憶媒体
JP6688378B1 (ja) コンテンツ配信システム、配信装置、受信装置及びプログラム
JP7441735B2 (ja) 配信サーバおよび画像配信方法
WO2017026170A1 (ja) クライアント機器、サーバ機器、表示処理方法、及び、データ配信方法
JP2004089555A (ja) ゲーム装置、ゲーム制御プログラムおよびそのプログラムが記録された記録媒体
EP4329906A1 (en) Computer-implemented method and system for generating visual adjustment in a computer-implemented interactive entertainment environment
JP2016042877A (ja) 情報処理装置、コンテンツ画像の共有制御方法および情報処理システム
JP2016509486A (ja) ネットワークを介して送信するためのビデオゲーム画面画像の生成及び符号化を行う方法及びシステム
JP4745009B2 (ja) コミュニケーションシステム、コミュニケーション端末装置、コミュニケーション端末装置の制御方法及びプログラム
US20240152311A1 (en) Information processing system, information processing method, and computer program
JP2003271277A (ja) 情報処理装置及び情報入力方法
JP7018484B2 (ja) 情報処理装置およびゲーム画像表示方法
JP6578079B1 (ja) 端末、サーバおよびプログラム
JP2022106910A (ja) 処理方法およびプログラム
JP2023166047A (ja) 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131118

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20141120

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151118

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20161122

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20171120

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20181121

Year of fee payment: 9