JP2001306477A - 情報処理装置および方法、並びに格納媒体 - Google Patents
情報処理装置および方法、並びに格納媒体Info
- Publication number
- JP2001306477A JP2001306477A JP2000121694A JP2000121694A JP2001306477A JP 2001306477 A JP2001306477 A JP 2001306477A JP 2000121694 A JP2000121694 A JP 2000121694A JP 2000121694 A JP2000121694 A JP 2000121694A JP 2001306477 A JP2001306477 A JP 2001306477A
- Authority
- JP
- Japan
- Prior art keywords
- server
- correspondence table
- information processing
- avatar
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1827—Network arrangements for conference optimisation or adaptation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/75—Indicating network or usage conditions on the user display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/40—Network security protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Economics (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Data Mining & Analysis (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Transfer Between Computers (AREA)
- Processing Or Creating Images (AREA)
Abstract
ら、例えば、「こんにちは」のチャットメッセージが入
力されると、その文字列に対応する音が、対応表から検
索される。対応表から検索された音が合成され、そのア
バタの音声として出力される。
Description
方法、並びに格納媒体に関し、特に、共有仮想空間にお
いて活動するアバタに対して、チャット中に、音声を出
力させるようにした情報処理装置および方法、並びに格
納媒体に関する。
Serve(商標)などのように、複数の利用者が自らのパー
ソナルコンピュータを、モデムおよび公衆電話回線網を
介してセンターのホストコンピュータに接続し、所定の
通信プロトコルに基づいてホストコンピュータにアクセ
スする、いわゆるパソコン通信サービスの分野において
は、Habitat(商標)と呼ばれるサイバースペースのサ
ービスが知られている。
年から開発が始められ、米国商業ネットワークであるQu
antumLink社で約3年間運用された後、1990年2月に富士
通Habitat(商標)としてNIFTY-Serveでそのサービスが
開始されたものである。このHabitatにおいては、2次元
グラフィックスで描画された「ポピュロポリス(Populo
polis)」と呼ばれる仮想の都市に、アバタ(avatar;
インド神話に登場する神の化身)と呼ばれるユーザの分
身を送り込み、ユーザ同士がチャット(Chat;文字の入
力と表示によるテキストベースでのリアルタイムの対
話)などを行うことができる。このHabitatの更に詳細
な説明については、サイバースペース,マイケル・ベネ
ディクト編,1994年3月20日初版発行,NTT出版 ISBN
4−87188−265−9C0010(原著;Cyberspace:First Ste
ps ,Michael Benedikt,ed. 1991,MIT PressCambrige,MA
ISBN0−262−02327−X)第282頁乃至第307頁を参照さ
れたい。
ている従来のサイバースペースシステムにおいては、仮
想的な街並みや部屋の内部の様子が2次元グラフィック
スで描画されており、アバタを奥行きまたは手前方向へ
移動させる場合、単にアバタを2次元グラフィックスの
背景上で上下に移動させるだけであり、仮想空間内での
歩行や移動を疑似体験させるには表示の上での表現力が
乏しかった。また、自分の分身であるアバタと他人のア
バタが表示された仮想空間を、第3者の視点で見ること
になるため、この点においても、疑似体験の感覚が損な
われるものであった。
ているように、仮想空間を3次元グラフィックスで表示
し、ユーザがアバタの視点で自由に歩き回れる機能が、
VRML(Virtual Reality Modeling Language)と呼ばれる3
次元グラフィクス・データの記述言語を利用することに
よって実現されている。また、ユーザの代理となるアバ
タを用いてチャットを行う種々のサイバースペースの考
察に関しては、日経エレクトロニクス1996.9.9(no.670)
の第151頁乃至159頁に記載されている。
したような仮想空間で活動するアバタや仮想ペットに所
定の動作をさせる場合、ユーザに、予め用意されている
ボタンを選択させるようにしていた。
934号公報に、仮想空間において、アバタに所定の動
作を実行させるために、図1に示されるような複数のボ
タンを設けることを提案している。
ザにより操作されると、アバタが仮想ペットを呼ぶ行為
を実行する。寝かすボタンBが操作されると、アバタ
は、仮想ペットを寝かす行為を行う。
バタは、仮想ペットに対して食事を与える行為を行う。
笑って褒めるボタンDが操作されると、アバタは仮想ペ
ットに笑い掛けて褒めてあげる行為を行う。鬼ごっこで
遊ぶボタンEが操作されると、アバタは、仮想ペットと
鬼ごっこをして遊ぶ行為を行う。
されると、アバタは、仮想ペットを叱り、躾を行う行為
を行う。ブラッシングできれいにするボタンGが操作さ
れると、アバタは、仮想ペットをブラッシングし、きれ
いにする行為を行う。
の動作をさせる場合に、その動作毎にボタンを設けるよ
うにすると、動作の数を増加するには、ボタンの数も増
加する必要が生じ、ユーザは、多くのボタンの中から1
つのボタンを探さなければならず、アバタに所定の動作
を迅速に実行させることが困難になる課題があった。
のチャットの最中に行われることが多いのであるが、こ
のような場合、キーボードを利用して、ユーザがチャッ
トのための文字列を入力している際に、アバタに所定の
行為を実行させるためのボタンを探して操作する必要が
生じ、ユーザは、手をキーボードから離す必要がある。
その結果、円滑なテキスト入力の妨げとなる課題があっ
た。
たものであり、チャットを妨げることなく、迅速にアバ
タに所定の動作を実行させることができるようにするも
のである。
は、他の情報処理装置とともに、ネットワークを介して
サーバに接続され、共有仮想空間の提供を受ける情報処
理装置において、共有仮想空間において活動する、自分
自身の分身としてのアバタを介して行うチャットの文字
列を入力する入力手段と、入力手段で入力された文字列
を文字データとしてサーバに送信する送信手段と、サー
バから伝送されてきた文字データを音声データに変換す
る変換手段と、変換手段により変換された音声データを
音声として出力する出力手段とを備えることを特徴とす
る。
データとが互いに対応付けられた対応表を記憶する対応
表記憶手段と、この対応表記憶手段を参照し、サーバか
ら伝送されてきた文字データを、対応する音声データに
変換する処理手段とから構成させるようにすることがで
きる。
応表記憶手段に記憶されている対応表の種別を表すIDを
サーバに伝送し、このIDに応じてサーバから最新の対応
表が伝送されてきた場合に、この最新の対応表を対応表
記憶手段に記憶させる対応表更新手段をさらに設けさせ
るようにすることができる。
置とともに、ネットワークを介してサーバに接続され、
共有仮想空間の提供を受ける情報処理装置の情報処理方
法において、共有仮想空間において活動する、自分自身
の分身としてのアバタを介して行うチャットの文字列を
入力する入力ステップと、入力手段で入力された文字列
を文字データとしてサーバに送信する送信ステップと、
サーバから伝送されてきた文字データを音声データに変
換する変換ステップと、変換ステップの処理により変換
された音声データを音声として出力する出力ステップと
を含むことを特徴とする。
報処理装置とともに、ネットワークを介してサーバに接
続され、共有仮想空間の提供を受ける情報処理装置のプ
ログラムにおいて、共有仮想空間において活動する、自
分自身の分身としてのアバタを介して行うチャットの文
字列を入力する入力ステップと、入力ステップで入力さ
れた文字列を文字データとしてサーバに送信する送信ス
テップと、サーバから伝送されてきた文字データを音声
データに変換する変換ステップと、変換ステップの処理
により変換された音声データを音声として出力する出力
ステップとを含むことを特徴とする。
格納媒体のプログラムにおいては、チャットに含まれる
文字列が音声に変換され、出力される。
施の形態について説明する。
ンピュータネットワークであるインターネット(The Int
ernet)において、様々な情報を提供するWWW(world wide
web)の枠組みを利用して3次元的な情報を統一的に扱
うことができる記述言語であるVRML(virtual reality m
odeling language)について説明する。
提供システムとして、スイスのCERN(European Center
for Nuclear Research:欧州核物理学研究所)が開発し
たWWWが知られている。これは、テキスト、画像、音声
などの情報をハイパーテキスト形式で閲覧できるように
したもので、HTTP(Hyper Text Transfer Protocol)と呼
ばれるプロトコルに基づいて、WWWサーバに格納された
情報をパーソナルコンピュータなどの端末に非同期転送
するものである。
Text Transfer Protocol、ハイパーテキスト転送プロト
コル)と呼ばれるサーバ・ソフトウエアとハイパーテキ
スト情報が格納されるHTMLファイルによって構成され
る。なお、デーモンとは、UNI(登録商標)X上で作
業を行う場合、バックグラウンドで管理や処理を実行す
るプログラムを意味する。ハイパーテキスト情報は、HT
ML(HyperText Markup Language、ハイパーテキスト記
述言語)と呼ばれる記述言語によって表現される。HTML
によるハイパーテキストの記述は、「<」と「>」で囲
まれたタグと呼ばれる書式指定によって文章の論理的な
構造が表現される。他の情報とのリンクについての記述
は、アンカーと呼ばれるリンク情報によって行われる。
アンカーによって情報が存在する所を指定する際には、
URL(Uniform Resource Locator)が用いられる。
nsmission Control Protocol/Internet Protocol)ネッ
トワーク上において転送するためのプロトコルがHTTPで
ある。クライアントからの情報の要求をWWWサーバに伝
え、HTMLファイルのハイパーテキスト情報をクライアン
トに転送する機能をもっている。
いるのが、WWWブラウザ(ブラウザとは閲覧するという
意味)と呼ばれる、Netscape Navigator(米国Netscape
Communications社の商標)をはじめとするクライアン
ト・ソフトウエアである。
世界規模で広がるインターネット上のWWWサーバ上のフ
ァイル、いわゆるホームページを閲覧することができ、
いわゆるネットサーフィンと呼ばれるように、リンクが
張られたホームページを次々と辿って、多種多様なWWW
の情報ソースにアクセスすることができる。
の記述や、3次元グラフィックスで描画されたオブジェ
クトに対してハイパーテキストのリンクの設定を可能と
し、これらのリンクをたどりながらWWWサーバを次々と
アクセスできるようにしたVRMLと呼ばれる3次元グラフ
ィックス記述言語で記述された3次元空間を表示するVR
MLブラウザが開発されている。
る:3次元電脳空間の構築とブラウジング〔マーク・ペ
ッシ著,松田晃一・蒲地輝尚・竹内彰一・本田康晃・暦
本純一・石川真之・宮下健・原和弘訳,1996年3月
25日初版発行,プレンティスホール出版ISBN4-931356
-37-0〕(原著;VRML:Browsing & Building Cyberspac
e,Mark Pesce, 1995 New Readers Publishing ISBN 1-5
6205-498-8))」、および「VRMLの最新動向とCybe
rPassage〔松田晃一・本田康晃著、bit(共
立出版)/1996 Vol.28 No.7 pp29 乃至pp36, No.8 pp5
7 乃至pp65, No.9pp29 乃至pp36, No.10 pp49乃至pp5
8〕」等の文献に記載されている。
ファイルを、サーバからユーザ側のパーソナルコンピュ
ータに転送し、ブラウザで処理させると、VRMLデータか
ら3次元仮想現実空間が演算され、ユーザ側のパーソナ
ルコンピュータのディスプレイに、3次元仮想現実空間
が表示される。
テム構成図である。
ザ及びWWWブラウザがインストールされ、これらが動作
しているクライアントPC(パーソナルコンピュータ)で
あり、IP(インターネット接続サービスプロバイダ)
4,5,6を介してインターネット7と接続されてい
る。
されたLAN(Local Area Network)9には、WWWサーバ1
0、WLS(World Location Server)11、共有サーバ1
2、AO(Application Object)サーバ13,14、メール
サーバ15、およびコミュニケーションサーバ16が接
続されている。これらの各サーバ10乃至16には、ハ
ードディスク(HDD)10a,10b,11a乃至16a
が、各々設けられている。
話回線網17を介して電話機18やファクシミリ19と
接続され、さらに、PHS(Personal Handyphone System)
サービスプロバイダ20を介してPHS端末23に無線接
続され、ポケットベルサービスプロバイダー21を介し
てポケットベル端末24に無線接続されている。
成を示すブロック図である。
U、31はVRML 2.0 fileや、Java(米国 Sun Microsy
stems社の商標)による共有仮想生命の成長スクリプトプ
ログラムやダンススクリプトプログラム等からなるVRML
コンテンツ、および文字列と音の対応表が格納されたHD
D、32はCD−ROMディスク33に格納されたVRMLコンテ
ンツを読み取るCD−ROMドライブ、34はBIOS(Basic In
put Output Systems)等が格納されたROM、35はマイク
ロフォン36と左右のスピーカ37,38が接続され、
音声合成処理を行うサウンド処理回路、39はインター
ネット7に接続するためのモデム、40はマウス41と
キーボード42が接続されたI/O(入出力)インターフェ
イス、43はVRAM44が内蔵されたグラフィックス処理
回路、45はCRTモニタ、46はRAMである。
(米国Micro Soft社の商標) の上で動作するWWWブラウザ
であるNetscape Navigatorと、Jav(登録商標)aイ
ンタプリタと、ソニー株式会社によって開発されたVRML
2.0ブラウザであるCommunity Place Browserが読み込
まれて、CPU30によって実行される状態となってい
る。
ラフィクス社によって開発され、無償公開されているVR
MLの構文解釈用ライブラリ(パーサ)であるQvLibと、英
国Criterion Software Ltd.のソフトウエア・レンダラ
であるRenderWare等、もしくはこれらと同等の機能を有
するパーサやレンダラが実装されている。
2に示すように、WWWブラウザとしてのNetscape Naviga
torとの間において、NCAPI(Netscape Client Applicat
ionPrograming Interface)(商標)に基づいて各種デ
ータの授受を行う。
を介してWWWサーバ10よりHTMLファイルとVRMLコンテ
ンツ(VRMLファイルとJavaによるスクリプトプログラム
とを含む)の供給を受けると、これらをローカルのHDD
31にそれぞれ記憶させる。Netscape Navigatorは、こ
のうちのHTMLファイルを処理してテキストや画像をCRT
モニタに表示する一方、 Community Place BrowserはVR
MLファイルを処理して3次元仮想空間をCRTモニタに表示
するとともに、Javaインタプリタによるスクリプトプロ
グラムの処理結果に応じて、3次元仮想空間内のオブジ
ェクトの挙動を変化させる。
トPC2やクライアントPC3も、クライアントPC1と同様
に構成されている。
いる。その基本的構成は、図3に示したクライアントPC
1の構成と同様である。図4においては、図3に示した
CPU30乃至ROM46に対応する構成が、CPU130乃至R
OM146として示されている。その基本的機能は、図3
において説明した場合と同様であるので、その説明は省
略する。
説明する。
ット経由でダウンロードしてから、1つの仮想空間を複
数のユーザで共有するマルチユーザ環境とするまでの手
順を図5乃至図7を参照して説明する。
に、WWWブラウザを用いて、VRMLコンテンツを提供して
いるWebサイトのホームページを閲覧する。この例で
は、 http://pc.sony.co.jp/sapari/ を閲覧してい
る。次に、番号2で示すように、クライアントPC1とク
ライアントPC2のユーザは、VRML 2.0fileと、VRML空
間内での自律的な動き(Behavior)を実現するためのス
クリプトプログラム(Javaによる成長スクリプトプログ
ラム)とからなるVRMLコンテンツを、それぞれダウンロ
ードする。
VRMLコンテンツをCD−ROMドライブ32で読み込んでも
良い。
1及びクライアントPC2は、それぞれにダウンロードさ
れ、一旦ローカルのHDD31に格納されたVRML 2.0file
を、VRML2.0ブラウザであるCommunity Place Browse
rが解釈・実行し、さらに番号3で示すように、VSCP(Vi
rtual Society Server Client Protocol)に基づいて、W
LS11に対して共有サーバ12のURLを問い合わせる。
このとき番号4で示すように、WLS11はHDD11aに格
納された共有サーバURL管理テーブルを参照して、クラ
イアントPC1及びクライアントPC2に対して、共有サー
バ12のURLを通知する。
ライアントPC1とクライアントPC2が、共有サーバ12
に接続する。その結果、番号5で示すように、この共有
サーバ12を介して共有3Dオブジェクトの位置や動きな
どに関する共有メッセージの送信が行われ、番号6で示
すように、その転送が行われ、マルチユーザ環境が実現
される。
ては、特開平9-81781号公報を参照されたい。
ェクトの挙動を管理するAOサーバ13は、VSAPに基づい
て共有サーバ12と仮想生命オブジェクトに関するデー
タのやり取りを行なう。
トPC1)が共有サーバ12にアクセスし、共有仮想空間
に参加する場合の処理ついて説明する。クライアントPC
1が共有サーバ12にアクセスしてきたとき、共有サー
バ12は、クライアントPC1にチャットを行わせるため
に、文字列と音の対応表のデータを保持させる。このた
め、共有サーバ12は、図8に示すフローチャートを実
行し、クライアントPCは、図9のフローチャートに示す
処理を実行する。
S1において、クライアントPC1がワールドにアクセス
してくるまで待機し、アクセスしてきたとき、ステップ
S2に進み、文字列と音の対応表をアクセスしてきたク
ライアントPC(いまの場合、クライアントPC1)が保持
しているか否かをそのクライアントPCに問い合わせる。
この文字列と音の対応表とは、例えば、図10に示すよ
うに、文字列とその文字列に対応する音の関係を記述す
る表である。図10の例においては、文字列「こんにち
は」に対応して、「音1」が記憶されており、文字列
「こんばんは」に対応して、「音2」が記憶されてい
る。以下同様に、文字列「やっほう」に対応して、「音
n」が記憶されている。
出された場合に、対応するアバタが発生する音のデータ
である。「音2」は、「こんばんは」の文字列が検出さ
れた場合に、対応するアバタが発生する音のデータであ
る。同様に、「音n」は、「やっほう」の文字列が検出
された場合に、対応するアバタが発生する音のデータで
ある。
のCPU30は、図9のステップS11において、共有サ
ーバ12から対応表の問い合わせを受けるまで待機し、
対応表の問い合わせを受けたとき、ステップS12に進
み、対応表を保持しているか否かを判定する。すなわ
ち、このとき、CPU30は、ハードディスクドライブ3
1に文字列と音の対応表が登録されているか否かを判定
し、登録されていない場合には、ステップS14に進
み、モデム39からインターネット7を介して、自分自
身が対応表を保持していないことを共有サーバ12に通
知する。
クドライブ31に文字列と音の対応表が登録されている
場合には、ステップS13に進み、登録されている対応
表のIDをハードディスクドライブ31から読み出し、モ
デム39からインターネット7を介して、共有サーバ1
2に通知する。
S2において、クライアントPCに対応表を保持している
か否かを問い合わせた後、ステップS3において、クラ
イアントPCからの応答を待機し、応答があったとき、そ
のクライアントPCが最新の対応表を持っているか否かを
判定する。
1から対応表のIDが送られてきたとき、そのIDを自分自
身がハードディスクドライブ131に記憶している対応
表のIDと比較し、クライアントPCのIDが古いIDである場
合には、ステップS4に進み、ハードディスク131に
記憶されている最新の対応表を読み出し、クライアント
PCに送信する。すなわち、このとき、CPU130は、ハ
ードディスクドライブ131から読み出した対応表のデ
ータを、モデム139からインターネット7を介して、
クライアントPC1に送信する。
を保持していないとの通知が受け取られた場合にも行わ
れる。
送られてきたIDが自分自身が有する最新の対応表のIDと
一致すると判定した場合、対応表を送信する必要がない
ので、ステップS1に戻り、それ以降の処理を繰り返
す。
S13、またはステップS14の処理の後、ステップS
15において、共有サーバ12から対応表のデータが送
られてきたか否かを判定し、送られてきた場合には、ス
テップS16に進み、送られてきた対応表をハードディ
スクドライブ31に記憶させる。所定時間内に対応表が
送られてこない場合には、ステップS16の処理はスキ
ップされる。
する3次元仮想現実空間(ワールド)に参加するクライ
アントPCには、図10に示すような、文字列と音の対応
表が予め記憶されることになる。
トPCのCRTモニタ45には、そのブラウザにより、図1
1に示すような画像が表示される。すなわち、画面の左
側には、ワールド表示ウィンドウ211が表示され、そ
こにクライアントPCが参加したワールドの画像が表示さ
れる。
は、マルチユーザウィンドウ212が表示される。その
最上部には、アクションボタン表示部213が表示され
る。このアクションボタン表示部213には、ワールド
内において活動する各ユーザに対応するペットに所定の
行為を行うとき、操作されるボタンが表示される。Hell
oボタンは、ペットに対して「こんにちは」の動作と言
葉を発するとき操作される。Byeボタンは、ペットに対
して「さようなら」の動作と言葉を発するとき操作され
る。Yesボタンは、ペットに対して「はい」の動作と言
葉を発するとき操作され、Noボタンは、ペットに対して
「いいえ」の動作と言葉を発するとき操作される。
作と言葉を発するとき操作される。Ummボタンは、ペッ
トに対して、悩む動作と言葉を発するとき操作される。
チャットログ表示部214が表示されている。このチャ
ットログ表示部214には、自分自身のアバタの周辺の
アバタ、或いは、ペットが行っているチャットが表示さ
れる。
ット表示部215が表示される。この入力チャット表示
部215には、自分自身がキーボード42を操作するこ
とで入力したチャットの文字列が表示される。
参照して、ワールドに参加した各ユーザが自分自身のア
バタを介して、ワールド内において行うチャットについ
て説明する。
図13は、クライアントPCの処理を表している。
のCPU130は、チャットメッセージがワールドに参加
しているクライアントPCから送られてくるまで待機し、
送られてきたとき、そのチャットメッセージを、そのチ
ャットを送信してきたユーザのアバタの近傍に位置する
他のアバタに対応するユーザのクライアントPCに転送す
る。共有サーバ12のCPU130は、以上の処理を繰り
返し実行する。
ップS51において、チャットメッセージの送信が指令
されたか否かを判定し、指令された場合、ステップS5
2に進み、チャットメッセージが入力されているか否か
を判定する。すなわち、図11に示した入力チャット表
示部215に、ユーザがキーボード42を操作すること
で、送信すべきチャットが入力され、表示されているか
否かが判定される。チャットメッセージが入力されてい
ない場合には、ステップS53に進み、CPU30は、エ
ラー処理を実行する。その後、処理はステップS51に
戻り、それ以降の処理が繰り返し実行される。
ージが入力され、入力チャット表示部215に表示され
ていると判定された場合、ステップS54に進み、CPU
30は、そのチャットメッセージを送信する処理を実行
する。すなわちCPU30は、入力されたチャットメッセ
ージをモデム39からインターネット7を介して共有サ
ーバ12に送信する。
ーチャートを参照して説明したように、近傍のアバタの
ユーザに転送される。
ルド200内に、ユーザAのアバタa、ユーザBのアバ
タb、ユーザCのアバタcが、同図に示す位置関係で活
動しているものとする。このとき、図15に示すよう
に、ユーザAのブラウザにより表示される画面には、自
分自身のアバタaを中心として、その右側にアバタb
が、その左側にアバタcが、それぞれ表示される。ま
た、ユーザBのブラウザにより表示される画面には、自
分自身のアバタbを中心として、その右側にアバタc
が、その左側にアバタaが、それぞれ表示される。同様
にユーザCのブラウザにより表示される画面には、自分
自身のアバタcを中心として、その右側にアバタaが、
その左側にアバタbが、それぞれ表示される。
面には表示させないようにすることも可能である。
バタaのユーザAから、「こんにちは」のメッセージが
出力されると、共有サーバ12(コミュニティプレース
ビューロ)は、そのメッセージを、図17に示すよう
に、アバタaの近傍に位置する他のアバタ(この例の場
合、アバタbとアバタc)に転送する。その結果、各ユ
ーザのブラウザのチャットログ表示部214には、アバ
タaのチャットとして、「こんにちは」のメッセージが
表示される。
プS61に進み、ユーザよりチャットの終了が指令され
たか否かを判定し、チャットの終了が指令されていない
場合には、ステップS51に戻り、それ以降の処理を繰
り返し実行する。
セージの送信が指令されていないと判定された場合、CP
U30は、ステップS55に進み、他のユーザ(アバ
タ)からのチャットメッセージが送信されてきたか否か
を判定する。他のユーザからのチャットメッセージが送
信されてきていない場合には、ステップS61に進み、
チャットの終了が指令されたか否かが判定され、終了が
指令されていなければ、再びステップS51に戻り、そ
れ以降の処理が繰り返し実行される。
チャットメッセージが送信されてきたと判定された場
合、ステップS56に進み、CPU30は、インターネッ
ト7を介して転送されてきたチャットメッセージをモデ
ム39を制御して受信させる。そしてステップS57に
おいて、CPU30は、ステップS56で受信したメッセ
ージに対応する音が、対応表に存在するか否か検索す
る。具体的には、例えば、「こんにちは」のメッセージ
が受信されたとき、「こんにちは」の文字列が、ハード
ディスクドライブ31の文字列と音の対応表から検索さ
れる。
0は、検索の結果、受信したチャットメッセージに対応
する音が対応表に存在するか否かを判定し、存在する場
合には、ステップS59に進み、対応する音を、そのメ
ッセージを転送してきたユーザのアバタが発生した音と
して出力させる。
の画面には、アバタaの「こんにちは」のメッセージが
転送されてきて表示されるので、ユーザBのクライアン
トPC2のCPU30は、ハードディスクドライブ31に記
憶されている対応表に、「こんにちは」の文字列が登録
されているか否かを判定し、登録されている場合には、
その対応する音を読み取る。図10の例においては、
「こんにちは」に対応して、「音1」が登録されてい
る。そこで、ユーザBのクライアントPC2のCPU30
は、「音1」のデータをサウンド処理回路35に供給
し、音声合成処理させ、CRTモニタ45に表示されてい
るアバタaが発生した音として、スピーカ37,38か
ら出力させる。
に、アバタaが表示されている状態において、アバタa
のチャットとして、「こんにちは」のメッセージが受信
されると、図19に示すように、アバタaが「こんにち
は」の音を発生する。
ージに含まれる文字列に対応する音が存在しないと判定
された場合には、ステップS59の処理はスキップされ
る。そして、ステップS60に進み、CPU30は、受信
したメッセージをチャットログ表示部214に表示させ
る。
チャットの終了が指令されたか否かが判定され、終了が
指令されていなければ、ステップS51に戻り、それ以
降の処理が繰り返し実行される。ステップS61におい
て、チャットの終了が指令されたと判定された場合、チ
ャット処理は終了される。
像をクライアントPC側で生成するようにしたが、共有サ
ーバ12側で生成するようにすることも可能である。た
だし、そのようにすると、共有サーバ12に接続される
クライアントPCの数が増加すると、共有サーバ12の負
荷が重くなる。そこで、クライアントPC側に処理させる
ようにするのが好ましい。
り実行させることもできるが、ソフトウエアにより実行
させることもできる。一連の処理をソフトウエアにより
実行させる場合には、そのソフトウエアを構成するプロ
グラムが、クライアントPC1,2,3や共有サーバ12
に、インターネット7や記録媒体からインストールされ
る。
うに、コンピュータとは別に、ユーザにプログラムを提
供するために配布される、プログラムが記録されている
CD-ROM33,133以外の、ドライブ51,151に装
着される、例えばDVD(Digital Versatile Disk)などの
光ディスク52,152、磁気ディスク53,153
(フロッピディスクを含む)、光磁気ディスク54,1
54(MD(Mini-Disk)を含む)、もしくは半導体メモ
リ55,155などよりなるパッケージメディアにより
構成されるだけでなく、クライアントPC1や共有サーバ
12に予め組み込まれた状態でユーザに提供される、プ
ログラムが記録されているROM34,134や、ハード
ディスク31,131などで構成される。
されるプログラムを記述するステップは、記載された順
序に沿って時系列的に行われる処理はもちろん、必ずし
も時系列的に処理されなくとも、並列的あるいは個別に
実行される処理をも含むものである。
複数の装置により構成される装置全体を表すものであ
る。
び方法、並びに格納媒体のプログラムによれば、チャッ
トに含まれる文字列に対応して、音を発生させるように
したので、テキストによるチャット中に、アバタに各種
の多くの処理を迅速且つ確実に実行させ、よりリッチな
会話を楽しむことが可能となる。またその場合におい
て、チャットのための操作に支障が生じるようなことが
抑制される。さらに、音声データそのものを伝送する場
合に較べて、伝送データの容量を小さくすることができ
る。その結果、既存のネットワークシステムに何の変化
も加えることなく、音声によるチャットシステムを実現
することができる。
構成例を示すブロック図である。
ク図である。
図である。
る。
である。
するフローチャートである。
理を説明するフローチャートである。
おける表示例を示す図である。
するフローチャートである。
明するフローチャートである。
である。
示す図である。
示す図である。
10 WWWサーバ,12 共有サーバ, 13,14 A
Oサーバ, 15 メールサーバ, 16コミュニケー
ションサーバ, 18 電話機, 19 ファクシミ
リ, 23PHS端末, 24 ポケットベル端末, 3
0 CPU, 31 ハードディスク, 39 モデム,
45 CRTモニタ, 46 RAM
Claims (5)
- 【請求項1】 他の情報処理装置とともに、ネットワー
クを介してサーバに接続され、共有仮想空間の提供を受
ける情報処理装置において、 前記共有仮想空間において活動する、自分自身の分身と
してのアバタを介して行うチャットの文字列を入力する
入力手段と、 前記入力手段で入力された文字列を文字データとして前
記サーバに送信する送信手段と、 前記サーバから伝送されてきた前記文字データを音声デ
ータに変換する変換手段と、 前記変換手段により変換された音声データを音声として
出力する出力手段とを備えることを特徴とする情報処理
装置。 - 【請求項2】 前記変換手段は、 予め文字データと音声データとが互いに対応付けられた
対応表を記憶する対応表記憶手段と、 この対応表記憶手段を参照し、前記サーバから伝送され
てきた文字データを、対応する音声データに変換する処
理手段とから構成されていることを特徴とする請求項1
に記載の情報処理装置。 - 【請求項3】 前記サーバからの問い合わせに応じて、
前記対応表記憶手段に記憶されている対応表の種別を表
すIDを前記サーバに伝送し、このIDに応じて前記サーバ
から最新の対応表が伝送されてきた場合に、この最新の
対応表を前記対応表記憶手段に記憶させる対応表更新手
段を さらに備えることを特徴とする請求項2に記載の情報処
理装置。 - 【請求項4】 他の情報処理装置とともに、ネットワー
クを介してサーバに接続され、共有仮想空間の提供を受
ける情報処理装置の情報処理方法において、 前記共有仮想空間において活動する、自分自身の分身と
してのアバタを介して行うチャットの文字列を入力する
入力ステップと、 前記入力ステップで入力された文字列を文字データとし
て前記サーバに送信する送信ステップと、 前記サーバから伝送されてきた前記文字データを音声デ
ータに変換する変換ステップと、 前記変換ステップの処理により変換された音声データを
音声として出力する出力ステップと を含むことを特徴とする情報処理方法。 - 【請求項5】 他の情報処理装置とともに、ネットワー
クを介してサーバに接続され、共有仮想空間の提供を受
ける情報処理装置のプログラムにおいて、 前記共有仮想空間において活動する、自分自身の分身と
してのアバタを介して行うチャットの文字列を入力する
入力ステップと、 前記入力ステップで入力された文字列を文字データとし
て前記サーバに送信する送信ステップと、 前記サーバから伝送されてきた前記文字データを音声デ
ータに変換する変換ステップと、 前記変換ステップの処理により変換された音声データを
音声として出力する出力ステップとを含むことを特徴と
するコンピュータが読み取り可能なプログラムが格納さ
れている格納媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000121694A JP4547768B2 (ja) | 2000-04-21 | 2000-04-21 | 情報処理装置および方法、並びに記録媒体 |
US09/837,341 US7007065B2 (en) | 2000-04-21 | 2001-04-19 | Information processing apparatus and method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000121694A JP4547768B2 (ja) | 2000-04-21 | 2000-04-21 | 情報処理装置および方法、並びに記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001306477A true JP2001306477A (ja) | 2001-11-02 |
JP4547768B2 JP4547768B2 (ja) | 2010-09-22 |
Family
ID=18632304
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000121694A Expired - Lifetime JP4547768B2 (ja) | 2000-04-21 | 2000-04-21 | 情報処理装置および方法、並びに記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7007065B2 (ja) |
JP (1) | JP4547768B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004151229A (ja) * | 2002-10-29 | 2004-05-27 | Matsushita Electric Ind Co Ltd | 音声情報変換方法、映像・音声フォーマット、エンコーダ、音声情報変換プログラム、および音声情報変換装置 |
JP6419268B1 (ja) * | 2017-07-21 | 2018-11-07 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP2019049987A (ja) * | 2018-10-09 | 2019-03-28 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7788323B2 (en) * | 2000-09-21 | 2010-08-31 | International Business Machines Corporation | Method and apparatus for sharing information in a virtual environment |
JP2002325965A (ja) * | 2001-04-27 | 2002-11-12 | Sega Corp | 入力文字処理方法 |
JP3829722B2 (ja) * | 2002-01-23 | 2006-10-04 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
US7636755B2 (en) | 2002-11-21 | 2009-12-22 | Aol Llc | Multiple avatar personalities |
US8037150B2 (en) | 2002-11-21 | 2011-10-11 | Aol Inc. | System and methods for providing multiple personas in a communications environment |
US20070113181A1 (en) * | 2003-03-03 | 2007-05-17 | Blattner Patrick D | Using avatars to communicate real-time information |
US20070168863A1 (en) * | 2003-03-03 | 2007-07-19 | Aol Llc | Interacting avatars in an instant messaging communication session |
US7908554B1 (en) | 2003-03-03 | 2011-03-15 | Aol Inc. | Modifying avatar behavior based on user action or mood |
US7913176B1 (en) | 2003-03-03 | 2011-03-22 | Aol Inc. | Applying access controls to communications with avatars |
US20040179039A1 (en) * | 2003-03-03 | 2004-09-16 | Blattner Patrick D. | Using avatars to communicate |
US7669134B1 (en) | 2003-05-02 | 2010-02-23 | Apple Inc. | Method and apparatus for displaying information during an instant messaging session |
JP4075883B2 (ja) * | 2004-05-12 | 2008-04-16 | セイコーエプソン株式会社 | 液滴吐出装置、並びに電気光学装置の製造方法および電気光学装置 |
US9652809B1 (en) | 2004-12-21 | 2017-05-16 | Aol Inc. | Using user profile information to determine an avatar and/or avatar characteristics |
US7468729B1 (en) | 2004-12-21 | 2008-12-23 | Aol Llc, A Delaware Limited Liability Company | Using an avatar to generate user profile information |
US20070044022A1 (en) * | 2005-02-01 | 2007-02-22 | Shin Hyun K | Method, unit and system for outputting data |
US9304675B2 (en) | 2006-09-06 | 2016-04-05 | Apple Inc. | Portable electronic device for instant messaging |
US9954996B2 (en) | 2007-06-28 | 2018-04-24 | Apple Inc. | Portable electronic device with conversation management for incoming instant messages |
US8327272B2 (en) | 2008-01-06 | 2012-12-04 | Apple Inc. | Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars |
US8655964B2 (en) | 2009-12-14 | 2014-02-18 | At&T Intellectual Property I, Lp | Unified location and presence, communication across real and virtual worlds |
US9160786B1 (en) * | 2012-05-08 | 2015-10-13 | Google Inc. | Method for media sharing based on location proximity |
WO2014061715A1 (ja) * | 2012-10-19 | 2014-04-24 | グリー株式会社 | 画像配信方法、画像配信サーバ装置及びチャットシステム |
GB2560416A (en) * | 2014-09-06 | 2018-09-12 | Nevada Devaux Christian | Games |
US11069103B1 (en) * | 2017-04-20 | 2021-07-20 | Snap Inc. | Customized user interface for electronic communications |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08149067A (ja) * | 1994-11-24 | 1996-06-07 | Daihatsu Motor Co Ltd | 車載用情報提供装置 |
JPH08190518A (ja) * | 1995-01-11 | 1996-07-23 | Fujitsu Ltd | 電子コミュニティシステム |
JPH11242546A (ja) * | 1997-12-26 | 1999-09-07 | Bandai Digital Entertaiment:Kk | サーバシステム、クライアント及び情報提供システム並びにそれらの処理プログラムを記録した媒体 |
JPH11312160A (ja) * | 1998-02-13 | 1999-11-09 | Fuji Xerox Co Ltd | 自律的パ―ソナルアバタ―による文書注釈方法及び装置 |
JP2000076167A (ja) * | 1998-08-27 | 2000-03-14 | Fujitsu Ltd | コミュニケーション方法及びコミュニケーション装置 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2128786A (en) * | 1982-10-12 | 1984-05-02 | Possum Controls Ltd | Apparatus for controlling production of speech or text |
US5210689A (en) * | 1990-12-28 | 1993-05-11 | Semantic Compaction Systems | System and method for automatically selecting among a plurality of input modes |
US5500919A (en) * | 1992-11-18 | 1996-03-19 | Canon Information Systems, Inc. | Graphics user interface for controlling text-to-speech conversion |
US6020885A (en) * | 1995-07-11 | 2000-02-01 | Sony Corporation | Three-dimensional virtual reality space sharing method and system using local and global object identification codes |
CA2180891C (en) * | 1995-07-12 | 2010-01-12 | Junichi Rekimoto | Notification of updates in a three-dimensional virtual reality space sharing system |
US6219045B1 (en) * | 1995-11-13 | 2001-04-17 | Worlds, Inc. | Scalable virtual world chat client-server system |
US5880731A (en) * | 1995-12-14 | 1999-03-09 | Microsoft Corporation | Use of avatars with automatic gesturing and bounded interaction in on-line chat session |
US5884029A (en) * | 1996-11-14 | 1999-03-16 | International Business Machines Corporation | User interaction with intelligent virtual objects, avatars, which interact with other avatars controlled by different users |
US5983003A (en) * | 1996-11-15 | 1999-11-09 | International Business Machines Corp. | Interactive station indicator and user qualifier for virtual worlds |
US5963217A (en) * | 1996-11-18 | 1999-10-05 | 7Thstreet.Com, Inc. | Network conference system using limited bandwidth to generate locally animated displays |
JP3466857B2 (ja) * | 1997-03-06 | 2003-11-17 | 株式会社東芝 | 辞書更新方法および辞書更新システム |
JPH11213179A (ja) * | 1998-01-23 | 1999-08-06 | Sony Corp | 共有仮想空間提供装置および方法、並びに提供媒体 |
US6433784B1 (en) * | 1998-02-26 | 2002-08-13 | Learn2 Corporation | System and method for automatic animation generation |
US6772195B1 (en) * | 1999-10-29 | 2004-08-03 | Electronic Arts, Inc. | Chat clusters for a virtual world application |
US6384829B1 (en) * | 1999-11-24 | 2002-05-07 | Fuji Xerox Co., Ltd. | Streamlined architecture for embodied conversational characters with reduced message traffic |
US6453294B1 (en) * | 2000-05-31 | 2002-09-17 | International Business Machines Corporation | Dynamic destination-determined multimedia avatars for interactive on-line communications |
-
2000
- 2000-04-21 JP JP2000121694A patent/JP4547768B2/ja not_active Expired - Lifetime
-
2001
- 2001-04-19 US US09/837,341 patent/US7007065B2/en not_active Expired - Lifetime
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08149067A (ja) * | 1994-11-24 | 1996-06-07 | Daihatsu Motor Co Ltd | 車載用情報提供装置 |
JPH08190518A (ja) * | 1995-01-11 | 1996-07-23 | Fujitsu Ltd | 電子コミュニティシステム |
JPH11242546A (ja) * | 1997-12-26 | 1999-09-07 | Bandai Digital Entertaiment:Kk | サーバシステム、クライアント及び情報提供システム並びにそれらの処理プログラムを記録した媒体 |
JPH11312160A (ja) * | 1998-02-13 | 1999-11-09 | Fuji Xerox Co Ltd | 自律的パ―ソナルアバタ―による文書注釈方法及び装置 |
JP2000076167A (ja) * | 1998-08-27 | 2000-03-14 | Fujitsu Ltd | コミュニケーション方法及びコミュニケーション装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004151229A (ja) * | 2002-10-29 | 2004-05-27 | Matsushita Electric Ind Co Ltd | 音声情報変換方法、映像・音声フォーマット、エンコーダ、音声情報変換プログラム、および音声情報変換装置 |
JP6419268B1 (ja) * | 2017-07-21 | 2018-11-07 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP2019021250A (ja) * | 2017-07-21 | 2019-02-07 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP2019049987A (ja) * | 2018-10-09 | 2019-03-28 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
JP7030669B2 (ja) | 2018-10-09 | 2022-03-07 | 株式会社コロプラ | 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム |
Also Published As
Publication number | Publication date |
---|---|
US7007065B2 (en) | 2006-02-28 |
JP4547768B2 (ja) | 2010-09-22 |
US20020007395A1 (en) | 2002-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2001306477A (ja) | 情報処理装置および方法、並びに格納媒体 | |
JP2001312745A (ja) | 情報処理装置および方法、並びに格納媒体 | |
JP4479051B2 (ja) | 情報処理装置および方法、並びに記録媒体 | |
JP4232232B2 (ja) | 情報処理装置および方法、並びに記録媒体 | |
JP4122173B2 (ja) | ユーザが指定する特性に基づいてネットワーク上を伝送したコンテンツデータを改変する方法 | |
JP2000113220A (ja) | 情報処理装置および方法、並びに提供媒体 | |
CN101243437A (zh) | 由端点定制的虚拟机器人通信格式 | |
JPH11215179A (ja) | 情報処理装置および方法、情報処理システム、並びに提供媒体 | |
JPH11203009A (ja) | 情報処理装置および方法、並びに提供媒体 | |
US6975316B2 (en) | Information processing method | |
JP4232231B2 (ja) | 情報処理装置および方法、並びに記録媒体 | |
JP2001236525A (ja) | 情報処理装置および方法、情報処理システム、並びに記録媒体 | |
JP2002288101A (ja) | チャット文字表示方法、チャット文字表示プログラム、チャット文字表示プログラム格納媒体、および共有仮想空間表示装置 | |
JP2001307137A (ja) | 情報処理装置および方法、並びに格納媒体 | |
JP2001312744A (ja) | 情報処理装置および方法、並びにプログラム格納媒体 | |
JP2001236291A (ja) | 情報処理装置および方法、情報処理システム、並びに記録媒体 | |
JP4487159B2 (ja) | 情報処理装置および方法、並びに格納媒体 | |
JP2000207583A (ja) | 情報処理装置および方法、並びに提供媒体 | |
JP2000207578A (ja) | 情報処理装置および方法、並びに提供媒体 | |
JP3987172B2 (ja) | 対話型コミュニケーション端末装置 | |
KR100519381B1 (ko) | 웹 도우미를 이용한 웹 사이트 정보 제공 방법 및 시스템 | |
JP2000149063A (ja) | 情報処理装置および方法、並びに提供媒体 | |
JP2000149068A (ja) | 情報処理装置および方法、並びに提供媒体 | |
JP2001148033A (ja) | 情報処理装置および方法、並びに記録媒体 | |
JP2000113223A (ja) | 情報処理装置および方法、並びに提供媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090609 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100107 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100615 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100628 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4547768 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130716 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |