JP4412255B2 - Conversation system, conversation method, conversation server and program - Google Patents

Conversation system, conversation method, conversation server and program Download PDF

Info

Publication number
JP4412255B2
JP4412255B2 JP2005227561A JP2005227561A JP4412255B2 JP 4412255 B2 JP4412255 B2 JP 4412255B2 JP 2005227561 A JP2005227561 A JP 2005227561A JP 2005227561 A JP2005227561 A JP 2005227561A JP 4412255 B2 JP4412255 B2 JP 4412255B2
Authority
JP
Japan
Prior art keywords
communication data
session
terminal
data
conversation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005227561A
Other languages
Japanese (ja)
Other versions
JP2007041992A (en
Inventor
晋 原田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2005227561A priority Critical patent/JP4412255B2/en
Publication of JP2007041992A publication Critical patent/JP2007041992A/en
Application granted granted Critical
Publication of JP4412255B2 publication Critical patent/JP4412255B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Description

本発明は会話システム、会話方法、会話サーバおよびプログラムに関し、特に、ネットワークと複数の端末を使用して多ユーザ間で会話を行う会話システム、会話方法、会話サーバおよびプログラムに関する。   The present invention relates to a conversation system, a conversation method, a conversation server, and a program, and more particularly, to a conversation system, a conversation method, a conversation server, and a program that perform conversation between multiple users using a network and a plurality of terminals.

ネットワークと複数の端末を使用して多ユーザ間で会話を行う会話システムのひとつとしてPoC (Push-to-Talk over Cellular)と呼ばれるサービスがある。 PoCは、携帯電話をトランシーバのように利用する技術であり、1対N(複数)の通信を可能にするものである。たとえば、米国のNextel社によりサービスが行われている。PoCの実現方式はいくつかあるが、基本的な仕組みは同じであり、セッション管理機能やフロア制御機能を備えるPoCサーバと、グループリストを管理するGLMS(Group List Management Server)からなる(例えば、非特許文献1参照)。本明細書では非特許文献1に従い用語を用いている。本明細書中の端末は、非特許文献1でUEと呼んでいるものに相当する。   There is a service called PoC (Push-to-Talk over Cellular) as one of conversation systems that perform conversations between multiple users using a network and a plurality of terminals. PoC is a technology that uses a mobile phone like a transceiver, and enables 1-to-N (multiple) communication. For example, the service is provided by Nextel in the United States. There are several PoC implementation methods, but the basic mechanism is the same, and consists of a PoC server with a session management function and a floor control function, and a GLMS (Group List Management Server) that manages the group list (for example, non- Patent Document 1). In this specification, terms are used according to Non-Patent Document 1. The terminal in this specification corresponds to what is called UE in Non-Patent Document 1.

PoCは、リアルタイムなコミュニケーションを行う手段であるため、グループ通信を行う場合、圏外のユーザなど、その時点でPoC通信に参加できないユーザは、コミュニケーションに参加できない。   Since PoC is a means for performing real-time communication, when performing group communication, a user who cannot participate in PoC communication at that time, such as a user outside the service area, cannot participate in communication.

本願出願人は、特願2004−039939号で、PoCの通信内容を記録する方式を提案している。この方式では、記録するかどうかを柔軟に変更する手段を提供することで、オフレコのコミュニケーションを含む通信内容の記録を可能にするものである。また、記録された通信内容を聞く方法として、特願2004−092566号では、通信後に後から記録された内容を参照する方法について述べているが、別のセッションにおける再利用については考慮されていない。   The applicant of the present application has proposed a method for recording PoC communication content in Japanese Patent Application No. 2004-039939. In this system, it is possible to record communication contents including off-record communication by providing means for flexibly changing whether or not to record. In addition, as a method for listening to recorded communication contents, Japanese Patent Application No. 2004-092566 describes a method of referring to recorded contents after communication, but does not consider reuse in another session. .

Ericsson, Motorola, Siemens, Nokia、PoC Architecture; PoC Release 1.0、[online]、[平成17年7月19日検索]、インターネット<URL:http://www.ericsson.com/multiservicenetworks/distr/PoC_specifications.ZIP>Ericsson, Motorola, Siemens, Nokia, PoC Architecture; PoC Release 1.0, [online], [searched on July 19, 2005], Internet <URL: http://www.ericsson.com/multiservicenetworks/distr/PoC_specifications. ZIP>

上述した従来の会話システムは、リアルタイムなコミュニケーションを行う手段であったため、ネットワークに存在する、以前に行った会話などの情報を、他のセッションや、他の端末から再利用することができないという問題点があった。   Since the conventional conversation system described above is a means for performing real-time communication, information such as previous conversations that exist in the network cannot be reused from other sessions or other terminals. There was a point.

また、以前に行った会話などの情報を引用した場合、再利用であることが明示されないため、データを受信したユーザはどの発言が再利用なのかがわからないという問題点があった。   In addition, when quoting information such as conversations that have been performed before, it is not clearly indicated that the data is to be reused, and there is a problem in that the user who receives the data does not know which statement is to be reused.

また、以前に行った会話などの情報を引用した場合、発言者や発言時刻が明示されないため、データを受信したユーザは誰がいつ発言(送信)したものなのかがわからないという問題点があった。   In addition, when quoting information such as a conversation that has been performed before, the speaker and the time of the statement are not specified, and thus there is a problem that the user who received the data does not know when or who sent (sent).

また、以前に行った会話などの情報の再利用を可能とした場合、再利用の可否を判断する手段がないため、流用に制限を設けることができないという問題点があった。   In addition, when it is possible to reuse information such as conversations that have been performed previously, there is no means for determining whether or not reuse is possible, and thus there is a problem in that it is not possible to limit the diversion.

また、以前に行った会話などの情報の再利用を可能とした場合、ログをとる際に同一のデータをコピーすると、引用元がどのセッションだったか等の情報が失われてしまい、また、保存用の記憶領域サイズが余計にかかってしまうという問題点があった。   Also, if it is possible to reuse information such as previously conducted conversations, copying the same data when logging will result in the loss of information such as which session the citation was from, and storage There is a problem that the size of the storage area is excessive.

本発明の目的は、上述した従来の課題のいずれかを解決する会話システム、会話方法、会話サーバおよびプログラムを提供することにある。   An object of the present invention is to provide a conversation system, a conversation method, a conversation server, and a program that can solve any of the conventional problems described above.

本発明の会話サーバは、一のセッションに参加する複数の端末であるセッション参加端末グループ通信を中継する会話サーバであって、
前記セッション参加端末のうちの一の端末から発信された通信データを受信すると、記録部に前記通信データを記憶装置の会話ログ保存部へ格納させた後に、当該通信データを前記各セッション参加端末に送信する、セッション管理部と、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信する送信処理部とを備える
Conversation server of the present invention is a conversation server that relays group communications between sessions participating terminal is a plurality of terminals participating in one session,
When communication data transmitted from one of the session participation terminals is received, the communication data is stored in the conversation log storage unit of the storage device in the recording unit, and then the communication data is stored in each session participation terminal. The session manager to send ,
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction A transmission processing unit for transmitting to the session participation terminal .

本発明の会話サーバは、前記送出指示端末から検索要求を受信し、前記検索要求で指定される通信データを前記会話ログ保存部から抽出し、前記抽出した通信データである抽出通信データの一覧情報を前記送出指示端末に送信する閲覧処理部を備えてもよい。 The conversation server of the present invention receives a search request from the transmission instruction terminal, extracts communication data specified by the search request from the conversation log storage unit, and lists extracted communication data that is the extracted communication data May be provided with a browsing processing unit that transmits the information to the sending instruction terminal .

本発明の会話サーバは、前記セッション参加端末のうちの第一の端末から、前記セッション参加端末のうちの当該第一の端末または他の端末からの通信データの発信の途中もしくは発信の直後にブックマーク要求を受信し、当該通信データに対して参照子を生成し、当該参照子を前記ブックマーク要求した端末に送信する閲覧処理部を備えてもよい。 The conversation server according to the present invention provides a bookmark in the middle of or immediately after the transmission of communication data from the first terminal among the session participation terminals, the first terminal among the session participation terminals, or another terminal. You may provide the browsing process part which receives a request | requirement, produces | generates a reference with respect to the said communication data, and transmits the said reference to the terminal which requested | required the said bookmark .

本発明の会話サーバは、前記セッション管理部は、通信データを発信した端末が参加するセッションの第一のセッション識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記閲覧処理部は、前記セッション参加端末のうちの一の端末から当該端末が参加するセッションの第二のセッション識別子を包含する検索要求を受信し、前記第一と前記第二のセッション識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定してもよい。
In the conversation server of the present invention, the session management unit receives, from the terminal, additional data including the first session identifier and citation restriction information of a session in which the terminal that has transmitted the communication data participates, together with the communication data, In the recording unit, the additional data is stored in the conversation log storage unit in association with the communication data,
The browsing processing unit receives a search request including a second session identifier of a session in which the terminal participates from one of the session participating terminals, and the first and second session identifiers are different. In this case, it may be determined whether to include each of the extracted communication data in the list information based on the citation restriction information corresponding to each of the extracted communication data .

本発明の会話サーバは、前記セッション管理部は、通信データを発信した発言者の識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記閲覧処理部は、前記セッション参加端末のうちの一の端末からユーザの識別子を包含する検索要求を受信し、前記発言者と前記ユーザの識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定してもよい。
In the conversation server of the present invention, the session management unit receives additional data including the identifier of a speaker who has transmitted communication data and citation restriction information from the terminal together with the communication data, and stores the additional data in the recording unit. In association with the communication data, store in the conversation log storage unit,
The browsing processing unit receives a search request including a user identifier from one of the session participation terminals, and corresponds to each of the extracted communication data when the speaker and the user identifier are different. It may be determined whether to include each of the extracted communication data in the list information based on the citation restriction information .

本発明の会話サーバは、前記送信処理部は、前記引用データに、引用情報であることを示す引用表示を加えて、前記各セッション参加端末に送信してもよい。 In the conversation server of the present invention, the transmission processing unit may add a citation display indicating citation information to the citation data and transmit the citation data to each session participation terminal .

本発明の会話サーバは、通信データに識別子を有し、前記セッション管理部は、前記記録部に引用表示の付された前記引用データを含む会話ログを前記会話ログ保存部へ格納させる場合は、前記記録部に前記引用表示の付された前記引用データの代わりに当該引用データの識別子を格納させてもよい。 The conversation server of the present invention has an identifier in communication data, and the session management unit stores the conversation log including the citation data with a citation display in the recording unit in the conversation log storage unit. An identifier of the cited data may be stored in the recording unit instead of the cited data with the quote display .

本発明の会話サーバは、前記セッション管理部は、送信する通信データの発言者名、発話時刻、発話時間、前記発言者が属するグループ名、前記通信データの変換前のメディア種別、前記通信データの会話セッション内でのシーケンシャル番号のうち少なくともひとつを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記送信処理部は、前記引用データと当該引用データに対応付けられている付加データとを前記各セッション参加端末に送信してもよい。
In the conversation server of the present invention, the session management unit includes a speaker name, a speech time, a speech time, a group name to which the speaker belongs, a media type before conversion of the communication data, a communication data Additional data including at least one of sequential numbers in a conversation session is received from the terminal together with the communication data, and the recording unit stores the additional data in association with the communication data in the conversation log storage unit,
The transmission processing unit may transmit the citation data and additional data associated with the citation data to each session participation terminal .

本発明の会話サーバは、前記抽出通信データのメディアを変換するメディア変換部を備え、前記閲覧処理部は前記メディア変換部が変換した通信データを、前記送出指示端末に送信してもよい。 The conversation server of the present invention may include a media conversion unit that converts media of the extracted communication data, and the browsing processing unit may transmit the communication data converted by the media conversion unit to the transmission instruction terminal .

本発明の会話サーバは、前記メディア変換部は、前記抽出通信データに基づいて、当該抽出通信データのおのおのの少なくとも一部の内容に基づいて情報をそれぞれ生成し、前記閲覧処理部は前記メディア変換部が生成した情報を前記一覧情報とともに、前記送出指示端末に送信してもよい。 In the conversation server according to the present invention, the media conversion unit generates information based on at least a part of the content of each of the extracted communication data based on the extracted communication data, and the browsing processing unit includes the media conversion The information generated by the section may be transmitted to the sending instruction terminal together with the list information .

本発明の会話サーバは、前記記録部と前記会話ログ保存部とを備えていてもよい。 The conversation server of the present invention may include the recording unit and the conversation log storage unit .

本発明の会話システムは、前述のいずれかの会話サーバと、前記セッション参加端末とを備えるThe conversation system of the present invention includes any one of the conversation servers described above and the session participation terminal .

本発明の会話方法は、一のセッションに参加する複数の端末であるセッション参加端末グループ通信を中継する会話方法であって、
前記セッション参加端末のうちの一の端末から発信された通信データを受信すると、前記通信データを記憶装置の会話ログ保存部に格納させた後に、当該通信データを前記各セッション参加端末に送信するステップと、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信するステップとを有する
Conversation method of the present invention is a conversation method for relaying a group communication between session participating terminal is a plurality of terminals participating in one session,
When communication data transmitted from one of the session participation terminals is received, the communication data is stored in a conversation log storage unit of a storage device, and then the communication data is transmitted to each session participation terminal. When,
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction And transmitting to the session participation terminal .

本発明の会話プログラムは、一のセッションに参加する複数の端末であるセッション参加端末のうちの一の端末から発信された通信データを受信すると、前記通信データを記憶装置の会話ログ保存部に格納させた後に、当該通信データを前記各セッション参加端末に送信する第一の処理と、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信する第二の処理とをコンピュータに実行させる
When the conversation program of the present invention receives communication data transmitted from one of the session participation terminals, which is a plurality of terminals participating in one session, the communication data is stored in the conversation log storage unit of the storage device. A first process for transmitting the communication data to each session participation terminal, and
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction The computer executes the second process to be transmitted to the session participation terminal .

本発明の会話プログラムは、前記送出指示端末から検索要求を受信し、前記検索要求で指定される通信データを前記会話ログ保存部から抽出し、抽出した通信データである抽出通信データの一覧情報を前記送出指示端末に送信する第三の処理を前記コンピュータに実行させてもよい。 The conversation program of the present invention receives a search request from the transmission instructing terminal, extracts communication data specified by the search request from the conversation log storage unit, and extracts extracted communication data list information as extracted communication data. You may make the said computer perform the 3rd process transmitted to the said transmission instruction | indication terminal .

本発明の会話プログラムは、前記セッション参加端末のうちの第一の端末から、前記セッション参加端末のうちの当該第一の端末または他の端末からの通信データの発信の途中もしくは発信の直後にブックマーク要求を受信し、当該通信データに対して参照子を生成し、当該参照子を前記ブックマーク要求した端末に送信する第四の処理を前記コンピュータに実行させてもよい。 The conversation program of the present invention is a bookmark in the middle of or immediately after the transmission of communication data from the first terminal of the session participating terminals, the first terminal of the session participating terminals, or another terminal. The computer may be caused to execute a fourth process of receiving a request, generating a reference for the communication data, and transmitting the reference to the terminal that requested the bookmark .

本発明の会話プログラムは、通信データを発信した端末が参加するセッションの第一のセッション識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させる前記第一の処理と、
前記セッション参加端末のうち一の端末から当該端末が参加するセッションの第二のセッション識別子を包含する検索要求を受信し、前記第一と前記第二のセッション識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する前記第三の処理とを前記コンピュータに実行させてもよい。
本発明の会話プログラムは、通信データを発信した発言者の識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させる前記第一の処理と、
前記セッション参加端末のうち一の端末からユーザの識別子を包含する検索要求を受信し、前記発言者と前記ユーザの識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する前記第三の処理とを前記コンピュータに実行させてもよい。
The conversation program of the present invention receives additional data including the first session identifier and citation restriction information of a session in which a terminal that has transmitted communication data participates from the terminal together with the communication data, and stores the additional data in the recording unit. The first process of storing the conversation data in the conversation log storage unit in association with the communication data;
When a search request including a second session identifier of a session in which the terminal participates is received from one of the session participating terminals, and the first and second session identifiers are different, The computer may execute the third process for determining whether to include each of the extracted communication data in the list information based on the citation restriction information corresponding to each.
The conversation program of the present invention receives additional data including the identifier of a speaker who has transmitted communication data and citation restriction information from the terminal together with the communication data, and associates the additional data with the communication data in the conversation log. The first processing to be stored in the storage unit;
When a search request including a user identifier is received from one of the session participating terminals and the speaker and the user identifier are different, based on the citation restriction information corresponding to each of the extracted communication data You may make the said computer perform said 3rd process which determines whether each of the said extracted communication data is included in the said list information .

本発明は、通信データを保存し、保存された通信データから抽出した通信データを会話セッションへ引用送出することにより、以前に行った会話などの情報を、他のセッションや、他の端末から再利用できるという効果を有している。   The present invention saves communication data and quotes and sends the communication data extracted from the saved communication data to the conversation session, so that information such as a conversation previously performed can be retransmitted from another session or another terminal. It has the effect that it can be used.

本発明を実施するための最良の形態について図面を参照して詳細に説明する。本発明は、PoCに代表される、複数の端末を用いて多ユーザ間でグループ通信を行う会話システムにおいて、記憶装置に会話ログを記録する。以前のセッション、参加中のセッション、もしくは平行して実施中のセッションにおいて取られた会話ログを、PoCなどによる会話の途中でセッション中に配送できるようにする。その際に引用した会話ログについての情報(発信者、発言時刻など)も、同時に受信者に対して提供する。さらに、会話システム以外で作成されたメディア情報も引用可能とする。なお、以下の説明では、会話システムがPoCである例を説明する。   The best mode for carrying out the present invention will be described in detail with reference to the drawings. The present invention records a conversation log in a storage device in a conversation system that performs group communication among multiple users using a plurality of terminals, represented by PoC. A conversation log taken in a previous session, a participating session, or a session that is being performed in parallel can be delivered during the session in the middle of a PoC conversation. Information about the conversation log quoted at that time (sender, speech time, etc.) is also provided to the receiver at the same time. In addition, media information created outside the conversation system can also be cited. In the following description, an example in which the conversation system is PoC will be described.

図1は本発明の第1の実施の構成を示すブロック図である。ブロック間の関係が明確となるように動作フロー(図3を用いて後述する)も図中に記載している。第1の実施の形態は、会話サーバ10、端末A20a、端末B20b、端末C20c、およびこれらを相互に接続するネットワーク100を含む。ネットワーク100としてはインターネットが一般的である。図1は端末を3台含む例を示しているが、台数はこれに限定されるものではなく、1台以上であれば何台でも構成可能である。以下の説明では、端末A20a、端末B20b、端末C20cを特に区別しない場合は、単に端末20と記す。   FIG. 1 is a block diagram showing the configuration of the first embodiment of the present invention. An operation flow (to be described later with reference to FIG. 3) is also shown in the drawing so that the relationship between the blocks becomes clear. The first embodiment includes a conversation server 10, a terminal A 20a, a terminal B 20b, a terminal C 20c, and a network 100 that connects these to each other. The Internet is generally used as the network 100. Although FIG. 1 shows an example including three terminals, the number is not limited to this, and any number of terminals can be configured as long as the number is one or more. In the following description, the terminal A20a, the terminal B20b, and the terminal C20c are simply referred to as the terminal 20 unless particularly distinguished.

会話サーバ10は、セッション管理部11、判定部12、判定ルール13、記録部14、会話ログ保存部15、閲覧処理部16、送信処理部17を含む。なお、これらの各部はひとつの会話サーバ10に含まれる必要はなく、複数のサーバ等に分散されていてもよい。例えば、セッション管理部11を含むPoCサーバ、記録部14と会話ログ保存部15とを含むログサーバ、閲覧処理部16と送信処理部17とを含む引用サーバに分散してもよい。また、上記ログサーバと引用サーバとの機能を1台で含むログ保存引用サーバを用いてもよい。   The conversation server 10 includes a session management unit 11, a determination unit 12, a determination rule 13, a recording unit 14, a conversation log storage unit 15, a browsing processing unit 16, and a transmission processing unit 17. These units do not need to be included in one conversation server 10 and may be distributed to a plurality of servers. For example, you may distribute to the PoC server containing the session management part 11, the log server containing the recording part 14 and the conversation log preservation | save part 15, and the quotation server containing the browsing process part 16 and the transmission process part 17. Further, a log storage citation server including the functions of the log server and the citation server may be used.

セッション管理部11は、セッション管理機能、フロア制御機能など、PoCサーバが通常備える機能を持つ。   The session management unit 11 has functions normally provided in the PoC server, such as a session management function and a floor control function.

判定部12は、あるセッションが記録を行う対象か否かの判断を、記憶装置に格納されている判定ルール13に基づいて行う。   The determination unit 12 determines whether or not a certain session is a recording target based on the determination rule 13 stored in the storage device.

記録部14は、判定部12の結果に従って、セッション管理部11より受け取った通信データおよび付加データを、会話ログとして会話ログ保存部15へ記録する。会話ログ保存部15は記憶装置である。   The recording unit 14 records the communication data and additional data received from the session management unit 11 in the conversation log storage unit 15 as a conversation log according to the result of the determination unit 12. The conversation log storage unit 15 is a storage device.

図2は会話ログ保存部15が格納する会話ログの構成例を示す図である。会話ログ保存部15は、記録部14による通信データ、付加データの書き込みの結果、以下のようなデータを含む会話ログを保持する。これらのデータは、PoCの発話毎に分割されていることを想定しているが、それ以外の方法で分割されていてもかまわない。
(1)セッション識別子:データを保存したセッションを見分けるための識別子。
(2)発信者識別子:データを発言したユーザを見分けるための識別子。
(3)シーケンス:セッション内でのデータの順列番号。
(4)通信データ:以前のセッションもしくは参加中のセッションで流れたデータを保存したデータ。
FIG. 2 is a diagram illustrating a configuration example of a conversation log stored in the conversation log storage unit 15. The conversation log storage unit 15 holds a conversation log including the following data as a result of writing the communication data and additional data by the recording unit 14. Although it is assumed that these data are divided for each PoC utterance, they may be divided by other methods.
(1) Session identifier: an identifier for identifying a session storing data.
(2) Caller identifier: An identifier for identifying a user who has spoken data.
(3) Sequence: Permutation number of data in session.
(4) Communication data: Data stored in a previous session or a session in which the session was attended.

このデータは、たとえばプレストークスイッチを押してから発言をして話すまでをひとつのデータとするなどして、1セッション中の発言内容を複数のデータに分割したものである。別の実施例として、セッションとは関係ない方法で作成されたデータであってもかまわない。
(5)その他情報:通信データについての付加的な情報。発言者、発言時刻、発言時間、発言セッション内でのシーケンシャル番号、発言グループ名、変換前のメディアの種別、発話の順序番号など。
(6)引用制限フラグ:以下の3種のフラグを含む。
(6−a)本人以外再利用可否フラグ:本通信データを作成した発言者本人以外のユーザが、本通信データをPoCセッションに対して送付することができるかどうかを示すフラグ。
(6−b)グループ外再利用可否フラグ:本通信データを作成した会話のグループと同一ではないグループにおけるPoCセッションにおいて、本通信データをPoCセッションに対して送付することができるかどうかを示すフラグ。
(6−c)セッション外再利用可否フラグ:本通信データを作成した現在通話中のPoCセッション以外のセッションに対して、本通信データを送付することができるかどうかを示すフラグ
(6−d)データ利用可能ユーザリスト有効フラグ:本通信データをPoCセッションにおいて送出可能なユーザの一覧を保持する「データ利用可能ユーザリスト」が、有効であるかどうかを示すフラグ。無効である場合には、データ利用可能ユーザリストは利用されない。「データ利用可能ユーザリスト」は、本通信データをPoCセッションにおいて送出可能なユーザの一覧を保持するもので、会話ログ保存部15に含まれる。
This data is obtained by dividing the content of a statement during one session into a plurality of data, for example, by pressing the press talk switch until the user speaks and speaks. As another example, the data may be created by a method not related to the session.
(5) Other information: Additional information about communication data. Speaker, utterance time, utterance time, sequential number in utterance session, utterance group name, media type before conversion, utterance sequence number, etc.
(6) Citation restriction flag: Includes the following three flags.
(6-a) Non-person reusability flag: A flag indicating whether a user other than the speaker who created the communication data can send the communication data to the PoC session.
(6-b) Out-of-group reuse flag: A flag indicating whether or not the communication data can be sent to the PoC session in a PoC session in a group that is not the same as the conversation group that created the communication data. .
(6-c) Out-of-session reuse flag: A flag (6-d) indicating whether the communication data can be sent to a session other than the PoC session in which the communication data is currently being created. Data available user list valid flag: A flag indicating whether or not the “data available user list” that holds a list of users that can transmit this communication data in the PoC session is valid. If it is invalid, the data available user list is not used. The “data available user list” holds a list of users who can send the communication data in the PoC session, and is included in the conversation log storage unit 15.

別の実現方法として、上にも述べたように、会話ログ保存部15は、通信データとして以前のセッションにおいて発言された情報を保存するだけではなく、それ以外の方法で作成されたデータが保存されていてもよい。   As another implementation method, as described above, the conversation log storage unit 15 not only stores information remarked in the previous session as communication data, but also stores data created by other methods. May be.

閲覧処理部16は、端末20からの指示に従って、会話ログ保存部15にアクセスして引用するべきデータの検索を行い、端末20を介してユーザに対してその結果を返却する。また、閲覧処理部16は、端末A20aからデータの送付指示を受け、会話ログ保存部15から通信データおよび付加データを読み出し、その後、送信処理部17に対して、PoCセッションへの通信データおよび付加データの送出を指示する。   In accordance with an instruction from the terminal 20, the browsing processing unit 16 accesses the conversation log storage unit 15 to search for data to be cited, and returns the result to the user via the terminal 20. In addition, the browsing processing unit 16 receives a data transmission instruction from the terminal A 20a, reads communication data and additional data from the conversation log storage unit 15, and then transmits to the transmission processing unit 17 communication data and addition to the PoC session. Instruct to send data.

送信処理部17は、閲覧処理部16からの指示と通信データおよび付加データを受けて、セッション管理部11と通信することによりこれらのデータをセッションに対して送出する。   The transmission processing unit 17 receives an instruction, communication data, and additional data from the browsing processing unit 16, and transmits these data to the session by communicating with the session management unit 11.

端末20は、携帯電話機などであり、データを入力するためのボタン、音声入出力部、データを画面表示するための表示部などを有する。端末20は、基本的なPoCサービスを利用することができる機能を有している。また、端末20は、閲覧処理部16とのインタフェイスを持っており、会話ログ保存部15に保存されている通信データを引用するために検索をすることができる。また、端末20は、閲覧処理部16に対して、検索した結果の通信データおよび付加データを現在参加しているセッションに対して送付することを指示する機能を持っている。さらに、端末20は、引用された通信データおよび付加データを受信した際に、それが引用情報であることを表示する機能と関連する付加情報をユーザに対して提示する機能を持つ。   The terminal 20 is a mobile phone or the like, and includes a button for inputting data, a voice input / output unit, a display unit for displaying data on the screen, and the like. The terminal 20 has a function that can use a basic PoC service. Further, the terminal 20 has an interface with the browsing processing unit 16, and can perform a search to cite the communication data stored in the conversation log storage unit 15. Further, the terminal 20 has a function of instructing the browsing processing unit 16 to send the communication data and additional data obtained as a result of the search to the currently participating session. Furthermore, the terminal 20 has a function of presenting additional information related to a function of displaying that the communication data and additional data cited are displayed as the cited information to the user.

次に、第1の実施の形態の動作について説明する。図3は通信データを記録する動作を示すフローチャートである。   Next, the operation of the first embodiment will be described. FIG. 3 is a flowchart showing an operation for recording communication data.

セッション管理部11は、発信者からの通信を端末20を介して受信する(ステップA1)。   The session management unit 11 receives communication from the caller via the terminal 20 (step A1).

セッション管理部11は、判定部12に対し、受信した通信内容を記録するべきかどうかの判定を依頼する(ステップA2)。   The session management unit 11 requests the determination unit 12 to determine whether the received communication content should be recorded (step A2).

判定部12は、保持する判定ルール13に基いて記録が必要かどうかを判定し、判定結果をセッション管理部11に返す(ステップA3)。   The determination unit 12 determines whether recording is necessary based on the determination rule 13 held, and returns the determination result to the session management unit 11 (step A3).

セッション管理部11は、判定部12から通信内容の記録が必要であるいう判定結果を受信すると、記録部14に対し、通信データの記録を要求する(ステップA4)。   When the session management unit 11 receives the determination result that the communication content needs to be recorded from the determination unit 12, the session management unit 11 requests the recording unit 14 to record the communication data (step A4).

記録部14は、セッション管理部11から要求を受けると、通信データに、セッション識別子、発信者識別子などの付加データと合わせて、会話ログとして会話ログ保存部15に記録する(ステップA5)。   When receiving a request from the session management unit 11, the recording unit 14 records the communication data together with additional data such as a session identifier and a caller identifier in the conversation log storage unit 15 as a conversation log (step A5).

セッション管理部11は、通信データをセッション参加端末20に送信する(ステップA6)。   The session management unit 11 transmits communication data to the session participation terminal 20 (step A6).

なお、処理順序は上記に限定されるものではなく、ステップA4〜A5の記録処理と、ステップA6の配信処理は、並列して行ってもよい。また、ステップA4〜A5の記録処理と、ステップA6の配信処理の順番は、逆転しても良い。   Note that the processing order is not limited to the above, and the recording processing in steps A4 to A5 and the distribution processing in step A6 may be performed in parallel. Further, the order of the recording process in steps A4 to A5 and the distribution process in step A6 may be reversed.

判定ルール13は、セッションの通信内容の記録が必要かどうかを判定するための条件式である。なお、判定ルールによっては、セッション中の特定の通信内容だけを記録することも可能である。判定ルールの詳細については、本発明の主要部分ではないため、ここでは詳述しない。   The determination rule 13 is a conditional expression for determining whether it is necessary to record the communication contents of the session. Depending on the determination rule, it is also possible to record only specific communication contents during the session. The details of the determination rule are not the main part of the present invention, and will not be described in detail here.

図4は、記録された通信データを引用する動作を示すフローチャートである。会話サーバ10の動作に従って、端末A20a、端末B20b、端末C20cがセッションに参加しているとする。   FIG. 4 is a flowchart showing an operation of quoting recorded communication data. It is assumed that the terminal A 20a, the terminal B 20b, and the terminal C 20c are participating in the session according to the operation of the conversation server 10.

端末A20aは、検索するために、閲覧処理部16に対して、データ選択のための情報を要求する(ステップB1)。   In order to search, the terminal A20a requests information for data selection from the browsing processing unit 16 (step B1).

閲覧処理部16は、会話ログ保存部15にアクセスし、会話ログの情報提示を読み出す(ステップB2)。   The browsing processing unit 16 accesses the conversation log storage unit 15 and reads information presentation of the conversation log (step B2).

閲覧処理部16は、得られた情報に含まれる引用制限フラグを元に引用の可否の判断を行う(ステップB3)。この判断によって、引用の範囲に、記録時と同一のグループ内、発信されたセッション内、指定された個別ユーザ、記録時の発言者、などの制限を加える。このステップB3では以下の(1)〜(4)の判断がなされる。順番は不同でかまわない。
(1)本人以外再利用可否フラグをチェックし、否の場合は、引用しようとしているデータの発信者が、引用しようとしているユーザと同一であるかどうかをチェックし、同一である場合、引用を許可する。
(2)グループ外再利用可否フラグをチェックし、否の場合は、現在参加しているセッションのグループ名と、記録データを保存した際のセッションのグループ名とが一致している場合には、引用可能とする。
(3)セッション外再利用可否フラグをチェックし、否の場合は、引用しようとしている通信データのセッションと、現在参加しているセッションとが同一の場合には、引用を可能とする。
(4)データ利用可能ユーザリスト有効フラグが可の場合には、データ利用可能ユーザリストに、引用しようとしているユーザが登録されているかどうかをチェックし、含まれている場合には、引用を可能とする。
The browsing processing unit 16 determines whether or not citation is possible based on the citation restriction flag included in the obtained information (step B3). Based on this determination, the range of citations is limited to the same group as the recording, within the transmitted session, the specified individual user, the speaker at the time of recording, and the like. In step B3, the following judgments (1) to (4) are made. The order does not matter.
(1) The reusability flag other than the principal is checked. If the answer is negative, it is checked whether the sender of the data to be quoted is the same as the user to be quoted. to approve.
(2) Check the reusability flag outside the group, and if not, if the group name of the currently participating session matches the group name of the session when the recorded data is saved, Can be quoted.
(3) The non-session reusability flag is checked, and if not, quoting is possible if the session of communication data to be cited is the same as the currently participating session.
(4) When the data available user list valid flag is enabled, it is checked whether or not the user who is going to quote is registered in the data available user list. And

閲覧処理部16は、会話ログ保存部15にアクセスし、選択されたセッションにおいて発言された通信データの一覧を端末A20aに対して送付する(ステップB4)。通信データの各々には参照子が割り当てられており、閲覧処理部16は、参照子をキーとして会話ログ保存部15に対して与えることにより、対応する通信データを読み出すことができる。端末A20aに一覧で表示される内容は以下のとおりとするが、そのほかのものも可能である。通信データの開始時刻、終了時刻、発話時間、発話の順列番号、発言者、データの形式(音声、画像、動画等)、グループ名。   The browsing processing unit 16 accesses the conversation log storage unit 15 and sends a list of communication data remarked in the selected session to the terminal A 20a (step B4). Each communication data is assigned a reference, and the browsing processing unit 16 can read the corresponding communication data by giving the reference to the conversation log storage unit 15 as a key. The contents displayed as a list on the terminal A 20a are as follows, but other contents are also possible. Communication data start time, end time, utterance time, utterance permutation number, speaker, data format (voice, image, video, etc.), group name.

ユーザは端末A20aに表示される一覧の情報から必要なものをカーソルなどで選択し、決定する。選択された情報は、端末A20aで以下の(1)または(2)の手順を行うことで、通信データのセッションへの送出指示が閲覧処理部16に対して送られる(ステップB5)。送出指示には、参照子が付与されており、それによって通信データの特定を行う。
(1)次にプレストークボタンを押したときに閲覧処理部16に送付される。
(2)端末A20a上のブックマークリストに保管し、通話中にブックマークより再度選択したときに閲覧処理部16に送付される。
The user selects and decides necessary information from the list information displayed on the terminal A 20a with a cursor or the like. As for the selected information, the terminal A 20a performs the following procedure (1) or (2), so that an instruction to send communication data to the session is sent to the browsing processing unit 16 (step B5). A reference is given to the transmission instruction, and the communication data is specified thereby.
(1) Next, when the press talk button is pressed, it is sent to the browsing processing unit 16.
(2) Stored in the bookmark list on the terminal A 20a, and sent to the browsing processing unit 16 when selected again from the bookmark during a call.

閲覧処理部16は、端末A20aより受けた送出指示に応じて、参照子をキーにして該当する通信データおよび付加データを会話ログ保存部15より読み出す(ステップB6)。   In response to the transmission instruction received from the terminal A 20a, the browsing processing unit 16 reads the corresponding communication data and additional data from the conversation log storage unit 15 using the reference as a key (step B6).

閲覧処理部16は、読み出した通信データ、付加データを、送信指示とともに送信処理部17に対して送る(ステップB7)。   The browsing processing unit 16 sends the read communication data and additional data to the transmission processing unit 17 together with a transmission instruction (step B7).

送信処理部17は、セッション管理部11と通信を行ってフロア権を取得し、セッション管理部11を通して、現在参加しているセッションに対して、閲覧処理部16より受け取った通信データ、付加データを送付する(ステップB8)。   The transmission processing unit 17 communicates with the session management unit 11 to acquire the floor right, and transmits the communication data and additional data received from the browsing processing unit 16 to the currently participating session through the session management unit 11. Send (step B8).

端末A20a、端末B20b、端末C20cは、送信処理部17からセッション管理部11を介して受け取った記録データ、付加データをユーザに対して提供する。端末A20a、端末B20b、端末C20cは、以下の(1)または(2)の方法を使って、セッション管理部11より送付された情報が引用された情報であることをユーザに通知する。
(1)各端末20の表示部に引用であることを表す文字や画像やアイコンを表示する。
(2)引用情報を各端末20で提示すると同時に、引用情報であることを表す、音、音声、音楽などを再生する。
各端末20は、これに加えて、付加データをユーザに対して表示する。付加データは通信データとともに送信処理部17に対して渡されている。付加データは、通信データの開始時刻、終了時刻、発話時間、発話の順列番号、発言者、データの形式(音声、画像、動画等)などである。これらの情報は、各端末20の表示部に表示される。
The terminal A 20a, the terminal B 20b, and the terminal C 20c provide the recording data and additional data received from the transmission processing unit 17 via the session management unit 11 to the user. The terminal A20a, the terminal B20b, and the terminal C20c notify the user that the information sent from the session management unit 11 is cited information using the following method (1) or (2).
(1) Characters, images, and icons representing citations are displayed on the display unit of each terminal 20.
(2) The quotation information is presented on each terminal 20, and at the same time, sound, voice, music, and the like representing the quotation information are reproduced.
In addition to this, each terminal 20 displays additional data to the user. The additional data is transferred to the transmission processing unit 17 together with the communication data. The additional data includes the start time, end time, utterance time, utterance permutation number, speaker, data format (sound, image, video, etc.) of the communication data. These pieces of information are displayed on the display unit of each terminal 20.

引用データが送付されているセッションにおいて、履歴の保存が行われている場合、セッション管理部11は、送信処理部17から送られた付加データを、記録部14に対して送付する(ステップB9)。   If the history is stored in the session to which the cited data is sent, the session management unit 11 sends the additional data sent from the transmission processing unit 17 to the recording unit 14 (step B9). .

記録部14は、この情報を受けた場合には、データを記録する際に、セッションでやり取りされる情報そのものではなく、付加データの中の参照子を会話ログ保存部15へ保存する(ステップB10)。   When the recording unit 14 receives this information, when recording the data, the recording unit 14 stores the reference in the additional data, not the information exchanged in the session itself, in the conversation log storage unit 15 (step B10). ).

本実施の形態では、会話ログ保存部15を置き、そこにアクセスをしてPoCセッションに通信データを送付する送信処理部17を有するため、通信データを他のセッションや、他の端末からも利用することが可能となる。   In the present embodiment, the conversation log storage unit 15 is placed, and there is a transmission processing unit 17 that accesses and sends the communication data to the PoC session. Therefore, the communication data is also used from other sessions and other terminals. It becomes possible to do.

また、端末に引用表示を行うため、ユーザはそのデータが引用情報であることを認識できる。さらに引用表示を画像や音声とすることでユーザの認識が容易となる。   In addition, since the quotation is displayed on the terminal, the user can recognize that the data is the quotation information. Further, the user can easily recognize the citation display as an image or sound.

また、端末20に対して引用データの付加データも送付し、受信ユーザに対して表示するため、引用の情報は、誰が何時発言したものなのかをユーザが知ることができる。   Further, since the additional data of the citation data is also sent to the terminal 20 and displayed to the receiving user, the user can know who and when the citation information is what was said.

また、会話ログ保存部15にて、閲覧の制限範囲を示すフラグをもち、閲覧処理部16にてそのフラグに応じた閲覧制限を施すため、無制限の引用を防ぐことができる。   In addition, since the conversation log storage unit 15 has a flag indicating a browsing restriction range, and the browsing processing unit 16 performs browsing limitation according to the flag, unlimited citations can be prevented.

また、引用をしたセッションの記録をとる際に、引用した通信データそのものではなく、引用した通信データへの参照子を保存するため、引用を行った場合にも、引用元のセッションの情報をたどることが可能である。また、データ保存の領域を節約することも可能である。   Also, when recording a session that has been cited, a reference to the cited communication data is saved instead of the quoted communication data itself. It is possible. It is also possible to save the data storage area.

次に、本発明の第2の実施の形態について説明する。図5は第2の実施の形態の構成と動作を示す図である。第2の実施の形態では、図5に示すとおり、引用データのセッションへの送付を送信処理部(図1の17)から直接行わずに、一度端末A20aにデータを保存した後で、端末A20aよりセッションに対してデータを送付する。   Next, a second embodiment of the present invention will be described. FIG. 5 is a diagram showing the configuration and operation of the second embodiment. In the second embodiment, as shown in FIG. 5, the terminal A20a is stored once in the terminal A20a without directly sending the quoted data to the session from the transmission processing unit (17 in FIG. 1). Send data to the session.

第2の実施の形態のフローは、第1の実施の形態のステップB7を以下のステップB7a、B7bに入れ替える。   In the flow of the second embodiment, step B7 of the first embodiment is replaced with the following steps B7a and B7b.

閲覧処理部16は、読み出した通信データおよび付加データを、引用をしようとしている端末A20aに対して送付する(ステップB7a)。端末A20aは、一時的にその情報を保持することも可能である。   The browsing processing unit 16 sends the read communication data and additional data to the terminal A 20a trying to quote (step B7a). The terminal A20a can also temporarily hold the information.

通信データおよび付加データを受け取った端末A20aは、セッション管理部11と通信を行ってフロア権を取得し、セッション管理部11を通して、現在参加しているセッションに対して、閲覧処理部16より受け取った通信データおよび付加データを送付する(ステップB7b)。   The terminal A 20 a that has received the communication data and the additional data communicates with the session management unit 11 to acquire the floor right, and receives the session right from the browsing processing unit 16 through the session management unit 11. Communication data and additional data are sent (step B7b).

第2の実施の形態では、送信処理部(図1の17)がなくてもよいため、第1の実施の形態と比較して構成が簡単となる。   In the second embodiment, since there is no need for the transmission processing unit (17 in FIG. 1), the configuration is simple compared to the first embodiment.

次に、本発明の第3の実施の形態について説明する。図6は第3の実施の形態の構成と動作を示す図である。第3の実施の形態では、第1の実施の形態の構成に加えてメディア変換部18を含む。第3の実施の形態では、メディア変換部18にて、セッションに送付する通信データのメディアの形式を記録したときから変換して送付することが可能である。   Next, a third embodiment of the present invention will be described. FIG. 6 is a diagram showing the configuration and operation of the third embodiment. The third embodiment includes a media conversion unit 18 in addition to the configuration of the first embodiment. In the third embodiment, the media conversion unit 18 can convert and send the media format of the communication data to be sent to the session after recording.

メディア変換部18にて行われるメディアの変換には、たとえば以下のようなものがある。
(1)テキストで保存されている情報を音声に変換する。
(2)音声で保存されている情報をテキストに変換する。
(3)テキストで保存されている情報を画像に変換する。
Examples of media conversion performed by the media conversion unit 18 include the following.
(1) Convert information stored in text into speech.
(2) Convert information stored in voice to text.
(3) Convert information stored in text into an image.

また、メディア変換部18で、送付内容が引用データであることを示すために下記のような情報を付与することも可能である。
(a)音声に対して、特定の発信音もしくは音声を流すことで、引用データであることを表す。
(b)画像・動画に対して、「引用」を表す文字やマーク、動画などを画像中に付ける。
In addition, the media conversion unit 18 can add the following information to indicate that the sent content is cited data.
(A) A specific dial tone or voice is played with respect to the voice to indicate that it is quoted data.
(B) A character, mark, moving image, or the like representing “quotation” is added to the image / moving image.

また、メディア変換部18で通信データの画像や、音声の中に付加情報を埋め込み、そのデータを閲覧処理部16が送出指示することにより、ユーザに提示することも可能である。   Further, the media conversion unit 18 can embed additional information in an image or voice of communication data, and the browsing processing unit 16 can instruct the transmission to send the data to the user.

これら動作を行うために、第3の実施の形態では、第1の実施の形態のステップB6とB7の間に以下の動作を加える。   In order to perform these operations, in the third embodiment, the following operations are added between steps B6 and B7 of the first embodiment.

閲覧処理部16は、読み出した通信データと付加データをメディア変換部18に送付する(ステップB6a)。   The browsing processing unit 16 sends the read communication data and additional data to the media conversion unit 18 (step B6a).

メディア変換部18では、受け取ったメディアの形式の変更及び、付加データの追加書き込みなどを行ったうえで、閲覧処理部16に対して通信データと付加データを返却する(ステップB6b)。   The media conversion unit 18 changes the format of the received medium and additionally writes additional data, and then returns communication data and additional data to the browsing processing unit 16 (step B6b).

第3の実施の形態では、メディア変換部18を有するため、セッションに送付する通信データのメディアの形式を記録したときから変換して送付することが可能である。また、引用された情報を再生するときに、引用であることを示す音声の再生や、文字や画像、映像の表示を行うことによって、引用と通常の発話を見分けることができる。   In the third embodiment, since the media conversion unit 18 is included, it is possible to convert and send the media format of the communication data to be sent to the session. In addition, when reproducing the quoted information, it is possible to distinguish between quotes and normal utterances by playing back sound indicating that it is a quote and displaying characters, images, and videos.

次に、本発明の第4の実施の形態について説明する。図7は第4の実施の形態の構成と動作を示す図である。構成は第1または第2の実施の形態と同じでよい。   Next, a fourth embodiment of the present invention will be described. FIG. 7 is a diagram showing the configuration and operation of the fourth embodiment. The configuration may be the same as in the first or second embodiment.

第4の実施の形態の動作を説明する。端末20、セッション管理部11間の連携により、セッションに対して発言が行われる(ステップC1)。セッション管理部11は通信データを記録部14に送付する(ステップC2)。記録部14は、受信した通信データを、履歴情報として会話ログ保存部15に保存する(ステップC3)。ステップC1〜C3の動作は、一部省略しているが、第1の実施の形態のステップA1〜A5と同じである。   The operation of the fourth embodiment will be described. By cooperation between the terminal 20 and the session management unit 11, a speech is made for the session (step C1). The session management unit 11 sends the communication data to the recording unit 14 (step C2). The recording unit 14 stores the received communication data as history information in the conversation log storage unit 15 (step C3). Steps C1 to C3 are partially omitted in operation, but are the same as steps A1 to A5 in the first embodiment.

端末A20aは、発言の途中、もしくは発言の直後に、引用ボタン(図示せず)を押すことで閲覧処理部16に対して引用を指示する(ステップC4)。   The terminal A20a instructs the browsing processing unit 16 to quote by pressing a quote button (not shown) in the middle of the speech or immediately after the speech (step C4).

閲覧処理部16は、その時点でのタイムスタンプおよびセッション情報などを利用して会話ログ保存部15に対して、データの参照の問い合わせを行う(ステップC5)。   The browsing processing unit 16 makes an inquiry about data reference to the conversation log storage unit 15 using the time stamp and session information at that time (step C5).

会話ログ保存部15は、ステップC5の問い合わせを受けて、ステップC3にて保存された該当する発言に対する参照子を生成し、閲覧処理部16を経由して、端末A20aへと返却する(ステップC6)。   In response to the inquiry in step C5, the conversation log storage unit 15 generates a reference for the corresponding statement stored in step C3, and returns it to the terminal A 20a via the browsing processing unit 16 (step C6). ).

端末A20aは、返却された参照子を元に、ブックマークを作成し端末A20a内部の記憶部に記憶する(ステップC7)。   The terminal A20a creates a bookmark based on the returned reference and stores it in the storage unit inside the terminal A20a (step C7).

第4の実施の形態では、記録が行われているセッション中に、特定のキーを押すなどの操作を行うことにより、現在発言中の通信データを端末20のブックマークに登録を行う機能を実現することが可能である。   In the fourth embodiment, by performing an operation such as pressing a specific key during a recording session, a function of registering the communication data currently being spoken in the bookmark of the terminal 20 is realized. It is possible.

次に、本発明の第5の実施の形態について説明する。第5の実施の形態では第1の実施の形態の構成に加えてメディア変換部18を有する。つまり、構成は第3の実施の形態(図6)と同じである。第5の実施の形態では、引用をするデータを検索する際に、データの形式を変換し、一覧表示が容易になる機能を提供する。   Next, a fifth embodiment of the present invention will be described. The fifth embodiment includes a media conversion unit 18 in addition to the configuration of the first embodiment. That is, the configuration is the same as that of the third embodiment (FIG. 6). In the fifth embodiment, when searching for data to be cited, the function of converting the data format and facilitating the list display is provided.

データが音声の場合には、音声→文字列変換を施すことによって、一覧表示にその一部分、たとえば冒頭部分のテキストを同時に表示することによって、内容を確認しやすくする。データが画像の場合には、その縮小表示を一覧表示の際に同時に表示する。動画の場合には、その一部のフレーム(たとえば最初のフレーム)の画像を一覧表示の際に表示を行う。これらの選択画面の例を図8に示す。   When the data is voice, by converting the voice to a character string, a part thereof, for example, the text of the beginning part is simultaneously displayed on the list display, thereby making it easy to confirm the contents. When the data is an image, the reduced display is displayed simultaneously with the list display. In the case of a moving image, an image of a part of the frames (for example, the first frame) is displayed when displaying the list. Examples of these selection screens are shown in FIG.

ただし、この選択の方式は引用に限らず、一般的なログデータの検索一般において適用することが可能である。   However, this method of selection is not limited to citation, and can be applied to general log data retrieval in general.

これら動作を行うために、第1の実施の形態(図4)のステップB4のあとに以下の動作をつけ加える。   In order to perform these operations, the following operations are added after step B4 of the first embodiment (FIG. 4).

閲覧処理部16は、検索抽出されたデータの一覧を元に、参照子を指定することで通信データ、付加データを会話ログ保存部15より読み出す(ステップB4a)。   The browsing processing unit 16 reads the communication data and the additional data from the conversation log storage unit 15 by designating a reference based on the list of the retrieved and extracted data (step B4a).

閲覧処理部16は読み出したデータをメディア変換部18に送付する。メディア変換部18は上記のとおりの変換を施し、閲覧処理部16へと返す(ステップB4b)。具体的な例としては、
(1)音声をテキストに変換し、一覧表示の画面に表示することができる長さの一部分(たとえば冒頭部分)を抜き出す。
(2)画像の大きさを変換し、一覧表示の画面に表示することができる大きさにする。
(3)動画像の一部分を画像として抜き出し、一覧表示の画面に表示することができる大きさにする。
The browsing processing unit 16 sends the read data to the media conversion unit 18. The media conversion unit 18 performs the conversion as described above and returns it to the browsing processing unit 16 (step B4b). As a specific example,
(1) The voice is converted into text, and a part of the length (for example, the beginning part) that can be displayed on the list display screen is extracted.
(2) The image size is converted to a size that can be displayed on a list display screen.
(3) Extracting a part of a moving image as an image and making it a size that can be displayed on a list display screen.

閲覧処理部16は、得られたデータを、端末A20aに送付すべき一覧で表示される内容に追加する(ステップB4c)。   The browsing processing unit 16 adds the obtained data to the contents displayed in the list to be sent to the terminal A 20a (step B4c).

第5の実施の形態では、引用をするデータを検索する際に、データの形式が変換させるため、一覧表示が容易になるという効果がある。   In the fifth embodiment, when searching for data to be cited, the format of the data is converted, so that it is easy to display a list.

本発明は、ビジネスにおけるPoC(会話システム)利用において、議事録の参照として利用される。   The present invention is used as a reference of minutes in PoC (conversation system) use in business.

また、第三者が提供する録音や作成されたデータを、特定の人物に対して提供する会話システムが可能となる。   In addition, it is possible to provide a conversation system that provides a specific person with recordings or created data provided by a third party.

また、複数人のグループにおける会話セッションに限らず、ユーザ1名によるセッションを生成し、記録された情報の再利用と、新たな発言を追加し、その様子を記録することで、音声データの再編集作業を行うことも可能である。   In addition to conversation sessions in a group of multiple people, a session by one user is generated, the recorded information is reused, a new statement is added, and the state is recorded, so that the audio data can be regenerated. It is also possible to perform editing work.

本発明の第1〜第5の実施の形態の会話サーバ10の動作はコンピュータ・プログラム処理により行わせることが可能である。すなわち、記録媒体に記録したプログラムを会話サーバ10に読み込ませるか、あるいは、ネットワークからプログラムを会話サーバ10に読み込ませて、第1〜第5の実施の形態で説明した動作を実行させる。   The operations of the conversation server 10 according to the first to fifth embodiments of the present invention can be performed by computer program processing. That is, the program recorded on the recording medium is read by the conversation server 10 or the program is read by the conversation server 10 from the network to execute the operations described in the first to fifth embodiments.

第1の実施の形態の構成を示すブロック図である。It is a block diagram which shows the structure of 1st Embodiment. 会話ログ保存部が格納する会話ログの構成例を示す図である。It is a figure which shows the structural example of the conversation log which a conversation log preservation | save part stores. 通信データを記録する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which records communication data. 記録された通信データを引用する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which quotes the recorded communication data. 第2の実施の形態の構成と動作を示す図である。It is a figure which shows the structure and operation | movement of 2nd Embodiment. 第3の実施の形態の構成と動作を示す図である。It is a figure which shows the structure and operation | movement of 3rd Embodiment. 第4の実施の形態の構成と動作を示す図である。It is a figure which shows the structure and operation | movement of 4th Embodiment. 第5の実施の形態において端末に表示される選択画面の一例である。It is an example of the selection screen displayed on a terminal in 5th Embodiment.

符号の説明Explanation of symbols

10 会話サーバ
11 セッション管理部
12 判定部
13 判定ルール
14 記録部
15 会話ログ保存部
16 閲覧処理部
17 送信処理部
18 メディア変換部
20 端末
20a 端末A
20b 端末B
20c 端末C
100 ネットワーク
DESCRIPTION OF SYMBOLS 10 Conversation server 11 Session management part 12 Judgment part 13 Judgment rule 14 Recording part 15 Conversation log preservation | save part 16 Browsing process part 17 Transmission process part 18 Media conversion part 20 Terminal 20a Terminal A
20b Terminal B
20c Terminal C
100 network

Claims (18)

一のセッションに参加する複数の端末であるセッション参加端末間のグループ通信を中継する会話サーバであって、
前記セッション参加端末のうちの一の端末から発信された通信データを受信すると、記録部に前記通信データを記憶装置の会話ログ保存部へ格納させた後に、当該通信データを前記各セッション参加端末に送信する、セッション管理部と、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信する送信処理部とを備える会話サーバ。
A conversation server that relays group communication between session participation terminals that are a plurality of terminals participating in one session,
When communication data transmitted from one of the session participation terminals is received, the communication data is stored in the conversation log storage unit of the storage device in the recording unit, and then the communication data is stored in each session participation terminal. The session manager to send,
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction A conversation server comprising a transmission processing unit that transmits to a session participation terminal.
前記送出指示端末から検索要求を受信し、前記検索要求で指定される通信データを前記会話ログ保存部から抽出し、前記抽出した通信データである抽出通信データの一覧情報を前記送出指示端末に送信する閲覧処理部を備える請求項1記載の会話サーバ。 A search request is received from the transmission instruction terminal, communication data specified by the search request is extracted from the conversation log storage unit, and list information of the extracted communication data which is the extracted communication data is transmitted to the transmission instruction terminal The conversation server of Claim 1 provided with the browsing process part to perform. 前記セッション参加端末のうちの第一の端末から、前記セッション参加端末のうちの当該第一の端末または他の端末からの通信データの発信の途中もしくは発信の直後にブックマーク要求を受信し、当該通信データに対して参照子を生成し、当該参照子を前記ブックマーク要求した端末に送信する閲覧処理部を備える請求項1または2記載の会話サーバ。 A bookmark request is received from the first terminal of the session participating terminals, during or immediately after the transmission of communication data from the first terminal of the session participating terminals or from other terminals, and the communication The conversation server according to claim 1, further comprising: a browsing processing unit that generates a reference for the data and transmits the reference to the terminal that requested the bookmark. 前記セッション管理部は、通信データを発信した端末が参加するセッションの第一のセッション識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記閲覧処理部は、前記セッション参加端末のうちの一の端末から当該端末が参加するセッションの第二のセッション識別子を包含する検索要求を受信し、前記第一と前記第二のセッション識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する請求項2記載の会話サーバ。
The session management unit receives additional data including the first session identifier and citation restriction information of the session in which the terminal that has transmitted the communication data participates from the terminal together with the communication data, and stores the additional data in the recording unit. In association with the communication data, store in the conversation log storage unit,
The browsing processing unit receives a search request including a second session identifier of a session in which the terminal participates from one of the session participating terminals, and the first and second session identifiers are different. 3. The conversation server according to claim 2, wherein the list server determines whether to include each of the extracted communication data in the list information based on the citation restriction information corresponding to each of the extracted communication data.
前記セッション管理部は、通信データを発信した発言者の識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記閲覧処理部は、前記セッション参加端末のうちの一の端末からユーザの識別子を包含する検索要求を受信し、前記発言者と前記ユーザの識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する請求項2または4記載の会話サーバ。
The session management unit receives additional data including the identifier of a speaker who has transmitted communication data and citation restriction information from the terminal together with the communication data, and associates the additional data with the communication data in the recording unit. Store in the conversation log storage unit,
The browsing processing unit receives a search request including a user identifier from one of the session participation terminals, and corresponds to each of the extracted communication data when the speaker and the user identifier are different. The conversation server according to claim 2 or 4, wherein each of the extracted communication data is determined to be included in the list information based on the citation restriction information.
前記送信処理部は、前記引用データに、引用情報であることを示す引用表示を加えて、前記各セッション参加端末に送信する請求項1乃至5のいずれか記載の会話サーバ。 The conversation server according to any one of claims 1 to 5, wherein the transmission processing unit adds a citation display indicating citation information to the citation data and transmits the citation information to each session participation terminal. 通信データに識別子を有し、前記セッション管理部は、前記記録部に引用表示の付された前記引用データを含む会話ログを前記会話ログ保存部へ格納させる場合は、前記記録部に前記引用表示の付された前記引用データの代わりに当該引用データの識別子を格納させる請求項6記載の会話サーバ。 When the communication data has an identifier, and the session management unit stores the conversation log including the citation data with the citation display on the recording unit in the conversation log storage unit, the citation display on the recording unit The conversation server according to claim 6, wherein an identifier of the cited data is stored instead of the cited data to which is attached. 前記セッション管理部は、送信する通信データの発言者名、発話時刻、発話時間、前記発言者が属するグループ名、前記通信データの変換前のメディア種別、前記通信データの会話セッション内でのシーケンシャル番号のうち少なくともひとつを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させ、
前記送信処理部は、前記引用データと当該引用データに対応付けられている付加データとを前記各セッション参加端末に送信する請求項1乃至7いずれか記載の会話サーバ。
The session management unit includes a speaker name, a speech time, a speech time, a group name to which the speaker belongs, a media type before conversion of the communication data, and a sequential number within the conversation session of the communication data. Additional data including at least one of them is received from the terminal together with the communication data, and the recording unit stores the additional data in association with the communication data in the conversation log storage unit,
The conversation server according to claim 1, wherein the transmission processing unit transmits the citation data and additional data associated with the citation data to the session participation terminals.
前記抽出通信データのメディアを変換するメディア変換部を備え、前記閲覧処理部は前記メディア変換部が変換した通信データを、前記送出指示端末に送信する請求項2記載の会話サーバ。 The conversation server according to claim 2, further comprising a media conversion unit that converts media of the extracted communication data, wherein the browsing processing unit transmits the communication data converted by the media conversion unit to the transmission instruction terminal. 前記メディア変換部は、前記抽出通信データに基づいて、当該抽出通信データのおのおのの少なくとも一部の内容に基づいて情報をそれぞれ生成し、前記閲覧処理部は前記メディア変換部が生成した情報を前記一覧情報とともに、前記送出指示端末に送信する請求項9記載の会話サーバ。 The media conversion unit generates information based on at least a part of the content of each of the extracted communication data based on the extracted communication data, and the browsing processing unit generates the information generated by the media conversion unit. The conversation server according to claim 9, which is transmitted together with the list information to the transmission instruction terminal. 前記記録部と前記会話ログ保存部とを備える請求項1乃至10いずれか記載の会話サーバ。 Conversation server according to any one of claims 1 to 10 and a said recording portion and the conversation log storage unit. 請求項1乃至11記載の会話サーバと、
前記セッション参加端末とを備える会話システム。
The conversation server according to claim 1 to 11 ,
A conversation system comprising the session participation terminal.
一のセッションに参加する複数の端末であるセッション参加端末間のグループ通信を中継する会話方法であって、
前記セッション参加端末のうちの一の端末から発信された通信データを受信すると、前記通信データを記憶装置の会話ログ保存部に格納させた後に、当該通信データを前記各セッション参加端末に送信するステップと、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信するステップとを有する会話方法。
A conversation method for relaying group communication between session participation terminals, which are a plurality of terminals participating in one session,
When communication data transmitted from one of the session participation terminals is received, the communication data is stored in a conversation log storage unit of a storage device, and then the communication data is transmitted to each session participation terminal. When,
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction And a step of transmitting to the session participation terminal.
一のセッションに参加する複数の端末であるセッション参加端末のうちの一の端末から発信された通信データを受信すると、前記通信データを記憶装置の会話ログ保存部に格納させた後に、当該通信データを前記各セッション参加端末に送信する第一の処理と、
前記セッション参加端末のうちの一の端末である送出指示端末から送出指示を受信し、前記送出指示で指定される前記会話ログ保存部に格納されている一の通信データである引用データを前記各セッション参加端末に送信する第二の処理とをコンピュータに実行させるためのプログラム。
When communication data transmitted from one of the session participation terminals that are a plurality of terminals participating in one session is received, the communication data is stored in the conversation log storage unit of the storage device, and then the communication data A first process for transmitting to each session participation terminal,
A transmission instruction is received from a transmission instruction terminal that is one of the session participation terminals, and citation data that is one communication data stored in the conversation log storage unit specified by the transmission instruction A program for causing a computer to execute second processing to be transmitted to a session participation terminal.
前記送出指示端末から検索要求を受信し、前記検索要求で指定される通信データを前記会話ログ保存部から抽出し、抽出した通信データである抽出通信データの一覧情報を前記送出指示端末に送信する第三の処理を前記コンピュータに実行させる請求項14記載のプログラム。 A search request is received from the transmission instruction terminal, communication data designated by the search request is extracted from the conversation log storage unit, and list information of the extracted communication data that is the extracted communication data is transmitted to the transmission instruction terminal. The program according to claim 14, which causes the computer to execute a third process. 前記セッション参加端末のうちの第一の端末から、前記セッション参加端末のうちの当該第一の端末または他の端末からの通信データの発信の途中もしくは発信の直後にブックマーク要求を受信し、当該通信データに対して参照子を生成し、当該参照子を前記ブックマーク要求した端末に送信する第四の処理を前記コンピュータに実行させる請求項14または15記載のプログラム。 A bookmark request is received from the first terminal of the session participating terminals, during or immediately after the transmission of communication data from the first terminal of the session participating terminals or from other terminals, and the communication The program according to claim 14 or 15, which causes the computer to execute a fourth process of generating a reference for the data and transmitting the reference to the terminal that requested the bookmark. 通信データを発信した端末が参加するセッションの第一のセッション識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、前記記録部に当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させる前記第一の処理と、
前記セッション参加端末のうち一の端末から当該端末が参加するセッションの第二のセッション識別子を包含する検索要求を受信し、前記第一と前記第二のセッション識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する前記第三の処理とを前記コンピュータに実行させる請求項15記載のプログラム。
The additional data including the first session identifier and the citation restriction information of the session in which the terminal that has transmitted the communication data participates is received from the terminal together with the communication data, and the additional data is associated with the communication data in the recording unit. The first processing to be stored in the conversation log storage unit,
When a search request including a second session identifier of a session in which the terminal participates is received from one of the session participating terminals, and the first and second session identifiers are different, 16. The program according to claim 15, which causes the computer to execute the third process for determining whether to include each of the extracted communication data in the list information based on the citation restriction information corresponding to each.
通信データを発信した発言者の識別子と引用制限情報とを含む付加データを前記通信データとともに前記端末から受信し、当該付加データを前記通信データと対応付けて前記会話ログ保存部へ格納させる前記第一の処理と、
前記セッション参加端末のうち一の端末からユーザの識別子を包含する検索要求を受信し、前記発言者と前記ユーザの識別子が異なる場合、前記抽出通信データのおのおのに対応する前記引用制限情報に基づいて前記抽出通信データのおのおのを前記一覧情報へ包含させるか否かを決定する前記第三の処理とを前記コンピュータに実行させる請求項15または17記載のプログラム。
The additional data including the identifier of the speaker who transmitted the communication data and the citation restriction information is received from the terminal together with the communication data, and the additional data is stored in the conversation log storage unit in association with the communication data. One process,
When a search request including a user identifier is received from one of the session participating terminals and the speaker and the user identifier are different, based on the citation restriction information corresponding to each of the extracted communication data The program according to claim 15 or 17, which causes the computer to execute the third process for determining whether to include each piece of the extracted communication data in the list information.
JP2005227561A 2005-08-05 2005-08-05 Conversation system, conversation method, conversation server and program Expired - Fee Related JP4412255B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005227561A JP4412255B2 (en) 2005-08-05 2005-08-05 Conversation system, conversation method, conversation server and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005227561A JP4412255B2 (en) 2005-08-05 2005-08-05 Conversation system, conversation method, conversation server and program

Publications (2)

Publication Number Publication Date
JP2007041992A JP2007041992A (en) 2007-02-15
JP4412255B2 true JP4412255B2 (en) 2010-02-10

Family

ID=37799891

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005227561A Expired - Fee Related JP4412255B2 (en) 2005-08-05 2005-08-05 Conversation system, conversation method, conversation server and program

Country Status (1)

Country Link
JP (1) JP4412255B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9043474B2 (en) * 2010-01-20 2015-05-26 Microsoft Technology Licensing, Llc Communication sessions among devices and interfaces with mixed capabilities
JP2013522759A (en) * 2010-03-15 2013-06-13 サムスン エレクトロニクス カンパニー リミテッド Method and system for storing session information in a general-purpose plug and play telephony service
KR102396392B1 (en) * 2015-08-10 2022-05-10 네이버 주식회사 System and method for providing virtual communication session for portion of participants connecting to communication session

Also Published As

Publication number Publication date
JP2007041992A (en) 2007-02-15

Similar Documents

Publication Publication Date Title
CN101296355B (en) Mobile communication device capable of storing video chatting log and operating method thereof
CA2473147A1 (en) Method and system for conducting conference calls with optional voice to text translation
JP5048130B2 (en) System and method for providing video message service
JP2007028410A (en) Program, apparatus and method for relaying registration or extraction of voice information to electronic bulletin board
KR100788781B1 (en) System for learning foreign language and method thereof
JP4179375B2 (en) Conversation server
US20080167057A1 (en) Broadcasting System and Data Transmission Method
JP4003753B2 (en) Conversation server
CN101147340A (en) Push-to-talk communication system and push-to-talk communication method
JP4412255B2 (en) Conversation system, conversation method, conversation server and program
US20080220753A1 (en) Mobile communication device, communication system and communication method
JP7052335B2 (en) Information processing system, information processing method and program
JP4779475B2 (en) Electronic bulletin board information notification device
JP5802116B2 (en) Call system with data sharing function
JP4636219B2 (en) Voice transmission method, communication system, and communication terminal
JP2010219969A (en) Call recording device with retrieving function, and telephone set
JP5136823B2 (en) PoC system with fixed message function, communication method, communication program, terminal, PoC server
KR100929531B1 (en) Information provision system and method in wireless environment using speech recognition
JP2020052794A (en) Information processing system
JP7280608B2 (en) CTI system for telephone sales
JP2002057795A (en) Voice file function additional service method for phone terminal, service system and server
JP2007134919A (en) Telephone conversation recording system
KR20020028438A (en) Method for chatting service with integrated voice and character data and computer-readable medium thereof
KR20010084109A (en) Method for transmission of multimedia message
JP2002252708A (en) Speech intermediacy system, speech intermediacy method, and program

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20070119

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20080613

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090303

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090422

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20090508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090526

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090710

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091027

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091109

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121127

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4412255

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121127

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131127

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees