JP4589910B2 - Conversation recording blogging device - Google Patents
Conversation recording blogging device Download PDFInfo
- Publication number
- JP4589910B2 JP4589910B2 JP2006334557A JP2006334557A JP4589910B2 JP 4589910 B2 JP4589910 B2 JP 4589910B2 JP 2006334557 A JP2006334557 A JP 2006334557A JP 2006334557 A JP2006334557 A JP 2006334557A JP 4589910 B2 JP4589910 B2 JP 4589910B2
- Authority
- JP
- Japan
- Prior art keywords
- blog
- conversation
- data
- voice
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 claims description 18
- 238000006243 chemical reaction Methods 0.000 claims description 15
- 238000000605 extraction Methods 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 7
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 239000000284 extract Substances 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 230000002354 daily effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本発明は、会話記録ブログ化装置に関する。更に詳しくは、携帯電話、携帯録音機等を用いたブログ作成のための支援装置及び方法に関する。 The present invention relates to a conversation recording blogging apparatus. More particularly, the present invention relates to a support apparatus and method for creating a blog using a mobile phone, a portable recording device, or the like.
最近、インターネット上でいわゆるブログ(blog:weblogの略称)と呼ばれる、簡易ホームページが急速に普及している。ブログは、単なる個人の日記的なホームページではなく、時事ニュースや専門的トピックスに関して自らの専門や立場に根ざした分析や意見を表明したり、他のサイトの著者と議論したりする形式が多く、様々なコミュニケーション・ツール、知識マネージメント・ツール、及び広告媒体としての役割が高まってきている。 Recently, a simple homepage called a so-called blog (abbreviation of webblog) is rapidly spreading on the Internet. Blogs are not just personal diary homepages, but are often used to express analysis and opinions rooted in your expertise and position, and discuss with other site authors about current news and specialized topics. The role of various communication tools, knowledge management tools, and advertising media is increasing.
ブログの特徴としては、(1)記事毎に時間記録(timestamp)を持つ、(2)記事が時系列に並ぶので最新の記事が常に上段に位置する、(3)記事毎にリンクできる、(4)リンクとコメントを通して相互コミュニケーションが可能、といったことである。こういった特徴をベースに、ブログの作成者、閲覧者が急激に増加している。 The features of the blog are as follows: (1) Each article has a time record (timestamp), (2) Since articles are arranged in time series, the latest article is always located at the top, (3) Each article can be linked ( 4) Mutual communication is possible through links and comments. Based on these characteristics, the number of creators and viewers of blogs is increasing rapidly.
ブログを作成するためには、PCや携帯電話等で、ブログの記事となる文章を入力し、写真等の画像と共にアップロードする、という方法が一般に用いられる。しかし、毎日毎日、ブログ作成者にとって出来事が起こるたびに文章を入力し、アップロードすることはかなり面倒なことである。このため、日々のブログをできるだけ簡単に作成・更新するためのツールが登場してきている。例えば、特許文献1には、利用者が特定の行為を行った際、自機(携帯通信装置)の位置情報を取得し、当該行為の日時及びその位置情報から利用者のイベント情報を記憶し、後で利用者が選択したイベント情報をサーバに送信することにより、利用者が容易にブログを作成する携帯通信装置が開示されている。
しかしながら、特許文献1のような方法では、利用者が特定の行為(例えば、電子マネー、電子定期券、電子チケットなどを使用したときや、カメラで撮像したとき等)を予めイベントとして指定しておかなければならず、指定した特定の行為以外のイベントは記録されない。また、これらのイベントを多数記憶、蓄積する必要があり、それらのイベントの各項目毎に、ブログにアップロードするコメントを自動生成するかどうかをON/OFFで指定する煩わしさがある。
However, in a method such as
本発明は、上記課題を鑑み、携帯電話機や携帯録音機(ICレコーダなど)のように会話記録手段を備えた携帯端末装置を用い、ブログの作成を容易にするための情報をより簡単に得るための新たな装置や方法を提供することを目的とする。 In view of the above-described problems, the present invention uses a mobile terminal device having a conversation recording unit such as a mobile phone or a mobile recorder (IC recorder or the like), and more easily obtains information for making a blog. An object of the present invention is to provide a new apparatus and method.
本発明では以下のような解決手段を提供する。 The present invention provides the following solutions.
(1) 音声会話記録を用いて会話記録の要点作成のための装置であって、
利用者の携帯端末に記憶された会話記録を入力として受け付ける会話記録入力部と、
前記会話記録の音声データを、前記利用者の発話部分と前記利用者と会話する他の者の発話部分とに分離する会話分離部と、
前記分離された音声データをテキスト・データに変換する音声テキスト変換部と、
前記テキスト・データから会話の特徴を表す要点語を抽出する要点語抽出部と、
前記抽出した要点語を前記利用者に表示する表示部と、
を備える装置。
(1) A device for creating the main points of conversation recording using voice conversation recording,
A conversation record input unit that accepts a conversation record stored in the user's mobile terminal as an input;
A conversation separating unit that separates the voice data of the conversation record into an utterance part of the user and an utterance part of another person talking with the user;
A voice text conversion unit for converting the separated voice data into text data;
A key word extraction unit that extracts key words representing features of conversation from the text data;
A display unit for displaying the extracted key words to the user;
A device comprising:
このような構成によれば、本装置は、利用者の携帯端末(例えば、携帯電話機やICレコーダなど音声記録部を備えた携帯端末)に記憶された会話記録(通話記録や、会話録音)を入力として受け付け、会話記録の音声データの部分(発話部分)のみを分離して取り出す。この分離された音声データに対して音声テキスト変換を行い、その変換後のテキスト・データから、記録された会話の特徴を表す「要点語」(要点キーワード)を抽出する。音声テキスト変換がたとえ不完全であっても、会話の中に高い頻度(実際には重み付けられた頻度)で出現する要点語のみを抽出することは可能である。このことにより、利用者の毎日の記録を、携帯端末に音声で記憶された会話記録に基づいて、その記録中に含まれる要点語を抽出して、利用者に時系列にテキストとして表示できる。このような要点語のテキストは、後に様々な用途に利用できる。 According to such a configuration, this apparatus stores conversation records (call recording and conversation recording) stored in a user's portable terminal (for example, a portable terminal having a voice recording unit such as a cellular phone or an IC recorder). Accepted as input, only the voice data portion (speech portion) of the conversation record is separated and extracted. Speech text conversion is performed on the separated speech data, and “main point words” (main point keywords) representing the characteristics of the recorded conversation are extracted from the converted text data. Even if the speech-to-speech conversion is incomplete, it is possible to extract only the key words that appear with high frequency (actually weighted frequency) in the conversation. This makes it possible to extract the key words included in the user's daily recording based on the conversation recording stored in the portable terminal by voice and display it as text in time series to the user. Such key word text can be used for various purposes later.
(2)音声会話記録を用いてブログの作成を支援するための装置であって、
利用者の携帯端末に記憶された会話記録を入力として受け付ける会話記録入力部と、
前記会話記録の音声データを、前記利用者の発話部分と前記利用者と会話する他の者の発話部分とに分離する会話分離部と、
前記分離された音声データをテキスト・データに変換する音声テキスト変換部と、
前記テキスト・データから会話の特徴を表す要点語を抽出する要点語抽出部と、
前記抽出した要点語を前記利用者に表示する表示部と、
前記要点語に基づいて前記利用者に、ブログに掲載するコメントを編集させるブログデータ編集部と、
前記コメントを含むブログデータをサーバに送信するブログデータ送信部と、
を備える装置。
(2) A device for supporting the creation of a blog using voice conversation recording,
A conversation record input unit that accepts a conversation record stored in the user's mobile terminal as an input;
A conversation separating unit that separates the voice data of the conversation record into an utterance part of the user and an utterance part of another person talking with the user;
A voice text conversion unit for converting the separated voice data into text data;
A key word extraction unit that extracts key words representing features of conversation from the text data;
A display unit for displaying the extracted key words to the user;
A blog data editing unit that allows the user to edit a comment to be posted on a blog based on the gist word;
A blog data transmission unit that transmits blog data including the comment to a server;
A device comprising:
このような構成によれば、本装置は、利用者の携帯端末(例えば、携帯電話機やICレコーダなど音声記録部を備えた携帯端末)に記憶された会話記録(通話記録や、会話録音)を入力として受け付け、会話記録の音声データの部分(発話部分)のみを分離して取り出す。この分離された音声データに対して音声テキスト変換を行い、その変換後のテキスト・データから、記録された会話の特徴を表す「要点語」(要点キーワード)を抽出する。この抽出した要点語を利用者に提示し、ブログに掲載するためのコメント作成の元データとする。そして、この元のデータを利用者に編集させる手段を備えて、ブログ記事(ブログコメント)として、ブログサイトのWebサーバにアップロードする。 According to such a configuration, this apparatus stores conversation records (call recording and conversation recording) stored in a user's portable terminal (for example, a portable terminal having a voice recording unit such as a cellular phone or an IC recorder). Accepted as input, only the voice data portion (speech portion) of the conversation record is separated and extracted. Speech text conversion is performed on the separated speech data, and “main point words” (main point keywords) representing the characteristics of the recorded conversation are extracted from the converted text data. The extracted key words are presented to the user and used as original data for creating a comment for posting on the blog. Then, a means for allowing the user to edit the original data is uploaded to the web server of the blog site as a blog article (blog comment).
このことにより、利用者の毎日の記録を、携帯端末に記憶された会話記録に基づいて、その記録中に含まれる要点語を抽出して利用者に表示できる。更に、場合によっては、その会話記録を聞きながら、その日の出来事を思い出してブログ記事に反映することもできる。これらの会話記録は、時系列に記憶されているので、ブログの特徴である記事毎のtimestamp情報も容易に取り出せる。また、利用者個人の思考や感想だけでなく、会話の相手方(通話の相手や面談記録の相手)からの情報も同時に抽出できるという特徴もある。 Thus, the daily record of the user can be displayed to the user by extracting the key words included in the record based on the conversation record stored in the portable terminal. In addition, in some cases, while listening to the conversation record, you can recall the events of the day and reflect them in the blog post. Since these conversation records are stored in time series, timestamp information for each article, which is a feature of the blog, can be easily extracted. In addition to the personal thoughts and impressions of the user, information from the conversation partner (call partner or interview record partner) can also be extracted at the same time.
(3)前記会話記録は、携帯電話機を用いた通話記録である、(1)〜(2)に記載の装置。 (3) The apparatus according to (1) to (2), wherein the conversation record is a call record using a mobile phone.
このような構成によれば、会話記録として、今日広く普及している携帯電話機に通話記録を備えれば、これを会話記録の情報源として利用し、上記の機能を実現できる。 According to such a configuration, if a mobile phone widely used today as a conversation record is provided with a call record, it can be used as an information source for the conversation record, and the above function can be realized.
(4)前記会話記録は、前記携帯端末に記録された会話録音データである、(1)〜(2)に記載の装置。 (4) The apparatus according to (1) to (2), wherein the conversation recording is conversation recording data recorded in the portable terminal.
このような構成によれば、携帯電話の通話記録でなく、利用者が意図的に録音した記録、例えば、特定の出来事に対するインタビューや面談の録音記録に基づいて、(1)〜(2の機能を実現できる。もちろん、携帯電話機に通話記録以外に録音機能が備えられていれば、通話記録と録音記録を一つの携帯電話機で実現することができる。 According to such a configuration, the functions (1) to (2) are based on a record intentionally recorded by a user, for example, a record of an interview or interview for a specific event, instead of a call record of a mobile phone. Of course, if the mobile phone has a recording function in addition to call recording, call recording and recording can be realized with a single mobile phone.
(5)前記要点語の抽出は、前記テキスト・データからTFIDF値を計算することによって求める、(1)〜(4)に記載の装置。 (5) The apparatus according to any one of (1) to (4), wherein the extraction of the key word is obtained by calculating a TFIDF value from the text data.
このような構成によれば、音声テキスト変換された通話記録又は録音記録からTFIDF法を用いて、その会話の特徴を表す要点語を抽出することができる。なお、TFIDFについては後述する。 According to such a configuration, it is possible to extract a key word representing the characteristics of the conversation using the TFIDF method from a call record or a recording record that has been converted into a voice text. TFIDF will be described later.
(6)前記TFIDF値は、前記利用者の発話部分のテキスト・データと、会話の相手側の発話部分のテキスト・データのそれぞれ又は両データ全体に対して計算する、(5)に記載の装置。 (6) The apparatus according to (5), wherein the TFIDF value is calculated for each of the text data of the utterance part of the user and the text data of the utterance part of the other party of the conversation, or the whole of both data. .
このような構成によれば、会話記録に利用者自身の発話内容と相手側(通話相手又は面談相手)の発話内容の双方が記録されていることを利用して、異なる2つの側面から要点語を抽出することが可能となる。例えば、利用者自身の発話部分のみを利用して要点語を抽出したり、相手側のみの発話記録のみを利用したり、あるいは、両者を共に利用したりといった利用する情報の選択の幅が広がることになる。 According to such a configuration, the fact that both the user's own utterance content and the utterance content of the other party (calling partner or interviewing partner) are recorded in the conversation record can be used as a key word from two different aspects. Can be extracted. For example, the range of selection of information to be used, such as extracting key words using only the user's own utterance part, using only the other party's utterance record, or using both together, is widened. It will be.
(7)前記ブログデータ編集部は、前記ブログの表示形式を編集する機能を備え、前記利用者からの指示によって、前記サーバに送信する、(2)に記載の装置。 (7) The apparatus according to (2), wherein the blog data editing unit has a function of editing a display format of the blog, and transmits the blog data to the server according to an instruction from the user.
このような構成によれば、本装置は、ブログ内容のみならずブログの表示形式(例えばHTML形式やXML形式)そのものを編集する機能を有するので、本装置側でアップロードする内容をプレビューしたり、ブログに掲載する形式でアップロードすることが可能となる。 According to such a configuration, the device has a function of editing not only the blog content but also the blog display format (for example, HTML format or XML format) itself, so that the content uploaded on the device side can be previewed, It becomes possible to upload in the form posted on the blog.
(8)前記携帯端末は、対象物を撮像する手段を備える、(1)〜(7)に記載の装置。 (8) The said portable terminal is an apparatus as described in (1)-(7) provided with the means to image a target object.
このような構成によれば、例えば、携帯端末にデジタル・カメラを備えることによって、ブログ記事と共にアップロードする画像を容易に取得することができる。 According to such a configuration, for example, by providing the mobile terminal with a digital camera, it is possible to easily acquire an image to be uploaded together with the blog article.
(9)前記携帯端末は、自らの位置情報を取得する手段を備え、前記会話記録を作成した場所の位置情報を前記会話記録と関連付けて記録する、(1)〜(8)に記載の装置。 (9) The device according to any one of (1) to (8), wherein the portable terminal includes means for acquiring own position information, and records position information of a place where the conversation record is created in association with the conversation record. .
このような構成によれば、携帯端末にGPS等の位置情報取得手段を備え、写真を撮影した日時と共に撮影場所情報等を容易にブログに利用することができる。 According to such a configuration, the mobile terminal is provided with position information acquisition means such as GPS, and the shooting location information and the like can be easily used for the blog together with the date and time when the photo was taken.
(10)音声発話記録を用いてブログの作成を支援するための装置であって、
利用者の携帯端末に記憶された発話記録を入力として受け付ける発話記録入力部と、
前記発話記録の音声データを、前記利用者の発話部分とそれ以外の部分とに分離する発話分離部と、
前記分離された音声データをテキスト・データに変換する音声テキスト変換部と、
前記テキスト・データから発話の特徴を表す要点語を抽出する要点語抽出部と、
前記抽出した要点語を前記利用者に表示する表示部と、
前記要点語に基づいて前記利用者に、ブログに掲載するコメントを編集させるブログデータ編集部と、
前記コメントを含むブログデータをサーバに送信するブログデータ送信部と、
を備える装置。
(10) A device for supporting the creation of a blog using a voice utterance record,
An utterance record input unit that accepts an utterance record stored in the user's mobile terminal as an input;
An utterance separation unit that separates the voice data of the utterance record into the utterance part of the user and the other part;
A voice text conversion unit for converting the separated voice data into text data;
A key word extraction unit that extracts key words representing features of the utterance from the text data;
A display unit for displaying the extracted key words to the user;
A blog data editing unit that allows the user to edit a comment to be posted on a blog based on the gist word;
A blog data transmission unit that transmits blog data including the comment to a server;
A device comprising:
通話相手や面談相手がいない場合であっても、利用者自身の単独の口述記録(自己録音)を用いて(2)と同様な機能を実現することができる。これは、ブログを作成するための音声メモとも考えられる。 Even when there is no call partner or interview partner, the function similar to (2) can be realized by using the user's own dictation record (self-recording). This can be considered as a voice memo for creating a blog.
(11) 音声会話記録を用いて会話記録の要点作成のための方法であって、
コンピュータ・システムにおいて、
利用者の携帯端末に記憶された会話記録を入力として受け付けるステップと、
前記会話記録の音声データを、前記利用者の発話部分と前記利用者と会話する他の者の発話部分とに分離するステップと、
前記分離された音声データをテキスト・データに変換するステップと、
前記テキスト・データから会話の特徴を表す要点語を抽出するステップと、
前記抽出した要点語を前記利用者に表示するステップと、
を含む方法。
(11) A method for creating a point of conversation recording using voice conversation recording,
In computer systems,
Receiving a conversation record stored in the user's mobile device as input,
Separating the voice data of the conversation record into an utterance part of the user and an utterance part of another person talking with the user;
Converting the separated audio data into text data;
Extracting key words representing conversation characteristics from the text data;
Displaying the extracted key words to the user;
Including methods.
このような構成によれば、(1)の装置の機能をコンピュータ・システムにおける方法の発明としてとらえ、(1)と同様の効果を得ることができる。 According to such a configuration, the function of the device of (1) can be regarded as a method invention in a computer system, and the same effect as that of (1) can be obtained.
このように、本発明によれば、携帯電話機や携帯録音装置など、会話記録部を備えた携帯端末装置を用いてブログの作成を容易にするための要点語などを容易に得ることができる。 Thus, according to the present invention, it is possible to easily obtain key words for facilitating the creation of a blog using a mobile terminal device having a conversation recording unit such as a mobile phone or a mobile recording device.
以下、本発明の実施形態について、図を参照しながら説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、本発明の一つの実施形態であるブログ作成に係る会話記録装置10の機能ブロックを示した図である。なお、説明の便宜上、会話記録装置10のみならず、これと接続される携帯電話機30やICレコーダ、Webサーバ20も同時に図示している。会話記録装置10は、主に、携帯電話機30、又はICレコーダ31等の録音機に記録された会話記録を入力として受け付ける会話記録入力部11、入力した会話記録を自分の会話と相手の会話と無音部分に分離する会話分離部12、分離した会話音声部をテキストに変換する音声テキスト変換部13、変換されたテキストからその特徴を表す要点語を抽出する要点語抽出部14、要点語を元に利用者にブログデータを編集させるブログデータ編集部15、及び編集したブログデータをブログサイトであるWEBサーバ20に送信するブログデータ送信部16を備える。また、会話記録装置10は、一般的なオーディオ・スピーカ17、利用者のための表示部18(液晶表示装置等)、操作部19(キーボード、マウス等)、及び必要ならば音声入力のためのマイク(図示せず)を備える。
FIG. 1 is a functional block diagram of a
携帯電話機30やICレコーダ31との接続は、USBなどの汎用インターフェースを用いてもよいし、SDカードやSMARTカードなどの携帯型メモリを着脱して、データをやり取りするようにしてもよい。
Connection with the
会話記録装置10は、ネットワーク40(典型的には、インターネットであるが、LAN(Local Area Network)やWAN(Wide Area Network)であってもよい)を介して、Webサーバ20と接続される。Webサーバ20は、ブログの内容を格納するサーバであり、会話記録装置10からのデータを受信するブログデータ受信部21、Webページ形式に編集するブログ記録部22、及びデータを格納するWebページDB23を備える。
The
なお、これらの構成は、ほんの一例を示したに過ぎず、機能的に同等であれば他の構成を含んでもよいし、元の構成と置換してもよい。 Note that these configurations are merely examples, and other configurations may be included as long as they are functionally equivalent, or may be replaced with the original configurations.
図2は、本発明の一つの実施形態に係る会話記録装置10の処理フローを示した図である。ここでは、入力として携帯電話機30の場合で説明するが、ICレコーダ31等の他の記録装置の場合であっても基本的な流れは同様である。
FIG. 2 is a diagram showing a processing flow of the
まず、ステップS1において、携帯電話機30より通話記録を取得する。このデータの取得は、前述したように、会話記録装置10と携帯電話機30をUSBや専用ケーブルで接続して行ってもよいし、SDメモリカード等を利用してもよい。
First, in step S <b> 1, a call record is acquired from the
次に、ステップS2において、利用者(ブログ作成者)自身の発話部分と通話の相手方の発話部分、及び無音部分を分離する。この分離技術自体は、任意の公知技術を用いてよい。会話全体を自分と相手の部分に分離するのは、発音の違う話者が混在することで、音声認識(次のステップS3)の誤変換率を少なくするためだけでなく、自分と相手方の思考パターンの違いによる用語の使用の違いを分析しやすくするためでもある。無音部分を除去するのは、後で録音内容を再生するときの時間を少なくするためである。 Next, in step S2, the utterance part of the user (blog creator) itself, the utterance part of the other party of the call, and the silent part are separated. As the separation technique itself, any known technique may be used. The reason why the entire conversation is separated into the part of the person and the other party is not only to reduce the misconversion rate of the speech recognition (next step S3) but also to the thinking of the person and the other party. This is also to make it easier to analyze differences in terminology due to differences in patterns. The reason for removing the silent portion is to reduce the time when the recorded content is reproduced later.
次にステップS3において、分離した音声データをテキストに変換する。この変換、すなわち音声認識は公知の技術(例えば、特開平―230295など参照)を用いてよいが、複数の話者が存在することを考慮すると、音声パターンや辞書を複数切り替えることができるものが好ましい。 Next, in step S3, the separated voice data is converted into text. For this conversion, that is, voice recognition, a known technique (for example, see Japanese Patent Laid-Open No. 23030295) may be used. However, in consideration of the presence of a plurality of speakers, a voice pattern and a dictionary can be switched among a plurality. preferable.
次に、ステップS4において、変換されたテキストを形態素分割する。形態素(morpheme)とは、意味を持つ最小の言語単位のことで、自然言語で書かれた文章を分割する際に利用される言語単位である。例えば、「今日はいい天気です」は、「今日/は/いい/天気/です」に分割される。 Next, in step S4, the converted text is divided into morphemes. A morpheme is the smallest linguistic unit having meaning, and is a linguistic unit used when a sentence written in a natural language is divided. For example, “Today is good weather” is divided into “Today / Has / Good / Weather / Is it”.
更に、ステップS5において、形態素分割されたテキストは、そのテキスト全体(通話全体)を文書集合ととらえ、更に、適切な通話単位(例えば一定時間)を文書ととらえて、その文書で特徴となる要点語(キーワード)を抽出する。この要点語は、単なるテキスト全体における出現頻度でなく、特定の文書に偏って出現する語を抽出する。具体的には、例えば、TFIDF値を計算し、その値が所定の値よりも高いものを示す語を要点語として抽出する。TFIDF法は、語の出現頻度に基づいてキーワードを重みづける方法である。TFIDFはTFとIDFに分かれる。TFはTerm Frequency (語彙頻度)であり、IDFはInverse Document Frequency(文書頻度の逆数)である。すなわち、TFIDFとは、TFとIDFの積をあらわす。以下の実施例では、TFIDFを主体に説明しているが、要点語の抽出はTFIDF以外にもテキスト・マイニングでは多数知られており、(例えば文書クラスタリング)、それらの公知技術を用いることを排除するものではない。 Further, in step S5, the morpheme-divided text treats the entire text (the entire call) as a document set, and further treats an appropriate call unit (for example, a fixed time) as a document, and is a feature that characterizes the document. Extract words (keywords). The key word is not a simple appearance frequency in the whole text, but a word that appears biased in a specific document is extracted. Specifically, for example, a TFIDF value is calculated, and a word indicating that the value is higher than a predetermined value is extracted as a key word. The TFIDF method is a method of weighting keywords based on the appearance frequency of words. TFIDF is divided into TF and IDF. TF is Term Frequency (vocabulary frequency), and IDF is Inverse Document Frequency (reciprocal of document frequency). That is, TFIDF represents the product of TF and IDF. In the following embodiments, TFIDF is mainly described, but extraction of key words is well known in text mining other than TFIDF (for example, document clustering), and the use of those known techniques is excluded. Not what you want.
そして、ステップS6において、記録された全ての通話記録についてステップS2〜S5の処理を繰り返す。こうすることで、記録された通話記録がテキストに変換できる。なお、音声テキストの変換精度が低い場合は、ステップS4の処理を行う前に、認識されたテキストのチェックを利用者に行わせ、必要ならば修正を行うようにさせてもよい。 In step S6, the processing in steps S2 to S5 is repeated for all recorded call records. By doing so, the recorded call record can be converted into text. If the conversion accuracy of the voice text is low, the user may check the recognized text and perform correction if necessary before performing the process of step S4.
次に、ステップS7において、通話記録毎に抽出された要点語を利用者に表示する。このとき、要点語をブログ記事のタイトルの候補として表示してもよいし、通話記録のtimestampから記事の発生時刻を表示してもよい。また、カメラで写した写真や、GPSから取り込んだ位置情報を表示させるようにしてもよい。これらの各種の情報に基づいて利用者がブログ記事を作成するブログ編集画面を表示する。テキスト変換された通話記録を同時に表示し、ブログ記事の原型としてもよい。このようにしてブログ記事を作成する各種の情報が本発明の会話記録装置10によって得られる。
Next, in step S7, the key words extracted for each call record are displayed to the user. At this time, the key word may be displayed as a candidate for the title of the blog article, or the generation time of the article may be displayed from the time stamp of the call record. Moreover, you may make it display the photograph image | photographed with the camera and the positional information taken in from GPS. A blog editing screen for a user to create a blog article based on these various types of information is displayed. It is also possible to display text-converted call records at the same time and use it as the original blog article. In this way, various kinds of information for creating a blog article can be obtained by the
最後に、ステップS8において、編集済みのブログデータを利用者の指示に基づいてWebサーバに送信(アップロード)する。アップロードされたブログデータは、ブログサイトで閲覧しやすい形式(HTML変換等)に加工されてWebページDB23に格納される。
Finally, in step S8, the edited blog data is transmitted (uploaded) to the Web server based on the user's instruction. The uploaded blog data is processed into a format (HTML conversion or the like) that is easy to browse on the blog site and stored in the
図3は、会話記録として、携帯電話機30における通話記録の一例を示した図である。図の通話記録は、利用者(ブログ作成者)Aさんが、友人のBさんと交わした携帯電話の通話内容である。ここでは、Aさんが、偶然立ち寄ったケーキ屋の話題が盛り上がっているが、このような印象に残った出来事をブログ記事として、後でアップロードすることはよく行われることである。このとき、通話記録には、timestampが含まれるので、これを時系列に編集することはブログ作成にとって非常に便利である。また、今日の携帯電話機には、カメラやGPS(Global Positioning System)を備えたものも多く、カメラで撮像したその場所での画像や、その時刻、位置なども、ブログにアップロードするのには有用な情報である。例えば、そのとき、たまたま食べたケーキなどの感想やその写真、お店の位置情報(地図)をブログに載せると、それを見た人が多くそのお店を訪れるようになることも十分にあり得る。
FIG. 3 is a diagram showing an example of a call record in the
図4は、図3で示した通話記録を元に、通話記録の要点データ(要点語の集まり)を抽出したテーブルを示した図である。この表には、前述の通話記録から抽出した語(キーワード)が、出現頻度、TFIDFの値と共に格納され、TFIDF値の高い語ほど特徴を表す要点語として上位に並べられる。なお、ここではTFIDF値は、通話全体を文書集合として計算した例を示すが、自分(Aさん)と友人(Bさん)の発話部分に分け、それぞれに対してTFIDF値を示してもよい。例えば、同じ意味でもAさんとBさんは、用いる用語が異なると、Aさんの発話部から得た要点語と、Bさんの発話部から得た要点語では当然結果が異なる。このことを分析することによって、ブログ記事を作成するときに、会話の相手方の意見を取り込んだり、逆に取り込まなかったりするといったような選択の余地を広げることができる。それによって、Aさん、Bさんの使う用語のばらつきを分析することができる。また、通話全体を一つの文書にするのではなく、適当な区切り(例えば無音時間が長く続くとき)を検出し、その区切り毎に別の文書として扱ってもよい。あるいは、一定時間、例えば3分毎などに通話を区切って、それぞれを一つの文書と扱うようにしてもよい。このように同じ通話記録からでも様々な文書単位を定義できるので、TFIDF値をそれごとに計算し、要点語の分析に役立てることができる。 FIG. 4 is a diagram showing a table in which key data (collection of key words) of the call record is extracted based on the call record shown in FIG. In this table, the words (keywords) extracted from the above-mentioned call record are stored together with the appearance frequency and the value of TFIDF, and the words with higher TFIDF values are arranged at the top as the key words representing the features. Here, the TFIDF value is an example in which the entire call is calculated as a document set. However, the TFIDF value may be shown for each of the utterance portions of the user (Mr. A) and the friend (Mr. B). For example, if the terms used by Mr. A and Mr. B are different in the same meaning, the results of the key words obtained from Mr. A's speech part and the key words obtained from Mr. B's speech part are naturally different. By analyzing this, when creating a blog article, it is possible to expand the scope of selection such as taking in the opinions of the other party of the conversation or not taking them in reverse. As a result, it is possible to analyze variations in terms used by Mr. A and Mr. B. Further, instead of making the entire call into one document, an appropriate break (for example, when the silent time lasts long) may be detected and treated as a separate document for each break. Alternatively, a call may be divided at a certain time, for example, every 3 minutes, and each may be handled as one document. Thus, since various document units can be defined even from the same call record, the TFIDF value can be calculated for each and used to analyze the key words.
図5は、会話記録として、ICレコーダ31のような録音機における録音記録(インタビュー)を示した図である。この例では、図3の携帯電話機30での通話の後、AさんとBさんが実際のお店を訪れて、そのお店の店長にインタビューを行ったときの会話が記録されている。携帯電話機30での通話と違って、インタビューは、ブログに掲載することを前提に会話が行われると考えられるので、ブログの記事になりやすいような記録が得られる可能性が高い。ここで得られた会話記録は、携帯電話機30の通話記録と同様に会話記録装置10に入力され、音声テキスト変換されてブログ記事の元データとなる。なお、このようなインタビューの録音は、ICレコーダ31のような録音専用機でなくとも、録音機能を備えていれば、携帯電話機30でも代用できる。また、相手方がいなくとも、利用者が記事を口述し、その口述記録を会話記録装置10の入力として用いることもできる。
FIG. 5 is a diagram showing recording recording (interview) in a recording machine such as the
図6は、図5の録音記録を元に、録音記録の要点データ(要点語の集まり)を抽出したテーブルを示した図である。この表には、前述の図4のテーブルと同様に、録音記録から抽出した語(キーワード)が、出現頻度、TFIDFの値と共に格納され、TFIDF値の高い語ほど特徴を表す要点語として上位に並べられる。TFIDF値の計算方法も、同様である。ただし、通話の内容と、録音内容がこの例のように関連している場合は、通話記録を文書1、録音記録を文書2として、両文書全体からTFIDF値を計算し、その値に基づいて要点語を抽出することができる。もちろん、文書1、文書2に対してそれぞれ別々にTFIDF値を求め、それらの値に基づいて要点語を抽出してもよい。このようにすることで、異なる角度からの要点語抽出を可能にする。例えば、会話の相手方が有用な情報を発言せず、ただ相槌を打っているような場合には、相手方の発話部分を抽出の対象から外すことができる。
FIG. 6 is a diagram showing a table in which the key data (collection of key words) of the recording record is extracted based on the recording record of FIG. In this table, as in the table of FIG. 4 described above, words (keywords) extracted from the recording are stored together with the appearance frequency and the value of TFIDF, and the higher the TFIDF value, the higher the key words representing the features. Are lined up. The calculation method of the TFIDF value is also the same. However, if the contents of the call and the recorded contents are related as shown in this example, the call record is
図7は、本発明の一つの実施形態に係る会話記録装置10におけるブログ記事編集画面の一例を示した図である。ここでは、携帯電話の通話記録の場合について説明する。符号50で示される通話記録選択バーから、対象となる通話記録等を選択する。通話記録は複数選択してもよい。領域51には、選択された通話に関連する情報として、通話開始時間、通話相手、通話時間等が表示される。更に、領域52には、前述の手法に基づいて抽出された要点語(要点キーワード)が表示される。ここではTFIDF値の高い順に表示するようにしてもよい。また、領域53には音声テキスト変換部13によって、テキストに変換された通話記録の音声認識結果が表示される。このテキスト中、下線部の部分は誤認識、又は認識できなかった部分を示している。利用者は、この正しく認識されなかった語を特に修正しなくともよい。領域54(ブログ記事見出し部)には、例えば、領域51の通話関連情報と、領域52の要点キーワードから作成されたブログ記事のタイトル部分が表示される。もちろん、利用者がこのタイトル部分を編集するようにしてもよい。領域55は、抽出された要点語を、ブログ記事の内容(コメント)の要点として表示する領域である。もちろん、この部分は、利用者がこれらの要点語を元に編集してもよいし、場合によっては、領域53の通話記録を直接編集して作成することもできる。
FIG. 7 is a diagram showing an example of a blog article editing screen in the
領域56〜59は、ブログに同時にアップロードする写真等の画像を編集するためのものである。すなわち、領域56の写真選択バーから写真のファイルを選択し、領域57(写真付随情報)には、撮影時刻や場所を表示する。GPSを備えた携帯電話機を使用している場合は、場所の位置情報を取得するようにしてもよい。領域58には、写真を編集するための各種ツールボタン等が配置され、アップロードされるべき写真が領域59に表示されるようにする。図示していないが、編集前の写真と編集後の写真を並べて表示するようにしてもよい。
このようにして作成したブログ記事の文章と写真等の画像は、利用者が、領域60(ブログ選択メニュー)においてアップロード先のブログを選択し、アップロード・ボタン62を押下することによって所定のブログサイトに掲載される。また、ブログの表示形式(例えば、HTMLやXML)を編集する機能を持たせることによって、アップロードする前に、閲覧イメージを、プレビューボタン61を押下することによって表示させるようにしてもよい。
The images of the blog article created in this way and images such as photos are selected by the user by selecting an upload destination blog in the area 60 (blog selection menu) and pressing the upload
[会話記録装置のハードウェア構成]
図8は、本発明の一つの実施形態に係る会話記録装置10のハードウェア構成の一例を示す図である。
[Hardware configuration of conversation recording device]
FIG. 8 is a diagram illustrating an example of a hardware configuration of the
会話記録装置10は、制御部101を構成するCPU(Central Processing Unit)110(マルチプロセッサ構成ではCPU120等複数のCPUが追加されてもよい)、バスライン105、通信I/F140、メインメモリ150、BIOS(Basic Input Output System)160、USBポート190、I/Oコントローラ170、並びにキーボード及びマウス180等の入力手段や表示装置122を備える。また、必要に応じてマイク・スピーカ173を備えていてもよい。USBポート190には、携帯電話機30やICレコーダ31などが接続されようにして、通話記録データを会話記録装置10に取り込むようにしてもよい。
The
I/Oコントローラ170には、テープドライブ172、ハードディスク174、光ディスクドライブ176、半導体メモリ178、等の記憶手段を接続することができる。
Storage means such as a
BIOS160は、会話記録装置10の起動時にCPU110が実行するブートプログラムや、会話記録装置10のハードウェアに依存するプログラム等を格納する。
The
記憶部102を構成するハードディスク174は、会話記録装置10が装置として機能するための各種プログラム及び本発明の機能を実行するプログラムを記憶しており、更に必要に応じて各種データベースを構成可能である。
The
光ディスクドライブ176としては、例えば、DVD−ROMドライブ、CD−ROMドライブ、DVD−RAMドライブ、CD−RAMドライブを使用することができる。この場合は各ドライブに対応した光ディスク177を使用する。光ディスク177から光ディスクドライブ176によりプログラム又はデータを読み取り、I/Oコントローラ1070を介してメインメモリ150又はハードディスク174に提供することもできる。また、同様にテープドライブ172に対応したテープメディア171を主としてバックアップのために使用することもできる。
As the optical disk drive 176, for example, a DVD-ROM drive, a CD-ROM drive, a DVD-RAM drive, or a CD-RAM drive can be used. In this case, the
会話記録装置10に提供されるプログラムは、ハードディスク174、光ディスク177、又はメモリカード等の記録媒体に格納されて提供される。このプログラムは、I/Oコントローラ170を介して、記録媒体から読み出され、又は通信I/F140を介してダウンロードされることによって、会話記録装置10にインストールされ実行されてもよい。
The program provided to the
前述のプログラムは、内部又は外部の記憶媒体に格納されてもよい。ここで、記憶部102を構成する記憶媒体としては、ハードディスク174、光ディスク177、又はメモリカードの他に、MD等の光磁気記録媒体、テープ媒体を用いることができる。また、専用通信回線やインターネットに接続されたサーバシステムに設けたハードディスク174又は光ディスクライブラリ等の記憶装置を記録媒体として使用し、通信回線を介してプログラムを会話記録装置10に提供してもよい。
The aforementioned program may be stored in an internal or external storage medium. Here, in addition to the
ここで、表示装置122は、ユーザにデータの入力を受け付ける画面を表示したり、会話記録装置10による演算処理結果の画面を表示したりするものであり、ブラウン管表示装置(CRT)、液晶表示装置(LCD)等のディスプレイ装置を含む。
Here, the
ここで、入力手段は、ユーザによる入力の受け付けを行うものであり、キーボード及びマウス180等により構成してよい。
Here, the input means accepts input by the user, and may be configured by a keyboard, a
また、通信I/F140は、会話記録装置10を専用ネットワーク又は公共ネットワークを介して端末と接続できるようにするためのネットワーク・アダプタである。通信I/F140は、モデム、ケーブル・モデム及びイーサネット(登録商標)・アダプタを含んでよい。
The communication I /
以上の例は、会話記録装置10について主に説明したが、コンピュータに、プログラムをインストールして、そのコンピュータをサーバ装置として動作させることにより上記で説明した機能を実現することもできる。したがって、本発明において一実施形態として説明したサーバにより実現される機能は、上述の方法を当該コンピュータにより実行することにより、あるいは、上述のプログラムを当該コンピュータに導入して実行することによっても実現可能である。
In the above example, the
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施例に記載されたものに限定されるものではない。 As mentioned above, although embodiment of this invention was described, this invention is not restricted to embodiment mentioned above. The effects described in the embodiments of the present invention are only the most preferable effects resulting from the present invention, and the effects of the present invention are limited to those described in the embodiments of the present invention. is not.
10 会話記録装置
11 会話記録入力部
12 会話部分離部
13 音声テキスト変換部
14 要点語抽出部
15 ブログデータ編集部
16 ブログデータ送信部
17 スピーカ
18 表示部
19 操作部
20 Webサーバ
21 ブログデータ受信部
22 ブログ記録部
23 WebページDB
30 携帯電話機
31 ICレコーダ
40 ネットワーク
50 通話記録選択バー
51 通話関連情報
52 抽出要点語
53 通話記録(テキスト変換後)
54 ブログ記事見出し部
55 ブログ記事内容
56 写真選択バー
57 写真付随情報
58 写真編集用ツールボタン
59 写真
60 ブログ選択メニュー
61 ブレビュー・ボタン
62 アップロード・ボタン
DESCRIPTION OF
30
54
Claims (8)
携帯端末に記憶された音声会話記録データを音声認識によりテキスト・データに変換する音声テキスト変換部と、
前記テキスト・データを形態素分割して、所定範囲の会話全体を文書集合とし、所定の会話単位を文書としてとらえて、TFIDF値を計算し、当該計算したTFIDF値の高い語ほど当該会話の特徴を表すキーワードとして抽出するキーワード抽出部と、
前記抽出したキーワードを、利用者の端末に、ブログに掲載するコメントを編集させるブログデータ編集画面とともに表示する表示部と、
前記コメントを含むブログデータをサーバに送信するブログデータ送信部と、
を備える装置。 A device for supporting the creation of a blog using voice conversation recording,
A voice text conversion unit that converts voice conversation recording data stored in the portable terminal into text data by voice recognition ;
The text data is divided into morphemes, the entire conversation in a predetermined range is made into a document set, a predetermined conversation unit is taken as a document, a TFIDF value is calculated, and the characteristic of the conversation is determined for a word having a higher calculated TFIDF value. A keyword extractor for extracting as a keyword to represent,
The keywords that the extracted, the user of the terminal, and a display unit that displays along with the blog data editing screen to edit the comments posted on the blog,
A blog data transmission unit that transmits blog data including the comment to a server;
A device comprising:
前記キーワード抽出部は、前記TFIDF値を、前記利用者の発話部分のテキスト・データと、会話の相手側の発話部分のテキスト・データのそれぞれの所定範囲の会話全体を文書集合としてとらえて計算する、請求項2に記載の装置。 The voice data of the voice conversation record is further provided with a conversation separating unit that separates the utterance part of the user and the utterance part of another person talking with the user by a difference in pronunciation,
The keyword extraction unit calculates the TFIDF value by regarding the entire conversation within a predetermined range of the text data of the user's utterance part and the text data of the utterance part of the conversation partner as a document set. The apparatus according to claim 2 .
携帯端末に記憶された音声発話記録データを音声認識によりテキスト・データに変換する音声テキスト変換部と、
前記テキスト・データを形態素分割して、所定範囲の発話全体を文書集合とし、所定の発話単位を文書としてとらえて、TFIDF値を計算し、当該計算したTFIDF値の高い語ほど当該発話の特徴を表すキーワードとして抽出するキーワード抽出部と、
前記抽出したキーワードを、利用者の端末に、ブログに掲載するコメントを編集させるブログデータ編集画面とともに表示する表示部と、
前記コメントを含むブログデータをサーバに送信するブログデータ送信部と、
を備える装置。 A device for supporting the creation of a blog using voice utterance records,
A voice text conversion unit that converts voice utterance recording data stored in a portable terminal into text data by voice recognition ;
The text data is divided into morphemes, a whole set of utterances in a predetermined range is taken as a document set, a predetermined utterance unit is taken as a document, a TFIDF value is calculated, and the higher the calculated TFIDF value, the characteristics of the utterance A keyword extractor for extracting as a keyword to represent,
The keywords that the extracted, the user of the terminal, and a display unit that displays along with the blog data editing screen to edit the comments posted on the blog,
A blog data transmission unit that transmits blog data including the comment to a server;
A device comprising:
コンピュータ・システムにおいて、
携帯端末に記憶された音声会話記録データを音声認識によりテキスト・データに変換するステップと、
前記テキスト・データを形態素分割して、所定範囲の会話全体を文書集合とし、所定の会話単位を文書としてとらえて、TFIDF値を計算し、当該計算したTFIDF値の高い語ほど当該会話の特徴を表すキーワードとして抽出するステップと、
前記抽出したキーワードを、利用者の端末に、ブログに掲載するコメントを編集させるブログデータ編集画面とともに表示する表示ステップと、
前記コメントを含むブログデータをサーバに送信するブログデータ送信ステップと、
を含む方法。 A method for supporting the creation of a blog using voice conversation recording,
In computer systems,
Converting voice conversation recording data stored in the mobile terminal into text data by voice recognition ;
The text data is divided into morphemes, the entire conversation in a predetermined range is made into a document set, a predetermined conversation unit is taken as a document, a TFIDF value is calculated, and the characteristic of the conversation is determined for a word having a higher calculated TFIDF value. Extracting as keywords to represent,
The keywords that the extracted, the user of the terminal, and a display step of displaying along with the blog data editing screen to edit the comments posted on the blog,
A blog data transmission step of transmitting blog data including the comment to a server;
Including methods.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006334557A JP4589910B2 (en) | 2006-12-12 | 2006-12-12 | Conversation recording blogging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006334557A JP4589910B2 (en) | 2006-12-12 | 2006-12-12 | Conversation recording blogging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008146461A JP2008146461A (en) | 2008-06-26 |
JP4589910B2 true JP4589910B2 (en) | 2010-12-01 |
Family
ID=39606552
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006334557A Expired - Fee Related JP4589910B2 (en) | 2006-12-12 | 2006-12-12 | Conversation recording blogging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4589910B2 (en) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5171501B2 (en) * | 2008-03-07 | 2013-03-27 | ヤフー株式会社 | Server, system, method and program for extracting important words |
US9135326B2 (en) | 2009-12-10 | 2015-09-15 | Nec Corporation | Text mining method, text mining device and text mining program |
JP5681868B2 (en) * | 2010-03-05 | 2015-03-11 | レノボ・イノベーションズ・リミテッド(香港) | Mobile terminal device and predictive conversion dictionary creation method |
JP2012146151A (en) * | 2011-01-13 | 2012-08-02 | Dainippon Printing Co Ltd | Terminal and method for image output receiving, and program |
JP5775466B2 (en) * | 2012-01-13 | 2015-09-09 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | Chat extraction system, method, and program for extracting chat part from conversation |
JP6374771B2 (en) * | 2014-11-19 | 2018-08-15 | Kddi株式会社 | Retrieval device, program, and method for retrieving vague record of user's memory |
JP6492698B2 (en) * | 2015-01-28 | 2019-04-03 | 日本電気株式会社 | Information processing system, information processing method, and program |
JP6770769B1 (en) * | 2020-02-10 | 2020-10-21 | 株式会社時空テクノロジーズ | Information processing equipment, information processing systems, and programs |
WO2021161834A1 (en) * | 2020-02-10 | 2021-08-19 | 株式会社時空テクノロジーズ | Recorder, information processing device, information processing system, and information processing method |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002245061A (en) * | 2001-02-14 | 2002-08-30 | Seiko Epson Corp | Keyword extraction |
JP2004020739A (en) * | 2002-06-13 | 2004-01-22 | Kojima Co Ltd | Device, method and program for preparing minutes |
JP2006050500A (en) * | 2004-08-09 | 2006-02-16 | Jfe Systems Inc | Conference support system |
JP2006301884A (en) * | 2005-04-19 | 2006-11-02 | Sony Ericsson Mobilecommunications Japan Inc | Portable communication apparatus |
-
2006
- 2006-12-12 JP JP2006334557A patent/JP4589910B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002245061A (en) * | 2001-02-14 | 2002-08-30 | Seiko Epson Corp | Keyword extraction |
JP2004020739A (en) * | 2002-06-13 | 2004-01-22 | Kojima Co Ltd | Device, method and program for preparing minutes |
JP2006050500A (en) * | 2004-08-09 | 2006-02-16 | Jfe Systems Inc | Conference support system |
JP2006301884A (en) * | 2005-04-19 | 2006-11-02 | Sony Ericsson Mobilecommunications Japan Inc | Portable communication apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP2008146461A (en) | 2008-06-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4589910B2 (en) | Conversation recording blogging device | |
JP3936243B2 (en) | Method and system for segmenting and identifying events in an image using voice annotation | |
CN102349087B (en) | Automatically providing content associated with captured information, such as information captured in real-time | |
CN102782751B (en) | Digital media voice tags in social networks | |
US5995936A (en) | Report generation system and method for capturing prose, audio, and video by voice command and automatically linking sound and image to formatted text locations | |
US8819533B2 (en) | Interactive multimedia diary | |
US7092496B1 (en) | Method and apparatus for processing information signals based on content | |
US20010049700A1 (en) | Information processing apparatus, information processing method and storage medium | |
WO2011093025A1 (en) | Input support system, method, and program | |
Fromont et al. | ONZE Miner: the development of a browser-based research tool | |
US20090327272A1 (en) | Method and System for Searching Multiple Data Types | |
US7584217B2 (en) | Photo image retrieval system and program | |
JP3895892B2 (en) | Multimedia information collection management device and storage medium storing program | |
CN110781328A (en) | Video generation method, system, device and storage medium based on voice recognition | |
CN101887414A (en) | The evaluation that the text message that comprises pictorial symbol is passed on is the server of marking automatically | |
CN110750996B (en) | Method and device for generating multimedia information and readable storage medium | |
US10360455B2 (en) | Grouping captured images based on features of the images | |
WO2019112145A1 (en) | Method, device, and system for sharing photographs on basis of voice recognition | |
US20100131534A1 (en) | Information providing system | |
JP2014222290A (en) | Minute recording device, minute recording method, and program | |
JP2004233577A (en) | Method for forming speech recognition dictionary | |
JP2008226110A (en) | Information processor, information processing method and control program | |
US7353175B2 (en) | Apparatus, method, and program for speech synthesis with capability of providing word meaning immediately upon request by a user | |
CN112905838A (en) | Information retrieval method and device, storage medium and electronic equipment | |
JP2011170743A (en) | Communication equipment, content retrieval method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100427 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100625 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100907 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100910 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4589910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130917 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees | ||
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |