JP2013101226A - Real estate property information provision support device - Google Patents

Real estate property information provision support device Download PDF

Info

Publication number
JP2013101226A
JP2013101226A JP2011244988A JP2011244988A JP2013101226A JP 2013101226 A JP2013101226 A JP 2013101226A JP 2011244988 A JP2011244988 A JP 2011244988A JP 2011244988 A JP2011244988 A JP 2011244988A JP 2013101226 A JP2013101226 A JP 2013101226A
Authority
JP
Japan
Prior art keywords
keyword
guest
information
question
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011244988A
Other languages
Japanese (ja)
Other versions
JP5593297B2 (en
Inventor
Ko Endo
航 遠藤
Go Murakawa
剛 村川
Tomoki Oyasato
知樹 親里
Hiroshi Manabe
宏 真鍋
Tomoki Aota
智樹 青田
Masao Kawaguchi
雅生 川口
Yasuyoshi Yamamoto
泰義 山本
Shinta Uchida
信太 内田
Reiko Asano
怜子 淺野
Yoshiyuki Suzuki
祐由 鈴木
Tadakiyo Iiyama
忠聖 飯山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Fuji Soft Inc
Original Assignee
Kyocera Document Solutions Inc
Fuji Soft Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc, Fuji Soft Inc filed Critical Kyocera Document Solutions Inc
Priority to JP2011244988A priority Critical patent/JP5593297B2/en
Publication of JP2013101226A publication Critical patent/JP2013101226A/en
Application granted granted Critical
Publication of JP5593297B2 publication Critical patent/JP5593297B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

PROBLEM TO BE SOLVED: To allow more accurate search of real estate property information to be provided to a guest on the basis of voices of the guest and a host.SOLUTION: An H/G determination part 41 identifies voices of a host and a guest who are seated at different positions on the basis of intensity of detection sounds by directional microphones 22 to 25 whose sound collecting directions are freely adjustable. Question keywords and answer keywords of each of the types of questions classified with one or more question keywords are registered in a keyword table 45. A keyword determination part 44 determines which of the registered question keywords is included in the identified voice of the host and the type of the question based on the question keyword, determines which of the registered answer keywords corresponding to the type of the latest question is included in the identified voice of the guest, and makes a keyword for search storage part 46 store the determined answer keyword in association with the type of the question.

Description

本発明は、音声に含まれているキーワードに基づいて不動産物件情報を自動検索する不動産物件情報提供支援装置に関する。   The present invention relates to a real estate property information providing support apparatus that automatically searches real estate property information based on keywords included in a voice.

下記特許文献1では、不動産の購入を希望している顧客側にマイクを配置し、営業担当者がインタビューをして、顧客が発した音声情報からキーワードを抽出し、これに基づき不動産物件情報データベースを検索して、該当情報を提示する不動産物件情報提供装置が開示されている。   In Patent Document 1 below, a microphone is placed on the customer side who wants to purchase real estate, a salesperson interviews, extracts keywords from voice information issued by the customer, and based on this, a real estate property information database The real estate property information provision apparatus which searches for and presents the corresponding information is disclosed.

この装置によれば、不動産物件情報検索装置に対しキーワードを営業担当者がキーボード等で入力する必要がないので、顧客とのコミュニケーションを阻害することなく、不動産物件情報を提供することが可能となる。   According to this apparatus, since it is not necessary for a sales person to input a keyword to the real estate property information search device with a keyboard or the like, real estate property information can be provided without hindering communication with the customer. .

特開2005−321916号公報JP-A-2005-321916

しかしながら、顧客と営業担当者の何れが発したキーワードであるかを区別していないので、検索結果が不正確になる原因となる。   However, since it is not distinguished whether the keyword is issued by a customer or a sales person, the search result becomes inaccurate.

本発明の目的は、このような問題点に鑑み、ゲスト及びホストの音声に基づき、ゲストに提供しようとする不動産物件情報をより正確に検索することが可能な不動産物件情報提供支援装置を提供することにある。   In view of such problems, an object of the present invention is to provide a real estate property information providing support device capable of more accurately searching for real estate property information to be provided to a guest based on the voice of the guest and the host. There is.

本発明の一態様では、
キーワードが登録された識別用キーワード記憶手段と、
音声を検出し、該音声に該登録されたキーワードのいずれかが含まれているか否か判別するキーワード判別手段と、
該判別されたキーワードを記憶する検索用キーワード記憶手段と、
検索開始判定手段と、
不動産物件情報が登録された情報データベースと、
該検索開始判定手段が検索開始を判定したことに応答して、該検索用キーワード記憶手段に記憶されているキーワードに基づく条件を満たす情報を該情報データベースに対し検索する検索手段と、
情報検索結果を所定の書式及び媒体で出力する出力手段と、
を備えた不動産物件情報提供支援装置において、
ホストとゲストの音声を識別する話者識別手段をさらに備え、
該キーワード記憶手段には、質問キーワードと1つ以上の質問キーワードで分類される質問の種類毎の回答キーワードとが登録され、
該キーワード判別手段は、該識別されたホストの音声に、該登録された質問キーワードのどれが含まれているか及び該質問キーワードに基づく質問の種類を判別し、該識別されたゲストの音声に、直近の質問の種類に対応した、該登録された回答キーワードのどれが含まれているかを判別し、判別した回答キーワードを該質問の種類と対応させて該検索用キーワード記憶手段に記憶させる。
In one embodiment of the present invention,
A keyword storage means for identification in which keywords are registered;
Keyword discriminating means for detecting voice and discriminating whether or not any of the registered keywords is included in the voice;
Search keyword storage means for storing the determined keyword;
A search start determination means;
An information database in which real estate property information is registered;
Search means for searching the information database for information satisfying a condition based on the keyword stored in the search keyword storage means in response to the search start determination means determining the search start;
Output means for outputting information search results in a predetermined format and medium;
In the real estate property information providing support device equipped with
A speaker identification means for identifying the voice of the host and the guest;
In the keyword storage means, a question keyword and an answer keyword for each question type classified by one or more question keywords are registered,
The keyword discriminating unit discriminates which of the registered question keywords is included in the voice of the identified host and the type of the question based on the question keyword. It is determined which of the registered answer keywords corresponding to the most recent question type is included, and the determined answer keyword is stored in the search keyword storage means in association with the question type.

上記態様の構成によれば、ホストとゲストの音声を識別する話者識別手段を備え、キーワード記憶手段には、質問キーワードと1つ以上の質問キーワードで分類される質問の種類毎の回答キーワードとが登録され、キーワード判別手段が、該識別されたホストの音声に、該登録された質問キーワードのどれが含まれているか及び該質問キーワードに基づく質問の種類を判別し、該識別されたゲストの音声に、直近の質問の種類に対応した、該登録された回答キーワードのどれが含まれているかを判別し、判別した回答キーワードを該質問の種類と対応させて検索用キーワード記憶手段に記憶させるので、不動産物件情報をより正確に検索することが可能となり、実用性が高いという効果を奏する。   According to the configuration of the above aspect, the speaker identification means for identifying the voices of the host and the guest is provided, and the keyword storage means includes an answer keyword for each type of question classified by the question keyword and one or more question keywords. Is registered, and the keyword discriminating unit discriminates which of the registered question keywords is included in the voice of the identified host and the type of question based on the question keyword, and It is determined which of the registered answer keywords corresponding to the type of the most recent question is included in the voice, and the determined answer keyword is stored in the search keyword storage means in association with the type of question. Therefore, real estate property information can be searched more accurately, and there is an effect that the utility is high.

本発明の他の目的、特徴的な構成及び効果は、以下の説明を特許請求の範囲及び図面の記載と関係づけて読むことにより明らかになる。   Other objects, characteristic configurations and effects of the present invention will become apparent from the following description read in connection with the appended claims and the drawings.

本発明の実施例1に係り、インタビュー室での画像形成装置の配置を示す概略ブロック図である。1 is a schematic block diagram illustrating an arrangement of an image forming apparatus in an interview room according to Embodiment 1 of the present invention. 図1中の不動産物件情報提供支援装置の概略機能ブロック図である。It is a general | schematic functional block diagram of the real estate property information provision assistance apparatus in FIG. 図2中の聞き取り開始終了判定・出力開始判定部の構成を示す概略機能ブロック図である。FIG. 3 is a schematic functional block diagram illustrating a configuration of a listening start / end determination / output start determination unit in FIG. 2. (A)及び(B)は、ホストが画像形成装置側を向いているか否かの判定説明図である。(A) and (B) are explanatory diagrams for determining whether or not the host faces the image forming apparatus. 図2中のキーワード取得部の概略構成を示す機能ブロック図である。It is a functional block diagram which shows schematic structure of the keyword acquisition part in FIG. 図5中のキーワード判別部による処理を示す概略フローチャートである。It is a schematic flowchart which shows the process by the keyword discrimination | determination part in FIG. 図2中の情報検索処理部の構成を示す概略機能ブロック図である。FIG. 3 is a schematic functional block diagram illustrating a configuration of an information search processing unit in FIG. 2. 図7中の条件緩和部による処理を示す概略フローチャートである。It is a schematic flowchart which shows the process by the condition relaxation part in FIG. 図2中の顔情報等処理部の構成例を示す概略ブロック図である。It is a schematic block diagram which shows the structural example of the process parts, such as a face information in FIG. (A)〜(D)は図9で用いられる情報データベースの構成の説明図である。(A)-(D) are explanatory drawings of the structure of the information database used in FIG. 図2中の情報加工部の構成例を示す概略機能ブロック図である。FIG. 3 is a schematic functional block diagram illustrating a configuration example of an information processing unit in FIG. 2. 不動産物件情報提供支援装置の全体動作の概略フローチャートである。It is a schematic flowchart of the whole operation | movement of a real estate property information provision assistance apparatus.

図1は、本発明の実施例1に係り、インタビュー室での画像形成装置の配置を示す概略ブロック図である。   FIG. 1 is a schematic block diagram illustrating an arrangement of an image forming apparatus in an interview room according to the first embodiment of the present invention.

このインタビュー室には、画像形成装置10がテーブル11の近くに配置され、テーブル11には、ホストH用の椅子12とゲストG用の椅子13及び14とが組み合わされている。   In this interview room, the image forming apparatus 10 is arranged near the table 11, and the chair 11 for the host H and the chairs 13 and 14 for the guest G are combined on the table 11.

画像形成装置10は、その本体15と、不動産物件情報提供支援装置20とから成る。この装置20は、情報処理装置21に、入力装置及び出力装置が接続されて構成されている。この入力装置には、集音方向を手動調整自在な指向性マイク22〜25と、光軸方向を手動調整自在なビデオカメラ26及び27とが含まれている。   The image forming apparatus 10 includes a main body 15 and a real estate property information providing support apparatus 20. This device 20 is configured by connecting an input device and an output device to an information processing device 21. This input device includes directional microphones 22 to 25 whose sound collection direction can be manually adjusted, and video cameras 26 and 27 whose optical axis direction can be manually adjusted.

指向性マイク22〜25はいずれも、好ましくは単一指向性である。指向性マイク22〜25は、それぞれの感度が最大となる方位が放射状になるように配置され、これにより、ホストHの音色を判別することなく、指向性マイク22〜25の出力強度に基づいて、椅子12に着座しているホストHの音声であるのか、椅子13又は椅子14に着座しているゲストGの音声であるのかを区別することが可能となっている。   All of the directional microphones 22 to 25 are preferably unidirectional. The directional microphones 22 to 25 are arranged so that the azimuths at which the respective sensitivities are maximized are radial, and based on the output intensity of the directional microphones 22 to 25 without determining the tone of the host H. The voice of the host H sitting on the chair 12 and the voice of the guest G sitting on the chair 13 or 14 can be distinguished.

ビデオカメラ26の光軸は椅子12側へ向けられており、ホストHが椅子12に着座しているか否か及びホストHが画像形成装置10側を向いているか否かを画像処理により判定可能となっている。また、ビデオカメラ27は、その光軸が椅子13及び14側に向けられており、椅子13及び14にゲストGが着座しているか否かを判定すること及びゲストGの画像に基づき後述のように個人識別や性別推定等の処理することが可能となっている。   The optical axis of the video camera 26 is directed to the chair 12 side, and it can be determined by image processing whether the host H is seated on the chair 12 and whether the host H is facing the image forming apparatus 10 side. It has become. The video camera 27 has its optical axis directed toward the chairs 13 and 14, and determines whether or not the guest G is seated on the chairs 13 and 14 and the image of the guest G will be described later. It is possible to process personal identification and gender estimation.

上記出力装置には、質問を補助的に発するためのスピーカ28と、自動検索結果の該当物件数を表示するための表示パネル29とが含まれている。椅子12に着座しているホストHが表示パネル29の表示を視認できるように、表示パネル29が画像形成装置10に配置されるとともに、画像形成装置10がテーブル11側に配置されている。   The output device includes a speaker 28 for assisting questions and a display panel 29 for displaying the number of corresponding properties in the automatic search result. The display panel 29 is disposed on the image forming apparatus 10 and the image forming apparatus 10 is disposed on the table 11 side so that the host H sitting on the chair 12 can visually recognize the display on the display panel 29.

図2は、不動産物件情報提供支援装置20の概略機能ブロック図である。   FIG. 2 is a schematic functional block diagram of the real estate property information providing support device 20.

情報処理装置21の聞き取り開始終了判定・出力開始判定部30は、ビデオカメラ26及び27からの画像データを処理して、聞き取りの開始及び終了の判定並びに画像形成装置本体15又は電子メールを介した出力開始の判定を行う。   The hearing start / end determination / output start determination unit 30 of the information processing apparatus 21 processes the image data from the video cameras 26 and 27 to determine the start and end of the listening and the image forming apparatus main body 15 or via e-mail. Judge the output start.

図3は、聞き取り開始終了判定・出力開始判定部30の構成を示す概略機能ブロック図である。   FIG. 3 is a schematic functional block diagram showing the configuration of the listening start / end determination / output start determination unit 30.

この判定部30では、ビデオカメラ26及び27からのビデオデータで一時記憶部(フレームメモリ)31内のフレーム画像が更新され、一方、椅子画像記憶部32には、椅子12〜14の画像が予め格納されている。   In the determination unit 30, the frame image in the temporary storage unit (frame memory) 31 is updated with the video data from the video cameras 26 and 27, while the chair image storage unit 32 stores the images of the chairs 12 to 14 in advance. Stored.

聞き取り開始判定部33は、一時記憶部31内の画像を椅子画像記憶部32内の椅子画像と比較して、人が着座する前に椅子12〜14を識別すると共に、椅子12〜14に人が着座しているか否かを判定する。判定部33は、椅子12に人が着座し、かつ、椅子13又は椅子14に人が着座していると判定すると、聞き取り開始START(信号又は変数)を"true"(活性)にする。着座しているか否かは、椅子位置に顔と判定されるものが存在しその高さが所定範囲内であるか否かにより判定する。   The hearing start determination unit 33 compares the image in the temporary storage unit 31 with the chair image in the chair image storage unit 32 to identify the chairs 12 to 14 before the person is seated, and to the chairs 12 to 14. It is determined whether or not is seated. If the determination unit 33 determines that a person is seated on the chair 12 and that a person is seated on the chair 13 or 14, the determination unit 33 sets the listening start START (signal or variable) to “true” (active). Whether or not the user is seated is determined by whether or not a chair is determined to be a face and the height is within a predetermined range.

出力開始判定部34は、一時記憶部31に含まれるビデオカメラ26からのフレーム画像から、椅子12に着座しているホストHの顔画像を抽出し、ホストHが画像形成装置10側を所定時間、例えば3秒以上継続して向いているか否かを判定し、肯定判定した場合には、検索結果を出力させるための出力開始OUT(信号又は変数)を活性にする。   The output start determination unit 34 extracts the face image of the host H sitting on the chair 12 from the frame image from the video camera 26 included in the temporary storage unit 31, and the host H keeps the image forming apparatus 10 side for a predetermined time. For example, it is determined whether or not the camera is continuously turned for 3 seconds or more, and when an affirmative determination is made, the output start OUT (signal or variable) for outputting the search result is activated.

ホストHが画像形成装置10側を向いているか否かの判定は、例えば図4に示すように、顔画像に含まれる1対の目を識別し、目の間隔Dが設定値D0以上であればホストHが画像形成装置10側を向いていると判定する。なお、両耳が顔画像に含まれていれば画像形成装置10側を向いていると判定してもよい。   Whether the host H is facing the image forming apparatus 10 is determined by identifying a pair of eyes included in the face image, for example, as shown in FIG. For example, it is determined that the host H is facing the image forming apparatus 10 side. If both ears are included in the face image, it may be determined that the image forming apparatus 10 is facing.

終了判定部35は、椅子12〜14のいずれにも人が着座しておらず、この状態が所定時間、例えば30秒経過したと判定すると、聞き取り終了END(信号又は変数)を活性にする。   When it is determined that no person is seated on any of the chairs 12 to 14 and this state has elapsed for a predetermined time, for example, 30 seconds, the end determination unit 35 activates the listening end END (signal or variable).

図2に戻って、指向性マイク22〜25の出力はそれぞれ、互いに同一構成のアンプ221、231、241及び251で増幅され、さらにそれぞれ、互いに同一構成のA/D変換器222、232、242及び252でデジタル値に変換され、音声データとしてキーワード取得部40に供給される。   Returning to FIG. 2, the outputs of the directional microphones 22 to 25 are respectively amplified by the amplifiers 221, 231, 241 and 251 having the same configuration, and further, A / D converters 222, 232 and 242 having the same configuration. And 252 are converted into digital values and supplied to the keyword acquisition unit 40 as audio data.

キーワード取得部40は、これら音声データの振幅の比較に基づき、椅子12に着座しているホストHからの質問であるのか、椅子13又は椅子14に着座しているゲストGからの回答であるかを識別すると共に、質問であれば、質問の種類を判別し、この質問判別後設定時間内の回答であれば、該質問種類に関係する回答キーワードを判別し、判別した回答キーワードを質問種類と対応付けて記憶する。   Whether the keyword acquisition unit 40 is a question from the host H sitting on the chair 12 or an answer from the guest G sitting on the chair 13 or 14 based on the comparison of the amplitudes of these audio data If it is a question, the type of the question is determined. If the answer is within the set time after the question determination, an answer keyword related to the question type is determined, and the determined answer keyword is set as the question type. Store in association with each other.

図5は、キーワード取得部40の概略構成を示す機能ブロック図である。   FIG. 5 is a functional block diagram illustrating a schematic configuration of the keyword acquisition unit 40.

H/G判定部41は、A/D変換器222、232、242及び252からの音声データの振幅を比較して、ホストHの音声であるかゲストGの音声であるかを判別する。例えば、A/D変換器222と232の出力振幅の合計と、A/D変換器252とA/D変換器242の出力振幅の合計との差の絶対値が設定値以上で、この差が正であればゲストGの音声であると判定し、負であればホストHの音声と判定する。また、A/D変換器232と242の出力振幅の差が一定値未満であれば、ノイズと判定する。A/D変換器222、232、242及び252の出力は、加算部42で加算されて、一時記憶部43に格納される。   The H / G determination unit 41 compares the amplitudes of the audio data from the A / D converters 222, 232, 242 and 252 to determine whether the audio is the host H audio or the guest G audio. For example, the absolute value of the difference between the sum of the output amplitudes of the A / D converters 222 and 232 and the sum of the output amplitudes of the A / D converter 252 and the A / D converter 242 is greater than or equal to a set value. If it is positive, it is determined that the sound is from the guest G. If it is negative, it is determined that the sound is from the host H. If the difference between the output amplitudes of the A / D converters 232 and 242 is less than a certain value, it is determined as noise. Outputs from the A / D converters 222, 232, 242 and 252 are added by the adding unit 42 and stored in the temporary storage unit 43.

ここで、検索対象の物件情報には、キーワード、間取り図及び建物外観写真が含まれている。このキーワードには、家賃、最寄り駅、最寄り駅からの徒歩時間、間取り及び建物種別の値が含まれている。   Here, the property information to be searched includes a keyword, a floor plan, and a building exterior photograph. This keyword includes rent, nearest station, walking time from nearest station, floor plan, and building type.

ホストHからゲストGへの質問の種類には、前記キーワードに対応して、家賃、希望物件の最寄り駅、希望物件から最寄り駅までの徒歩時間、希望物件の間取り及び建物の種別がある。これら種別について、ホストHはゲストGに、次のような質問をする。   The types of questions from the host H to the guest G include the rent, the nearest station of the desired property, the walking time from the desired property to the nearest station, the floor plan of the desired property, and the type of building corresponding to the keyword. For these types, the host H asks the guest G the following questions.

家賃:「ご希望の家賃はおいくらでしょうか」
最寄り駅:「最寄駅の希望はございますでしょうか」
徒歩時間:「最寄り駅から徒歩何分程度の物件まで許容されますでしょうか」
間取り:「どの程度の間取りをご希望されますでしょうか」
建物種別:「アパート、マンション、戸建 のどれをご希望されますでしょうか」
キーワード判別部44は、H/G判定部41がホストHの音声であると判定すると、一時記憶部43の内容とキーワードテーブル45に登録されている質問キーワードとに基づき、前記質問の種類を判別する。
Rent: “How much is the desired rent?”
Nearest station: “Is there any hope for the nearest station?”
Walking time: “How many minutes on foot are allowed from the nearest station?”
Floor plan: “How much would you like to plan?”
Building type: “Would you like an apartment, condominium, or detached house?”
When the H / G determination unit 41 determines that the sound is from the host H, the keyword determination unit 44 determines the type of the question based on the contents of the temporary storage unit 43 and the question keyword registered in the keyword table 45. To do.

例えば、ホストHの質問に「希望」と「家賃」の質問キーワードが音声に含まれていれば、質問の種別が家賃であると判別し、「希望」と「最寄り駅」の質問キーワードが含まれていれば、質問の種類が最寄り駅であると判別し、「徒歩何分」の質問キーワードが含まれていれば、質問の種類が徒歩時間であると判別し、「間取り」と「希望」の質問キーワードが含まれていれば、質問の種類が間取りであると判別し、「アパート」、「マンション」、「戸建」のいずれかと「希望」の質問キーワードが含まれていれば質問の種類が建物種別と判別する。キーワード判別部44はさらに、図6中に示すように、判別した質問の種類のフラグFを立てるとともに、前回立っていたフラグFをリセットする。   For example, if the host H's question contains “hope” and “rent” question keywords in the voice, it is determined that the question type is rent, and “hope” and “nearest station” question keywords are included. If the answer is yes, it is determined that the question type is the nearest station. If the question keyword “how many minutes on foot” is included, the question type is determined to be walking time. ”Question keyword, it is determined that the type of question is floor plan, and if any of“ Apartment ”,“ Apartment ”,“ Detached ”and“ hope ”question keywords are included, the question Is determined to be a building type. Further, as shown in FIG. 6, the keyword discriminating unit 44 sets a flag F of the discriminated question type and resets the flag F that was set last time.

キーワードテーブル45にはさらに、家賃、最寄り駅、徒歩時間、間取り及び建物種別のそれぞれの質問種類について、例えば、次のような回答キーワードが登録されている。   For example, the following answer keywords are registered in the keyword table 45 for each question type of rent, nearest station, walking time, floor plan, and building type.

家賃:「1万」、「2万」、・・・、「10万」(1万〜10万の10段階、1万円単位)
最寄り駅:「新宿」、「渋谷」、・・・(山手線内のすべての駅)
徒歩時間:「1分」、「2分」、・・・、「20分」 (1〜20分の20段階、1分単位)
間取り:「1K」、「1DK」、「1LDK」、「2K」、「2DK」、「2LDK」、「3DK」、「3LDK」
建物種別:「アパート」、「マンション」、「戸建」
キーワード判別部44は、H/G判定部41がゲストGの音声であると判定すると、一時記憶部43の内容と、キーワードテーブル45に登録されている回答キーワードのうち直近の質問キーワードに関するものとに基づき、回答キーワードを判別する。キーワード判別部44はさらに、この回答キーワード(現回答キーワード)が、キーワード記憶部46に記憶されている、前記質問キーワードに関する回答キーワード(前回の回答キーワード)と同一であるか否かを判定する。否定判定した場合には、現回答キーワードで前回のキーワードを上書き更新するとともに、検索開始SEARCH(変数又は信号)を活性にする。
Rent: "10,000", "20,000", ..., "100,000" (10 steps from 10,000 to 100,000, in units of 10,000 yen)
Nearest station: "Shinjuku", "Shibuya", ... (all stations on the Yamanote Line)
Walking time: "1 minute", "2 minutes", ..., "20 minutes" (20 steps from 1 to 20 minutes, 1 minute unit)
Floor plan: "1K", "1DK", "1LDK", "2K", "2DK", "2LDK", "3DK", "3LDK"
Building type: “apartment”, “apartment”, “detached”
When the keyword determination unit 44 determines that the H / G determination unit 41 is the voice of the guest G, the contents of the temporary storage unit 43 and those related to the latest question keyword among the answer keywords registered in the keyword table 45 Based on the above, the answer keyword is determined. The keyword determination unit 44 further determines whether or not the answer keyword (current answer keyword) is the same as the answer keyword (previous answer keyword) related to the question keyword stored in the keyword storage unit 46. If a negative determination is made, the previous keyword is overwritten and updated with the current answer keyword, and the search start SEARCH (variable or signal) is activated.

キーワード記憶部46内の初期値は例えば、次の通りである(最寄り駅は、不動産屋の所在地であると想定)。これらは、上記直近質問キーワードの種類及び前回の回答キーワードに含まれる。   For example, the initial values in the keyword storage unit 46 are as follows (assuming that the nearest station is the location of the real estate agent). These are included in the type of the most recent question keyword and the previous answer keyword.

家賃:無条件
最寄り駅:新宿
徒歩:無条件
間取り:無条件
建物種別:無条件
図6は、キーワード判別部44による処理を示す概略フローチャートである。
Rent: Unconditional Nearest station: Shinjuku Walking: Unconditional Floor plan: Unconditional Building type: Unconditional FIG. 6 is a schematic flowchart showing processing by the keyword discriminating unit 44.

(S0)聞き取り開始終了判定・出力開始判定部30からの聞き取り終了ENDが活性であれば、この処理を終了し、そうでなければステップS1へ進む。   (S0) If the listening end END from the listening start end determination / output start determining unit 30 is active, this process ends. Otherwise, the process proceeds to step S1.

(S1)H/G判定部41の判定結果がホストHであればステップS2へ進み、ゲストGであればステップS4へ進む。   (S1) If the determination result of the H / G determination unit 41 is the host H, the process proceeds to step S2, and if it is the guest G, the process proceeds to step S4.

(S2)一時記憶部43内の音声に、質問キーワードが含まれているか否かを判別する。含まれていればステップS3へ進み、そうでなければステップS0へ戻る。   (S2) It is determined whether or not the question keyword is included in the voice in the temporary storage unit 43. If it is included, the process proceeds to step S3, and if not, the process returns to step S0.

(S3)1つ又は2つの質問キーワードが上記質問の種類のどれであるかを上述のように判別し、どれかに該当すればそのフラグFを立てるとともに前回立っていたフラグFをリセットすることにより、現質問の種類を記憶して、ステップS0へ戻る。   (S3) It is determined as described above whether one or two question keywords are of the above-mentioned question type, and if any of them is met, the flag F is set and the flag F that was set last time is reset. Thus, the type of the current question is stored, and the process returns to step S0.

(S4)一時記憶部43内の音声に、該現質問種類に関する回答キーワードが含まれているか否かを判別し、含まれていればステップS5へ進み、そうでなければステップS0へ戻る。   (S4) It is determined whether or not the answer keyword regarding the current question type is included in the voice in the temporary storage unit 43. If included, the process proceeds to step S5, and if not, the process returns to step S0.

(S5)この現回答キーワードと、キーワード記憶部46に格納されている対応する前回答キーワードとを比較し、両者が一致すればステップS0へ戻り、そうでなければステップS6へ進む。   (S5) The current answer keyword is compared with the corresponding previous answer keyword stored in the keyword storage unit 46. If they match, the process returns to step S0, and if not, the process proceeds to step S6.

(S6)この現回答キーワードで、キーワード記憶部46内の対応する前回答キーワードを上書きすることにより、回答キーワードを更新する。   (S6) The answer keyword is updated by overwriting the corresponding previous answer keyword in the keyword storage unit 46 with the current answer keyword.

(S7)検索開始SEARCHを活性にして、ステップS0へ戻る。   (S7) Activate search start SEARCH and return to step S0.

図2に戻って、情報検索処理部50は、検索開始SEARCHの活性化に応答してキーワード記憶部46内のキーワード群で情報データベースをAND検索し、その結果を出力する。   Returning to FIG. 2, the information search processing unit 50 AND-searches the information database with the keyword group in the keyword storage unit 46 in response to activation of the search start SEARCH, and outputs the result.

図7は、情報検索処理部50の構成を示す概略機能ブロック図である。   FIG. 7 is a schematic functional block diagram showing the configuration of the information search processing unit 50.

情報検索部51は、検索開始SEARCHの活性化に応答して、キーワード記憶部46内の全キーワードの所定条件を満たす(例えば、徒歩時間3分以内はキーワード「3分」の条件を満たすとし、家賃は希望値から1万円安い値までのものを、条件を満たすとし、その他は希望値のみ条件を満たすとする。)物件を、物件情報テーブル52に対し検索し、その結果を検索結果記憶部53に格納する。   In response to the activation of the search start SEARCH, the information search unit 51 satisfies the predetermined condition of all keywords in the keyword storage unit 46 (for example, the condition of the keyword “3 minutes” is satisfied within 3 minutes on foot, (Assuming that the rent satisfies the condition from the desired value to the value 10,000 yen cheaper, and the other only satisfies the desired value.) The property is searched against the property information table 52, and the result is stored as a search result. Stored in the unit 53.

選択部54は、図2の顔情報等処理部60からゲストGの識別符号(ID)を受け取り、現在から過去に遡って所定期間内に、このIDのゲストGに対し提供済みの物件情報が検索結果記憶部53に含まれているか否かを判別し、含まれていればその物件情報を検索結果記憶部53から削除することにより選択し、選択後の物件数を表示制御部56を介して表示パネル29に表示する。   The selection unit 54 receives the identification code (ID) of the guest G from the face information etc. processing unit 60 in FIG. 2, and the property information already provided to the guest G of this ID is traced back to the past from the present in the past. It is determined whether or not it is included in the search result storage unit 53, and if it is included, the property information is selected by deleting it from the search result storage unit 53, and the number of properties after selection is displayed via the display control unit 56. Is displayed on the display panel 29.

処理判別部57は、検索結果記憶部53内の物件数が5未満であれば条件緩和部58に制御を移し、そうでなければ検索結果を図2の情報加工部70へ渡す。   If the number of properties in the search result storage unit 53 is less than 5, the process determination unit 57 transfers control to the condition relaxation unit 58, and otherwise passes the search result to the information processing unit 70 in FIG.

図8は、条件緩和部58による処理を示す概略フローチャートである。   FIG. 8 is a schematic flowchart showing processing by the condition relaxation unit 58.

(S10)条件緩和の質問種類を示す変数iに0を代入する。   (S10) 0 is substituted into a variable i indicating a question type for condition relaxation.

(S11)iの値が0、1又は2であれば、それぞれステップS12、S19、S21へ進む。   (S11) If the value of i is 0, 1 or 2, the process proceeds to steps S12, S19 and S21, respectively.

ここで、キーワード記憶部46に含まれる回答キーワードが、徒歩X分、最寄りY駅、家賃Z万円であるとする。   Here, it is assumed that the answer keywords included in the keyword storage unit 46 are X minutes on foot, the nearest Y station, and rent Z 10,000 yen.

(S12)Xに1を加算する。   (S12) 1 is added to X.

(S13)i=0、緩和値V=X、Yを引数として、質問部59を呼び出す、質問部59はこれに応答して、i=0であれば、「最寄りY駅から徒歩X分の距離ではどうでしょうか」という質問(変数Y、Xに前記引数を与えたもの)の文字列を音声データに変換し、D/A変換器281へ供給する。これにより、この音声データがアナログ化され、さらにローパスフィルタ282を通って、アナログ化に伴う高周波成分が除去され、次いでアンプ283で増幅され、その信号がスピーカ28に供給されて音声に変換され、質問が発せられる。   (S13) i = 0, relaxation value V = X, Y is called as an argument, and the question unit 59 is called. In response to this, if i = 0, the question unit 59 is “X minutes on foot from the nearest Y station. The character string of the question “What about distance?” (The variables Y and X given the above arguments) is converted into speech data and supplied to the D / A converter 281. As a result, the audio data is converted into analog data, further passes through the low-pass filter 282, high-frequency components associated with analogization are removed, then amplified by the amplifier 283, and the signal is supplied to the speaker 28 and converted into audio, A question is issued.

(S14)キーワード取得部40を介して、この質問に対する回答を取得し、この回答が肯定を示すものであればステップS15へ進み、そうでなければステップS17へ進む。   (S14) An answer to this question is obtained via the keyword obtaining unit 40. If this answer indicates affirmation, the process proceeds to step S15, and if not, the process proceeds to step S17.

(S15)キーワード記憶部46内の徒歩時間を緩和値Vで更新するとともに検索開始SEARCHを活性にする。これにより、上述のようにして、情報検索部51での検索が再度行われ、また、表示パネル29上の物件数Nが更新されることになる。   (S15) The walking time in the keyword storage unit 46 is updated with the relaxation value V and the search start SEARCH is activated. As a result, the search in the information search unit 51 is performed again as described above, and the number N of properties on the display panel 29 is updated.

(S16)N≧5であれば条件緩和部58での処理を終了し、そうでなければステップS11へ戻る。   (S16) If N ≧ 5, the process in the condition relaxation unit 58 is terminated, and if not, the process returns to step S11.

(S17)iの値を1だけインクリメントしてステップS11へ戻る。   (S17) Increment the value of i by 1 and return to step S11.

(S18)最寄り駅Yを、時間的又は空間的にその駅から最も近い駅に変更(シフト)する。   (S18) The nearest station Y is changed (shifted) from the station to the nearest station in time or space.

(S19)i=1、緩和値V=Yを引数として、質問部59を呼び出す、質問部59はこれに応答して、i=1であれば、「最寄り駅Yはどうでしょうか」という質問(変数Yに前記引数を与えたもの)の文字列を音声データに変換し、D/A変換器281へ供給する。これにより、最寄り駅の条件緩和後の質問が発せられる。次にステップS14へ進む。   (S19) The question part 59 is called with i = 1 and the relaxation value V = Y as arguments. The question part 59 responds to this, and if i = 1, the question “How about the nearest station Y?” A character string obtained by giving the argument to the variable Y) is converted into voice data and supplied to the D / A converter 281. As a result, questions after relaxing the conditions of the nearest station are issued. Next, the process proceeds to step S14.

(S20)Zに1を加算する。   (S20) 1 is added to Z.

(S19)i=2、緩和値V=Zを引数として、質問部59を呼び出す、質問部59はこれに応答して、i=2であれば、「家賃Z万円はどうでしょうか」という質問(変数Zに前記引数を与えたもの)の文字列を音声データに変換し、D/A変換器281へ供給する。これにより、家賃の条件緩和後の質問が発せられる。次にステップS14へ進む。   (S19) The question part 59 is called by using i = 2 and the relaxation value V = Z as an argument. The question part 59 responds to this, and if i = 2, the question is "How about rent Z 10,000 yen?" A character string (which is obtained by giving the argument to the variable Z) is converted into voice data and supplied to the D / A converter 281. As a result, questions after relaxation of rent conditions are issued. Next, the process proceeds to step S14.

このようにして、条件を緩和する質問が自動的に発せられ、ゲストGが肯定回答した場合には緩和後の条件で再検索が行われ、この処理が、N≧5になるか緩和条件が無くなるまで繰り返される。   In this way, a question for relaxing the condition is automatically issued, and when the guest G gives an affirmative answer, a re-search is performed under the relaxed condition. It is repeated until it disappears.

図9は、顔情報等処理部60の構成例を示す概略ブロック図である。   FIG. 9 is a schematic block diagram illustrating a configuration example of the face information etc. processing unit 60.

顔情報等処理部60では、ビデオカメラ26からのビデオデータが一時記憶部(フレームメモリ)61に格納される。ゲスト検索・登録部62は、聞き取り開始STARTの活性化後において、一時記憶部61内のフレーム画像からゲストGの顔画像を抽出し、顔画像に両耳が写っていれば、これと、所定フォルダ内に保存されている各顔画像との類似度を算出する。該フォルダ内の顔画像は、個人情報データベースの一部である。ゲスト検索・登録部62はさらに、該類似度が設定値以上のものが存在するか否かを調べ、存在すれば最も類似度の高い顔画像を、現在取得したもので更新し、存在しなければ、ゲストGに割り当てるID(シリアル番号)の最大値に1を加えたものをこのゲストGのIDとし、これを顔画像と共に記憶する。例えば図10(D)に示すように、顔画像のファイル名にこのゲストGのIDを付加して該所定フォルダに格納する。   In the face information processing unit 60, video data from the video camera 26 is stored in a temporary storage unit (frame memory) 61. The guest search / registration unit 62 extracts the face image of the guest G from the frame image in the temporary storage unit 61 after the activation of the listening start START. The similarity with each face image stored in the folder is calculated. The face images in the folder are part of the personal information database. Further, the guest search / registration unit 62 checks whether or not there is a similarity that is equal to or higher than the set value, and if it exists, the face image having the highest similarity is updated with the currently acquired one and must exist. For example, a value obtained by adding 1 to the maximum ID (serial number) assigned to the guest G is used as the guest G ID, and is stored together with the face image. For example, as shown in FIG. 10D, the guest G ID is added to the file name of the face image and stored in the predetermined folder.

一方、特徴量抽出部64は、この登録対象の顔画像を含むゲストGの全体画像から、ゲストGの性別及び年齢層を判別するための特徴量、例えば、ネクタイをしているか否か、スカートをはいているか否か、口紅をつけているか否か、肌の輝度分布等を取得する。分類部65は、この特徴量に基づいて、ゲストGの性別及び年齢層を推定し、図10(A)に示すような、個人情報データベースの一部である個人情報テーブル63に、推定した性別及び年齢層と前記IDとを含む行を追加する。   On the other hand, the feature amount extraction unit 64 determines a feature amount for determining the gender and age group of the guest G from the entire image of the guest G including the face image to be registered, for example, whether or not a tie is used. Whether or not the skin is worn, whether or not the lipstick is put on, and the luminance distribution of the skin are acquired. The classification unit 65 estimates the gender and age group of the guest G based on the feature amount, and the estimated gender is stored in the personal information table 63 that is a part of the personal information database as shown in FIG. And a row including the age group and the ID.

ホストHの質問に応じてゲストGが、電子メールで検索結果を取得したい旨の回答をした場合、画像形成装置10に貼付された2次元コード(不図示)を携帯電話のカメラで撮像させて該2次元コードに含まれるアドレスに、ゲストIDを含む電子メールを送信させる。このゲストIDは、表示パネル29に表示される。出力媒体決定部66は、このメールから、ゲストGの電子メールアドレスを取得し、これを該IDと対応付けて個人情報テーブル63に格納させると共に、出力媒体を紙媒体ではなく電子メールの添付ファイルと決定しその識別符号MEDIAIDを出力する。   When the guest G replies that he / she wants to obtain the search result by e-mail in response to the question of the host H, the two-dimensional code (not shown) attached to the image forming apparatus 10 is imaged by the camera of the mobile phone. An e-mail including a guest ID is transmitted to an address included in the two-dimensional code. This guest ID is displayed on the display panel 29. The output medium determining unit 66 acquires the email address of the guest G from this mail, stores it in the personal information table 63 in association with the ID, and attaches the output medium to the email attachment instead of the paper medium. And the identification code MEDIAID is output.

出力書式決定部67は、分類部65で推定されたゲストGの性別及び年齢層に基づき、図10(B)に示すような、予め手動設定された書式・自動キーワード決定テーブル68を参照して、出力書式識別コードFMTIDを決定する。この出力書式は例えば、老人層と推定された場合に文字を大きくするとか、女性と推定された場合に枠に模様をつけるとかである。   The output format determination unit 67 refers to the manually set format / automatic keyword determination table 68 as shown in FIG. 10B based on the gender and age group of the guest G estimated by the classification unit 65. The output format identification code FMTID is determined. The output format is, for example, to enlarge a character when it is estimated to be an elderly group, or to add a pattern to a frame when it is estimated to be a woman.

書式・自動キーワード決定テーブル68には、性別及び年齢層に応じて自動的に付加するキーワードが記載されている場合があり、現在のゲストGについて、対応するキーワードが存在すれば、キーワード自動付加部69がこれをAUTOKWとして取得し、図5のキーワード記憶部46に格納させる。このキーワードは例えば、若年層の女性に対する「オートロック」である。   In the format / automatic keyword determination table 68, a keyword to be automatically added according to gender and age group may be described. If there is a corresponding keyword for the current guest G, an automatic keyword adding unit is provided. 69 acquires this as AUTOKW, and stores it in the keyword memory | storage part 46 of FIG. This keyword is, for example, “auto lock” for young women.

図11は、情報加工部70の構成例を示す概略機能ブロック図である。   FIG. 11 is a schematic functional block diagram illustrating a configuration example of the information processing unit 70.

情報加工部70のソート部71は、図7の処理判別部57から物件情報を受け取り、優先度テーブル72に定められている優先度に基づきソートし、上位5件をピックアップする。例えば、物件情報を築年数が若い順にソートし、次に、同一築年数については最寄り駅までの徒歩時間が短い順にソートし、この時間が同一のものについては敷金と礼金の合計値が安い順にソートする。   The sorting unit 71 of the information processing unit 70 receives the property information from the processing determination unit 57 of FIG. 7, sorts based on the priority set in the priority table 72, and picks up the top five items. For example, the property information is sorted in ascending order of age, then the same age is sorted in ascending order of walking time to the nearest station, and for those with the same age, the total of deposit and key money is in ascending order. Sort.

選択部73は、ソートされた物件情報が5件を越えていれば、上位5件を選択する。コメント付加部74は、選択された物件情報に対し、物件情報にコメントIDが付加されていれば、コメントIDとコメント文とを対応付けたコメントテーブル75を参照して、コメントIDを該当するもので置換することにより、おすすめコメントを物件情報に付加する。おすすめコメントとは例えば、「比較的築浅で。見た目も綺麗です。」、「駅から近く、通勤通学共に便利です。」、「礼金0・敷金0、初期費用かなり少なめでお引越しが実現。」などである。   When the sorted property information exceeds five items, the selection unit 73 selects the top five items. If a comment ID is added to the property information for the selected property information, the comment adding unit 74 refers to the comment table 75 in which the comment ID and the comment text are associated with each other, and applies the comment ID. By replacing with, the recommended comment is added to the property information. Recommended comments are, for example, “Relatively shallow. It looks beautiful.”, “Close to the station and convenient for both commuting to school.”, “No key money, 0 deposit, initial moving costs are very small. And so on.

出力編集部76は、図9の出力書式決定部67で決定された書式FORMATに基づいて、コメント付加部74からの物件情報を編集し、出力制御部80に出力する。出力制御部80では、出力媒体決定部66で決定された出力媒体識別符号MEDIAIDに応じて、画像形成装置本体15に物件情報を印刷させ、或いは電子メールで物件情報ファイルを送信する。   The output editing unit 76 edits the property information from the comment adding unit 74 based on the format FORMAT determined by the output format determining unit 67 of FIG. 9 and outputs it to the output control unit 80. The output control unit 80 causes the image forming apparatus main body 15 to print the property information or transmits the property information file by electronic mail according to the output medium identification code MEDIAAID determined by the output medium determination unit 66.

図12は、上述のような不動産物件情報提供支援装置20の動作の概略を示すフローチャートである。   FIG. 12 is a flowchart showing an outline of the operation of the real estate property information providing support device 20 as described above.

(S30)ホストHは、画像形成装置10の電源をオンにする。   (S30) The host H turns on the power of the image forming apparatus 10.

(S31)これにより、ビデオカメラ26及び27による監視が開始される。   (S31) Thereby, monitoring by the video cameras 26 and 27 is started.

(S32〜S34)ホストHが椅子12に着席し、ゲストGが椅子13又は14に着席すると、キーワード取得部40によるキーワード聞き取りが開始される。   (S32 to S34) When the host H is seated on the chair 12 and the guest G is seated on the chair 13 or 14, the keyword acquisition by the keyword acquisition unit 40 is started.

(S35、S36)ホストHの直近の質問に対応したゲストGの回答キーワードが含まれていれば、キーワード記憶部46内の対応する回答キーワードを、これで上書き更新する。   (S35, S36) If the answer keyword of the guest G corresponding to the latest question of the host H is included, the corresponding answer keyword in the keyword storage unit 46 is overwritten and updated by this.

(S37〜S39)キーワード記憶部46に格納されている回答キーワードに基づき、不動産物件を検索し、その中から、過去に提供済みのものを除き、その件数を表示パネル29に表示させる。   (S37 to S39) Based on the answer keyword stored in the keyword storage unit 46, a real estate property is searched, and those that have been provided in the past are excluded, and the number of cases is displayed on the display panel 29.

(S40、S41)ホストHがその顔を画像形成装置10の方向へ3秒以上向け続けていれば、ステップS42へ進む。   (S40, S41) If the host H keeps the face facing the image forming apparatus 10 for 3 seconds or more, the process proceeds to step S42.

(S42、S43)検索結果の件数Nが5未満であれば条件を緩和する質問を発し、ステップS34へ戻る。   (S42, S43) If the number N of search results is less than 5, a question for relaxing the condition is issued, and the process returns to step S34.

(S44)件数Nが5を超えていれば、上位5件を選択する。   (S44) If the number N of cases exceeds 5, the top 5 cases are selected.

(S46)物件情報を優先度順にソートし、上位5件をピックアップし、さらにおすすめコメントを付加する。   (S46) Sort the property information in order of priority, pick up the top five items, and add recommended comments.

(S47〜S49)画像形成装置10は用紙に物件情報を印刷し、ホストHはそのプリントを取りに行き、ゲストGに提示する。   (S47 to S49) The image forming apparatus 10 prints the property information on paper, and the host H takes the print and presents it to the guest G.

(S50)ゲストGが出力結果に満足しなければステップS34へ戻る。   (S50) If the guest G is not satisfied with the output result, the process returns to step S34.

(S51〜S53)ゲストGが結果に満足すると、ゲストGが椅子13又は椅子14から離席し、ホストHも椅子12から離席する。両者の離席後、所定時間、例えば30秒経過すれば、聞き取りを終了し、情報処理装置21の電源をオフにする。   (S51 to S53) When the guest G is satisfied with the result, the guest G leaves the chair 13 or the chair 14, and the host H also leaves the chair 12. When a predetermined time, for example, 30 seconds elapses after both of them leave the seat, the listening is finished and the information processing apparatus 21 is turned off.

以上において、本発明の好適な実施例を説明したが、本発明には他にも種々の変形例が含まれ、上記実施例で述べた各構成要素の機能を実現する他の構成を用いたもの、当業者であればこれらの構成又は機能から想到するであろう他の構成も、本発明に含まれる。   In the above, preferred embodiments of the present invention have been described. However, the present invention includes various modifications, and other configurations that realize the functions of the respective components described in the above embodiments are used. However, other configurations that would be conceived by those skilled in the art from these configurations or functions are also included in the present invention.

例えば、指向性マイクの数は、2以上であればよい。また、話者識別手段は、複数の指向性マイクの出力強度に基づいてホストとゲストの音声を識別するものに限定されず、例えばホストの母音の音声波形を事前に登録しておき、現音声波形の登録波形に対する類似度を求める前に両波形強度を正規化し、該類似度に基づいてホストとゲストの音声を識別するもの、或いは、音声入力に合わせて画像の口元部分が変化しているのはホストとゲストのいずれであるかを判定することによりホストとゲストの音声を識別するものであってもよい。   For example, the number of directional microphones may be two or more. Further, the speaker identification means is not limited to identifying the voice of the host and the guest based on the output intensity of the plurality of directional microphones. For example, the voice waveform of the host vowel is registered in advance and the current voice Before obtaining the similarity of the waveform to the registered waveform, both waveform intensities are normalized, and the sound of the host and the guest is identified based on the similarity, or the mouth portion of the image changes according to the sound input. May identify the sound of the host and the guest by determining whether it is a host or a guest.

さらに、ホストH及びゲストGに対する画像形成装置10の設置位置によっては、ビデオカメラは1台のみであってもよい。また、ステップS53で情報処理装置21の電源をオフにする替わりに、情報処理装置21をスリープ状態に移行させて立ち上げ時間を短縮させる構成であってもよい。   Further, depending on the installation position of the image forming apparatus 10 with respect to the host H and the guest G, only one video camera may be provided. Further, instead of turning off the information processing apparatus 21 in step S53, the information processing apparatus 21 may be shifted to the sleep state to shorten the startup time.

また、検索開始判定手段は、予め定めた合図情報の入力に基づいて検索開始を判定できるものであればよく、例えば、音声「検索してみましょう」の入力や所定のマーカーの画像入力に基づいて検索開始を判定する構成であってもよい。   The search start determination means may be any means that can determine the search start based on the input of predetermined signal information. For example, the search start determination means can be used for inputting a voice “Let's search” or inputting a predetermined marker image. The configuration may be such that the search start is determined based on the search.

10 画像形成装置
11 テーブル
12〜14 椅子
15 画像形成装置本体
20 不動産物件情報提供支援装置
21 情報処理装置
22〜25 指向性マイク
221、231、241、251 アンプ
222、232、242、252 A/D変換器
26、27 ビデオカメラ
28 スピーカ
281 D/A変換器
282 ローパスフィルタ
29 表示パネル
30 聞き取り開始終了判定・出力開始判定部
31、43、61 一時記憶部
32 椅子画像記憶部
33 聞き取り開始判定部
34 出力開始判定部
35 終了判定部
40 キーワード取得部
41 H/G判定部
42 加算部
44 キーワード判別部
45 キーワードテーブル
46 キーワード記憶部
50 情報検索処理部
51 情報検索部
52 物件情報テーブル
53 検索結果記憶部
54 選択部
55 提供済データ記憶部
56 件数表示制御部
57 処理判別部
58 条件緩和部
59 質問部
60 顔情報等処理部
62 G検索・登録部
63 個人情報テーブル
64 特徴量抽出部
65 分類部
66 出力媒体決定部
67 出力書式決定部
68 書式・自動キーワード情報テーブル
69 キーワード自動付加部
70 情報加工部
71 ソート部
72 優先度テーブル
73 選択部
74 コメント付加部
75 コメントテーブル
76 出力編集部
80 出力制御部
START 聞き取り開始
END 聞き取り終了
OUT 出力開始
H ホスト
G ゲスト
DESCRIPTION OF SYMBOLS 10 Image forming apparatus 11 Table 12-14 Chair 15 Image forming apparatus main body 20 Real estate property information provision assistance apparatus 21 Information processing apparatus 22-25 Directional microphone 221,231,241,251 Amplifier 222,232,242,252 A / D Converter 26, 27 Video camera 28 Speaker 281 D / A converter 282 Low-pass filter 29 Display panel 30 Listening start end determination / output start determination unit 31, 43, 61 Temporary storage unit 32 Chair image storage unit 33 Listening start determination unit 34 Output start determination unit 35 End determination unit 40 Keyword acquisition unit 41 H / G determination unit 42 Addition unit 44 Keyword determination unit 45 Keyword table 46 Keyword storage unit 50 Information search processing unit 51 Information search unit 52 Property information table 53 Search result storage unit 54 Selector 5 Provided data storage unit 56 Number display control unit 57 Processing discrimination unit 58 Condition relaxation unit 59 Question unit 60 Face information processing unit 62 G search / registration unit 63 Personal information table 64 Feature quantity extraction unit 65 Classification unit 66 Output medium determination unit 67 Output format determination unit 68 Format / automatic keyword information table 69 Automatic keyword addition unit 70 Information processing unit 71 Sort unit 72 Priority table 73 Selection unit 74 Comment addition unit 75 Comment table 76 Output editing unit 80 Output control unit START Start listening END End of listening OUT Start of output H Host G Guest

Claims (11)

キーワードが登録された識別用キーワード記憶手段と、
音声を検出し、該音声に該登録されたキーワードのいずれかが含まれているか否か判別するキーワード判別手段と、
該判別されたキーワードを記憶する検索用キーワード記憶手段と、
検索開始判定手段と、
不動産物件情報が登録された情報データベースと、
該検索開始判定手段が検索開始を判定したことに応答して、該検索用キーワード記憶手段に記憶されているキーワードに基づく条件を満たす情報を該情報データベースに対し検索する検索手段と、
情報検索結果を所定の書式及び媒体で出力する出力手段と、
を備えた不動産物件情報提供支援装置において、
ホストとゲストの音声を識別する話者識別手段をさらに備え、
該キーワード記憶手段には、質問キーワードと1つ以上の質問キーワードで分類される質問の種類毎の回答キーワードとが登録され、
該キーワード判別手段は、該識別されたホストの音声に、該登録された質問キーワードのどれが含まれているか及び該質問キーワードに基づく質問の種類を判別し、該識別されたゲストの音声に、直近の質問の種類に対応した、該登録された回答キーワードのどれが含まれているかを判別し、判別した回答キーワードを該質問の種類と対応させて該検索用キーワード記憶手段に記憶させる、
ことを特徴とする不動産物件情報提供支援装置。
A keyword storage means for identification in which keywords are registered;
Keyword discriminating means for detecting voice and discriminating whether or not any of the registered keywords is included in the voice;
Search keyword storage means for storing the determined keyword;
A search start determination means;
An information database in which real estate property information is registered;
Search means for searching the information database for information satisfying a condition based on the keyword stored in the search keyword storage means in response to the search start determination means determining the search start;
Output means for outputting information search results in a predetermined format and medium;
In the real estate property information providing support device equipped with
A speaker identification means for identifying the voice of the host and the guest;
In the keyword storage means, a question keyword and an answer keyword for each question type classified by one or more question keywords are registered,
The keyword discriminating unit discriminates which of the registered question keywords is included in the voice of the identified host and the type of the question based on the question keyword. Determining which of the registered answer keywords corresponding to the type of the most recent question is included, and storing the determined answer keyword in the search keyword storage means in association with the type of question;
Real estate property information provision support device characterized by that.
該検索開始判定手段は、
ビデオカメラと、
該ビデオカメラで撮像された画像を処理してホストの顔の向きが所定範囲内であるか否かを判定し、継続して設定時間以上肯定判定した場合に検索開始と判定する合図認識手段と、
を有することを特徴とする請求項1に記載の不動産物件情報提供支援装置。
The search start determination means includes
A video camera,
A cue recognition unit that processes an image captured by the video camera to determine whether or not the orientation of the face of the host is within a predetermined range, and continuously determines affirmatively for a set time or more to determine a search start ,
The real estate property information provision support apparatus according to claim 1, wherein
該ゲストの顔画像及び訪問日がゲストIDと対応付けて登録される個人情報データベースと、
該撮像された画像からゲストの顔画像を抽出し、該顔画像が該個人情報データベースに未登録であれば、ゲストIDを付与し該顔画像及び訪問日を該ゲストIDと対応付けて該個人情報データベースに登録するゲスト登録手段と、
該情報検索結果及びその日付をゲストIDと対応付けて記憶する情報検索結果記憶手段と、
該抽出した顔画像が該個人情報データベースに既に登録されていれば、そのゲストIDについて、現在から遡って所定期間内の日付の情報検索結果が該情報検索結果記憶手段に記憶されているか否かを判定し、肯定判定した場合には、現在の情報検索結果から該記憶されている情報検索結果を除く検索結果選択手段と、
をさらに有することを特徴とする請求項2に記載の不動産物件情報提供支援装置。
A personal information database in which the face image and visit date of the guest are registered in association with the guest ID;
If the face image of the guest is extracted from the captured image and the face image is not registered in the personal information database, a guest ID is assigned and the face image and the visit date are associated with the guest ID and the personal A guest registration means for registering in the information database;
Information search result storage means for storing the information search result and its date in association with the guest ID;
If the extracted face image has already been registered in the personal information database, whether or not an information search result for a date within a predetermined period from the current date is stored in the information search result storage means for the guest ID If the determination result is affirmative, a search result selection unit that excludes the stored information search result from the current information search result;
The real estate property information provision support device according to claim 2, further comprising:
該個人情報データベースにはさらに、ゲストの性別及び年齢層が登録項目として設定され、
性別及び年齢層と対応付けられた自動キーワードが選択的に予め登録された自動決定情報記憶手段と、
該ゲストの画像の特徴量に基づき該ゲストの性別及び年齢層を推定してその結果を該個人情報データベースに登録するゲスト分類手段と、
該推定された性別及び年齢層に基づき、該自動決定情報記憶手段から、対応する自動キーワードを読み出し、該自動キーワードを該検索手段での検索条件に付加させる自動決定手段と、
をさらに有することを特徴とする請求項2又は3に記載の不動産物件情報提供支援装置。
The personal information database further includes the sex and age of the guest as registration items,
Automatic determination information storage means in which automatic keywords associated with gender and age group are selectively registered in advance;
Guest classification means for estimating the guest's gender and age group based on the guest image feature amount and registering the result in the personal information database;
Based on the estimated gender and age group, automatic determination means for reading out the corresponding automatic keyword from the automatic determination information storage means, and adding the automatic keyword to the search condition in the search means;
The real estate property information provision support device according to claim 2 or 3, further comprising:
該自動決定情報記憶手段にはさらに、該性別及び年齢層と対応付けられた書式識別コードが予め登録されており、
該自動決定手段はさらに、該推定された性別及び年齢層に基づき、該自動決定情報記憶手段から、対応する書式コードを読み出し該所定の書式の識別コードとして該出力手段に与える、
ことを特徴とする請求項4に記載の不動産物件情報提供支援装置。
In the automatic determination information storage means, a format identification code associated with the sex and age group is registered in advance,
The automatic determination means further reads out a corresponding format code from the automatic determination information storage means based on the estimated gender and age group, and provides the same to the output means as an identification code of the predetermined format.
The real estate property information provision support apparatus according to claim 4, wherein
電子メール受信部と、
該ゲストからの電子メールにゲストIDが含まれていれば、該個人情報データベース内の対応するゲストIDの行に、該電子メールに付随する電子メールアドレスを登録し、検索結果の情報を電子メールで送信することを示す出力媒体識別コードを該出力手段に与える出力媒体決定手段と、
をさらに有することを特徴とする請求項4又は5に記載の不動産物件情報提供支援装置。
An email receiver;
If a guest ID is included in the email from the guest, the email address associated with the email is registered in the corresponding guest ID row in the personal information database, and the search result information is email Output medium determining means for providing the output means with an output medium identification code indicating transmission at
The real estate property information provision support device according to claim 4, further comprising:
該情報データベースにはさらに、出力優先順のキーワードが予め登録されており、
該出力優先順のキーワードに基づき該最終的な検索結果の情報をソートして、該出力手段に与えるソート手段、
をさらに有することを特徴とする請求項4に記載の不動産物件情報提供支援装置。
In the information database, keywords in order of output priority are registered in advance,
Sorting means for sorting the information of the final search result based on the keywords of the output priority order and giving the information to the output means;
The real estate property information provision support apparatus according to claim 4, further comprising:
該情報データベース内の情報には、コメントIDが選択的に付加されており、
該情報データベースにはさらに、コメントIDとお勧めコメント文とが対応付けられて登録されており、
該ソートされた情報にコメントIDが付加されていれば、該コメントIDに対応するコメント文を該コメントIDと置き換えるお勧めコメント付加手段、
をさらに有することを特徴とする請求項7に記載の不動産物件情報提供支援装置。
A comment ID is selectively added to the information in the information database,
In the information database, a comment ID and a recommended comment sentence are further registered in association with each other.
If a comment ID is added to the sorted information, recommended comment adding means for replacing the comment text corresponding to the comment ID with the comment ID;
The real estate property information provision support device according to claim 7, further comprising:
該ビデオカメラで撮像された画像を処理して、ホスト及びゲストがそれぞれ、所定位置に存在するか否かを判定し、肯定判定した場合に該キーワード判別手段の動作を開始させる聞き取り開始判定手段、
を更に有することを特徴とする請求項2乃至8のいずれか1つに記載の不動産物件情報提供支援装置。
An image picked up by the video camera to determine whether the host and the guest are present at predetermined positions, respectively.
The real estate property information providing support apparatus according to claim 2, further comprising:
該ビデオカメラで撮像された画像を処理して、ホスト及びゲストがそれぞれ、所定位置に存在しなくなりこの状態が所定時間経過したか否かを判定し、肯定判定した場合に該キーワード判別手段の動作を終了させる聞き取り終了判定手段、
を更に有することを特徴とする請求項9に記載の不動産物件情報提供支援装置。
The image picked up by the video camera is processed to determine whether the host and the guest are no longer at the predetermined position and whether or not this state has passed for a predetermined period of time. Listening end determination means for ending
The real estate property information provision support apparatus according to claim 9, further comprising:
該キーワードに含まれている条件を緩和させた質問を出力する条件緩和手段と、
最終的な検索結果の件数が設定値未満であった場合、該条件緩和手段を動作させる処理判別手段と、
をさらに有することを特徴とする請求項1乃至10のいずれか1つに記載の不動産物件情報提供支援装置。
Condition relaxation means for outputting a question in which the condition included in the keyword is relaxed;
When the number of final search results is less than the set value, a process determination unit that operates the condition relaxation unit;
The real estate property information providing support apparatus according to claim 1, further comprising:
JP2011244988A 2011-11-08 2011-11-08 Real estate property information support equipment Expired - Fee Related JP5593297B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011244988A JP5593297B2 (en) 2011-11-08 2011-11-08 Real estate property information support equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011244988A JP5593297B2 (en) 2011-11-08 2011-11-08 Real estate property information support equipment

Publications (2)

Publication Number Publication Date
JP2013101226A true JP2013101226A (en) 2013-05-23
JP5593297B2 JP5593297B2 (en) 2014-09-17

Family

ID=48621894

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011244988A Expired - Fee Related JP5593297B2 (en) 2011-11-08 2011-11-08 Real estate property information support equipment

Country Status (1)

Country Link
JP (1) JP5593297B2 (en)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014240864A (en) * 2013-06-11 2014-12-25 富士ソフト株式会社 Speech recognition system and method for controlling speech recognition system
JP2016206433A (en) * 2015-04-23 2016-12-08 株式会社Nttドコモ Information processing apparatus, information processing method, and program
JP2017037366A (en) * 2015-08-06 2017-02-16 修司 北野 Job gain support program, recording medium and job gain support system
JP2017102733A (en) * 2015-12-02 2017-06-08 パナソニックIpマネジメント株式会社 Retrieval support method, retrieval support device and program
JP2017102757A (en) * 2015-12-02 2017-06-08 パナソニックIpマネジメント株式会社 Retrieval support method, retrieval support device and program
JP2017167893A (en) * 2016-03-17 2017-09-21 ヤフー株式会社 Device, method, and program for information search
JP2020052310A (en) * 2018-09-28 2020-04-02 大和ハウス工業株式会社 Information management system
CN112541385A (en) * 2019-09-20 2021-03-23 东芝泰格有限公司 Feature amount management device and storage medium
CN113012691A (en) * 2019-12-18 2021-06-22 丰田自动车株式会社 Agent device, agent system, and computer-readable storage medium
JP7264528B1 (en) 2021-10-15 2023-04-25 株式会社アイアイビー Matching support system
JP2023159646A (en) * 2022-04-20 2023-11-01 ヤフー株式会社 Information provision device, information provision method, and information provision program

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004295396A (en) * 2003-03-26 2004-10-21 Osaka Gas Co Ltd Reception processing support device
JP2005242891A (en) * 2004-02-27 2005-09-08 Fujitsu Ltd Case retrieving program
JP2005275601A (en) * 2004-03-23 2005-10-06 Fujitsu Ltd Information retrieval system with voice
JP2006146507A (en) * 2004-11-18 2006-06-08 Orient Denshi Kk Real estate management system and its method
JP2007199315A (en) * 2006-01-25 2007-08-09 Ntt Software Corp Content providing apparatus
JP2008242923A (en) * 2007-03-28 2008-10-09 Hyper Injection Inc Plan edition support method
JP2010198502A (en) * 2009-02-26 2010-09-09 Pioneer Electronic Corp Device, method, and program for retrieving real estate property and recording medium
JP2011008538A (en) * 2009-06-25 2011-01-13 Fuji Xerox Co Ltd Data output device, display device, and program
JP2011221891A (en) * 2010-04-13 2011-11-04 Seiko Epson Corp Keyword recording device, customer service support device, keyword recording method and program

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004295396A (en) * 2003-03-26 2004-10-21 Osaka Gas Co Ltd Reception processing support device
JP2005242891A (en) * 2004-02-27 2005-09-08 Fujitsu Ltd Case retrieving program
JP2005275601A (en) * 2004-03-23 2005-10-06 Fujitsu Ltd Information retrieval system with voice
JP2006146507A (en) * 2004-11-18 2006-06-08 Orient Denshi Kk Real estate management system and its method
JP2007199315A (en) * 2006-01-25 2007-08-09 Ntt Software Corp Content providing apparatus
JP2008242923A (en) * 2007-03-28 2008-10-09 Hyper Injection Inc Plan edition support method
JP2010198502A (en) * 2009-02-26 2010-09-09 Pioneer Electronic Corp Device, method, and program for retrieving real estate property and recording medium
JP2011008538A (en) * 2009-06-25 2011-01-13 Fuji Xerox Co Ltd Data output device, display device, and program
JP2011221891A (en) * 2010-04-13 2011-11-04 Seiko Epson Corp Keyword recording device, customer service support device, keyword recording method and program

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014240864A (en) * 2013-06-11 2014-12-25 富士ソフト株式会社 Speech recognition system and method for controlling speech recognition system
JP2016206433A (en) * 2015-04-23 2016-12-08 株式会社Nttドコモ Information processing apparatus, information processing method, and program
JP2017037366A (en) * 2015-08-06 2017-02-16 修司 北野 Job gain support program, recording medium and job gain support system
JP2017102733A (en) * 2015-12-02 2017-06-08 パナソニックIpマネジメント株式会社 Retrieval support method, retrieval support device and program
JP2017102757A (en) * 2015-12-02 2017-06-08 パナソニックIpマネジメント株式会社 Retrieval support method, retrieval support device and program
US10747798B2 (en) 2015-12-02 2020-08-18 Panasonic Intellectual Property Management Co., Ltd. Control method, processing apparatus, and recording medium
JP2017167893A (en) * 2016-03-17 2017-09-21 ヤフー株式会社 Device, method, and program for information search
JP7161361B2 (en) 2018-09-28 2022-10-26 大和ハウス工業株式会社 Information management system
JP2020052310A (en) * 2018-09-28 2020-04-02 大和ハウス工業株式会社 Information management system
CN112541385A (en) * 2019-09-20 2021-03-23 东芝泰格有限公司 Feature amount management device and storage medium
US11386705B2 (en) 2019-09-20 2022-07-12 Toshiba Tec Kabushiki Kaisha Feature amount management apparatus and method
CN113012691A (en) * 2019-12-18 2021-06-22 丰田自动车株式会社 Agent device, agent system, and computer-readable storage medium
JP7264528B1 (en) 2021-10-15 2023-04-25 株式会社アイアイビー Matching support system
JP2023062221A (en) * 2021-10-15 2023-05-08 株式会社アイアイビー Matching support system
JP2023159646A (en) * 2022-04-20 2023-11-01 ヤフー株式会社 Information provision device, information provision method, and information provision program
JP7436553B2 (en) 2022-04-20 2024-02-21 Lineヤフー株式会社 Information provision device, information provision method, and information provision program

Also Published As

Publication number Publication date
JP5593297B2 (en) 2014-09-17

Similar Documents

Publication Publication Date Title
JP5593297B2 (en) Real estate property information support equipment
US9129151B2 (en) Method and apparatus for automated analysis and identification of a person in image and video content
US9049388B2 (en) Methods and systems for annotating images based on special events
US8423369B2 (en) Conversational speech analysis method, and conversational speech analyzer
US20080235018A1 (en) Method and System for Determing the Topic of a Conversation and Locating and Presenting Related Content
WO2011067880A1 (en) Music recommendation system, information processing device, and information processing method
JP2009140051A (en) Information processor, information processing system, recommendation device, information processing method and storage medium
JP2010224715A (en) Image display system, digital photo-frame, information processing system, program, and information storage medium
JP2005080110A (en) Audio conference system, audio conference terminal, and program
JP2010204697A (en) Wardrobe choice support system, wardrobe choice support method and wardrobe choice support program
JP2011210100A (en) Customer service data recording device, customer service data recording method and program
KR101584685B1 (en) A memory aid method using audio-visual data
JP2015104078A (en) Imaging apparatus, imaging system, server, imaging method and imaging program
JP4735640B2 (en) Audio conference system
JP4427714B2 (en) Image recognition apparatus, image recognition processing method, and image recognition program
CN109427017A (en) A kind of reminding method and device
KR101429962B1 (en) System and method for processing data for recalling memory
US20210004747A1 (en) Information processing device, information processing method, and program
JP3617937B2 (en) Image monitoring method and image monitoring apparatus
JP2014010816A (en) Information processing device
JP2019066552A (en) Musical piece recommendation device
JP7353057B2 (en) Recording systems and programs
US20220237624A1 (en) Information processing device, information processing method, and non-transient computer- readable storage medium storing program
JP2018082283A (en) Information providing device, information providing program, and information providing method
US20210082392A1 (en) Information processing device, information processing method, and program

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20130426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130529

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131024

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140715

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140804

R150 Certificate of patent or registration of utility model

Ref document number: 5593297

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees