JP2005208798A - Information provision terminal and information provision method - Google Patents

Information provision terminal and information provision method Download PDF

Info

Publication number
JP2005208798A
JP2005208798A JP2004012808A JP2004012808A JP2005208798A JP 2005208798 A JP2005208798 A JP 2005208798A JP 2004012808 A JP2004012808 A JP 2004012808A JP 2004012808 A JP2004012808 A JP 2004012808A JP 2005208798 A JP2005208798 A JP 2005208798A
Authority
JP
Japan
Prior art keywords
menu
voice input
items
displayed
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004012808A
Other languages
Japanese (ja)
Inventor
Atsushi Ito
淳 伊藤
Hiroshi Saito
浩 斎藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2004012808A priority Critical patent/JP2005208798A/en
Publication of JP2005208798A publication Critical patent/JP2005208798A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information provision terminal changing over a menu provided to a user according to whether a vehicle travels or not, or whether or not voice input is started during the traveling. <P>SOLUTION: In this information provision terminal, a menu display control part 107b decides whether its own vehicle travels or stops on the basis of output from a vehicle speed sensor 105, displays during-stopping a manual operation menu when the own vehicle stops, and displays during-traveling a manual operation menu when the own vehicle travels. When an operation switch 102 is operated by the user and when the start of the voice input is instructed, a voice input menu is displayed on a monitor 104. The user operates the information provision terminal according to a displayed operable item of each menu. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、手動操作および音声入力操作によって操作される情報提供端末、および情報提供方法に関する。   The present invention relates to an information providing terminal operated by manual operation and voice input operation, and an information providing method.

手動、および音声入力の２つの手段によりメニュー項目の操作が可能な特許文献１に記載の音声入力装置においては、音声入力操作の場合には、手動操作時のメニューから使用頻度の高い項目を選択してメニュー化し、使用者に提供している。   In the voice input device described in Patent Document 1 in which menu items can be operated manually and by voice input, in the case of voice input operations, frequently used items are selected from the menu during manual operation. The menu is then provided to the user.

特開２００３−２９７８０号公報JP 2003-29780 A

しかしながら、手動操作時と音声入力時において、メニューに表示される項目が異なる従来の音声入力装置においては、運転者が操作したい項目がメニューに表示されない場合には、操作を断念しなければならなかった。   However, in a conventional voice input device in which items displayed on the menu are different between manual operation and voice input, if the item that the driver wants to operate is not displayed on the menu, the operation must be abandoned. It was.

本発明は、少なくとも二以上の階層を持つメニューを表示し、手動入力手段および音声入力手段のいずれかから入力された指示にしたがって各種処理を行って情報を提供する場合、メニューの所定の階層において、手動操作可能な項目と手動操作不可能な項目とを区別して表示しているとき、音声入力の開始が検出された場合には、所定の階層におけるメニュー表示の項目の中から音声入力可能な項目をメニュー表示することを特徴とする。   The present invention displays a menu having at least two or more hierarchies and performs various processes in accordance with instructions input from either the manual input means or the voice input means to provide information. When the start of voice input is detected while displaying items that can be manually operated and items that cannot be manually operated, voice input can be performed from the menu display items in a predetermined hierarchy. The item is displayed as a menu.

本発明によれば、所定の階層のメニューを表示させて使用者が手動操作を行っている状況で音声入力が開始されると、音声入力開始前に表示されていた階層のメニュー表示の項目の中から、音声入力可能な項目をメニュー表示することとした。これにより、手動操作から音声入力に移行した際に、手動操作されたメニュー処理の続きを続行することができ、使用者にとって利便性の高いメニューを提供することができる。   According to the present invention, when voice input is started in a situation where a menu of a predetermined level is displayed and the user is performing a manual operation, the menu display items of the level displayed before the start of voice input are displayed. From the menu, items that can be input by voice are displayed as a menu. As a result, when the manual operation is shifted to the voice input, it is possible to continue the manually operated menu processing, and to provide a menu that is highly convenient for the user.

本発明の一実施の形態による情報提供端末を搭載した車両１００の構成を図１に示す。図１の情報提供端末を搭載した車両１００は、操作者の発話を入力するマイク１０１と、音声入力の開始、キャンセルを指示するための操作スイッチ１０２と、ガイダンス音声やビープ音を出力するスピーカー１０３と、各種メニューやガイダンスメッセージを表示するモニタ１０４と、自車両の車速を検出する車速センサ１０５と、ナビゲーションシステムとして使用される情報提供端末１０６と、使用者が手動操作を行う際に使用するための入力装置１０８とを備えている。入力装置１０８は、各種スイッチ、操作パネル、リモコンなどによって実現される。   FIG. 1 shows a configuration of a vehicle 100 equipped with an information providing terminal according to an embodiment of the present invention. A vehicle 100 equipped with the information providing terminal of FIG. 1 includes a microphone 101 for inputting an operator's utterance, an operation switch 102 for instructing start / cancellation of voice input, and a speaker 103 for outputting guidance voice and beep sound. A monitor 104 for displaying various menus and guidance messages, a vehicle speed sensor 105 for detecting the vehicle speed of the host vehicle, an information providing terminal 106 used as a navigation system, and a user's manual operation. The input device 108 is provided. The input device 108 is realized by various switches, an operation panel, a remote controller, and the like.

情報提供端末１０６は、メモリ１０６ａと、音声認識実行時の待ち受け単語を格納する音声認識用辞書１０６ｂと、情報提供端末１０６の各種処理を制御するＣＰＵ１０７とを有する。ＣＰＵ１０７は、発話者からの発話内容（音声信号）を認識する音声認識部１０７ａと、車速センサ１０５、および操作スイッチ１０２からの出力に基づいてメニュー内の操作可能な項目を制御するメニュー表示制御部１０７ｂとを有する。なお、ＣＰＵ１０７を構成する音声認識部１０７ａ、およびメニュー表示制御部１０７ｂは、ＣＰＵ１０７のソフトウェアとして実行される機能ブロックである。また、メモリ１０６ａは、不図示のナビゲーションシステム用の記憶部としても使用され、ＣＰＵ１０７は、不図示のナビゲーションシステム用の演算部としても使用される。   The information providing terminal 106 includes a memory 106 a, a speech recognition dictionary 106 b that stores a standby word when performing speech recognition, and a CPU 107 that controls various processes of the information providing terminal 106. The CPU 107 is a voice recognition unit 107a that recognizes the utterance content (voice signal) from the speaker, and a menu display control unit that controls operable items in the menu based on outputs from the vehicle speed sensor 105 and the operation switch 102. 107b. Note that the voice recognition unit 107 a and the menu display control unit 107 b constituting the CPU 107 are functional blocks executed as software of the CPU 107. The memory 106a is also used as a storage unit for a navigation system (not shown), and the CPU 107 is also used as a calculation unit for a navigation system (not shown).

音声認識部１０７ａは、マイク１０１を介して入力された発話内容と音声認識用辞書１０６ｂに格納された待ち受け単語とをマッチング処理することにより音声認識を行う。メニュー表示制御部１０７ｂは、車速センサ１０５からの出力に基づいて自車両が走行中であるか否かを判断して、走行中であれば走行中手動操作用メニューを、停止中であれば停止中手動操作用メニューをモニタ１０４に表示する。このとき、一般的に走行中はメニュー内の使用可能な項目が制限されている。また、発話者によって操作スイッチ１０２が押下され、音声入力が開始された場合には、メニュー表示制御部１０７ｂは、音声入力用メニューをモニタ１０４に表示する。   The voice recognition unit 107a performs voice recognition by performing a matching process between the utterance content input via the microphone 101 and the standby word stored in the voice recognition dictionary 106b. The menu display control unit 107b determines whether or not the host vehicle is traveling based on the output from the vehicle speed sensor 105. If the vehicle is traveling, the menu for manual operation during traveling is stopped. A middle manual operation menu is displayed on the monitor 104. At this time, generally, usable items in the menu are restricted during traveling. When the operation switch 102 is pressed by the speaker and voice input is started, the menu display control unit 107 b displays a voice input menu on the monitor 104.

以下、本実施の形態における音声入力装置において、使用者がナビゲーションシステムを操作するためのメニューをモニタ１０４に表示した場合について説明する。このとき、メニュー表示制御部１０７ｂは、自車両が停止中であれば停止中手動操作用メニューを、走行中であれば走行中手動操作用メニューを表示する。そして、使用者によって音声入力の開始が指示された場合には、音声入力用メニューをモニタ１０４に表示する。使用者は表示された各メニューの操作可能な項目に従ってナビゲーションシステムを操作する。以下、詳細に説明する。   Hereinafter, in the voice input device according to the present embodiment, a case where a menu for a user to operate the navigation system is displayed on the monitor 104 will be described. At this time, the menu display control unit 107b displays a manual operation menu during stop if the host vehicle is stopped, and a manual operation menu during travel if the vehicle is traveling. When the user instructs the start of voice input, a voice input menu is displayed on the monitor 104. The user operates the navigation system according to the operable items of each displayed menu. Details will be described below.

図２（ａ）は、本実施の形態において使用者に提供されるメニューの構成を示した図である。図２（ａ）に示す「一階層目」２ａは、一階層目の前に存在する不図示の階層（０階層目）で目的地を設定するためのメニュー項目「目的地」を選択したときに使用者が使用可能なメニュー項目を示している。「二階層目」２ｂは「一階層目」２ａにおいて、使用者が「自宅」項目２ｄを選択したときに表示されるメニュー項目を示している。「三階層目」２ｃは、「二階層目」２ｂにおいて、使用者が「自宅へ帰る」項目２ｅを選択したときに表示されるメニュー項目を示している。   FIG. 2A is a diagram showing a configuration of a menu provided to the user in the present embodiment. The “first layer” 2a shown in FIG. 2A is when the menu item “Destination” for setting a destination in a layer (not shown) existing before the first layer (layer 0) is selected. Shows menu items available to the user. The “second level” 2b indicates menu items displayed when the user selects the “home” item 2d in the “first level” 2a. The “third layer” 2c indicates menu items displayed when the user selects the “return to home” item 2e in the “second layer” 2b.

図２（ｂ）は、自車両が停止中にメニュー表示制御部１０７ｂが図２（ａ）に示すメニューに基づいてモニタ１０４に表示する停止中手動操作用メニューを示した図である。図２（ｂ）においては、符号２ｇで示す太枠がモニタ１０４の表示可能領域を示しており、モニタ１０４の表示可能領域２ｇ内には４つの項目が表示可能であることを示している。したがって「三階層目」は、図２（ａ）において５つの項目があったため、図２（ｂ）では表示可能領域２ｇ内に表示しきれない「行き先を追加」項目２ｆは画面上に表示されていない。このとき、メニュー表示制御部１０７ｂはスクロールバー２ｈを表示し、使用者が画面をスクロールすることで、「行き先を追加」項目２ｆを表示し、選択できるようになっている。   FIG. 2B is a diagram showing a menu for manual operation during stop which is displayed on the monitor 104 by the menu display control unit 107b based on the menu shown in FIG. 2A while the host vehicle is stopped. In FIG. 2B, the thick frame indicated by reference numeral 2g indicates the displayable area of the monitor 104, and indicates that four items can be displayed in the displayable area 2g of the monitor 104. Accordingly, the “third layer” has five items in FIG. 2A, and therefore the “add destination” item 2f that cannot be displayed in the displayable area 2g in FIG. 2B is displayed on the screen. Not. At this time, the menu display control unit 107b displays a scroll bar 2h, and when the user scrolls the screen, the “add destination” item 2f is displayed and can be selected.

図２（ｃ）は、自車両が走行中にメニュー表示制御部１０７ｂが図２（ａ）に示すメニューに基づいてモニタ１０４に表示する走行中手動操作用メニューを示した図である。上述した通り一般的なナビゲーションシステムにおいては、走行中は安全のために選択できる項目が必要最低限のものに制限されている。図２（ｃ）においては、符号２ｉ等に示すように網掛けの項目が走行中に選択不可能な項目となっている。これら選択不可能な項目はモニタ１０４上には表示されるが、ハッチングなどの処理がなされ使用者は選択できないようになっている。   FIG. 2C is a diagram showing a menu for manual operation during traveling that is displayed on the monitor 104 by the menu display control unit 107b based on the menu shown in FIG. 2A while the host vehicle is traveling. As described above, in a general navigation system, items that can be selected for safety during driving are limited to the minimum necessary items. In FIG. 2C, shaded items are items that cannot be selected during traveling, as indicated by reference numeral 2i and the like. These unselectable items are displayed on the monitor 104, but processing such as hatching is performed so that the user cannot select them.

各階層におけるそれぞれの項目が自車両の走行中に選択可能であるか否かは、不図示の選択可否データベースに例えば図３に示すように設定されている。図３においては、階層３ａおよび項目３ｂごとに自車両が走行中に選択が可能か否かを○×で表す走行中選択３ｃが設定されている。例えば、符号３ｄで示す「一階層目」の「自宅」は、走行中選択３ｃが「○」であるため、図２（ｃ）において選択可能となっている。これに対して、符号３ｅで示す「一階層目」の「ジャンルから」は、走行中選択３ｃが「×」であるため、図２（ｃ）において符号２ｉに示すように選択不可能となっている。   Whether or not each item in each hierarchy can be selected while the host vehicle is traveling is set in a selection availability database (not shown) as shown in FIG. 3, for example. In FIG. 3, a running selection 3c is set for each level 3a and item 3b. The running selection 3c represents whether or not the vehicle can be selected while running. For example, “home” in the “first layer” indicated by reference numeral 3d can be selected in FIG. 2C because the running selection 3c is “◯”. On the other hand, “from genre” of “first layer” indicated by reference numeral 3e cannot be selected as indicated by reference numeral 2i in FIG. 2C because the traveling selection 3c is “x”. ing.

なお、図２（ｂ）では「行き先を追加」項目２ｆを表示するためのスクロールバー２ｈが表示されていたが、図３（ｃ）より「行き先を追加」項目２ｆは走行中は選択不可能な項目であるため、図２（ｃ）においては表示する必要がなく、スクロールバー２ｈが表示されていない。   In FIG. 2B, the scroll bar 2h for displaying the “add destination” item 2f is displayed. However, from FIG. 3C, the “add destination” item 2f cannot be selected during traveling. 2C, there is no need to display in FIG. 2C, and the scroll bar 2h is not displayed.

図４は、自車両の走行中に使用者によって操作スイッチ１０２が押下され音声入力の開始が指示された場合に、メニュー表示制御部１０７ｂがモニタ１０４に表示する音声入力用メニューを示した図である。自車両の走行中に使用者によって音声入力の開始が指示された場合、ＣＰＵ１０７は、図２（ｃ）の走行中手動操作用メニュー上で選択不可能となっている項目を使用者が選択したいと判断するとともに、図２（ｃ）の走行中手動操作用メニュー上で選択可能となっている項目については使用者が選択する意思はないと判断し、さらに、メニューへの表示が不要と判断する。   FIG. 4 is a diagram showing a voice input menu displayed on the monitor 104 by the menu display control unit 107b when the user presses the operation switch 102 and gives an instruction to start voice input while the host vehicle is traveling. is there. When the user instructs to start voice input while the host vehicle is traveling, the CPU 107 wants the user to select an item that cannot be selected on the menu for manual operation during traveling in FIG. It is determined that there is no intention of the user to select items that can be selected on the menu for manual operation during traveling in FIG. 2C, and further, it is determined that display on the menu is unnecessary. To do.

このためメニュー表示制御部１０７ｂは、図４（ａ）〜（ｃ）に示すように、図２（ｃ）で選択不可能となっていた項目、すなわち図３で走行中選択３ｃが「×」の項目のみをメニューに表示する。   For this reason, as shown in FIGS. 4A to 4C, the menu display control unit 107b sets the item that cannot be selected in FIG. 2C, that is, the running selection 3c in FIG. Only the item is displayed on the menu.

図４（ａ）は音声入力用メニューの一階層目を示した図である。自車両の走行中に図２（ｃ）の一階層目が表示されている状態で使用者によって操作スイッチ１０２が押下された場合に、図２（ｃ）と同じ階層の音声入力用メニューである図４（ａ）に示すメニューが表示される。ここでは、図２（ｃ）で選択不可能な項目となっていた「ジャンルから」と「その他の方法から」がメニュー項目として表示されている。   FIG. 4A is a diagram showing the first level of the voice input menu. When the operation switch 102 is pressed by the user while the first level of FIG. 2 (c) is displayed while the host vehicle is traveling, the menu is a voice input menu in the same level as FIG. 2 (c). The menu shown in FIG. 4A is displayed. Here, “from genre” and “from other methods”, which are items that cannot be selected in FIG. 2C, are displayed as menu items.

図４（ｂ）は音声入力用メニューの二階層目を示した図である。自車両の走行中に図２（ｃ）のニ階層目が表示されている状態で使用者によって操作スイッチ１０２が押下された場合に、図２（ｃ）と同じ階層の音声入力用メニューである図４（ｂ）に示すメニューが表示される。ここでも図２（ｃ）で選択不可能な項目となっていた「自宅へ寄る」と「自宅を登録」がメニュー項目として表示されている。   FIG. 4B is a diagram showing the second level of the voice input menu. When the operation switch 102 is pressed by the user while the second level of FIG. 2C is displayed while the host vehicle is traveling, the menu is a voice input menu in the same level as FIG. The menu shown in FIG. 4B is displayed. Here too, the items “Near Home” and “Register Home”, which were items that cannot be selected in FIG. 2C, are displayed as menu items.

図４（ｃ）は音声入力用メニューの三階層目を示した図である。自車両の走行中に図２（ｃ）の三階層目が表示されている状態で使用者によって操作スイッチ１０２が押下された場合に、図２（ｃ）と同じ階層の音声入力用メニューである図４（ｃ）に示すメニューが表示される。ここでは、図２（ｃ）で選択不可能な項目となっていた「他のルート」および「ルート確認」に加えて、図２（ｃ）では表示可能領域２ｇ内に表示しきれていなかった「行き先を追加」がメニュー項目として表示されている。このように使用者が選択する意思のないと判断できる項目、この例では「ガイド開始」および「キャンセル」をメニューから削除し、使用者が選択する可能性の高い項目、この例では「他のルート」、「ルート確認」および「行き先を追加」をメニュー項目として表示する。これにより、使用者にとって使いやすいメニューを提供することができる。   FIG. 4C is a diagram showing the third layer of the voice input menu. When the operation switch 102 is pressed by the user while the third level of FIG. 2 (c) is displayed while the host vehicle is traveling, the menu is a voice input menu in the same level as FIG. 2 (c). The menu shown in FIG. 4C is displayed. Here, in addition to “other route” and “route confirmation” that were items that could not be selected in FIG. 2C, in FIG. 2C, they were not displayed in the displayable area 2g. “Add destination” is displayed as a menu item. In this way, items that can be determined not to be selected by the user, in this example, “Guide start” and “Cancel” are deleted from the menu, and items that are likely to be selected by the user. “Route”, “Route Confirmation” and “Add Destination” are displayed as menu items. Thereby, a menu that is easy for the user to use can be provided.

図５は、本実施の形態における音声入力装置において、上述したメニュー表示制御部１０７ｂによって実行されるメニュー表示処理のフローチャートである。図５に示す処理は、不図示のイグニションスイッチがオンされると起動するプログラムとして実行される。以下、図５のフローチャートにしたがって処理の流れを詳細に説明する。   FIG. 5 is a flowchart of menu display processing executed by the menu display control unit 107b described above in the voice input device according to the present embodiment. The process shown in FIG. 5 is executed as a program that starts when an ignition switch (not shown) is turned on. Hereinafter, the processing flow will be described in detail according to the flowchart of FIG.

図５のステップＳ１０において、メニュー表示制御部１０７ｂは、車速センサ１０５からの出力に基づいて自車両が走行中か否かを判断する。車速センサ１０５からの出力される自車両の車速が０ｋｍ／ｈであれば自車両は停止していると判断し、０ｋｍ／ｈより大きければ自車両は走行中であると判定する。   In step S <b> 10 of FIG. 5, the menu display control unit 107 b determines whether or not the host vehicle is traveling based on the output from the vehicle speed sensor 105. If the vehicle speed of the host vehicle output from the vehicle speed sensor 105 is 0 km / h, it is determined that the host vehicle is stopped, and if it is greater than 0 km / h, it is determined that the host vehicle is running.

ステップＳ１０において、自車両が停止していると判断した場合には、ステップＳ２０へ進み、メニュー表示制御部１０７ｂは図２（ｂ）に示す停止中手動操作用メニューをモニタ１０４に表示する。使用者は表示された停止中手動操作用メニューを手動で操作することにより各種コマンドを実行する。これに対して、ステップＳ１０で自車両が走行中であると判断した場合には、ステップＳ３０へ進み、音声入力が開始されたか、すなわち使用者によって操作スイッチ１０２が操作されたかを判断する。   If it is determined in step S10 that the host vehicle is stopped, the process proceeds to step S20, and the menu display control unit 107b displays the menu for manual operation during stop shown in FIG. The user executes various commands by manually operating the displayed menu for manual operation during stoppage. On the other hand, if it is determined in step S10 that the host vehicle is traveling, the process proceeds to step S30, where it is determined whether voice input is started, that is, whether the operation switch 102 is operated by the user.

ステップＳ３０において、音声入力が開始されないと判断した場合にはステップＳ４０へ進み、メニュー表示制御部１０７ｂは図２（ｃ）に示す走行中手動操作用メニューをモニタ１０４に表示する。この場合も使用者は表示された走行中手動操作用メニューを手動で操作することにより各種コマンドを実行する。ステップＳ３０において、音声入力が開始されたと判断した場合にはステップＳ５０へ進み、音声入力開始のガイダンス、例えば「音声入力を開始します」や「音声コマンドを入力してください」をスピーカー１０３およびモニタ１０４を介して使用者に出力する。   If it is determined in step S30 that voice input is not started, the process proceeds to step S40, and the menu display control unit 107b displays a menu for manual operation during traveling shown in FIG. Also in this case, the user executes various commands by manually operating the displayed menu for manual operation during traveling. If it is determined in step S30 that voice input has started, the process proceeds to step S50, and voice input start guidance such as “start voice input” or “please input voice command” is displayed on the speaker 103 and the monitor. The data is output to the user via 104.

ステップＳ６０において、メニュー表示制御部１０７ｂは図４に示す音声入力用メニューをモニタ１０４に表示する。ここでは、上述したように使用者によって操作スイッチ１０２が押下される直前に表示されていた階層と同一の階層の音声入力用メニューが表示される。このとき、同時に画面に表示したメニュー項目と同一の音声入力用の待ち受け単語が音声認識用辞書１０６ｂにセットされ、音声入力待ち受け状態となる。   In step S60, the menu display control unit 107b displays the voice input menu shown in FIG. Here, as described above, the voice input menu in the same hierarchy as the hierarchy displayed immediately before the user presses the operation switch 102 is displayed. At this time, the same voice input standby word as the menu item displayed on the screen is set in the voice recognition dictionary 106b at the same time, and the voice input standby state is set.

その後、音声入力用メニューに表示された項目のいずれかを使用者が発話することにより音声によるコマンド入力が行われる。使用者（発話者）によって入力された音声コマンドは、音声認識用辞書１０６ｂにセットされた待ち受け単語とマッチング処理され音声認識がなされ、コマンド内容に該当する処理が実行される。   Thereafter, the user speaks any of the items displayed on the voice input menu, thereby inputting a voice command. The voice command input by the user (speaker) is matched with the standby word set in the voice recognition dictionary 106b and voice recognition is performed, and processing corresponding to the command content is executed.

以上のように、本実施の形態によれば、次のような作用効果が得られる。
（１）自車両の停止時、走行時、および走行時において音声入力が開始されたときのそれぞれの状況で使用者に提供するメニューを変化させることとした。これにより、走行時の安全と使用者の使いやすさの両面を備えたメニューを提供することができる。
（２）特開平５−１６４５６５号公報によって知られている従来の車載用表示制御装置においては、車両の停止中はメニュー内の全項目を操作できるが、車両の走行中は安全のため操作可能なメニューの項目を制限し、運転者は操作を続行することができないようにしている。さらに車両走行中に助手席の搭乗者が解除ボタンを押下することにより、助手席の搭乗者のみが走行中も全てのメニュー項目を操作できるようにしている。このため、操作が制限された項目が深い階層にある場合には、操作が制限された項目があるメニュー階層に辿り着いた時点で操作を一旦断念し、助手席の搭乗者が解除ボタン押下後に最初の階層から操作をやり直さなければならないという問題が生じていた。しかしながら本発明によれば、自車両の走行時に使用者が手動操作を行っている状況で音声入力が開始されると、音声入力開始前に操作されていた走行中手動操作用メニューの階層を保持したまま音声入力用メニューに切り替えることとした。これにより、手動操作から音声入力に移行した際に、使用者は最初の階層から操作をやり直す必要がなく、手動操作の続きを続行することができ、使用者にとって利便性の高いメニューを提供することができる。
（３）走行中手動操作用メニューから音声入力用メニューへ切り替えるにあたっては、走行中手動操作用メニューで選択可能だった項目を音声入力用メニューにおいては表示しないこととした。これにより、音声入力用メニューにおいては、使用者が操作する可能性の高い項目のみを表示することができ、操作性および視認性の高いメニューを提供することができる。
（４）音声入力用メニューを表示する際には、画面に表示したメニュー項目と同一の音声入力用の待ち受け単語を音声認識用辞書にセットすることとした。これにより、音声認識用辞書にセットする待ち受け単語の数を必要最低限の数に制限することができ、処理能力の向上、および処理速度の高速化を図ることができる。 As described above, according to the present embodiment, the following operational effects can be obtained.
(1) The menu provided to the user is changed in each situation when voice input is started when the host vehicle is stopped, running, and running. Thereby, the menu provided with both the safety | security at the time of driving | running | working and a user's usability can be provided.
(2) In the conventional in-vehicle display control device known from JP-A-5-164565, all items in the menu can be operated while the vehicle is stopped, but can be operated for safety while the vehicle is running. The menu items are restricted so that the driver cannot continue the operation. Further, when the passenger in the passenger seat presses the release button while the vehicle is traveling, only the passenger in the passenger seat can operate all menu items while traveling. For this reason, if an item for which operation is restricted is in a deep hierarchy, the operation is temporarily abandoned when the item for which operation is restricted reaches a certain menu layer, and the passenger in the passenger seat presses the release button. There was a problem that the operation had to be started again from the first level. However, according to the present invention, when voice input is started in a situation where the user is performing manual operation while the host vehicle is traveling, the hierarchy of the menu for manual operation during traveling that was operated before the start of voice input is maintained. We decided to switch to the voice input menu. As a result, when shifting from manual operation to voice input, the user does not need to repeat the operation from the first level, and can continue the manual operation, providing a menu that is convenient for the user. be able to.
(3) When switching from the manual operation menu during travel to the voice input menu, items that could be selected from the manual operation menu during travel are not displayed in the voice input menu. Thereby, in the voice input menu, only items that are highly likely to be operated by the user can be displayed, and a menu with high operability and visibility can be provided.
(4) When displaying the voice input menu, the same voice input standby word as the menu item displayed on the screen is set in the voice recognition dictionary. As a result, the number of standby words set in the speech recognition dictionary can be limited to the minimum necessary number, and the processing capability can be improved and the processing speed can be increased.

本実施の形態においては、走行中手動操作用メニューから音声入力用メニューへ切り替えるにあたって走行中手動操作用メニューで選択可能だった項目を音声入力用メニューにおいては表示しないこととした。しかし、本発明はこれ限定されず以下のように変形することもできる。走行中手動操作用メニューで選択可能だった項目は、音声入力用メニューにおいてハッチングなどの処理をすることにより、項目を表示したまま選択不可能にしてもよい。   In the present embodiment, when switching from the manual operation menu during travel to the voice input menu, items that could be selected in the manual operation menu during travel are not displayed in the voice input menu. However, the present invention is not limited to this and can be modified as follows. Items that can be selected in the manual operation menu while traveling may be made unselectable while the items are displayed by performing processing such as hatching in the voice input menu.

各階層におけるそれぞれの項目が自車両の走行中に選択可能であるか否かは、図３に示す選択可否データベースに格納されたデータに基づいて判定することとした。しかし、その他の方法により選択可否を判断してもよい。   Whether or not each item in each hierarchy can be selected while the host vehicle is traveling is determined based on data stored in the selectability database shown in FIG. However, the selection possibility may be determined by other methods.

本発明による情報提供端末を車両に搭載することとしたが、これに限定されず、船や飛行機等の種々の移動体に搭載してもよい。またナビゲーションシステムだけでなく、オーディオシステムやハンズフリー電話システム等へ搭載することも可能である。   Although the information providing terminal according to the present invention is mounted on a vehicle, the present invention is not limited to this, and the information providing terminal may be mounted on various mobile objects such as ships and airplanes. It can also be installed not only in navigation systems but also in audio systems and hands-free telephone systems.

特許請求の範囲の構成要素と実施の形態との対応関係について説明する。音声認識部１０７ａは音声認識手段に、メニュー表示制御部１０７ｂは表示制御手段に、入力装置１０８は手動入力手段に相当する。なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。   The correspondence between the constituent elements of the claims and the embodiment will be described. The voice recognition unit 107a corresponds to a voice recognition unit, the menu display control unit 107b corresponds to a display control unit, and the input device 108 corresponds to a manual input unit. Note that the present invention is not limited to the configurations in the above-described embodiments as long as the characteristic functions of the present invention are not impaired.

本発明の一実施の形態による音声入力装置を搭載した車両１００の構成を示す図である。1 is a diagram showing a configuration of a vehicle 100 equipped with a voice input device according to an embodiment of the present invention. 使用者に提供されるメニュー構成および自車両が停止中に使用者に提供されるメニューの一例を示す図である。It is a figure which shows an example of the menu structure provided to a user, and the menu provided to a user while the own vehicle stops. 各階層におけるそれぞれの項目が自車両の走行中に選択可能であるか否かを判断するための選択可否データベースのデータ構造の一例を示す図である。It is a figure which shows an example of the data structure of the selection availability database for judging whether each item in each hierarchy is selectable during driving | running | working of the own vehicle. 音声入力用メニューの一例を示す図である。It is a figure which shows an example of the menu for audio | voice input. メニュー表示制御部１０７ｂによって実行されるメニュー表示処理のフローチャート図である。It is a flowchart figure of the menu display process performed by the menu display control part 107b.

符号の説明Explanation of symbols

１００ 車両
１０１ マイク
１０２ 操作スイッチ
１０３ スピーカー
１０４ モニタ
１０５ 車速センサ
１０６ 情報提供端末
１０６ａ メモリ
１０６ｂ 音声認識用辞書
１０７ ＣＰＵ
１０７ａ 音声認識部
１０７ｂ メニュー表示制御部
１０８ 入力装置 DESCRIPTION OF SYMBOLS 100 Vehicle 101 Microphone 102 Operation switch 103 Speaker 104 Monitor 105 Vehicle speed sensor 106 Information providing terminal 106a Memory 106b Voice recognition dictionary 107 CPU
107a voice recognition unit 107b menu display control unit 108 input device

Claims (5)

少なくとも二以上の階層を持つメニューを表示し、手動入力手段および音声入力手段のいずれかから入力された指示にしたがって各種処理を行う情報提供端末において、
前記メニューの所定の階層において、手動操作可能な項目と手動操作不可能な項目とを区別して表示しているとき、音声入力の開始が検出された場合には、前記所定の階層におけるメニュー表示の項目の中から音声入力可能な項目をメニュー表示する表示制御手段を備えることを特徴とする情報提供端末。 In an information providing terminal that displays a menu having at least two layers and performs various processes in accordance with instructions input from either manual input means or voice input means.
When a manually operable item and a non-manually operable item are displayed separately in a predetermined hierarchy of the menu, when the start of voice input is detected, the menu display of the predetermined hierarchy is An information providing terminal comprising display control means for displaying a menu of items that can be voice-input among the items. 請求項１に記載の情報提供端末において、
前記表示制御手段は、自車両が走行中であると判断した場合、前記手動操作可能な項目と前記手動操作不可能な項目とを区別してメニュー表示するとともに、走行中でないと判断した場合、前記手動操作不可能な項目を手動操作可能項目としてメニュー表示することを特徴とする情報提供端末。 In the information provision terminal of Claim 1,
When it is determined that the host vehicle is traveling, the display control unit displays the menu by distinguishing the manually operable items and the items that cannot be manually operated, and when it is determined that the vehicle is not traveling, An information providing terminal characterized in that an item that cannot be manually operated is displayed in a menu as a manually operable item. 請求項１または２に記載の情報提供端末において、
前記表示制御手段で表示制御されるメニュー表示は、車両に搭載されるナビゲーション装置に関するメニュー表示であることを特徴とする情報提供端末。 In the information provision terminal of Claim 1 or 2,
An information providing terminal, wherein the menu display controlled by the display control means is a menu display related to a navigation device mounted on a vehicle. 請求項１〜３のいずれかに記載の情報提供端末において、
音声認識用待ち受け単語を格納する音声認識用辞書と、
前記音声入力手段から入力された発話内容と、前記音声認識辞書に格納された音声認識用待ち受け単語とに基づいて音声認識を行う音声認識手段とをさらに有し、
音声入力の開始が検出された場合、前記音声認識用辞書には、前記表示制御手段によって操作可能とされた音声入力可能な項目に用いる待ち受け単語を格納することを特徴とする情報提供端末。 In the information provision terminal in any one of Claims 1-3,
A speech recognition dictionary for storing standby words for speech recognition;
Voice recognition means for performing voice recognition based on the utterance content input from the voice input means and the standby words for voice recognition stored in the voice recognition dictionary;
An information providing terminal characterized in that, when the start of voice input is detected, a standby word used for a voice input item that can be operated by the display control means is stored in the voice recognition dictionary. 少なくとも二以上の階層を持つメニューを表示し、手動入力手段および音声入力手段のいずれかから入力された指示にしたがって各種処理を行う情報提供方法において、
前記メニューの所定の階層において、手動操作可能な項目と手動操作不可能な項目とを区別して表示しているとき、音声入力の開始が検出された場合には、前記所定の階層におけるメニュー表示の項目の中から音声入力可能な項目をメニュー表示することを特徴とする情報提供方法。 In an information providing method for displaying a menu having at least two layers and performing various processes in accordance with an instruction input from either a manual input unit or a voice input unit,
When a manually operable item and a non-manually operable item are displayed separately in a predetermined hierarchy of the menu, when the start of voice input is detected, the menu display of the predetermined hierarchy is An information providing method, characterized in that a menu is displayed for items that allow voice input from among the items.
JP2004012808A 2004-01-21 2004-01-21 Information provision terminal and information provision method Pending JP2005208798A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004012808A JP2005208798A (en) 2004-01-21 2004-01-21 Information provision terminal and information provision method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004012808A JP2005208798A (en) 2004-01-21 2004-01-21 Information provision terminal and information provision method

Publications (1)

Publication Number Publication Date
JP2005208798A true JP2005208798A (en) 2005-08-04

Family

ID=34899076

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004012808A Pending JP2005208798A (en) 2004-01-21 2004-01-21 Information provision terminal and information provision method

Country Status (1)

Country Link
JP (1) JP2005208798A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007105703A1 (en) * 2006-03-16 2007-09-20 Pioneer Corporation Display control device, display control method, display control program, and recording medium
JP2008027035A (en) * 2006-07-19 2008-02-07 Xanavi Informatics Corp On-vehicle device
US20100153111A1 (en) * 2005-12-16 2010-06-17 Takuya Hirai Input device and input method for mobile body
WO2013022218A2 (en) * 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing user interface thereof
CN103034328A (en) * 2011-08-05 2013-04-10 三星电子株式会社 Method for controlling electronic apparatus based on voice recognition and motion recognition, and electric apparatus thereof
US9002714B2 (en) 2011-08-05 2015-04-07 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
JP2016142614A (en) * 2015-02-02 2016-08-08 株式会社デンソー Onboard device
JP2019131135A (en) * 2018-02-02 2019-08-08 株式会社デンソー Display system
JP2019205027A (en) * 2018-05-22 2019-11-28 コニカミノルタ株式会社 Operation screen display device, image processing device, and program

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100153111A1 (en) * 2005-12-16 2010-06-17 Takuya Hirai Input device and input method for mobile body
US8280742B2 (en) * 2005-12-16 2012-10-02 Panasonic Corporation Input device and input method for mobile body
WO2007105703A1 (en) * 2006-03-16 2007-09-20 Pioneer Corporation Display control device, display control method, display control program, and recording medium
JP2008027035A (en) * 2006-07-19 2008-02-07 Xanavi Informatics Corp On-vehicle device
WO2013022218A3 (en) * 2011-08-05 2013-04-25 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing user interface thereof
CN103034328A (en) * 2011-08-05 2013-04-10 三星电子株式会社 Method for controlling electronic apparatus based on voice recognition and motion recognition, and electric apparatus thereof
WO2013022218A2 (en) * 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing user interface thereof
US9002714B2 (en) 2011-08-05 2015-04-07 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
US9733895B2 (en) 2011-08-05 2017-08-15 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
JP2016142614A (en) * 2015-02-02 2016-08-08 株式会社デンソー Onboard device
JP2019131135A (en) * 2018-02-02 2019-08-08 株式会社デンソー Display system
JP2019205027A (en) * 2018-05-22 2019-11-28 コニカミノルタ株式会社 Operation screen display device, image processing device, and program
JP7047592B2 (en) 2018-05-22 2022-04-05 コニカミノルタ株式会社 Operation screen display device, image processing device and program

Similar Documents

Publication Publication Date Title
KR101613407B1 (en) Vehicle system comprising an assistance functionality and method for operating a vehicle system
JP5463922B2 (en) In-vehicle machine
JP2004505322A (en) Remote control user interface
KR20100076998A (en) Multimode user interface of a driver assistance system for inputting and presentation of information
JP2005215694A (en) Method for executing dialogue and dialogue system
US7765045B2 (en) Manual operation system
JP2009139544A (en) Input device
JP2007519553A (en) Control system for vehicle
JP2008014818A (en) Operation control device and program
JP2005208798A (en) Information provision terminal and information provision method
JP2003114698A (en) Command acceptance device and program
US20110007006A1 (en) Method and apparatus for operating a device in a vehicle with a voice controller
JP2020160180A (en) Display control device, display control method, and program
JP4487299B2 (en) Voice recognition device
JP6124047B2 (en) Control device
JP5040545B2 (en) Navigation device
JP2009162691A (en) On-vehicle information terminal
JP2002351493A (en) Voice recognition controller and on-vehicle information processor
JP2001209522A (en) Operating guide device for vehicle
JP4458037B2 (en) Information input device
JP2005053331A (en) Information presenting device for vehicular instrument
JP2008233009A (en) Car navigation device, and program for car navigation device
JP2000338992A5 (en)
JPH05207549A (en) On-vehicle operation switch device
JP2005128791A (en) Display unit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061213

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080624

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080605

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20081014

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081113

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090119

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20091110