JPWO2020071286A1 - 入力装置、入力方法および入力システム - Google Patents

入力装置、入力方法および入力システム Download PDF

Info

Publication number
JPWO2020071286A1
JPWO2020071286A1 JP2020550400A JP2020550400A JPWO2020071286A1 JP WO2020071286 A1 JPWO2020071286 A1 JP WO2020071286A1 JP 2020550400 A JP2020550400 A JP 2020550400A JP 2020550400 A JP2020550400 A JP 2020550400A JP WO2020071286 A1 JPWO2020071286 A1 JP WO2020071286A1
Authority
JP
Japan
Prior art keywords
information
input
unit
character string
correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020550400A
Other languages
English (en)
Other versions
JP7178576B2 (ja
Inventor
健二 立花
健二 立花
大志 淺野
大志 淺野
俊介 齊藤
俊介 齊藤
将志 瀬戸
将志 瀬戸
将治 廣幡
将治 廣幡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of JPWO2020071286A1 publication Critical patent/JPWO2020071286A1/ja
Application granted granted Critical
Publication of JP7178576B2 publication Critical patent/JP7178576B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/232—Orthographic correction, e.g. spell checking or vowelisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/194—Calculation of difference between files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761—Proximity, similarity or dissimilarity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/12—Detection or correction of errors, e.g. by rescanning the pattern
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/10—Speech classification or search using distance or distortion measures between unknown speech and reference templates
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625—License plates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本開示の入力装置は、移動体に搭載される入力装置であって、文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、を備える。

Description

本開示は、入力装置、入力方法および入力システムに関する。
特許文献１には、車両のナンバープレートを含む情景画像を撮像し、撮像した情景画像の中からナンバープレート領域を検出し、ナンバープレート上に記載された文字情報を読取るナンバープレート情報読取装置が開示されている。
特開平４−１０１２８６号公報
本開示は、入力情報を容易に訂正することが可能な入力装置、入力方法及び入力システムを提供することを目的する。
本開示の一態様の入力装置は、
移動体に搭載される入力装置であって、
文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
を備える。
本開示の一態様の入力方法は、
移動体において実施される入力方法であって、
文字列を含む入力情報を入力するステップ、
１つ又は複数の文字を含む訂正情報を入力するステップ、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出するステップ、
算出された前記類似度に基づいて前記入力情報の文字列を訂正するステップ、
を含む。
本開示の一態様の入力システムは、
移動体に搭載される演算処理装置と、
前記演算処理装置とネットワークを介して通信するサーバと、
を備え、
前記演算処理装置は、
文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
前記サーバとネットワークを介して通信する第１通信部と、
を有し、
前記サーバは、
前記演算処理装置と前記ネットワークを介して通信する第２通信部と、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
を有する。
本開示によれば、入力情報を容易に訂正することが可能な入力装置、入力方法及び入力システムを提供することができる。
本開示に係る実施の形態１の入力装置の構成の一例を示すブロック図である。 入力情報の一例を示す概略図である。 入力情報の訂正の一例を示す概略図である。 文字列の類似度の算出の一例を説明する概略図である。 文字列の類似度の算出の一例を説明する概略図である。 距離の算出の一例を示す概略図である。 距離の算出の一例を示す概略図である。 距離の算出の別例を示す概略図である。 距離の算出の別例を示す概略図である。 本開示に係る実施の形態１の入力方法の一例を示すフローチャートである。 入力情報の訂正の別例を示す概略図である。 入力情報の訂正の別例を示す概略図である。 本開示に係る実施の形態２の入力装置の構成の一例を示すブロック図である。 本開示に係る実施の形態２の入力方法の一例を示すフローチャートである。 入力情報の取得の一例を説明する概略図である。 入力情報の取得の一例を説明する概略図である。 入力情報の取得の一例を説明する概略図である。 入力情報の取得の一例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 入力情報の取得の別例を説明する概略図である。 本開示に係る実施の形態３の入力装置の構成の一例を示すブロック図である。 入力情報の取得の一例を説明する概略図である。 本開示に係る実施の形態４の入力システムの構成の一例を示すブロック図である。 本開示に係る実施の形態４の入力方法の一例を示すフローチャートである。
（本開示に至った経緯）
特許文献１に記載の読取装置においては、誤って文字情報を読み取る場合がある。このような場合、ユーザは、文字情報を訂正する作業を行う。例えば、ユーザは、タッチパネルなどを指で操作して文字情報を訂正する。あるいは、ユーザは音声入力によって文字情報を訂正する。
このような読取装置は、ポリスカーなどの警察車両に搭載される場合がある。例えば、ユーザは、警察車両の前方を走行する自動車のナンバープレートの文字情報を読取装置によって読み取る。ユーザは、読取装置で読み取った文字情報を入力情報として使用し、データベースなどで自動車のナンバーを照合する。このとき、読取装置が文字情報を誤って読み取っている場合、ユーザは入力情報を訂正する作業を行っている。
また、読取装置以外の入力の形態として、音声入力により入力情報を入力する場合がある。警察車両においては、一般車両に比べてノイズが発生しやすい環境である。このため、音声入力によって入力情報を入力する場合、ノイズにより入力情報が誤って認識されやすい。このため、入力情報を訂正する回数が、一般車両に比べて多くなる場合がある。
しかしながら、ユーザが運転中である場合、入力情報を訂正することが困難である。そこで、警察車両においては、入力情報を容易に訂正することが求められている。また、警察車両においては、緊急性を要する場合があり、迅速かつスムーズに入力情報を訂正することが求められている。
一般車両などの移動体においても入力情報を容易に訂正することが求められている。例えば、一般車両のカーナビゲーションシステムにおいて、音声入力により行き先の住所などを入力する場合においても、入力情報が誤って認識されることがある。このような場合においても、入力情報を容易に訂正することが求められている。
そこで、本発明者らは、これらの課題を解決するために鋭意検討したところ、入力情報と訂正情報とに基づいて文字列の類似度を算出し、類似度に基づいて入力情報を訂正することを見出し、以下の開示に至った。
本開示の一態様の入力装置は、
移動体に搭載される入力装置であって、
文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
を備える。
このような構成により、入力情報を容易に訂正することができる。
本開示の第２態様の入力装置においては、
前記類似度算出部は、前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の距離を算出する距離算出部を含み、
前記訂正処理部は、前記距離算出部で算出された前記文字列の距離に基づいて前記入力情報の文字列を訂正してもよい。
このような構成により、入力情報をより容易に訂正することができる。
本開示の第３態様の入力装置においては、
前記距離算出部は、前記入力情報の文字列に対して挿入、削除、および置換のうち少なくともいずれか１つの編集処理を実施することによって、編集前と編集後の前記入力情報の文字列の距離を算出してもよい。
このような構成により、入力情報をより容易に訂正することができる。
本開示の第４態様の入力装置においては、
前記訂正処理部は、前記距離算出部で算出された前記文字列の距離のうち、最も距離が小さい部分の前記入力情報の文字列を訂正してもよい。
このような構成により、入力情報をより正確に訂正することができる。
本開示の第５態様の入力装置においては、
前記入力情報は、前記入力情報の複数の文字列を分類する複数の属性を有し、
前記類似度算出部は、前記訂正情報が前記複数の属性のうちいずれの属性に分類されるかを判定する属性判定部を有し、
前記類似度算出部は、前記入力情報と前記訂正情報の属性に基づいて、前記類似度を算出してもよい。
このような構成により、入力情報をより迅速に訂正することができる。
本開示の第６態様の入力装置においては、
前記訂正処理部は、前記入力情報と前記訂正情報との属性が一致する前記入力情報の文字列のうち、最も類似度が高い部分の文字を訂正してもよい。
このような構成により、入力情報をより正確に訂正することができる。
本開示の第７態様の入力装置においては、
前記訂正処理部は、前記入力情報の文字列において、前記類似度算出部によって算出される複数の類似度のうち類似度が最も高い部分が複数存在する場合、最初に算出された類似度が最も高い部分の文字を訂正してもよい。
このような構成により、入力情報をより迅速かつより正確に訂正することができる。
本開示の第８態様の入力装置においては、更に、
前記入力情報および訂正された前記入力情報を表示する表示部を備えてもよい。
このような構成により、入力情報を表示することができる。
本開示の第９態様の入力装置においては、
前記入力部は、前記入力情報を示す音声情報及び前記訂正情報を示す音声情報を入力する音声入力部を含み、
前記入力装置は、更に、
前記音声入力部で入力された前記音声情報が前記入力情報であるか、又は前記訂正情報であるかを判定する判定部を備え、
前記類似度算出部は、前記判定部によって音声情報が前記訂正情報であると判定された場合、前記類似度を算出してもよい。
このような構成により、音声入力によって情報の入力および訂正を容易に行うことができる。
本開示の第１０態様の入力装置においては、
前記入力情報は、文字列が撮影された画像情報であり、
前記訂正情報は、１つ又は複数の文字の情報を含む音声情報であり、
前記入力部は、前記画像情報を取得する画像取得部と、前記音声情報を入力する音声入力部と、を有し、
前記入力装置は、更に、
前記画像取得部で取得された前記画像情報に含まれる文字列情報をテキスト情報に変換する第１変換部と、
前記音声入力部で入力された前記音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する第２変換部と、
を備えてもよい。
このような構成により、画像情報により取得された入力情報を、音声入力により容易に訂正することができる。
本開示の第１１態様の入力方法においては、
移動体において実施される入力方法であって、
文字列を含む入力情報を入力するステップ、
１つ又は複数の文字を含む訂正情報を入力するステップ、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出するステップ、
算出された前記類似度に基づいて前記入力情報の文字列を訂正するステップ、
を含む。
このような構成により、入力情報を容易に訂正することができる。
本開示の第１２態様の入力システムにおいては、
移動体に搭載される演算処理装置と、
前記演算処理装置とネットワークを介して通信するサーバと、
を備え、
前記演算処理装置は、
文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
前記サーバとネットワークを介して通信する第１通信部と、
を有し、
前記サーバは、
前記演算処理装置と前記ネットワークを介して通信する第２通信部と、
前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
を有する。
このような構成により、入力情報を容易に訂正することができる。
以下、本開示の実施形態について、添付の図面を参照しながら説明する。また、各図においては、説明を容易なものとするため、各要素を誇張して示している。
（実施の形態１）
［入力装置］
図１は、本開示に係る実施の形態１の入力装置１の構成の一例を示すブロック図である。図１に示す入力装置１は、自動車などの移動体に搭載される装置である。入力装置１は、入力情報および訂正情報を入力可能な装置である。入力装置１は、入力情報が誤って入力された場合に、訂正情報を入力することによって入力情報を訂正する。なお、実施の形態１では、入力情報および訂正情報は音声入力によって入力される。
入力情報とは、入力装置１に入力される情報であり、入力装置１に認識させる文字情報を含む。訂正情報とは、入力情報を訂正するための情報であり、入力情報に含まれる文字情報を訂正する文字情報を含む。実施の形態１では、入力情報は、自動車のナンバープレートの文字列を含む文字情報を含む。自動車のナンバープレートの文字列は、例えば、アルファベット、数字、地名などを含む。訂正情報は、自動車のナンバープレートに使用される１つ又は複数の文字の情報を含む。
図２は、入力情報の一例を示す概略図である。図２に示すように、入力情報は、複数の文字列を含む。図２に示す例では、入力情報は、「ＡＢＣ ＡＥＣＤ」のアルファベット７文字を示すナンバー部分の第１文字列と、「Ｃｈｉｃａｇｏ」を示す地名部分の第２文字列と、を含む。
また、入力情報は、複数の属性情報を有する。具体的には、入力情報において、複数の文字列のそれぞれに属性情報が与えられている。図２に示す例では、第１属性情報と、第２属性情報とを有する。第１属性情報はアルファベット７文字を示すナンバー部の属性を含む。第２属性情報は地名の属性を含む。実施の形態１では、第１属性情報は、入力情報の第１文字列に割り当てられており、第２属性情報は入力情報の第２文字列に割り当てられている。
次に、入力装置１による入力情報の訂正の一例について図３を用いて簡単に説明する。図３は、入力情報の訂正の一例を示す概略図である。図３に示すように、自動車のナンバープレートの文字情報を入力装置１に入力するために、ユーザが「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と発話する。入力装置１は、ユーザの音声情報をテキスト情報に変換し、入力情報を認識する。このとき、入力装置１は、入力情報を誤って認識する場合がある。
図３に示す例では、入力装置１は入力情報を「ＡＤＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と誤って認識している。ユーザは、入力情報を訂正するために「ＡＢＣ」と発話し、訂正情報を入力装置１に入力する。入力装置１は、訂正情報に基づいて入力情報を訂正する。これにより、入力情報を「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」に訂正することができる。
このように、入力装置１では、入力情報の文字列すべてを訂正しなくても、訂正したい文字列の一部を訂正情報として入力することによって、入力情報の文字列を訂正することができる。訂正情報に基づく入力情報の訂正は、文字列の類似度に基づいて行う。類似度による訂正の詳細な説明については後述する。
次に、入力装置１の詳細な構成について説明する。図１に示すように、入力装置１は、入力部１０、情報処理部２０、判定部３０、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を備える。
＜入力部＞
入力部１０は、文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する。
入力部１０は、例えば、音声により入力情報および訂正情報を入力する音声入力部を備える。音声入力部としては、例えば、マイクロホンが挙げられる。実施の形態１では、入力情報および訂正情報は、音声入力によって入力部１０に入力される。即ち、入力部１０には、入力情報を示す音声情報および訂正情報を示す音声情報が入力される。
入力部１０に入力された音声情報は、情報処理部２０に送信される。
＜情報処理部＞
情報処理部２０は、入力部１０で入力された情報を処理する。具体的には、情報処理部２０は、入力部１０で入力された音声情報をテキスト情報（文字情報）に変換する変換部を備える。変換部は、音声情報をテキスト情報（文字情報）へと変換することによって、入力情報及び訂正情報を取得する。音声情報を文字情報に変換するアルゴリズムとしては、例えば、各種ディープラーニング手法や隠れマルコフモデルを利用した方法などを用いることができる。
情報処理部２０で処理された情報は、判定部３０に送信される。
＜判定部＞
判定部３０は、入力部１０で入力された音声情報が入力情報であるか、又は訂正情報であるかを判定する。例えば、判定部３０は、情報処理部２０で処理されたテキスト情報に基づいて、文字数をカウントする。判定部３０は、文字数が所定の数以上である場合、入力部１０で入力された情報が入力情報であると判定する。また、判定部３０は、文字数が所定の数より少ない場合、入力部１０で入力された情報が訂正情報であると判定する。
判定部３０は、入力部１０で入力された情報が入力情報であると判定した場合、入力情報を入力記憶部４０に送信する。判定部３０は、入力部１０で入力された情報が訂正情報であると判定した場合、訂正情報を類似度算出部５０に送信する。
＜入力記憶部＞
入力記憶部４０は、入力情報を記憶する記憶媒体である。入力記憶部４０は、判定部３０及び訂正処理部６０から入力情報を受信し、記憶する。例えば、入力記憶部４０は、ハードディスク（ＨＤＤ）、ＳＳＤ、ＲＡＭ、ＤＲＡＭ、強誘電体メモリ、フラッシュメモリ、磁気ディスク、又はこれらの組み合わせによって実現できる。
＜類似度算出部＞
類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。具体的には、類似度算出部５０は、入力情報の１〜ｎ番目の文字を編集開始位置とし、編集開始位置から入力情報の文字を訂正情報の文字に変更する編集を行う。類似度算出部５０は、編集前後の入力情報の文字列の類似度を算出する。なお、「ｎ番目」は、入力情報の文字数と訂正情報の文字数に基づいて決定される。例えば、「ｎ＝（入力情報の文字数）−（訂正情報の文字数）」で算出される。即ち、類似度算出部５０は、入力情報の文字列に対してｎ回の編集処理を実施し、それぞれの編集処理に対して類似度を算出する。
文字列の類似度の算出の一例について図４Ａ及び図４Ｂを用いて説明する。図４Ａ及び図４Ｂは、文字列の類似度の算出の一例を説明する概略図である。なお、図４Ａ及び図４Ｂに示す例は、図３に示す訂正が実施される際に行われる類似度の算出を示す。言い換えると、図４Ａ及び図４Ｂに示す例は、誤った入力情報である「ＡＤＣ ＡＥＣＤ」を、訂正情報の「ＡＢＣ」の入力によって、入力情報を「ＡＢＣ ＡＥＣＤ」に訂正する際に実施される類似度の算出を示す。
図４Ａに示すように、類似度算出部５０は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」に対して編集を実施する。類似度算出部５０は、編集開始位置を入力情報の１番目の文字「Ａ」とする。類似度算出部５０は、入力情報の１番目の文字「Ａ」の位置から編集を開始する。具体的には、類似度算出部５０は、入力情報の１〜３番目の文字である「ＡＤＣ」を訂正情報の「ＡＢＣ」に変更する。類似度算出部５０は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」と編集後の入力情報「ＡＢＣ ＡＥＣＤ」との類似度を算出する。
次に、類似度算出部５０は、編集開始位置を入力情報の２番目の文字「Ｄ」とする。類似度算出部５０は、入力情報の２番目の文字「Ｄ」から編集を開始する。図４Ｂに示すように、類似度算出部５０は、入力情報の２〜４番目の文字である「ＤＣＡ」を訂正情報の「ＡＢＣ」に変更する。類似度算出部５０は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」と編集後の入力情報「ＡＡＢ ＣＥＣＤ」の類似度を算出する。
このように、類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の１〜ｎ番目の文字を編集開始位置として入力情報の文字列を順次編集し、編集前と編集後の入力情報の文字列の類似度をそれぞれ算出する。
類似度の算出方法については、任意のアルゴリズムを採用することができる。例えば、類似度の算出方法は、レーベンシュタイン距離とジャロ・ウィンクラー距離などを算出するアルゴリズムなどを採用することができる。
実施の形態１では、類似度算出部５０は、類似度として文字列の距離を算出している。なお、文字列の距離においては、文字列の距離が小さいほど類似度が高いことを示し、文字列の距離が大きいほど類似度が低いことを意味する。以下、文字列の距離を算出する構成の一例について説明する。
図１に戻って、類似度算出部５０は、距離算出部５１と、属性判定部５２と、を有する。
距離算出部５１は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の距離を算出する。具体的には、距離算出部５１は、入力情報の文字列に対して挿入、削除、および置換のうち少なくともいずれか１つの編集処理を実施することによって、編集前と編集後の入力情報の文字列の距離を算出する。なお、距離算出部５１は、入力記憶部４０から編集前の入力情報を取得する。
本明細書において、「削除」とは、入力情報の文字列のうち１つの文字を削除することを意味する。「挿入」とは、入力情報の文字列に１つの文字を挿入することを意味する。「置換」とは、入力情報の文字列ののうち１つの文字を置き換えることを意味する。
距離算出部５１による距離の算出の一例について図５Ａ及び図５Ｂを用いて説明する。図５Ａ及び図５Ｂは、距離の算出の一例を示す概略図である。なお、図５Ａ及び図５Ｂに示す例は、図４Ａ及び図４Ｂに示す類似度の算出に対応する。
図５Ａ及び図５Ｂに示す例は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」を、訂正情報の「ＡＢＣ」の入力によって、入力情報「ＡＢＣ ＡＥＣＤ」に編集する場合の文字列の距離の算出を示す。具体的には、距離算出部５１は、編集開始位置を入力情報の１番目の文字「Ａ」としている。距離算出部５１は、入力情報の１番目の文字「Ａ」の位置から編集を開始する。即ち、図５Ａ及び図５Ｂに示す例では、入力情報の１〜３番目の文字である「ＡＤＣ」を訂正情報の「ＡＢＣ」に変更する場合の距離の算出の一例を示す。
まず、図５Ａに示す例について説明する。図５Ａに示す例では、入力情報の文字列に対して削除および挿入の編集処理を実施することによって、編集前と編集後の入力情報の文字列の距離を算出する。
入力情報の１〜３番目の文字「ＡＤＣ」を訂正情報の「ＡＢＣ」に変更する場合、距離算出部５１は、訂正情報の文字と入力情報の１〜３番目の文字とを比較し、入力情報の１〜３番目の文字の中で変更する文字の位置を特定する。図５Ａに示す例では、入力情報の２番目の文字「Ｄ」のみが訂正情報の文字「Ｂ」と異なる。このため、距離算出部５１は、入力情報の２番目の文字「Ｄ」を訂正情報の２番目の文字「Ｂ」に変更するため、入力情報の２番目の文字「Ｄ」の位置を特定する。
距離算出部５１は、変更する文字の位置を特定した後、特定した位置の文字を編集する。例えば、距離算出部５１は、入力情報の２番目の文字「Ｄ」を削除する。次に、距離算出部５１は、削除した部分に訂正情報の２番目の文字「Ｂ」を挿入する。このように、図５Ａに示す例では、削除および挿入をそれぞれ１回実施することによって、編集後の入力情報を得ることができる。
距離算出部５１は、編集回数と編集コストに基づいて、編集前後の入力情報の文字列の距離を算出する。例えば、削除のコストが「＋１」であり、挿入のコストが「＋１」である場合、図５Ａに示す例では、削除を１回、挿入を１回行っていることから、距離算出部５１は、編集前後の入力情報の文字列の距離を「＋２」と算出する。
次に、図５Ｂに示す例について説明する。図５Ｂに示す例では、入力情報の文字列に対して置換の編集処理を実施することによって、編集前と編集後の入力情報の文字列の距離を算出する。
図５Ｂに示す例において、距離算出部５１は、図５Ａに示す例と同様に、入力情報の２番目の文字「Ｄ」を訂正情報の２番目の文字「Ｂ」に変更するため、入力情報の２番目の文字「Ｄ」の位置を特定する。
距離算出部５１は、変更する文字の位置を特定した後、特定した位置の文字を編集する。例えば、距離算出部５１は、入力情報の２番目の文字「Ｄ」を「Ｂ」に置換する。このように、図５Ｂに示す例では、置換を１回実施することによって、編集後の入力情報を得ることができる。
距離算出部５１は、編集回数と編集コストに基づいて、編集前後の入力情報の文字列の距離を算出する。例えば、置換のコストが「＋３」である場合、図５Ｂに示す例では、置換を１回行っていることから、距離算出部５１は、編集前後の入力情報の文字列の距離を「＋３」と算出する。
次に、図６を用いて距離の算出の別例について説明する。図６は、距離の算出の別例を示す概略図である。図６に示す例は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」を、訂正情報の「ＡＢＣ」の入力によって、入力情報「ＡＡＢ ＣＥＣＤ」に編集する場合の文字列の距離の算出を示す。具体的には、距離算出部５１は、編集開始位置を入力情報の２番目の文字「Ｄ」とする。距離算出部５１、編集を開始する。即ち、図６に示す例では、入力情報の２〜４番目の文字である「ＤＣＡ」を訂正情報の「ＡＢＣ」に変更する場合の距離の算出の一例を示す。図６に示す例において、その他の条件は図５Ａに示す例と同様である。
入力情報の２〜４番目の文字「ＤＣＡ」を訂正情報の「ＡＢＣ」に変更する場合、距離算出部５１は、訂正情報の文字と入力情報の２〜４番目の文字とを比較し、入力情報の２〜４番目の文字の中で変更する文字の位置を特定する。図６に示す例では、入力情報の２〜４番目のすべての文字「Ｄ」、「Ｃ」、「Ａ」が訂正情報の文字と異なる。このため、距離算出部５１は、入力情報の２〜４番目の文字「Ｄ」、「Ｃ」、「Ａ」の位置を特定する。
距離算出部５１は、変更する文字の位置を特定した後、特定した位置の文字を編集する。例えば、距離算出部５１は、入力情報の２番目の文字「Ｄ」を削除し、削除した部分に訂正情報の１番目の文字「Ａ」を挿入する。また、距離算出部５１は、入力情報の３番目の文字「Ｃ」を削除し、削除した部分に訂正情報の２番目の文字「Ｂ」を挿入する。さらに、距離算出部５１は、入力情報の４番目の文字「Ａ」を削除し、削除した部分に訂正情報の３番目の文字「Ｃ」を挿入する。このように、図６に示す例では、削除および挿入をそれぞれ３回実施することによって、編集後の入力情報を得ることができる。
図６に示す例では、削除を３回、挿入を３回行っていることから、距離算出部５１は、編集前後の入力情報の文字列の距離を「＋６」と算出する。
ここで、図５Ａに示す例と図６に示す例とを比較すると、図５Ａに示す例の距離「＋２」は、図６に示す距離「＋６」よりも小さい。このことから、図５Ａに示す例は、図６に示す例よりも類似度が高いことがわかる。
このように、距離算出部５１は、入力情報の文字列に対して挿入、削除、および置換のうち少なくともいずれか１つの編集処理を実施することによって、編集前と編集後の入力情報の文字列の距離を算出する。なお、上述した削除、挿入および置換の編集コストの数値については例示であって、これらに限定されない。編集コストについては、任意の数値に設定してもよい。
距離算出部５１で算出された文字列の距離の情報は、訂正処理部６０に送信される。
属性判定部５２は、訂正情報が入力情報の複数の属性のうちいずれの属性に分類されるかを判定する。例えば、属性判定部５２は、判定部３０から訂正情報を受信し、訂正情報が図２に示す入力情報の第１属性情報と第２属性情報のいずれの属性に分類されるかを判定する。
例えば、訂正情報の文字情報が１つ又は複数のアルファベット文字である場合、属性判定部５２は、訂正情報が自動車のナンバー部分の情報であると認識する。この場合、属性判定部５２は、訂正情報が第１属性情報であると判定する。あるいは、訂正情報の文字情報が地名である場合、属性判定部５２は、訂正情報が地名の情報であると認識する。この場合、属性判定部５２は、訂正情報が第２属性情報であると判定する。
属性判定部５２で判定された属性情報は、距離算出部５１に送信される。距離算出部５１は、属性判定部５２で判定された属性情報に基づいて、入力情報の複数の文字列のうちいずれの文字列を編集するかを決定する。例えば、訂正情報が第１属性情報に分類される場合、距離算出部５１は、図２に示す「ＡＢＣ ＡＥＣＤ」部分の距離を算出し、「Ｃｈｉｃａｇｏ」の部分の距離を算出しない。あるいは、訂正情報が第２属性情報に分類される場合、距離算出部５１は、図２に示す「Ｃｈｉｃａｇｏ」部分の距離を算出し、「ＡＢＣ ＡＥＣＤ」の部分の距離を算出しない。
このように、属性情報に基づいて距離を算出することによって、迅速かつスムーズに入力情報を訂正することができる。
＜訂正処理部＞
訂正処理部６０は、類似度算出部５０で算出された類似度に基づいて入力情報の文字列を訂正する。上述したように、類似度算出部５０は、入力情報の文字列に対してｎ回の編集処理を実施し、それぞれの編集処理に対して類似度を算出している。訂正処理部６０は、類似度算出部５０で算出された複数の類似度の中から類似度が最も高い編集処理を特定する。訂正処理部６０は、類似度が最も高い編集処理に基づいて入力情報を訂正する。
実施の形態１では、訂正処理部６０は、距離算出部５１で算出された文字列の距離に基づいて入力情報の文字列を訂正する。訂正処理部６０は、距離算出部５１で算出された文字列の距離のうち、最も距離が小さい部分の入力情報の文字列を訂正する。例えば、図５Ａに示す例と図６に示す例とを比較すると、図５Ａに示す例の距離「＋２」は、図６に示す距離「＋６」よりも小さい。訂正処理部６０は、図５Ａに示す編集処理を採用し、入力情報のナンバー部分を「ＡＢＣ ＡＥＣＤ」に訂正する。
類似度算出部５０で算出された複数の類似度の中で類似度が最も高い編集処理が複数ある場合についての処理について説明する。実施の形態１では、類似度として文字列の距離を用いているため、文字列の距離を用いて説明する。図７は、距離の算出の別例を示す概略図である。図７に示す例は、編集前の入力情報「ＡＤＣ ＡＥＣＤ」を、訂正情報の「ＡＢＣ」の入力によって、入力情報「ＡＤＣ ＡＢＣＤ」に編集する場合の文字列の距離の算出を示す。具体的には、距離算出部５１は、編集開始位置を入力情報の４番目の文字「Ａ」とする。距離算出部５１は、入力情報の４番目の文字「Ａ」の位置から編集を開始する。即ち、図７に示す例では、入力情報の４〜６番目の文字である「ＡＥＣ」を訂正情報の「ＡＢＣ」に変更する場合の距離の算出の一例を示す。図７に示す例において、その他の条件は図５Ａに示す例と同様である。
図７に示す例では、距離算出部５１は、入力情報の５番目の文字「Ｅ」を削除する。次に、距離算出部５１は、削除した部分に訂正情報の２番目の文字「Ｂ」を挿入する。このように、図７に示す例では、削除および挿入をそれぞれ１回実施することによって、編集後の入力情報を得ることができる。
図７に示す例では、削除を１回、挿入を１回行っていることから、距離算出部５１は、編集前後の入力情報の文字列の距離を「＋２」と算出する。図５Ａに示す例と図７に示す例とを比較すると、距離「＋２」で等しい。この場合、訂正処理部６０は、入力情報の文字列において、最初に算出された距離が最も小さい部分の文字を訂正する。即ち、訂正処理部６０は、図５Ａに示す例の編集処理を採用し、入力情報のナンバー部分を「ＡＢＣ ＡＥＣＤ」に訂正する。
このように、訂正処理部６０は、入力情報の文字列において、距離算出部５１によって算出される複数の距離のうち距離が最も大きい部分が複数存在する場合、最初に算出された距離が最も小さい部分の文字を訂正する。言い換えると、訂正処理部６０は、入力情報の文字列において、類似度算出部５０によって算出される複数の類似度のうち類似度が最も高い部分が複数存在する場合、最初に算出された類似度が最も高い部分の文字を訂正する。
訂正処理部６０によって訂正された入力情報は、入力記憶部４０に送信される。
＜表示部＞
表示部７０は、入力情報および訂正された入力情報を表示する。表示部７０は、入力記憶部４０から入力情報および訂正された入力情報を取得する。表示部７０は、例えば、ディスプレイ又はヘッドアップディスプレイにより実現できる。
入力装置１を構成する要素は、例えば、半導体素子などで実現可能である。入力装置１を構成する要素は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。入力装置１を構成する要素の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
入力装置１を構成する要素は、例えば、制御部によって統括的に制御される。制御部は、例えば、プログラムを記憶したメモリと、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプロセッサに対応する処理回路（図示せず）を備える。例えば、制御部においては、プロセッサがメモリに記憶されたプログラムを実行する。実施の形態１では、制御部は、入力部１０、情報処理部２０、判定部３０、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を制御する。
［入力方法］
実施の形態１の入力方法の一例、即ち、入力装置１の動作の一例について図８を用いて説明する。図８は、本開示に係る実施の形態１の入力方法の一例を示すフローチャートである。図８に示すステップＳＴ１〜ＳＴ６は、入力装置１によって実施される。以下、詳細に説明する。
図８に示すように、ステップＳＴ１において、入力部１０によって音声情報を入力する。ステップＳＴ１では、ユーザが発話することによって、入力部１０に音声情報を入力する。
ステップＳＴ１で入力される音声情報は、入力情報又は訂正情報として用いられる。入力情報を音声情報で入力する場合、図３に示す例のように、ユーザは入力部１０に向かって「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と発話する。訂正情報を音声情報で入力する場合、図３に示す例のように、ユーザは入力部１０に向かって「ＡＢＣ」と発話する。
ステップＳＴ２において、情報処理部２０によって音声情報をテキスト情報に変換する。ステップＳＴ２においては、ステップＳＴ１で入力部１０に入力された音声情報をテキスト情報（文字情報）に変換する。これにより、入力情報および訂正情報を取得する。このとき、情報処理部２０は、音声情報を誤って認識して変換する場合がある。例えば、図３に示す例のように、入力部１０に入力された音声情報の「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」を「ＡＤＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と認識し、テキスト情報に変換する場合がある。
ステップＳＴ３において、判定部３０によって入力部１０で入力された情報が入力情報であるか、又は訂正情報であるかを判定する。具体的には、判定部３０は、ステップＳＴ２でテキスト変換された文字情報の文字数に基づいて入力情報であるか、又は、訂正情報であるかを判定する。
ステップＳＴ３において、判定部３０が入力部１０で入力された情報が入力情報であると判定する場合、処理はステップＳＴ４へと進む。判定部３０が入力部１０で入力された情報が訂正情報であると判定する場合、処理はステップＳＴ５へと進む。
ステップＳＴ４において、表示部７０によって入力情報を表示する。
ステップＳＴ５において、類似度算出部５０によって訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。実施の形態１では、ステップＳＴ５において、文字列の類似度として、文字列の距離を算出する。
ステップＳＴ５は、訂正情報の属性を判定するステップＳＴ５Ａと、文字列の距離を算出するステップＳＴ５Ｂと、を含む。
ステップＳＴ５Ａにおいて、属性判定部５２によって訂正情報が複数の属性のうちいずれの属性に分類されるかを判定する。例えば、ステップＳＴ５Ａにおいては、属性判定部５２によって、訂正情報が図３の例に示す第１属性情報と第２属性情報とのいずれの属性に分類されるかを判定する。
ステップＳＴ５Ｂにおいて、距離算出部５１によって入力情報と訂正情報の属性に基づいて文字列の距離を算出する。例えば、ステップＳＴ５Ｂにおいては、訂正情報が第１属性情報の属性に分類される場合、距離算出部５１は、入力情報の第１属性情報の部分を訂正情報の１つ又は複数の文字を用いて編集し、編集前後の入力情報の文字列の距離を算出する。
ステップＳＴ６において、訂正処理部６０によって類似度に基づいて入力情報の文字列を訂正する。具体的には、訂正処理部６０は、ステップＳＴ５Ｂで算出された文字列の距離のうち、最も距離が小さい部分の入力情報の文字列を訂正する。
ステップＳＴ６で入力情報が訂正された後、ステップＳＴ４へ進む。これにより、訂正された入力情報が表示部によって表示される。
［訂正の別例］
次に、入力情報の訂正の別例について図９及び図１０を用いて説明する。図９及び図１０は、入力情報の訂正の別例を示す概略図である。
図９に示す例について説明する。図９に示す例では、自動車のナンバープレートの文字情報を入力装置１に入力するために、ユーザが「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と発話する。図９に示す例では、入力装置１は入力情報を「ＡＢＣ ＡＤＣＤ，Ｃｈｉｃａｇｏ」と誤って認識している。即ち、入力情報のナンバー部分の５番目の文字を誤って「Ｄ」と認識している。この場合、ユーザは、入力情報を訂正するために「ＡＢＣ ＡＥＣＤ」と発話し、訂正情報を入力装置１に入力する。入力装置１は、上述したように類似度に基づいて入力情報を訂正することによって、入力情報を「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」に訂正する。
次に、図１０に示す例について説明する。図１０に示す例では、自動車のナンバープレートの文字情報を入力装置１に入力するために、ユーザが「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と発話する。図１０に示す例では、入力装置１は入力情報を「ＡＢＣ ＡＥＣＤ，Ｆｌｏｒｉｄａ」と誤って認識している。即ち、入力情報の地名部分を誤って「Ｆｌｏｒｉｄａ」と認識している。この場合、ユーザは、入力情報を訂正するために「Ｃｈｉｃａｇｏ」と発話し、訂正情報を入力装置１に入力する。入力装置１は、上述したように類似度に基づいて入力情報を訂正することによって、入力情報を「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」に訂正する。なお、地名については、入力記憶部４０に予め複数の地名が記憶されており、複数の地名の中からユーザの入力した地名に一致する地名又は類似する地名が選択される。
［効果］
実施の形態１の入力装置１および入力方法によれば、以下の効果を奏することができる。
入力装置１は、移動体に搭載される入力装置であって、入力部１０、情報処理部２０、判定部３０、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を備える。入力部１０は、文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を音声入力により入力する。情報処理部２０は、入力部１０で入力された音声情報をテキスト情報に変換する。判定部３０は、入力部１０で入力された音声情報が入力情報であるか、又は訂正情報であるかを判定する。入力記憶部４０は、入力情報を記憶する記憶媒体である。類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。訂正処理部６０は、類似度算出部５０で算出された類似度に基づいて入力情報の文字列を訂正する。表示部７０は、表示部７０は、入力情報および訂正された入力情報を表示する。
このような構成により、入力情報が誤って入力された場合でも入力情報を容易に訂正することができる。また、ユーザが自動車などの移動体を運転中であっても、音声入力により迅速かつスムーズに入力情報を訂正することができる。
類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の距離を算出する距離算出部５１を含む。訂正処理部６０は、距離算出部５１で算出された文字列の距離に基づいて入力情報の文字列を訂正する。
このような構成により、文字列の距離に基づいて類似度を算出することができ、入力情報をより容易に訂正することができる。また、訂正の精度を向上させることができる。
距離算出部５１は、入力情報の文字列に対して挿入、削除、および置換のうち少なくともいずれか１つの編集処理を実施することによって、編集前と編集後の入力情報の文字列の距離を算出する。
このような構成により、入力情報をより容易に訂正することができる。また、訂正の精度をより向上させることができる。
訂正処理部６０は、距離算出部５１で算出された文字列の距離のうち、最も距離が小さい部分の入力情報の文字列を訂正する。
このような構成により、入力情報をより容易に訂正することができる。また、訂正の精度をさらに向上させることができる。
入力情報は、入力情報の複数の文字列を分類する複数の属性を有する。類似度算出部５０は、訂正情報が複数の属性のうちいずれの属性に分類されるかを判定する属性判定部５２を有する。類似度算出部５０は、入力情報と訂正情報の属性に基づいて、類似度を算出する。
このような構成により、入力情報をより迅速かつスムーズに訂正することができる。
訂正処理部６０は、入力情報と訂正情報との属性が一致する入力情報の文字列のうち、最も類似度が高い部分の文字を訂正する。
このような構成により、入力情報をより容易に訂正することができる。また、入力情報をより迅速かつスムーズに訂正することができる。
訂正処理部６０は、入力情報の文字列において、類似度算出部５０によって算出される複数の類似度のうち類似度が最も高い部分が複数存在する場合、最初に算出された類似度が最も高い部分の文字を訂正する。
このような構成により、入力情報をより容易に訂正することができる。また、入力情報をより迅速かつスムーズに訂正することができる。
実施の形態１の入力方法についても、上述した入力装置１の効果と同様の効果を奏する。
なお、実施の形態１では、入力情報が自動車のナンバープレートの文字列情報である例について説明したが、これに限定されない。入力情報は、文字列の情報を有していればよい。例えば、入力情報は、住所、地名、人名、建物名、電話番号などの文字列情報を含んでいてもよい。
実施の形態１では、入力情報が複数の文字列を有する例について説明したが、これに限定されない。例えば、入力情報は、１つ又は複数の文字列を有していればよい。
実施の形態１では、入力情報および訂正情報が属性情報を有する例について説明したが、これに限定されない。例えば、入力情報および訂正情報は属性情報を有していなくてもよい。
実施の形態１では、属性情報が、自動車のナンバープレートのナンバー部分を示す第１属性情報と、地名部分を示す第２属性情報と、を含む例について説明したが、これに限定されない。属性情報は、属性を示す情報であればよい。例えば、属性情報は、Ａｌｐｈａ、Ｂｒａｖｏなどのコードであってもよい。
実施の形態１では、訂正情報の例として図３、図９および図１０を説明したが、これに限定されない。訂正情報は、入力情報を訂正するための情報であり、類似度に基づいて訂正できる１つ又は複数の文字の情報を含んでいればよい。
実施の形態１では、入力部１０が音声入力部を備える例について説明したが、これに限定されない。入力部１０は、入力情報と訂正情報とが入力できるものであればよい。例えば、入力部１０は、タッチパネル、キーボードなどの入力インタフェースを備えていてもよい。あるいは、入力部１０は、画像取得部を備えていてもよい。この場合、画像取得部で取得された画像情報から文字情報を取得する。
実施の形態１では、入力装置１が情報処理部２０および判定部３０を備える例について説明したが、これに限定されない。情報処理部２０および判定部３０は必須の構成ではない。例えば、入力部１０で入力される情報がテキスト情報である文字情報である場合、入力装置１は情報処理部２０を備えていなくてもよい。また、入力情報と訂正情報とをそれぞれ異なる装置で取得する場合、入力装置１は判定部３０を備えていなくてもよい。
実施の形態１では、判定部３０が文字数に基づいて入力情報と訂正情報とを判定する例について説明したが、これに限定されない。例えば、判定部３０は、属性情報などに基づいて入力情報と訂正情報とを判定してもよい。
実施の形態１では、入力装置１が入力記憶部４０を備える例について説明したが、これに限定されない。入力記憶部４０は必須の構成ではない。
実施の形態１では、類似度算出部５０の類似度として、距離算出部５１によって算出される文字列の距離を例として説明したが、これに限定されない。距離算出部５１は必須の構成ではない。類似度算出部５０は、文字列の類似度を算出できればよい。文字列の類似度を算出するアルゴリズムとしては、例えば、レーベンシュタイン距離とジャロ・ウィンクラー距離などを算出するアルゴリズムなどを用いることができる。
実施の形態１では、類似度算出部５０が属性判定部５２を備える例について説明したが、これに限定されない。属性判定部５２は必須の構成ではない。
実施の形態１では、入力装置１が表示部７０を備える例について説明したが、これに限定されない。表示部７０は必須の構成ではない。例えば、入力装置１は、表示部７０の代わりに、入力情報を音声出力する音声出力部を備えていてもよい。あるいは、入力装置１は、表示部７０と音声出力部との両方を備えていてもよい。
実施の形態１では、入力装置１が入力部１０、情報処理部２０、判定部３０、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を備える例について説明したが、これに限定されない。入力装置１を構成する要素は、増減してもよい。あるいは、入力装置１を構成する複数の要素のうち２つ以上の要素は、統合されてもよい。
実施の形態１では、入力方法がステップＳＴ１〜ＳＴ６を含む例について説明したが、これに限定されない。入力方法は、ステップを増減してもよいし、ステップを統合してもよい。例えば、入力情報と訂正情報とが異なる方法で入力される場合、入力方法はステップＳＴ３を含んでいなくてもよい。あるいは、入力情報が属性情報を有していない場合、入力方法はステップＳＴ５Ａを含んでいなくてもよい。
（実施の形態２）
本開示の実施の形態２に係る入力装置について説明する。なお、実施の形態２では、主に実施の形態１と異なる点について説明する。実施の形態２においては、実施の形態１と同一又は同等の構成については同じ符号を付して説明する。また、実施の形態２では、実施の形態１と重複する記載は省略する。
実施の形態２の入力装置の一例について、図１１を用いて説明する。図１１は、本開示に係る実施の形態２の入力装置１Ａの構成の一例を示すブロック図である。
実施の形態２では、入力情報を画像取得部１１によって取得し、訂正情報を音声入力部１２によって取得している点で、実施の形態１と異なる。
図１１に示すように、入力装置１Ａは、入力部１０Ａ、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を備える。実施の形態２では、画像情報に基づいて入力情報が取得され、音声情報に基づいて訂正情報が取得される。このため、入力情報および訂正情報の識別が容易であるため、入力装置１Ａは判定部３０を有していなくてもよい。
入力部１０Ａは、画像取得部１１と、音声入力部１２と、を有する。
画像取得部１１は、画像情報を取得する。画像取得部１１は、例えば、入力する文字列の画像を撮影するカメラである。実施の形態２では、画像取得部１１は、自動車のナンバープレートに記載された文字列を含む画像情報を取得する。例えば、画像取得部１１は、「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と記載された自動車のナンバープレートを含む画像情報を取得する。画像取得部１１で取得された画像情報は、情報処理部２０Ａに送信される。なお、画像情報としては、例えば、静止画、動画などの情報を用いることができる。
音声入力部１２は、音声情報を入力する。音声入力部１２は、例えば、ユーザの音声情報を入力するマイクロホンである。例えば、ユーザが音声入力部１２に向かって「ＡＢＣ」と発話することによって、音声情報が音声入力部１２に入力される。音声入力部１２に入力された音声情報は、情報処理部２０Ａに送信される。
実施の形態２では、画像取得部１１は、音声入力部１２に入力された音声入力によって制御されてもよい。例えば、ユーザが音声入力部１２に対して、音声入力として「Ｃａｐｔｕｒｅ」と発話する。この音声入力をトリガとして、画像取得部１１は画像情報を取得してもよい。
情報処理部２０Ａは、入力部１０Ａで取得した画像情報および音声情報をテキスト情報（文字情報）に変換する。情報処理部２０Ａは、画像処理部２１、音声処理部２２、第１変換部２３および第２変換部２４を有する。
画像処理部２１は、画像取得部１１で取得された画像情報から文字列情報を抽出する処理を行う。例えば、画像情報が複数の自動車のナンバープレートを含んでいる場合、ユーザによって選択された自動車のナンバープレートに記載されている文字列情報を抽出する。画像処理部２１で処理された画像情報は、第１変換部２３に送信される。
音声処理部２２は、音声入力部１２で入力された音声情報から文字情報を抽出する処理を行う。例えば、音声情報にノイズが含まれている場合、ノイズをフィルタリングしつつ、ユーザが発話した１つ又は複数の文字の情報を抽出する。音声処理部２２で処理された音声情報は、第２変換部２４に送信される。
第１変換部２３は、画像処理部２１で処理された画像情報に含まれる文字列情報をテキスト情報に変換する。これにより、入力情報を取得する。画像情報を文字列情報に変換するアルゴリズムとしては、例えば、ディープラーニングを利用した方法や、簡易なパターンマッチングなどを用いることができる。
第２変換部２４は、音声処理部２２で処理された音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する。これにより、訂正情報を取得する。
実施の形態２における入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０は、実施の形態１と同様であるため、説明を省略する。なお、実施の形態２では、画像取得部１１で取得した画像情報及び画像処理部２１で処理された画像情報は、表示部７０に送信され、表示部７０に表示されてもよい。
入力装置１Ａを構成する要素は、例えば、半導体素子などで実現可能である。入力装置１Ａを構成する要素は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。入力装置１Ａを構成する要素の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
入力装置１Ａを構成する要素は、例えば、制御部によって統括的に制御される。制御部は、例えば、プログラムを記憶したメモリと、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプロセッサに対応する処理回路（図示せず）を備える。例えば、制御部においては、プロセッサがメモリに記憶されたプログラムを実行する。実施の形態２では、制御部は、入力部１０Ａ、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および表示部７０を制御する。
次に、実施の形態２の入力方法の一例、即ち、入力装置１Ａの動作の一例について図１２を用いて説明する。図１２は、本開示に係る実施の形態２の入力方法の一例を示すフローチャートである。図１２に示すステップＳＴ１０〜ＳＴ１７は、入力装置１Ａによって実施される。以下、詳細に説明する。なお、図１２に示すステップＳＴ１５及びＳＴ１６は、実施の形態１のステップＳＴ５及びＳＴ６と同様である。
図１２に示すように、ステップＳＴ１０において、画像取得部１１によって画像情報を取得する。ステップＳＴ１０では、例えば、ユーザが「Ｃａｐｔｕｒｅ」と発話することによって、画像取得部１１が文字列情報を含む画像情報を取得する。
ステップＳＴ１１において、画像処理部２１及び第１変換部２３によって画像取得部１１で取得された画像情報に含まれる文字列情報をテキスト情報（文字情報）に変換する。例えば、画像情報に「ＡＢＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」の文字列情報が存在する場合、この文字列情報がテキスト情報に変換される。これにより、入力情報を取得する。このとき、図３に示す例と同様に、入力情報が「ＡＤＣ ＡＥＣＤ，Ｃｈｉｃａｇｏ」と誤って認識される場合がある。
ステップＳＴ１２において、表示部７０によって入力情報を表示する。ステップＳＴ１２では、画像情報に基づいて入力された入力情報を表示部７０によって表示する。ユーザは、表示部７０に表示された入力情報を確認することができる。これにより、ユーザは入力情報が誤って入力されていることを確認することができる。
ステップＳＴ１３において、音声入力部１２によって音声情報を入力する。ステップＳＴ１３では、例えば、ユーザが「ＡＢＣ」と発話することによって、音声入力部１２に音声情報を入力する。
ステップＳＴ１４において、音声処理部２２および第２変換部２４によって音声入力部１２で入力された音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する。これにより、訂正情報を取得する。
ステップＳＴ１５において、類似度算出部５０によって訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。
ステップＳＴ１５は、訂正情報の属性を判定するステップＳＴ１５Ａと、文字列の距離を算出するステップＳＴ１５Ｂと、を含む。ステップＳＴ１５Ａ及びＳＴ１５Ｂは、実施の形態１のステップＳＴ５Ａ及びＳＴ５Ｂと同様であるため、説明を省略する。
ステップＳＴ１６において、訂正処理部６０によって類似度に基づいて入力情報の文字列を訂正する。
ステップＳＴ１７において、訂正された入力情報を表示部７０によって表示する。
［入力情報の取得の例］
実施の形態２における入力情報の取得の一例について、図１３Ａ〜図１３Ｄを用いて説明する。図１３Ａ〜図１３Ｄは、入力情報の取得の一例を説明する概略図である。図１３Ａ〜図１３Ｄに示す例では、表示部７０に表示される画面を示しており、複数の文字列情報が含まれる画像情報から入力情報を取得する例について示す。
図１３Ａに示すように、ユーザは、音声入力部１２に向かって「Ｃａｐｔｕｒｅ」と発話する。これにより、画像取得部１１が画像情報を取得する。図１３Ａに示す例では、３台の自動車Ｃ１，Ｃ２，Ｃ３が撮影されている。自動車Ｃ１，Ｃ２，Ｃ３は、それぞれ、文字列情報が記載されたナンバープレートを有している。このため、画像取得部１１が取得した画像情報には、３つの文字列情報が存在する。画像取得部１１で取得された画像情報は、画像処理部２１に送信される。
図１３Ｂに示すように、表示部７０に、自動車Ｃ１，Ｃ２，Ｃ３の選択画面を表示する。具体的には、画像処理部２１は、画像取得部１１で取得された画像情報から、自動車Ｃ１，Ｃ２，Ｃ３の３つの文字列情報を抽出し、自動車Ｃ１，Ｃ２，Ｃ３のそれぞれに対し、選択番号「１」、「２」、「３」を割り当てる。
図１３Ｃに示すように、画像処理部２１は、選択番号「１」、「２」、「３」を自動車Ｃ１，Ｃ２，Ｃ３のナンバープレートの位置に対応させて、表示部７０に表示する。例えば、自動車Ｃ１のナンバープレート部分を切り取った画像情報と選択番号「１」を表示する。自動車Ｃ２のナンバープレート部分を切り取った画像情報と選択番号「２」を表示する。自動車Ｃ３のナンバープレート部分を切り取った画像情報と選択番号「３」を表示する。ユーザは、選択番号を音声入力部１２に発話することによって、選択番号を選択する。例えば、ユーザは選択番号「２」を発話することによって、自動車Ｃ２のナンバープレート部分の画像情報を選択する。選択された画像情報は、第１変換部２３に送信される。
図１３Ｄに示すように、第１変換部２３は、画像情報に含まれる文字列情報をテキスト情報に変換する。
図１３Ａ〜図１３Ｄに示す例のように、複数の文字列情報が含まれる画像情報においては、複数の文字列情報の中から１つの文字列情報をユーザが選択し、入力情報を取得することができる。
実施の形態２における入力情報の取得の別例について、図１４Ａ〜図１４Ｃを用いて説明する。図１４Ａ〜図１４Ｃは、入力情報の取得の別例を説明する概略図である。図１４Ａ〜図１４Ｄに示す例では、表示部７０に映される画面を示しており、複数の文字列情報が含まれる画像情報から入力情報を取得する例について示す。
図１４Ａに示すように、表示部７０に表示される画像情報を複数の領域に分割する。図１４Ａに示す例では、画像情報を４つの領域に分割する。例えば、画像処理部２１は、画像取得部１１で取得された画像情報を、左上、右上、左下および右下の４つの領域に分割する。また、画像処理部２１は、左上、右上、右下および左下の領域に対して、それぞれ、選択番号「１」、「２」、「３」、「４」を割り当てる。ユーザは、４つの領域のいずれかを選択する。例えば、自動車Ｃ１のナンバープレート部分の文字列情報を入力情報として取得したい場合、ユーザは、音声入力部１２に向かって選択番号「４」を発話する。
図１４Ｂに示すように、表示部７０に表示される画像情報において、ユーザが選択した領域が強調して表示される。次に、ユーザは、音声入力部１２に向かって「Ｃａｐｔｕｒｅ」と発話する。これにより、画像取得部１１が自動車Ｃ１のナンバープレート部分を含む画像情報を取得する。画像取得部１１で取得された画像情報は、第１変換部２３によってテキスト情報（文字情報）に変換される。これにより、入力情報を取得する。
図１４Ｃに示すように、表示部７０に、入力情報であるテキスト情報（文字情報）と自動車Ｃ１の画像情報とを表示する。また、表示部７０には、入力情報が誤っていないかを確認するメッセージを表示する。これにより、ユーザは入力情報を確認することができる。
図１４Ａ〜図１４Ｃに示す例のように、画像情報を複数の領域に分割し、複数の領域の中から１つの領域をユーザが選択し、選択した領域の画像情報から入力情報を取得することができる。
実施の形態２における入力情報の取得の別例について、図１５Ａ及び図１５Ｂを用いて説明する。図１５Ａ及び図１５Ｂは、入力情報の取得の別例を説明する概略図である。図１５Ａ及び図１５Ｂに示す例では、表示部７０に映される画面を示しており、複数の文字列情報が含まれる画像情報から入力情報を取得する例について示す。なお、図１５Ａ及び図１５Ｂに示す例では、画像情報が自動車Ｃ１，Ｃ２，Ｃ３のカラー情報を含む。例えば、自動車Ｃ１の色は赤色であり、自動車Ｃ２の色は灰色であり、自動車Ｃ３の色は青色である。
図１５Ａに示すように、ユーザは、音声入力部１２に向かって「Ｃａｐｔｕｒｅ ｒｅｄ」と発話する。これにより、画像取得部１１が赤色の自動車Ｃ１の画像情報を取得する。例えば、画像処理部２１は、画像取得部１１から取得される画像情報から自動車Ｃ１，Ｃ２，Ｃ３の色を識別する。これにより、画像取得部１１は、音声入力部１２に入力されたユーザの色を指定する音声情報に基づいて、ユーザの指定した色の自動車の画像情報を取得する。
図１５Ｃに示すように、表示部７０に、入力情報であるテキスト情報（文字情報）、自動車Ｃ１の画像情報および自動車Ｃ１の色の情報を表示する。また、表示部７０には、入力情報が誤っていないかを確認するメッセージを表示する。これにより、ユーザは入力情報を確認することができる。
図１５Ａ及び図１５Ｂに示す例のように、複数の色を有する対象物が画像情報に含まれている場合、ユーザが色指定をすることによって、指定した色を有する対象物の画像情報を取得し、取得した画像情報から入力情報を取得することができる。
実施の形態２における入力情報の取得の別例について、図１６Ａ〜図１６Ｄを用いて説明する。図１６Ａ〜図１６Ｄは、入力情報の取得の別例を説明する概略図である。図１６Ａ〜図１６Ｄに示す例では、表示部７０に映される画面を示しており、複数の文字列情報が含まれる画像情報から入力情報を取得する例について示す。なお、図１６Ａ〜図１６Ｄに示す例では、画像情報が自動車Ｃ１，Ｃ２，Ｃ３のカラー情報を含む。例えば、自動車Ｃ１，Ｃ２の色は赤色であり、自動車Ｃ３の色は青色である。
図１６Ａに示すように、ユーザは、音声入力部１２に向かって「Ｃａｐｔｕｒｅ ｒｅｄ」と発話する。画像処理部２１は、画像取得部１１から取得される画像情報から自動車Ｃ１，Ｃ２，Ｃ３の色を識別する。図１６Ａに示す例では、自動車Ｃ１，Ｃ２が赤色である。
このため、図１６Ｂに示すように、画像処理部２１は、自動車Ｃ１，Ｃ２に対して選択番号「１」、「２」を割り当てる。ユーザは、選択番号を音声入力部１２に発話することによって、選択番号を選択する。例えば、ユーザは選択番号「２」を発話することによって、自動車Ｃ２を選択する。これにより、画像取得部１１が自動車Ｃ２の画像情報を取得する。
図１６Ｃに示すように、表示部７０に、入力情報であるテキスト情報（文字情報）、自動車Ｃ２の画像情報および自動車Ｃ２の色の情報を表示する。また、表示部７０には、入力情報が誤っていないかを確認するメッセージを表示する。これにより、ユーザは入力情報を確認することができる。
図１６Ｄに示す例では、図１６Ｂと同様に、同じ色の複数の自動車が画像情報に含まれている場合に、ユーザが選択した自動車を強調して示している。このように、ユーザが選択した自動車が矩形状の枠によって表示されることによって、ユーザは選択した自動車を容易に確認することができる。
図１６Ａ〜図１６Ｄに示す例のように、同じ色を有する複数の対象物が画像情報に含まれる場合、ユーザが色と選択番号を指定することによって、指定した対象物の画像情報を取得し、取得した画像情報から入力情報を取得することができる。
［効果］
実施の形態２の入力装置１Ａおよび入力方法によれば、以下の効果を奏することができる。
入力装置１Ａにおいては、入力情報は文字列が撮影された画像情報であり、訂正情報は１つ又は複数の文字の情報を含む音声情報である。入力部１０Ａは、画像情報を取得する画像取得部１１と、音声情報を入力する音声入力部１２と、を有する。情報処理部２０Ａは、第１変換部２３と、第２変換部２４と、を有する。第１変換部２３は、画像取得部１１で取得された画像情報に含まれる文字列情報をテキスト情報に変換する。第２変換部２４は、音声入力部１２で入力された音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する。
このような構成により、入力情報をより容易に訂正することができる。また、入力情報を画像情報で取得し、訂正情報を音声情報で入力することによって、入力情報の取得および入力情報の訂正を迅速かつスムーズに行うことができる。
実施の形態２の入力方法についても、上述した入力装置１Ａの効果と同様の効果を奏する。
なお、実施の形態２では、情報処理部２０Ａが画像処理部２１および音声処理部２２を備える例について説明したが、これに限定されない。画像処理部２１および音声処理部２２は、必須の構成ではない。
実施の形態２では、入力方法がステップＳＴ１０〜ＳＴ１７を含む例について説明したが、これに限定されない。入力方法は、ステップを増減してもよいし、ステップを統合してもよい。例えば、入力方法は、訂正情報が入力されたか否かを判定するステップを有していてもよい。この場合、訂正情報が入力されている場合、処理がステップＳＴ１４〜ＳＴ１７に進んでもよい。訂正情報が入力されていない場合、処理が終了してもよい。
実施の形態２では、入力情報の取得の例として、図１３Ａ〜１３Ｄ、図１４Ａ〜１４Ｃ、図１５Ａ〜１５Ｂおよび図１６Ａ〜１６Ｄに示す例を挙げて説明したが、入力情報の取得はこれらに限定されない。実施の形態２では、画像情報から入力情報を取得すればよい。
（実施の形態３）
本開示の実施の形態３に係る入力装置について説明する。なお、実施の形態３では、主に実施の形態２と異なる点について説明する。実施の形態３においては、実施の形態２と同一又は同等の構成については同じ符号を付して説明する。また、実施の形態３では、実施の形態２と重複する記載は省略する。
実施の形態３の入力装置の一例について、図１７を用いて説明する。図１７は、本開示に係る実施の形態３の入力装置１Ｂの構成の一例を示すブロック図である。
実施の形態３では、視線検知部１３を備える点で、実施の形態２と異なる。
図１７に示すように、入力装置１Ｂの入力部１０Ｂは、画像取得部１１および音声入力部１２に加えて、視線検知部１３を備える。
視線検知部１３は、ユーザの視線を検知する。視線検知部１３は、例えば、ユーザの顔部分を撮影するカメラである。視線検知部１３で検知されたユーザの視線の情報は、画像処理部２１に送信される。
図１８は、入力情報の取得の一例を説明する概略図である。図１８に示す例では、表示部７０に映される画面を示しており、複数の文字列情報が含まれる画像情報から入力情報を取得する例について示す。
図１８に示すように、視線検知部１３は、ユーザの視線を検知し、ユーザが自動車Ｃ１，Ｃ２，Ｃ３のうちいずれの自動車を見ているかを検知する。画像処理部２１は、視線検知部１３によって検知されたユーザの視線の情報に基づいて、ユーザが見ている自動車を判定する。図１５に示す例では、画像処理部２１は、ユーザが自動車Ｃ３を見ていると判定する。
画像処理部２１は、ユーザが見ていると判定した自動車Ｃ３に対して、矩形状の枠を表示してもよい。矩形状の枠は、表示部７０に表示される。これにより、ユーザは、ユーザ自身が視線で選択している自動車を確認することができる。
ユーザが音声入力部１２に向かって「Ｃａｐｔｕｒｅ」と発話することによって、画像取得部１１が自動車Ｃ３のナンバープレート部分の画像情報を取得する。第１変換部２３は、画像情報に含まれる文字列情報をテキスト情報に変換する。
このように、複数の文字列情報が含まれる画像情報においては、ユーザの視線の情報に基づいて複数の文字列情報の中から１つの文字列情報をユーザの視線によって選択し、入力情報を取得することができる。
［効果］
実施の形態３の入力装置１Ｂによれば、以下の効果を奏することができる。
入力装置１Ｂの入力部１０Ｂは、画像取得部１１および音声入力部１２に加えて、視線検知部１３を備える。このような構成により、視線検知部１３によってユーザの視線の状を取得することができる。これにより、例えば、複数の文字列情報が含まれる画像情報においては、ユーザの視線の情報に基づいて複数の文字列情報の中から１つの文字列情報を選択し、入力情報を取得することができる。その結果、入力情報を迅速かつスムーズに取得することができる。
（実施の形態４）
本開示の実施の形態４に係る入力システムについて説明する。なお、実施の形態４では、主に実施の形態２と異なる点について説明する。実施の形態４においては、実施の形態２と同一又は同等の構成については同じ符号を付して説明する。また、実施の形態４では、実施の形態２と重複する記載は省略する。
実施の形態４の入力システムの一例について、図１９を用いて説明する。図１９は、本開示に係る実施の形態４の入力システム１００の構成の一例を示すブロック図である。
図１９に示すように、入力システム１００は、移動体に搭載される演算処理装置８０と、演算処理装置８０とネットワークを介して通信するサーバ９０と、を備える。
＜演算処理装置＞
演算処理装置８０は、画像情報および音声情報を取得し、サーバ９０へ送信する。
演算処理装置８０は、入力部１０Ａ、表示部７０、記憶部８１および第１通信部８２を備える。なお、入力部１０Ａおよび表示部７０は、実施の形態２と同様のため説明を省略する。
記憶部８１は、入力部１０Ａで取得した情報及びサーバ９０から受信した情報を記憶する記憶媒体である。具体的には、記憶部８１は、画像取得部１１で取得された画像情報、音声入力部１２で入力された音声情報、およびサーバ９０で処理された情報を記憶する。
記憶部８１は、ハードディスク（ＨＤＤ）、ＳＳＤ、ＲＡＭ、ＤＲＡＭ、強誘電体メモリ、フラッシュメモリ、磁気ディスク、又はこれらの組み合わせによって実現できる。
第１通信部８２は、サーバ９０とネットワークを介して通信する。第１通信部８２は、所定の通信規格に準拠してサーバ９０との通信を行う回路を含む。所定の通信規格は、例えば、ＬＡＮ、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標）、ＣＡＮ（controller area network）、ＳＰＩ（Serial Peripheral Interface）を含む。
演算処理装置８０は、入力部１０Ａで入力された画像情報および音声情報を記憶部８１に記憶する。演算処理装置８０は、記憶部８１に記憶された画像情報および音声情報を、第１通信部８２によってネットワークを介してサーバ９０に送信する。また、演算処理装置８０は、第１通信部８２によってネットワークを介してサーバ９０から入力情報を受信し、記憶部８１に記憶する。演算処理装置８０は、表示部７０によって入力情報を表示する。
演算処理装置８０を構成する要素は、例えば、半導体素子などで実現可能である。演算処理装置８０を構成する要素は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。演算処理装置８０を構成する要素の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
演算処理装置８０を構成する要素は、例えば、第１制御部によって統括的に制御される。第１制御部は、例えば、プログラムを記憶したメモリと、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプロセッサに対応する処理回路（図示せず）を備える。例えば、第１制御部においては、プロセッサがメモリに記憶されたプログラムを実行する。実施の形態４では、第１制御部は、入力部１０Ａ、表示部７０、記憶部８１および第１通信部８２を制御する。
＜サーバ＞
サーバ９０は、演算処理装置８０から画像情報および音声情報を受信し、画像情報および音声情報に基づいて入力情報および訂正情報を取得する。また、サーバ９０は、画像情報により得られた入力情報を、音声情報により得られた訂正情報に基づいて訂正する。
サーバ９０は、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および第２通信部９１を備える。なお、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０は、実施の形態２と同様のため説明を省略する。
第２通信部９１は、演算処理装置８０とネットワークを介して通信する。第２通信部９１は、所定の通信規格に準拠して演算処理装置８０との通信を行う回路を含む。所定の通信規格は、例えば、ＬＡＮ、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標）、ＣＡＮ（controller area network）、ＳＰＩ（Serial Peripheral Interface）を含む。
サーバ９０は、第２通信部９１によってネットワークを介して、演算処理装置８０から画像情報及び音声情報を受信する。サーバ９０において、受信した画像情報及び音声情報は、情報処理部２０Ａに送信される。
情報処理部２０Ａは、画像情報及び音声情報をテキスト情報に変換し、入力情報および訂正情報を取得する。入力情報は、入力記憶部４０に送信され、記憶される、訂正情報は、類似度算出部５０に送信される。類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。類似度の情報は、訂正処理部６０に送信される。訂正処理部６０は、類似度に基づいて入力情報の文字列を訂正する。訂正された入力情報は、入力記憶部４０に送信され、記憶される。
サーバ９０は、第２通信部９１によってネットワークを介して、入力記憶部４０に記憶された入力情報を演算処理装置８０に送信する。
サーバ９０を構成する要素は、例えば、半導体素子などで実現可能である。サーバ９０を構成する要素は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＧＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。サーバ９０を構成する要素の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
サーバ９０を構成する要素は、例えば、第２制御部によって統括的に制御される。第２制御部は、例えば、プログラムを記憶したメモリと、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプロセッサに対応する処理回路（図示せず）を備える。例えば、第２制御部においては、プロセッサがメモリに記憶されたプログラムを実行する。実施の形態４では、第２制御部は、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および第２通信部９１を制御する。
次に、実施の形態４の入力方法の一例、即ち、入力システム１００の動作の一例について図２０を用いて説明する。図２０は、本開示に係る実施の形態４の入力方法の一例を示すフローチャートである。図２０に示すステップＳＴ２０〜ＳＴ３１は、入力システム１００によって実施される。以下、詳細に説明する。なお、図２０に示すステップＳＴ２０，ＳＴ２２，ＳＴ２４，ＳＴ２５，ＳＴ２７〜ＳＴ２９及びＳＴ３１は、それぞれ、実施の形態２のステップＳＴ１０〜ＳＴ１７と同様である。
図２０に示すように、ステップＳＴ２０において、演算処理装置８０の画像取得部１１によって画像情報を取得する。ステップＳＴ２０では、例えば、ユーザが音声入力部１２に対して「Ｃａｐｔｕｒｅ」と発話することによって、画像取得部１１が画像情報を取得する。
ステップＳＴ２１において、演算処理装置８０の第１通信部８２によって、ネットワークを介して画像情報をサーバ９０に送信する。サーバ９０は、第２通信部９１によって画像情報を受信する。
ステップＳＴ２２において、サーバ９０の情報処理部２０Ａによって画像情報に含まれる文字列情報をテキスト情報に変換する。これにより、入力情報を取得する。
ステップＳＴ２３において、サーバ９０の第２通信部によってネットワークを介して入力情報を演算処理装置８０に送信する。演算処理装置８０は、第１通信部８２によって入力情報を受信する。
ステップＳＴ２４において、演算処理装置８０の表示部７０によって入力情報を表示する。これにより、ユーザは入力情報が誤って入力されていないかを確認することができる。
ステップＳＴ２５において、演算処理装置８０の音声入力部１２によって音声情報を入力する。
ステップＳＴ２６において、演算処理装置８０の第１通信部８２によって、ネットワークを介して音声情報をサーバ９０に送信する。サーバ９０は、第２通信部９１によって音声情報を受信する。
ステップＳＴ２７において、サーバ９０の情報処理部２０Ａによって音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する。これにより、訂正情報を取得する。
ステップＳＴ２８において、サーバ９０の類似度算出部５０によって訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。
ステップＳＴ２８は、訂正情報の属性を判定するステップＳＴ２８Ａと、文字列の距離を算出するステップＳＴ２８Ｂと、を含む。ステップＳＴ２８Ａ及びＳＴ２８Ｂは、実施の形態２のステップＳＴ１５Ａ及びＳＴ１５Ｂと同様であるため、説明を省略する。
ステップＳＴ２９において、サーバ９０の訂正処理部６０によって類似度に基づいて入力情報の文字列を訂正する。
ステップＳＴ３０において、サーバ９０の第２通信部によってネットワークを介して、訂正された入力情報を演算処理装置８０に送信する。演算処理装置８０は、第１通信部８２によって訂正された入力情報を受信する。
ステップＳＴ３１において、演算処理装置８０の表示部７０によって、訂正された入力情報を表示する。
［効果］
実施の形態４の入力システム及び入力方法によれば、以下の効果を奏することができる。
入力システム１００は、移動体に搭載される演算処理装置８０と、演算処理装置８０とネットワークを介して通信するサーバ９０と、を備える。演算処理装置８０は、入力部１０Ａ、表示部７０、記憶部８１および第１通信部８２を有する。入力部１０Ａは、画像情報および音声情報を入力する。表示部７０は、入力情報を表示する。記憶部８１は、画像情報、音声情報および入力情報を記憶する。第１通信部８２は、サーバ９０とネットワークを介して通信する。サーバ９０は、情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および第２通信部９１を有する。情報処理部２０Ａは、画像情報及び音声情報をテキスト情報に変換する。入力記憶部４０は、入力情報を記憶する。類似度算出部５０は、訂正情報の１つ又は複数の文字を用いて入力情報の文字列を編集し、編集前と編集後の入力情報の文字列の類似度を算出する。訂正処理部６０は、類似度算出部５０で算出された類似度に基づいて前記入力情報の文字列を訂正する。
このような構成により、入力情報をより容易に訂正することができる。また、入力情報を画像情報で取得し、訂正情報を音声情報で入力することによって、入力情報の取得および入力情報の訂正を迅速かつスムーズに行うことができる。
また、入力システム１００では、演算処理装置８０で取得した画像情報及び音声情報をサーバ９０へ送信し、サーバ９０でこれらの情報に基づいて入力情報を訂正している。これにより、演算処理装置８０の処理の負荷を低減することができる。
実施の形態４の入力方法についても、上述した入力システム１００の効果と同様の効果を奏する。
なお、実施の形態４では、入力システム１００が画像情報に基づいて入力情報を取得し、音声情報に基づいて訂正情報を取得する例について説明したが、これに限定されない。入力システム１００は、文字列を含む入力情報、および１つ又は複数の文字を含む訂正情報を取得できればよい。例えば、入力情報は、音声入力部によって取得される音声情報、入力インタフェースによって取得される文字情報などに基づいて取得されてもよい。訂正情報についても、入力インタフェースによって取得される文字情報などに基づいて取得されてもよい。
実施の形態４では、入力システム１００が演算処理装置８０とサーバ９０とを備える例について説明したが、これに限定されない。入力システム１００は、演算処理装置８０およびサーバ以外の機器を備えていてもよい。また、入力システム１００は、複数の演算処理装置８０を備えていてもよい。
実施の形態４では、演算処理装置８０が入力部１０Ａ、表示部７０、記憶部８１および第１通信部８２を有する例について説明したが、これに限定されない。表示部７０および記憶部８１は必須の構成ではない。演算処理装置８０を構成する要素は、増減してもよい。あるいは、演算処理装置８０を構成する複数の要素のうち２つ以上の要素は、統合されてもよい。例えば、演算処理装置８０は、情報処理部２０Ａを有していてもよい。
実施の形態４では、サーバ９０が情報処理部２０Ａ、入力記憶部４０、類似度算出部５０、訂正処理部６０および第２通信部９１を有する例について説明したが、これに限定されない。情報処理部２０Ａおよび入力記憶部４０は必須の構成ではない。サーバ９０を構成する要素は、増減してもよい。あるいは、サーバ９０を構成する複数の要素のうち２つ以上の要素は、統合されてもよい。
実施の形態４では、入力方法がステップＳＴ２０〜ＳＴ３１を含む例について説明したが、これに限定されない。入力方法は、ステップを増減してもよいし、ステップを統合してもよい。例えば、入力方法は、訂正情報が入力されたか否かを判定するステップを有していてもよい。この場合、訂正情報が入力されている場合、処理がステップＳＴ２５〜ＳＴ３１に進んでもよい。訂正情報が入力されていない場合、処理が終了してもよい。
実施の形態１〜３の入力装置１，１Ａ，１Ｂおよび実施の形態４の入力システム１００は、入力部１０，１０Ａ，１０Ｂに入力される情報（例えば、画像情報、音声情報）に基づいて取得された入力情報および訂正情報を教師データとして用いて、最良の訂正を学習する学習処理を実施してもよい。学習処理を実施することによって、入力部１０，１０Ａ，１０Ｂに入力される情報に基づく入力情報の訂正の精度を向上させることができる。例えば、実施の形態１〜３の入力装置１，１Ａ，１Ｂおよび実施の形態４の入力システム１００は、入力部１０，１０Ａ，１０Ｂに入力される情報（例えば、画像情報、音声情報）に基づいて取得された入力情報および訂正情報を教師データとして用いて学習する学習部を備えていてもよい。学習部は、例えば、ニューラルネットワークモデルに従って機械学習を実行してもよい。
実施の形態１〜４では、移動体が自動車である例について説明したが、これに限定されない。移動体は、例えば、バイク、飛行機、船舶などであってもよい。
実施の形態１〜３の入力装置１，１Ａ，１Ｂおよび実施の形態４の入力システム１００は、移動体が警察車両である場合、より有益である。警察車両は、緊急性を要する状況での入力情報の訂正が行われる場合がある。また、警察車両は、一般車両と比べて、ノイズが発生しやすい環境であり、入力情報が誤って認識されやすい状況にある。入力装置１，１Ａ，１Ｂおよび入力システム１００は、入力情報を容易に訂正することができるため、警察車両に搭載される場合、より有益である。
本開示は、添付図面を参照しながら好ましい実施の形態に関連して充分に記載されているが、この技術に熟練した人々にとっては種々の変形や修正は明白である。そのような変形や修正は、添付した請求の範囲による本開示の範囲から外れない限りにおいて、その中に含まれると理解されるべきである。
本開示は、入力情報を容易に訂正することができるため、自動車などの移動体に搭載される入力装置に有用である。
１，１Ａ，１Ｂ 入力装置
１０，１０Ａ，１０Ｂ 入力部
１１ 画像取得部
１２ 音声入力部
１３ 視線検知部
２０，２０Ａ 情報処理部
２１ 画像処理部
２２ 音声処理部
２３ 第１変換部
２４ 第２変換部
３０ 判定部
４０ 入力記憶部
５０ 類似度算出部
５１ 距離算出部
５２ 属性判定部
６０ 訂正処理部
７０ 表示部
８０ 演算処理装置
８１ 記憶部
８２ 第１通信部
９０ サーバ
９１ 第２通信部
１００ 入力システム

Claims (12)

  1. 移動体に搭載される入力装置であって、
    文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
    前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
    前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
    を備える、入力装置。
  2. 前記類似度算出部は、前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の距離を算出する距離算出部を含み、
    前記訂正処理部は、前記距離算出部で算出された前記文字列の距離に基づいて前記入力情報の文字列を訂正する、
    請求項１に記載の入力装置。
  3. 前記距離算出部は、前記入力情報の文字列に対して挿入、削除、および置換のうち少なくともいずれか１つの編集処理を実施することによって、編集前と編集後の前記入力情報の文字列の距離を算出する、
    請求項２に記載の入力装置。
  4. 前記訂正処理部は、前記距離算出部で算出された前記文字列の距離のうち、最も距離が小さい部分の前記入力情報の文字列を訂正する、
    請求項３に記載の入力装置。
  5. 前記入力情報は、前記入力情報の複数の文字列を分類する複数の属性を有し、
    前記類似度算出部は、前記訂正情報が前記複数の属性のうちいずれの属性に分類されるかを判定する属性判定部を有し、
    前記類似度算出部は、前記入力情報と前記訂正情報の属性に基づいて、前記類似度を算出する、
    請求項１〜４のいずれか一項に記載の入力装置。
  6. 前記訂正処理部は、前記入力情報と前記訂正情報との属性が一致する前記入力情報の文字列のうち、最も類似度が高い部分の文字を訂正する、
    請求項５に記載の入力装置。
  7. 前記訂正処理部は、前記入力情報の文字列において、前記類似度算出部によって算出される複数の類似度のうち類似度が最も高い部分が複数存在する場合、最初に算出された類似度が最も高い部分の文字を訂正する、
    請求項１〜６のいずれか一項に記載の入力装置。
  8. 更に、
    前記入力情報および訂正された前記入力情報を表示する表示部を備える、
    請求項１〜７のいずれか一項に記載の入力装置。
  9. 前記入力部は、前記入力情報を示す音声情報及び前記訂正情報を示す音声情報を入力する音声入力部を含み、
    前記入力装置は、更に、
    前記音声入力部で入力された前記音声情報が前記入力情報であるか、又は前記訂正情報であるかを判定する判定部を備え、
    前記類似度算出部は、前記判定部によって音声情報が前記訂正情報であると判定された場合、前記類似度を算出する、
    請求項１〜８のいずれか一項に記載の入力装置。
  10. 前記入力情報は、文字列が撮影された画像情報であり、
    前記訂正情報は、１つ又は複数の文字の情報を含む音声情報であり、
    前記入力部は、前記画像情報を取得する画像取得部と、前記音声情報を入力する音声入力部と、を有し、
    前記入力装置は、更に、
    前記画像取得部で取得された前記画像情報に含まれる文字列情報をテキスト情報に変換する第１変換部と、
    前記音声入力部で入力された前記音声情報に含まれる１つ又は複数の文字の情報をテキスト情報に変換する第２変換部と、
    を備える、
    請求項１〜９のいずれか一項に記載の入力装置。
  11. 移動体において実施される入力方法であって、
    文字列を含む入力情報を入力するステップ、
    １つ又は複数の文字を含む訂正情報を入力するステップ、
    前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出するステップ、
    算出された前記類似度に基づいて前記入力情報の文字列を訂正するステップ、
    を含む、入力方法。
  12. 移動体に搭載される演算処理装置と、
    前記演算処理装置とネットワークを介して通信するサーバと、
    を備え、
    前記演算処理装置は、
    文字列を含む入力情報および、１つ又は複数の文字を含む訂正情報を入力する入力部と、
    前記サーバとネットワークを介して通信する第１通信部と、
    を有し、
    前記サーバは、
    前記演算処理装置と前記ネットワークを介して通信する第２通信部と、
    前記訂正情報の１つ又は複数の文字を用いて前記入力情報の文字列を編集し、編集前と編集後の前記入力情報の文字列の類似度を算出する類似度算出部と、
    前記類似度算出部で算出された前記類似度に基づいて前記入力情報の文字列を訂正する訂正処理部と、
    を有する、入力システム。
JP2020550400A 2018-10-03 2019-09-27 入力装置、入力方法および入力システム Active JP7178576B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862740677P 2018-10-03 2018-10-03
US62/740,677 2018-10-03
PCT/JP2019/038287 WO2020071286A1 (ja) 2018-10-03 2019-09-27 入力装置、入力方法および入力システム

Publications (2)

Publication Number Publication Date
JPWO2020071286A1 true JPWO2020071286A1 (ja) 2021-09-02
JP7178576B2 JP7178576B2 (ja) 2022-11-28

Family

ID=70055009

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020550400A Active JP7178576B2 (ja) 2018-10-03 2019-09-27 入力装置、入力方法および入力システム

Country Status (3)

Country Link
US (1) US20210240918A1 (ja)
JP (1) JP7178576B2 (ja)
WO (1) WO2020071286A1 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008099664A1 (ja) * 2007-02-15 2008-08-21 Mitsubishi Heavy Industries, Ltd. 車両番号認識装置
JP2012247948A (ja) * 2011-05-26 2012-12-13 Nippon Telegr & Teleph Corp <Ntt> 辞書管理装置、辞書管理方法、辞書管理プログラム
JP2013156349A (ja) * 2012-01-27 2013-08-15 Nec Corp 音声認識結果修正支援システム、音声認識結果修正支援方法および音声認識結果修正支援プログラム
JP2013225115A (ja) * 2012-03-21 2013-10-31 Denso It Laboratory Inc 音声認識装置、音声認識プログラム、及び、音声認識方法
JP2016180917A (ja) * 2015-03-25 2016-10-13 日本電信電話株式会社 言い直し検出装置、音声認識システム、言い直し検出方法、プログラム
US9727804B1 (en) * 2005-04-15 2017-08-08 Matrox Electronic Systems, Ltd. Method of correcting strings

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2395595B (en) * 2002-11-14 2005-01-05 Nathan Mendel Rau Automated license plate recognition system for use in law enforcement vehicles
JP4928310B2 (ja) * 2007-03-02 2012-05-09 キヤノン株式会社 ナンバープレート認識装置、その制御方法、コンピュータプログラム
US10867327B1 (en) * 2014-06-27 2020-12-15 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US10706311B2 (en) * 2015-08-21 2020-07-07 3M Innovative Properties Company Increasing dissimilarity of characters disposed on an optically active article
US10438083B1 (en) * 2016-09-27 2019-10-08 Matrox Electronic Systems Ltd. Method and system for processing candidate strings generated by an optical character recognition process
KR101873576B1 (ko) * 2016-10-31 2018-07-03 한국전자통신연구원 자동차 번호판 정보 인식 시스템 및 방법
US11856331B1 (en) * 2017-05-10 2023-12-26 Waylens, Inc. Extracting and transmitting video analysis metadata for a remote database
CN107679531A (zh) * 2017-06-23 2018-02-09 平安科技（深圳）有限公司 基于深度学习的车牌识别方法、装置、设备及存储介质
US11030466B2 (en) * 2018-02-11 2021-06-08 Nortek Security & Control Llc License plate detection and recognition system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9727804B1 (en) * 2005-04-15 2017-08-08 Matrox Electronic Systems, Ltd. Method of correcting strings
WO2008099664A1 (ja) * 2007-02-15 2008-08-21 Mitsubishi Heavy Industries, Ltd. 車両番号認識装置
JP2012247948A (ja) * 2011-05-26 2012-12-13 Nippon Telegr & Teleph Corp <Ntt> 辞書管理装置、辞書管理方法、辞書管理プログラム
JP2013156349A (ja) * 2012-01-27 2013-08-15 Nec Corp 音声認識結果修正支援システム、音声認識結果修正支援方法および音声認識結果修正支援プログラム
JP2013225115A (ja) * 2012-03-21 2013-10-31 Denso It Laboratory Inc 音声認識装置、音声認識プログラム、及び、音声認識方法
JP2016180917A (ja) * 2015-03-25 2016-10-13 日本電信電話株式会社 言い直し検出装置、音声認識システム、言い直し検出方法、プログラム

Also Published As

Publication number Publication date
JP7178576B2 (ja) 2022-11-28
US20210240918A1 (en) 2021-08-05
WO2020071286A1 (ja) 2020-04-09

Similar Documents

Publication Publication Date Title
CN103729120B (zh) 用于产生缩略图的方法及其电子设备
JP4267584B2 (ja) 機器制御装置及びその方法
US10303433B2 (en) Portable terminal device and information processing system
KR102124466B1 (ko) 웹툰 제작을 위한 콘티를 생성하는 장치 및 방법
JP2007317022A (ja) 手書文字処理装置及び手書文字処理方法
CN106778456B (zh) 一种手写输入的优化方法及装置
US20160210276A1 (en) Information processing device, information processing method, and program
JP2003216955A (ja) ジェスチャ認識方法、ジェスチャ認識装置、対話装置及びジェスチャ認識プログラムを記録した記録媒体
CN114239610A (zh) 多国语言语音辨识及翻译方法与相关的系统
JP7178576B2 (ja) 入力装置、入力方法および入力システム
JP5046148B2 (ja) 画像解析装置および対象物認識方法
US20220335752A1 (en) Emotion recognition and notification system
JP2002063548A (ja) 手書き文字認識方法
JPH0150954B2 (ja)
JPH0650527B2 (ja) 実時間手書き軌跡認識方法
JP4651876B2 (ja) パターン識別装置、パターン識別方法及びパターン識別用プログラム
JP6706911B2 (ja) アイディア抽出支援システム
CN113539235A (zh) 文本分析与语音合成方法、装置、系统及存储介质
JP2010282083A (ja) 誤認識訂正装置、方法及びプログラム
JP2005258577A (ja) 文字入力装置、文字入力方法、文字入力プログラム及び記録媒体
JP2004259076A (ja) 画像認識方法及び装置
JP7247472B2 (ja) 情報処理装置及びプログラム
JP2995818B2 (ja) 文字切り出し方法
JP3245241B2 (ja) 文字認識装置および方法
JPH06119496A (ja) 手書き情報処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210402

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220607

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221027

R151 Written notification of patent or utility model registration

Ref document number: 7178576

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151