JP2016535335A5 - - Google Patents

Claims (19)

1. データ処理装置によって実行される方法であって、
   画像を受信するステップと、
   前記画像内に描かれたテキストをそれぞれが含む複数のはっきりと異なるテキストブロックを特定するステップと、
   関連するテキストブロック内に描かれたテキストの視覚的特徴と前記関連するテキストブロック内に描かれた前記テキストの配列とに基づいて前記関連するテキストブロックの複数の集合を特定するステップであって、関連するテキストブロックの各集合が、一致している視覚的特徴を持つテキスト含む、ステップと、
   前記画像に関して、前記特定された複数の集合に基づいて、複数の提示コンテキストから提示コンテキストを選択するステップであって、各提示コンテキストが、前記特定された複数の集合における特定の集合内に含まれた前記テキストの少なくとも一部の翻訳を提示するための対応するユーザインターフェースを有し、各提示コンテキストのための前記ユーザインターフェースが、その他の提示コンテキストのための前記ユーザインターフェースとは異なり、前記複数の提示コンテキストにおける第１の提示コンテキストのための前記ユーザインターフェースが、前記複数の提示コンテキストにおける第２の提示コンテキストのための前記ユーザインターフェースよりもテキストブロックの異なる集合の翻訳を含む、ステップと、
   前記選択された提示コンテキストに対応する前記ユーザインターフェースを特定するステップと、
   前記特定された複数の集合とは別の集合に含まれたテキストの翻訳を提示していない間、前記選択されたユーザインターフェースを用いて前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストの前記少なくとも一部の翻訳を提示するステップとを含む、方法。
2. 前記画像に関する前記提示コンテキストを選択するステップが、
   少なくとも前記画像内に描かれた前記テキストの前記配列に基づいて、前記テキストの第1の部分が前記テキストの少なくとも1つのその他の部分よりも顕著に提示されると決定するステップを含み、
   前記選択された提示コンテキストに対応する前記ユーザインターフェースを特定するステップが、前記テキストにおける前記第１の部分の翻訳を提示するユーザインターフェースを選択するステップを含む請求項1に記載の方法。
3. 前記特定の集合内に描かれた前記テキストの少なくとも一部の翻訳を提示するステップが、前記テキストの前記第1の部分上のオーバーレイ内に前記テキストの前記第1の部分の前記翻訳を提示するステップを含む請求項2に記載の方法。
4. 前記提示コンテキストを選択するステップが、
   前記画像内に描かれた少なくとも1つのテキストブロックが前記画像内に描かれた２つ以上のテキストブロックに関連しないと決定するステップと、
   前記関連しないとの前記決定に応じて、前記２つ以上のテキストブロックの翻訳を一緒に提示すると共に、前記２つ以上のテキストブロックの前記翻訳とは別個に前記少なくとも１つのテキストブロックの翻訳を提示する、提示コンテキストを選択するステップと、
   を含む請求項1に記載の方法。
5. ２つ以上のテキストブロック内に描かれた前記テキストにおける複数の視覚的特徴間の類似性に基づいて関連付けられる前記２つ以上のテキストブロックを決定するステップをさらに含む請求項1に記載の方法。
6. ２つ以上のテキストブロックのそれぞれの対の間の距離が閾値の距離よりも短いことに基づいて関連付けられる前記２つ以上のテキストブロックを決定するステップをさらに含む請求項1に記載の方法。
7. 前記画像に関して同じ向きを持っている２つ以上のテキストブロック内に描かれたテキストに基づいて関連付けられる前記２つ以上のテキストブロックを決定するステップをさらに含む請求項1に記載の方法。
8. 前記提示コンテキストを選択するステップが、
   言語モデルに基づき、メニューのテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定するステップと、
   メニューのテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定するステップに基づき、各メニュー項目の翻訳を独立に提示する対応するユーザインターフェースを持っている提示コンテキストを選択するステップであって、前記対応するユーザインターフェースは、ユーザがその他のメニュー項目の翻訳を要求することを可能にするユーザインターフェースコントロールを含む、選択するステップと
   を含む請求項1に記載の方法。
9. 前記提示コンテキストを選択するステップが、
   言語モデルに基づき、複数の異なる道路標識のテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定するステップと、
   複数の異なる道路標識のテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定するステップに基づき、前記道路標識上のオーバーレイ内に各道路標識の翻訳を提示する対応するユーザインターフェースを持っている提示コンテキストを選択するステップと
   を含む請求項1に記載の方法。
10. データ処理装置と、
    前記データ処理装置とデータ通信するメモリストレージ装置であって、前記データ処理装置によって実行可能であり、そのように実行されると、前記データ処理装置に、
    画像を受信する動作、
    前記画像内に描かれたテキストをそれぞれが含む複数のはっきりと異なるテキストブロックを特定する動作、
    関連するテキストブロック内に描かれたテキストの視覚的特徴と前記関連するテキストブロック内に描かれた前記テキストの配列とに基づいて前記関連するテキストブロックの複数の集合を特定する動作であって、関連するテキストブロックの各集合が、一致している視覚的特徴を持つテキスト含む、特定する動作、
    前記画像に関して、前記特定された複数の集合に基づいて、複数の提示コンテキストから提示コンテキストを選択する動作であって、各提示コンテキストが、前記特定された複数の集合における特定の集合内に含まれた前記テキストの少なくとも一部の翻訳を提示するための対応するユーザインターフェースを有し、各提示コンテキストのための前記ユーザインターフェースが、その他の提示コンテキストのための前記ユーザインターフェースとは異なり、前記複数の提示コンテキストにおける第１の提示コンテキストのための前記ユーザインターフェースが、前記複数の提示コンテキストにおける第２の提示コンテキストのための前記ユーザインターフェースよりもテキストブロックの異なる集合の翻訳を含む、選択する動作、
    前記選択された提示コンテキストに対応する前記ユーザインターフェースを特定する動作、および
    前記特定された複数の集合とは別の集合に含まれたテキストの翻訳を提示していない間、前記選択されたユーザインターフェースを用いて前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストの前記少なくとも一部の翻訳を提示する動作を含む動作を実行させる命令を記憶する、メモリストレージ装置とを含むシステム。
11. 前記画像に関する前記提示コンテキストを選択する動作が、
    少なくとも前記画像内に描かれた前記テキストの前記配列に基づいて、前記テキストの第1の部分が前記テキストの少なくとも1つのその他の部分よりも顕著に提示されると決定することを含み、
    前記選択された提示コンテキストに対応する前記ユーザインターフェースを特定する動作が、前記テキストにおける前記第１の部分の翻訳を提示するユーザインターフェースを選択する動作を含む請求項10に記載のシステム。
12. 前記特定の集合内に描かれた前記テキストの少なくとも一部の翻訳を提示する動作が、前記テキストの前記第1の部分上のオーバーレイ内に前記テキストの前記第1の部分の前記翻訳を提示することを含む請求項11に記載のシステム。
13. 前記提示コンテキストを選択する動作が、
    前記画像内に描かれた少なくとも1つのテキストブロックが前記画像内に描かれた２つ以上のテキストブロックに関連しないと決定する動作と、
    前記関連しないとの前記決定に応じて、前記２つ以上のテキストブロックの翻訳を一緒に提示すると共に、前記２つ以上のテキストブロックの前記翻訳とは別個に前記少なくとも１つのテキストブロックの翻訳を提示する、提示コンテキストを選択する動作と、
    を含む請求項10に記載のシステム。
14. 前記命令が前記データ処理装置に実行させる前記動作が、さらに、
    ２つ以上のテキストブロック内に描かれた前記テキストにおける複数の視覚的特徴間の類似性に基づいて関連付けられる前記２つ以上のテキストブロックを決定する動作を含む請求項10に記載のシステム。
15. 前記命令が前記データ処理装置に実行させる前記動作が、さらに、
    ２つ以上のテキストブロックのそれぞれの対の間の距離が閾値の距離よりも短いことに基づいて関連付けられる前記２つ以上のテキストブロックを決定する動作を含む請求項10に記載のシステム。
16. 前記命令が前記データ処理装置に実行させる前記動作が、さらに、
    前記画像に関して同じ向きを持っている２つ以上のテキストブロック内に描かれたテキストに基づいて関連付けられる前記２つ以上のテキストブロックを決定する動作を含む請求項10に記載のシステム。
17. 前記提示コンテキストを選択する動作が、
    言語モデルに基づき、メニューのテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定する動作と、
    メニューのテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定する動作に基づき、各メニュー項目の翻訳を独立に提示する対応するユーザインターフェースを持っている提示コンテキストを選択する動作であって、前記対応するユーザインターフェースは、ユーザがその他のメニュー項目の翻訳を要求することを可能にするユーザインターフェースコントロールを含む、選択する動作と
    を含む請求項10に記載のシステム。
18. 前記提示コンテキストを選択する動作が、
    言語モデルに基づき、複数の異なる道路標識のテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定する動作と、
    複数の異なる道路標識のテキストを含む前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストを決定する動作に基づき、前記道路標識上のオーバーレイ内に各道路標識の翻訳を提示する対応するユーザインターフェースを持っている提示コンテキストを選択する動作と
    を含む請求項10に記載のシステム。
19. コンピュータプログラムを符号化された非一時的コンピュータストレージ媒体であって、前記プログラムが、データ処理装置によって実行されるときに、前記データ処理装置に、
    画像を受信する動作と、
    前記画像内に描かれたテキストをそれぞれが含む複数のはっきりと異なるテキストブロックを特定する動作と、
    関連するテキストブロック内に描かれたテキストの視覚的特徴と前記関連するテキストブロック内に描かれた前記テキストの配列とに基づいて前記関連するテキストブロックの複数の集合を特定する動作であって、関連するテキストブロックの各集合が、一致している視覚的特徴を持つテキスト含む、特定する動作と、
    前記画像に関して、前記特定された複数の集合に基づいて、複数の提示コンテキストから提示コンテキストを選択する動作であって、各提示コンテキストが、前記特定された複数の集合における特定の集合内に含まれた前記テキストの少なくとも一部の翻訳を提示するための対応するユーザインターフェースを有し、各提示コンテキストのための前記ユーザインターフェースが、その他の提示コンテキストのための前記ユーザインターフェースとは異なり、前記複数の提示コンテキストにおける第１の提示コンテキストのための前記ユーザインターフェースが、前記複数の提示コンテキストにおける第２の提示コンテキストのための前記ユーザインターフェースよりもテキストブロックの異なる集合の翻訳を含む、選択する動作と、
    前記選択された提示コンテキストに対応する前記ユーザインターフェースを特定する動作と、
    前記特定された複数の集合とは別の集合に含まれたテキストの翻訳を提示していない間、前記選択されたユーザインターフェースを用いて前記選択された提示コンテキストにおける前記特定の集合内に含まれた前記テキストの前記少なくとも一部の翻訳を提示する動作とを含む動作を実行させる命令を含む、非一時的コンピュータストレージ媒体。