JP7221233B2 - 情報提供システム、情報提供方法、およびプログラム - Google Patents
情報提供システム、情報提供方法、およびプログラム Download PDFInfo
- Publication number
- JP7221233B2 JP7221233B2 JP2020007687A JP2020007687A JP7221233B2 JP 7221233 B2 JP7221233 B2 JP 7221233B2 JP 2020007687 A JP2020007687 A JP 2020007687A JP 2020007687 A JP2020007687 A JP 2020007687A JP 7221233 B2 JP7221233 B2 JP 7221233B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- information
- display
- image
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
- G01C21/3676—Overview of the route on the road map
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3407—Route searching; Route guidance specially adapted for specific applications
- G01C21/3423—Multimodal routing, i.e. combining two or more modes of transportation, where the modes can be any of, e.g. driving, walking, cycling, public transport
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/005—Traffic control systems for road vehicles including pedestrian guidance indicator
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/09—Recognition of logos
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Human Computer Interaction (AREA)
- Navigation (AREA)
- User Interface Of Digital Computer (AREA)
- Traffic Control Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Description
本願は、2017年6月16日に、日本に出願された特願2017-118693号に基づき優先権を主張し、その内容をここに援用する。
(1):この発明の一態様に係る情報提供システムは、撮像部(130)と、前記撮像部により撮像された画像を表示する表示部(140)と、前記撮像部により撮像された画像を解析し、前記画像に含まれる意味情報が示す事象の種類を特定する特定部(122)と、前記特定部により特定された事象の種類のうち、予め定められた事象の種類に対応する画像を前記表示部に表示させる表示制御部(124)と、を備える情報提供システムである。
図1は、第1の実施形態の情報提供システム1の構成例を示す図である。情報提供システム1は、例えば、一以上の端末装置100と、サーバ装置200とを備える。端末装置100とサーバ装置200は、ネットワークNWを介して通信を行う。ネットワークNWは、例えば、無線基地局、Wi-Fiアクセスポイント、通信回線、プロバイダ、インターネット等を含む。
次に、アプリ実行部120とサーバ装置200との協働による情報提供サービスについて説明する。図2は、アプリ実行部120の機能構成と、サーバ装置200側との協働により提供される情報提供サービスの概要とを示す図である。
これにより、利用者は、知覚負担が軽減する。
図12は、第1の実施形態の情報提供処理の流れの一例を示すフローチャートである。案内アプリ161を起動すると、アプリ実行部120は、設定画面300を表示し、設定画面から受け付けられた設定情報を登録する(ステップS100)。なお、すでに設定情報が登録済みである場合には、ステップS100の処理を行わなくてもよい。
次に、第2の実施形態について説明する。第2の実施形態では、端末装置100において利用者により予め目的地が設定されている場合において、目的地に関連するロゴ(例えば、移動手段に関するロゴ)が指定された場合に、そのロゴの詳細情報として目的地までの経路を表示する。
次に、第3の実施形態について説明する。第3の実施形態では、端末装置100がスルー画像に含まれる意味情報に基づいて、事象に対応するロゴを表示し、ロゴの選択操作を受け付けると、そのロゴに対応する意味情報の翻訳結果を表示する。
翻訳アプリ164とは、例えば、利用者の操作によりロゴが選択された場合に詳細情報が表示されるのではなく、そのロゴに対応する意味情報の翻訳結果を表示する点で案内アプリ161と相違するが、その他の機能については、案内アプリ161と同様の機能を備えるアプリケーションプログラムである。
次に、第4の実施形態について説明する。第4の実施形態では、端末装置100の撮像部130から得られるスルー画像に含まれる意味情報のうち、ロゴで指定された事象に関連する意味情報が表示された部分を強調表示する。また、第4の実施形態では、強調表示された意味情報の翻訳結果を表示する。第4の実施形態の構成要素の機能は、第3の実施形態と同様である。
次に、上記各実施形態の適用例について説明する。ここでは、上述した情報提供システムのサーバ装置200における機能をサービスプロバイダが提供し、そのサービスプロバイダが他のプロバイダやビジネスオーナー等から情報提供によるインセンティブを受け取る仕組みについて説明する。
サービスプロバイダ406は、情報提供システム1~3におけるサーバ装置200を管理する管理者である。利用者408は、情報提供システム1~3における端末装置100の所持者であり、情報提供システム1~3の利用者である。
Claims (8)
- 撮像部と、
前記撮像部により撮像された画像を表示する表示部と、
前記撮像部により撮像された画像を解析し、前記画像に含まれる文字で表された一以上の意味情報に対して予め割り当てられた事象の種類と、前記意味情報が示す位置とを特定する特定部と、
利用者による入力操作を受け付ける受付部と、
前記特定部により特定された前記事象の種類のうち、前記受付部により受け付けられた前記利用者が入力した前記事象の種類に対応する画像を前記表示部に選択的に前記位置に重畳して表示させる表示制御部と、
を備える情報提供システム。 - 前記事象の種類に対応する画像は、前記事象の種類をテキスト情報に依らずに示す画像である、
請求項1に記載の情報提供システム。 - 前記表示制御部は、前記事象の種類に対応する画像を、前記意味情報が表示されている位置に対応付けて前記表示部に表示させる、
請求項1または2に記載の情報提供システム。 - 前記表示制御部は、前記画像が前記表示部により表示されたことに応じて前記受付部に対してなされた操作に応じて、前記特定部により特定された事象の詳細情報を前記表示部に表示させる、
請求項1から3のうち、何れか1項に記載の情報提供システム。 - 前記表示制御部は、前記特定部により特定された事象の詳細情報を、利用者により設定された言語に翻訳し、翻訳した情報を前記表示部に表示させる、
請求項4に記載の情報提供システム。 - 前記表示制御部は、前記画像における利用者により設定された事象の種類に対応する部分を、前記表示部に強調表示させる、
請求項1から5のうち、何れか1項に記載の情報提供システム。 - コンピュータが、
撮像部により撮像された画像を表示部に表示し、
前記撮像部により撮像された画像を解析し、前記画像に含まれる文字で表された一以上の意味情報に対して予め割り当てられた事象の種類と、前記意味情報が示す位置とを特定し、
特定した前記事象の種類のうち、利用者の入力操作を受け付ける受付部により受け付けられた前記利用者が入力した前記事象の種類に対応する画像を前記表示部に選択的に前記位置に重畳して表示させる、
情報提供方法。 - コンピュータに、
撮像部により撮像された画像を表示部に表示させ、
前記撮像部により撮像された画像を解析し、前記画像に含まれる文字で表された一以上の意味情報に対して予め割り当てられた事象の種類と、前記意味情報が示す位置とを特定させ、
特定された前記事象の種類のうち、利用者の入力操作を受け付ける受付部により受け付けられた前記利用者が入力した前記事象の種類に対応する画像を前記表示部に選択的に前記位置に重畳して表示させる、
プログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017118693 | 2017-06-16 | ||
JP2017118693 | 2017-06-16 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525519A Division JPWO2018230649A1 (ja) | 2017-06-16 | 2018-06-14 | 情報提供システム、情報提供方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020073913A JP2020073913A (ja) | 2020-05-14 |
JP7221233B2 true JP7221233B2 (ja) | 2023-02-13 |
Family
ID=64659126
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525519A Withdrawn JPWO2018230649A1 (ja) | 2017-06-16 | 2018-06-14 | 情報提供システム、情報提供方法、およびプログラム |
JP2020007687A Active JP7221233B2 (ja) | 2017-06-16 | 2020-01-21 | 情報提供システム、情報提供方法、およびプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019525519A Withdrawn JPWO2018230649A1 (ja) | 2017-06-16 | 2018-06-14 | 情報提供システム、情報提供方法、およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20200125850A1 (ja) |
JP (2) | JPWO2018230649A1 (ja) |
CN (1) | CN110741228A (ja) |
WO (1) | WO2018230649A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220057636A1 (en) | 2019-01-24 | 2022-02-24 | Maxell, Ltd. | Display terminal, application control system and application control method |
JP7267776B2 (ja) * | 2019-03-01 | 2023-05-02 | 日産自動車株式会社 | 車両用情報表示方法及び車両用情報表示装置 |
JP2021128046A (ja) * | 2020-02-13 | 2021-09-02 | 株式会社デンソー | 車両用表示制御装置、及び表示方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160077711A1 (en) | 2014-09-15 | 2016-03-17 | Samsung Electronics Co., Ltd. | Method and electronic device for providing information |
JP2016173802A (ja) | 2015-03-18 | 2016-09-29 | 株式会社ゼンリンデータコム | 経路案内装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6040715B2 (ja) * | 2012-11-06 | 2016-12-07 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びにコンピューター・プログラム |
JP2015177203A (ja) * | 2014-03-13 | 2015-10-05 | 積水樹脂株式会社 | 携帯端末、情報取得方法及びプログラム |
-
2018
- 2018-06-14 US US16/621,995 patent/US20200125850A1/en not_active Abandoned
- 2018-06-14 CN CN201880039131.7A patent/CN110741228A/zh active Pending
- 2018-06-14 WO PCT/JP2018/022740 patent/WO2018230649A1/ja active Application Filing
- 2018-06-14 JP JP2019525519A patent/JPWO2018230649A1/ja not_active Withdrawn
-
2020
- 2020-01-21 JP JP2020007687A patent/JP7221233B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160077711A1 (en) | 2014-09-15 | 2016-03-17 | Samsung Electronics Co., Ltd. | Method and electronic device for providing information |
JP2016173802A (ja) | 2015-03-18 | 2016-09-29 | 株式会社ゼンリンデータコム | 経路案内装置 |
Non-Patent Citations (1)
Title |
---|
大来俊,スマホをかざすだけで外国語の料理メニューを翻訳!NTTどこもが提供するアプリは海外旅行の強い味方,DIAMOND online,日本,2011年11月09日,https://diamond.jp/articles/-/14770 |
Also Published As
Publication number | Publication date |
---|---|
CN110741228A (zh) | 2020-01-31 |
WO2018230649A1 (ja) | 2018-12-20 |
JP2020073913A (ja) | 2020-05-14 |
US20200125850A1 (en) | 2020-04-23 |
JPWO2018230649A1 (ja) | 2020-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7221233B2 (ja) | 情報提供システム、情報提供方法、およびプログラム | |
US20090285445A1 (en) | System and Method of Translating Road Signs | |
US20170328730A1 (en) | Dynamic map synchronization | |
US20080281508A1 (en) | Vehicle navigation system and method thereof | |
JP2017509065A (ja) | 異なる言語の翻訳を用いる車両用画像キャプチャーシステム | |
CN102141869B (zh) | 一种信息识别、提示方法及一种移动终端 | |
US20220187097A1 (en) | Guidance system | |
JP2005100276A (ja) | 情報処理システム、情報処理装置、情報処理方法及びプログラム | |
KR102580576B1 (ko) | 스마트 사이니지를 이용한 경로 안내 방법 및 경로 안내 시스템 | |
US10901756B2 (en) | Context-aware application | |
KR20060099782A (ko) | 유무선인터넷 기반 다수단간 통합경로안내시스템 및 방법 | |
JP7332471B2 (ja) | 地点情報提供システム、地点情報提供方法、およびプログラム | |
KR101077054B1 (ko) | 길 안내 서비스 시스템 및 방법 | |
JP2006112981A (ja) | 情報処理装置 | |
JP2005251134A (ja) | 情報検索装置および情報検索方法 | |
KR101754304B1 (ko) | Poi별 특화된 정보 서비스를 제공하는 방법 및 시스템 | |
JP2010117188A (ja) | ナビゲーション装置及びナビゲーション方法 | |
KR102098130B1 (ko) | Qr 코드를 이용한 교통정보 인식 시스템 및 방법 | |
KR20090101523A (ko) | 지리정보를 이용한 업체광고가 가능한 차량용 디스플레이장치 | |
JP7146225B2 (ja) | 情報処理システム、情報処理プログラム、情報処理装置及び情報処理方法 | |
KR102435615B1 (ko) | 증강현실기반 대중교통 승차정보 제공방법 및 이를 구현한 휴대단말장치 | |
US20180249032A1 (en) | Information display system and primary electronic device | |
KR20160139282A (ko) | 항공권 검색시 정보 제공 방법, 사용자 단말,서버 및 프로그램 | |
JP2008193336A (ja) | 情報伝達システム、移動端末装置および情報サーバ | |
KR20150098285A (ko) | 위치 기반 광고 서비스 제공 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210611 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220926 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230104 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7221233 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |