CN111007994A - 图像生成装置、图像生成方法和记录程序的非暂时性记录介质 - Google Patents

图像生成装置、图像生成方法和记录程序的非暂时性记录介质 Download PDF

Info

Publication number
CN111007994A
CN111007994A CN201910826904.2A CN201910826904A CN111007994A CN 111007994 A CN111007994 A CN 111007994A CN 201910826904 A CN201910826904 A CN 201910826904A CN 111007994 A CN111007994 A CN 111007994A
Authority
CN
China
Prior art keywords
information
moving body
user terminal
vehicle
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910826904.2A
Other languages
English (en)
Other versions
CN111007994B (zh
Inventor
志贺孝広
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN111007994A publication Critical patent/CN111007994A/zh
Application granted granted Critical
Publication of CN111007994B publication Critical patent/CN111007994B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10712—Fixed beam scanning
    • G06K7/10722—Photodetector array or CCD scanning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1417—2D bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/008—Registering or indicating the working of vehicles communicating information to a remotely located station
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39449—Pendant, pda displaying camera images overlayed with graphics, augmented reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3245—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of image modifying data, e.g. handwritten addenda, highlights or augmented reality information

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Electromagnetism (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Toxicology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一种图像生成装置、图像生成方法和记录程序的非暂时性记录介质。图像生成装置包括：存储器；以及一个或多个处理器，其配置成：从具有能从移动体的外部认出的识别信息的移动体接收关于移动体的移动体相关信息；从配置成对移动体成像的使用终端接收关于使用终端的使用终端信息以及包括由使用终端捕获的移动体的图像的成像数据；基于成像数据中包括的识别信息指定移动体；基于指定的移动体的移动体相关信息以及输出包括移动体的图像的成像数据的使用终端的使用终端信息来生成叠加图像数据，该叠加图像数据为在被叠加在成像数据上的同时被显示在使用终端的显示单元上的图像数据。

Description

图像生成装置、图像生成方法和记录程序的非暂时性记录 介质
技术领域
本发明涉及一种图像生成装置、图像生成方法和记录程序的非暂时性可读记录介质。
背景技术
在现有技术中，已经提出了一种可用于商品的移动、物流和销售的提供移动服务的车辆。在提供移动服务的车辆中，还提出了一种数字标牌(电子广告牌)，其通过在车辆的外表面上显示信息来向其他车辆或诸如行人的周围的人提供信息。作为一种在车辆的外表面上显示信息的方法，例如，日本未审查专利申请公开第2009-176261号(JP2009-176261A)公开了一种技术，其中二维码密封件粘附到所使用的车辆，因此可以获取车辆的销售信息。
发明内容
在现有技术中，已经研究出一种适当地改变从诸如车辆的移动体向外部提供的信息的技术。在JP2009-176261 A中公开的技术中，既未研究改变在车辆的外表面上显示的信息，也未研究通过改变信息来提供除与移动体有关的销售信息之外的信息。这里，可以研究一种技术，其中显示诸如数字标牌的信息的显示装置设置在可以从移动体的外部认出的一部分的外表面上，并且在显示装置上显示的信息被改变使得提供给外部的信息被改变。在显示装置设置在移动体上并且提供给外部的信息改变的情况下，由于显示装置的操作导致功耗可能增加，或者发热量可能增加。
本发明提供了一种能够改变从移动体提供给外部的信息并降低移动体的功耗和发热量的技术。
本发明的第一方案提供了一种图像生成装置，其包括：存储器；以及一个或多个处理器，每个所述处理器均具有硬件，所述一个或多个处理器配置成：从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息；从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据；基于所述成像数据中包括的所述识别信息指定所述移动体；基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据；以及将所述叠加图像数据输出至所述存储器。
在根据本发明的第一方案的图像生成装置中，所述移动体相关信息可包括关于由所述移动体提供的服务的服务信息，并且所述一个或多个处理器可配置成根据所述使用终端的所述使用终端信息从所述服务信息中包括的信息中选择要被包括在所述叠加图像数据中的信息。
根据第一方案的图像生成装置可进一步包括发送器。所述一个或多个处理器可配置成经由所述发送器将所述叠加图像数据发送至所述使用终端。
根据本发明的第一方案，由于叠加图像数据中包括的信息可以基于相对于具有不同的使用终端信息的使用终端的服务信息而使得彼此不同，所以可以使得生成的叠加图像数据针对各个使用终端而彼此不同。结果，适合于每个使用终端的信息能够适当地被选择为叠加图像数据，并且能够显示在使用终端的显示单元上。
本发明的第二方案提供了一种图像生成方法，包括：从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息；从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据；基于所述成像数据中包括的所述识别信息指定所述移动体；基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据；以及将所述叠加图像数据输出至存储器。
本发明的第三方案提供了一种记录程序的非暂时性记录介质。当由一个或多个处理器执行所述程序时，所述程序引起所述一个或多个处理器执行：从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息；从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据；将所述使用终端信息和所述成像数据存储在存储器中；基于所述成像数据中包括的所述识别信息指定所述移动体；基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据；以及将所述叠加图像数据输出至所述存储器。
在根据本发明的方案的图像生成装置、图像生成方法和记录程序的非暂时性记录介质中，移动体的识别信息显示在能从外部认出的部分上，并且识别信息由用户终端成像而使得能够改变叠加在显示于用户终端上的移动体的外部上的显示内容。因此，能够改变从移动体提供给外部的信息并且减少移动体的功耗和发热量。
附图说明
下面将参考附图描述本发明的示例性实施例的特征、优点以及技术和工业意义，其中相同的附图标记表示相同的元件，并且其中：
图1是图示出可应用根据本发明的实施例的图像生成装置的图像生成系统的示意图；
图2是示意性地图示出图1中图示出的图像生成装置的配置的框图；
图3是示意性地图示出安装在图1中图示出的车辆上的车载装置的配置的框图；
图4是示意性地图示出图1中图示出的用户终端装置的配置的框图；
图5是图示出根据本发明的实施例的图像生成方法的处理流程的流程图；
图6是用于描述根据本发明的实施例的图像生成方法的示例1的示图；
图7是用于描述根据本发明的实施例的图像生成方法的示例2的示图；
图8是用于描述根据本发明的实施例的图像生成方法的示例3的示图；
图9是用于描述根据本发明的实施例的图像生成方法的示例4的示图；以及
图10是图示出图2中图示出的控制单元的配置的视图。
具体实施方式
在下文中，将参考附图描述实施例。纵观实施例的所有附图，相同或相应的部分将被给予相同的附图标记。
图像生成系统
首先，将描述应用了根据本实施例的图像生成装置的图像生成系统。图1是图示出可应用根据本实施例的图像生成装置的图像生成系统1的示意图。如图1中图示出的，根据该实施例的图像生成系统1包括可经由网络10彼此执行通信的图像生成服务器30、具有外部显示单元58的至少一个车辆50以及用户终端装置70。
网络10可以是因特网或移动电话网络。网络10例如是诸如因特网的公共通信网络，并且可以包括广域网(WAN)、用于移动电话等的电话通信网络或者诸如无线通信网络(例如，Wi-Fi)的其他通信网络。
处理服务器
作为图像生成装置的图像生成服务器30控制要在车辆50的外部显示单元58上显示的识别信息，并生成要发送到用户终端装置70的图像数据。在本实施例中，多种运行信息或车辆信息在预定定时从每个车辆50供给至图像生成服务器30。运行信息包括关于车辆50的运行的信息，诸如位置信息、速度信息和加速度信息，但不必局限于此。车辆信息包括关于车辆50的状况的信息，诸如充电状态(SOC)、剩余燃料量和车内状态，但不必局限于此。
图2是示意性地图示出图像生成服务器30的配置的框图。如图2中图示出的，图像生成服务器30具有可以经由网络10执行通信的通用计算机的配置。图像生成服务器图30包括通信单元31、控制器32和存储单元33。
通信单元31例如是局域网(LAN)接口板，或执行无线通信的无线通信电路。LAN接口板或无线通信电路连接到网络10。通信单元31连接到网络10，并且执行与车辆50的通信。通信单元31从每个车辆50接收多种信息，诸如作为对于车辆50来说特定的移动体识别信息的车辆识别信息、关于车辆50的运行的运行状况信息，以及指示由车辆50提供的服务的内容或状况的服务信息。车辆识别信息包括用于使每个车辆50能够被单独识别的信息。服务信息包括与由车辆50提供的服务有关的各种信息，诸如日程信息(例如与车辆50相关的服务计划)、关于搭载的行李的行李信息以及关于搭载的产品的库存信息。通信单元31向车辆50发送各种信息，诸如用于请求发送信息的请求信号，以及用于控制车辆50的指令信息。移动体相关信息包括车辆识别信息和服务信息，但还可包括车辆信息或运行状况信息。移动体相关信息不一定限于这些信息。
控制器32包括例如诸如中央处理单元(CPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)的处理器，以及诸如随机存取存储器(RAM)或只读存储器(ROM)的主存储单元。作为示例，如图10中图示出的，在本实施例中，控制器32包括CPU32a和ROM32b。存储单元33配置有从可擦除可编程ROM(EPROM)、硬盘驱动器(HDD)和远程介质中选择的存储介质。远程介质例如是通用串行总线(USB)存储器或存储卡，或诸如光盘(CD)、数字通用盘(DVD)或Blu-ray(注册商标)(蓝光)盘(BD)的盘记录介质。存储单元33存储操作系统(OS)、各种程序、各种表格、各种数据库等。控制器32将存储在存储单元33中的程序加载到主存储单元的工作区，执行该程序，通过该程序的执行来控制每个组成元件，从而可以实现与预定目的匹配的功能。在本实施例中，控制器32可以通过执行该程序来实现显示控制单元34和运行管理单元35的功能。
存储单元33包括其中存储了可被检索的多种数据的服务信息数据库33a、图像信息数据库33b和运行管理数据库33c。图像信息数据库33b、服务信息数据库33a和运行管理数据库33c中的每一个例如是关系数据库(RDB)。下面描述的数据库(DB)由数据库管理系统(DBMS)的程序构建，该程序由管理存储在存储单元中的数据的处理器执行。
车辆识别信息和服务信息彼此相关联，并且以可检索方式存储在服务信息数据库33a中。服务信息包括与根据车辆50的应用而可以被提供的服务有关的各种信息，并且包括基于车辆50的使用状况的各种信息。服务信息在车辆50是公共汽车或用于共乘的车辆的情况下是关于运行时间的信息，并且在车辆50是移动销售服务车辆的情况下是关于搭载产品的类型或库存量的信息。稍后将描述服务信息的更具体示例。由显示控制单元34基于服务信息可选择的各种图像数据被存储在图像信息数据库33b中。图像数据可以是静止图像数据，并且可以是运动图像数据。车辆识别信息和运行信息彼此相关联，并且以可检索方式存储在运行管理数据库33c中。
当车辆识别信息被分配给车辆50时，车辆识别信息以可检索方式存储在服务信息数据库33a和运行管理数据库33c中。车辆识别信息包括用于使各个车辆50相互识别的各种信息。在车辆50将服务信息连同车辆识别信息一起发送到图像生成服务器30的情况下，图像生成服务器30将所接收的服务信息存储为与车辆识别信息相关联并且以可检索的方式存储在服务信息数据库33a中。类似地，在车辆50将诸如位置信息或车辆信息的信息连同车辆识别信息一起发送到图像生成服务器30的情况下，图像生成服务器30将所接收的信息存储为与车辆识别信息相关联，并且以可检索的方式存储在运行管理数据库33c中。
在本实施例中，控制器32可以通过执行程序来实现显示控制单元34和运行管理单元35的功能。显示控制单元34收集诸如从各个车辆50接收的服务信息的多种信息，并将该信息存储在服务信息数据库33a中。显示控制单元34分析从预定车辆50接收的服务信息和从用户终端装置70接收的成像数据。显示控制单元34从图像信息数据库33b中检索多种图像数据或将检索到的图像数据彼此组合，以生成要叠加在成像数据上的叠加图像数据。叠加图像数据经由通信单元31和网络10发送到用户终端装置70。运行管理单元35从各个车辆50收集多种车辆信息和运行信息，并将该信息存储在运行管理数据库33c中。
车辆
作为移动体的车辆50是由于驾驶员的驾驶而行驶的车辆或者是能够根据给定的运行指令而自主行驶的自动行驶车辆。图3是示意性地图示出车辆50的配置的框图。如图3中图示出的，车辆50包括驱动单元51、电子控制单元52、通信单元53、存储单元54、输入/输出单元55、传感器组56、GPS单元57和外部显示单元58。
驱动单元51是用于使车辆50行驶的现有技术的公知驱动单元。具体地，车辆50设置有作为驱动源的发动机，并且发动机配置成能够通过经由燃料燃烧引起的驱动使用电动机等发电。所产生的电力对可充电电池充电。车辆50包括传递发动机的驱动力的驱动传动机构、用于车辆行驶的驱动车轮等。
电子控制单元52和存储单元54在物理上分别与控制器32和存储单元33相同。电子控制单元52共同地控制安装在车辆50上的各种组成元件的操作。通信单元53例如是数据通信模块(DCM)，其使用网络10通过无线通信至少与图像生成服务器30执行通信。存储单元54包括车辆信息数据库54a、运行信息数据库54b和服务信息数据库54c。包括充电状态、剩余燃料量和当前位置的各种信息以可更新方式存储在车辆信息数据库54a中。包括从图像生成服务器30提供的运行信息的各种数据以可更新方式存储在运行信息数据库54b中。关于由车辆50提供的服务的各种信息，诸如与由车辆50提供的服务类型相对应的服务的内容或状况，以可更新方式存储在服务信息数据库54c中。
输入/输出单元55配置有触摸面板显示器、扬声器麦克风等。作为输出装置的输入/输出单元55配置为能够通过在电子控制单元52的控制下在触摸面板显示器的屏幕上显示文本、图形等或从扬声器麦克风输出声音来向外部通知预定信息。作为输入装置的输入/输出单元55配置为通过用户操作触摸面板显示器或朝向扬声器麦克风发出语音来向电子控制单元52输入预定信息。
传感器组56包括关于车辆50的行驶的传感器(诸如车速传感器和加速度传感器)，例如能够感测车厢的各种状况的车厢传感器，以及诸如成像相机的成像装置。GPS单元57从全球定位系统(GPS)卫星(未图示出)接收无线电波，并检测车辆50的位置。检测到的位置以可检索的方式存储在车辆信息数据库54a中作为车辆信息中的位置信息。作为检测车辆50的位置的方法，可以采用如下方法：其中光检测和测距或激光成像检测和测距(LiDAR)可以与数字地图组合。
外部显示单元58配置有例如有机EL面板或液晶显示面板，并且显示文本或图形以便向外部通知信息。在本实施例中，外部显示单元58显示识别信息，例如诸如QR码(注册商标)的二维码、条形码、字符串、符号、图标或数字串，作为用于识别每个车辆50的车辆识别信息的至少一部分信息。在外部显示单元58上显示的诸如识别信息或图像的各种信息可以通过电子控制单元52将存储在存储单元54中的各种信息输入到外部显示单元58来改变。
用户终端装置
用户终端装置70由用户操作。用户终端装置70通过例如使用通信应用进行各种数据的通信，将诸如成像数据、包括用户识别信息和用户选择信息的用户信息以及当前位置信息的各种信息发送到图像生成服务器30。用户信息是用于识别用户终端装置70的使用终端信息。用户终端装置70配置为能够从图像生成服务器30接收诸如叠加图像数据的各种信息。图4是示意性地图示出图1中图示出的用户终端装置70的配置的框图。
如图4中图示出的，用户终端装置70包括彼此能通信地连接的电子控制单元71、输入单元72、显示单元73、通信单元74、存储单元75、GPS单元76和成像单元77。电子控制单元71、通信单元74、存储单元75和GPS单元76在物理上分别与控制器32，通信单元31、53，存储单元33、54和GPS单元57相同。
电子控制单元71将存储在存储单元75中的OS或AR显示应用75a加载到主存储单元的工作区并执行OS或AR显示应用75a，从而共同地控制输入单元72、显示单元73、通信单元74、存储单元75、GPS单元76和成像单元77的操作。在本实施例中，AR显示应用75a是在电子控制单元71的控制下在显示单元73上显示增强现实(AR)的程序。
输入单元72配置有例如合并到键盘或显示单元73中并且检测触摸面板上的触摸操作的触摸面板型键盘，或者实现与外部呼叫的语音输入装置。这里，与外部的呼叫不仅包括与另一个用户终端装置70的呼叫，还包括与例如操作员或常驻在图像生成服务器30中的人工智能系统的呼叫。显示单元73配置有例如有机EL面板或液晶显示面板，并在其屏幕上显示存储在存储单元75中的图像数据、经由通信单元74接收的叠加图像数据，或者通过在成像单元77中的成像获得的成像数据。因此，用户可以认出成像数据、图像数据和叠加图像数据。输入单元72和显示单元73可以以与输入/输出单元55相同的方式配置。
通信单元74经由网络10向诸如图像生成服务器30的外部服务器发送各种信息并从其接收各种信息，诸如用户识别信息、用户选择信息、成像数据和语音数据。存储单元75配置为能够存储包括用户识别信息和用户选择信息的用户信息。用户识别信息是用于识别用户终端装置70的信息。用户识别信息选择性地包括各种信息，诸如关于对于用户终端装置70来说特定的ID的信息、携带用户终端装置70的用户的姓名、性别或地址，或指示用户的位置等的诸如经度和纬度的位置信息。用户选择信息选择性地包括用户使用车辆50所需的各种信息或诸如从用户终端装置70的输入单元72输入的信息的各种信息。成像单元77是诸如相机的成像装置，并且配置为能够对目标对象成像。通过用户使用用户终端装置70的成像单元77成像所获得的成像数据由电子控制单元71存储在存储单元75中。通过AR显示应用75a使用成像单元77成像所获得的成像数据通过电子控制单元71经由通信单元74和网络10发送到图像生成服务器30。用户终端装置70可以具体地采用诸如智能电话的移动电话、平板型信息终端或个人电脑。
图像生成方法
接下来，将描述在以上述方式配置的图像生成系统1中执行的图像生成方法。在以下描述中，经由网络10执行信息的发送和接收，但是将省略其描述。图5是用于描述根据第一实施例的图像生成方法的流程图。
换句话说，如图5中的步骤ST1所示，作为移动体的车辆50在电子控制单元52的控制下在预定定时周期性地将车辆信息从通信单元53发送到图像生成服务器30。这里，预定定时例如是以诸如大约一分钟的预定时间间隔的周期性定时，但是也可以设定车辆50中的各种定时。
另一方面，在步骤ST2中，用户在用户终端装置70中启动AR显示应用75a，并且通过使用成像单元77对预定车辆50进行成像。AR显示应用75a的启动可以是前台处理，也可以是后台处理。在这种情况下，成像单元77还对在车辆50的外部显示单元58上显示的识别信息进行成像。
在步骤ST3中，电子控制单元71根据AR显示应用75a的程序将通过成像单元77中的成像获得的成像数据经由通信单元74发送到作为图像生成装置的图像生成服务器30。电子控制单元71在发送成像数据的期间将用户信息和位置信息与成像数据相关联地发送到图像生成服务器30。
此后，在步骤ST4中，图像生成服务器30的显示控制单元34执行分析所接收的成像数据的图像分析处理。在显示控制单元34分析成像数据中包括的识别信息并将识别信息输出到运行管理单元35的情况下，运行管理单元35指定在成像数据中成像的车辆50。类似地，显示控制单元34基于与成像数据相关联的用户信息中包括的用户识别信息，指定已发送成像数据的用户终端装置70。
在步骤ST5中，控制器32将用于请求发送服务信息的请求信号发送到指定的车辆50。此后，在步骤ST6中，已经接收到请求信号的车辆50从服务信息数据库54c读取服务信息，并发送服务信息给图像生成服务器30。
在步骤ST7中，图像生成服务器30的显示控制单元34基于从车辆50接收的服务信息以及从用户终端装置70接收的成像数据、用户信息和位置信息，生成要叠加在成像数据上的叠加图像数据。这里，叠加图像数据可以是静止图像数据，可以是运动图像数据，也可以是文本信息数据。这里，显示控制单元34可以基于用户选择信息和服务信息生成叠加图像数据。换句话说，显示控制单元34可以通过分析服务信息和用户信息中包括的用户选择信息，来生成包括与由用户成像的车辆50提供的服务对应并且还与用户选择信息对应的信息的图像数据，作为叠加图像数据。稍后将描述从车辆50发送的服务信息的具体示例和用户选择信息的具体示例。
此后，在步骤ST8中，控制器32将由显示控制单元34生成的叠加图像数据发送到基于用户信息中包括的用户识别信息指定的用户终端装置70。在步骤ST9中，已经接收到叠加图像数据的用户终端装置70的电子控制单元71将叠加图像数据叠加在成像数据上，并在屏幕上显示叠加结果。因此，用户可以认出在显示单元73上以AR方式显示的图像。因此，根据本实施例的图像生成处理结束。
示例
接下来，将描述通过如上所述执行的图像生成处理获得的叠加图像数据以叠加方式显示在用户终端装置70的显示单元73上的具体示例。
示例1
图6是用于描述根据该实施例的图像生成方法的示例1的示图。如图6中图示出的，用户终端装置70a、70b的成像单元77a、77b中的每一个对识别信息显示在外部显示单元58A上的预定车辆50A进行成像。在这种情况下，基于用户终端装置70a、70b的用户识别信息或用户选择信息，在显示单元73a、73b的每一个上显示预定叠加图像数据被叠加在被成像的车辆50A的外表面上的图像数据。图6中图示出的示例是由不同用户携带的用户终端装置70a、70b对移动销售车辆50A进行成像的示例。
如上所述，图像生成服务器30的显示控制单元34基于从用户终端装置70a、70b接收的成像数据和用户识别信息或用户选择信息以及从车辆50A接收的服务信息而生成叠加图像数据，将叠加图像数据发送到用户终端装置70a、70b。具体地，假设在从用户终端装置70a接收的用户识别信息中，用户的性别、年龄和使用语言分别是“女性”、“20岁以上”和“日语”，并且例如在从车辆50接收的服务信息中，关于“化妆品”的信息被包括作为提供给20岁以上的女性的信息的类别。在这种情况下，“化妆品”的图像和以日语表示“化妆品”的文本信息以叠加在车辆50A的外表面上的方式显示在用户终端装置70a的显示单元73a上。另一方面，假设在从用户终端装置70b接收的用户识别信息中，用户的性别和使用语言分别是“男性”和“英语”，并且用户通过使用用户终端装置70b的输入单元(未图示出)输入表示用户想要伞的信息作为用户选择信息。进一步假设服务信息包括指示车辆50A在库存中有“伞”的信息。在这种情况下，“伞”的图像和以英语表示“伞”的文本信息以叠加在车辆50A的外表面上的方式显示在用户终端装置70b的显示单元73b上。
如上所述，可更改的识别信息显示在车辆50A的外部显示单元58A上，通过使用用户终端装置70a、70b的成像单元77a、77b对针对车辆50A周围的步行用户等显示信息的数字标牌进行成像，使得车辆50A被识别，并且叠加图像数据被显示为叠加在显示于显示单元73a、73b上的车辆50A上。因此，在通过使用用户终端装置70a、70b的相应成像单元77a、77b观看车辆50A的情况下，图像生成服务器30可以从服务信息中选择要提供给用户终端装置70a、70b的信息，并且可以生成要叠加在至少一个车辆50A的外表面的整个表面或部分表面上的叠加图像数据，其中静止图像、运动图像或文本信息被显示。因此，对于使用用户终端装置70a、70b的用户来说，信息似乎显示在车辆50A上，并且即使对于相同的车辆50A，也可以基于用户信息在用户终端装置70a、70b上显示不同的信息。根据示例1，各个用户可以认出适合于使用用户终端装置70a、70b的用户的多条信息。因此，与仅在车辆50A的外部显示单元58上显示信息的情况相比，车辆50A使得能够被用户认出的信息变得多样化，因此可以提高向用户提供信息的便利性。
示例2
图7是用于描述根据实施例的图像生成方法的示例2的示图。如图7中图示出的，在由用户终端装置70c的成像单元77c对其中在外部显示单元58B上显示识别信息的预定车辆50B进行成像的情况下，预定的叠加图像数据被叠加在被成像的车辆50B的外表面上的图像数据显示在显示单元73c上。图7中图示出的示例是由用户携带的用户终端装置70c对移动销售车辆50B进行成像的示例。在这种情况下，图像生成服务器30的显示控制单元34基于从用户终端装置70c接收的成像数据和用户识别信息或用户选择信息和从车辆50B接收的服务信息而生成叠加图像数据，将叠加图像数据发送到用户终端装置70c。
具体地，假设从用户终端装置70c接收的用户选择信息中包括关于用户偏好的信息和关于用户已预订购买的产品的信息，并且从车辆50B接收的服务信息中包括关于装载在车辆50B上的产品的信息。在这种情况下，预订产品的图像(例如，指示“预订产品”的文本信息)和推荐给用户的产品的图像(例如指示“推荐产品”的文本信息)以叠加在车辆50B的外表面上的方式显示在用户终端装置70c的显示单元73c上。根据示例2，使用用户终端装置70c的用户在无需检查车辆50B的内部的情况下在视觉上就能认出所需产品或期望产品，因此可以提高使用车辆50B移动销售或送货上门的便利性。
车辆50B不仅可以是移动销售车辆，还可以是诸如装载了行李的情况下移动的送货车的各种移动体。换句话说，在携带行李或产品的车辆50B装载了要由用户接收的行李或者期望购买的产品的情况下，可以在用户终端装置70c的显示单元73c上显示这样的信息。在图像生成服务器30中，通过基于从用户终端装置70c发送的用户识别信息提取或估计用户的年龄、性别、偏好或服装尺寸，可以在车辆50B的外表面上显示期望推荐的产品或服务或其优惠券。
示例3
图8是用于描述根据实施例的图像生成方法的示例3的示图。如图8中图示出的，在外部显示单元58C上显示识别信息的预定车辆50C和在外部显示单元58D上显示识别信息的预定车辆50D按队列行驶。车辆50C、50D由用户终端装置70d的成像单元77d成像。在这种情况下，基于用户终端装置70d的用户识别信息或用户选择信息，在显示单元73d上显示其中预定叠加图像数据被叠加在被成像的车辆50C、50D的外表面上的图像数据。图8中图示出的示例是由用户终端装置70d对诸如共用车辆(例如，公共汽车)的车辆50C、50D进行成像的示例。
具体地，用户将目的地输入到用户终端装置70d的输入单元72d。目的地作为用户选择信息被发送到图像生成服务器30。另一方面，假设从车辆50C、50D接收的多条服务信息中分别包括关于车辆50C的路线、车辆50D的路线的多条信息。在这种情况下，表示车辆50C停车的公共汽车站“OO公共汽车站”的文本信息、车辆到达该公共汽车站的估计时间“8:30到达”以及车费“150日元”以叠加在车辆50C的外表面上的方式显示在用户终端装置70d的显示单元73d上。表示车辆50D在用户选择信息中包括的公共汽车站“OO公共汽车站”不停车的文本信息显示在用户终端装置70d的显示单元73d上。
在从当前位置到目的地的距离或者车辆50C、50D的当前已占用或未占用座位的数量被包括在服务信息中的情况下，还可以显示该距离或已占用或未占用座位的数量。在车辆50C、50D中，可以强调显示更方便乘坐到用户期望的目的地的车辆50C、50D。即使在多个车辆50C、50D按队列行驶的情况下，也可以通过识别车辆50C、50D中的每一个来显示相关信息。可以基于从车辆50C、50D发送的服务信息来生成相关信息。根据示例3，使用用户终端装置70d的用户可以从外部认出诸如公共汽车的共用车辆的路线或其内部的状况，因此可以提高公共汽车的使用便利性。
在车辆50C、50D是需要由用户根据需要招唤的车辆的情况下，诸如出租车、共用车辆、移动销售车辆、移动服务车辆或行李回收车辆，用户可以轻敲在显示单元73d上显示的车辆50C、50D中期望被招唤的车辆以便招唤或预订该车辆，或者利用声音或消息与车辆50C、50D中的人员交谈。
图9是用于描述根据实施例的图像生成方法的示例4的示图。如图9中图示出的，在由用户终端装置70e的成像单元77e对在外部显示单元58E上显示识别信息的预定车辆50E进行成像的情况下，其中预定的叠加图像数据被叠加在被成像的车辆50E的外表面上的图像数据作为运动图像显示在显示单元73e上。图9中图示出的示例是由用户携带的用户终端装置70e对广告车辆50E进行成像的示例。在这种情况下，图像生成服务器30的显示控制单元34基于从用户终端装置70e接收的成像数据和用户识别信息或用户选择信息以及从车辆50E接收的服务信息，生成运动图像数据作为叠加图像数据，并且将运动图像数据发送到用户终端装置70e。
具体地，假设从用户终端装置70e接收的用户选择信息中包括关于用户的偏好等的信息，并且从车辆50E接收的服务信息中包括关于由车辆50E广告的角色等的信息。在这种情况下，广告角色的图像作为运动图像以被叠加在车辆50E的外表面上的方式显示在用户终端装置70e的显示单元73e上。在这种情况下，由于识别信息不是运动图像，所以即使在禁止在行驶车辆上使用数字标牌显示可变信息的情况下，在车辆50E的外表面上不显示运动图像时使用用户终端装置70e的用户也可以在视觉上认出车辆50E，车辆50E的运动图像在显示单元73e似乎再现在外表面上。根据示例4，在显示单元73e上被显示为叠加在车辆50E的外表面上的叠加图像数据是运动图像信息，因此可以提高作为广告媒介的车辆50E的外表面的便利性。
在示例1至4中，还可以通过用户用其手指等操作用户终端装置70e的显示单元73e的屏幕来提供交互操作，诸如改变显示在显示单元73e上的信息、购买产品或服务、执行游戏或者获取积分。
记录介质
在该实施例中，使得图像生成方法能够执行的程序可以被记录在可由计算机或其他机器或设备(下文中，称为“计算机等”)读取的记录介质上。计算机等读取记录在记录介质上的程序并执行程序，因此计算机用作实施例的图像生成服务器30。在此，可由计算机等读取的记录介质表示非暂时性记录介质，其中诸如数据或程序的信息通过电、磁、光、机械或化学作用累积，并且可以由计算机等从该非暂时性记录介质读取信息。在这种记录介质中，可从计算机等拆卸的记录介质的示例包括软盘、磁光盘、CD-ROM、可重写光盘(CD-R/W)、DVD、BD、数字录音带(DAT)、磁带和诸如闪存的存储卡。固定到计算机等的记录介质的示例包括硬盘和ROM。固态驱动器(SSD)可以用作可从计算机等拆卸的记录介质，并且还可以用作固定到计算机等的记录介质。
根据上述实施例，车辆50的识别信息可以显示在外部显示单元58上，可以从外部认出，车辆50可以由识别该识别信息的用户终端装置70识别，并且可以基于从用户终端装置70输入的用户信息来改变叠加在显示于显示单元73上的车辆50的外表面上的显示内容。因此，可以适当地改变从车辆50提供给外部的信息，与数字标牌直接显示在车辆上的情况相比可以减少车辆50的功耗、发热量或重量，因此可以高效地执行通过使用车辆50提供给外部的信息的定制。
如上所述，已经详细描述了实施例，但是本发明不限于该实施例，并且可以发生基于本发明的技术精神的各种修改。例如，实施例中描述的服务器、车辆和用户终端装置的配置仅仅是示例，并且可以使用与实施例中的服务器、车辆和用户终端装置的配置不同的配置。
例如，实施例中描述的服务器的配置或信息的类型仅仅是示例，并且可以根据需要采用与上述示例不同的服务器的配置或信息的类型。
在该实施例中，对应于控制器32的功能的显示控制单元34和运行管理单元35由单个图像生成服务器30配置，但是可以由能够经由网络10彼此执行通信的多个服务器配置。换句话说，包括显示控制单元34的显示控制服务器和包括运行管理单元35的运行管理服务器可以经由网络10单独配置。
例如，在该实施例中，图像生成服务器30的各个功能组成元件中的任何一个或其中的一些处理可以由连接到网络10的另一计算机执行。由图像生成服务器30执行的一系列处理可以由硬件执行，并且可以由软件执行。
例如，在第一实施例中，图像生成服务器30是单个服务器，但是图像生成服务器30可以配置有能够彼此执行通信的多个单独的服务器。具体地，例如，图像生成服务器30的存储单元33可以设置在另一个数据服务器中，该数据服务器可以经由网络10执行信息的发送和接收。图像生成服务器30的存储单元33中的服务信息数据库33a、图像信息数据库33b和运行管理数据库33c可以分别存储在不同的数据服务器中。图像生成服务器30可以经由网络10存储过去收集的多种图像数据作为包括例如大数据的数据库。
在该实施例中，识别信息显示在外部显示单元58上，但是识别信息可以以各种方法提供给外部，只要车辆50可以被识别即可。例如，识别信息可以是附接到车辆50的可从外部认出的部分的条形码等，可以是车辆50的牌照。
在该实施例中，在图像生成服务器30中执行步骤ST4中的成像数据的图像分析处理，但是可以在用户终端装置70中执行图像分析处理。在这种情况下，图像分析处理的结果信息可以发送到图像生成服务器30，并且图像生成服务器30可以基于从车辆50发送的服务信息和结果信息生成叠加图像数据。
在该实施例中，可以在车辆50中执行图像生成服务器30中的一些或所有处理。叠加图像数据的生成可以在用户终端装置70中执行。该实施例中在图像生成服务器30中执行的各种处理可通过使用网络10发送和接收信息而分配到多个服务器。
在该实施例中，识别信息是可变识别信息，但是各种信息可以用作识别信息。具体地，作为识别信息，可以使用打印的识别信息或车辆50的牌照或外部特征。图像生成服务器30可以集成用户终端装置70的特定识别信息、车辆50和用户终端装置70的多条位置信息，以及指示成像单元77或用户终端装置70或车辆50所指向的方向的信息，并且可以识别和指定车辆50。在这种情况下，图像生成服务器30基于车辆50的识别和用户终端装置70的用户信息选择要显示在用户终端装置70上的信息，并且根据车辆50的形状生成叠加图像数据。

Claims (5)

1.一种图像生成装置，其特征在于包括：
存储器；以及
一个或多个处理器，每个所述处理器具有硬件，所述一个或多个处理器配置成
从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息，
从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据，
基于所述成像数据中包括的所述识别信息指定所述移动体，
基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据，以及
将所述叠加图像数据输出至所述存储器。
2.根据权利要求1所述的图像生成装置，其特征在于：
所述移动体相关信息包括关于由所述移动体提供的服务的服务信息；以及
所述一个或多个处理器配置成根据所述使用终端的所述使用终端信息从所述服务信息中包括的信息中选择要被包括在所述叠加图像数据中的信息。
3.根据权利要求1所述的图像生成装置，其特征在于，进一步包括发送器，
其中所述一个或多个处理器配置成经由所述发送器将所述叠加图像数据发送至所述使用终端。
4.一种图像生成方法，其特征在于包括：
从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息；
从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据；
基于所述成像数据中包括的所述识别信息指定所述移动体；
基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据；以及
将所述叠加图像数据输出至存储器。
5.一种记录程序的非暂时性记录介质，其特征在于，当由一个或多个处理器执行所述程序时，所述程序引起所述一个或多个处理器执行：
从具有能从移动体的外部认出的识别信息的所述移动体接收关于所述移动体的移动体相关信息；
从配置成对所述移动体成像的使用终端接收关于所述使用终端的使用终端信息以及包括由所述使用终端捕获的所述移动体的图像的成像数据；
将所述使用终端信息和所述成像数据存储在存储器中；
基于所述成像数据中包括的所述识别信息指定所述移动体；
基于指定的所述移动体的所述移动体相关信息以及输出包括所述移动体的所述图像的所述成像数据的所述使用终端的所述使用终端信息来生成叠加图像数据，所述叠加图像数据为在被叠加在所述成像数据上的同时被显示在所述使用终端的显示单元上的图像数据；以及
将所述叠加图像数据输出至所述存储器。
CN201910826904.2A 2018-10-04 2019-09-03 图像生成装置、图像生成方法和记录程序的非暂时性记录介质 Active CN111007994B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-189503 2018-10-04
JP2018189503A JP7056500B2 (ja) 2018-10-04 2018-10-04 画像生成装置、画像生成方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN111007994A true CN111007994A (zh) 2020-04-14
CN111007994B CN111007994B (zh) 2023-09-22

Family

ID=70052234

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910826904.2A Active CN111007994B (zh) 2018-10-04 2019-09-03 图像生成装置、图像生成方法和记录程序的非暂时性记录介质

Country Status (3)

Country Link
US (1) US11250598B2 (zh)
JP (1) JP7056500B2 (zh)
CN (1) CN111007994B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100036717A1 (en) * 2004-12-29 2010-02-11 Bernard Trest Dynamic Information System
JP2012141779A (ja) * 2010-12-28 2012-07-26 Ns Solutions Corp 拡張現実提供装置、拡張現実提供システム、拡張現実提供方法及びプログラム
US20140098249A1 (en) * 2012-10-05 2014-04-10 Samsung Electronics Co., Ltd. Terminal, method of forming video, apparatus to form an image, driving method thereof, and computer-readable recording medium
US20140267399A1 (en) * 2013-03-14 2014-09-18 Kamal Zamer Using Augmented Reality to Determine Information
CN107077810A (zh) * 2014-07-24 2017-08-18 柯蒂斯·M·布鲁巴克 用于在移动广告、媒体及通信平台上产生群聚效应的系统、方法和设备
JP2017181842A (ja) * 2016-03-31 2017-10-05 拓志 船木 広告方法、広告用車両及び広告システム
US10002442B1 (en) * 2017-12-21 2018-06-19 Capital One Services, Llc Placement of augmented reality objects using a guide marker
CN108616563A (zh) * 2016-12-23 2018-10-02 李雨暹 移动物件的虚拟信息建立方法、搜寻方法与应用系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI115943B (fi) * 2003-12-12 2005-08-15 Nokia Corp Järjestely informaation esittämiseksi näytöllä
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
JP2009176261A (ja) 2008-01-26 2009-08-06 Katsumi Tanaka Ｑｒコードを使った中古車両販売システム
KR101082285B1 (ko) * 2010-01-29 2011-11-09 주식회사 팬택 증강 현실 제공 단말기 및 방법
JP5776255B2 (ja) * 2011-03-25 2015-09-09 ソニー株式会社 端末装置、物体識別方法、プログラム及び物体識別システム
US9779550B2 (en) * 2012-10-02 2017-10-03 Sony Corporation Augmented reality system
US20150220991A1 (en) 2014-02-05 2015-08-06 Harman International Industries, Incorporated External messaging in the automotive environment
US20160071319A1 (en) * 2014-09-09 2016-03-10 Schneider Electric It Corporation Method to use augumented reality to function as hmi display
US20160140868A1 (en) * 2014-11-13 2016-05-19 Netapp, Inc. Techniques for using augmented reality for computer systems maintenance
JP6336930B2 (ja) * 2015-02-16 2018-06-06 富士フイルム株式会社 仮想オブジェクト表示装置、方法、プログラムおよびシステム
US10969583B2 (en) * 2017-02-24 2021-04-06 Zoll Medical Corporation Augmented reality information system for use with a medical device
JP6881047B2 (ja) * 2017-06-06 2021-06-02 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US20190026930A1 (en) * 2017-07-24 2019-01-24 Siemens Aktiengesellschaft Digital information retrieval and rendering in a factory environment
US11126848B2 (en) * 2017-11-20 2021-09-21 Rakuten Group, Inc. Information processing device, information processing method, and information processing program
CN108304067A (zh) * 2018-01-26 2018-07-20 百度在线网络技术（北京）有限公司 用于展示信息的系统、方法和装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100036717A1 (en) * 2004-12-29 2010-02-11 Bernard Trest Dynamic Information System
JP2012141779A (ja) * 2010-12-28 2012-07-26 Ns Solutions Corp 拡張現実提供装置、拡張現実提供システム、拡張現実提供方法及びプログラム
US20140098249A1 (en) * 2012-10-05 2014-04-10 Samsung Electronics Co., Ltd. Terminal, method of forming video, apparatus to form an image, driving method thereof, and computer-readable recording medium
US20140267399A1 (en) * 2013-03-14 2014-09-18 Kamal Zamer Using Augmented Reality to Determine Information
US20180240259A1 (en) * 2013-03-14 2018-08-23 Paypal, Inc. Using augmented reality for electronic commerce transactions
CN107077810A (zh) * 2014-07-24 2017-08-18 柯蒂斯·M·布鲁巴克 用于在移动广告、媒体及通信平台上产生群聚效应的系统、方法和设备
JP2017181842A (ja) * 2016-03-31 2017-10-05 拓志 船木 広告方法、広告用車両及び広告システム
CN108616563A (zh) * 2016-12-23 2018-10-02 李雨暹 移动物件的虚拟信息建立方法、搜寻方法与应用系统
US10002442B1 (en) * 2017-12-21 2018-06-19 Capital One Services, Llc Placement of augmented reality objects using a guide marker

Also Published As

Publication number Publication date
JP2020060808A (ja) 2020-04-16
JP7056500B2 (ja) 2022-04-19
US20200111239A1 (en) 2020-04-09
US11250598B2 (en) 2022-02-15
CN111007994B (zh) 2023-09-22

Similar Documents

Publication Publication Date Title
US10049389B2 (en) System and method for interacting with digital signage
CN109964271B (zh) 用于提供对用户的语音输入的响应消息的设备和方法
EP3410378A1 (en) Provision and management of advertising via mobile entity
KR102375727B1 (ko) 대중 교통 및 공유 모빌리티를 이용한 추천 경로 안내 시스템
US20150254720A1 (en) Location-based directed product and service suggestions
JP2015510637A (ja) 関心地点およびサービスルート配送のジオコーディングならびに監査現場実績および販売の方法および装置
CN104798023A (zh) 基于地理定位采样选择内容项目
CN111192074A (zh) 信息处理装置、信息处理系统以及向车辆的广告投放方法
KR20150102141A (ko) 개인 광고 차량의 광고 공간 대여를 위한 중개 시스템 및 중개 방법
US20190005565A1 (en) Method and system for stock-based vehicle navigation
US20200143424A1 (en) Information processing apparatus, information processing method, and non-transitory storage medium
CN111007994B (zh) 图像生成装置、图像生成方法和记录程序的非暂时性记录介质
JP7264799B2 (ja) サーバ装置、情報処理システム、端末装置のプログラム、及び情報処理システムの動作方法
JP2014086009A (ja) 情報提供システム及び情報提供装置及び情報提供方法
JP2022050837A (ja) 広告情報提供システム
JP7076766B2 (ja) 情報処理システム、情報処理プログラム、情報処理装置及び情報処理方法
JP7260464B2 (ja) 制御装置、システム、プログラム、及び制御方法
JP7011859B1 (ja) プログラム、方法、装置
US11562396B2 (en) Server device, terminal device, and computer readable recording medium
WO2023276206A1 (ja) 情報提供システム及びコンピュータプログラム
JP2021135546A (ja) 施設特典配布システム、施設特典配布装置及びコンピュータプログラム
JP2021135545A (ja) 施設特典配布システム、施設特典配布装置及びコンピュータプログラム
JP2021135544A (ja) 施設特典配布システム、施設特典配布装置及びコンピュータプログラム
JP2022050834A (ja) 広告情報提供システム
JP2022170039A (ja) 広告情報提供システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant