CN106649147B - 用于存储事件信号和图像的存储方法和存储设备 - Google Patents

用于存储事件信号和图像的存储方法和存储设备 Download PDF

Info

Publication number
CN106649147B
CN106649147B CN201610288943.8A CN201610288943A CN106649147B CN 106649147 B CN106649147 B CN 106649147B CN 201610288943 A CN201610288943 A CN 201610288943A CN 106649147 B CN106649147 B CN 106649147B
Authority
CN
China
Prior art keywords
event
image
event signal
memory
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610288943.8A
Other languages
English (en)
Other versions
CN106649147A (zh
Inventor
朴晋满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN106649147A publication Critical patent/CN106649147A/zh
Application granted granted Critical
Publication of CN106649147B publication Critical patent/CN106649147B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/771—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising storage means other than floating diffusion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/10—Address translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/32—Address formation of the next instruction, e.g. by incrementing the instruction counter
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3013—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is an embedded system, i.e. a combination of hardware and software dedicated to perform a certain function in mobile devices, printers, automotive or aircraft systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3058—Monitoring arrangements for monitoring environmental properties or parameters of the computing system or of the computing system component, e.g. monitoring of power, currents, temperature, humidity, position, vibrations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3072—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
    • G06F11/3079—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting the data filtering being achieved by reporting only the changes of the monitored data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/10—Address translation
    • G06F12/1009—Address translation using page tables, e.g. page table structures
    • G06F12/1018—Address translation using page tables, e.g. page table structures involving hashing techniques, e.g. inverted page tables
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19669—Event triggers storage or change of storage policy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/74—Circuitry for scanning or addressing the pixel array
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/86—Event-based monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/10—Providing a specific technical effect
    • G06F2212/1028—Power efficiency
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Biomedical Technology (AREA)
  • Artificial Intelligence (AREA)
  • Molecular Biology (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)

Abstract

提供一种用于存储事件信号和图像的存储方法和存储设备。所述存储方法包括：从视觉传感器接收事件信号；基于接收事件信号的时间来确定存储器的区域的事件地址；将事件信号存储在与事件地址相应的区域中。

Description

用于存储事件信号和图像的存储方法和存储设备
本申请要求于2015年10月30日提交到韩国知识产权局的第10-2015-0152008号韩国专利申请的优先权，所述申请的公开通过引用完整地包含于此。
技术领域
与示例性实施例一致的方法和设备涉及一种用于存储事件信号和图像的方法和设备，以及用于将事件信号发送至存储设备的视觉传感器(vision sensor)的操作方法。
背景技术
随着近来智能电话的普及，与基于帧的视觉传感器相比使用更低的计算复杂度和更低的功耗来工作的基于事件的视觉传感器的应用在增加。基于帧的视觉传感器针对每帧输出来自全部感测元件的信号，而基于事件的视觉传感器时间异步地输出仅来自于光的强度改变的感测元件的信号，从而降低计算复杂度和功耗。
发明内容
示例性实施例可解决至少以上问题和/或缺点和以上未描述的其他缺点。此外，示例性实施例不必须克服以上描述的缺点，并且示例性实施例可能不克服以上描述的任何问题。
根据示例性实施例的方面，提供一种存储方法，包括：某个时间从视觉传感器接收事件信号；基于接收事件信号的时间来确定存储器的区域的事件地址；将事件信号存储在与事件地址相应的区域中。
确定的步骤可包括：基于接收事件信号的时间使用哈希函数来确定事件地址。
事件地址可被唯一映射到接收事件信号的时间。
所述方法还可包括：接收将被存取的事件信号的范围信息；基于范围信息确定另一存储器的另一区域的图像地址信息；基于图像地址信息确定包括事件信号的图像是否被存储在所述另一存储器中。
确定所述图像是否被存储在所述另一存储器中的步骤可包括：确定所述图像是否被存储在与图像地址信息相应的所述另一区域中。
所述方法还可包括：响应于确定所述图像未被存储在所述另一存储器中，产生包括与范围信息相应的事件信号的图像；将所述图像和范围信息存储在与图像地址信息相应的所述另一区域中；输出存储的图像。
所述方法还可包括：响应于确定所述图像的第一部分被存储在所述另一存储器中，产生所述图像的第二部分，第二部分包括对应于范围信息的至少一个事件信号并且未被存储在所述另一存储器中；产生包括第一部分和第二部分的图像；将所述图像和范围信息存储在与图像地址信息相应的所述另一区域中；输出存储的图像。
所述方法还可包括：响应于确定所述图像被存储在所述另一存储器中来输出存储的图像。
一种非暂时性计算机可读存储器介质可存储程序以使计算机执行所述方法。
根据另一示例性实施例的方面，提供一种存储方法，包括：将存储器的地址发送至视觉传感器；从视觉传感器中的一个视觉传感器接收事件信号和所述地址中的当所述视觉传感器产生事件信号时由所述视觉传感器接收的地址；基于所述地址将事件信号存储在存储器中。
发送的步骤可包括：将当前时间和视觉传感器的各个识别信息所映射到的存储器的不同地址发送至视觉传感器。
所述地址可表示存储器的各个区域，所述区域可具有与视觉传感器的灵敏度相应的各自的容量。
存储的步骤可包括：将事件信号存储在存储器的区域中，所述区域对应于所述地址。
发送的步骤可包括：以预设的间隔将所述地址发送至视觉传感器。
根据另一示例性实施例的方面，提供一种视觉传感器的操作方法，所述方法包括：响应于从对象接收的光改变的事件来产生事件信号；当产生事件信号时从存储设备接收存储设备的存储器的区域的地址；将事件信号和表示事件信号将被存储的区域的地址发送至存储设备。
所述地址可被映射到所述地址从存储设备被发送至视觉传感器的时间。
根据另一示例性实施例的方面，提供一种存储设备，包括：通信器，被配置为某个时间从视觉传感器接收事件信号；处理器，被配置为基于接收事件信号的时间来确定存储器的区域的事件地址，将事件信号存储在与事件地址相应的区域中。
通信器还可被配置为接收将被存取的事件信号的范围信息，处理器还可被配置为：基于范围信息确定另一存储器的另一区域的图像地址信息；基于图像地址信息确定包括事件信号的图像是否被存储在所述另一存储器中；产生包括与范围信息相应的事件信号的图像；响应于处理器确定所述图像未被存储在所述另一存储器中，将所述图像和范围信息存储在与图像地址信息相应的所述另一区域中。
根据另一示例性实施例的方面，提供一种存储设备，包括：通信器，被配置为将存储器的地址发送至视觉传感器；从视觉传感器中的一个视觉传感器接收事件信号和当所述视觉传感器产生事件信号时在地址中由所述视觉传感器接收的地址。所述存储设备还包括：处理器，被配置为基于所述地址将事件信号存储在存储器中。
通信器还可被配置为：将当前时间和视觉传感器的各个识别信息所映射到的存储器的不同地址发送至视觉传感器。
附图说明
以上和/或其他方面将通过参考附图对示例性实施例的描述而更加清楚，在附图中：
图1是示出根据示例性实施例的存储设备的框图；
图2是示出根据示例性实施例的将事件信号存储在存储器中的处理的示图；
图3是示出根据示例性实施例的基于事件信号产生图像的处理的示图；
图4是示出根据示例性实施例的响应于范围信息来输出图像的处理的示图；
图5是示出根据另一示例性实施例的存储设备的框图；
图6是示出根据示例性实施例的包括在存储设备中的存储器的框图；
图7是示出根据示例性实施例的存储方法的流程图；
图8是示出根据示例性实施例的响应于范围信息来存储并输出产生的图像的处理的流程图；
图9是示出根据另一示例性实施例的存储方法的示图。
具体实施方式
参考附图更详细地描述示例性实施例。
在以下描述中，即使在不同的附图中，相同的附图参考标号也用于相同的元件。提供在描述中限定的事宜(诸如详细构造和元件)以帮助对示例性实施例的全面理解。然而，显然的是，可在没有那些具体限定的事宜的情况下来实践示例性实施例。此外，由于公知的功能或构造将以不必要的细节来模糊本描述，因此不对这些功能或构造进行详细描述。
将理解的是，这里使用的术语“包括”和/或“包含”指定陈述的特征或组件的存在，但不排除存在或添加一个或多个其他特征或组件。此外，在本说明书中描述的诸如“单元”、“……器”和“模块”的术语是指用于执行至少一个功能或操作的元件，并且可以以硬件、软件或硬件和软件的组合中被实现。
示例可被实现为各种类型的产品，例如，个人计算机、膝上型计算机、平板计算机、智能电话、电视、智能家电、智能车辆以及可穿戴装置。例如，这些示例可应用于存储和利用从智能电话、移动装置和智能家居系统中的传感器接收的信号。
图1是示出根据示例性实施例的存储设备100的框图。
参照图1，存储设备100包括通信器110、处理器120和存储器130。存储设备100是存储由视觉传感器140产生的事件信号的设备，并且可被提供于各种计算装置和/或系统(例如，诸如智能电话、平板计算机、膝上型计算机、台式计算机、电视、可穿戴装置、安全系统和智能家居系统)中。存储设备100可存储通过积累由视觉传感器140产生的事件信号而产生的图像。存储设备100可广泛用于使用由视觉传感器140产生的事件信号的图像处理、图像识别和图像监控的领域。
视觉传感器140是通过感测移动的对象的至少一部分来产生至少一个事件信号的装置，并且可包括例如动态视觉传感器(DVS)。视觉传感器140可包括多个感测元件。单个感测元件可感测预定的事件的发生并输出事件信号。
与基于帧的视觉传感器(例如，互补金属氧化物半导体(CMOS)图像传感器(CIS))不同，视觉传感器140可输出来自光的强度改变的感测元件的事件信号，而不是以帧为单位扫描感测元件的输出。
由视觉传感器140接收的光改变的事件可因对象的移动而发生。在下文中，光改变的事件将被简称为光改变事件。例如，在光源随着时间基本固定并且对象不自主发射光的情况下，由视觉传感器140接收的光可以是从光源发射并被对象反射的光。在对象、光源和视觉传感器140均为静止的情况下，被静止对象反射的光可基本不改变。因此，光的强度可不改变，并且视觉传感器140可不感测光改变事件。相反，当对象移动时，被移动对象反射的光可响应于对象的移动而改变。因此，光的亮度可改变，并且视觉传感器140可感测光改变事件。在这里，对象的移动可包括对象自身的移动和响应于视觉传感器140的移动的对象与视觉传感器140之间的相对移动。
响应于对象的移动而输出的事件信号可以是时间异步地产生的信息，具体地，类似于从人的视网膜传递到大脑的视神经信号的信息。例如，当感测到移动对象时可产生事件信号，而针对静止对象可不产生事件信号。
视觉传感器140还可输出光的强度改变的时间。在这个示例中，视觉传感器140将产生事件信号的时间输出为相对数。视觉传感器140可输出事件信号和每次产生事件信号时逐渐增加的相对数。
视觉传感器140可利用感测光改变事件的感测元件的地址信息或地址/时间信息。因此，与基于帧的视觉传感器相比，视觉传感器140可大大减少将处理的数据量。例如，可以以小于微秒(μs)的单位测量基于事件的视觉传感器的响应速率。
通信器110可从视觉传感器140接收事件信号。通信器110可从视觉传感器140接收响应于光改变事件而时间异步地产生的事件信号。
处理器120可基于与关于接收事件信号的时间的时间信息相应的事件地址信息将事件信号存储在存储器130中。
时间信息可表示接收事件信号的存储设备100的系统时间。处理器120可基于时间信息确定事件地址信息。事件地址信息可表示接收的事件信号将被存储的存储器区域，并且可被唯一映射到时间信息。
处理器120可将事件信号存储在由确定的事件地址信息表示的存储器区域中。例如，当在不同时间接收到事件信号时，事件信号可被存储在存储器130的不同区域中。
存储器130可存储从视觉传感器140接收的事件信号。存储器130可将事件信号存储在由与时间信息相应的事件地址信息表示的存储器区域中。
存储设备100可通过积累存储在存储器130中的事件信号来产生图像。在这个示例中，存储设备100的组件可工作如下。
通信器110可从用户接收关于将被存取的事件信号的范围信息。范围信息可表示将被用户存取的事件信号的时间信息的范围，并且可包括例如关于开始时间和结束时间的信息或关于开始时间和间隔的信息。例如，通信器110可通过包括在存储设备100中的接口接收由用户输入的范围信息，或者可从存储设备100的外部装置接收范围信息。
处理器120可基于与范围信息相应的图像地址信息来验证在存储器130中是否存储了包括事件信号的图像。图像地址信息可被唯一映射到范围信息，并且表示包括属于范围信息的事件信号的图像将被存储的存储器区域。处理器120可验证图像是否被存储在由图像地址信息表示的存储器区域中，从而验证图像是否被存储在存储器130中。
处理器120可基于图像是否被存储在存储器130中执行预定操作。将参考图3和图4来描述基于图像是否被存储而执行的处理器120的操作。
图2是示出根据示例性实施例的将事件信号存储在存储器230中的处理的示图。
参照图2，示出存储设备将在T＝106时接收的事件信号4 210存储在存储器230中的示例。在这里，T＝106可表示与接收事件信号4 210的时间相关的时间信息。存储器230包括可存储事件信号的多个区域，所述多个区域可由事件地址信息来表示(例如，队列索引(Q索引)或数组索引)。
存储设备可使用哈希函数220来确定与时间信息T＝106相应的事件地址信息。哈希函数220是指用于输出与输入的时间信息相应的事件地址信息的函数。例如，可使用时间信息与事件地址信息彼此映射的查找表。时间信息与事件地址信息可相互唯一映射。具体地，时间信息的不同项可不被映射到事件地址信息的单个项，而时间信息的不同项可被映射到事件地址信息的不同项。
在图2的示例中，存储设备可使用哈希函数220将与时间信息T＝106相应的事件地址信息确定为Q索引6。存储设备可将事件信号4 210存储在由Q索引6表示的存储器区域中。
事件地址信息可被唯一映射到接收的事件信号的时间信息。因此，当在与预定时间信息相应的时间未接收到事件信号的情况下，事件信号可不被存储在由与该时间信息相应的事件地址信息表示的存储器区域中。参照图2的存储器230，在T＝100时接收的事件信号1可被存储在由事件地址信息(例如，Q索引0)表示的存储器区域中。相反，由于在T＝101时未接收到事件信号，所以事件信号可不被存储在由事件地址信息(例如，Q索引1)表示的存储器区域中。
图3是示出根据示例性实施例的基于事件信号产生图像的处理的示图。
参照图3，从视觉传感器接收的事件信号可被存储在存储器310中。通过积累至少一个事件信号而产生的图像可被存储在存储器320中。可基于范围信息来指定图像。存储器320可以是被配置为通过将产生的图像保持预定的时间段来缓存产生的图像的装置。
例如，存储设备可基于与包括开始时间T＝101和结束时间T＝102的范围信息1相应的事件信号2和事件信号3来产生图像1 321。图像1 321可被存储在由与范围信息1相应的图像地址信息(例如，Q索引1-2)所表示的存储器区域中。因此，当接收到范围信息1时，存储设备可验证图像1 321是否被存储在由与范围信息1相应的Q索引1-2所表示的存储器区域中，从而验证第一图像1 321是否被存储在存储器320中。
存储设备可基于与包括开始时间T＝104和结束时间T＝105的范围信息2相应的事件信号4和事件信号5来产生图像2 322。图像2 322可被存储在由与范围信息2相应的图像地址信息(例如，Q索引4-5)所表示的存储器区域中。类似地，当接收到范围信息2时，存储设备可验证图像2 322是否被存储在由与范围信息2相应的Q索引4-5所表示的存储器区域中，从而验证图像2 322是否被存储在存储器320中。
图4是示出根据示例性实施例的响应于范围信息来输出图像的处理的示图。
参照图4，示出响应于从用户接收的范围信息1 410-1来确定输出图像1440-1的示例和响应于从用户接收的范围信息2 410-2来确定输出图像2 440-2的示例。
范围信息1 410-1可包括开始时间T-101和结束时间T＝102作为与将被用户存取的事件信号相关的信息。
存储设备可验证包括属于范围信息1 410-1的事件信号(例如，事件信号2和事件信号3)的图像是否被存储在存储器430中。例如，存储设备可验证图像是否被存储在由与范围信息1 410-1相应的图像地址信息(例如，Q索引1-2)所表示的(存储器430的)存储器区域中。当图像(例如，图像1)被存储在由Q索引1-2所表示的存储器区域中时，存储设备可将存储的图像确定为输出图像1 440-1。
相反，当图像未被存储在由Q索引1-2所表示的存储器区域中时，存储设备可通过积累存储器420中存储的事件信号中的属于范围信息1 410-1的事件信号2和事件信号3，来产生图像。存储设备可将产生的图像和范围信息1410-1存储在由Q索引1-2表示的存储器区域中，并将存储的图像确定为输出图像1 440-1。
范围信息2 410-2可包括开始时间T-103和结束时间T＝105作为与将被用户存取的事件信号相关的信息。
存储设备可验证包括属于范围信息2 410-2的事件信号(例如，事件信号4至事件信号6)的图像是否被存储在存储器430中。例如，存储设备可验证图像是否被存储在由与范围信息2 410-2相应的图像地址信息(例如，Q索引3-5)所表示的(存储器430的)存储器区域中。
如图4所示，当仅图像的第一部分(例如，图像2)被存储在存储器430中时，存储设备可基于存储在存储器420中的事件信号4来产生图像的第二部分，第二部分未存储在存储器430中。存储设备可通过从存储器420获取与图像的第二部分相应的事件信号来产生第二部分。
存储设备可将通过积累存储在存储器430中的第一部分(例如，图像2)和产生的第二部分而产生的图像、以及范围信息2 410-2存储在由Q索引3-5表示的存储器区域中，并将存储的图像确定为输出图像2 440-2。
图5是示出根据另一示例性实施例的存储设备的框图。
参照图5，存储设备500包括通信器510、处理器520和存储器530。存储设备500可以是存储由视觉传感器540-1、540-2、……、540-k产生的事件信号的设备，并可被提供于各种计算装置和/或系统(例如，诸如智能电话、平板计算机、膝上型计算机、台式计算机、电视、可穿戴装置、安全系统和智能家居系统)中。存储设备500可被广泛用于使用由视觉传感器540-1、540-2、……、540-k产生的事件信号的图像处理、图像识别和图像监控的领域。
通信器510可与视觉传感器540-1、540-2、……、540-k进行通信。通信器510可将与当前时间信息相应的地址信息的项发送到视觉传感器540-1、540-2、……、540-k。通信器510可从视觉传感器540-1、540-2、……、540-k中的产生事件信号的参考视觉传感器接收事件信号和与事件信号相应的参考地址信息。在这个示例中，参考视觉传感器可以是视觉传感器540-1、540-2、……、540-k中响应于光改变事件而产生事件信号的传感器。
处理器520可确定将被发送至视觉传感器540-1、540-2、……、540-k的地址信息的项。处理器520可确定当前时间信息和视觉传感器540-1、540-2、……、540-k的识别信息被映射到的不同的地址信息。例如，处理器520可确定当前时间信息和视觉传感器1 540-1的识别信息被映射到的地址信息1。类似地，处理器520可确定当前时间信息和视觉传感器2540-2的识别信息被映射到的地址信息2，并确定当前时间信息和视觉传感器k 540-k的识别信息被映射到的地址信息k。
当前时间信息可表示地址信息被确定并被发送至视觉传感器的时间。地址信息可以是表示存储器530的将存储事件信号的预定区域的信息。
处理器520可将确定的地址信息发送至视觉传感器540-1、540-2、……、540-k。例如，处理器520可将地址信息1发送至视觉传感器1 540-1，将地址信息2发送至视觉传感器2540-2，将地址信息k发送至视觉传感器k 540-k。处理器520可以以预定间隔发送确定的地址信息。
处理器520可从视觉传感器540-1、540-2、……、540-k中响应于光改变事件而产生事件信号的参考视觉传感器接收事件信号和与该事件信号相应的参考地址信息。参考地址信息可以是当参考视觉传感器产生事件信号时从通信器510接收的地址信息。
处理器520可基于参考地址信息将接收的事件信号存储在存储器530中。处理器520可将事件信号存储在由参考地址信息表示的存储器区域中。
存储器530可存储从视觉传感器540-1、540-2、……、540-k接收的事件信号。例如，存储器530可包括多个分开的存储器。所述多个存储器可以是单个装置中被逻辑划分以存储事件信号的多个区域，或者可以是被物理划分以存储事件信号的存储器。
视觉传感器540-1、540-2、……、540-k可以是响应于光改变事件而时间异步地产生事件信号的装置，并可与存储设备500进行通信。视觉传感器540-1、540-2、……、540-k可从通信器510接收与当前时间信息相应的地址信息。当事件信号被产生为参考地址信息时，在视觉传感器540-1、540-2、……、540-k中，响应于光改变事件而时间异步地产生事件信号的参考视觉传感器可确定从通信器510接收的地址信息。参考视觉传感器可将产生的事件信号和参考地址信息发送至通信器510。
图6是示出根据示例性实施例的包括在存储设备中的存储器530的框图。
参照图6，存储器530包括多个存储器530-1、530-2、……和530-k。例如，所述多个存储器530-1、530-2、……和530-k可以是单个装置中被逻辑划分以存储事件信号的区域，或者可以是被物理划分以存储事件信号的存储器。
从视觉传感器中的产生事件信号的参考视觉传感器接收的事件信号可基于参考地址信息被存储在存储器530中。参考地址信息可以是表示接收的事件信号将被存储的存储器区域的信息，具体地，由参考视觉传感器在产生事件信号时从存储设备接收的地址信息。表示地址信息从存储设备被发送至参考视觉传感器的当前时间信息和参考视觉传感器的识别信息可被映射到参考地址信息。因此，从视觉传感器接收的事件信号可基于被映射到参考地址信息的当前时间信息和参考视觉传感器的识别信息被存储在存储器530中。
存储设备可基于参考视觉传感器的识别信息将事件信号存储在存储器530中。所述多个存储器530-1、530-2、……和530-k可对应于视觉传感器。例如，存储器1 530-1可对应于视觉传感器1，并存储从视觉传感器1接收的事件信号。类似地，存储器2 530-2可对应于视觉传感器2，并存储从视觉传感器2接收的事件信号。存储器k 530-k可对应于视觉传感器k，并存储从视觉传感器k接收的事件信号。
存储设备可基于当前时间信息将事件信号存储在存储器530中。所述多个存储器530-1、530-2、……和530-k中的每个存储器可被划分为多个区域，每个区域具有预定容量。事件信号可被存储在所述多个区域中的由当前时间信息被映射到的参考地址信息所表示的区域中。例如，当前时间信息T＝a被映射到的参考地址信息可表示所述多个区域中的第n个区域，并且与参考地址信息一起被接收的事件信号可被存储在第n个划分的区域中。类似地，当前时间信息T＝a+1被映射到的参考地址信息可表示第(n+1)个区域，并且与参考地址信息一起被接收的事件信号可被存储在第(n+1)个区域中。当不存在与当前时间信息T＝a+2被映射到的参考地址信息一起被接收的事件信号时，第(n+2)个区域中可不存储事件信号。
所述多个区域的容量可基于相应的视觉传感器的灵敏度来确定。具体地，所述多个存储器530-1、530-2、……和530-k中的每个存储器可包括基于相应的视觉传感器的灵敏度被划分为具有预定容量的多个区域。
视觉传感器可具有不同的灵敏度。视觉传感器1和视觉传感器2可响应于相同的光改变事件而产生不同数量的事件信号。例如，当视觉传感器2的灵敏度高于视觉传感器1的灵敏度时，响应于相同的光改变事件，视觉传感器2可产生更多数量的事件信号。为了在不遗漏的情况下存储产生的事件信号，包括在与视觉传感器2相应的存储器2 530-2中的区域的容量可大于包括在存储器1 530-1中的区域的容量。
图7是示出根据示例性实施例的存储方法的流程图。
图7的存储方法可被包括在存储设备中的处理器执行。
参照图7，在操作710，存储设备从视觉传感器接收事件信号。存储设备可接收响应于光改变事件而时间异步地产生的事件信号。
在操作720，存储设备基于与关于接收事件信号的时间的时间信息相应的事件地址信息将事件信号存储在存储器中。事件地址信息可基于时间信息来确定，并且表示事件信号将被存储的存储器区域。此外，事件地址信息可被唯一映射到时间信息。
图8是示出根据示例性实施例的响应于范围信息来存储并输出产生的图像的处理的流程图。
参照图8，在操作810，存储设备接收关于将被存取的事件信号的范围信息。范围信息可表示将被用户存取的事件信号的时间信息的范围，并包括例如关于开始时间和结束时间的信息或关于开始时间和间隔的信息。
在操作820，存储设备基于与范围信息相应的图像地址信息来确定包括事件信号的图像是否被存储在存储器中。存储设备可验证图像是否被存储在由图像地址信息表示的存储器区域中，从而验证图像是否被存储在存储器中。图像地址信息可被映射到与将被存取的事件信号相关的范围信息，并且表示图像将被存储的存储器区域。如果存储设备确定图像未被存储在存储器中，则存储设备继续操作830。如果存储设备确定图像被部分地存储在存储器中，则存储设备继续操作840。如果存储设备确定图像被存储在存储器中，则存储设备继续操作870。
在操作830，存储设备基于属于范围信息的事件信号来产生图像。
在仅图像的一部分(例如，第一部分)被存储在存储器中的情况下，在操作840，存储设备产生图像的另一部分(例如，第二部分)，其中，该另一部分不被存储在存储器中。存储设备可通过积累与第二部分相应的事件信号来产生第二部分。
在操作850，存储设备通过积累产生的部分和存储的部分来产生与范围信息相应的图像。在操作860，存储设备基于图像地址信息将产生的图像和范围信息存储在存储器中。在操作870，存储设备响应于范围信息输出存储的图像。
在操作870，在图像被存储在存储器中的情况下，存储设备可输出完整的存储的图像。
图9是示出根据另一示例性实施例的存储方法的示图。
图9的存储方法可由包括在存储设备900中的处理器和包括在参考视觉传感器910中的处理器执行。参考视觉传感器910可以是与存储设备900进行通信的多个视觉传感器中的响应于光改变事件而产生事件信号的视觉传感器。为便于描述，将基于存储设备900和参考视觉传感器910来描述所述存储方法。
在操作901，存储设备900确定与当前时间信息相应的地址信息。存储设备900可确定当前时间信息和参考视觉传感器910的识别信息被映射到的地址信息。
当前时间信息可表示地址信息被确定并被发送至参考视觉传感器910的时间。地址信息可以是表示事件信息将被存储的存储器的预定区域的信息。
在操作902，存储设备900将确定的地址信息发送至参考视觉传感器910。
在操作911，参考视觉传感器910响应于光改变事件产生事件信号。参考视觉传感器910可响应于从对象接收的光发生改变的事件而时间异步地产生事件信号。
在操作912，参考视觉传感器910将事件信号和参考地址信息发送至存储设备900参考视觉传感器910可将在事件信号被产生时从存储设备900接收的地址信息确定为参考地址信息，并将产生的事件信号和参考地址信息发送至存储设备900。
在操作903，存储设备900基于参考地址信息将事件信号存储在存储器中。存储设备900可将事件信号存储在由参考地址信息表示的存储器区域中。
示例性实施例可基于与关于接收事件信号的时间的时间信息相应的事件地址信息将事件信号存储在存储器中，从而无需线性搜索事件信号而基于时间信息直接存取存储的事件信号。
示例性实施例可基于关于接收事件信号的时间的时间信息将事件信号存储在存储器中，从而在无需检查事件信号的时间戳而快速存取事件信号并有效地降低用于范围搜索的成本。
示例性实施例可通过积累属于范围信息的事件信号来产生图像并基于与范围信息相应的图像地址信息将产生的图像存储在存储器中，从而在一旦产生图像后无需再次产生图像而有效地利用产生的图像。
示例性实施例可将事件信号存储在由当前时间信息和参考视觉传感器的识别信息被映射到的参考地址信息所表示的存储器区域中，从而无需使用单独的哈希函数或查找表而快速搜索将被存取的视觉传感器的事件信号。
示例性实施例可使用当前时间信息被映射到的地址信息，从而有效地匹配与由多个视觉传感器时间异步地产生的事件信号相关的时间信息。
示例性实施例可在将事件信号存储在存储器中时不单独存储事件信号的时间戳，从而有效地使用存储事件信号的存储器。
此外，示例实施例还可通过介质(例如，计算机可读介质)上的用于控制至少一个处理元件来实现上述任意示例性实施例的计算机可读代码和/或指令被实施。所述介质可对应于可用作存储器和/或可执行计算机可读代码的传输的任意介质。
计算机可读代码可以以各种方式在介质上被记录和/或被传输，介质的示例包括记录介质，诸如磁存储介质(例如，ROM、软盘、硬盘等)和光记录介质(例如，致密盘只读存储器(CD-ROM)或数字多功能盘(DVD))，以及传输介质(诸如互联网传输介质)。因此，所述介质可具有适于存储或携带信号或信息的结构(诸如根据一个或多个示例性实施例的携带比特流的装置)。所述介质还可在分布式网络上，以使计算机可读代码在所述介质上被存储和/或传输并以分布式方式被执行。此外，处理元件可包括处理器或计算机处理器，并且处理元件可被分布于和/或包括在单个装置中。
上述示例性实施例是示例而不将被解释为限制。本教导可被容易地应用于其他类型的设备。此外，期望示例性实施例的描述是示意性的而不限制权利要求的范围，并且许多可选方案、修改和变化对于本领域技术人员将是清楚的。

Claims (12)

1.一种配置为存储由动态视觉传感器产生的事件信号的存储设备的存储方法，包括：
当来自对象的光的强度改变时，从动态视觉传感器接收事件信号；
确定与接收事件信号的时间信息对应的事件地址；
基于事件地址，将事件信号存储在存储设备的第一存储器的第一区域中，
其中，事件地址指示将存储事件信号的第一存储器的第一区域，
其中，事件信息是存储设备的系统时间。
2.如权利要求1所述的存储方法，其中，事件地址是使用哈希函数来确定的。
3.如权利要求1所述的存储方法，其中，事件地址被唯一映射到接收事件信号的时间信息。
4.如权利要求1所述的存储方法，还包括：
接收将被存取的事件信号的范围信息；
基于范围信息，确定存储设备的第二存储器的第二区域的图像地址信息；
基于图像地址信息，确定包括事件信号的图像是否被存储在第二存储器中。
5.如权利要求4所述的存储方法，其中，确定所述图像是否被存储在第二存储器中的步骤包括：确定所述图像是否被存储在与图像地址信息相应的第二区域中。
6.如权利要求4所述的存储方法，还包括：响应于确定所述图像未被存储在第二存储器中：
产生包括与范围信息相应的事件信号的图像；
将所述图像和范围信息存储在与图像地址信息相应的第二区域中；
输出存储的图像。
7.如权利要求4所述的存储方法，还包括：响应于确定所述图像的第一部分被存储在存储器中：
产生所述图像的第二部分，第二部分包括对应于范围信息的至少一个事件信号并且未被存储在第二存储器中；
产生包括第一部分和第二部分的图像；
将所述图像和范围信息存储在与图像地址信息相应的第二区域中；
输出存储的图像。
8.如权利要求4所述的存储方法，还包括：响应于确定所述图像被存储在第二存储器中来输出存储的图像。
9.一种存储设备，包括：
通信器，被配置为当来自对象的光的强度改变时从动态视觉传感器接收事件信号；
第一存储器；
处理器，被配置为：
基于接收事件信号的时间信息来确定第一存储器的第一区域的事件地址；
将事件信号存储在与事件地址相应的第一区域中，
其中，事件信息是存储设备的系统时间。
10.如权利要求9所述的存储设备，其中，通信器还被配置为接收将被存取的事件信号的范围信息，并且
其中，处理器还被配置为：
基于范围信息确定第二存储器的第二区域的图像地址信息；
基于图像地址信息确定包括事件信号的图像是否被存储在存储器中；
响应于处理器确定所述图像未被存储在存储器中，产生包括与范围信息相应的事件信号的图像并且将所述图像和范围信息存储在与图像地址信息相应的第二区域中。
11.如权利要求9所述的存储设备，其中，事件信号是有动态视觉传感器异步地产生的事件信号。
12.一种存储设备的操作方法，所述操作方法包括：
响应于第一事件而接收第一事件信号，且响应于第二事件而接收第二事件信号；
当分别接收到第一事件信号和第二事件信号时，确定第一事件地址和第二事件地址；
分别基于第一事件地址和第二事件地址，将第一事件信号和第二事件信号存储在存储器的第一区域和第二区域中；
通过积累第一事件信号和第二事件信号，来产生图像，
其中，第一事件地址指示第一事件信号将被存储的第一区域，第二事件地址指示第二事件信号将被存储的第二区域，
其中，第一事件地址对应于存储设备的接收第一事件信号的第一系统时间，第二事件地址对应于存储设备的接收第二事件信号的第二系统时间。
CN201610288943.8A 2015-10-30 2016-05-04 用于存储事件信号和图像的存储方法和存储设备 Active CN106649147B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0152008 2015-10-30
KR1020150152008A KR102421141B1 (ko) 2015-10-30 2015-10-30 이벤트 신호 및 영상의 저장 방법 및 저장 장치, 저장 장치로 이벤트 신호를 전송하는 비전 센서의 동작 방법

Publications (2)

Publication Number Publication Date
CN106649147A CN106649147A (zh) 2017-05-10
CN106649147B true CN106649147B (zh) 2021-11-02

Family

ID=56008449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610288943.8A Active CN106649147B (zh) 2015-10-30 2016-05-04 用于存储事件信号和图像的存储方法和存储设备

Country Status (5)

Country Link
US (1) US10097779B2 (zh)
EP (1) EP3163432A1 (zh)
JP (1) JP2017085549A (zh)
KR (1) KR102421141B1 (zh)
CN (1) CN106649147B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10257456B2 (en) * 2017-09-07 2019-04-09 Samsung Electronics Co., Ltd. Hardware friendly virtual frame buffer
EP3725068B1 (en) * 2017-12-11 2021-07-14 Prophesee Event-based image sensor and operating method thereof
CN108827461B (zh) * 2018-04-25 2019-05-03 上海芯仑光电科技有限公司 像素采集电路及光流传感器
EP3561685B1 (en) * 2018-04-27 2022-06-01 IniVation AG Device and method for controlling a transfer of information from a plurality of electronic components through a communication bus to a host device
CN108764078B (zh) * 2018-05-15 2019-08-02 上海芯仑光电科技有限公司 一种事件数据流的处理方法及计算设备
KR20190133465A (ko) * 2018-05-23 2019-12-03 삼성전자주식회사 다이나믹 비전 센서의 데이터 처리 방법, 이를 수행하는 다이나믹 비전 센서 및 이를 포함하는 전자 장치
CN109785365B (zh) * 2019-01-17 2021-05-04 西安电子科技大学 地址事件驱动非结构化信号的实时目标跟踪方法
JP2020136958A (ja) * 2019-02-21 2020-08-31 ソニーセミコンダクタソリューションズ株式会社 イベント信号検出センサ及び制御方法
JP7298277B2 (ja) * 2019-04-25 2023-06-27 トヨタ自動車株式会社 イベントカメラ
JP7120180B2 (ja) * 2019-08-07 2022-08-17 トヨタ自動車株式会社 イメージセンサ
WO2021038751A1 (ja) 2019-08-28 2021-03-04 株式会社ソニー・インタラクティブエンタテインメント センサシステム、画像処理装置、画像処理方法およびプログラム
JP7352637B2 (ja) * 2019-08-28 2023-09-28 株式会社ソニー・インタラクティブエンタテインメント センサモジュール、センサシステム、画像処理装置、画像処理方法およびプログラム
JP2023037041A (ja) * 2020-02-18 2023-03-15 ソニーセミコンダクタソリューションズ株式会社 撮像回路および撮像装置
CN113112722B (zh) * 2021-03-03 2023-03-24 杭州海康威视数字技术股份有限公司 一种事件检测方法、装置、系统及设备
WO2023095010A1 (en) * 2021-11-24 2023-06-01 Sony Semiconductor Solutions Corporation Storage management of events generated by an event-based vision sensor

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11232097A (ja) * 1998-02-16 1999-08-27 Fuji Xerox Co Ltd 情報処理装置
US8965175B2 (en) 2001-04-09 2015-02-24 Monitoring Technology Corporation Data recording and playback system and method
US6660989B2 (en) * 2001-07-11 2003-12-09 Texas Instruments Incorporated CMOS imager having asynchronous pixel readout in order of pixel illumination
US20030133614A1 (en) * 2002-01-11 2003-07-17 Robins Mark N. Image capturing device for event monitoring
WO2004015572A1 (en) 2002-08-07 2004-02-19 Mmagix Technology Limited Apparatus, method and system for a synchronicity independent, resource delegating, power and instruction optimizing processor
DE602004026026D1 (de) * 2003-12-24 2010-04-29 Pioneer Corp Gesteuerte Meldungsvorrichtung, System und Verfahren
JP4741283B2 (ja) 2005-05-16 2011-08-03 セイコーエプソン株式会社 集積回路装置、マイクロコンピュータ及び監視カメラシステム
JP4277837B2 (ja) 2005-08-03 2009-06-10 ソニー株式会社 撮像装置
AT504582B1 (de) 2006-11-23 2008-12-15 Arc Austrian Res Centers Gmbh Verfahren zur generierung eines bildes in elektronischer form, bildelement für einen bildsensor zur generierung eines bildes sowie bildsensor
CN101587642A (zh) * 2008-05-20 2009-11-25 奥城同立科技开发（北京）有限公司 交通视频控制器及车辆违规抓拍控制方法
CN102171637B (zh) * 2008-08-07 2015-08-12 拉普特知识产权公司 用于检测光学触摸敏感装置中的多触摸事件的方法和设备
ES2396816B1 (es) 2011-05-26 2014-01-21 Consejo Superior De Investigaciones Científcas (Csic) Circuito de ganancia de transimpedancia de bajo consumo y bajo desapareamiento para sistemas de fotosensado diferenciador temporal en sensores dinámicos de visión
KR101883373B1 (ko) 2011-10-10 2018-07-31 엘지전자 주식회사 이동 단말기 및 이의 제어방법
EP2672386A3 (en) 2012-06-08 2016-07-20 Samsung Electronics Co., Ltd Apparatus and method for processing asynchronous event information
KR101887988B1 (ko) 2012-07-03 2018-08-14 삼성전자 주식회사 이미지 센서 칩, 이의 동작 방법, 및 이를 포함하는 시스템
KR101896666B1 (ko) * 2012-07-05 2018-09-07 삼성전자주식회사 이미지 센서 칩, 이의 동작 방법, 및 이를 포함하는 시스템
JP5990080B2 (ja) 2012-10-05 2016-09-07 キヤノン株式会社 撮像システム、および撮像システムの駆動方法
CN103941966B (zh) * 2013-01-21 2017-12-26 联想(北京)有限公司 应用控制的方法及电子设备
KR102081087B1 (ko) 2013-06-17 2020-02-25 삼성전자주식회사 동기적 영상과 비동기적 영상을 위한 영상 정합 장치 및 이미지 센서
KR102054774B1 (ko) * 2013-09-10 2019-12-11 삼성전자주식회사 동적 비전 센서, 조도 센서, 및 근접 센서 기능을 구비한 이미지 장치
CN104581639B (zh) * 2015-01-27 2018-06-01 武汉大学 一种应用于移动终端传感器感知信息的无缝时空接入方法
CN104967792A (zh) * 2015-07-02 2015-10-07 上海念瞳半导体科技有限公司 基于事件的传感阵列读取装置及其读取方法

Also Published As

Publication number Publication date
KR20170050461A (ko) 2017-05-11
US10097779B2 (en) 2018-10-09
KR102421141B1 (ko) 2022-07-14
EP3163432A1 (en) 2017-05-03
JP2017085549A (ja) 2017-05-18
US20170127005A1 (en) 2017-05-04
CN106649147A (zh) 2017-05-10

Similar Documents

Publication Publication Date Title
CN106649147B (zh) 用于存储事件信号和图像的存储方法和存储设备
US10083349B2 (en) Event signal processing method and apparatus
US10146316B2 (en) Method and apparatus for disambiguating a plurality of targets
US20130179303A1 (en) Method and apparatus for enabling real-time product and vendor identification
US20240140314A1 (en) Virtual Mirror with Automatic Zoom Based on Vehicle Sensors
US10972691B2 (en) Dynamic vision sensor, electronic device and data transfer method thereof
KR20160068830A (ko) 아이 트래킹
US20150220295A1 (en) User terminal apparatus, display apparatus, and control methods thereof
US11748992B2 (en) Trigger regions
US20220172276A1 (en) System for shopping mall service using eye tracking technology and computing device for executing same
KR20210000671A (ko) 헤드 포즈 추정
CN113689508B (zh) 点云标注方法、装置、存储介质及电子设备
US11126322B2 (en) Electronic device and method for sharing image with external device using image link information
US11270367B2 (en) Product comparison techniques using augmented reality
KR20230145296A (ko) 히트맵을 생성하는 장치 및 방법
KR102527080B1 (ko) 입력 이벤트를 처리하기 위한 전자 장치 및 그의 동작 방법
TW201525880A (zh) 電子裝置及其顯示之動態影像之物件資訊查詢方法
KR102178172B1 (ko) 단말, 서비스 제공 장치, 그 제어 방법, 컴퓨터 프로그램이 기록된 기록 매체 및 이미지 검색 시스템
KR102390798B1 (ko) 그래픽컬 콘텐트를 제공하는 전자 장치 및 제어 방법
CN113287083A (zh) 透明智能手机
WO2021172221A1 (ja) オブジェクト認識システム及び受信端末
US20230274539A1 (en) Inference processing system capable of reducing load when executing inference processing, edge device, method of controlling inference processing system, method of controlling edge device, and storage medium
JP7139395B2 (ja) 制御装置、プログラム、及びシステム
US11538503B1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
US11849312B2 (en) Agent device and method for operating the same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant