CN110244924A - 图像传感器、系统、其数据生成方法及记录介质 - Google Patents

图像传感器、系统、其数据生成方法及记录介质 Download PDF

Info

Publication number
CN110244924A
CN110244924A CN201811518138.5A CN201811518138A CN110244924A CN 110244924 A CN110244924 A CN 110244924A CN 201811518138 A CN201811518138 A CN 201811518138A CN 110244924 A CN110244924 A CN 110244924A
Authority
CN
China
Prior art keywords
information
image sensor
operating terminal
display
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811518138.5A
Other languages
English (en)
Other versions
CN110244924B (zh
Inventor
冈田直树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Publication of CN110244924A publication Critical patent/CN110244924A/zh
Application granted granted Critical
Publication of CN110244924B publication Critical patent/CN110244924B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Digital Computer Display Output (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种图像传感器、系统、其数据生成方法及记录介质，能够生成与显示图像传感器的信息的操作终端分别适合的画面数据。图像传感器系统具有进行制造物检查的图像传感器、及用于从外部操作图像传感器的操作终端。进而，所述图像传感器系统具有：识别部，确定使用操作终端的用户的用户信息与操作终端的设备信息；决定部，基于经确定的用户信息与经确定的设备信息，来决定在操作终端所使用的显示部上显示的与检查相关的显示信息、和显示信息在显示部上的配置；以及生成部，生成一数据，所述数据用于在操作终端的显示部上，以经决定的配置来对显示信息进行显示。

Description

图像传感器、系统、其数据生成方法及记录介质
技术领域
本发明涉及一种使用进行制造物检查的图像传感器(sensor)的图像传感器系统、图像传感器、与图像传感器相关的数据生成方法以及程序(program)。
背景技术
在工场的制造线(line)上，为了实现制造物的检查或管理的自动化或省力化，多采用使用图像传感器的图像传感器系统(专利文献1)。而且，为了图像传感器的维护(maintenance)等，也会使用个人电脑(Personal Computer，PC)或平板(tablet)等外部操作终端来确认图像传感器的信息。
[现有技术文献]
[专利文献]
专利文献1：日本专利特开2009-47446号公报
发明内容
[发明所要解决的问题]
以往，对于显示在外部操作终端上的画面的数据，是以操作终端的画面尺寸或画面分辨率等处于预先规定的范围内为前提，无论输出至哪种终端，均使用共同的画面布局(layout)。而且，对于利用共同的画面布局无法适当地显示图像传感器的信息的特殊操作终端，则使用基于专用的画面布局来将图像传感器信息生成显示画面数据的程序。
因此，例如在使用PC、平板、智能电话来作为外部操作终端的情况下，尽管无论哪个显示器(display)都能显示图像传感器的信息，但在PC的显示器与平板或智能电话的显示器中，画面尺寸或画面分辨率等不同，因此，若在这些操作终端中基于共同的画面布局来生成图像传感器信息的显示画面数据，则会变成尽管在PC的显示器上用户易看的画面显示但在平板或智能电话的显示器上难以看清的画面显示，而且，存在与此相反的可能性。而且，提供针对每个操作终端来生成图像传感器信息的显示画面的画面布局数据的程序有可能并不现实。
本发明是鉴于所述实际情况而完成，其目的在于提供一种技术，能够生成与显示图像传感器信息的操作终端分别适应的画面数据。
[解决问题的技术手段]
本发明的第一方面提供一种图像传感器系统，具有进行制造物检查的图像传感器、及用于从外部操作所述图像传感器的操作终端，所述图像传感器系统包括：识别部，确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息；决定部，基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、和所述显示信息在所述显示部上的配置；以及生成部，生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
据此，能够生成以与用户所使用的操作终端各自的画面尺寸适应的画面布局，来显示与用户信息相应的内容的图像传感器信息的数据，因此能够在各用户所使用的操作终端中，针对每个用户而以适当的画面布局来显示适当的图像传感器信息。
而且，也能够提供一种图像传感器，其是用于所述图像传感器系统的图像传感器，所述图像传感器具有所述识别部、所述决定部、所述生成部的至少一个功能部，所述图像传感器还包括发送部，所述发送部将通过所述图像传感器所具有的所述功能部而处理的信息发送至外部。而且，所述图像传感器系统也可为：所述设备信息包含性能信息，所述性能信息确定所述操作终端所使用的显示部的画面尺寸、所述显示部的分辨率、所述操作终端的设备名、在所述操作终端上执行的操作系统(Operating System，OS)中的至少一个，所述决定部基于经确定的所述设备信息中所含的所述性能信息，来决定所述显示信息在所述显示部上的配置。而且，所述决定部也可基于经确定的所述用户信息来确定与所述用户所属的所述图像传感器相关的范畴(category)，并基于经确定的所述范畴来决定所述显示信息。而且，所述范畴也可包含所述图像传感器的设计者，在经确定的所述范畴为所述图像传感器的设计者的情况下，所述显示信息包含与所述图像传感器所执行的处理的流程相关的信息。而且，所述范畴也可包含所述图像传感器的管理者，在经确定的所述范畴为所述图像传感器的管理者的情况下，所述显示信息包含与所述图像传感器相关的统计信息。而且，所述显示信息的配置也可基于至少与所述检查相关的项目的有无而决定。而且，所述显示信息的配置也可包含在所述显示部上显示所述显示信息的显示区域的尺寸、及所述显示区域在所述显示部上的位置。而且，所述识别部也可从所述操作终端获取用户代理(agent)信息，根据所述用户代理信息来确定所述设备信息。
进而，根据本申请的一方面，提供一种图像传感器系统中的图像传感器的数据生成方法，所述图像传感器系统具有图像传感器及操作终端，所述图像传感器进行制造物的检查，所述操作终端用于从外部操作所述图像传感器，所述图像传感器系统中的图像传感器的数据生成方法通过所述图像传感器系统的识别部，确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息，通过所述图像传感器系统的决定部，基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、及所述显示信息在所述显示部上的配置，通过所述图像传感器系统的生成部，生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
进而，根据本申请的一方面，提供一种图像传感器的数据生成程序，是图像传感器系统中的图像传感器的数据生成程序，所述图像传感器系统具有图像传感器及操作终端，所述图像传感器进行制造物的检查，所述操作终端用于从外部操作所述图像传感器，所述图像传感器的数据生成程序使所述图像传感器系统内的计算机(computer)执行下述处理：确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息；基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、和所述显示信息在所述显示部上的配置；以及生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
[发明的效果]
根据本发明，可提供一种技术，能够生成与显示图像传感器信息的操作终端分别适应的画面数据。
附图说明
图1是示意性地表示图像传感器系统中的图像传感器信息的使用例的图。
图2是示意性地表示图像传感器系统的结构的框图。
图3是表示图像传感器信息的画面布局的示例的图。
图4是表示在图像传感器系统中执行的处理的示例的流程图。
图5A是示意性地表示属于设计者范畴的用户所使用的PC上的图像传感器信息的显示例的图。
图5B是示意性地表示属于线管理者范畴的用户所使用的PC上的图像传感器信息的显示例的图。
图5C是示意性地表示属于现场操作员(operator)范畴的用户所使用的PC上的图像传感器信息的显示例的图。
图6A是示意性地表示属于设计者范畴的用户所使用的平板上的图像传感器信息的显示例的图。
图6B是示意性地表示属于线管理者范畴的用户所使用的平板上的图像传感器信息的显示例的图。
图6C是示意性地表示属于线管理者范畴的用户所使用的平板上的另一图像传感器信息的显示例的图。
图6D是示意性地表示属于现场操作员范畴的用户所使用的平板上的图像传感器信息的显示例的图。
图7A是示意性地表示属于设计者范畴的用户所使用的智能电话上的图像传感器信息的显示例的图。
图7B是示意性地表示属于线管理者范畴的用户所使用的智能电话上的图像传感器信息的显示例的图。
图7C是示意性地表示属于线管理者范畴的用户所使用的智能电话上的另一图像传感器信息的显示例的图。
图7D是示意性地表示属于现场操作员范畴的用户所使用的智能电话上的另一图像传感器信息的显示例的图。
符号的说明
1：图像传感器系统
10：操作终端
101、501：CPU
20：监视器
50：图像传感器
60：摄像机
具体实施方式
以下，参照附图来说明实施方式的图像传感器系统的详细。
＜适用例＞
首先，对适用本发明的场景的一例进行说明。在以下所例示的实施方式中，假设在制造线上通过图像传感器来进行制造物的检查。而且，设想下述情况：图像传感器的设计者A、B、使用图像传感器的制造线的线管理者C、D、在制造线的现场进行图像传感器的调整等的现场操作员E、F分别使用不同的作为外部设备的操作终端，来显示与图像传感器相关的信息。在本实施方式的图像传感器系统中，包含所述图像传感器及各用户所使用的操作终端。
图像传感器是被设置于例如工场的制造线等上，被用于利用图像的各种处理的装置。图像传感器也被称作视觉传感器(Vision Sensor)或视觉系统(Vision System)等。图像传感器能够利用于各种用途。例如可列举检查对象的图像记录、形状识别、边缘(edge)检测或宽度/根数的测量、面积测量、颜色特征的获取、标记(labeling)或分段(segmentation)、物体识别、条形码(bar code)或二维码的读取、光学字符识别(OpticalCharacter Recognition，OCR)、个体识别等。而且，图像传感器是如下所述的装置，即，进行拍摄制造物的摄像机(camera)的控制、针对从所述摄像机导入的制造物的图像数据的图像处理(例如前处理、特征量提取等)、基于图像处理结果的各种处理(例如检查、文字识别、个体识别等)、与操作终端的数据收发、针对从操作终端接收的数据的处理、向操作终端输出的数据的生成等。
而且，操作终端是为了对图像传感器进行操作而使用的终端。作为操作终端的一例，可列举PC或平板、智能电话等。如图1所示，以下的说明中，对图像传感器50的设计者B使用操作终端10(作为一例为PC)来显示与图像传感器50相关的信息的情况进行说明。但是，以下的说明也能够适用于其他用户使用不同的操作终端来显示与图像传感器相关的信息的情况。而且，操作终端所连接的图像传感器并不限于一个。
本实施方式中，图像传感器的用户被划分为与图像传感器相关的范畴，将与用户所属的范畴相应的图像传感器的信息提供给用户。而且，根据用户所使用的操作终端，来决定显示图像传感器信息的画面布局。由此，用户能够使用操作终端以适当的画面布局来显示基于各自所属范畴的适当信息。
＜图像传感器系统的结构＞
对一实施方式中的图像传感器系统1进行说明。如图2所例示的，图像传感器系统1中，图像传感器50的用户即设计者B所使用的操作终端10与图像传感器50经由网络(network)40而彼此连接。
操作终端10具有中央处理器(Central Processing Unit，CPU)101、随机存取存储器(Random Access Memory，RAM)102、硬盘驱动器(Hard Disk Drive，HDD)103、图形处理器(Graphics Processing Unit，GPU)104、输入接口(interface)105及通信接口106。而且，GPU104、输入接口105、通信接口106分别连接于监视器(monitor)20、输入装置30、网络40。CPU101、RAM102、HDD103、GPU104、输入接口105、通信接口106经由总线(bus)107而彼此连接。而且，图像传感器50具有CPU501、RAM502、HDD503、输入接口504、通信接口505。输入接口104是与对制造线的制造物进行拍摄的摄像机60连接。CPU501、RAM502、HDD503、输入接口504、通信接口505经由总线506而彼此连接。
本实施方式中，用户操作输入装置30等而在操作终端10上进行对图像传感器50的连接指示。操作终端10按照所述输入的指示，经由网络40来进行对图像传感器50的连接。图像传感器50在建立了与操作终端10的连接之后，基于从操作终端10获取的信息，生成用于在操作终端10的监视器20上显示图像传感器50的信息的数据。所生成的数据从图像传感器50经由网络40而发送至操作终端10。操作终端10以从图像传感器50接收的数据中所含的画面布局，在监视器20上显示所接收的数据中所含的图像传感器50的信息。
本实施方式中，在操作终端10中，通过CPU101将存储在HDD103中的各种程序在RAM102中展开并执行，来执行以下说明的各种处理。同样，在图像传感器50中，通过CPU501将存储在HDD503中的各种程序在RAM502中展开并执行，从而作为一例，作为网页服务器(Web server)发挥功能，执行以下说明的各种处理。另外，CPU101、501的功能中的一部分或全部既可通过专用集成电路(Application Specific lntegrated Circuit，ASIC)或现场可编程门阵列(Field Programmable Gate Array，FPGA)等来实现，也可由外部装置提供。
而且，本实施方式中，在图像传感器50的HDD503中，预先保存有与下述条件相关的信息，所述条件用于根据从操作终端10获取的用户代理信息来确定操作终端10的设备种类。此处，所谓设备种类，是指PC、平板、智能电话等。另外，设备种类中可包含显示图像传感器信息的其他装置。例如，CPU501确定用户代理信息中所含的操作终端10的设备名，根据所确定的设备名来确定操作终端10符合所述的哪一种设备种类。而且，CPU501也能够根据用户代理信息中所含的浏览器(browser)的信息，来确定所述浏览器支持哪种设备种类，并确定操作终端10符合所述的哪一种设备种类。进而，CPU501也能够基于用户代理信息中是否含有特定的信息组合(例如，浏览器的种类与操作终端10的平台(platform)的组合等)，来确定操作终端10符合所述的哪一种设备种类。这样，在HDD503中，保存有供CPU501基于用户代理信息来确定操作终端10的设备种类的各种条件。
进而，在图像传感器50的HDD503中，预先保存有表示与图像传感器的各用户所属的图像传感器相关的范畴的信息。此处，作为图像传感器的用户范畴的一例，可列举图像传感器的设计者、使用图像传感器的制造线的线管理者、进行图像传感器的调整等的现场操作员。进而，也可基于用户是图像传感器的哪个构成零件的设计者、或者是对制造线中的何种检查进行管理的线管理者、或者是进行图像传感器的何种调整的现场操作员等，来设置更详细的范畴。
而且，图3中例示本实施方式中所生成的、在操作终端所使用的监视器等显示部上显示的显示信息与显示部上的画面布局的关系。另外，显示部上的画面布局是显示信息的配置的一例。而且，画面布局中的、在图像传感器的检查中经处理的图像、处理流程、处理的详细结果或统计信息等是与检查相关的项目的一例。图3中，作为一例，假设图像传感器的用户属于“设计者”、“线管理者”、“现场操作员”中的任一种范畴。而且，假设用户所使用的操作终端是“PC”、“平板”、“智能电话”中的任一种。如图3所示，可认为：对应于用户的范畴与操作终端的种类的每种组合，在操作终端上显示的图像传感器的信息的用途不同。
例如，在属于设计者范畴的用户使用PC来确认图像传感器的信息的情况下，料想PC所使用的显示器的画面尺寸比平板或智能电话的显示器的画面尺寸大，因此，作为图像传感器的信息的用途，可考虑由图像传感器所执行的处理的流程的制作、或处理中所用的参数的设定等。因此，在用户的范畴为“设计者”且操作终端为“PC”的情况下，对于在PC的显示器上显示图像传感器的信息的画面布局，可认为对图像传感器的处理流程的内容、处理结果、成为对象的制造物的图像等进行显示的画面布局更为适合。
而且，在属于设计者范畴的用户使用平板来确认图像传感器的信息的情况下，料想平板的显示器的画面尺寸比PC的画面尺寸小，因此，作为图像传感器的信息的用途，可考虑现场的图像传感器所执行的处理流程的调整等。因此，在用户的范畴为“设计者”且操作终端为“平板”的情况下，对于在平板的显示器上显示图像传感器的信息的画面布局，可认为对处理结果或成为对象的制造物的图像等进行显示，且根据用户的选择来显示图像传感器的处理流程的画面布局更为适合。
进而，在属于设计者范畴的用户使用智能电话来确认图像传感器的信息的情况下，料想智能电话的显示器的画面尺寸比平板的画面尺寸小，因此，作为图像传感器的信息的用途，可考虑图像传感器的动作的简便确认等。因此，在用户的范畴为“设计者”且操作终端为“智能电话”的情况下，对于在智能电话的显示器上显示图像传感器的信息的画面布局，可认为不显示图像传感器的处理流程，而对处理结果或成为对象的制造物的图像等进行显示的画面布局更为适合。
同样，在属于线管理者范畴的用户使用PC来确认图像传感器的信息的情况下，作为图像传感器的信息的用途，例如可列举由图像传感器判断制造物为不良的处理的原因分析，因此，对于画面布局，可认为能够执行对处理的原因进行分析的分析用程序(图中为“分析工具”)或者确认执行结果的画面布局更为适合。而且，在属于线管理者范畴的用户使用平板或智能电话来确认图像传感器的信息的情况下，对于画面布局，可认为能够对基于图像传感器的处理的统计信息进行确认的画面布局更为适合。
而且，在属于现场操作员范畴的用户使用PC来确认图像传感器的信息的情况下，作为图像传感器的信息的用途，例如可列举对图像传感器所执行的处理的安排进行切换等，因此，对于画面布局，可认为能够切换处理流程的画面布局更为适合。而且，在属于现场操作员范畴的用户使用平板或智能电话来确认图像传感器的信息的情况下，对于画面布局，可认为能够对包含当前的图像传感器的处理状况的、图像传感器的动作状况进行确认的画面布局更为适合。
本实施方式中，以根据用户所属的范畴与用户所使用的操作终端的种类的组合而各不相同的方式，来生成在操作终端上显示的图像传感器的信息的画面布局。并且，在图像传感器50的HDD503中，预先保存有表示与用户所属的范畴和用户所使用的操作终端的种类的组合对应的画面布局的信息。
＜图像传感器的信息的显示例＞
一边参照图4所例示的流程图，一边对由图像传感器50的CPU501所执行的处理进行说明。作为一例，图像传感器50的CPU501在建立了与操作终端10的连接之后，开始图4所示的流程图的处理。
在OP101中，CPU501作为例示为图像传感器的功能部之一的识别部，对访问(access)图像传感器50的操作终端10进行识别，向操作终端10请求用户信息与用户代理信息。此处，在用户代理信息中，至少包含操作终端10的设备信息。而且，在用户信息中，包含确定用户属于存储在HDD503中的范畴的哪个范畴的信息，例如表示是图像传感器的设计者的信息、或者表示与图像传感器相关的权限的用户的帐户(account)信息等。而且，在设备信息中，包含在操作终端10中执行的操作系统(Operating System，OS)的信息、在操作终端10中用于图像传感器的信息显示的浏览器的信息、操作终端10的设备名的信息、及与监视器20的画面尺寸或分辨率相关的信息等。另外，确定监视器20的画面尺寸或分辨率、操作终端10的设备名、在操作终端中执行的OS等的信息是操作终端的性能信息的一例。操作终端10根据来自图像传感器50的请求，将用户信息与用户代理信息发送至图像传感器50。由此，图像传感器获取操作终端10的用户信息与用户代理信息。接下来，CPU501将处理推进至OP102。
在OP102中，CPU501根据在OP101中获取的用户代理信息、和保存在HDD503中的用于确定操作终端10的设备种类的条件，来确定操作终端10的设备种类。接下来，在OP103中，CPU501根据在OP101中获取的用户信息、和保存在HDD503中的表示与图像传感器相关的范畴的信息，来确定操作终端10的用户所属的范畴。接下来，CPU501将处理推进至OP104。
接下来，CPU501作为例示为图像传感器的功能部之一的决定部，基于在OP102及OP103中所确定的、用户所使用的操作终端10的设备种类和用户所属的范畴，来决定在操作终端10的监视器20上显示的图像传感器的显示信息(OP104)与显示所述显示信息的画面的画面布局(OP105)。接下来，CPU501将处理推进至OP106。
在OP106中，CPU501作为例示为图像传感器的功能部之一的生成部，生成显示用数据，所述显示用数据用于使操作终端10以在OP105中决定的画面布局，来显示在OP104中决定的显示信息。并且，CPU501作为发送部发挥功能，将所生成的显示用数据发送至操作终端10。操作终端10的CPU101基于从图像传感器50接收的显示用数据中所含的画面布局与显示信息，以所述画面布局将显示信息显示于监视器20上。
这样，根据本实施方式，基于用户所使用的操作终端的显示部(监视器20等)的画面尺寸的信息、或者与在用户所使用的操作终端中执行的OS等程序相关的信息等，来决定对图像传感器的信息进行显示的画面的画面布局，因此，将图像传感器信息以用户易看的画面布局显示于操作终端的显示部上。而且，根据使用操作终端的用户所属的范畴，来决定显示于画面上的图像传感器信息，因此能够提供与用户各自期望的用途相应的图像传感器信息。而且，图像传感器50具有网页服务器的功能，由此，能够基于用户使用网页浏览器来显示图像传感器信息时的用户代理信息，来决定适合于各用户的图像传感器信息的画面布局。
图5A、图5B、图5C中，表示在操作终端10为PC的情况下，在OP106中显示于操作终端10上的图像传感器50的显示信息的显示例。图5A表示操作终端10的用户属于设计者范畴时的显示例。如图5A所示，在画面110上，分别显示有图像传感器50所处理的图像110a、处理结果110b、所述处理的流程110c、处理的详细信息110d。由此，用户能够基于所显示的信息，来变更在图像传感器50中执行的处理的流程。
图5B表示操作终端10的用户属于线管理者范畴时的显示例。如图5B所示，在画面120上，分别显示有表示图像传感器50所执行的处理中的测量值的推移的图表(graph)120a、处理结果120b、所述处理的流程120c、处理的详细信息120d、分析用程序的执行结果120e。由此，用户对于例如图像传感器50的处理结果、判定制造物为不良的处理，能够基于所显示的信息来进行分析。
图5C表示操作终端10的用户属于现场操作员范畴时的显示例。如图5C所示，在画面130上，分别显示有图像传感器50所处理的图像130a、处理结果130b、所述处理的流程130c、处理的详细信息130d、流程切换用的选择框(box)130e。由此，用户例如能够一边确认图像传感器的处理结果或流程的详细，一边切换图像传感器50所执行的处理的流程。另外，图5C中，作为一例，选择框130e是重叠于其他显示信息而显示，当用户选择流程而执行切换时，不显示选择框130e，但用于切换流程的信息也可不论此种选择框130e如何，而与其他信息并列显示，还可重叠显示其他信息。关于画面上的各信息的显示形态，对于画面130以外的画面，也同样不限于图示的显示形态，可作为画面布局而适当决定。
图6A、图6B、图6C、图6D中，表示在操作终端10为平板的情况下，在OP106中显示于操作终端10上的图像传感器50的显示信息的显示例。图6A表示操作终端10的用户属于设计者范畴时的显示例。如图6A所示，在画面210上，分别显示有图像传感器50所处理的图像210a、处理结果210b、所述处理的详细信息210c。由此，用户例如能够在使用图像传感器50的现场进行图像传感器50的处理调整。
与图5A的画面110相比，在画面210上成为不显示流程信息的画面布局。这是因为，作为设计者的用户在流程的制作等时，是使用处理性能比平板高且显示信息的画面尺寸比平板大的PC来进行作业，而在使用平板时，考虑是将平板携带到现场而使用平板来进行图像传感器的调整等。另外，在画面210上，也可构成为，基于用户的操作来显示流程的信息。
图6B及图6C表示操作终端10的用户属于线管理者范畴时的显示例。如图6B所示，在画面220上，分别显示有表示图像传感器50所执行的处理中的测量值的推移的图表220a、处理的详细信息220b。而且，如图6C所示，在画面230上，分别显示有图像传感器50所执行的处理的处理结果230a、所述处理的详细信息230b、分析用程序的执行结果230c。本实施方式中，作为一例，用户对操作终端10进行操作，以切换画面220与画面230的显示。由此，用户例如能够在使用图像传感器50的现场确认基于图像传感器50的处理的统计信息。与图5B的画面120相比，由于考虑到在平板上可显示的画面的画面尺寸比PC小，因此显示于画面120上的信息被分为两个画面220、230而显示。
图6D表示操作终端10的用户属于现场操作员范畴时的显示例。如图6D所示，在画面240上，显示有图像传感器50所处理的图像240a、处理结果240b、处理的详细信息240c。由此，用户能够确认图像传感器50当前的动作状况。与图5C的画面130相比，在画面240上成为不显示流程切换用选择框的画面布局。这是因为，作为现场操作员的用户在流程的切换等时，是使用画面尺寸比平板大的PC来确认流程的各处理的详细信息而进行，而在使用平板时，考虑是将平板携带到现场而使用平板来进行图像传感器的动作检验(check)等。另外，在画面240上，也可构成为，基于用户的操作来显示用于切换流程的信息。
图7A、图7B、图7C、图7D中，表示在操作终端10为智能电话的情况下，在OP106中显示于操作终端10上的图像传感器50的显示信息的显示例。与图6A、图6B、图6C、图6D的各画面相比，料想智能电话的画面尺寸比平板的画面尺寸小，因此成为较显示信息的详细度而使信息的显示效率优先的画面布局。
图7A表示操作终端10的用户属于设计者范畴时的显示例。如图7A所示，在画面310上，分别显示有图像传感器50所处理的图像310a、处理结果310b、所述处理的详细信息310c。由此，用户例如能够在使用图像传感器50的现场简便地进行图像传感器50的处理的动作确认。
图7B及图7C表示操作终端10的用户属于线管理者范畴时的显示例。如图7B所示，在画面320上，分别显示有表示图像传感器50所执行的处理中的测量值的推移的图表320a、处理的详细信息320b。而且，如图7C所示，在画面330上，分别显示有图像传感器50所执行的处理的处理结果330a、分析用程序的执行结果330b。本实施方式中，作为一例，用户对操作终端10进行操作而切换画面320与画面330的显示。由此，用户例如能够在使用图像传感器50的现场，比使用平板时更简便地确认基于图像传感器50的处理的统计信息。
图7D表示操作终端10的用户属于现场操作员范畴时的显示例。如图7D所示，在画面340上，显示有图像传感器50所处理的图像340a、处理结果340b。由此，用户能够比使用平板时更简便地确认图像传感器50当前的动作状况。
如上所述，根据本实施方式，配合图像传感器的用户所属的范畴或用户所使用的操作终端，以适当的画面布局来提供与图像传感器的检查相关的项目的有无、或显示于监视器20上的信息的显示区域的尺寸或位置等经定制(customize)的适当信息，因此，用户即使在每当确认图像传感器的信息时使用不同种类的操作终端，也能够在各操作终端上以易看的画面布局来确认对于作业为适当的信息。
＜其他＞
所述实施方式不过是例示性地说明本发明的结构例，并非将本发明的图像传感器系统限定于所述的具体结构。本发明并不限定于所述的具体形态，可在其技术思想的范围内进行各种变形。而且，在实施时，可适当采用与实施方式相应的具体结构，并进行各种改良或变形。例如，所述实施方式中，是设想操作终端10为PC，但在操作终端10为平板或智能电话的情况下，监视器20及输入装置30是作为触控面板显示器而与操作终端10一体地构成，并执行所述处理。而且，图像传感器50与摄像机60也可一体地构成。
而且，例如也可构成为：提供所述实施方式中例示的图像传感器50的功能部的至少一个的通信装置针对连接于所述通信装置的多个操作终端，配合各操作终端及各用户来提供数据，所述数据是以适当的画面布局来显示适当的图像传感器的信息。而且，也可构成为，将多个图像传感器连接于所述通信装置，所述通信装置对于操作终端10的用户所指定的图像传感器而进行所述数据提供。由此，也能够提供一种可将多个图像传感器各自的信息以适当的画面布局显示于多个操作终端的图像传感器系统。
＜计算机可读取的记录介质＞
能够将程序记录在计算机等可读取的记录介质中，所述程序使计算机或其他机械、装置(以下称作计算机等)实现用于进行所述操作终端或图像传感器等的设定的管理工具(tool)、OS或其他。并且，通过使计算机等读取并执行所述记录介质的程序，从而能够提供所述功能。
此处，所谓计算机等可读取的记录介质，是指能够通过电、磁、光学、机械或化学作用来储存数据或程序等信息，并能够从计算机等读取的记录介质。作为此种记录介质中的可从计算机等拆卸者，例如有软盘(flexible disk)、磁光盘、只读光盘(Compact DiscRead Only Memory，CD-ROM)、可重写光盘(Compact Disc Rewritable，CD-R/W)、数字多功能光盘(Digital Versatile Disc，DVD)、蓝光光盘(blue ray disc)、数字录音带(DigtalAudio Tape，DAT)、8mm磁带、快闪存储器(flash memory)等存储卡(memory card)等。而且，作为被固定于计算机等的记录介质，有硬盘或ROM等。
＜附注＞
一种图像传感器系统1，具有进行制造物检查的图像传感器50、及用于从外部操作所述图像传感器50的操作终端10，所述图像传感器系统1包括：
识别部101、501，确定使用所述操作终端10的用户的用户信息与所述操作终端10的设备信息；
决定部101、501，基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端10所使用的显示部20上所显示的与所述检查相关的显示信息、和所述显示信息在所述显示部上的配置；以及
生成部101、501，生成数据，所述数据用于在所述操作终端10的所述显示部20上，以经所述决定的所述配置来显示所述显示信息。

Claims (11)

1.一种图像传感器系统，具有进行制造物检查的图像传感器、及用于从外部操作所述图像传感器的操作终端，所述图像传感器系统的特征在于，包括：
识别部，确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息；
决定部，基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、和所述显示信息在所述显示部上的配置；以及
生成部，生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
2.根据权利要求1所述的图像传感器系统，其特征在于，
所述设备信息包含性能信息，所述性能信息确定所述操作终端所使用的显示部的画面尺寸、所述显示部的分辨率、所述操作终端的设备名、在所述操作终端上执行的操作系统中的至少一个，
所述决定部基于经确定的所述设备信息中所含的所述性能信息，来决定所述显示信息在所述显示部上的配置。
3.根据权利要求1或2所述的图像传感器系统，其特征在于，
所述决定部基于经确定的所述用户信息来确定与所述用户所属的所述图像传感器相关的范畴，并基于经确定的所述范畴来决定所述显示信息。
4.根据权利要求3所述的图像传感器系统，其特征在于，
所述范畴包含所述图像传感器的设计者，
在经确定的所述范畴为所述图像传感器的设计者的情况下，所述显示信息包含与所述图像传感器所执行的处理的流程相关的信息。
5.根据权利要求3所述的图像传感器系统，其特征在于，
所述范畴包含所述图像传感器的管理者，
在经确定的所述范畴为所述图像传感器的管理者的情况下，所述显示信息包含与所述图像传感器相关的统计信息。
6.根据权利要求1或2所述的图像传感器系统，其特征在于，
所述显示信息的配置是基于至少与所述检查相关的项目的有无而决定。
7.根据权利要求1或2所述的图像传感器系统，其特征在于，
所述显示信息的配置包含在所述显示部上显示所述显示信息的显示区域的尺寸、及所述显示区域在所述显示部上的位置。
8.根据权利要求1或2所述的图像传感器系统，其特征在于，
所述识别部从所述操作终端获取用户代理信息，根据所述用户代理信息来确定所述设备信息。
9.一种图像传感器，用于权利要求1所述的图像传感器系统，所述图像传感器的特征在于，包括：
所述识别部、所述决定部、所述生成部的至少一个功能部，
所述图像传感器还包括发送部，所述发送部将通过所述图像传感器所具有的所述功能部而处理的信息发送至外部。
10.一种图像传感器系统中的图像传感器的数据生成方法，所述图像传感器系统具有图像传感器及操作终端，所述图像传感器进行制造物的检查，所述操作终端用于从外部操作所述图像传感器，所述图像传感器系统中的图像传感器的数据生成方法的特征在于，
通过所述图像传感器系统的识别部，确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息，
通过所述图像传感器系统的决定部，基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、及所述显示信息在所述显示部上的配置，
通过所述图像传感器系统的生成部，生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
11.一种记录介质，存储有图像传感器系统中的图像传感器的数据生成程序，所述图像传感器系统具有图像传感器及操作终端，所述图像传感器进行制造物的检查，所述操作终端用于从外部操作所述图像传感器，所述记录介质的特征在于，
所述数据生成程序使所述图像传感器系统内的计算机执行下述处理：
确定使用所述操作终端的用户的用户信息与所述操作终端的设备信息；
基于经确定的所述用户信息与经确定的所述设备信息，来决定在所述操作终端所使用的显示部上显示的与所述检查相关的显示信息、和所述显示信息在所述显示部上的配置；以及
生成数据，所述数据用于在所述操作终端的所述显示部上，以经所述决定的所述配置来显示所述显示信息。
CN201811518138.5A 2018-03-08 2018-12-12 图像传感器、系统、其数据生成方法及记录介质 Active CN110244924B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-041983 2018-03-08
JP2018041983A JP6939650B2 (ja) 2018-03-08 2018-03-08 画像センサシステム、画像センサ、画像センサシステムにおける画像センサのデータ生成方法およびプログラム

Publications (2)

Publication Number Publication Date
CN110244924A true CN110244924A (zh) 2019-09-17
CN110244924B CN110244924B (zh) 2022-06-10

Family

ID=64664131

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811518138.5A Active CN110244924B (zh) 2018-03-08 2018-12-12 图像传感器、系统、其数据生成方法及记录介质

Country Status (4)

Country Link
US (1) US11070716B2 (zh)
EP (1) EP3537715B1 (zh)
JP (2) JP6939650B2 (zh)
CN (1) CN110244924B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5321750A (en) * 1989-02-07 1994-06-14 Market Data Corporation Restricted information distribution system apparatus and methods
JP2015153073A (ja) * 2014-02-13 2015-08-24 オムロン株式会社 プログラマブル表示器、携帯端末装置、データ処理方法、およびプログラム
CN106462641A (zh) * 2014-06-24 2017-02-22 谷歌公司 媒体呈现设备存在时基于多个用户的用户偏好来呈现内容的方法、系统和介质
US20170126843A1 (en) * 2015-11-02 2017-05-04 Rockwell Automation Technologies, Inc. Self-describing diagnostic data for presentation on mobile devices

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09259187A (ja) * 1996-03-18 1997-10-03 Sony Corp 自動検査方法及びその装置
JP2002244968A (ja) 2001-02-19 2002-08-30 Matsushita Electric Ind Co Ltd データ表示システム、データ表示方法及び記録媒体
US7164779B2 (en) * 2001-08-06 2007-01-16 Mitsubishi Electric Research Laboratories, Inc. Privacy-enhanced display device
JP2004226328A (ja) * 2003-01-24 2004-08-12 Hitachi Ltd 外観検査システムおよびそれらを用いた品質評価システムおよび品質評価情報提供システム
US7978618B2 (en) * 2004-10-08 2011-07-12 Sharp Laboratories Of America, Inc. Methods and systems for user interface customization
JP2006202009A (ja) 2005-01-20 2006-08-03 Toshiba Corp 医用機器及びアクセス制御プログラム
JP5056263B2 (ja) 2007-08-14 2012-10-24 オムロン株式会社 画像検査装置、画像検査方法、コンピュータを画像検査装置として機能させるためのプログラム、およびコンピュータ読み取り可能な記録媒体
JP5335610B2 (ja) * 2009-08-17 2013-11-06 キヤノン株式会社 画像処理装置及びその制御方法と通信システム
US8886836B2 (en) * 2012-06-12 2014-11-11 Facebook, Inc. Providing a multi-column newsfeed of content on a social networking system
JP6000069B2 (ja) * 2012-11-06 2016-09-28 三菱重工業株式会社 検査システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5321750A (en) * 1989-02-07 1994-06-14 Market Data Corporation Restricted information distribution system apparatus and methods
JP2015153073A (ja) * 2014-02-13 2015-08-24 オムロン株式会社 プログラマブル表示器、携帯端末装置、データ処理方法、およびプログラム
CN106462641A (zh) * 2014-06-24 2017-02-22 谷歌公司 媒体呈现设备存在时基于多个用户的用户偏好来呈现内容的方法、系统和介质
US20170126843A1 (en) * 2015-11-02 2017-05-04 Rockwell Automation Technologies, Inc. Self-describing diagnostic data for presentation on mobile devices

Also Published As

Publication number Publication date
JP2021192048A (ja) 2021-12-16
JP6939650B2 (ja) 2021-09-22
CN110244924B (zh) 2022-06-10
EP3537715A1 (en) 2019-09-11
EP3537715B1 (en) 2022-04-13
US20190281208A1 (en) 2019-09-12
US11070716B2 (en) 2021-07-20
JP7188518B2 (ja) 2022-12-13
JP2019158400A (ja) 2019-09-19

Similar Documents

Publication Publication Date Title
US11663803B2 (en) System for counting quantity of game tokens
JP2020035097A (ja) 画像識別装置、画像識別方法及び画像識別プログラム
WO2022001097A1 (zh) 一种用于人证核验设备性能检测的算法测评系统及检测方法
JPH05266173A (ja) 顔分類システム
EP3211500A1 (en) Monitoring system based on image analysis of photographs
CN103837758B (zh) 影像讯号的多重检测系统及其多重检测方法
CN112153373A (zh) 明厨亮灶设备的故障识别方法、装置及存储介质
CN108921209A (zh) 图片识别方法、装置及电子设备
CN105654109B (zh) 分类方法、检查方法和检查装置
CN113034421A (zh) 一种图像检测方法、装置及存储介质
CN110244924A (zh) 图像传感器、系统、其数据生成方法及记录介质
Ouanan et al. A novel face recognition system based on Gabor and Zernike features
KR102342495B1 (ko) 데이터 프로그래밍에 기반한 레이블링 모델 생성 방법 및 장치
KR20220161601A (ko) 딥러닝 모델을 이용한 영상검사 대상체의 결함 판정시스템
Gao et al. Turner syndrome prognosis with facial features extraction and selection schemes
Abid et al. On the usage of visual saliency models for computer generated objects
EP4318391A1 (en) Information processing device, control program, and control method
CN110533809A (zh) 确定无感通行系统性能的方法、装置及计算设备
JP7419838B2 (ja) 電力設備の調査要否判定装置、及び調査要否判定方法
CN115834939B (zh) 电子屏信息监控设备、方法及电子屏内容安全预审系统
Saranya et al. Fire Detection Using CNN & SVM
CN117058612B (zh) 一种在线考试作弊识别方法、电子设备及存储介质
TWI786438B (zh) 比對證件影像與多態樣臉部影像辨識身分之系統及方法
WO2022254858A1 (ja) 検査装置、検査方法、および検査プログラム
CN109635860B (zh) 图像分类方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant