CN112052919A - 具有货物信息的操作方法和其非暂时性计算机可读介质 - Google Patents
具有货物信息的操作方法和其非暂时性计算机可读介质 Download PDFInfo
- Publication number
- CN112052919A CN112052919A CN202010500741.1A CN202010500741A CN112052919A CN 112052919 A CN112052919 A CN 112052919A CN 202010500741 A CN202010500741 A CN 202010500741A CN 112052919 A CN112052919 A CN 112052919A
- Authority
- CN
- China
- Prior art keywords
- information
- cargo
- electronic device
- server
- objects
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 148
- 238000011017 operating method Methods 0.000 claims abstract description 14
- 230000008569 process Effects 0.000 claims description 65
- 238000012937 correction Methods 0.000 claims description 38
- 238000012790 confirmation Methods 0.000 claims description 37
- 238000012545 processing Methods 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 16
- 238000003708 edge detection Methods 0.000 claims description 9
- 238000013473 artificial intelligence Methods 0.000 claims description 4
- 230000000977 initiatory effect Effects 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 30
- 238000000926 separation method Methods 0.000 description 10
- 238000010200 validation analysis Methods 0.000 description 5
- 101000616761 Homo sapiens Single-minded homolog 2 Proteins 0.000 description 4
- 102100021825 Single-minded homolog 2 Human genes 0.000 description 4
- 235000015895 biscuits Nutrition 0.000 description 4
- 238000005192 partition Methods 0.000 description 4
- 101150115013 DSP1 gene Proteins 0.000 description 3
- 101000703681 Homo sapiens Single-minded homolog 1 Proteins 0.000 description 3
- 102100031980 Single-minded homolog 1 Human genes 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000009966 trimming Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 235000019800 disodium phosphate Nutrition 0.000 description 2
- 101150052726 DSP2 gene Proteins 0.000 description 1
- 101800000026 Dentin sialoprotein Proteins 0.000 description 1
- 229910004530 SIMS 5 Inorganic materials 0.000 description 1
- 101100365794 Schizosaccharomyces pombe (strain 972 / ATCC 24843) sim3 gene Proteins 0.000 description 1
- 101100112995 Schizosaccharomyces pombe (strain 972 / ATCC 24843) sim4 gene Proteins 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000014510 cooky Nutrition 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003064 k means clustering Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0623—Item investigation
- G06Q30/0625—Directed, with specific intent or strategy
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- General Engineering & Computer Science (AREA)
- Display Racks (AREA)
Abstract
本发明涉及一种具有货物信息的操作方法和其非暂时性计算机可读介质。该具有货物信息的操作方法,适用于电子装置。操作方法包含:获得与网络中的多个电子货架当中的目标电子货架上的一个或多个货物对象相关联的图像信息;以及根据与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个与服务器进行第一通信以用于控制网络中的电子货架,其中从图像信息提取特征信息,且第一通信包含将与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个无线地传输到服务器。
Description
技术领域
本发明涉及一种具有货物信息的操作方法和其非暂时性计算机可读介质,且更特定来说,涉及应用于电子货架的操作方法。
背景技术
在常规电子货架系统中,当在电子货架上的货物物品的物理位置改变或当货物物品替换为不同货物物品的情况时,而必须调整与电子货架上的一个或多个货物对象相关联的图像时,现场工作人员无法便利地进行相关的调整。这是因为现场工作人员需要请求信息工作人员通过后端服务器来调整电子货架显示器的所显示内容。
然而,即使信息工作人员能够操作服务器以调整显示内容,他也不知道货物物品的实际位置,进行调整过程有许多问题。此外,当存在许多电子货架时,使信息工作人员快速调整对应电子货架的所显示信息,也存在许多困难。
发明内容
本发明提供用于在电子货架与后端服务器之间传送货物信息的多种操作方法。
根据本发明的实施例,具有货物信息的操作方法适用于电子装置。所述操作方法包含:获得与网络中的多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的图像信息;以及根据与所述一个或多个货物对象相关联的所述图像信息和特征信息中的任一个或两个与服务器进行第一通信以用于控制所述网络中的所述电子货架,其中从所述图像信息提取所述特征信息,且所述第一通信包括将与所述一个或多个货物对象相关联的所述图像信息和所述特征信息中的任一个或两个无线地传输到所述服务器。
根据本发明的另一实施例,所述操作方法适用于服务器以用于控制网络中的多个电子货架,且包含:从电子装置无线地接收与所述电子货架当中的至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个;根据与所述一个或多个货物对象相关联的所述特征信息来获得辨识信息;以及进行显示设定处理以用于根据所述辨识信息来设定将要由所述至少一个目标电子货架显示的显示信息。
根据本发明的另一实施例,具有货物信息的操作方法可由电子装置执行,且包含:启动图像捕获处理以获得与网络中的多个电子货架当中的目标电子货架上的一个或多个货物对象相关联的所捕获图像;以及显示用于设定将要由所述目标电子货架显示的显示信息的第一显示设定信息,其中与所述一个或多个货物对象相关联的所述第一显示设定信息包括取决于所述所捕获图像的特征信息的辨识信息。
根据本发明的另一实施例,具有货物信息的操作方法可由电子装置执行,且包含:启动图像捕获处理以获得与网络中的多个电子货架当中的目标电子货架上的一个或多个货物对象相关联的所捕获图像;以及显示用于设定将要由所述目标电子货架显示的显示信息的第一显示设定信息,其中与所述一个或多个货物对象相关联的所述第一显示设定信息包括取决于所述所捕获图像的特征信息的辨识信息。
根据本发明的另一实施例,非暂时性计算机可读介质在其上存储有软件指令,所述软件指令在由处理器执行时且使得所述处理器执行包含以下的步骤:获得与网络中的多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的图像特征信息;以及根据与所述一个或多个货物对象相关联的所述图像信息和特征信息中的任一个或两个与服务器无线地通信以用于控制所述网络中的所述电子货架,其中所述通信包含将与所述一个或多个货物对象相关联的所述图像信息和所述特征信息中的任一个或两个传输到所述服务器。
根据本发明的另一实施例,非暂时性计算机可读介质在其上存储有软件指令,所述软件指令在由处理器执行时且使得所述处理器执行包含以下的步骤:从电子装置无线地接收与所述电子货架当中的至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个;根据与所述一个或多个货物对象相关联的所述特征信息来获得辨识信息;以及进行显示设定处理以用于根据所述辨识信息来设定将要由所述目标电子货架显示的显示信息。
总而言之,用于传送货物信息的操作方法可在至少一个目标电子货架与服务器之间进行。与至少一个目标电子货架上的货物相关联的特征信息可由服务器生成,或特征信息可由电子装置获得且通过网络提供到服务器。服务器可根据特征信息来生成显示设定信息。如此,可更容易地控制电子货架中的至少一个上的电子货架标签(electronic shelflabel;ESL),且可大大节省人力。
为了可更好地理解本发明的以上特征和优点,下文详细描述附有图的实施例。
附图说明
包含附图以提供对本发明的进一步理解,且附图并入在本说明书中且构成本说明书的一部分。附图示出本发明的实施例,且与描述一起用于解释本发明的原理。
图1A到图1D是根据本公开的多个实施例的具有货物信息的操作方法的多个流程图。
图2A示出根据本公开的实施例的配对操作的示意图。
图2B示出根据图2A的实施例的配对操作的示意图。
图3是根据本公开的实施例的目标电子货架上的货物的所捕获图像的示意图。
图4A和图4B是根据预设公开的实施例的对货物对象的所捕获图像的图像处理的示意图。
图5示出根据本公开的实施例的边缘检测结果。
图6A到图6D是根据本公开的多个实施例的用于控制网络中的多个电子货架的具有货物信息的操作方法的多个流程图。
图7示出根据本公开的实施例的第一显示设定信息的示意图。
图8示出根据本公开的实施例的用于纠正处理中的纠正列表的示意图。
图9示出根据本公开的实施例的由目标电子货架的电子货架显示器显示的图像。
图10A示出根据本公开的实施例的用于电子货架系统的操作方法的流程图。
图10B示出根据本公开的另一实施例的用于电子货架系统的操作方法的流程图。
图10C示出根据图10B的实施例的用于电子货架系统的操作方法的另一流程图。
附图标号说明
211、211-1、211-2、211-3、212、21N:电子货架;
220:电子装置;
230:服务器;
300、500、701、CMG:所捕获图像;
410:边缘点图像;
420:第一关系图;
430:第二关系图;
440:第一修剪图;
450:第二修剪图;
460:修剪图;
710:影像;
711:代码信息;
712:价格;
713:简图;
714:调整按钮;
800:纠正列表;
810、820、830、840、850:候选货物信息;
900:显示信息;
911、912、913、914、915:货物信息;
BC1、BC2、BC3:条形码图像;
DL1、DL2、DL3、DL4:分隔线;
DSP1、DSP2、DSP3:显示器;
F1、F2、F3、F4、F5:显示区域;
FP1、FP2、FP3、FP4、FP5、FP6、FP7:特征点;
ID1、ID2、IDN:代码标记;
S1、S2、S3、S4、S5:选择空白处;
S110、S110B、S110C、S110D、S120、S120B、S120C、S121D、S122D、S123D、S130B、S130C、S131D、S132D、S140B、S610、S610B、S610C、S610D、S620、S620B、S620C、S621D、S622D、S630、S630B、S630C、S631D、S640B、S650B、S1010-1、S1010-2、S1020-1、S1020-2、S1030-1、S1030-2、S1040-1、S1040-2、S1050-1、S1050-2、S1060-1、S1060-2、S1070-1、S1070-2、S1080-2、S1090-2、S1100-2:步骤;
SG1、SG1':步骤组;
SIM1、SIM2、SIM3、SIM4、SIM5:子图像。
具体实施方式
贯穿本申请的说明书(包含权利要求书)的术语“耦合(或连接)”广泛地使用,且涵盖直接和间接的连接或耦合构件。举例来说,如果本公开描述第一设备耦合(或连接)到第二设备,那么应解译为第一设备可直接连接到第二设备,或第一设备可通过其它装置或由某一耦合构件间接连接到第二设备。此外,贯穿本申请的说明书(包含权利要求书)提及的例如“第一”和“第二”的术语仅用于命名元件的名称或区分不同实施例或范围,且并不意图限制元件数目的上限或下限不意图限制,并不意图限制元件的顺序。此外,具有相同附图标号的元件/组件/步骤表示附图和实施例中的相同或类似部分。在不同实施例中具有相同附图标号的元件/组件/符号可参考相关描述。
在一些实施例中,公开一种操作方法,其可组合图像处理技术与对象辨识技术。因此,例如移动电话的电子装置的用户(例如,现场工作人员)可更容易地更新电子货架标签的内容和/或位置。
在一些实施例中,可由例如移动电话的电子装置执行应用程序(APP)以进行所述操作方法。
在一些实施例中,可通过捕获至少一个目标电子货架上的一个或多个货物对象的图像来获得图像信息。特征信息可由电子信息或能够基于图像信息与电子装置通信的服务器提取。可经由网络将图像信息和/或特征信息无线地或非无线地发送到服务器。可利用任何通信方法或网络。服务器可接着辨识一个或多个对象,获得与所述一个或多个对象相关联的相关信息且将所述相关信息发送到至少一个电子货架,以更新电子货架标签或电子货架显示器的所显示内容。
在一些实施例中,根据至少一个目标电子货架上的一个或多个货物对象的辨识结果,广告信息也可由服务器获得和发送到至少一个目标电子货架,使得可在至少一个目标电子货架上的适当位置处显示广告。
请参考图1A,其为根据本公开的实施例的具有货物信息的操作方法的流程图。所述操作方法适用于电子装置。货物信息与至少一个目标电子货架上的一个或多个货物对象相关联,所述至少一个目标电子货架在多个电子货架当中。电子货架可无线地或非无线地连接到网络,服务器也可无线地或非无线地连接到所述网络。电子货架中的每一个可具有用于显示电子货架标签的货架显示器。电子装置与服务器之间关于与至少一个目标电子货架上的一个或多个货物对象相关联的信息的通信可使得服务器能够经由所述服务器与至少一个目标电子货架之间的通信来设定将要由至少一个目标电子货架的货架显示器显示的显示信息。
在步骤S110中,可由电子装置获得与多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的图像信息。在一些实施方案中,可由电子装置例如通过基于图像信息进行提取处理来进一步获得与多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的特征信息。换句话说,电子装置可获得与至少一个目标电子货架上的一个或多个货物对象的一个或多个图像相关的任何类型的信息。电子装置可以是移动电话,或本领域中众所周知的任何其它手持式电子装置,或能够获得必要信息(例如,图像信息)且与服务器通信的任何方便的装置。操作方法可作为APP或在电子装置上执行的任何类型的软件进行。
在由电子装置获得图像信息和特征信息中的任一个或两个之后,可进行步骤S120。在这一步骤中,电子装置220可仅使用图像信息、仅使用特征信息或使用图像信息和特征信息两者与服务器通信。换句话说,电子装置可使用与至少一个目标电子货架上的一个或多个货物对象的一个或多个图像相关的任何类型的信息来与服务器通信。如此,服务器可与至少一个目标电子货架通信以基于从电子装置接收到的信息来设定将要由至少一个目标电子货架显示的显示信息。显示信息可包含名称信息、价格信息以及广告信息中的至少一个。
更具体来说,在步骤S120中,电子装置可根据与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个与服务器进行第一通信以用于控制网络中的电子货架。第一通信包含将与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个无线地传输到服务器。
在本实施例中,服务器可以是远端服务器,且电子装置可将与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个无线地传输到服务器。在第一实施例中,电子装置可对与一个或多个货物对象相关联的捕获图像的图像信息进行图像处理以获得特征信息,且将所述特征信息传输到服务器。在第二实施例中,电子装置可在不预先进行图像处理的情况下将图像信息传输到服务器,且根据图像信息在服务器中进行图像处理以获得特征信息。
在本实施例中,在步骤S110之前,电子装置可首先对多个电子货架进行配对操作。参考图1B,其为根据本公开的另一实施例的操作方法的流程图。在图1B中,使用步骤S110B来进行电子装置与多个电子货架之间的配对操作。在配对操作期间,可由电子装置从已注册到同一网络的所有多个电子货架选择或识别电子货架中的至少一个。所选择或所识别的至少一个电子货架可接着充当其所显示内容将经调整的至少一个目标电子货架。可使用各种方法来从网络的电子货架选择至少一个电子货架作为经历显示信息修改的目标电子货架。举例来说,可使用近距离无线通信(NFC)感测、代码扫描以及物理键控。在实施方案中,可由电子装置通过捕获目标电子货架的一个或多个图像来进行配对。可由电子装置根据目标电子货架的至少一个所捕获图像来获得目标电子货架的识别信息。图像可以是仅可在配对处理期间显示的代码图像,例如QR码图像。或者,电子装置可进一步对所捕获图像进行图像分析以获得识别信息。换句话说,识别信息可以是QR码或基于所捕获图像来获得的任何其它特征信息。另外,电子装置可根据目标电子货架的识别信息与服务器通信,且服务器可根据从电子装置接收到的识别信息在注册到网络的电子货架中搜索目标电子货架。
应注意,在一些实施方案中,服务器配置成从电子装置接收图像信息以及基于接收到的信息来获得识别信息。在一些其它实施方案中,服务器配置成从电子装置接收识别信息。换句话说,任何信息都可由电子利用和提供到服务器,以使得服务器能够搜索目标电子货架。
在类似于图1A的步骤S110的步骤S120B中,电子装置可配置成获得表示与网络中的电子货架当中的目标电子货架上的一个或多个货物对象相关联的特征信息的图像信息。可通过对与至少一个目标电子货架上的一个或多个货物对象相关联的图像信息进行图像处理操作来获得特征信息。图像处理操作的细节将在图4A、图4B以及图5的实施例中描述,且这里不再重复描述。
在步骤S130B中,电子装置可根据与一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个与服务器进行第一通信。电子装置可将图像信息和特征信息中的任一个或两个无线地传输到服务器。可通过进行图像处理操作在电子装置或服务器中获得特征信息。因此,服务器可识别特征信息以根据所述特征信息来获得货物对象的辨识信息。服务器可根据特征信息来生成第一显示设定信息以获得辨识信息,且通过第二通信将第一显示设定信息传输到电子装置。第一显示设定信息可包含由服务器获得的关于至少一个目标电子货架上的一个或多个货物的识别信息。
接着,在步骤S140B中,电子装置可在步骤S140B中进行确认处理以用于确认第一显示设定信息是否正确。用户可通过电子装置发送确认指令以确保第一显示设定信息是正确的。
如将在下文详述,如果确认结果是肯定的,那么流程可结束,意味着服务器可基于经确认的识别信息来设定显示信息。或者,如果确认结果是肯定的,那么流程可去往进一步调整过程,其允许电子装置的用户进一步调整例如位置信息的显示信息。相反,如果确认结果是否定的,意味着电子装置的用户未确认由服务器获得的与一个或多个货物相关联的识别信息,那么可进行纠正处理以允许用户纠正识别信息,
这里请注意,步骤S110B中的配对操作在本公开的一些实施例中不是必要的。在一些实施例中,步骤S110B中的配对操作可被跳过。
请参考图1C,其为根据本公开的另一实施例的操作方法的流程图。继续图1B中的实施例,在图1C中,电子装置可在步骤S110C中进行确认处理以用于确认与一个或多个货物对象相关联的第一显示设定信息的货物信息是否正确。步骤S120和步骤S130C可在确认处理有肯定结果(即,由服务器提供的货物信息最初就是正确的)之后或在确认处理有肯定结果但已进行纠正处理以纠正货物信息(即,由服务器提供的货物信息最初不正确但已由电子装置纠正)时进行。步骤S120C和步骤S130C可由电子装置的用户实现手动调整,从而得到电子货架标签或电子货架显示器的所需显示效果。
在一些场合中,电子装置的用户可能觉得第一显示设定信息不满意,所以用户可通过使用电子装置向服务器提供将要由目标电子货架显示的所需显示信息。所述不满意可能因所捕获图像与电子货架上实际显示的图像之间的失真而发生。换句话说,电子装置可在步骤S120C中根据与从服务器接收到的一个或多个货物对象相关联的第一显示设定信息来获得第二显示设定信息。
详细地说,电子装置可向用户提供关于由服务器最初提供的第一显示设定信息的信息,例如将要根据第一显示设定信息来显示的图像。用户可根据信息或所显示图像来检查第一显示设定信息,且通过由电子装置提供的图形用户界面(graphic user interface;GUI)对所显示图像作出所需纠正。如此,可由电子装置根据对GUI的操作来获得第二显示设定信息。第二显示设定信息可能是用户更需要或更满意的。
接着,电子装置可在步骤S130C中与服务器进行关于与一个或多个货物对象相关联的第二显示设定信息的第二通信。因此,服务器可进一步获得用户更需要的用于设定对应于第二显示设定信息的电子货架标签或电子货架显示器的显示信息。
在这一实施例中,如果在步骤S120C中将第一显示设定信息视为满意或所需的,那么可跳过步骤S130C且第一显示设定信息可由目标电子货架使用以用于相应地显示。
请参考绘示纠正处理的图1D,其为根据本公开的另一实施例的操作方法的流程图。由服务器获得的货物信息可能未经纠正,所以可在用于确认货物信息的确认处理有否定结果之后进行纠正处理。以这种方式,当电子装置的用户发现由服务器提供的货物信息不正确时,所述用户可使用电子装置向服务器提供正确货物信息以便纠正货物信息。
换句话说,可根据设计要求在适当的场合中进行纠正处理。举例来说,在纠正处理之前,电子装置可根据从电子装置的用户接收到的输入来获得确认结果。如果确认处理指示货物信息中存在任何错误,那么用户可通过去到电子装置的输入来纠正货物信息。举例来说,在一些实施方案中,当确认处理有否定结果时,可在图1B的步骤S140B之后进行图1D中的步骤S110D。服务器可基于正确货物信息来设定显示信息且流程可结束。在一些其它实施方案中,当确认处理有否定结果时,可在图1C的步骤S110C之后进行图1D中的步骤S110D。在步骤S110D完成之后,流程可接着去往步骤S130C,其允许用户进一步调整将要由目标电子货架显示的显示信息。
在图1D中,电子装置可在步骤S110D中进行纠正处理。图1D还绘示根据实施例的纠正处理的细节。响应于用户的输入,电子装置可在步骤S121D中从服务器无线地接收候选货物对象信息。可将候选货物对象信息从服务器提供给用户,且电子装置可根据从电子装置的用户接收到的输入来获得指示候选货物对象中的哪一个是正确的选择信息。这意味着电子装置可根据用户的输入来获得选择信息。
在步骤S123D中,电子装置可根据选择信息与服务器通信。因此,服务器可进一步获得对应于正确货物信息的显示信息。
在相同或替代性实施例中,例如,如果去除步骤S121D到步骤S123D,或在步骤S122D中候选货物对象信息未能提供用于选择的正确货物对象,那么电子装置可(在步骤S131D中)对一个或多个货物对象进行图像捕获操作以获得所捕获图像。所捕获图像可包含所识别货物对象的识别信息。在一些实施例中,识别信息可以是所识别货物对象的条形码。如此,电子装置可在步骤S131D中根据一个或多个对象货物的所捕获图像来获得一个或多个对象货物的识别信息。接着,电子装置可在步骤S132D中根据识别信息与服务器通信。因此,服务器可进一步获得对应于正确货物信息的显示信息。
请参考图2A,其示出根据本公开的实施例的配对操作的示意图。在图2A中,所有电子货架211到电子货架21N都可注册到电子货架211到电子货架21N、电子装置220以及服务器230之间的网络。注册表可由服务器230生成以用于记录分别对应于电子货架211到电子货架21N的多个识别信息,且注册表可存储在服务器230中。服务器230可以是后端服务器。电子装置220可以是移动电话,或本领域中众所周知的任何其它手持式电子装置。
在配对操作期间,所有电子货架211到电子货架21N都可与电子装置220和服务器230在网络中无线地或非无线地连接。电子装置220可首先将通知发送到电子货架211到电子货架21N。响应于上述的通知,电子货架211到电子货架21N分别显示多个代码标记ID1到代码标记IDN。代码标记ID1到代码标记IDN分别包含电子货架211到电子货架21N的识别信息。电子装置220可得到代码标记ID1到代码标记IDN中的一个的所捕获图像以选择电子货架211到电子货架21N中的一个作为目标电子货架。以电子货架211是目标电子货架为例。电子装置220可得到代码标记ID1的所捕获图像CMG,且识别代码标记ID1的所捕获图像CMG以得到电子货架211的识别信息。电子装置220进一步根据电子货架211的识别信息通过网络与服务器230通信,且服务器230根据电子货架211的识别信息在注册到网络的电子货架211到电子货架21N中搜索目标电子货架。如此,可将电子货架211配对成目标电子货架。
在本实施例中,代码标记ID1到代码标记IDN可以是快速响应(quick response;QR)码标记、条形码标记或本领域中众所周知的任何其它代码标记。
另外,在配对操作结束之后,电子装置220可发送另一通知以告知电子货架211到电子货架21N配对操作结束。电子货架211到电子货架21N可停止显示代码标记211到代码标记21N以省电。
请参考图2B,其示出根据图2A的实施例的配对操作的示意图。在图2B中,安置多个电子货架211-1到电子货架211-N以及多个显示器DSP1到显示器DSPN,且显示器DSP1到显示器DSPN分别对应于电子货架211-1到电子货架211-N。在配对操作期间,显示器DSP1到显示器DSPN可分别提供条形码图像BC1到条形码图像BCN,其中所述条形码图像分别对应于电子货架211-1到电子货架211-N。此外,电子装置220可通过使用其相机来捕获一个或多个条形码图像BC1到条形码图像BCN的图像。通过分析所捕获图像,可识别一个或多个条形码图像BC1到条形码图像BCN,且可将电子货架211-1到电子货架211-N中的至少一个配对成目标电子货架。
在一些实施例中,上述配对操作不是必要的。可将一个或多个电子货架预定义成至少一个目标电子货架,且用网络与电子装置和服务器链接。
在选择或识别电子货架211作为目标货架之后,电子装置220可得到电子货架211上的一个或多个货物的至少一个所捕获图像。请参考图3,其为根据本公开的实施例的目标电子货架上的货物的所捕获图像的示意图。所捕获图像300包含五个货物对象,其为饼干A、饼干B、泡芙A、蛋糕A以及泡芙B。电子装置220可对所捕获图像300进行图像处理以获得与货物对象相关联的特征信息。或者,在另一实施例中,可将所捕获图像300的图像信息传输到服务器230,且服务器230可对与所捕获图像300相关联的图像信息进行图像处理以获得与货物对象相关联的特征信息。
可使用不同算法。举例来说,可基于人工智能(Artificial Intelligence;AI)处理对所捕获图像300进行图像处理。
图像处理的细节可见于图4A和图4B中,其为根据预设公开的实施例的对货物对象的所捕获图像的图像处理的示意图。在图4A中,以正在由电子装置执行的图像处理为例,本公开的电子装置可将所捕获图像300变换成灰度图像,且对所述灰度图像进行边缘检测操作以获得边缘点图像410。可通过坎尼(Canny)边缘检测算法或本领域的技术人员众所周知的任何其它边缘检测和/或边缘增强算法来应用边缘检测操作。
接着,沿着水平轴(X轴),电子装置可扫描边缘点图像410的多个列中的每一个,且计算行中的每一个中的连续黑色像素的数目,以建立黑色像素的数目与边缘点图像410的X轴上的位置(X位置)之间的第一关系图420。另外,电子装置对第一关系图420中的黑色像素的数目进行平滑操作以获得第二关系图430。
在图4B中,根据第二关系图430,电子装置根据第二关系图430进行第一修剪操作。在第一修剪操作中,电子装置计算黑色像素的所有数目的第一平均值。通过将第一平均值设定成第一阈值,电子装置根据第一阈值进一步修剪黑色像素的数目以生成第一修剪图440。其中,电子装置比较黑色像素的数目中的每一个与第一阈值。如果黑色像素的数目大于第一阈值,那么电子装置保持黑色像素的数目不变;且如果黑色像素的数目不大于第一阈值,那么电子装置将黑色像素的数目修剪成零。
电子装置可根据第一修剪图440进行第二修剪操作。在第二修剪操作中,电子装置忽略为零的黑色像素的数目,且计算不为零的黑色像素的数目的第二平均值。电子装置可将第二平均值设定成第二阈值,且根据第二阈值来修剪第一修剪图440中的黑色像素的数目以生成第二修剪图450。其中,电子装置比较第一修剪图440中的黑色像素的数目中的每一个与第二阈值。如果第一修剪图440中的黑色像素的数目大于第二阈值,那么电子装置保持第一修剪图440中的黑色像素的数目不变;且如果第一修剪图440中的黑色像素的数目不大于第二阈值,那么电子装置将第一修剪图440中的黑色像素的数目修剪成零。
在生成第二修剪图450之后,电子装置可对第二修剪图450中的曲线进行分组,且找出如修剪图460中的多个组的特征点FP1到特征点FP7。其中特征点FP1到特征点FP7中的每一个是对应组的最大值。
电子装置进一步根据特征点FP1到特征点FP7生成多个分隔线。使用分隔线来分隔所捕获图像中的货物对象。这可见于图5中,其示出根据本公开的实施例的边缘检测结果。同样以正在由电子装置执行的图像处理为例。在一个实施例中,首先,电子装置可计算特征点FP1与捕获图像500的最接近边界之间的第一距离,且计算特征点FP7与捕获图像500的最接近边界之间的第二距离。由于货物对象中的每一个具有最小宽度,所以电子装置可在第一距离小于第一预设参考值的情况下删除特征点FP1,且在第二距离小于第一预设参考值的情况下删除特征点FP7。其次,电子装置可计算特征点FP2到特征点FP6中的任何两个相邻特征点之间的多个第三距离。如果第三距离的标准差大于预设第二参考值,那么电子装置可选择具有最小距离的两个相邻特征点中的更小一个进行删除。接着,可再次计算出基于剩余特征点的标准差,且电子装置可通过比较标准差与预设第二参考值来确定是否删除另一特征点。如果标准差不大于预设第二参考值,那么电子装置可将剩余特征点设定成多个最终特征点,且根据最终特征点的位置来生成分隔线DL1到分隔线DL4。根据分隔线DL1到分隔线DL4,可生成所捕获图像500中的货物对象的多个位置信息,且可由电子装置根据位置信息来识别货物对象的多个子图像SIM1到子图像SIM5。
电子装置可进一步基于子图像SIM1到子图像SIM5对所捕获图像的货物对象中的每一个进行特征变换操作。电子装置可将尺度不变特征变换(Scale-Invariant FeatureTransform;SIFT)算法应用于子图像SIM1到子图像SIM5中的每一个以获得特征信息。在其它实施例中,电子装置可进行加速稳固特征(Speeded-Up Robust Features;SURF)方法、二进制稳固独立基本特征(Binary Robust Independent Elementary Features;BRIEF)方法、来自加速段测试的特征(Features From Accelerated Segment Test;FAST)方法、定向FAST和旋转BRIEF(Oriented FAST and Rotated BRIEF;ORB)方法、基于深度学习的特征提取方法(例如:inception V3、深度残差网络(Deep residual network;ResNet))或本领域的技术人员众所周知的任何其它特征提取方法以获得特征信息。
这里请注意,在一些实施例中,电子装置可显示具有分隔线DL1到分隔线DL4的所捕获图像500。如此,用户可检查分隔线DL1到分隔线DL4的位置是否正确,且可手动地调整分隔线DL1到分隔线DL4中的任一个的位置。当然,如果用户发现某一分隔线未在所捕获图像500中绘示,那么用户可手动地添加所述分隔线。另一方面,如果用户发现分隔线DL1到分隔线DL4中的任一个不是必要的,那么用户也可手动地去除所述分隔线。
这里应注意,也可在服务器中进行图4A、图4B以及图5的实施例。服务器可对所捕获图像300的图像信息进行图像处理以获得特征信息。
在下文中,以分别对应于图1A到图1D的图6A到图6D绘示适用于服务器的操作方法,所述图1A到图1D用来示出适用于与服务器通信的电子装置的操作方法。换句话说,对显示信息的调整是在服务器与电子装置的配合下进行的,所以在图1A到图1D中针对由电子装置进行的步骤来描述操作方法,且在图1A到图1D中针对由服务器进行的步骤来描述操作方法。
参考图6A,其示出根据本公开的另一实施例的用于控制网络中的多个电子货架的具有货物信息的操作方法的流程图。图6中的流程图适用于如图2中所提及的与电子装置连接的服务器。在步骤S610中,服务器从电子装置无线地接收与电子货架当中的至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个,其中从图像信息提取特征信息。换句话说,服务器可从电子装置接收特征信息,所述电子装置已基于与至少一个目标电子货架上的一个或多个货物相关联的所捕获图像来提取特征信息。接着,服务器可根据与货物对象相关联的特征信息来获得辨识信息(步骤S620)。详细地说,服务器可分析特征信息以获得辨识信息。举例来说,服务器可通过K均值聚类(K-meansclustering)和局部聚合描述符向量(Vector of Locally Aggregated Descriptor;VLAD)算法来分析特征信息,且还比较特征信息与数据仓库(data bank)以输出所捕获图像中的货物对象中的每一个。另外,服务器可在步骤S630中通过进行显示设定处理根据辨识信息来获得第一显示设定信息,且第一显示设定信息可由至少一个目标电子货架显示。第一显示设定信息可包含关联货物对象的货物信息,例如货物对象中的每一个的名称、价格、制品编号以及简图。第一显示设定信息还可包含与货物对象相关联的位置信息。服务器还可在步骤S630中根据第一显示设定信息与目标电子货架通信。步骤S610到步骤S630的更多细节可参考适用于电子装置的图1A的对应步骤S110到步骤S120,且这里为简洁起见而省略。
请参考图6B,其示出根据本公开的另一实施例的用于控制网络中的多个电子货架的具有货物信息的操作方法的流程图。在步骤S610B中,可由服务器进行配对操作以识别或选择注册到网络的电子货架当中的至少一个电子货架作为至少一个目标电子货架。配对操作涉及与电子装置的配合。步骤S610B的更多细节可参考适用于电子装置的图1B的对应步骤S110B以及图2A和图2B的细节,且这里为简洁起见而省略。
接着,在步骤S620B中,服务器可从电子装置无线地接收与至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个。特征信息的生成涉及与电子装置的配合。这意味着电子装置或服务器可根据由电子装置获得的一个或多个货物对象的所捕获图像来获得与目标电子货架的一个或多个货物对象相关联的特征信息。步骤S620B的更多细节可参考适用于电子装置的图1B的对应步骤S120B以及图3到图5的细节,且这里为简洁起见而省略。
服务器可在步骤S630B中根据特征信息来获得辨识信息。服务器可基于存储在数据库中的货物数据与特征信息之间的匹配来获得辨识信息。
服务器在步骤S640B中进一步基于辨识信息来进行显示设定处理以生成第一显示设定信息。可将第一显示设定信息传输到至少一个目标电子货架,所述至少一个目标电子货架可接着基于第一显示设定信息在电子货架标签或电子货架显示器上显示货物信息。
或者或另外,可将第一显示设定信息传输到电子装置,所述电子装置可在步骤S650B中根据第一显示设定信息来进行确认处理。
步骤S650B中的确认处理用来确认与一个或多个货物对象相关联的第一显示设定信息的货物信息是否正确。在确认处理期间,可由服务器通过电子装置获得确认信息。电子装置的用户可确认由服务器获得的货物信息是否正确,且接着将指示确认结果的输入提供到电子装置。
如将通过分别对应于图1C和图1D的图6C到图6D中所绘示的实施例所描述,如果确认处理有肯定结果,那么至少一个目标电子货架可基于第一显示设定信息在电子货架标签或电子货架显示器上显示货物信息。相反,如果确认处理有肯定结果,那么还可基于电子装置的用户的输入来进行纠正处理以纠正由服务器提供的货物信息。这意味着服务器可从电子装置接收经纠正货物信息。此外,在一些实施方案中,如果确认处理有肯定结果,那么还可进行额外手动调整。如果确认处理有否定结果但纠正处理结束,那么还可进行额外手动调整。这意味着服务器可从电子装置接收第二显示设定信息,其中第二显示设定信息可能是相较于第一显示信息用户更需要或更满意的。确认处理涉及与电子装置的配合。步骤S650B的更多细节可参考适用于电子装置的图1B的对应步骤S140B,且这里为简洁起见而省略。
这里请注意,在步骤S610B中进行的配对操作对本公开的一些实施例来说不是必要的。在一些实施例中,可跳过步骤S610B。
请参考图6C,其示出根据本公开的另一实施例的用于控制网络中的多个电子货架的具有货物信息的操作方法的流程图。继续图6B中的实施例,在图6C中,在步骤S610C中进行确认处理以用于确认与一个或多个货物对象相关联的第一显示设定信息的货物信息是否正确。
如果确认处理有肯定结果,那么意味着用户确认由服务器提供的货物信息是正确的,还可进行额外手动调整。步骤S620C和步骤S630C可由电子装置的用户实现手动调整,从而得到电子货架标签或电子货架显示器的所需显示效果。在步骤S620C中,如果第一显示设定信息不是电子装置的用户所需或满意的,那么用户可将第一显示设定信息调整成第二显示设定信息,所述第二显示设定信息比第一显示设定信息更为所需或满意。换句话说,电子装置可根据用户的输入来生成第二显示设定信息。服务器可在步骤S620C中从电子装置接收第二显示设定信息,其中第二显示设定信息与一个或多个货物对象相关联。此外,服务器可在步骤S630C中根据第二显示设定信息与目标电子货架通信,且目标电子货架可根据第二显示设定信息来显示图像以具有更满意或显示效果。应注意,如果确认处理有否定结果但纠正处理结束,那么还可进行额外手动调整。确认处理涉及与电子装置的配合。步骤S610C的更多细节可参考适用于电子装置的图1C的对应步骤S110C,且这里为简洁起见而省略。
在这一实施例中,如果在步骤S620C中确认第一显示设定信息是满意或所需的,那么可跳过步骤S630C且第一显示设定信息可由目标电子货架使用以用于相应地显示。
请参考图6D,其示出根据本公开的另一实施例的用于控制网络中的多个电子货架的具有货物信息的操作方法的流程图。
在步骤S610D中,可进行纠正处理。如果步骤S610C有否定结果,那么可进行步骤S610D。此外,且在步骤S610D结束且确定由电子装置的用户进行手动调整之后,流程可回到步骤S620C和步骤630C。
在步骤S610D期间,服务器可在步骤S621D中将候选货物信息传输到电子装置。可由服务器根据由电子装置传输的特征信息来获得候选货物信息。电子装置可将候选货物信息提供给用户以供选择,且可由电子装置获得选择信息,所述电子装置接着将选择信息发送到服务器。接着,在步骤S622D中,服务器与电子装置通信以获得指示候选货物对象中的哪一个是正确的选择信息。
或者或另外,例如,如果候选货物信息中不存在可选择的正确物品,那么用户可捕获目标货架中的未识别货物对象的识别,且服务器可与电子装置通信以获得一个或多个货物对象的识别信息(步骤S631D)。可将识别信息记录在未识别货物对象的条形码中,且用户可使用电子装置来扫描条形码以获得识别信息。纠正处理涉及与电子装置的配合。步骤S610D和步骤S621D、步骤S622D以及步骤S631D的更多细节可参考适用于电子装置的图1D的对应步骤S110D和步骤S121D、步骤S122D、步骤S123D以及步骤S131D和步骤S132D,且这里为简洁起见而省略。
请参考图7,其示出根据本公开的实施例的第一显示设定信息的示意图以用于示出确认处理、纠正处理以及手动调整处理。可将第一显示设定信息传输到电子装置,且电子装置可在图形用户界面(GUI)上显示第一显示设定信息。在图7中,可在GUI上展示所捕获图像701(与所捕获图像500相同)。可将五个货物对象编码成编号1到编号5,其中饼干A是编号1,饼干B是编号2,泡芙A是编号3,蛋糕A是编号4,且泡芙B是编号5。GUI还展示分隔线DL1到分隔线DL4以点置(point put)与货物对象相关联的位置信息。
GUI可提供具有多个显示区域F1到显示区域F5的影像710,且显示区域F1到显示区域F5分别对应于分别编号成1到5的五个货物对象。以显示区域F1为例,其中显示区域F1包含货物对象的名称(饼干A)、价格712、代码信息711以及简图713。GUI还可在显示区域F1上提供选择空白处S1和调整按钮714以用于进行手动调整。
另一方面,在本实施例中,电子装置还可通过GUI进行确认处理以用于确认与一个或多个货物对象相关联的第一显示设定信息的货物信息是否正确。电子装置在确认处理期间通过GUI根据从电子装置的用户接收到的输入来获得确认信息。
当第一显示设定信息的货物信息不正确时,电子装置还可通过GUI进行纠正处理以用于纠正与一个或多个货物对象相关联的第一显示设定信息的货物信息。如果用户想要纠正货物对象中的任一个的货物信息,那么用户可通过触摸选择空白处S1到选择空白处S5中的一个来进行输入。此外,如果显示区域F1中的货物信息与编号1货物对象不匹配,那么用户可选择显示区域F1以调整。举例来说,用户可在显示区域F1上进行长时间触摸,且GUI可提供纠正列表。
当用户认为第一显示设定信息不满意或不是所需的时,电子装置还可通过GUI进行手动调整处理以用于调整与一个或多个货物对象相关联的第一显示设定信息(特定来说,位置信息)。如果选择选择空白处S1,那么用户可使用调整按钮714来调整分隔线DL1的位置以生成与对应货物对象相关联的位置调整信息。
请参考图8,其示出根据本公开的实施例的用于纠正处理中的纠正列表的示意图以用于解释纠正处理。纠正列表可由电子装置上的图形用户界面(GUI)显示给电子装置的用户以控制纠正处理。在图8中,在纠正处理期间,纠正列表800可提供与多个候选货物对象相关联的多个候选货物信息810到候选货物信息850。在这一实施例中,纠正列表800可提供五个候选货物信息810到候选货物信息850,且在另一实施例中,纠正列表可提供更多或更少候选货物信息且这里不作特定限制。
在这一实施例中,可通过无线通信从服务器接收到候选货物信息。服务器可根据所捕获图像的特征信息进行人工智能(AI)计算以生成候选货物信息。
此外,用户可通过输入来选择正确候选货物信息(也就是候选货物信息810),且电子装置可根据来自用户的输入来生成选择信息。电子装置可进一步根据指示候选货物对象中的哪一个是正确的选择信息与服务器无线通信。
另一方面,如果用户未能在候选货物信息810到候选货物信息850中找到正确货物信息,那么用户可选择“扫描条形码”选项。电子装置可启动条形码扫描应用程序以扫描未识别货物对象,且可纠正货物信息。也就是说,在纠正处理期间,可根据捕获图像获得不正确货物对象的识别信息。识别信息可能是不正确货物对象的代码信息(条形码)。
另一方面,如果对应货物对象为空,那么用户可选择“设定为空”选项。
在纠正处理结束之后,服务器可从电子装置接收经纠正货物信息,且接着基于经纠正货物信息来设定目标电子货架。在一些实施方案中,可进一步进行手动调整,在此期间电子装置可生成与一个或多个货物对象相关联的第二显示信息,其中第二显示信息可包含上述位置调整信息。电子装置进一步与服务器进行第二通信,且通过第二通信将与一个或多个货物对象相关联的第二显示设定信息无线地传输到服务器。
请参考图9,其示出根据本公开的实施例的由目标电子货架的电子货架显示器显示的图像。显示信息900可由服务器传输到目标电子货架。显示信息900包含货物信息911到货物信息915,且货物信息911到货物信息915可分别与目标电子货架上的对应货物对象对齐。在本公开中,可在同一电子货架标签/显示器上显示所有货物信息911到货物信息915。
此外,本公开的电子装置可包含非暂时性计算机可读介质和处理器。非暂时性计算机可读介质在其上存储有软件指令且可由处理器执行。当由处理器执行软件指令时,处理器可执行本公开的图1中的步骤S110到步骤S120。
本公开的服务器也可同样包含非暂时性计算机可读介质和处理器。非暂时性计算机可读介质在其上存储有软件指令且可由处理器执行。当由处理器执行软件指令时,处理器可执行本公开的图6中的步骤S610到步骤S620。
请参考图10A,其示出根据本公开的实施例的用于电子货架系统的操作方法的流程图。在步骤S1010-1中,可通过由电子装置执行的APP(应用程序)来将目标电子货架(或若干目标电子货架)与电子装置(也就是移动电话)配对。接着,在步骤S1020-1中,移动电话可捕获目标电子货架上的一个或多个货物对象的图像,且移动电话进行算法以提取图像中的货物的特征信息(在步骤S1030-1中)。算法可包含本领域的技术人员众所周知的边缘检测或图像处理算法。在步骤S1040-1中,可由移动电话提取货物对象的特征信息,且可将特征信息从移动电话发出到服务器。
这里请注意,在一些实施例中,可由服务器进行步骤S1030-1和步骤S1040-1。移动电话可将在步骤S1020-1中获得的所捕获图像的图像信息传输到服务器,且服务器可进行算法以分隔图像中的货物(步骤S1030-1),且获得特征信息。这意味着服务器可在未从移动电话接收特征信息的情况下基于关于从移动电话接收到的所捕获图像的图像信息来进行算法。
在步骤S1050-1中,服务器配置成辨识特征信息以获得辨识信息,且将货物信息(例如,辨识信息)传输到移动电话和目标电子货架。
另外,电子装置可例如根据图7中所绘示的实施例通过显示器将辨识信息提供给电子装置的用户,且在步骤S1060-1中,由用户进行可确认辨识信息正确或不正确的确认处理。
在可选步骤S1070-1中,如果存在肯定确认结果(是),那么当用户认为由服务器提供的位置不是所需的或不满意时,用户可通过APP进行手动调整以稍微调整每一货物对象的电子货架标签的位置,且接着操作方法可结束。
在一些替代实施例中,可跳过步骤S1060-1的确认处理,且用户可在将辨识信息传输到移动电话和目标电子货架之后通过APP直接调整每一货物对象的电子货架标签的位置。
请参考图10B,其示出根据本公开的另一实施例的用于电子货架系统的操作方法的流程图。在步骤S1010-2中,通过APP(应用程序)将目标电子货架与电子装置(也就是移动电话)配对。接着,在步骤S1020-2中,移动电话捕获目标电子货架上的一个或多个货物对象的图像,且移动电话进行算法以分隔图像中的货物(在步骤S1030-2中)。算法可以是本领域的技术人员众所周知的边缘检测算法。在步骤S1040-2中,可提取货物对象的特征信息,且可将特征信息发出到服务器。在步骤S1050-2中,服务器配置成辨识特征信息以获得辨识信息,且将辨识信息传输到移动电话和目标电子货架。在步骤S1060-2(确认处理)中,移动电话的用户判断辨识信息是否正确。
如果辨识信息正确,那么可执行步骤S1070-2,且如果辨识信息不正确,那么可执行步骤S1080-2以开始包含步骤S1080-2、步骤S1090-2以及步骤S1100-2的纠正处理。
在步骤S1070-2中,进行用户可通过APP调整每一货物对象的电子货架标签的位置的手动调整,且接着操作方法可结束。
在步骤S1080-2中,用户可选择不正确货物对象,且检查正确货物对象是否在候选信息中。如果正确货物对象在候选信息中,那么用户可纠正不正确货物对象(步骤S1090-2)。相反,如果正确货物对象不在候选信息中,那么可通过APP启用条形码扫描功能以用于纠正不正确货物对象(在步骤S1100中)。如果所有不正确货物对象都经纠正,那么操作方法的流程可结束。
在前述实施例中已描述步骤S1010-2到步骤S1100-2的细节,且这里不再重复描述。
这里请注意,在这一实施例中,可由这一实施例中的移动电话进行包含步骤S1010-2到步骤S1040-2的步骤组SG1。另一方面,请参考图10C,可由移动电话进行包含步骤S1010-2到步骤S1020-2的步骤组SG1',且可由服务器进行步骤S1030-2到步骤S1040-2。在这里,图10C示出根据图10B的实施例的用于电子货架系统的操作方法的另一流程图。
总而言之,本公开提供电子装置以获得与目标电子货架上的一个或多个货物对象相关联的图像信息和特征信息中的任一个或两个,以及将图像信息和特征信息中的任一个或两个传输到服务器。本公开还提供服务器以辨识特征信息,以生成显示设定信息。电子装置可提供用于确认、纠正和/或手动调整的界面,且可在目标电子货架的电子货架标签上显示正确显示设定信息。如此,可自动设定或甚至进一步手动调整由电子货架标签显示的内容,且可提高电子货架的效率。
将对本领域的技术人员显而易见的是,在不脱离本公开的范围或精神的情况下,可对所公开实施例的结构作出各种修改和变化。鉴于前述,希望本公开覆盖本公开的修改和变化,前提是所述修改和变化落入所附权利要求书和其等效物的范围内。
Claims (59)
1.一种适用于电子装置的具有货物信息的操作方法,包括:
获得与网络中的多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的图像信息;以及
根据与所述一个或多个货物对象相关联的所述图像信息和特征信息中的任一个或两个与服务器进行第一通信以用于控制所述网络中的所述电子货架,其中从所述图像信息提取所述特征信息,且所述第一通信包括将与所述一个或多个货物对象相关联的所述图像信息和所述特征信息中的任一个或两个无线地传输到所述服务器。
2.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,其中所述第一通信使得所述服务器根据与所述一个或多个货物对象相关联的所述特征信息来设定由所述至少一个目标电子货架显示的显示信息。
3.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,其中所述第一通信进一步包括从所述服务器无线地接收与所述特征信息相关的第一显示设定信息,所述特征信息与所述一个或多个货物对象相关联。
4.根据权利要求3所述的适用于电子装置的具有货物信息的操作方法,其中与所述一个或多个货物对象相关联的所述第一显示设定信息包括与所述一个或多个货物对象相关联的至少一个位置信息和货物信息。
5.根据权利要求3所述的适用于电子装置的具有货物信息的操作方法,进一步包括:
根据从所述服务器接收到的与所述一个或多个货物对象相关联的所述第一显示设定信息来获得第二显示设定信息;以及
与所述服务器进行关于与所述一个或多个货物对象相关联的所述第二显示设定信息的第二通信,其中所述第二通信包括将与所述一个或多个货物对象相关联的所述第二显示设定信息无线地传输到所述服务器。
6.根据权利要求5所述的适用于电子装置的具有货物信息的操作方法,其中所述第二显示设定信息包括与所述一个或多个货物对象中的至少一个相关联的位置调整信息。
7.根据权利要求6所述的适用于电子装置的具有货物信息的操作方法,其中根据来自所述电子装置的用户的输入来确定所述位置调整信息。
8.根据权利要求4所述的适用于电子装置的具有货物信息的操作方法,进一步包括进行确认处理以用于确认与所述一个或多个货物对象相关联的第一显示设定信息的所述货物信息是否正确。
9.根据权利要求8所述的适用于电子装置的具有货物信息的操作方法,其中所述确认处理包括根据从所述电子装置的用户接收到的输入来获得确认信息。
10.根据权利要求8所述的适用于电子装置的具有货物信息的操作方法,进一步包括在与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息不正确时进行纠正处理,以用于纠正与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息。
11.根据权利要求10所述的适用于电子装置的具有货物信息的操作方法,其中所述第一显示设定信息的所述货物信息包括与多个候选货物对象相关联的候选货物信息,且所述纠正处理包括:
从所述服务器无线地接收所述候选货物信息;
根据从所述电子装置的所述用户接收到的输入来获得指示所述候选货物对象中的哪一个是正确的选择信息;以及
根据所述选择信息与所述服务器通信。
12.根据权利要求10所述的适用于电子装置的具有货物信息的操作方法,其中所述纠正处理包括:
根据所述一个或多个货物对象的所捕获图像来获得所述一个或多个货物对象的识别信息;以及
根据所述识别信息与所述服务器通信。
13.根据权利要求12所述的适用于电子装置的具有货物信息的操作方法,其中所述一个或多个货物对象的所述所捕获图像包括指示所述一个或多个货物对象的所述识别信息的代码信息。
14.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,进一步包括将所述电子装置与注册到所述网络的所述电子货架当中的所述至少一个目标电子货架配对。
15.根据权利要求14所述的适用于电子装置的具有货物信息的操作方法,其中所述配对的步骤包括:
根据所述至少一个目标电子货架的所捕获图像来获得所述至少一个目标电子货架的识别信息;以及
根据所述至少一个目标电子货架的所述识别信息与所述服务器通信,使得所述服务器根据所述至少一个目标电子货架的所述识别信息在注册到所述网络的所述电子货架中搜索所述至少一个目标电子货架。
16.根据权利要求15所述的适用于电子装置的具有货物信息的操作方法,其中所述所捕获图像包括指示所述至少一个目标电子货架的识别信息的代码信息。
17.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,其中获得与所述一个或多个货物对象相关联的所述图像信息的步骤包括:
获得所述至少一个目标电子货架上的所述一个或多个货物对象的至少一个所捕获图像。
18.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,进一步包括在不提取所述特征信息的情况下将所述图像信息传输到所述服务器。
19.根据权利要求1所述的适用于电子装置的具有货物信息的操作方法,进一步包括:
对所述至少一个所捕获图像进行图像处理以获得与所述一个或多个货物对象相关联的所述特征信息;以及
将所述特征信息传输到所述服务器。
20.根据权利要求19所述的适用于电子装置的具有货物信息的操作方法,其中对所述至少一个所捕获图像进行所述图像处理以获得与所述一个或多个货物对象相关联的所述特征信息的步骤:
对所述至少一个所捕获图像进行边缘检测操作以获得所述一个或多个货物对象的至少一个位置信息;以及
根据所述至少一个位置信息对所述至少一个所捕获图像进行特征变换操作以获得所述一个或多个货物对象的所述特征信息。
21.一种用于控制网络中的多个电子货架的适用于服务器的具有货物信息的操作方法,包括:
从电子装置无线地接收与所述电子货架当中的至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个,其中从所述图像信息提取所述特征信息;
根据与所述一个或多个货物对象相关联的所述特征信息来获得辨识信息;以及
进行显示设定处理以用于根据所述辨识信息来设定将要由所述至少一个目标电子货架显示的显示信息。
22.根据权利要求21所述的适用于服务器的具有货物信息的操作方法,其中所述显示设定处理包括:
根据所述辨识信息来获得第一显示设定信息,且根据所述第一显示设定信息与所述至少一个目标电子货架通信。
23.根据权利要求22所述的适用于服务器的具有货物信息的操作方法,其中与所述一个或多个货物对象相关联的所述第一显示设定信息包括与所述一个或多个货物对象相关联的位置信息和货物信息。
24.根据权利要求22所述的适用于服务器的具有货物信息的操作方法,其中所述显示设定处理包括根据所述第一显示设定信息与所述电子装置无线地通信。
25.根据权利要求24所述的适用于服务器的具有货物信息的操作方法,其中根据所述第一显示设定信息与所述电子装置无线地通信的步骤包括:将所述第一显示设定信息传输到所述电子装置。
26.根据权利要求25所述的适用于服务器的具有货物信息的操作方法,其中根据所述第一显示设定信息与所述电子装置无线地通信的所述步骤包括:
从所述电子装置接收与所述一个或多个货物对象中的至少一个相关联的第二显示设定信息;以及
根据所述第二显示设定信息与所述至少一个目标电子货架通信。
27.根据权利要求26所述的适用于服务器的具有货物信息的操作方法,其中所述第二显示设定信息包括与所述一个或多个货物对象中的至少一个相关联的位置调整信息。
28.根据权利要求25所述的适用于服务器的具有货物信息的操作方法,进一步包括进行确认处理以用于确认与所述一个或多个货物对象相关联的第一显示设定信息的所述货物信息是否正确。
29.根据权利要求28所述的适用于服务器的具有货物信息的操作方法,其中所述确认处理包括从所述电子装置获得确认信息。
30.根据权利要求28所述的适用于服务器的具有货物信息的操作方法,进一步包括在与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息不正确时进行纠正处理,以用于纠正与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息。
31.根据权利要求30所述的适用于服务器的具有货物信息的操作方法,其中所述第一显示设定信息的所述货物信息包括与多个候选货物对象相关联的候选货物信息,且所述纠正处理包括:
将所述候选货物信息传输到所述电子装置;以及
与所述电子装置通信以获得指示所述候选货物对象中的哪一个是正确的选择信息。
32.根据权利要求30所述的适用于服务器的具有货物信息的操作方法,其中所述纠正处理包括:
与所述电子装置通信以获得所述一个或多个货物对象的识别信息,其中根据所述一个或多个货物对象的所捕获图像来确定所述识别信息。
33.根据权利要求32所述的适用于服务器的具有货物信息的操作方法,其中所述一个或多个货物对象的所述所捕获图像包括指示所述一个或多个货物对象的所述识别信息的代码信息。
34.根据权利要求21所述的适用于服务器的具有货物信息的操作方法,进一步包括将所述电子装置与注册到所述网络的所述电子货架当中的所述至少一个目标电子货架配对。
35.根据权利要求34所述的适用于服务器的具有货物信息的操作方法,其中所述配对的步骤包括:
与所述电子装置通信以获得所述至少一个目标电子货架的识别信息;以及
根据所述至少一个目标电子货架的所述识别信息在注册到所述网络的所述电子货架中搜索所述至少一个目标电子货架。
36.根据权利要求34所述的适用于服务器的具有货物信息的操作方法,其中根据包括指示所述至少一个目标电子货架的识别信息的代码信息的所捕获图像来确定所述识别信息。
37.根据权利要求22所述的适用于服务器的具有货物信息的操作方法,进一步包括从所述电子装置接收所述特征信息,其中所述特征信息由所述电子装置提取。
38.根据权利要求22所述的适用于服务器的具有货物信息的操作方法,进一步包括:
从所述电子装置接收所述图像信息;以及
对所述图像信息进行图像处理以获得与所述一个或多个货物对象相关联的所述特征信息。
39.根据权利要求38所述的适用于服务器的具有货物信息的操作方法,其中对所述至少一个所捕获图像进行所述图像处理以获得与所述一个或多个货物对象相关联的所述特征信息的步骤包括进行人工智能处理。
40.一种可由电子装置执行的具有货物信息的操作方法,包括:
启动图像捕获处理以获得与网络中的多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的所捕获图像;以及
显示用于设定将要由所述至少一个目标电子货架显示的显示信息的第一显示设定信息,其中与所述一个或多个货物对象相关联的所述第一显示设定信息包括取决于所述所捕获图像的特征信息的辨识信息。
41.根据权利要求40所述的可由电子装置执行的具有货物信息的操作方法,其中从与所述电子装置通信的所述网络的服务器获得所述第一显示设定信息。
42.根据权利要求41所述的可由电子装置执行的具有货物信息的操作方法,其中所述通信使所述服务器根据与所述一个或多个货物对象相关联的所述辨识信息来设定由所述至少一个目标电子货架显示的显示信息。
43.根据权利要求40所述的可由电子装置执行的具有货物信息的操作方法,进一步包括显示用于请求所述电子装置的用户提供用于设定将要由所述至少一个目标电子货架显示的显示信息的第二显示设定信息的消息。
44.根据权利要求43所述的可由电子装置执行的具有货物信息的操作方法,其中所述第二显示设定信息包括与所述一个或多个货物对象中的至少一个相关联的位置调整信息。
45.根据权利要求42所述的可由电子装置执行的具有货物信息的操作方法,进一步包括显示用于请求所述电子装置的用户确认与所述一个或多个货物对象相关联的第一显示设定信息的货物信息是否正确的消息。
46.根据权利要求45所述的可由电子装置执行的具有货物信息的操作方法,进一步包括在与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息不正确时显示用于请求所述电子装置的所述用户纠正与所述一个或多个货物对象相关联的所述第一显示设定信息的所述货物信息的消息。
47.一种在其上存储有软件指令的非暂时性计算机可读介质,所述软件指令在由处理器执行时使得所述处理器执行包括以下的步骤:
获得与网络中的多个电子货架当中的至少一个目标电子货架上的一个或多个货物对象相关联的图像信息;以及
根据与所述一个或多个货物对象相关联的所述图像信息和特征信息中的任一个或两个与服务器无线地通信以用于控制所述网络中的所述电子货架,其中从所述图像信息提取所述特征信息,且所述通信包括将与所述一个或多个货物对象相关联的所述图像信息和所述特征信息中的任一个或两个传输到所述服务器。
48.根据权利要求47所述的在其上存储有软件指令的非暂时性计算机可读介质,其中所述通信使所述服务器根据与所述一个或多个货物对象相关联的所述特征信息来设定由所述至少一个目标电子货架显示的显示信息。
49.根据权利要求47所述的在其上存储有软件指令的非暂时性计算机可读介质,其中所述通信进一步包括从所述服务器接收与所述特征信息相关的第一显示设定信息,所述特征信息与所述一个或多个货物对象相关联。
50.根据权利要求47所述的在其上存储有软件指令的非暂时性计算机可读介质,进一步包括将所述电子装置与注册到所述网络的所述电子货架当中的所述至少一个目标电子货架配对。
51.根据权利要求47所述的在其上存储有软件指令的非暂时性计算机可读介质,其中获得与所述一个或多个货物对象相关联的所述图像信息的步骤包括:
获得所述至少一个目标电子货架上的所述一个或多个货物对象的至少一个所捕获图像。
52.根据权利要求47所述的操作方法,进一步包括在不提取所述特征信息的情况下将所述图像信息传输到所述服务器。
53.根据权利要求47所述的操作方法,进一步包括:
对所述至少一个所捕获图像进行图像处理以获得与所述一个或多个货物对象相关联的所述特征信息;以及
将所述特征信息传输到所述服务器。
54.一种在其上存储有软件指令的非暂时性计算机可读介质,所述软件指令在由处理器执行时使得所述处理器执行包括以下的步骤:
从电子装置无线地接收与所述电子货架当中的至少一个目标电子货架上的多个货物对象相关联的图像信息和特征信息中的任一个或两个,其中从所述图像信息提取所述特征信息;
根据与所述一个或多个货物对象相关联的所述特征信息来获得辨识信息;以及
进行显示设定处理以用于根据所述辨识信息来设定将要由所述至少一个目标电子货架显示的显示信息。
55.根据权利要求54所述的在其上存储有软件指令的非暂时性计算机可读介质,其中所述显示设定处理包括:
根据所述辨识信息来获得第一显示设定信息,且根据所述第一显示设定信息与所述至少一个目标电子货架通信。
56.根据权利要求54所述的在其上存储有软件指令的非暂时性计算机可读介质,进一步包括将所述电子装置与注册到所述网络的所述电子货架当中的所述至少一个目标电子货架配对。
57.根据权利要求54所述的在其上存储有软件指令的非暂时性计算机可读介质,进一步包括从所述电子装置接收所述特征信息,其中所述特征信息已由所述电子装置提取。
58.根据权利要求54所述的在其上存储有软件指令的非暂时性计算机可读介质,进一步包括:
从所述电子装置接收所述图像信息;以及
对所述图像信息进行图像处理以获得与所述一个或多个货物对象相关联的所述特征信息。
59.根据权利要求58所述的在其上存储有软件指令的非暂时性计算机可读介质,其中对所述至少一个所捕获图像进行所述图像处理以获得与所述一个或多个货物对象相关联的所述特征信息的步骤包括进行人工智能处理。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962857794P | 2019-06-05 | 2019-06-05 | |
US62/857,794 | 2019-06-05 | ||
US16/892,251 US11508149B2 (en) | 2019-06-05 | 2020-06-03 | Operating method with goods information and non-transitory computer readable medium thereof |
US16/892,251 | 2020-06-03 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112052919A true CN112052919A (zh) | 2020-12-08 |
Family
ID=73609704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010500741.1A Pending CN112052919A (zh) | 2019-06-05 | 2020-06-04 | 具有货物信息的操作方法和其非暂时性计算机可读介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112052919A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107871359A (zh) * | 2017-11-27 | 2018-04-03 | 无锡天任电子有限公司 | 一种格子柜自动售货机及其控制方法 |
EP3388999A1 (en) * | 2017-04-11 | 2018-10-17 | Pricer AB | Displaying further information about a product |
CN108898141A (zh) * | 2018-06-14 | 2018-11-27 | 中山大学 | 基于图像检测的商品货架分割和层信息统计方法 |
CN208188867U (zh) * | 2018-06-01 | 2018-12-04 | 西安未来鲜森智能信息技术有限公司 | 一种用于无人自动售货的商品识别系统 |
WO2019087792A1 (ja) * | 2017-10-30 | 2019-05-09 | パナソニックIpマネジメント株式会社 | 棚札検出装置、棚札検出方法、及び、棚札検出プログラム |
-
2020
- 2020-06-04 CN CN202010500741.1A patent/CN112052919A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3388999A1 (en) * | 2017-04-11 | 2018-10-17 | Pricer AB | Displaying further information about a product |
WO2019087792A1 (ja) * | 2017-10-30 | 2019-05-09 | パナソニックIpマネジメント株式会社 | 棚札検出装置、棚札検出方法、及び、棚札検出プログラム |
CN107871359A (zh) * | 2017-11-27 | 2018-04-03 | 无锡天任电子有限公司 | 一种格子柜自动售货机及其控制方法 |
CN208188867U (zh) * | 2018-06-01 | 2018-12-04 | 西安未来鲜森智能信息技术有限公司 | 一种用于无人自动售货的商品识别系统 |
CN108898141A (zh) * | 2018-06-14 | 2018-11-27 | 中山大学 | 基于图像检测的商品货架分割和层信息统计方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7565013B2 (en) | Character recognition method, method of processing correction history of character data, and character recognition system | |
US8958647B2 (en) | Registration determination device, control method and control program therefor, and electronic apparatus | |
US10891474B1 (en) | Optical receipt processing | |
JP6952094B2 (ja) | 画像処理装置及び画像処理方法 | |
CN110866443B (zh) | 人像存储方法、人脸识别方法、设备及存储介质 | |
US20200126253A1 (en) | Method of building object-recognizing model automatically | |
EP3723000A1 (en) | Object recognition system and object regognition method | |
CN104239873A (zh) | 图像处理装置及处理方法 | |
US20170024626A1 (en) | Image processing method | |
US11341739B2 (en) | Image processing device, image processing method, and program recording medium | |
US10740589B2 (en) | Skin information processing method, skin information processing device, and non-transitory computer-readable medium | |
JP2015046071A (ja) | 画像認識装置、画像認識方法及び画像認識プログラム | |
US20230229882A1 (en) | Hologram detection service providing server and hologram detection method | |
US20170270475A1 (en) | Method and a system for object recognition | |
CN110536274B (zh) | Nfc设备控制方法、装置、nfc设备和存储介质 | |
EP3751486A1 (en) | Electronic label management apparatus and method | |
US11508149B2 (en) | Operating method with goods information and non-transitory computer readable medium thereof | |
JP2018088116A (ja) | 情報処理装置、プログラム、情報処理方法 | |
EP3955196A1 (en) | Image recognition device, control program for image recognition device, and image recognition method | |
US10740590B2 (en) | Skin information processing method, skin information processing device, and non-transitory computer-readable medium | |
CN107992872B (zh) | 一种对图片进行文本识别的方法及移动终端 | |
CN112052919A (zh) | 具有货物信息的操作方法和其非暂时性计算机可读介质 | |
CN110298684B (zh) | 车型匹配方法、装置、计算机设备及存储介质 | |
CN112132054A (zh) | 一种基于深度学习的文档定位和分割方法 | |
CN113946257A (zh) | 操作集合的获取、执行方法及装置、存储介质和终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |