CN103886027A - 扫描可视区域获取物品信息的方法和电视 - Google Patents
扫描可视区域获取物品信息的方法和电视 Download PDFInfo
- Publication number
- CN103886027A CN103886027A CN201410067911.6A CN201410067911A CN103886027A CN 103886027 A CN103886027 A CN 103886027A CN 201410067911 A CN201410067911 A CN 201410067911A CN 103886027 A CN103886027 A CN 103886027A
- Authority
- CN
- China
- Prior art keywords
- information
- article
- scanning
- details
- viewing area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 230000000007 visual effect Effects 0.000 title abstract description 8
- 239000000284 extract Substances 0.000 claims description 6
- 230000010365 information processing Effects 0.000 claims description 5
- 238000004519 manufacturing process Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及智能家电,尤其涉及利用智能家电对可视区域物品信息的获取,目的是为了解决现有技术中,用户在对室内物品缺乏充分了解时,不能及时得到物品详细信息,或者是用户所希望了解的与该物品相类似的推荐物品的问题。本发明提供的扫描可视区域获取物品信息的方法,包括如下步骤:首先,设备通过摄像机对其可视区域的物品进行扫描,获取扫描信息,扫描信息为图片信息或视频信息;然后,根据扫描信息获取所述扫描信息内的物品信息,根据物品信息提取物品的特征信息,搜索并获取物品的详细信息;最后,将物品的详细信息告知用户。本发明还提供扫描可视区域获取物品信息的设备,本发明适用于智能家电。
Description
技术领域
本发明涉及智能家电,尤其涉及利用智能家电对可视区域物品信息的获取。
背景技术
随着信息技术的发展,各种家用电器设备更加智能化,通过电视上安装的摄像头,可以对室内所选择的场景进行拍摄或者录像,以达到保存所选择的场景信息的效果。此外,随着计算机搜索技术和图像处理技术的发展,可以根据图片内容来通过搜索引擎搜索出关于该与图片相关的详细信息。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:若用户想了解室内物品的相关推荐物品信息,在现有的技术中,未能根据所选择的场景,对用户的物品进行信息收集,提供给用户所希望了解的物品相类似的推荐物品,并且在用户对物品缺乏充分了解时也不能及时得到物品的详细信息。
发明内容
本发明的目的是为了解决现有技术中用户在对室内物品缺乏充分了解时,不能及时得到物品详细信息及不能得到用户所希望了解的物品相类似的推荐物品的问题。
为达到上述目的,本发明提供一种扫描可视区域获取物品信息的方法,包括如下步骤:
A.电视通过摄像头对其可视区域的物品进行扫描,获取扫描信息,所述扫描信息为图片信息或视频信息;
B.获取所述扫描信息内的物品信息,根据所述物品信息提取所述物品的特征信息,搜索并获取所述物品的详细信息;
C.将所述物品的详细信息告知用户。
进一步地,步骤A之前还包括:
建立样本库,所述样本库包含常见物品特征信息的分类器。
具体地,步骤B获取所述扫描信息内物品信息的具体方法为:
对所述扫描信息内的物品进行识别,计算所述扫描信息内的物品特征信息与样本库内所有分类器样本的特征信息的相似度,若所述物品特征信息与样本库内的某分类器样本的特征信息相匹配,则认为两者为同一物品,进而搜索并获取所述物品的详细信息。
具体地,步骤B中,所述搜索并获取所述物品的详细信息,是指利用图片搜索技术,从互联网上搜索并获取所述物品的详细信息。
具体地,所述物品的详细信息包括物品的产地信息、参数信息以及与所述物品参数相类似的其它物品信息。
具体地,步骤C将所述物品的详细信息告知用户的具体方法为:
对获取到的详细信息进行整理,将所述扫描信息里至少一个物品的详细信息告知用户。
本发明还提供一种扫描可视区域获取物品信息的电视,包括:
信息接收单元,用于获取电视通过摄像头对其可视区域的物品进行扫描的扫描信息,所述扫描信息为图片信息或视频信息;
第一信息处理单元,用于获取所述扫描信息内的物品的特征信息;
第二信息处理单元,用于提取所述物品的特征信息,搜索并获取所述物品的详细信息;
第三信息处理单元,用于将所述物品的详细信息告知用户。
进一步地,还包括存储模块,所述存储模块用于存储物品信息的样本库,所述样本库包含常见物品特征信息的分类器。
与现有技术相比,本发明实施例提供一种扫描可视区域获取物品信息的方法、设备的有益效果是:支持电视通过对可视区域进行扫描并获取物品信息,对用户的物品进行信息收集,提供给用户与希望了解的物品的详细信息及相类似的物品推荐信息,提高了用户体验性,便利性。
附图说明
图1为实施例一的扫描可视区域获取物品信息的方法的流程图。
图2为实施例二的扫描可视区域获取物品信息的电视的原理框图。
其中,101表示电视通过摄像机对其可视区域进行扫描,获取扫描信息;102表示获取扫描信息内的物品信息;103表示步骤103,提取物品的特征信息,搜索并获取物品的详细信息;104表示将物品的详细信息告知用户。
具体实施方式
下面结合附图及实施例对本发明的技术方案做进一步描述。
本发明提供的扫描可视区域获取物品信息的方法,包括如下步骤:首先,电视通过摄像头对其可视区域的物品进行扫描,获取扫描信息,所述扫描信息为图片信息或视频信息;然后,根据扫描信息获取所述扫描信息内的物品信息,根据所述物品信息提取所述物品的特征信息,搜索并获取所述物品的详细信息;最后,将所述物品的详细信息告知用户。
本发明提供的扫描可视区域获取物品信息的电视,包括信息接收单、第一信息处理单元、第二信息处理单元及第三信息处理单元。信息接收单元,用于获取电视通过摄像头对其可视区域的物品进行扫描的扫描信息,扫描信息为图片信息或视频信息;第一信息处理单元,用于获取扫描信息内的物品的特征信息;第二信息处理单元,用于提取物品的特征信息,搜索并获取物品的详细信息;第三信息处理单元,用于将物品的详细信息告知用户。
实施例一
图1示出了本发明的扫描可视区域获取物品信息的方法的具体流程如下。
步骤101,电视通过摄像头对其可视区域进行扫描,获取扫描信息,扫描信息为图片信息或视频信息;
电视应具备拍照摄像功能,包含摄像结构,摄像头可以是固定的,也可以是可以转动的,还应具备图片和视频信息存储功能。
可视扫描区域为摄像头的所能拍摄到的最大视角范围,扫描区域可以随着摄像头的转动而改变拍摄视角。
获取扫描信息,是将拍摄到的图片信息或视频信息进行存储,用于计算和分析。
步骤102,获取扫描信息内的物品信息;
这一步骤包括:
对所述扫描信息内的物品进行识别,计算所述扫描信息内的物品特征信息与样本库内所有分类器样本的特征信息的相似度,若所述物品特征信息与样本库内的某分类器样本的特征信息相匹配,则认为两者为同一物品,进而搜索并获取所述物品的详细信息。
对扫描信息内的物品进行扫描识别,这个扫描识别,是为了确定图片中物品的所在窗口位置,哪些地方存在有物品信息。可以通过对图片进行预处理,根据图片中颜色的反差、纹理及轮廓的描述等特征来判断哪些地方存在有物品,例如:可以通过背景差分法来提取一个照片中的物品所在位置,对这些物品所在位置进行窗口标识。再将窗口图片内的特征信息与样本库内所有的分类器都进行相似度计算。
具体地:建立样本库,样本库包含常见物品特征信息的分类器,样本库为储存样本标识的信息库,样本标识为常见的物品特征信息,分类器是针对每个常见的物品的特征信息而建立起的一种计算机程序,设计目的是在通过学习后,可自动将数据分到已知类别,使待分对象被划归某一类而使用的分类装置或数学模型;
物品的特征信息是指物品的纹理信息、颜色信息、角点信息、边缘信息、形状信息及光谱信息等,这些信息,是物品固有的特征标记,通过这些特征,可以有效地识别对应的物品。
需要说明的是,样本库为储存样本标识的信息库,这个信息库可以是以编码的形式存储在电视的存储模块上,也可以通过互联网/平台获得的。
物品特征信息与样本库内的某分类器样本的特征信息相匹配,是指若窗口内物品特征信息与样本库内某分类器的样本特征信息相似度达到所设定的阈值,则认为两者为同一物品,这个阈值是由算法自定义的,如物品的特征信息与样品库内的某分类器样本的特征信息相似度达到80%,即可认为是同一个物品,这个80%就是所设定的阈值,最后将这一物品信息进行存储标记,用于计算和分析;
如果扫描区域内物品特征信息与样本库内所有分类器的样本特征信息相似度低于所设定的阈值,则认为这个物品无法识别,并对用户进行信息提示,例如:“无法识别该物品”。
步骤103,提取物品的特征信息,搜索并获取物品的详细信息;
物品是指步骤102中认为与样本库中某样本物品相似度达到阈值的物品;
提取物品特征信息的方法有很多,包括SIFT描述子,指纹算法函数,bundling features算法,hash function(散列函数)等。也可以根据不同的图像,设计不同的算法,比如图像局部N阶矩的方法提取图像特征。
搜索并获取的物品的详细信息,包括:
将图像中物品的特征信息进行编码,并将海量图像编码做查找表。对于目标图像,可以对分辨率较大的图像进行降采样,减少运算量后在进行图像特征提取和编码处理。
相似度匹配运算,是指利用图像特征信息的编码值,在图像搜索引擎中的图像数据库进行全局或是局部的相似度计算;根据所需要的鲁棒性,设定阈值,然后将相似度高的图片预保留下来;最后应该还有一步筛选最佳匹配图片,这个可以用特征检测算法来进行计算。具体为:
根据具有物品特征信息的图片,可以通过已知图片的特征信息,比如图片中的颜色,图片中的图像边缘特征,形状信息以及这些特征信息的任何组合的编码值来搜索与该特征信息相匹配的图片。相匹配的含义,可以是指上述特征信息与搜索到的图片所包含的所有特征信息完全匹配一致,即搜索到的图片与搜索时所依据的图片完全相同,或者,也可以是指上述特征信息与搜索到的图片所包含的所有特征信息部分相匹配,即搜索到的图片与搜索时所依据的图片在一定程度上相似,最后还可以有一步筛选最佳匹配图片,选择出匹配度最高的图片。
在具体实施时,需要向图片搜索引擎服务器提供当前存储在电视存储设备的图片的地址信息,从而图片搜索引擎服务器从该地址信息指示的存储空间中读取图片,并从图片中解析出特征信息后,在互联网指定图片库中搜索与解析的特征信息匹配的图片,从而完成图片的搜索,获取所标识物品的详细信息。
所标识物品的详细信息包括物品的产地信息、参数信息及与物品参数相类似的物品信息。
步骤104,将物品的详细信息告知用户。
对获取到的详细信息进行整理,将所述扫描信息里至少一个物品的详细信息告知用户,具体操作包括:
对详细信息进行整理,可以是根据详细信息的标签、顺序进行整理,也可以是根据用户的使用频率,使用记录进行整理,整理成条目列表的形式,也可以整理成图片列表的形式。将这些信息告知用户的方式,可以是让用户根据这些信息进行主动选择进行浏览的方式,也可以通过将信息以自动推送的方式通知用户。例如,电视将整理好的物品的详细信息以图片的形式展现给用户,用户主动选择其中某一个或者几个的物品,去了解其感兴趣物品的详细信息。也可以这样进行,电视将整理好的物品详细信息,按用户或者系统自动设定的推送时间,定时将信息推送给用户查看。
需要说明的是,本发明实施例提供的方法,是要在电视与互联网成功连接的情况下进行的,电视与互联网之间连接的方式可以为有线或无线。
实施例二
本发明的一种扫描可视区域获取物品信息的设备,如图2所示,包括:
信息接收单元,用于获取设备通过摄像机对其可视区域的物品进行扫描的扫描信息,所述扫描信息为图片信息或视频信息,具体操作方式参见实施例一步骤101。
第一信息处理单元,用于获取扫描信息内的物品特征信息,具体操作方式参见实施例一步骤102。
第二信息处理单元,用于提取物品特征信息,搜索并获取的物品特征信息详细信息,具体实现方法参见实施例一步骤103。
第三信息处理单元,用于将物品的详细信息告知用户,具体实现方法参见实施例一步骤104。
需要说明的是,本发明实施例提供的方设备,是要在电视与互联网成功连接的情况下进行的。
本发明实施例提供的设备,支持电视通过对可视区域进行扫描并获取物品信息,对用户的物品进行信息收集,提供给用户与该物品的信息相类似的物品推荐信息,提高了用户体验性,便利性。
Claims (8)
1.扫描可视区域获取物品信息的方法,其特征在于,包括如下步骤:
A.电视通过摄像头对其可视区域的物品进行扫描,获取扫描信息,所述扫描信息为图片信息或视频信息;
B.获取所述扫描信息内的物品信息,根据所述物品信息提取所述物品的特征信息,搜索并获取所述物品的详细信息;
C.将所述物品的详细信息告知用户。
2.根据权利要求1所述的扫描可视区域获取物品信息的方法,其特征在于,步骤A之前还包括:
建立样本库,所述样本库包含常见物品特征信息的分类器。
3.根据权利要求2所述的扫描可视区域获取物品信息的方法,其特征在于,步骤B获取所述扫描信息内物品信息的具体方法为:
对所述扫描信息内的物品进行识别,计算所述扫描信息内的物品特征信息与样本库内所有分类器样本的特征信息的相似度,若所述物品特征信息与样本库内的某分类器样本的特征信息相匹配,则认为两者为同一物品,进而搜索并获取所述物品的详细信息。
4.根据权利要求1或3所述的扫描可视区域获取物品信息的方法,其特征在于,步骤B中,所述搜索并获取所述物品的详细信息,是指利用图片搜索技术,从互联网上搜索并获取所述物品的详细信息。
5.根据权利要求1或2或3所述的扫描可视区域获取物品信息的方法,其特征在于,所述物品的详细信息包括物品的产地信息、参数信息以及与所述物品参数相类似的其它物品信息。
6.根据权利要求1所述的扫描可视区域获取物品信息的方法,其特征在于,步骤C将所述物品的详细信息告知用户的具体方法为:
对获取到的详细信息进行整理,将所述扫描信息里至少一个物品的详细信息告知用户。
7.扫描可视区域获取物品信息的电视,其特征在于,包括:
信息接收单元,用于获取电视通过摄像头对其可视区域的物品进行扫描的扫描信息,所述扫描信息为图片信息或视频信息;
第一信息处理单元,用于获取所述扫描信息内的物品的特征信息;
第二信息处理单元,用于提取所述物品的特征信息,搜索并获取所述物品的详细信息;
第三信息处理单元,用于将所述物品的详细信息告知用户。
8.如权利要求7所述扫描可视区域获取物品信息的电视,其特征在于,还包括存储模块,所述存储模块用于存储物品信息的样本库,所述样本库包含常见物品特征信息的分类器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410067911.6A CN103886027A (zh) | 2014-02-26 | 2014-02-26 | 扫描可视区域获取物品信息的方法和电视 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410067911.6A CN103886027A (zh) | 2014-02-26 | 2014-02-26 | 扫描可视区域获取物品信息的方法和电视 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103886027A true CN103886027A (zh) | 2014-06-25 |
Family
ID=50954919
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410067911.6A Pending CN103886027A (zh) | 2014-02-26 | 2014-02-26 | 扫描可视区域获取物品信息的方法和电视 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103886027A (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105959561A (zh) * | 2016-06-13 | 2016-09-21 | Tcl集团股份有限公司 | 一种拍照方法及系统 |
CN106204558A (zh) * | 2016-06-30 | 2016-12-07 | 乐视控股(北京)有限公司 | 一种获取物品位置的方法及装置 |
CN106303595A (zh) * | 2016-08-17 | 2017-01-04 | 腾讯科技(深圳)有限公司 | 一种智能电视信息交互方法和智能电视 |
WO2017092345A1 (zh) * | 2015-12-04 | 2017-06-08 | 乐视控股(北京)有限公司 | 虚拟设备图像的显示方法及设备 |
CN106846104A (zh) * | 2017-01-12 | 2017-06-13 | 段元文 | 图像显示方法及装置 |
WO2018036456A1 (zh) * | 2016-08-22 | 2018-03-01 | 大辅科技(北京)有限公司 | 追踪识别视频图像中的商品并展示商品信息的方法和装置 |
CN109063570A (zh) * | 2018-07-04 | 2018-12-21 | 青岛海信智能商用系统股份有限公司 | 商品识别训练方法和系统 |
CN109917664A (zh) * | 2019-03-28 | 2019-06-21 | 淮阴师范学院 | 一种基于无线传感网络的家庭用管理系统 |
-
2014
- 2014-02-26 CN CN201410067911.6A patent/CN103886027A/zh active Pending
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017092345A1 (zh) * | 2015-12-04 | 2017-06-08 | 乐视控股(北京)有限公司 | 虚拟设备图像的显示方法及设备 |
CN105959561A (zh) * | 2016-06-13 | 2016-09-21 | Tcl集团股份有限公司 | 一种拍照方法及系统 |
CN106204558A (zh) * | 2016-06-30 | 2016-12-07 | 乐视控股(北京)有限公司 | 一种获取物品位置的方法及装置 |
CN106303595A (zh) * | 2016-08-17 | 2017-01-04 | 腾讯科技(深圳)有限公司 | 一种智能电视信息交互方法和智能电视 |
CN106303595B (zh) * | 2016-08-17 | 2020-02-21 | 腾讯科技(深圳)有限公司 | 一种智能电视信息交互方法和智能电视 |
WO2018036456A1 (zh) * | 2016-08-22 | 2018-03-01 | 大辅科技(北京)有限公司 | 追踪识别视频图像中的商品并展示商品信息的方法和装置 |
CN106846104A (zh) * | 2017-01-12 | 2017-06-13 | 段元文 | 图像显示方法及装置 |
CN109063570A (zh) * | 2018-07-04 | 2018-12-21 | 青岛海信智能商用系统股份有限公司 | 商品识别训练方法和系统 |
CN109917664A (zh) * | 2019-03-28 | 2019-06-21 | 淮阴师范学院 | 一种基于无线传感网络的家庭用管理系统 |
CN109917664B (zh) * | 2019-03-28 | 2020-01-24 | 淮阴师范学院 | 一种基于无线传感网络的家庭用管理系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103886027A (zh) | 扫描可视区域获取物品信息的方法和电视 | |
US9367756B2 (en) | Selection of representative images | |
Chen et al. | Building book inventories using smartphones | |
CN110909825B (zh) | 使用概率模型在视觉数据中检测对象 | |
US9076076B1 (en) | Image similarity determination | |
CN108288012B (zh) | 一种基于手机实现的艺术品备案验证方法及其系统 | |
EP2639745A1 (en) | Object identification in images or image sequences | |
US20190188451A1 (en) | Lightweight 3D Vision Camera with Intelligent Segmentation Engine for Machine Vision and Auto Identification | |
JP2007206919A (ja) | 表示制御装置および方法、プログラム、並びに記録媒体 | |
CN102713938A (zh) | 用于均匀和非均匀照明变化中的改善的特征检测的尺度空间正规化技术 | |
US20170200068A1 (en) | Method and a System for Object Recognition | |
US11003963B2 (en) | Method and system for identifying targets in scenes shot by a camera | |
KR20130028734A (ko) | 얼굴 검출을 위한 방법 및 장치 | |
CN104951440B (zh) | 一种图像处理方法及电子设备 | |
CN103428537A (zh) | 一种视频处理方法和装置 | |
CN110969047A (zh) | 识别食材的方法、装置和冰箱 | |
CN112465517A (zh) | 防伪验证方法、装置及计算机可读存储介质 | |
CN112000024A (zh) | 用于控制家电设备的方法及装置、设备 | |
CN107203638B (zh) | 监控视频处理方法、装置及系统 | |
US10402777B2 (en) | Method and a system for object recognition | |
JP2017010549A (ja) | ライトフィールドデータベースでのデータ取り出しのための方法及び装置 | |
CN103763480A (zh) | 获取视频配音的方法及设备 | |
CN109711287B (zh) | 人脸采集方法及相关产品 | |
CN106557523B (zh) | 代表性图像选择方法和设备以及对象图像检索方法和设备 | |
JP7357708B2 (ja) | 画像照合システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140625 |