CN109409244B - 一种物体摆放方案的输出方法和移动终端 - Google Patents
一种物体摆放方案的输出方法和移动终端 Download PDFInfo
- Publication number
- CN109409244B CN109409244B CN201811152280.2A CN201811152280A CN109409244B CN 109409244 B CN109409244 B CN 109409244B CN 201811152280 A CN201811152280 A CN 201811152280A CN 109409244 B CN109409244 B CN 109409244B
- Authority
- CN
- China
- Prior art keywords
- information
- objects
- target space
- determining
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Telephone Function (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种物体摆放方案的输出方法和移动终端,所述方法包括:获取目标空间场景的图像信息;基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息、以及所述多个物体的尺寸信息;基于所述类别信息、所述空间坐标信息、所述尺寸信息以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息。通过本发明,能够为用户提供至少一种目标空间场景的物体摆放方案。
Description
技术领域
本发明涉及终端领域,尤其涉及一种物体摆放方案的输出方法和移动终端。
背景技术
随着设备的发展,每个人都会购买或拥有很多私人物品,但是绝大多数个人拥有的存放物品的空间却并不是很多。当个人拥有的私人物品很多时,大多数情况下并不知道如何较好地对私人物品进行整理,才能按照个人需求对物品进行摆放,例如,按照占用空间较小摆放物品、或按照美观性摆放物品,而且绝大部分人都有一定的惰性,并不会较好地对自己的物品进行收拾和整理,久而久之,个人拥有的有效空间就会被大量物品占用,从而个人的空间容易拥挤且散乱,给人不美观且邋遢的感觉。另一方面,在绝大多数条件下,人们仅凭肉眼判断很难较快地将物品按照自身需求摆放到位。
发明内容
本发明实施例提供一种物体摆放方案的输出方法和移动终端,以解决现有技术中用户无法快速地按照个人需求对目标空间场景的物品进行摆放的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,提供了一种物体摆放方案的输出方法,包括:
获取目标空间场景的图像信息;
基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息。
第二方面,提供了一种移动终端,包括:
获取模块,用于获取目标空间场景的图像信息;
确定模块,用于基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
输出模块,用于基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息。
第三方面,提供了一种移动终端,该移动终端包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的方法的步骤。
在本发明实施例中,通过获取目标空间场景的图像信息,基于获取的图像信息确定位于目标空间场景中的多个物体的类别信息、多个物体的空间坐标信息以及多个物体的尺寸信息,并基于多个物体的类别信息、多个物体的空间坐标信息、多个物体的尺寸信息和多个物体之间的关联信息,输出至少一种物体摆放方案,用户可以根据个人需求从输出的至少一种物体摆放方案选择一种物体摆放方案对目标空间场景的物体进行摆放,用户不用花费时间判断如何摆放物品,减少了用户摆放物品所花费的时间。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明的一个实施例提供的物体摆放方案的输出方法;
图2是本发明的一个实施例提供的移动终端的结构示意图;
图3是实现本发明各个实施例的一种移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是本发明的一个实施例提供的物体摆放方案的输出方法。如图1所示,物体摆放方案的输出方法可以包括以下步骤:
步骤101、获取目标空间场景的图像信息。
其中,图像信息用于描述目标空间场景。
图像信息包括可以识别目标空间场景包括的多个物体、多个物体的空间坐标信息、多个物体的尺寸信息的信息,示例性的,图像信息包括可以描述目标空间场景的三维图像信息,例如,多张不同角度的图像。
具体的,图像信息可以为双摄像头扫描目标空间场景获得的图像。
示例性的,目标空间场景可以为卧室、书房等。
步骤102、基于图像信息,确定位于目标空间场景中的多个物体的类别信息、多个物体在目标空间场景中的空间坐标信息、以及多个物体的尺寸信息。
其中,类别信息用于描述物体,类别信息可以包括:物体的名称、物体的类别等。
其中,空间坐标信息用于表示物体在目标空间场景中所处的位置,空间坐标信息具体为三维坐标信息。
步骤103、基于类别信息、空间坐标信息、尺寸信息以及多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:多个物体在目标空间场景的摆放位置信息。
其中,物体之间的关联信息用于表示物体之间的摆放关联关系,例如,桌子和书具有位置关联关系、桌子和矿泉水瓶具有位置关联关系、墙角和桌子具有位置关联关系。
具体的,物体之间的位置关联关系可以通过预先设置的关联关系表确定,该关联关系表可以由设计人员根据场景的种类进行设定,例如办公场景,可以设定书和桌子具有位置关联关系等,例如超市场景,可以设定书和货架具有位置关联关系等。当分析得出某一办公场景中同时具有书和桌子时,可以确定书和桌子的位置关联关系,以表征书可以与桌子放置在一起。
上述场景的种类可以是根据目标图像信息确定的,也可以是响应于用户的选择确定的,在不同种类的场景中,至少部分物体之间的关联信息是不同的。
具体的,可以通过文本、图片或视频的方式输出至少一种物体摆放方案。
本实施例,通过获取目标空间场景的图像信息,基于获取的图像信息确定位于目标空间场景中的多个物体的类别信息、多个物体的空间坐标信息以及多个物体的尺寸信息,并基于多个物体的类别信息、多个物体的空间坐标信息、多个物体的尺寸信息和多个物体之间的关联信息,输出至少一种物体摆放方案,用户可以根据个人需求从输出的至少一种物体摆放方案选择一种物体摆放方案对目标空间场景的物体进行摆放,用户不用花费时间判断如何摆放物品,减少了用户摆放物品所花费的时间。
在本发明的一实施方式中,步骤103可以包括:
基于类别信息、空间坐标信息、尺寸信息以及多个物体之间的关联信息,确定多种物体摆放方案,对多种物体摆放方案的空间占用面积按照从小到大的顺序进行排序,输出排序在前的一种或多种物体摆放方案。如此,可以使得提供给用户的物体摆放方案的空间占用面积较优,保证对空间有效且合理地利用。
在本发明的一实施方式中,上述步骤102包括:
根据图像信息,确定深度信息;
根据图像信息进行物体识别,确定类别信息和多个物体在目标空间场景中的二维坐标信息;
根据二维坐标信息和深度信息,确定空间坐标信息和尺寸信息。
其中,深度信息包含图像中的像素点的深度数值。
本实施例,结合物体识别技术确定类别信息、空间坐标信息和尺寸信息,能够方便且快速地得到类别信息、空间坐标信息和尺寸信息。
在本发明的另一实施方式中,上述步骤102包括:
根据图像信息确定景深(Depth of Field,DOF)图像;
基于景深图像,确定目标空间场景中包括的多个物体的类别信息、多个物体在目标空间场景中的空间坐标信息以及多个物体的尺寸信息。
本实施例,基于已知的DOF技术确定类别信息、空间坐标信息和尺寸信息,能够方便地基于图像信息确定目标空间场景中包括的多个物体的类别信息、多个物体的空间坐标信息以及多个物体的尺寸信息。
在本发明的一实施方式中,上述根据图像信息进行物体识别,确定类别信息和多个物体在目标空间场景中的二维坐标信息,包括:
利用物体检测(Object Detection)算法对图像信息进行物体识别,确定类别信息和二维坐标信息。
本实施例,基于已知的深度学习中的物体检测算法进行物体识别,能够方便且快速地对物体进行识别且保证物体识别的准确性。
在本发明的一实施方式中,在步骤103之前,还可以包括:
根据类别信息,确定多个物体之间的关联信息。
本实施例,基于类别信息确定多个物体之间的关联信息,因类别信息能够确定物体之间的位置关联关系,进而能够方便地确定多个物体之间的关联信息。
在本发明的一实施方式中,上述根据类别信息,确定多个物体之间的关联信息,包括:
利用场景分析算法对多个物体的类别信息进行分析;
根据分析出的多个物体的类别,确定物体之间的关联信息。
具体的,场景分析算法可以为:关系网络(Relation Networks,RNs)算法。
本实施例,基于已知的场景分析算法确定物体之间的关联信息,能够方便且快速地确定多个物体之间的关联信息。
在本发明的一实施方式中,上述步骤103,包括:
基于类别信息、空间坐标信息、尺寸信息以及关联信息,建立物体模型;
基于物体模型,进行训练,并根据训练结果输出至少一种物体摆放推荐方案。
本实施例,通过建立物体模型,能够重构出与真实物体相似的三维图像,基于此物体模型模拟摆放多个物体来进行训练,并根据训练结果提供物体摆放推荐方案,能够更为快速且方便地确定并提供物体摆放推荐方案。
在本发明的一实施方式中,上述步骤101,包括:
利用摄像头扫描目标空间场景,获取目标空间场景的图像信息。
本实施例,直接利用摄像头扫描目标空间场景,能够方便且快速地获取目标空间场景的图像信息。
在本发明的另一实施方式中,上述步骤101,包括:
接收另一移动终端发送的目标空间场景的图像信息。
本实施例,可以对另一移动终端发送的图像信息进行分析,可以为另一移动终端拍摄的目标空间场景提供物体摆放方案。
在本发明的一实施方式中,上述物体摆放方案还可以包括:多个物体在目标空间场景的摆放顺序信息。
本实施例,物体摆放方案不仅包括摆放位置信息,还包括摆放顺序信息,使得用户在得到物体摆放方案后,不用判断摆放顺序,进一步减少了用户摆放物品所花费的时间。
图2是本发明的一个实施例提供的移动终端的结构示意图。如图2所示,移动终端包括:
获取模块21,用于获取目标空间场景的图像信息;
确定模块22,用于基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
输出模块23,用于基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息。
在本发明的一实施方式中,所述确定模块22,具体用于:
根据所述图像信息,确定深度信息;
根据所述图像信息进行物体识别,确定所述类别信息和所述多个物体在所述目标空间场景中的二维坐标信息;
根据所述二维坐标信息和所述深度信息,确定所述空间坐标信息和所述尺寸信息。
在本发明的一实施方式中,所述确定模块22,具体用于:
利用物体检测算法对所述图像信息进行物体识别,确定所述类别信息和所述二维坐标信息。
在本发明的一实施方式中,所述确定模块22,还用于:
根据所述类别信息,确定所述多个物体之间的所述关联信息。
在本发明的一实施方式中,所述确定模块22,具体用于:
利用场景分析算法对所述多个物体的所述类别信息进行分析;
根据分析出的所述多个物体的类别,确定所述多个物体之间的所述关联信息。
在本发明的一实施方式中,所述输出模块23,具体用于:
基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述关联信息,建立物体模型;
基于所述物体模型,进行训练,并根据训练结果输出所述至少一种物体摆放推荐方案。
在本发明的一实施方式中,所述获取模块21,具体用于:
利用摄像头扫描所述目标空间场景,获取所述目标空间场景的所述图像信息。
在本发明的一实施方式中,所述物体摆放方案还包括:所述多个物体在所述目标空间场景的摆放顺序信息。
本发明实施例提供的移动终端能够实现图1的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。本发明提供的移动终端,通过获取目标空间场景的图像信息,基于获取的图像信息确定位于目标空间场景中的多个物体的类别信息、多个物体的空间坐标信息以及多个物体的尺寸信息,并基于多个物体的类别信息、多个物体的空间坐标信息、多个物体的尺寸信息和多个物体之间的关联信息,输出至少一种物体摆放方案,用户可以根据个人需求从输出的至少一种物体摆放方案选择一种物体摆放方案对目标空间场景的物体进行摆放,用户不用花费时间判断如何摆放物品,减少了用户摆放物品所花费的时间。
图3是实现本发明各个实施例的一种移动终端的硬件结构示意图,该移动终端300包括但不限于:射频单元301、网络模块302、音频输出单元303、输入单元304、传感器305、显示单元306、用户输入单元307、接口单元308、存储器309、处理器310、以及电源311等部件。本领域技术人员可以理解,图3中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器310,用于:
获取目标空间场景的图像信息;
基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息。
本发明提供的移动终端,通过获取目标空间场景的图像信息,基于获取的图像信息确定位于目标空间场景中的多个物体的类别信息、多个物体的空间坐标信息以及多个物体的尺寸信息,并基于多个物体的类别信息、多个物体的空间坐标信息、多个物体的尺寸信息和多个物体之间的关联信息,输出至少一种物体摆放方案,用户可以根据个人需求从输出的至少一种物体摆放方案选择一种物体摆放方案对目标空间场景的物体进行摆放,用户不用花费时间判断如何摆放物品,减少了用户摆放物品所花费的时间。
应理解的是,本发明实施例中,射频单元301可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器310处理;另外,将上行的数据发送给基站。通常,射频单元301包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元301还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块302为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元303可以将射频单元301或网络模块302接收的或者在存储器309中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元303还可以提供与移动终端300执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元303包括扬声器、蜂鸣器以及受话器等。
输入单元304用于接收音频或视频信号。输入单元304可以包括图形处理器(Graphics Processing Unit,GPU)3041和麦克风3042,图形处理器3041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元306上。经图形处理器3041处理后的图像帧可以存储在存储器309(或其它存储介质)中或者经由射频单元301或网络模块302进行发送。麦克风3042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元301发送到移动通信基站的格式输出。
移动终端300还包括至少一种传感器305,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板3061的亮度,接近传感器可在移动终端300移动到耳边时,关闭显示面板3061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器305还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元306用于显示由用户输入的信息或提供给用户的信息。显示单元306可包括显示面板3061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板3061。
用户输入单元307可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元307包括触控面板3071以及其他输入设备3072。触控面板3071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板3071上或在触控面板3071附近的操作)。触控面板3071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器310,接收处理器310发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板3071。除了触控面板3071,用户输入单元307还可以包括其他输入设备3072。具体地,其他输入设备3072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板3071可覆盖在显示面板3061上,当触控面板3071检测到在其上或附近的触摸操作后,传送给处理器310以确定触摸事件的类型,随后处理器310根据触摸事件的类型在显示面板3061上提供相应的视觉输出。虽然在图3中,触控面板3071与显示面板3061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板3071与显示面板3061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元308为外部装置与移动终端300连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元308可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端300内的一个或多个元件或者可以用于在移动终端300和外部装置之间传输数据。
存储器309可用于存储软件程序以及各种数据。存储器309可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器309可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器310是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器309内的软件程序和/或模块,以及调用存储在存储器309内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器310可包括一个或多个处理单元;优选的,处理器310可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器310中。
移动终端300还可以包括给各个部件供电的电源311(比如电池),优选的,电源311可以通过电源管理系统与处理器310逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端300包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器310,存储器309,存储在存储器309上并可在所述处理器310上运行的计算机程序,该计算机程序被处理器310执行时实现上述物体摆放方案的输出方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述物体摆放方案的输出方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (10)
1.一种物体摆放方案的输出方法,其特征在于,包括:
获取目标空间场景的图像信息;
基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息;
其中,所述基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息,包括:
根据所述图像信息,确定深度信息;
根据所述图像信息进行物体识别,确定所述类别信息和所述多个物体在所述目标空间场景中的二维坐标信息;
根据所述二维坐标信息和所述深度信息,确定所述空间坐标信息和所述尺寸信息。
2.如权利要求1所述的方法,其特征在于,所述根据所述图像信息进行物体识别,确定所述类别信息和所述多个物体在所述目标空间场景中的二维坐标信息,包括:
利用物体检测算法对所述图像信息进行物体识别,确定所述类别信息和所述二维坐标信息。
3.如权利要求1所述的方法,其特征在于,所述基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案之前,还包括:
根据所述类别信息,确定所述多个物体之间的所述关联信息。
4.如权利要求3所述的方法,其特征在于,所述根据所述类别信息,确定所述多个物体之间的所述关联信息,包括:
利用场景分析算法对所述多个物体的所述类别信息进行分析;
根据分析出的所述多个物体的类别,确定所述多个物体之间的所述关联信息。
5.如权利要求1所述的方法,其特征在于,所述基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,包括:
基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述关联信息,建立物体模型;
基于所述物体模型,进行训练,并根据训练结果输出所述至少一种物体摆放推荐方案。
6.如权利要求1所述的方法,其特征在于,获取目标空间场景的图像信息,包括:
利用摄像头扫描所述目标空间场景,获取所述目标空间场景的所述图像信息。
7.如权利要求1所述的方法,其特征在于,所述物体摆放方案还包括:所述多个物体在所述目标空间场景的摆放顺序信息。
8.一种移动终端,其特征在于,包括:
获取模块,用于获取目标空间场景的图像信息;
确定模块,用于基于所述图像信息,确定位于所述目标空间场景中的多个物体的类别信息、所述多个物体在所述目标空间场景中的空间坐标信息,以及所述多个物体的尺寸信息;
输出模块,用于基于所述类别信息、所述空间坐标信息、所述尺寸信息,以及所述多个物体之间的关联信息,输出至少一种物体摆放方案,所述物体摆放方案包括:所述多个物体在所述目标空间场景的摆放位置信息;
其中,所述确定模块,具体用于:
根据所述图像信息,确定深度信息;
根据所述图像信息进行物体识别,确定所述类别信息和所述多个物体在所述目标空间场景中的二维坐标信息;
根据所述二维坐标信息和所述深度信息,确定所述空间坐标信息和所述尺寸信息。
9.一种移动终端,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811152280.2A CN109409244B (zh) | 2018-09-29 | 2018-09-29 | 一种物体摆放方案的输出方法和移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811152280.2A CN109409244B (zh) | 2018-09-29 | 2018-09-29 | 一种物体摆放方案的输出方法和移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109409244A CN109409244A (zh) | 2019-03-01 |
CN109409244B true CN109409244B (zh) | 2021-03-09 |
Family
ID=65466580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811152280.2A Active CN109409244B (zh) | 2018-09-29 | 2018-09-29 | 一种物体摆放方案的输出方法和移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109409244B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110473002A (zh) * | 2019-07-24 | 2019-11-19 | 苏州佳世达电通有限公司 | 提供物品摆放建议的系统及方法 |
CN110851902B (zh) * | 2019-11-06 | 2023-04-07 | 广东博智林机器人有限公司 | 一种空间排布方案的生成方法及装置 |
CN110826511B (zh) * | 2019-11-12 | 2020-11-27 | 云和县新马玩具有限公司 | 儿童房屋拥挤检测系统及方法 |
CN111079032A (zh) * | 2019-11-20 | 2020-04-28 | 维沃移动通信有限公司 | 一种推荐信息的方法和电子设备 |
CN111862350B (zh) * | 2020-07-16 | 2021-08-24 | 中国科学院深圳先进技术研究院 | 一种在线装箱方法、终端及存储介质 |
CN111882270B (zh) * | 2020-07-16 | 2024-01-05 | 中国科学院深圳先进技术研究院 | 一种在线装箱方法、终端及存储介质 |
CN112380991A (zh) * | 2020-11-13 | 2021-02-19 | 贝壳技术有限公司 | 物品模型的放置方法和装置、存储介质、电子设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5570462A (en) * | 1995-05-05 | 1996-10-29 | Apple Computer, Inc. | System and method for object placement and sizing in a dynamic display environment |
CN101140639A (zh) * | 2006-09-06 | 2008-03-12 | 张斌 | 在一定尺寸三维空间内摆放最多物品的方法 |
CN101308018A (zh) * | 2008-05-30 | 2008-11-19 | 汤一平 | 基于双目全方位视觉传感器的立体视觉测量装置 |
US9230339B2 (en) * | 2013-01-07 | 2016-01-05 | Wexenergy Innovations Llc | System and method of measuring distances related to an object |
CN105677728A (zh) * | 2015-12-28 | 2016-06-15 | 广东正美家具科技有限公司 | 物体图像识别分类管理方法 |
US9514381B1 (en) * | 2013-03-15 | 2016-12-06 | Pandoodle Corporation | Method of identifying and replacing an object or area in a digital image with another object or area |
CN107748890A (zh) * | 2017-09-11 | 2018-03-02 | 汕头大学 | 一种基于深度图像的视觉抓取方法、装置及其可读存储介质 |
CN108320333A (zh) * | 2017-12-29 | 2018-07-24 | 中国银联股份有限公司 | 场景适应型虚拟现实转换设备和虚拟现实的场景适应方法 |
CN108549870A (zh) * | 2018-04-16 | 2018-09-18 | 图麟信息科技(深圳)有限公司 | 一种对物品陈列进行鉴别的方法及装置 |
CN108596009A (zh) * | 2017-12-29 | 2018-09-28 | 西安智加科技有限公司 | 一种用于农机自动驾驶的障碍物检测方法和系统 |
-
2018
- 2018-09-29 CN CN201811152280.2A patent/CN109409244B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5570462A (en) * | 1995-05-05 | 1996-10-29 | Apple Computer, Inc. | System and method for object placement and sizing in a dynamic display environment |
CN101140639A (zh) * | 2006-09-06 | 2008-03-12 | 张斌 | 在一定尺寸三维空间内摆放最多物品的方法 |
CN101308018A (zh) * | 2008-05-30 | 2008-11-19 | 汤一平 | 基于双目全方位视觉传感器的立体视觉测量装置 |
US9230339B2 (en) * | 2013-01-07 | 2016-01-05 | Wexenergy Innovations Llc | System and method of measuring distances related to an object |
US9514381B1 (en) * | 2013-03-15 | 2016-12-06 | Pandoodle Corporation | Method of identifying and replacing an object or area in a digital image with another object or area |
CN105677728A (zh) * | 2015-12-28 | 2016-06-15 | 广东正美家具科技有限公司 | 物体图像识别分类管理方法 |
CN107748890A (zh) * | 2017-09-11 | 2018-03-02 | 汕头大学 | 一种基于深度图像的视觉抓取方法、装置及其可读存储介质 |
CN108320333A (zh) * | 2017-12-29 | 2018-07-24 | 中国银联股份有限公司 | 场景适应型虚拟现实转换设备和虚拟现实的场景适应方法 |
CN108596009A (zh) * | 2017-12-29 | 2018-09-28 | 西安智加科技有限公司 | 一种用于农机自动驾驶的障碍物检测方法和系统 |
CN108549870A (zh) * | 2018-04-16 | 2018-09-18 | 图麟信息科技(深圳)有限公司 | 一种对物品陈列进行鉴别的方法及装置 |
Non-Patent Citations (2)
Title |
---|
Interactive Occlusion and Automatic Object Placement for Augmented Reality;David E.Breen等;《computer graphics forum》;19960831;全文 * |
基于多图像传感器的室内定位系统的研究;刘广新;《中国优秀硕士学位论文全文数据库(信息科技辑)》;20120415;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN109409244A (zh) | 2019-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109409244B (zh) | 一种物体摆放方案的输出方法和移动终端 | |
CN109151180B (zh) | 一种对象识别方法及移动终端 | |
CN107846352B (zh) | 一种信息显示方法、移动终端 | |
CN109240577B (zh) | 一种截屏方法及终端 | |
CN109005336B (zh) | 一种图像拍摄方法及终端设备 | |
CN108683850B (zh) | 一种拍摄提示方法及移动终端 | |
CN109523253B (zh) | 一种支付方法和装置 | |
CN110866038A (zh) | 信息推荐方法及终端设备 | |
CN108460817B (zh) | 一种拼图方法及移动终端 | |
CN109618218B (zh) | 一种视频处理方法及移动终端 | |
CN109544172B (zh) | 一种显示方法及终端设备 | |
CN110795002A (zh) | 一种截图方法及终端设备 | |
CN111401463A (zh) | 检测结果输出的方法、电子设备及介质 | |
CN108196781B (zh) | 界面的显示方法和移动终端 | |
CN109472825B (zh) | 一种对象搜索方法及终端设备 | |
CN109166164B (zh) | 一种表情图片的生成方法及终端 | |
CN108762621B (zh) | 一种消息显示方法及移动终端 | |
CN108093119B (zh) | 一种陌生来电号码的标记方法及移动终端 | |
CN107886303B (zh) | 一种日程分享处理方法、服务器及移动终端 | |
CN109491572B (zh) | 一种移动终端的截屏方法及移动终端 | |
CN111079032A (zh) | 一种推荐信息的方法和电子设备 | |
CN109189735B (zh) | 一种预览图像显示方法、移动终端 | |
CN107844203B (zh) | 一种输入法候选词推荐方法及移动终端 | |
CN109189517B (zh) | 一种显示切换的方法及移动终端 | |
CN108509126B (zh) | 一种图片处理方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |