CN112734947B - 在vr房屋中进行3d内容投放方法及装置 - Google Patents
在vr房屋中进行3d内容投放方法及装置 Download PDFInfo
- Publication number
- CN112734947B CN112734947B CN202011592885.0A CN202011592885A CN112734947B CN 112734947 B CN112734947 B CN 112734947B CN 202011592885 A CN202011592885 A CN 202011592885A CN 112734947 B CN112734947 B CN 112734947B
- Authority
- CN
- China
- Prior art keywords
- base surface
- house
- determining
- space
- category attribute
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/16—Real estate
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Architecture (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例提供了一种在VR房屋中进行3D内容投放方法及装置，包括：基于虚拟三维模型通过平面识别算法确定VR房屋中能够进行3D内容投放的投放基础面；基于全景图像通过物体识别算法确定VR房屋中物体的类别属性；基于标记了类别属性的投放基础面确定VR房屋中与投放基础面对应的投放空间，并在投放空间中进行3D内容投放展示。本实施例提供的3D内容投放空间都是经过平面识别算法和物体识别算法在VR房屋中跑出来的，从而自动在VR房屋中投放3D内容，并且无需人为在3D地图中策划固定的投放位置。
Description
技术领域
本发明涉及VR全景技术领域，尤其涉及一种在VR房屋中进行3D内容投放方法及装置。
背景技术
VR技术即虚拟现实技术，虚拟现实是多媒体技术的终极应用形式，它是计算机软硬件技术、传感技术、机器人技术、人工智能及行为心理学等科学领域飞速发展的结晶；其主要依赖于三维实时图形显示、三维定位跟踪、触觉及嗅觉传感技术、人工智能技术、高速计算与并行计算技术以及人的行为学研究等多项关键技术的发展；VR全景是基于3D全景和VR(虚拟现实)技术等高新技术的发展，以虚拟现实场景界面的形式直观表现现实场地的景观及设施，并可上传到互联网提供远程用户访问和虚拟漫游；随着虚拟现实技术的发展，真正地实现虚拟现实，将引起整个人类生活与发展的很大变革；但是：传统的广告投放方式存在诸多不足，如广告投放过于单一不能吸引消费者注意，对于投放位置无法提供与空间相关的筛选条件，需要人为在3D地图中策划固定的投放位置等等。
发明内容
针对现有技术中存在的问题，本发明实施例提供一种在VR房屋中进行3D内容投放方法及装置。
第一方面，本发明实施例提供一种在VR房屋中进行3D内容投放方法，包括：
获取VR房屋的全景图像和虚拟三维模型；
基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；
基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；
将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；
基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；
在所述投放空间中进行3D内容投放展示。
进一步地，还包括：
为所述投放基础面对应的投放空间添加房屋属性；其中，所述房屋根据房屋数据库确定，所述房屋数据库存储有房屋信息；
基于所述房屋属性在所述投放空间中进行3D内容投放展示。
进一步地，将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性，具体包括：
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中占比最大的物体对应的类别属性；
将所述占比最大的物体对应的类别属性，作为所述投放基础面的类别属性；
和/或，
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中超过占比预设阈值的物体对应的类别属性；
将所述超过占比预设阈值的物体对应的类别属性，作为所述投放基础面的类别属性。
进一步地，所述基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间，具体包括：
在所述基于标记了类别属性的投放基础面上设置虚拟投放空间，梯度依次增大所述虚拟投放空间直到所述虚拟投放空间与虚拟三维模型中的物体发生接触，将此时的虚拟投放空间作为与所述投放基础面对应的投放空间，并确定所述投放空间的体积。
进一步地，基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间之前，还包括：
根据所述投放基础面对应的法向量朝向，得到与第一目标朝向对应的第一投放基础面和与第二目标朝向对应的第二投放基础面；
相应地，基于所述第一投放基础面和所述第二投放基础面确定VR房屋中与所述第一投放基础面对应的第一投放空间和与所述第二投放基础面对应的第二投放空间；
在所述第一投放空间和所述第二投放空间进行3D内容投放展示。
进一步地，所述房屋属性包括可见点位属性；其中，可见点位为从所述房屋的原始点位向所述投放基础面发出射线，在所述射线接触所述投放基础面前若不与所述全景图像中识别出的物体发生接触，则将所述原始点位确定为可见点位；
根据可见点位个数确定VR房屋中优质投放空间。
进一步地，还包括：
根据点位热度，投放空间热度，用户潜力行为，用户停留时长中的至少一项触发3D内容投放展示。
第二方面，本发明实施例提供了一种在VR房屋中进行3D内容投放装置，包括：
获取模块，用于获取VR房屋的全景图像和虚拟三维模型；
第一确定模块，用于基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；
第二确定模块，用于基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；
第三确定模块，用于将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；
第四确定模块，用于基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；
投放模块，用于在所述投放空间中进行3D内容投放展示。
第三方面，本发明实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上第一方面所述的在VR房屋中进行3D内容投放方法的步骤。
第四方面，本发明实施例还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上第一方面所述的在VR房屋中进行3D内容投放方法的步骤。
由上述技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法及装置，通过获取VR房屋的全景图像和虚拟三维模型；基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；在所述投放空间中进行3D内容投放展示。可见本发明提供的3D内容投放空间是经过平面识别算法和物体识别算法在VR房屋中跑出来的，从而自动在VR房屋中投放3D内容，并且无需人为在3D地图中策划固定的投放位置。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的在VR房屋中进行3D内容投放方法的流程示意图；
图2为本发明一实施例提供的全景图像的示意图；
图3为本发明一实施例提供的虚拟三维模型的示意图；
图4为本发明一实施例提供的投放基础面的示意图；
图5为本发明另一实施例提供的全景图像的示意图；
图6为本发明另一实施例提供的物体投射到投放基础面的示意图；
图7为本发明另一实施例提供的与投放基础面对应的投放空间的示意图；
图8为本发明另一实施例提供的确定3D内容位的示意图；
图9为本发明另一实施例提供的确定3D内容投放展示的示意图；
图10为本发明另一实施例提供的确定3D内容投放展示的示意图；
图11为本发明另一实施例提供的确定3D内容投放展示的示意图；
图12为本发明另一实施例提供的确定3D内容投放展示的流程示意图；
图13为本发明一实施例提供的在VR房屋中进行3D内容投放装置的结构示意图；
图14为本发明一实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。下面将通过具体的实施例对本发明提供的在VR房屋中进行3D内容投放方法进行详细解释和说明。
图1为本发明一实施例提供的在VR房屋中进行3D内容投放方法的流程示意图；如图1所示，该方法包括：
步骤101：获取VR房屋的全景图像和虚拟三维模型。
在本步骤中，需要说明的是，获取摄影设备在房屋各原始点位拍摄的VR房屋的全景图像，全景图像如图2所示；获取摄影设备在房屋各拍摄点云生成的虚拟三维模型，虚拟三维模型如图3所示；其中，虚拟三维模型还可以根据全景图像推导出来。
在本步骤中，针对虚拟三维模型需要说明的是，虚拟三维空间模型是指VR三维空间模型，该VR三维空间模型通过下面方式建立得到：对房屋进行多点多角度的扫描拍摄，得到完整的三维点云数据、经纬度数据以及多曝光的高清彩色照片，后期通过自动建模、智能空洞填补、全自动数据提取和HDR优化三维重建技术，将全部数据及图片纹理映射到三维模型上，得到最终用户看到的真实房屋空间；其中，VR看房是指利用VR技术真实还原出房屋三维场景，提供自由模式下的沉浸式看房体验；通过打开APP上的VR房屋，触摸屏幕任意处即可获得包括房屋真实空间信息。
步骤102：基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面。
在本步骤中，需要说明的是，通过平面识别算法算出虚拟三维模型中的面，可以是水平的面，可以是垂直面，可以是具有一定坡度的面，在此不做限定，根据业务的需求进行设置；举例来说，如图4所示，VR房屋中能够进行3D内容投放的投放基础面之一为图4中框出的面。
步骤103：基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性。
在本步骤中，需要说明的是，参见图5，通过物体识别算法，圈出全景图像中各个物体，并确定物体的类别属性，如床、桌子、马桶、墙、地面等家居家饰。
步骤104：将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性。
在本步骤中，需要说明的是，参见图6，将全景图像中圈出的不同类的像素投射到投放基础面，从而这个面就携带了类别属性和类别范围，如一种情形将全景图像中圈出的1.8*2的床，和1.2*0.8的茶几投射到投放基础面(如客体地面)，从而使投放基础面携带了类别属性(床和/或茶几)，并确定了床的范围和茶几的范围。
步骤105：基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间。
在本步骤中，可以理解的是，参见图7根据标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间。举例来说，根据平面的法向量朝向，过滤掉非水平的面，然后根据投放基础面，在投放基础面上摆圆柱体，按照10cm为一个梯度依次测试，找到这个投放基础面上圆柱体，这个圆柱体的体积即为投放基础面对应的投放空间，同时也将所述投放空间作为3D内容为的体积，同时还确定这个投放空间的类别属性，与标记了类别属性的投放基础面相同。
步骤106：在所述投放空间中进行3D内容投放展示。
在本步骤中可以理解的是，参见图8，基于投放空间进行3D内容投放展示，可以为按照类别属性进行3D内容投放展示，如设置在茶几上进行3D内容投放展示；或在床上进行3D内容投放展示等等。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，通过获取VR房屋的全景图像和虚拟三维模型；基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；在所述投放空间中进行3D内容投放展示。可见本发明提供的3D内容投放空间是经过平面识别算法和物体识别算法在VR房屋中跑出来的，从而自动在VR房屋中投放3D内容，并且无需人为在3D地图中策划固定的投放位置。
在上述实施例的基础上，在本实施例中，还包括：
为所述投放基础面对应的投放空间添加房屋属性；其中，所述房屋根据房屋数据库确定，所述房屋数据库存储有房屋信息；
基于所述房屋属性在所述投放空间中进行3D内容投放展示。
在本实施例中，举例来说所述房屋属性包括城市属性、业务属性、房间属性、可见点位属性或尺寸属性中的一种或多种；相应地，为所述投放基础面对应的投放空间添加城市属性、业务属性、房间属性、可见点位属性或尺寸属性中的一种或多种；其中，所述城市属性、业务属性、房间属性根据房屋数据库确定；所述房屋数据库存储有房屋所在城市、所属的业务、房屋房间信息；可见点位为从所述房屋的原始点位向所述投放基础面发出射线，在所述射线接触所述投放基础面前若不与所述全景图像中识别出的物体发生接触，则将所述原始点位确定为可见点位；所述尺寸为与所述投放基础面对应的投放空间的尺寸；
基于城市属性、业务属性、房间属性、类别属性、可见点位属性或尺寸属性中的一种或多种，在所述投放空间中进行3D内容投放展示。
在本实施例中，需要说明的是，业务属性包含二手房/新房/租赁等业务；房屋属性为房屋ID，即楼盘字典里房屋的编码；类别属性即为属于什么家居家饰；尺寸属性：如可以在投放空间容积允许的情况下投放1*1*1，或2*3*4等3D内容；其中，房间对应的可见点位为从所述房间的原始点位向所述投放基础面发出射线，在所述射线接触所述投放基础面前若不与所述全景图像中识别出的物体发生接触，则将所述原始点位确定为可见点位，如3个以上的可见点位为优质投放空间，则可设置在房间中优质的投放空间进行投放(内容位可被房间内多少个点位可见：数值越大，代表内容位越优质)。
在本实施例中，确定内容为的可见点位数，举例来说：从原始点位a发出射线，如果射线在点位a与内容位1的投放基础面之间不跟其他模型发生碰撞，则内容位1被点位a可见。通过此方案，累计内容位1在当前房间的可见点位。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，可以按照规则在投放空间投放3D内容，可以基于房屋属性，在所述投放空间中进行3D内容投放展示，从而对于投放的位置提供丰富的跟房屋属性有关的筛选条件，同时具有与VR房屋融合的空间投放能力。
在上述实施例的基础上，在本实施例中，将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性，具体包括：
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中占比最大的物体对应的类别属性；
将所述占比最大的物体对应的类别属性，作为所述投放基础面的类别属性；
和/或，
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中超过占比预设阈值的物体对应的类别属性；
将所述超过占比预设阈值的物体对应的类别属性，作为所述投放基础面的类别属性。
在本实施例中，举例来说，如一种情形将全景图像中圈出的1.8*2的床，和1.2*0.8的茶几投射到投放基础面(如客体地面)，从而使投放基础面携带了类别属性(床和/或茶几)，并确定了床的范围和茶几的范围，显而易见的床在所述投放基础面的分布比例最大，即所述投放基础面的类别属性为床。
举例来说，如一种情形将全景图像中圈出的1.8*2的床，和1.2*0.8的茶几投射到投放基础面(如客体地面)，从而使投放基础面携带了类别属性(床和/或茶几)，并确定了床的范围和茶几的范围，若超过占比预设阈值的物体只有床，则所述投放基础面的类别属性为床。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，将所述全景图像中识别出的物体投射到所述投放基础面，从而确定所述投放基础面的类别属性，从而为后续将类别属性作为投放条件提供基础。
在上述实施例的基础上，在本实施例中，所述基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间，具体包括：
在所述基于标记了类别属性的投放基础面上设置虚拟投放空间，梯度依次增大所述虚拟投放空间直到所述虚拟投放空间与虚拟三维模型中的物体发生接触，将此时的虚拟投放空间作为与所述投放基础面对应的投放空间，并确定所述投放空间的体积。
在本实施例中，需要说明的是，通过确定所述投放空间的体积从而为将尺寸属性作为投放条件提供基础，确定投放空间容积允许的范围。
为了更好的理解本实施例，举例来说，根据平面的法向量朝向，过滤掉非水平的面，然后根据投放基础面，在投放基础面上摆圆柱体(长方体、正方体、不规则体)，按照10cm为一个梯度依次测试，找到这个投放基础面上(不与“虚拟三维模型的其他平面发生碰撞的”)最大圆柱体，这个圆柱体的体积即为投放基础面对应的投放空间(最大投放空间)，同时也将所述投放空间作为3D内容为的体积，同时还确定这个投放空间的类别属性，与标记了类别属性的投放基础面相同。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间，从而提供与VR房屋融合的空间投放能力。
在上述实施例的基础上，在本实施例中，基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间之前，还包括：
根据所述投放基础面对应的法向量朝向，得到与第一目标朝向对应的第一投放基础面和与第二目标朝向对应的第二投放基础面；
相应地，基于所述第一投放基础面和所述第二投放基础面确定VR房屋中与所述第一投放基础面对应的第一投放空间和与所述第二投放基础面对应的第二投放空间；
在所述第一投放空间和所述第二投放空间进行3D内容投放展示。
在本实施例中，可以理解的是，参见图9，3D内容位之间的衔接，即根据投放基础面对应的法向量朝向(如有0度、45度、90度等等)，得到与第一目标朝向对应的第一投放基础面，如第一目标朝向为90度平行墙面；得到与第二目标朝向对应的第二投放基础面，如第二目标朝向为0度(或180度)平行地面；从而基于所述第一投放基础面和所述第二投放基础面确定VR房屋中与所述第一投放基础面对应的第一投放空间和与所述第二投放基础面对应的第二投放空间；并在所述第一投放空间和所述第二投放空间进行3D内容投放展示。投放效果如图9所示。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，具有可扩展的能力从而使得3D内容的展示可基于多个内容位即投放空间)。
在上述实施例的基础上，在本实施例中，3D内容位跟随用户位置和视角，如图10，3D内容的展示可根据用户的当前位置，实时算出需要展示内容的广告位。
在上述实施例的基础上，在本实施例中，所述房屋属性包括可见点位属性；其中，可见点位为从所述房屋的原始点位向所述投放基础面发出射线，在所述射线接触所述投放基础面前若不与所述全景图像中识别出的物体发生接触，则将所述原始点位确定为可见点位；
根据可见点位个数确定VR房屋中优质投放空间。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，通过可见点位个数确定VR房屋中优质投放空间，可见点位个数越多代表投放空间越优质。
在上述实施例的基础上，在本实施例中，还包括：
根据点位热度，投放空间热度，用户潜力行为，用户停留时长中的至少一项触发3D内容投放展示。
在本实施例中，需要说明的是，3D内容的展示，可根据VR房屋的属性和用户行为触发展示，也可以默认展示；默认展示即不区分用户和VR房屋，在筛选出的3D内容位“投放空间”上展示内容；根据VR房屋的属性触发展示：用户当前走点位的热度、3D广告位浏览的热度，即PV/UV高的点位。根据用户行为触发展示，用户是否发生潜力行为，如查看房屋卡片、收听AI讲房、进行VR带看等；用户是否在房间的停留时长超过阈值。
由上面技术方案可知，本发明实施例提供的在VR房屋中进行3D内容投放方法，能够判断展示时机，对于投放的展示提供“千房前面”和“千人千面”的时机。
在上述实施例基础上，还包括3D内容与用户实时互动，根据3D内容相对用户的距离(即用户距离3D内容中3D物体距离)、3D内容是否出现在用户视锥内，3D内容实时调整自身朝向、大小并播放不同3D动画，如图11所示。
参见图12，本发明实施例提供的在VR房屋中进行3D内容投放方法，建设在VR房屋中投放和展示3D内容的能力，与VR房屋融合的空间投放能力；对于投放的位置，提供丰富的跟空间相关的筛选条件；对于投放的展示，提供“千房千面”和“千人千面”的时机；被投放的内容的展示，可根据用户的实时的行为，与其发生互动；对于投放的内容的展示，可投放服务内容(譬如经纪人讲房和带看)。
图13为本发明一实施例提供的在VR房屋中进行3D内容投放装置的结构示意图，如图13所示，该装置包括：获取模块201、第一确定模块202、第二确定模块203、第三确定模块204、第四确定模块205和投放模块206，其中：
其中，获取模块201，用于获取VR房屋的全景图像和虚拟三维模型；
第一确定模块202，用于基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；
第二确定模块203，用于基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；
第三确定模块204，用于将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；
第四确定模块205，用于基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；
投放模块206，用于在所述投放空间中进行3D内容投放展示。
本发明实施例提供的在VR房屋中进行3D内容投放装置具体可以用于执行上述实施例的在VR房屋中进行3D内容投放方法，其技术原理和有益效果类似，具体可参见上述实施例，此处不再赘述。
基于相同的发明构思，本发明实施例提供一种电子设备，参见图14，电子设备具体包括如下内容：处理器301、通信接口303、存储器302和通信总线304；
其中，处理器301、通信接口303、存储器302通过通信总线304完成相互间的通信；通信接口303用于实现各建模软件及智能制造装备模块库等相关设备之间的信息传输；处理器301用于调用存储器302中的计算机程序，处理器执行计算机程序时实现上述各方法实施例所提供的方法，例如，处理器执行计算机程序时实现下述步骤：获取VR房屋的全景图像和虚拟三维模型；基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；在所述投放空间中进行3D内容投放展示。
基于相同的发明构思，本发明又一实施例还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法实施例提供的方法，例如，获取VR房屋的全景图像和虚拟三维模型；基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；在所述投放空间中进行3D内容投放展示。
以上所描述的装置实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分的方法。
此外，在本发明中，诸如“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
此外，在本发明中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。
此外，在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (9)
1.一种在VR房屋中进行3D内容投放方法，其特征在于，包括：
获取VR房屋的全景图像和虚拟三维模型；
基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；
基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；
将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；
基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；
在所述投放空间中进行3D内容投放展示；
将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性，具体包括：
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中占比最大的物体对应的类别属性；
将所述占比最大的物体对应的类别属性，作为所述投放基础面的类别属性；
和/或，
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中超过占比预设阈值的物体对应的类别属性；
将所述超过占比预设阈值的物体对应的类别属性，作为所述投放基础面的类别属性。
2.根据权利要求1所述的在VR房屋中进行3D内容投放方法，其特征在于，还包括：
为所述投放基础面对应的投放空间添加房屋属性；其中，所述房屋根据房屋数据库确定，所述房屋数据库存储有房屋信息；
基于所述房屋属性在所述投放空间中进行3D内容投放展示。
3.根据权利要求1所述的在VR房屋中进行3D内容投放方法，其特征在于，所述基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间，具体包括：
在所述基于标记了类别属性的投放基础面上设置虚拟投放空间，梯度依次增大所述虚拟投放空间直到所述虚拟投放空间与虚拟三维模型中的物体发生接触，将此时的虚拟投放空间作为与所述投放基础面对应的投放空间，并确定所述投放空间的体积。
4.根据权利要求1所述的在VR房屋中进行3D内容投放方法，其特征在于，基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间之前，还包括：
根据所述投放基础面对应的法向量朝向，得到与第一目标朝向对应的第一投放基础面和与第二目标朝向对应的第二投放基础面；
相应地，基于所述第一投放基础面和所述第二投放基础面确定VR房屋中与所述第一投放基础面对应的第一投放空间和与所述第二投放基础面对应的第二投放空间；
在所述第一投放空间和所述第二投放空间进行3D内容投放展示。
5.根据权利要求2所述的在VR房屋中进行3D内容投放方法，其特征在于，所述房屋属性包括可见点位属性；其中，可见点位为从所述房屋的原始点位向所述投放基础面发出射线，在所述射线接触所述投放基础面前若不与所述全景图像中识别出的物体发生接触，则将所述原始点位确定为可见点位；
根据可见点位个数确定VR房屋中优质投放空间。
6.根据权利要求1所述的在VR房屋中进行3D内容投放方法，其特征在于，还包括：
根据点位热度，投放空间热度，用户潜力行为，用户停留时长中的至少一项触发3D内容投放展示。
7.一种在VR房屋中进行3D内容投放装置，其特征在于，包括：
获取模块，用于获取VR房屋的全景图像和虚拟三维模型；
第一确定模块，用于基于所述虚拟三维模型通过平面识别算法确定所述VR房屋中能够进行3D内容投放的投放基础面；
第二确定模块，用于基于所述全景图像通过物体识别算法确定VR房屋中物体的类别属性；
第三确定模块，用于将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性；
第四确定模块，用于基于标记了类别属性的投放基础面确定VR房屋中与所述投放基础面对应的投放空间；
投放模块，用于在所述投放空间中进行3D内容投放展示；
所述第三确定模块在用于将所述全景图像中识别出的物体投射到所述投放基础面，确定所述投放基础面的类别属性时，具体用于：
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中占比最大的物体对应的类别属性；
将所述占比最大的物体对应的类别属性，作为所述投放基础面的类别属性；
和/或，
将所述全景图像中识别出的物体投射到所述投放基础面，确定各物体像素点在所述投放基础面的分布比例，并确定各物体中超过占比预设阈值的物体对应的类别属性；
将所述超过占比预设阈值的物体对应的类别属性，作为所述投放基础面的类别属性。
8.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1~6任一项所述的在VR房屋中进行3D内容投放方法。
9.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1~6任一项所述的在VR房屋中进行3D内容投放方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011592885.0A CN112734947B (zh) | 2020-12-29 | 2020-12-29 | 在vr房屋中进行3d内容投放方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011592885.0A CN112734947B (zh) | 2020-12-29 | 2020-12-29 | 在vr房屋中进行3d内容投放方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112734947A CN112734947A (zh) | 2021-04-30 |
| CN112734947B true CN112734947B (zh) | 2022-10-14 |
Family
ID=75607749
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011592885.0A Active CN112734947B (zh) | 2020-12-29 | 2020-12-29 | 在vr房屋中进行3d内容投放方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112734947B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113379895B (zh) * | 2021-06-10 | 2022-02-22 | 贝壳找房(北京)科技有限公司 | 三维房屋模型生成方法、装置及计算机可读存储介质 |
| CN113838217B (zh) * | 2021-09-23 | 2023-09-12 | 北京百度网讯科技有限公司 | 信息展示方法、装置、电子设备及可读存储介质 |
| CN114356093A (zh) * | 2022-01-06 | 2022-04-15 | 陕西助力信息科技有限公司 | 一种基于虚拟现实的带看方法及系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107592514A (zh) * | 2017-09-14 | 2018-01-16 | 深圳市圆周率软件科技有限责任公司 | 一种全景投影系统及方法 |
| CN109325902A (zh) * | 2017-07-31 | 2019-02-12 | 株式会社理光 | 全景图像融合的方法、装置、系统及计算机可读存储介质 |
| CN110059351A (zh) * | 2019-03-13 | 2019-07-26 | 平安城市建设科技(深圳)有限公司 | 房屋的测绘方法、装置、终端及计算机可读存储介质 |
| CN110111426A (zh) * | 2019-04-18 | 2019-08-09 | 贝壳技术有限公司 | 一种动静分离格局房屋的确定方法和装置 |
| WO2020050516A1 (ko) * | 2018-09-05 | 2020-03-12 | 디프트 주식회사 | 2.5차원 가상 전시 공간을 이용한 3차원 vr 데이터 생성 방법 |
| CN111127627A (zh) * | 2019-11-20 | 2020-05-08 | 贝壳技术有限公司 | 一种三维房屋模型中的模型展示方法及装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5085399B2 (ja) * | 2008-04-14 | 2012-11-28 | 旭化成ホームズ株式会社 | ３ｄモデル生成システム |
| CN108616731B (zh) * | 2016-12-30 | 2020-11-17 | 艾迪普科技股份有限公司 | 一种360度vr全景图形图像及视频实时生成方法 |
| CN107341853B (zh) * | 2017-07-13 | 2021-02-12 | 河北中科恒运软件科技股份有限公司 | 超大虚拟场景和动态摄屏的虚实融合方法及系统 |
-
2020
- 2020-12-29 CN CN202011592885.0A patent/CN112734947B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109325902A (zh) * | 2017-07-31 | 2019-02-12 | 株式会社理光 | 全景图像融合的方法、装置、系统及计算机可读存储介质 |
| CN107592514A (zh) * | 2017-09-14 | 2018-01-16 | 深圳市圆周率软件科技有限责任公司 | 一种全景投影系统及方法 |
| WO2020050516A1 (ko) * | 2018-09-05 | 2020-03-12 | 디프트 주식회사 | 2.5차원 가상 전시 공간을 이용한 3차원 vr 데이터 생성 방법 |
| CN110059351A (zh) * | 2019-03-13 | 2019-07-26 | 平安城市建设科技(深圳)有限公司 | 房屋的测绘方法、装置、终端及计算机可读存储介质 |
| CN110111426A (zh) * | 2019-04-18 | 2019-08-09 | 贝壳技术有限公司 | 一种动静分离格局房屋的确定方法和装置 |
| CN111127627A (zh) * | 2019-11-20 | 2020-05-08 | 贝壳技术有限公司 | 一种三维房屋模型中的模型展示方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112734947A (zh) | 2021-04-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112734947B (zh) | 在vr房屋中进行3d内容投放方法及装置 | |
| WO2019228188A1 (zh) | 在虚拟三维房屋模型内标注和显示空间尺寸的方法与装置 | |
| CN108898516B (zh) | 在虚拟三维空间讲房模式进功能间的方法、服务器和终端 | |
| CN108564527B (zh) | 基于神经网络的全景图内容补全和修复的方法及装置 | |
| CN108961152B (zh) | 平面户型图生成方法和装置 | |
| CN108829468B (zh) | 一种三维空间模型跳转处理方法及装置 | |
| CN108765270B (zh) | 一种虚拟三维空间标签绑定方法及装置 | |
| US20160198146A1 (en) | Image processing apparatus and method | |
| US20100100851A1 (en) | Mapping a real-world object in a personal virtual world | |
| CN104994421A (zh) | 一种直播频道中虚拟物品的互动方法、装置和系统 | |
| CN108960947A (zh) | 基于虚拟现实的样板房展示方法及系统 | |
| CN105137705B (zh) | 一种虚拟球幕的创建方法和装置 | |
| US11158134B2 (en) | Method, apparatus and storage medium for displaying three-dimensional space view | |
| CN107016718B (zh) | 一种场景渲染方法和装置 | |
| CN105183477A (zh) | 应用程序虚拟道具信息获取系统及获取方法 | |
| CN110689621B (zh) | 装修前后房屋三维模型同屏显示的方法、装置及系统 | |
| US20190206138A1 (en) | Methods and Systems for Generating a Customized View of a Real-World Scene | |
| CN108846900B (zh) | 提高用户在房源虚拟三维空间图中的空间感的方法及系统 | |
| WO2019141879A1 (en) | Calibration to be used in an augmented reality method and system | |
| Jian et al. | Augmented virtual environment: fusion of real-time video and 3D models in the digital earth system | |
| CN108765084B (zh) | 一种虚拟三维空间的同步处理方法及装置 | |
| CN106530408A (zh) | 博物馆临时展览规划设计的系统 | |
| US11798148B2 (en) | Systems and methods for three-dimensional environmental modeling of a particular location such as a commercial or residential property | |
| KR20190061783A (ko) | 가상현실 콘텐츠 생성방법 및 프로그램 | |
| CN108844505A (zh) | 测算房屋空间尺寸的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |