CN116991241A - 一种落地现实空间智能ai虚拟人系统 - Google Patents

一种落地现实空间智能ai虚拟人系统 Download PDF

Info

Publication number
CN116991241A
CN116991241A CN202310975092.4A CN202310975092A CN116991241A CN 116991241 A CN116991241 A CN 116991241A CN 202310975092 A CN202310975092 A CN 202310975092A CN 116991241 A CN116991241 A CN 116991241A
Authority
CN
China
Prior art keywords
client
server
real
unit
central processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310975092.4A
Other languages
English (en)
Inventor
陈金玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202310975092.4A priority Critical patent/CN116991241A/zh
Publication of CN116991241A publication Critical patent/CN116991241A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/453—Help systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种落地现实空间智能AI虚拟人系统，包括客户端、服务器与中央处理器，所述客户端与服务器通过电性数据传输连接，所述客户端与中央处理器通过电性数据传输连接，画面通过全息技术赋能线下场景。本发明通过设计定制人物形象，在三维软件中建模，且绑定骨骼，再把模型导入引擎软件中开发客户端，接入服务器,以及开发人脸识别功能，根据应用场景部署更多的数据算法，设定交互功能如：主动示意可帮助功能、游戏娱乐功能，区域性地图引导功能，天气提示功能等，再通过全息投影或投影或全息屏幕，加摄像头及麦克风、音响部署硬件设备，落地到现实空间，达到一个虚拟人帮助人类的实时需求，及实时互动娱乐需求。

Description

一种落地现实空间智能AI虚拟人系统
技术领域
本发明涉及AI虚拟技术领域，具体为一种落地现实空间智能AI虚拟人系统。
背景技术
随着虚拟人智能化以及图像实体化的技术发展，目前虚拟人展示使用的场景越加广泛；包括将虚拟人设置于多个特定的、具有固定范围的人类生活场景中进行销售内容推广、市场营锁、活动主持等领域，例如商场、品牌商店、电梯、银行，甚至是街道边的橱窗处；目前相关领域的演示实体，例如机器人等，能够实现以一定的程序化流程与人类进行有限的交互行为，然而基于机器人的外型难以改变，并且其交互流程较为公式化，表现生硬，使得整体的交互效果较差.
而虚拟人的形象可以随时调整，而且由于使用了三维图形技术，其表现、动作可以配合展示交互内容作为灵活变化，因此使用虚拟人作为以上提及场景的交互主体，将具有良好的效果，但是目前的虚拟人物有线上AI虚拟人直播，解答用户问题功能等，但是没有落地现实空间，无法根据场景部署交互，达到一个主动智能互动的功能。
因此急需一种可进行落地现实空间，根据区域内的人进行主动智能交互的虚拟人系统。
发明内容
本发明为了解决现有技术的问题，提供了一种落地现实空间智能AI虚拟人系统。
为了解决上述技术问题，本发明是通过以下技术方案实现的：一种落地现实空间智能AI虚拟人系统，包括客户端、服务器、中央处理器与部署外部场景交互数据单元，所述客户端与服务器通过电性数据传输连接，所述客户端与中央处理器通过电性数据传输连接，所述客户端的输入端电性连接有模型导入单元，所述中央处理器电性数据连接有交互设备单元，所述中央处理器的一侧电性数据连接有部署外部场景交互数据单元，所述服务器的一侧电性数据连接有人脸识别单元，所述中央处理器的一侧电性数据连接有实时基础数据检索单元。
优选的，所述交互设备单元的内部包括有摄像头、麦克风、投影设备与音响，所述投影设备采用全息投影技术。
优选的，所述部署外部场景交互数据单元的内部包括有主动交互模块、游戏娱乐模块、地图引导模块与天气提示模块等多个子集。
优选的，所述摄像头通过中央处理器、客户端与服务器与人脸识别单元进行电性数据连接。
优选的，所述地图引导模块与天气提示模块分别通过服务器、客户端、中央处理器与实时基础数据检索单元进行电性数据连接。
优选的，所述服务器外接大模型，所述客户端基于开发引擎进行开发。
一种落地现实空间智能AI虚拟人系统，交互方法包括：
步骤一，通过摄像头实时获取区域内的人员位置，采集人员数量进行采集，同时实时基础数据检索单元进行实时的网上数据搜索，同时虚拟人物经过服务器加工后经由投影设备投影至预定区域内部；
步骤二，根据摄像头获取的人员位置进行沟通，并根据人员反馈信息选择某一人员作为交互对象，进行沟通；
步骤三，根据根据基础外观生物信息进行虚拟人物做出相应行为和语言，同时根据游戏娱乐模块、地图引导模块、天气提示模块对客户进行娱乐和提醒解决交互人员的问题；
步骤四，重复步骤一至步骤三的内容，对区域内人员进行主动交互。
本发明的有益效果为：
本发明通过设计定制人物形象，在三维软件中建模，且绑定骨骼，再把模型引擎软件中开发客户端，接入服务器,以及开发人脸识别功能，根据应用场景部署更多的数据算法，设定交互功能如：主动示意可帮助功能、游戏娱乐功能，区域性地图引导功能，天气提示功能等，再通过全息投影或投影或全息屏幕，加摄像头及麦克风部署硬件设备，落地到现实空间，达到一个虚拟人帮助人类的实时需求，及实时互动娱乐需求。
附图说明
图1是本发明的整体系统示意图。
图2是本发明的服务器交互示意图。
图3是本发明的部署外部场景交互数据单元内部结构示意图。
图4是本发明的交互设备单元投影示意图。
图5是本发明的现实交互设备单元装配结构示意图。
图1～5中：1、客户端；2、服务器；3、中央处理器；4、交互设备单元；41、摄像头；42、麦克风；43、投影设备；44、音响；5、模型导入单元；6、人脸识别单元；7、部署外部场景交互数据单元；71、主动交互模块；72、游戏娱乐模块；73、地图引导模块；74、天气提示模块；8、实时基础数据检索单元。
具体实施方式
实施例：如图1～5所示的一种落地现实空间智能AI虚拟人系统，包括客户端1、服务器2、中央处理器3与部署外部场景交互数据单元7，客户端1与服务器2通过电性数据传输连接，客户端1与中央处理器3通过电性数据传输连接，客户端1的输入端电性连接有模型导入单元5，中央处理器3电性数据连接有交互设备单元4，中央处理器3的一侧电性数据连接有部署外部场景交互数据单元7，服务器2的一侧电性数据连接有人脸识别单元6，中央处理器3的一侧电性数据连接有实时基础数据检索单元8，通过设计定制人物形象，在三维软件中建模，且绑定骨骼，再把模型引擎软件中开发客户端1，接入服务器2,以及开发人脸识别功能，根据应用场景部署更多的数据算法，设定交互功能如：主动示意可帮助功能、游戏娱乐功能，区域性地图引导功能，天气提示功能等，再通过全息投影或投影或全息屏幕，加摄像头41及麦克风42部署，画面通过全息技术赋能线下场景，落地到现实空间，达到一个虚拟人帮助人类的实时需求，及实时互动娱乐需求。
交互设备单元4的内部包括有摄像头41、麦克风42与投影设备43与音响44，所述投影设备43采用全息投影技术，部署外部场景交互数据单元7的内部包括有主动交互模块71、游戏娱乐模块72、地图引导模块73与天气提示模块74等多个子集，摄像头41通过中央处理器3、客户端1与服务器2与人脸识别单元6进行电性数据连接，地图引导模块73与天气提示模块74分别通过服务器2、客户端1、中央处理器3与实时基础数据检索单元8进行电性数据连接，服务器2外接大模型，客户端1基于开发引擎进行开发。
一种落地现实空间智能AI虚拟人系统，交互方法包括：步骤一，通过摄像头41实时获取区域内的人员位置，采集人员数量进行采集，同时实时基础数据检索单元8进行实时的网上数据搜索，同时虚拟人物经过服务器2加工后经由投影设备43投影至预定区域内部；步骤二，根据摄像头41获取的人员位置进行沟通，并根据人员反馈信息选择某一人员作为交互对象，进行沟通；步骤三，根据根据基础外观生物信息进行虚拟人物做出相应行为和语言，同时根据游戏娱乐模块72、地图引导模块73、天气提示模块74对客户进行娱乐和提醒解决交互人员的问题，同根据需求在部署外部场景交互数据单元7内部增添相应功能的子集，增添对受众的主动交互程度和范围；步骤四，重复步骤一至步骤三的内容，对区域内人员进行主动交互。

Claims (7)

1.一种落地现实空间智能AI虚拟人系统，包括客户端(1)、服务器(2)、中央处理器(3)与部署外部场景交互数据单元(7)，其特征在于：所述客户端(1)与服务器(2)通过电性数据传输连接，所述客户端(1)与中央处理器(3)通过电性数据传输连接，所述客户端(1)的输入端电性连接有模型导入单元(5)，所述中央处理器(3)电性数据连接有交互设备单元(4)，所述中央处理器(3)的一侧电性数据连接有部署外部场景交互数据单元(7)，所述服务器(2)的一侧电性数据连接有人脸识别单元(6)，所述中央处理器(3)的一侧电性数据连接有实时基础数据检索单元(8)。
2.根据权利要求1所述的一种落地现实空间智能AI虚拟人系统，其特征在于：所述交互设备单元(4)的内部包括有摄像头(41)、麦克风(42)、投影设备(43)与音响(44)，所述投影设备(43)采用全息投影技术。
3.根据权利要求2所述的一种落地现实空间智能AI虚拟人系统，其特征在于：所述部署外部场景交互数据单元(7)的内部包括有主动交互模块(71)、游戏娱乐模块(72)、地图引导模块(73)与天气提示模块(74)等多个子集。
4.根据权利要求2所述的一种落地现实空间智能AI虚拟人系统，其特征在于：所述摄像头(41)通过中央处理器(3)、客户端(1)与服务器(2)与人脸识别单元(6)进行电性数据连接。
5.根据权利要求3所述的一种落地现实空间智能AI虚拟人系统，其特征在于：所述地图引导模块(73)与天气提示模块(74)分别通过服务器(2)、客户端(1)、中央处理器(3)与实时基础数据检索单元(8)进行电性数据连接。
6.根据权利要求1所述的一种落地现实空间智能AI虚拟人系统，其特征在于：所述服务器(2)外接大模型，所述客户端(1)基于开发引擎进行开发。
7.根据权利要求1-6任意一项所述的一种落地现实空间智能AI虚拟人系统，交互方法包括：
步骤一，通过摄像头(41)实时获取区域内的人员位置，采集人员数量进行采集，同时实时基础数据检索单元(8)进行实时的网上数据搜索，同时虚拟人物经过服务器(2)加工后经由投影设备(43)投影至预定区域内部；
步骤二，根据摄像头(41)获取的人员位置进行沟通，并根据人员反馈信息选择某一人员作为交互对象，进行沟通；
步骤三，根据根据基础外观生物信息进行虚拟人物做出相应行为和语言，同时根据游戏娱乐模块(72)、地图引导模块(73)、天气提示模块(74)对客户进行娱乐和提醒解决交互人员的问题；
步骤四，重复步骤一至步骤三的内容，对区域内人员进行主动交互。
CN202310975092.4A 2023-08-04 2023-08-04 一种落地现实空间智能ai虚拟人系统 Pending CN116991241A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310975092.4A CN116991241A (zh) 2023-08-04 2023-08-04 一种落地现实空间智能ai虚拟人系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310975092.4A CN116991241A (zh) 2023-08-04 2023-08-04 一种落地现实空间智能ai虚拟人系统

Publications (1)

Publication Number Publication Date
CN116991241A true CN116991241A (zh) 2023-11-03

Family

ID=88522930

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310975092.4A Pending CN116991241A (zh) 2023-08-04 2023-08-04 一种落地现实空间智能ai虚拟人系统

Country Status (1)

Country Link
CN (1) CN116991241A (zh)

Similar Documents

Publication Publication Date Title
CN110850983B (zh) 视频直播中的虚拟对象控制方法、装置和存储介质
CN112215927B (zh) 人脸视频的合成方法、装置、设备及介质
CN112073741B (zh) 直播信息的处理方法、装置、电子设备及存储介质
CN112492380B (zh) 音效调整方法、装置、设备及存储介质
US10846520B2 (en) Simulated sandtray system
CN109789550A (zh) 基于小说或表演中的先前角色描绘的社交机器人的控制
KR20220027187A (ko) 장면 인터랙션 방법 및 장치, 전자 장치 및 컴퓨터 저장 매체
Leigh et al. Supporting transcontinental collaborative work in persistent virtual environments
WO2023030010A1 (zh) 交互方法、电子设备及存储介质
KR101445923B1 (ko) 대화형 전시 서비스 제공 방법
KR20200097637A (ko) 시뮬레이션 모래상자 시스템
CN109343695A (zh) 基于虚拟人行为标准的交互方法及系统
CN113705316A (zh) 获取虚拟图像的方法、装置、设备及存储介质
CN114332374A (zh) 一种虚拟显示方法、设备以及存储介质
CN114429528A (zh) 图像处理方法、装置、设备、计算机程序及存储介质
CN112669422A (zh) 仿真3d数字人生成方法、装置、电子设备及存储介质
Röning et al. Minotaurus: A system for affective human–robot interaction in smart environments
CN112860064B (zh) 一种基于ai技术的智能互动系统及设备
CN113220130A (zh) 一种用于党建的vr体验系统及其设备
Chen et al. [Retracted] Research on Museum Educational Display Based on Image Recognition Tracking
CN116991241A (zh) 一种落地现实空间智能ai虚拟人系统
Lang The impact of video systems on architecture
WO2019124850A1 (ko) 사물 의인화 및 인터랙션을 위한 방법 및 시스템
CN113821104A (zh) 一种基于全息投影的可视化交互系统
CN113157241A (zh) 交互设备、交互装置及交互系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination