KR102453237B1 - augmented reality hologram aquarium - Google Patents

augmented reality hologram aquarium Download PDF

Info

Publication number
KR102453237B1
KR102453237B1 KR1020210126173A KR20210126173A KR102453237B1 KR 102453237 B1 KR102453237 B1 KR 102453237B1 KR 1020210126173 A KR1020210126173 A KR 1020210126173A KR 20210126173 A KR20210126173 A KR 20210126173A KR 102453237 B1 KR102453237 B1 KR 102453237B1
Authority
KR
South Korea
Prior art keywords
unit
virtual
fish
image
control unit
Prior art date
Application number
KR1020210126173A
Other languages
Korean (ko)
Inventor
유승수
Original Assignee
(주)멀틱스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)멀틱스 filed Critical (주)멀틱스
Priority to KR1020210126173A priority Critical patent/KR102453237B1/en
Application granted granted Critical
Publication of KR102453237B1 publication Critical patent/KR102453237B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • G03H1/268Holographic stereogram
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/005Language recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A40/00Adaptation technologies in agriculture, forestry, livestock or agroalimentary production
    • Y02A40/80Adaptation technologies in agriculture, forestry, livestock or agroalimentary production in fisheries management
    • Y02A40/81Aquaculture, e.g. of fish

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Hardware Design (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Architecture (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to an augmented reality (AR) holographic virtual aquarium system to display a virtual fish whose appearance changes according to growth history. According to the present invention, the AR holographic virtual aquarium system comprises: a control unit (10) including a virtual fish image control unit (11) generating and controlling a virtual fish image; a display (20) displaying the virtual fish image generated and transmitted by the image control unit (11); an aquarium management unit (30) connected to the control unit (10) and including a history management unit (31) related to growth of virtual fish and a furnishings providing unit (33) providing furnishings related to the growth of virtual fish; and a user input unit (40) inputting virtual fish selection and growth activities through the control unit (10).

Description

증강 현실 홀로그램 가상 수족관 시스템 {augmented reality hologram aquarium }augmented reality hologram virtual aquarium system {augmented reality hologram aquarium }

본 발명은 실제 물고기를 키우는 것과 같은 현실감을 느낄 수 있고 주인의 모션, 음성에 가상 물고기가 반응하는 증강 현실 가상 수족관 시스템에 관한 것이다.The present invention relates to an augmented reality virtual aquarium system in which a virtual fish responds to the owner's motion and voice, which can feel a sense of reality like raising a real fish.

한국특허 제10-0799271호는 물고기 종류의 선택, 홍보/광고 동영상의 선택, 시계 화면의 선택, 동영상 단위의 물고기 교체, 반복 재생할 동영상의 선택 및 횟수 지정 및 이들의 제어 입력을 위한 리모트 콘트롤러 기능을 수행하는 디지털 수족관 컨트롤러와, 입력되는 이미지 또는 동영상 및 신호 처리 프로그램을 저장하는 데이터/프로그램 저장부를 포함하고 물고기 동영상을 디지털 수족관 컨트롤러에 의한 설정에 의해 디스플레이 가능하도록 처리하는 MPEG 플레이어와, 상기 MPEG 플레이어에 의해 디스플레이 가능하도록 처리된 물고기 영상과 사용자 선택에 의한 배경 이미지를 믹싱하여 출력하는 영상 신호 믹싱 처리부를 포함하는 물고기에 관한 그래픽 영상 신호의 처리 수단 및 화면 표시 제어 수단을 내장하는 본체; 상기 본체에 구성되어 사용자에 의해 선택된 물고기 그래픽 영상을 표시하는 디스플레이부; 상기 디스플레이부에 표시되는 표시 내용에 관한 제어를 위한 사용자 선택 신호 입력 수단; 상기 물고기에 관한 그래픽 영상 신호 또는 물고기 움직임 제어를 위한 프로그램의 다운로드 및 설치를 위한 데이터 입출력 수단을 포함하는 것을 특징으로 하는 디지털 수족관을 개시한다.Korean Patent No. 10-0799271 discloses a remote controller function for selecting a fish type, selecting a promotional/advertising video, selecting a watch screen, replacing a fish by video unit, selecting and specifying the number of videos to be played repeatedly and controlling them. An MPEG player comprising a digital aquarium controller that performs the action, a data/program storage unit for storing an input image or moving picture and a signal processing program, and processing a fish moving image to be displayed by setting by the digital aquarium controller; a main body having a built-in screen display control means and a graphic image signal processing unit for a fish including an image signal mixing processing unit for mixing and outputting a fish image processed to be displayable by a user and a background image selected by the user; a display unit configured to the main body to display a graphic image of a fish selected by a user; a user selection signal input means for controlling display contents displayed on the display unit; Disclosed is a digital aquarium comprising data input/output means for downloading and installing a graphic image signal related to the fish or a program for controlling fish movement.

수족관에 어류, 양서류, 파충류 등 여러 수생 생물을 서식하게 하고, 사람들이 관람할 수 있도록 하는데, 그 규모를 작게 한 가정용 수족관도 등장한 지 오래이다. 그래서 일반 가정에서도 수족관을 설치하고 유지하고 싶어 한다. 하지만, 가정에서 수족관을 관리하기란 어려운데, 그 이유는 물고기의 특성에 맞게 성장조건을 맞추어 주고, 먹이를 공급하는 등 관리자의 지속적인 관심과 학습이 필요하다는 점, 물이끼의 제거나 물의 교환 등 일반 가정에서 아무나 하기에는 번거롭고 비위생적인 일이 잦으며 자칫 잘못하면 수족관 생태계에 악영향을 줄 수 있다는 점에 있다.It has been a long time since aquariums have been made smaller for home use, where various aquatic creatures such as fish, amphibians, and reptiles are inhabited and people can see them. Therefore, even ordinary households want to install and maintain an aquarium. However, it is difficult to manage an aquarium at home because of the fact that it requires constant attention and learning of the manager, such as adjusting the growth conditions to the characteristics of the fish and supplying food, and general households such as removal of sphagnum moss or exchange of water. It is often cumbersome and unsanitary for anyone to do, and if done incorrectly, it can adversely affect the aquarium ecosystem.

본 발명은 사용자가 가상 물고기 종류 성장 단계를 선택할 수 있고 실제 물고기와 같이 먹이, 약품 등을 투여하는 관리행위를 하면서 물고기의 성장 이력 등을 관리하고, 성장 이력에 따라 외관 형상이 바뀌는 가상 물고기의 디스플레이가 가능한 증강 현실 가상 수족관 시스템을 제공하기 위한 것이다.According to the present invention, a user can select a growth stage of a virtual fish type and manage the growth history of the fish while performing a management action of administering food, medicine, etc. like a real fish, and display a virtual fish whose appearance changes according to the growth history It is to provide a possible augmented reality virtual aquarium system.

또한, 본 발명은 사용자의 영상 모션, 터치 모션이나 음성에 반응하여 가상 물고기가 반응을 보이고 주인의 언어에 반응하는 상호 대화 음성을 출력할 수 있게 하는 증강 현실 가상 수족관 시스템을 제공하기 위한 것이다. Another object of the present invention is to provide an augmented reality virtual aquarium system that enables a virtual fish to respond in response to a user's image motion, touch motion, or voice and output an interactive dialogue voice that responds to the owner's language.

본 발명에 따른 증강 현실 가상 수족관 시스템은, 가상 물고기 영상을 생성, 제어하는 가상 물고기 영상 제어부(11)를 포함하는 제어부(10)와; 상기 영상 제어부(11)에 의해 생성되어 전송된 가상 물고기 영상을 디스플레이하는 디스플레이(20)와;The augmented reality virtual aquarium system according to the present invention includes: a controller 10 including a virtual fish image controller 11 for generating and controlling a virtual fish image; a display 20 for displaying the virtual fish image generated and transmitted by the image controller 11;

상기 제어부(10)와 연결되고 가상 물고기의 생육과 관련된 이력 관리부(31)와, 가상 물고기의 생육과 관련된 비품을 제공하는 비품 제공부(33)를 포함하는 수족관 관리부(30)와; 가상 물고기의 선택, 생육 활동 행위를 상기 제어부(10)를 통해 입력하는 사용자 입력부(40);를 포함하여 구성되는 것을 특징이다.an aquarium management unit (30) connected to the control unit (10) and including a history management unit (31) related to the growth of virtual fish, and a fixture providing unit (33) that provides equipment related to the growth of virtual fish; and a user input unit (40) for inputting selection of a virtual fish and a behavior of growing activity through the control unit (10).

본 발명에 따른 증강 현실 홀로그램 가상 수족관 시스템에 있어서, 디스플레이(20)에서 투사되는 영상으로 3D 입체 형상을 생성하는 홀로그램 필름(25);을 더 포함하여 구성되는 것이 바람직하다.In the augmented reality hologram virtual aquarium system according to the present invention, the hologram film 25 for generating a 3D stereoscopic shape with the image projected from the display 20; is preferably configured to further include.

본 발명에 따른 증강 현실 가상 수족관 시스템에 있어서, 상기 성장 이력 관리부(31)는 알 부화 단계, 치어 단계, 성어 단계로 구분하여 관리하고, 상기 비품 제공부(33)는 물고기 별 먹이, 약품, 교환용 물 등을 제공하는 것이 바람직하다.In the augmented reality virtual aquarium system according to the present invention, the growth history management unit 31 manages it by dividing it into an egg hatching stage, a fry stage, and an adult stage, and the equipment providing unit 33 provides food, medicine, and exchange for each fish. It is preferable to provide water or the like.

본 발명에 따른 증강 현실 가상 수족관 시스템은, 사용자의 영상을 촬상하는 카메라(51)와, 상기 커메라에서 촬영된 영상을 생성하는 영상 생성부(52)와, 상기 영상 생성부(52)에서 제공되는 영상을 분석하여 사용자의 모션을 인식하여 영상 제어부(11)에 전달하는 인공지능 모션 인식부(55)를 더 포함하여 구성되고, 상기 영상 제어부(11)는 인식된 사용자의 모션에 대응하여 가상 물고기가 반응하는 영상을 출력하는 것이 바람직하다.The augmented reality virtual aquarium system according to the present invention is provided by a camera 51 capturing an image of a user, an image generating unit 52 generating an image captured by the camera, and the image generating unit 52 . It further comprises an artificial intelligence motion recognition unit 55 that analyzes the image to recognize the user's motion and transmits it to the image control unit 11, wherein the image control unit 11 corresponds to the recognized user's motion. It is desirable to output an image in which the fish respond.

본 발명에 따른 증강 현실 가상 수족관 시스템은, 사용자의 음향을 감지하는 마이크(61)와, 상기 마이크(61)에 감지된 음향을 파일로 변환하는 음성파일 생성부(62)와, 상기 음성파일 생성부(62)에서 생성된 음성파일을 분석하여 사용자의 언어를 인식하는 인공지능 음성 인식부(65)와, 상기 제어부(10)는 가상 물고기의 보이스 기능을 하는 음성 생성부(15)를 더 포함하여 구성되고, 상기 음성 생성부(15)는 인공지능 음성 인식부(65)에서 인식된 사용자의 언어에 대응하여 가상 물고기가 반응하는 출력 음성을 생성하여 스피커(70)로 출력하는 것이 바람직하다.The augmented reality virtual aquarium system according to the present invention includes a microphone 61 that detects a user's sound, a voice file generator 62 that converts the sound sensed by the microphone 61 into a file, and the voice file generation The artificial intelligence voice recognition unit 65 for recognizing the user's language by analyzing the voice file generated by the unit 62, and the control unit 10 further includes a voice generating unit 15 that functions as a voice of a virtual fish Preferably, the voice generating unit 15 generates an output voice that the virtual fish responds to in response to the user's language recognized by the artificial intelligence voice recognition unit 65 and outputs it to the speaker 70 .

본 발명에 따른 증강 현실 가상 수족관 시스템에 있어서, 상기 제어부(10)는 물고기 종류 선택부(15)를 더 포함하여 구성되고, 사용자 입력부(40)는 물고기 종류 선택부(15)에 접속하여 가상 물고기의 종류 및 성장 단계를 선택할 수 있게 되는 것이 바람직하다.In the augmented reality virtual aquarium system according to the present invention, the control unit 10 further includes a fish type selection unit 15 , and the user input unit 40 connects to the fish type selection unit 15 to access the virtual fish. It is desirable to be able to select the type and growth stage of the .

본 발명에 따르는 경우, 사용자가 가상 물고기 종류 성장 단계를 선택할 수 있고 실제 물고기와 같이 먹이, 약품 등을 투여하는 관리행위를 하면서 물고기의 성장 이력 등을 관리하고, 성장 이력에 따라 외관 형상이 바뀌는 가상 물고기의 디스플레이가 가능한 증강 현실 가상 수족관 시스템이 제공된다.According to the present invention, the user can select the growth stage of the type of virtual fish, manage the growth history of the fish, etc. while performing a management act of administering food, drugs, etc., like a real fish, and the appearance shape changes according to the growth history. An augmented reality virtual aquarium system capable of displaying fish is provided.

또한, 본 발명에 따르는 경우, 사용자의 영상 모션, 터치 모션이나 음성에 반응하여 가상 물고기가 반응을 보이고 주인의 언어에 반응하는 상호 대화 음성을 출력할 수 있게 하는 증강 현실 가상 수족관 시스템이 제공된다.In addition, according to the present invention, there is provided an augmented reality virtual aquarium system that enables a virtual fish to respond in response to a user's image motion, touch motion or voice and output an interactive voice response to the owner's language.

도 1은 본 발명의 증강 현실 가상 수족관 시스템 전체 구성도.1 is an overall configuration diagram of an augmented reality virtual aquarium system of the present invention.

이하에서 본 발명의 일실시예에 따른 증강 현실 홀로그램 가상 수족관 시스템에 대하여 첨부된 도면을 참조하여 상세하게 설명한다. 도 1은 본 발명의 증강 현실 가상 수족관 시스템 전체 구성도이다.Hereinafter, an augmented reality hologram virtual aquarium system according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. 1 is an overall configuration diagram of an augmented reality virtual aquarium system of the present invention.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템은 제어부(10)와 디스플레이(20)와 수족관 관리부(30)와 사용자 입력부(40)를 포함하여 구성된다. As shown in FIG. 1 , the augmented reality virtual aquarium system according to an embodiment of the present invention includes a control unit 10 , a display 20 , an aquarium management unit 30 , and a user input unit 40 .

제어부(10)는 가상 물고기 영상을 생성, 제어하는 가상 물고기 영상 제어부(11)를 포함한다. 디스플레이(20)는 영상 제어부(11)에 의해 생성되어 전송된 가상 물고기 영상을 디스플레이한다.The controller 10 includes a virtual fish image controller 11 that generates and controls a virtual fish image. The display 20 displays the virtual fish image generated and transmitted by the image controller 11 .

제어부(10)는 로컬 수족관에 속하는 처리장치에 구성될 수도 있지만, 유무선 통신망으로 통하여 접속할 수 있는 원격 서버에 구비될 수도 있다. 이 경우 원격 서버는 서로 다른 지역에 있는 수대의 로컬 수족관을 통제하는 컨텐츠 프로그램을 포함하고 운용하게 된다. 원격 서버의 제어부의 데이터는 통신을 통하여 로컬 수족관에 구비된 처리장치(로컬 제어부)로 영상 및 음성 신호를 전송한다.The control unit 10 may be configured in a processing device belonging to a local aquarium, or may be provided in a remote server that can be accessed through a wired/wireless communication network. In this case, the remote server includes and operates a content program that controls several local aquariums in different regions. The data of the control unit of the remote server transmits video and audio signals to a processing device (local control unit) provided in the local aquarium through communication.

수족관 관리부(30)는 제어부(10)와 연결되고 가상 물고기의 생육과 관련된 이력 관리부(31)와, 가상 물고기의 생육과 관련된 비품을 제공하는 비품 제공부(33)를 포함한다.The aquarium management unit 30 is connected to the control unit 10 and includes a history management unit 31 related to the growth of a virtual fish, and a fixture providing unit 33 that provides equipment related to the growth of the virtual fish.

수족관 관리부(30)는 로컬 수족관에 속하는 처리장치에 구성될 수도 있지만, 유무선 통신망으로 통하여 접속할 수 있는 원격 서버에 구비될 수도 있다. 이 경우 원격 서버는 서로 다른 지역에 있는 수대~ 수백대의 로컬 수족관들을 통제하는 컨텐츠 프로그램을 포함하고 운용하게 된다. 원격 서버의 제어부의 데이터는 통신을 통하여 로컬 수족관에 구비된 처리장치(로컬 제어부)로 영상 및 음성 신호를 전송한다. 로컬 수족관의 데이터(사용자 영상 신호 데이터와 음성 신호 데이터, 사용자 입력부를 통한 요청 데이터, 사용자의 관리 행위)는 통신을 통하여 서버로 전달된다.The aquarium management unit 30 may be configured in a processing device belonging to a local aquarium, or may be provided in a remote server that can be accessed through a wired/wireless communication network. In this case, the remote server includes and operates a content program that controls several to hundreds of local aquariums in different regions. The data of the control unit of the remote server transmits video and audio signals to a processing device (local control unit) provided in the local aquarium through communication. Data of the local aquarium (user image signal data and audio signal data, request data through the user input unit, user management action) is transmitted to the server through communication.

사용자 입력부(40)는 가상 물고기의 선택, 생육 활동 행위를 상기 제어부(10)를 통해 입력한다. 사용자 입력부(40)는 로컬 수속관에 설치된다. 사용자 입력부(40)의 신호는 제어부로 전달되는데, 제어부가 원격지 서버에 설치되는 경우 로콜 처리장치(로컬 제어부)를 통하여 서버로 전달된다.The user input unit 40 inputs the virtual fish selection and growth activity through the control unit 10 . The user input unit 40 is installed in the local procedure pipe. The signal of the user input unit 40 is transmitted to the control unit, and when the control unit is installed in a remote server, it is transmitted to the server through a local call processing device (local control unit).

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템은, 디스플레이(20)에서 투사되는 영상으로 3D 입체 형상을 생성하는 홀로그램 필름(25)을 더 포함하여 구성되는 것이 바람직하다.As shown in FIG. 1 , the augmented reality virtual aquarium system according to an embodiment of the present invention further includes a hologram film 25 that generates a 3D stereoscopic shape with an image projected from the display 20 . desirable.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템에 있어서, 성장 이력 관리부(31)는 알 부화 단계, 치어 단계, 성어 단계로 구분하여 관리하고, 비품 제공부(33)는 물고기 별 먹이, 약품, 교환용 물 등을 제공한다.As shown in FIG. 1, in the augmented reality virtual aquarium system according to an embodiment of the present invention, the growth history management unit 31 divides and manages the egg hatching stage, the fry stage, and the adult stage, and the equipment providing unit ( 33) provides food for each fish, medicine, and water for exchange.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템은, 사용자의 영상을 촬상하는 카메라(51)와, 카메라에서 촬영된 영상을 생성하는 영상 생성부(52)와, 영상 생성부(52)에서 제공되는 영상을 분석하여 사용자의 모션을 인식하여 영상 제어부(11)에 전달하는 인공지능 모션 인식부(55)를 더 포함하여 구성된다. 영상 제어부(11)는 인식된 사용자의 모션에 대응하여 가상 물고기가 반응하는 영상을 출력한다.As shown in FIG. 1 , the augmented reality virtual aquarium system according to an embodiment of the present invention includes a camera 51 capturing an image of a user, an image generating unit 52 generating an image captured by the camera, and , is configured to further include an artificial intelligence motion recognition unit 55 that analyzes the image provided by the image generation unit 52 to recognize the user's motion and deliver it to the image control unit 11 . The image controller 11 outputs an image in which the virtual fish responds to the recognized user's motion.

본 발명의 일실시예에 따른 로컬 수족관은 터치 감지 센서, 근거리 감시 센서, 인체 감지 센서 등을 구비하고 모션 인식부(55)는 사용자의 영상 신호가 아닌 센서 들의 사용자 감지신호를 영상 제어부(10)에 전달 할 수 있다. 영상 제어부(10)는 센서들의 사용자 감지 신호에 기초하여 가상 물고기의 반응 움직임을 제어한다. The local aquarium according to an embodiment of the present invention includes a touch detection sensor, a short-distance monitoring sensor, a human body detection sensor, and the like, and the motion recognition unit 55 transmits the user detection signal of the sensors, not the user's image signal, to the image controller 10 can be forwarded to The image controller 10 controls the reaction movement of the virtual fish based on user detection signals of sensors.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템은, 사용자의 음향을 감지하는 마이크(61)와, 마이크(61)에 감지된 음향을 파일로 변환하는 음성파일 생성부(62)와, 음성파일 생성부(62)에서 생성된 음성파일을 분석하여 사용자의 언어를 인식하는 인공지능 음성 인식부(65)를 포함할 수 있다. 제어부(10)는 가상 물고기의 보이스 기능을 하는 음성 생성부(15)를 더 포함하여 구성된다. 음성 생성부(15)는 인공지능 음성 인식부(65)에서 인식된 사용자의 언어에 대응하여 가상 물고기가 반응하는 출력 음성을 생성하여 스피커(70)로 출력한다.As shown in FIG. 1 , the augmented reality virtual aquarium system according to an embodiment of the present invention includes a microphone 61 that detects a user's sound, and a voice file that converts the sound sensed by the microphone 61 into a file. It may include a generation unit 62 and an artificial intelligence voice recognition unit 65 for recognizing a user's language by analyzing the voice file generated by the voice file generation unit 62 . The control unit 10 is configured to further include a voice generating unit 15 that functions as a voice of the virtual fish. The voice generating unit 15 generates an output voice that the virtual fish responds to in response to the user's language recognized by the artificial intelligence voice recognition unit 65 and outputs it to the speaker 70 .

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 증강 현실 가상 수족관 시스템에 있어서, 제어부(10)는 물고기 종류 선택부(15)를 더 포함하여 구성되고, 사용자 입력부(40)는 물고기 종류 선택부(15)에 접속하여 가상 물고기의 종류 및 성장 단계를 선택할 수 있게 된다.1, in the augmented reality virtual aquarium system according to an embodiment of the present invention, the control unit 10 is configured to further include a fish type selection unit 15, and the user input unit 40 is a fish. By accessing the type selection unit 15, the type and growth stage of the virtual fish can be selected.

본 발명은 상기에서 언급한 바람직한 실시예와 관련하여 설명됐지만, 본 발명의 범위가 이러한 실시예에 한정되는 것은 아니며, 본 발명의 범위는 이하의 특허청구범위에 의하여 정하여지는 것으로 본 발명과 균등 범위에 속하는 다양한 수정 및 변형을 포함할 것이다.Although the present invention has been described with reference to the above-mentioned preferred embodiments, the scope of the present invention is not limited to these embodiments, and the scope of the present invention is defined by the following claims and is equivalent to the present invention various modifications and variations pertaining to

아래의 특허청구범위에 기재된 도면부호는 단순히 발명의 이해를 보조하기 위한 것으로 권리범위의 해석에 영향을 미치지 아니함을 밝히며 기재된 도면부호에 의해 권리범위가 좁게 해석되어서는 안될 것이다.The reference numerals described in the claims below are merely for assisting the understanding of the invention and do not affect the interpretation of the scope of rights.

10 : 제어부
11 : 가상 물고기 영상 제어부
13 : 음성 생성부
15 : 물고기 종류 선택부
20 : 가상 물고기 영상 제어부
25 : 홀로그램 필름
30 : 수족관 관리부
31 : 이력 관리부
33 : 비품 제공부
40 : 사용자 입력부
51 : 카메라
52 : 영상 생성부
55 : 인공지능 모션 인식부
61 : 인공지능 모션 인식부
62 : 음성파일 생성부
65 : 음성파일 생성부
70 : 스피커
10: control unit
11: virtual fish image control unit
13: voice generator
15: fish type selection part
20: virtual fish image control unit
25: holographic film
30: Aquarium Management Department
31: history management unit
33: equipment providing unit
40: user input unit
51 : camera
52: image generating unit
55: artificial intelligence motion recognition unit
61: artificial intelligence motion recognition unit
62: voice file generator
65: voice file generator
70: speaker

Claims (7)

삭제delete 삭제delete 가상 물고기 영상을 생성, 제어하는 가상 물고기 영상 제어부(11)를 포함하는 제어부(10)와;
상기 영상 제어부(11)에 의해 생성되어 전송된 가상 물고기 영상을 디스플레이하는 디스플레이(20)와;
상기 제어부(10)와 연결되고 가상 물고기의 생육과 관련된 이력 관리부(31)와, 가상 물고기의 생육과 관련된 비품을 제공하는 비품 제공부(33)를 포함하는 수족관 관리부(30)와;
가상 물고기의 선택, 생육 활동 행위를 상기 제어부(10)를 통해 입력하는 사용자 입력부(40);를 포함하여 구성되되,

상기 이력 관리부(31)는 알 부화 단계, 치어 단계, 성어 단계로 구분하여 관리하고,

상기 비품 제공부(33)는 물고기 별 먹이, 약품, 교환용 물을 제공하는 것을 특징으로 하는 증강 현실 가상 수족관 시스템.
a controller 10 including a virtual fish image controller 11 for generating and controlling a virtual fish image;
a display 20 for displaying the virtual fish image generated and transmitted by the image controller 11;
an aquarium management unit (30) connected to the control unit (10) and including a history management unit (31) related to the growth of virtual fish, and a fixture providing unit (33) that provides equipment related to the growth of virtual fish;
A user input unit 40 for inputting selection and growth activity of a virtual fish through the control unit 10;

The history management unit 31 manages by dividing the egg hatching stage, fry stage, adult stage,

The augmented reality virtual aquarium system, characterized in that the equipment providing unit (33) provides food for each fish, medicine, and water for exchange.
가상 물고기 영상을 생성, 제어하는 가상 물고기 영상 제어부(11)를 포함하는 제어부(10)와;
상기 영상 제어부(11)에 의해 생성되어 전송된 가상 물고기 영상을 디스플레이하는 디스플레이(20)와;
상기 제어부(10)와 연결되고 가상 물고기의 생육과 관련된 이력 관리부(31)와, 가상 물고기의 생육과 관련된 비품을 제공하는 비품 제공부(33)를 포함하는 수족관 관리부(30)와;
가상 물고기의 선택, 생육 활동 행위를 상기 제어부(10)를 통해 입력하는 사용자 입력부(40);를 포함하여 구성되되,

사용자의 영상을 촬상하는 카메라(51)와,
상기 카메라에서 촬영된 영상을 생성하는 영상 생성부(52)와,
상기 영상 생성부(52)에서 제공되는 영상을 분석하여 사용자의 모션을 인식하여 영상 제어부(11)에 전달하는 인공지능 모션 인식부(55)를 더 포함하여 구성되고,

상기 영상 제어부(11)는 인식된 사용자의 모션에 대응하여 가상 물고기가 반응하는 영상을 출력하는 것을 특징으로 하는 증강 현실 가상 수족관 시스템.
a controller 10 including a virtual fish image controller 11 for generating and controlling a virtual fish image;
a display 20 for displaying the virtual fish image generated and transmitted by the image controller 11;
an aquarium management unit (30) connected to the control unit (10) and including a history management unit (31) related to the growth of virtual fish, and a fixture providing unit (33) that provides equipment related to the growth of virtual fish;
A user input unit 40 for inputting selection and growth activity of a virtual fish through the control unit 10;

A camera 51 that captures the user's image, and
an image generating unit 52 for generating an image captured by the camera;
It further comprises an artificial intelligence motion recognition unit 55 that analyzes the image provided by the image generation unit 52 to recognize the user's motion and deliver it to the image control unit 11,

The image controller 11 outputs an image in which the virtual fish responds in response to the recognized user's motion.
제4항에 있어서,
사용자의 음향을 감지하는 마이크(61)와,
상기 마이크(61)에 감지된 음향을 파일로 변환하는 음성파일 생성부(62)와,
상기 음성파일 생성부(62)에서 생성된 음성파일을 분석하여 사용자의 언어를 인식하는 인공지능 음성 인식부(65)와,

상기 제어부(10)는 가상 물고기의 보이스 기능을 하는 음성 생성부(15)를 더 포함하여 구성되고,

상기 음성 생성부(15)는 인공지능 음성 인식부(65)에서 인식된 사용자의 언어에 대응하여 가상 물고기가 반응하는 출력 음성을 생성하여 스피커(70)로 출력하는 것을 것을 특징으로 하는 증강 현실 가상 수족관 시스템.
5. The method of claim 4,
A microphone 61 for detecting the user's sound, and
a voice file generating unit 62 that converts the sound sensed by the microphone 61 into a file;
An artificial intelligence voice recognition unit 65 for recognizing a user's language by analyzing the voice file generated by the voice file generating unit 62;

The control unit 10 is configured to further include a voice generating unit 15 that functions as a voice of a virtual fish,

The voice generating unit 15 generates an output voice that the virtual fish responds to in response to the user's language recognized by the artificial intelligence voice recognition unit 65 and outputs it to the speaker 70 . aquarium system.
제3항 또는 제4항에 있어서,
상기 제어부(10)는 물고기 종류 선택부(15)를 더 포함하여 구성되고,
상기 사용자 입력부(40)는 물고기 종류 선택부(15)에 접속하여 가상 물고기의 종류 및 성장 단계를 선택할 수 있게 되는 것을 특징으로 하는 증강 현실 가상 수족관 시스템.
5. The method of claim 3 or 4,
The control unit 10 is configured to further include a fish type selection unit 15,
The augmented reality virtual aquarium system, characterized in that the user input unit (40) connects to the fish type selection unit (15) to select the type and growth stage of the virtual fish.
제3항 또는 제4항에 있어서,
상기 디스플레이(20)에서 투사되는 영상으로 3D 입체 형상을 생성하는 홀로그램 필름(25);을 더 포함하여 구성되는 것을 특징으로 하는 증강 현실 가상 수족관 시스템.
5. The method of claim 3 or 4,
Augmented reality virtual aquarium system, characterized in that it further comprises;
KR1020210126173A 2021-09-24 2021-09-24 augmented reality hologram aquarium KR102453237B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210126173A KR102453237B1 (en) 2021-09-24 2021-09-24 augmented reality hologram aquarium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210126173A KR102453237B1 (en) 2021-09-24 2021-09-24 augmented reality hologram aquarium

Publications (1)

Publication Number Publication Date
KR102453237B1 true KR102453237B1 (en) 2022-10-11

Family

ID=83598943

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210126173A KR102453237B1 (en) 2021-09-24 2021-09-24 augmented reality hologram aquarium

Country Status (1)

Country Link
KR (1) KR102453237B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090070109A (en) * 2007-12-26 2009-07-01 조용국 Training image aquarium in using display panel
KR20180133950A (en) * 2010-04-01 2018-12-17 시리얼 테크놀로지즈 에스.에이. Method and device for encoding three-dimensional scenes which include transparent objects in a holographic system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090070109A (en) * 2007-12-26 2009-07-01 조용국 Training image aquarium in using display panel
KR20180133950A (en) * 2010-04-01 2018-12-17 시리얼 테크놀로지즈 에스.에이. Method and device for encoding three-dimensional scenes which include transparent objects in a holographic system

Similar Documents

Publication Publication Date Title
CN107053191B (en) Robot, server and man-machine interaction method
US20180374268A1 (en) Interactive mixed reality system for a real-world event
US11010601B2 (en) Intelligent assistant device communicating non-verbal cues
JP5149447B2 (en) Method for providing video viewing companion on display and virtual organism generator
US8619160B2 (en) User-responsive, enhanced-image generation method and system
US7154510B2 (en) System and method for modifying a portrait image in response to a stimulus
US20200035026A1 (en) Techniques for immersive virtual reality experiences
TW201228380A (en) Comprehension and intent-based content for augmented reality displays
JP6958360B2 (en) Information processing equipment, information processing methods, and programs
WO2023009580A2 (en) Using an extended reality appliance for productivity
JP2016045814A (en) Virtual reality service providing system and virtual reality service providing method
CN109521927A (en) Robot interactive approach and equipment
US20150022329A1 (en) Assisted Animal Communication
CN109479116A (en) Information processing equipment, information processing method and program
JP2020089947A (en) Information processing device, information processing method, and program
KR20220054619A (en) Lightfield display for mobile devices
WO2023039562A1 (en) Local environment scanning to characterize physical environment for use in vr/ar
CN110971502A (en) Method, device, equipment and storage medium for displaying sound message in application program
JP2014182597A (en) Virtual reality presentation system, virtual reality presentation device, and virtual reality presentation method
KR102453237B1 (en) augmented reality hologram aquarium
JP2017223812A (en) Apparatus control system, apparatus control method and control program
JP2014170330A (en) Virtual reality presentation system, virtual reality presentation method and virtual reality presentation device
JP7037654B2 (en) Equipment and related methods for presenting captured spatial audio content
US20230091386A1 (en) Augmented reality hologram virtual aquarium system
CN111225233A (en) Multi-dimensional environment rendering system and rendering method

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant