KR102557592B1 - 이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체 - Google Patents

이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체 Download PDF

Info

Publication number
KR102557592B1
KR102557592B1 KR1020200165615A KR20200165615A KR102557592B1 KR 102557592 B1 KR102557592 B1 KR 102557592B1 KR 1020200165615 A KR1020200165615 A KR 1020200165615A KR 20200165615 A KR20200165615 A KR 20200165615A KR 102557592 B1 KR102557592 B1 KR 102557592B1
Authority
KR
South Korea
Prior art keywords
real
image
time
camera
virtual image
Prior art date
Application number
KR1020200165615A
Other languages
English (en)
Other versions
KR20210147843A (ko
Inventor
휘시아 우
치앤 왕
Original Assignee
베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 filed Critical 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드
Publication of KR20210147843A publication Critical patent/KR20210147843A/ko
Application granted granted Critical
Publication of KR102557592B1 publication Critical patent/KR102557592B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3871—Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals

Abstract

본 개시는 이미지 표시 방법, 장치, 전자 기기 및 컴퓨터 판독 가능 저장 매체에 관한 것이고, 상기 방법은 상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하는 단계, 제1 실시간 이미지 중의 목표 물체를 확정하는 단계, 목표 물체에 대응되는 실시간 가상 이미지를 생성하는 단계, 제2 실시간 이미지에 실시간 가상 이미지를 표시하는 단계를 포함한다. 본 개시의 실시예에 따르면, 실시간 가상 이미지를 제2 실시간 이미지에 표시하고, 현실 정경에 표시하는 가상 이미지를 미리 저장할 수요가 없으며, 사용자가 실제 수요에 따라 실시간으로 필요한 목표 물체를 촬영할 수 있고, 대응되는 실시간 가상 이미지를 생성하기에, 가상 이미지를 현실 정경에 자유롭게 표시하는데 편리하다.

Description

이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체{METHOD AND APPARATUS FOR DISPLAYING AN IMAGE, ELECTRONIC DEVICE AND COMPUTER-READABLE STORAGE MEDIUM}
본 개시는 디스플레이 기술 분야에 관한 것이고, 특히 이미지 표시 방법, 이미지 표시 장치, 전자 기기 및 컴퓨터 판독 가능 저장 매체에 관한 것이다.
현재 AR（Augmented Reality, 증강 현실） 기술은 가상 이미지를 현실 정경의 이미지에 표시할 수 있다. 핸드폰 등 전자 기기에 결합하여 사용 시, 전자 기기의 카메라로 현실 정경의 이미지를 촬영한 후, 전자 기기에 미리 저장된 가상 이미지를 촬영된 현실 정경의 이미지에 표시할 수 있다.
이러한 표시 방식은 전자 기기에 가상 이미지를 미리 저장해야 하기에, 전자 기기를 사용하는 사용자가 가상 이미지를 현실 정경에 표시하기에 불편하다.
본 개시는 이미지 표시 방법, 이미지 표시 장치, 전자 기기 및 컴퓨터 판독 가능 저장 매체를 제공하여, 관련 기술의 부족점을 해결하고자 한다.
본 개시의 실시예의 제1 형태에 따르면, 제1 카메라 및 제2 카메라를 포함하는 전자 기기에 적용되는 이미지 표시 방법에 있어서,
상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한, 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하는 단계,
상기 제1 실시간 이미지 중의 목표 물체를 확정하는 단계,
상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하는 단계 및
상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계를 포함하는 이미지 표시 방법을 제공한다.
선택적으로, 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하기 전에, 상기 방법은
각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하는 단계 및
상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하는 단계를 더 포함하고,
여기서, 상기 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계는
상기 실시간 가상 이미지와 서로 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계를 포함한다.
선택적으로, 상기 방법은
상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하는 단계를 더 포함한다.
선택적으로, 상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지이다.
선택적으로, 상기 제1 카메라가 전면 카메라이고, 상기 제2 카메라가 후면 카메라이거나,
또는, 상기 제1 카메라가 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라가 회전 가능한 카메라이다.
본 개시의 실시예의 제2 형태에 따르면, 제1 카메라 및 제2 카메라를 포함하는 전자 기기에 적용되는 이미지 표시 장치에 있어서,
상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하도록 배치되는 이미지 수집 모듈,
상기 제1 실시간 이미지 중의 목표 물체를 확정하도록 배치되는 목표 확정 모듈,
상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하도록 배치되는 가상 생성 모듈 및
상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치되는 이미지 표시 모듈을 포함하는 이미지 표시 장치를 제공한다.
선택적으로, 상기 장치는
각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하도록 배치되는 시간 기록 모듈 및
상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하도록 배치되는 시간 설정 모듈을 더 포함하고,
상기 이미지 표시 모듈은 상기 실시간 가상 이미지와 서로 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치된다.
선택적으로, 상기 장치는
상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하도록 배치되는 영상 기록 모듈을 더 포함한다.
선택적으로, 상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지이다.
선택적으로, 상기 제1 카메라가 전면 카메라이고, 상기 제2 카메라가 후면 카메라이거나,
또는, 상기 제1 카메라가 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라가 회전 가능한 카메라이다.
본 개시의 실시예의 제3 형태에 따르면, 상술한 임의의 실시예에 기재된 방법을 구현하도록 배치되는 프로세서를 포함하는 전자 기기를 제공한다.
본 개시의 실시예의 제4 형태에 따르면, 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독 가능 저장 매체를 제공하고, 상기 프로그램이 프로세서에 의해 실행될 경우, 상술한 임의의 실시예에 기재된 방법의 단계를 구현한다.
본 개시의 실시예가 제공하는 기술 방안은 하기의 유익한 효과를 포함할 수 있다.
본 개시의 실시예에 따르면, 제1 카메라 및 제2 카메라를 통해 동시에 이미지를 수집하고, 제1 카메라를 통해 수집한 목표 물체의 실시간 가상 이미지를 제2 카메라를 통해 수집한 제2 실시간 이미지에 표시하며, 실시간 가상 이미지는 제1 실시간 이미지 중의 목표 물체를 따라 실시간으로 생성된 것이고, 제2 실시간 이미지는 현실 정경일 수 있기에, 실시간 가상 이미지를 제2 실시간 이미지에 표시하여, 현실 정경에 표시해야 하는 가상 이미지를 미리 저장할 필요가 없고, 사용자가 실제 수요에 따라 실시간으로 수요한 목표 물체를 촬영하여, 대응되는 실시간 가상 이미지를 생성할 수 있기에, 가상 이미지를 현실 정경에 자유롭게 표시하는데 편리하다.
이상의 일반적인 서술 및 아래의 세부 서술은 예시적이고 해석적인 것이고, 본 개시를 한정할 수 없는 것을 이해해야 한다.
여기서 첨부 도면은 명세서에 추가되어 명세서의 일부를 구성하여, 본 개시의 실시예를 나타내고, 명세서와 함께 본 개시의 원리를 해석하는데 사용된다.
도 1은 본 개시의 실시예에 따른 이미지 표시 방법의 개략 흐름도이다.
도 2는 본 개시의 실시예에 따른 다른 이미지 표시 방법의 개략 흐름도이다.
도 3은 본 개시의 실시예에 따른 또 다른 이미지 표시 방법의 개략 흐름도이다.
도 4는 본 개시의 실시예에 따른 이미지 표시 장치의 개략 블록도이다.
도 5는 본 개시의 실시예에 따른 다른 이미지 표시 장치의 개략 블록도이다.
도 6은 본 개시의 실시예에 따른 또 다른 이미지 표시 장치의 개략 블록도이다.
도 7은 본 개시의 실시예에 따른 이미지 표시를 위한 장치의 개략 블록도이다.
여기서 예시적인 실시예에 대해 상세히 설명하고자 하는바, 그 예시는 첨부 도면에 표시된다. 아래의 설명이 첨부 도면에 관한 것인 경우, 별도의 표시가 있지 않은 한, 서로 다른 첨부 도면에서의 동일한 숫자는 같거나 또는 유사한 요소를 표시한다. 아래 예시적인 실시예에서 설명하는 실시 형태는 본 개시에 일치되는 모든 실시 형태를 대표하는 것이 아니다. 반대로, 이들은 첨부되는 특허청구범위에 상세히 기술된 바, 본 개시의 일부 측면에 일치되는 장치 또는 방법의 예일 뿐이다.
도 1은 본 개시의 실시예에 따른 이미지 표시 방법의 개략 흐름도이다. 본 실시예에서 나타낸 이미지 표시 방법은 전자 기기에 적용할 수 있고, 상기 전자 기기는 제1 카메라 및 제2 카메라를 포함할 수 있으며, 제1 카메라 및 제2 카메라 외에, 상기 전자 기기는 다른 카메라를 더 포함할 수 있다. 상기 제1 카메라 및 제2 카메라는 일반적으로 전자 기기의 임의의 두개의 서로 다른 카메라를 가르키는 것이고, 전자 기기의 어느 두개의 카메라를 특정하여 가르키는 것이 아니다.
상기 전자 기기는 핸드폰, 태블릿 PC, 웨어러블 기기 등 전자 기기를 포함하나 이에 한정되지 않는다. 전자 기기가 핸드폰인 경우를 예를 들어, 상기 제1 카메라를 핸드폰 화면 밖의 베젤 영역에 설치될 수 있고, 풀 스크린 화면을 구현하도록 핸드폰 화면 하부에 설치하여 핸드폰 화면을 거쳐 이미지를 수집할 수 있다.
여기서, 상기 제1 카메라는 하나의 카메라일 수 있고, 복수의 카메라로 구성된 카메라 그룹일 수도 있으며, 이하 실시예에서 수집하는 제1 실시간 이미지는 하나의 카메라를 통해 수집할 수 있고, 카메라 그룹을 통해 수집할 수도 있다. 상기 제2 카메라는 하나의 카메라일 수 있고, 복수의 카메라로 구성된 카메라 그룹일 수도 있으며, 이하 실시예에서 수집하는 제2 실시간 이미지는 하나의 카메라를 통해 수집할 수 있고, 카메라 그룹을 통해 수집할 수도 있다.
도 1에 나타낸 바와 같이, 상기 이미지 표시 방법은 하기의 단계를 포함할 수 있다.
단계 S101에서, 상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하고,
단계 S102에서, 상기 제1 실시간 이미지 중의 목표 물체를 확정하고,
단계 S103에서, 상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하며,
단계 S104에서, 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시한다.
유의해야 할 점은, 상술한 제1 실시간 이미지 및 제2 실시간 이미지를 수집하는 주체는 수요에 따라 교환할 수 있고, 다시 말해서 제2 카메라를 통해 제1 실시간 이미지를 수집하고, 제1 카메라를 통해 제2 실시간 이미지를 수집할 수 있으며, 구체적으로는 수요에 따라 설정할 수 있다.
일 실시예에 있어서, 제1 카메라 및 제2 카메라의 촬영 방향은 서로 달라서, 다른 방향의 이미지를 이미지를 수집할 수 있고, 예를 들어 제1 카메라는 전면 카메라이고, 제2 카메라는 후면 카메라일 경우, 제1 카메라는 제1 실시간 이미지로서 전자 기기의 정면의 이미지를 수집할 수 있고, 제2 카메라는 제2 실시간 이미지로서 전자 기기의 배면의 이미지를 수집할 수 있으며, 이를 통해 서로 다른 제1 실시간 이미지 및 제2 실시간 이미지를 획득한다.
일 실시예에 있어서, 제1 카메라 및 제2 카메라의 촬영 방향이 서로 같으나 그 촬영 범위가 서로 다를 수 있고, 예를 들어 제1 카메라 및 제2 카메라는 모두 전자 기기의 후면 카메라이나, 제1 카메라는 전자 기기의 리어 커버의 좌측 상부에 위치하고, 제2 카메라는 전자 기기의 리어 커버의 우측 상부에 위치할 경우, 제1 카메라는 제1 실시간 이미지로서 전자 기기 배면의 좌측 상부의 이미지를 수집할 수 있고, 제2 카메라는 제2 실시간 이미지로서 전자 기기 배면의 우측 상부의 이미지를 수집할 수 있으며, 이를 통해 서로 다른 제1 실시간 이미지 및 제2 실시간 이미지를 획득한다.
이하 실시예는 주로 제1 카메라가 전면 카메라이고, 제2 카메라가 후면 카메라인 상황을 예시적으로 설명한다.
일 실시예에 있어서, 전면 카메라 및 후면 카메라를 동시에 가동할 수 있다. 여기서, 전자 기기의 제조 업체에서 하드웨어에 기초하여 전자 기기의 기저 로직의 정상 작동을 미리 확보하여, 동시에 전면 카메라 및 후면 카메라를 통해 이미지를 수집할 수 있도록 한다. 나아가 두개의 카메라를 통해 동시에 이미지를 수집하고, 전면 카메라를 통해 화면 출사광 방향 일측（다시 말해서 전자 기기 정면）의 이미지를 수집하고, 후면 카메라를 통해 화면 출사광 방향의 반대 방향 일측（다시 말해서 전자 기기 배면）의 이미지를 수집할 수 있다.
제1 실시간 이미지를 수집한 후, 제1 실시간 이미지에서 목표 물체를 확정할 수 있고, 여기서, 목표 물체의 유형은 수요에 따라 설정할 수 있으며, 예를 들어 사람일 수 있고, 물건일 수 있으며, 목표 물체가 사람인 경우를 예를 들어, 구체적으로 인체의 일부일 수 있고, 예를 들어 팔, 다리 등일 수 있으며, 완전한 인체일 수도 있다.
미리 기계 학습 훈련을 통해 특정 유형의 물체를 인식하기 위한 모델을 획득할 수 있고, 나아가 제1 실시간 이미지를 해당 모델에 입력하여 제1 실시간 이미지에서의 특정 유형에 속하는 목표 물체를 인식할 수 있다.
나아가 목표 물체에 대응되는 실시간 가상 도형을 생성하고, 2차원 이미지일 수 있고, 3차원 이미지일 수도 있으며, 구체적으로 수요에 따라 설정할 수 있다.
실시간 가상 이미지가 3차원 이미지인 경우를 예를 들어, 동작 추종 알고리즘에 기초하여 사용자의 동작에 대해 기계 학습을 수행하여, 사용자의 2차원 이미지를 3차원 이미지로 전환하는 모델을 구축할 수 있고, 나아가 구축한 모델에 기초하여 제1 실시간 이미지 중의 목표 물체를 전환할 수 있으며, 구체적으로 목표 물체의 지체 관절을 확정할 수 있고, 그 후 지체 관절에 앵커 포인트를 첨가하며, 나아가 앵커 포인트의 운동에 기초하여 목표 물체의 2차원 이미지를 가상의 3차원 이미지로 전환시킴으로써, 목표 물체의 실시간 가상 이미지를 생성하고, 다시 말해서 가상의 3차원 이미지가 목표 물체를 추종하여 동작을 실행하도록 할 수 있다.
목표 물체에 사용자의 안면이 포함될 경우, 얼굴 특징 인식 기술을 통해, 목표 물체의 얼굴 특징을 인식하고, 인식된 얼굴 특징에 따라, 실시간 가상 이미지에서의 안면 부분으로서 안면에 대응되는 가상 이미지를 생성할 수도 있다.
또한, 가상 이미지가 2차원 이미지일 경우, 기계 학습을 통해 획득한 모델로 목표 물체에 대응되는 실시간 가상 도형을 생성할 수 있다.
상술한 동작 추종 알고리즘 외에, 기타 방식으로 목표 물체의 2차원 이미지를 가상의 3차원 이미지로 전환시킬 수 있고, 예를 들어 DIB-R의 렌더링 프레임워크（미분 가능한 보간에 따른 렌더러）를 작성하고, DIB-R은 인코더-디코더 체계 구조（입력을 특징도 또는 벡터의 신경망으로 전환시켜 형상, 컬러, 결 및 조명 등을 예측하는게 사용）를 사용하여 3차원 이미지를 생성할 수 있으며, 이를 통해 목표 물체의 2차원 이미지를 해당 렌더링 프레임워크에 입력하여, 대응되는 가상의 3차원 이미지를 출력할 수 있다.
일 실시예에 있어서, 제1 카메라 및 제2 카메라를 통해 동시에 이미지를 수집하고, 제1 카메라에 의해 수집된 목표 물체의 실시간 가상 이미지를 제2 카메라에 의해 수집된 제2 실시간 이미지에 표시하며, 실시간 가상 이미지는 제1 실시간 이미지 중의 목표 물체를 따라 실시간으로 생성된 것이고, 제2 실시간 이미지는 현실 정경일 수 있기에, 실시간 가상 이미지를 제2 실시간 이미지에 중첩 표시하여, 현실 정경에 표시해야 하는 가상 이미지를 미리 저장할 필요가 없고, 사용자가 실제 수요에 따라 실시간으로 필요한 목표 물체를 촬영하여, 대응되는 실시간 가상 이미지를 생성할 수 있기에, 가상 이미지를 현실 정경에 자유롭게 표시하는데 편리하다.
유의해야 할 점은, 실시간 가상 이미지를 제2 실시간 이미지에 중첩 표시하는 깊이는 수요에 따라 설정할 수 있다.
예를 들어 목표 물체가 사용자 자체일 경우, 사용자는 전면 카메라로 자신을 촬영하고, 후면 카메라로 현실 정경을 촬영함으로써, 자신의 가상 이미지를 생성할 수 있고, 생성된 가상 이미지는 현실 정경의 사용자를 추종하여 동작을 수행할 수 있으며, 나아가 자신의 가상 이미지를 현실 정경에 표시함으로써, 실시간으로 촬영된 자신의 가상 이미지를 실시간으로 촬영된 현실 정경에 편리하게 응용할 수 있고, 이를 통해 멀티프레임 실시간 가상 이미지를 대응되는 멀티프레임 제2 실시간 이미지에 중첩 표시하여, 가상 이미지를 현실 이미지에 표시하는 영상을 디스플레이할 수 있고, 디스플레이된 가상 이미지의 동작이 현실 정경에서의 사용자의 동작과 일치하며, 한편 가상 이미지를 통해 사용자와 일치한 동작을 보여주고, 다른 한편 사용자가 처한 환경을 배경으로 가상 이미지를 보여줌으로써, AR 디스플레이를 원활하게 구현하고, 예를 들어 이에 기초하여 vlog, AR가상 형상 교수를 수행할 수 있고, 사용자 자신의 동작을 가상 이미지로 보여주며, AR 형태로 관중에서 보여줄 수 있다.
선택적으로, 상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지이다.
일 실시예에 있어서, 목표 물체를 따라 생성된 가상 이미지는 3차원 이미지일 수 있고, 2차원 이미지일 수도 있으며, 구체적으로 수요에 따라 설정할 수 있다.
도 2는 본 개시의 실시예에 따른 다른 이미지 표시 방법의 개략 흐름도이다. 도 2에 나타낸 바와 같이, 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하기 전에, 상기 방법은
각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하는 단계 S105 및
상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하는 단계 S106를 더 포함하고,
여기서, 상기 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계는
상기 실시간 가상 이미지와 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계 S1041를 포함한다.
일 실시예에 있어서, 각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록할 수 있고, 나아가 상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하여, 제1 실시간 이미지에서의 가상 이미지와 대응 목표 물체가 위치하는타임 스탬프이 동일하도록 확보한 후 상기 실시간 가상 이미지와 동일한 타임 스탬프를 가지는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 확보할 수 있고, 제2 실시간 이미지에 표시된 실시간 가상 이미지가 제2 실시간 이미지와 동시에 촬영된 제1 실시간 이미지 중의 목표 물체에 대응되도록 확보한다.
도 3은 본 개시의 실시예에 따른 또 다른 이미지 표시 방법의 개략 흐름도이다. 도 3에 나타낸 바와 같이, 상기 방법은
상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하는 단계 S107를 더 포함한다.
일 실시예에 있어서, 제2 실시간 이미지를 현실 이미지로 할 수 있고, 실시간 가상 이미지를 가상 이미지로 제2 이미지에 표시할 수 있기에, 이를 통해 상기 실시간 가상 이미지가 멀티프레임 표시된 상기 제2 실시간 이미지가 AR 영상을 구성할 수 있으며, 이를 통해 상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 AR영상（실시간 가상 이미지가 몇개의 프레임 표시되어 있는 제2 실시간 이미지를 AR 이미지로 기록할 수 있음）으로 기록하고, 해당 AR 영상을 저장하여, 사용자가 후속으로 사용할 수 있도록 하고, 예를 들어 vlog, AR 가상 형상 교수 영상으로 사용할 수 있다.
선택적으로, 상기 제1 카메라는 전면 카메라이고, 상기 제2 카메라는 후면 카메라이다.
일 실시예에 있어서, 제1 카메라는 전면 카메라일 수 있고, 제2 카메라는 후면 카메라일 수 있어, 전면 카메라를 통해 화면 출사광 방향 일측（다시 말해서 전자 기기 정면）의 이미지를 수집하고, 후면 카메라를 통해 화면 출사광 방향의 반대 방향 일측（다시 말해서 전자 기기 배면）의 이미지를 수집하여, 서로 다른 제1 실시간 이미지 및 제2 실시간 이미지를 획득할 수 있다.
선택적으로, 상기 제1 카메라는 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라는 회전 가능한 카메라이다.
일 실시예에 있어서, 제1 카메라는 전면 카메라 또는 후면 카메라일 수 있고, 제2 카메라는 회전 가능한 카메라일 수 있다. 예를 들어 제2 카메라는 신축형 카메라일 수 있고, 전자 기기 베젤에서 인출 또는 철회될 수 있고, 카메라가 인출될 경우, 신축 방향을 축으로 회동할 수 있고, 예를 들어 전자 기기에 회전 가능한 구조가 설치되어 있고, 제2 카메라는 해당 구조에 위치할 수 있으며, 예를 들어 해당 구조는 핸드폰의 프론트 커버이고, 프론트 커버가 반전 가능하며, 이를 통해 제2 카메라는 해당 프론트 커버에 위치하여 프론트 커버와 함께 반전할 수 있다.
구체적으로, 제1 카메라가 전면 카메라인 경우, 전자 기기 배면의 이미지를 촬영하도록 제2 카메라는 회전을 통해 전자 기기 배면의 일측을 향하거나 또는 전자 기기 상응 측면의 이미지를 촬영하도록 제2 카메라는 회전을 통해 전자 기기의 측면（해당 측면은 전자 기기 정면 및 전자 기기 배면에 접하는 일측면임）을 향할 수 있고, 제1 카메라가 후면 카메라일 경우, 전자 기기 정면의 이미지를 촬영하도록 제2 카메라는 회전을 통해 전자 기기 정면 일측을 향하거나, 또는 전자 기기 상응 측면의 이미지를 촬영하도록 제2 카메라는 회전을 통해 전자 기기의 측면（해당 측면은 전자 기기 정면 및 전자 기기 배면에 접하는 일측면임）을 향할 수 있다.
전술한 이미지 표시 방법의 실시예에 상응되게 본 개시는 이미지 표시 장치의 실시예를 더 제공한다.
도 4는 본 개시의 실시예에 따른 이미지 표시 장치의 개략 블록도이다. 본 실시예에서 나타낸 이미지 표시 장치는 전자 기기에 적용할 수 있고, 상기 전자 기기는 제1 카메라 및 제2 카메라를 포함할 수 있으며, 제1 카메라 및 제2 카메라 외에, 상기 전자 기기는 다른 카메라를 더 포함할 수 있다. 상기 제1 카메라 및 제2 카메라는 일반적으로 전자 기기의 임의의 두개의 다른 카메라를 가르키는 것이고, 전자 기기의 어느 두개의 카메라를 특정하여 가르키는 것이 아니다. 상기 전자 기기는 핸드폰, 태블릿 PC, 웨어러블 기기 등 전자 기기이다. 전자 기기가 핸드폰인 경우를 예를 들어, 상기 제1 카메라는 핸드폰 화면 밖의 베젤 영역에 설치될 수 있고, 풀 스크린 화면을 구현하도록 핸드폰 화면 하부에 설치하여 핸드폰 화면을 거쳐 이미지를 수집할 수 있다.
여기서, 상기 제1 카메라는 하나의 카메라일 수 있고, 복수의 카메라일 수 있으며, 이하 실시예에서 수집하는 제1 실시간 이미지는 하나의 카메라를 통해 수집할 수 있고, 복수의 카메라를 통해 수집할 수도 있다. 상기 제2 카메라는 하나의 카메라일 수 있고, 복수의 카메라일 수 있으며, 이하 실시예에서 수집하는 제2 실시간 이미지는 하나의 카메라를 통해 수집할 수 있고, 복수의 카메라를 통해 수집할 수도 있다.
도 4에 나타낸 바와 같이, 상기 이미지 표시 장치는
상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제1 실시간 이미지와 서로 다른 상기 제2 카메라를 통해 수집한 제2 실시간 이미지를 획득하도록 배치되는 이미지 수집 모듈(101),
상기 제1 실시간 이미지 중의 목표 물체를 확정하도록 배치되는 목표 확정 모듈(102),
상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하도록 배치되는 가상 생성 모듈(103) 및
상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치되는 이미지 표시 모듈(104)을 포함할 수 있다.
선택적으로, 상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지이다.
도 5는 본 개시의 실시예에 따른 다른 이미지 표시 장치의 개략 블록도이다. 도 5에 나타낸 바와 같이, 상기 장치는
각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하도록 배치되는 시간 기록 모듈(105) 및
상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하도록 배치되는 시간 설정 모듈(106)을 더 포함하고,
여기서, 상기 이미지 표시 모듈(104)은 상기 실시간 가상 이미지와 서로 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치된다.
도 6은 본 개시의 실시예에 따른 또 다른 이미지 표시 장치의 개략 블록도이다. 도 6에 나타낸 바와 같이, 상기 장치는
상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하도록 배치되는 영상 기록 모듈(107)을 더 포함한다.
선택적으로, 상기 제1 카메라는 전면 카메라이고, 상기 제2 카메라는 후면 카메라이다.
선택적으로, 상기 제1 카메라는 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라는 회전 가능한 카메라이다.
상술한 실시예의 장치에 관련하여, 각 모듈이 동작을 실행하는 구체적인 형태는 이미 관련 방법의 실시예에서 상세하게 설명하였기에, 여기에서 상세한 설명을 생략하도록 한다.
장치 실시예에 있어서, 이는 방법 실시예에 기본적으로 대응되기에, 관련 부분은 방법 실시예의 일부 설명을 참조하도록 한다. 위에서 설명한 장치 실시예는 예시에 불과하고, 분리 부재로 설명한 상기 모듈은 물리적으로 분리되거나 분리되지 않을 수 있고, 모듈로 표시되는 부재는 물리적으로 분리되거나 분리되지 않을 수 있으며, 하나의 위치에 위치할 수 있거나 또는 여러 네트워크 모듈에 분포될 수도 있다. 실제 수요에 따라 그 중 일부 또는 전부의 모듈을 선택하여 본 개시 방안의 목적을 구현할 수 있고, 본 기술분야의 통상의 기술자는 창조적인 노동을 들이지 않는 전제하에서 이해하고 실시할 수 있다.
본 개시의 실시예는 상술한 임의의 실시예에 기재된 방법을 구현하도록 배치되는 프로세서를 포함하는 전자 기기를 더 제공한다.
본 개시의 실시예는 프로세서를 통해 실행 시 상술한 임의의 실시예에 기재된 방법의 단계를 구현하는 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독 가능 저장 매체를 더 제공한다.
도 7은 본 개시의 실시예에 따른 이미지 표시를 위한 장치(700)의 개략 블록도이다. 예를 들어, 장치(700)는 휴대 전화, 컴퓨터, 디지털 방송 단말기, 메세지 송수신 기기, 게임 콘솔, 태블릿 기기, 의료 기기, 피트니스 장비, 개인 휴대 정보 단말기 등일 수 있다.
도 7을 참조하여, 장치(700)는 처리 어셈블리(702), 메모리(704), 전원 어셈블리(706), 멀티미디어 어셈블리(708), 오디오 어셈블리(710), 입력/출력（I/O） 인터페이스(712), 센서 어셈블리(714) 및 통신 어셈블리(716) 중 하나 또는 복수의 어셈블리를 포함할 수 있다.
처리 어셈블리(702)는 통상적으로 장치(700)의 전반적인 동작을 제어하고, 예를 들어 표시, 전화 발신, 데이터 통신, 카메라 동작 및 기록 조작에 관련된 동작을 제어한다. 처리 어셈블리(702)는 하나 또는 복수의 프로세서(720)를 포함하여 명령을 실행하여, 상술한 방법의 전체 또는 일부 단계를 완성할 수 있다. 그 외, 처리 어셈블리(702)는 처리 어셈블리(702) 및 다른 어셈블리의 상호 연동에 편리하도록 하나 또는 복수의 모듈을 포함할 수 있다. 예를 들어, 처리 어셈블리(702)는 멀티미디어 어셈블리(708) 및 처리 어셈블리(702)가 인터랙션하기 편리하도록 멀티미디어 모듈을 포함할 수 있다.
메모리(704)는 장치(700)의 조작을 지원하도록 각 종류의 데이터를 저장하도록 배치된다. 이러한 데이터의 예시는 장치(700)에서 동작하는 임의의 응용 프로그램 또는 방법을 위한 명령, 연락처 데이터, 전화번호부 데이터, 메시지, 픽처, 영상 등을 포함한다. 메모리(704)는 임의의 유형의 휘발성 또는 비휘발성 저장 기기 예를 들어 정적 랜덤 액세스 메모리 (SRAM), 전기적으로 지울 수 있는 프로그램 가능한 판독 전용 메모리 (EEPROM), 지울 수 있는 프로그램 가능한 판독 전용 메모리 (EPROM), 프로그램 가능한 판독 전용 메모리 (PROM), 판독 전용 메모리 (ROM), 자기 메모리, 플래시 메모리, 자기 디스크 또는 광 디스크 또는 그들의 조합으로 구현된다.
전원 어셈블리(706)는 장치(700)의 각종 어셈블리에 전력을 공급한다. 전원 어셈블리(706)는 전원 관리 시스템, 하나 또는 복수의 전원 및 장치(700)를 위한 전력 생성, 관리 및 분배에 관련되는 다른 관련 어셈블리를 포함할 수 있다.
멀티미디어 어셈블리(708)는 상기 장치(700) 및 사용자 사이에 하나의 출력 인터페이스를 제공하는 스크린을 포함한다. 일부 실시예에 있어서, 스크린은 액정 디스플레이（LCD） 및 터치 패널（TP）을 포함한다. 만약 스크린이 터치 패널을 포함하면, 스크린은 터치 스크린으로 구현되어 사용자로부터의 입력 신호를 수신할 수 있다. 터치 패널은 하나 또는 복수의 터치 센서를 포함하여 터치, 슬라이드 및 터치 패널 상의 제스처를 감지할 수 있다. 상기 터치 센서는 터치 및 슬라이드 동작의 경계를 감지할 수 있을 뿐만 아니라, 상기 터치 또는 슬라이드 동작에 관련된 지속 시간 및 압력을 감지할 수도 있다. 일부 실시예에 있어서, 멀티미디어 어셈블리(708)는 하나의 제1 카메라 및 제2 카메라 중의 적어도 하나를 포함한다. 장치(700)가 조작 모드 예를 들어 촬영 모드 또는 영상 촬영 모드에 처할 경우, 제1 카메라 및 제2 카메라 중의 적어도 하나는 외부 멀티미디어 데이터를 수신할 수 있다. 각각의 제1 카메라 및 제2 카메라는 하나의 고정된 광학 렌즈 시스템이거나 또는 초점 거리 및 광학 줌 기능을 구비할 수 있다.
오디오 어셈블리(710)는 오디오 신호의 출력 및 입력 중의 적어도 하나를 수행하도록 배치된다. 예를 들어, 오디오 어셈블리(710)는 하나의 마이크로폰（MIC）을 포함하고, 장치(700)가 조작 모드 예를 들어 발신 모드, 기록 모드 및 음성 인식 모드에 처할 경우, 마이프로폰은 외부 오디오 신호를 수신하도록 배치된다. 수신된 오디오 신호는 나아가 메모리(704)에 저장되거나 또는 통신 어셈블리(716)를 거쳐 송신될 수 있다. 일부 실시예에 있어서, 오디오 어셈블리(710)는 오디오 신호를 출력하기 위한 하나의 스피커를 포함한다.
I/O인터페이스(712)는 처리 어셈블리(702) 및 주변기기 인터페이스 모듈 사이에 제공되는 인터페이스이고, 상기 주변 인터페이스 모듈은 키보드, 클릭휠, 버튼 등일 수 있다. 이러한 버튼은 홈버튼, 볼륨 버튼, 시작 버튼 및 잠금 버튼을 포함하나 이에 한정되지 않는다.
센서 어셈블리(714)는 각종 방면의 상태를 제공하기 위한 하나 또는 복수의 센서를 포함한다. 예를 들어, 센서 어셈블리(714)는 장치(700)의 온/오프 상태, 어셈블리의 상대적인 위치 결정을 감지하고, 예를 들어 상기 어셈블리는 장치(700)의 디스플레이 및 키패드이며, 센서 어셈블리(714)는 장치(700) 또는 장치(700)의 하나의 어셈블리의 위치 변화, 사용자와 장치(700)의 접촉 존재 여부, 장치(700)의 방위 또는 가속/감속 및 장치(700)의 온도 변화를 감지할 수도 있다. 센서 어셈블리(714)는 어떠한 물리적 접촉이 없이 근처에 물체 존재 여부를 감지하도록 배치되는 근접 센서를 포함할 수 있다. 센서 어셈블리(714)는 결상 응용에 사용되는 광 센서 예를 들어 CMOS 또는 CCD이미지 센서를 더 포함할 수 있다. 일부 실시예에 있어서, 해당 센서 어셈블리(714)는 가속도 센서, 자이로스코프 센서, 자기 센서, 압력 센서 또는 온도 센서를 더 포함할 수 있다.
통신 어셈블리(716)는 장치(700) 및 기타 기기 사이의 유선 또는 무선 방식의 통신에 편리하도록 배치된다. 장치(700)는 통신 표준에 따른 무선 네트워크 예를 들어 WiFi, 2G 또는 3G, 4G LTE, 5G NR 또는 그들의 조합에 접속할 수 있다. 일 예시적 실시예에 있어서, 통신 어셈블리(716)는 방송 채널을 거쳐 외부 방송 관리 시스템에서 발송하는 방송 정보 또는 방송 관련 정보를 수신한다. 일 예시적 실시예에 있어서, 상기 통신 어셈블리(716)는 근거리 통신을 추진하기 위해, 근거리 통신 모듈(NFC)을 더 포함한다. 예를 들어, NFC 모듈은 무선 주파수 식별(RFID) 기술, 적외선 통신 협회(IrDA) 기술, 초광대역(UWB) 기술, 블루투스(BT) 기술 및 기타 기술을 기반으로 구현될 수 있다.
예시적 실시예에 있어서, 장치(700)는 하나 또는 복수의 주문형 집적 회로(ASIC), 디지털 신호 프로세서(DSP), 디지털 신호 처리 장치(DSPD), 프로그램 가능 논리 장치(PLD), 필드 프로그램 가능 게이트 어레이(FPGA), 컨트롤러, 마이크로 컨트롤러, 마리크로 프로세서 또는 다른 전자 어셈블리에 의해 구현되어 상술한 임의의 실시예에 기재된 방법을 실행하는데 사용된다.
예시적 실시예에 있어서, 명령을 포함하는 비임시적 컴퓨터 판독 가능 저장 매체, 예를 들어 명령을 포함하는 메모리(704)를 포함하고, 상술한 명령은 장치(700)의 프로세서(720)를 통해 상술한 방법을 완성하도록 실행된다. 예를 들어, 상기 비임시적 컴퓨터 판독 가능 저장 매체는 ROM, 랜덤 액세스 메모리 （RAM）, CD-ROM, 자기 테이프, 플로피 디스켓 및 광학 데이터 저장 기기 등일 수 있다.
본 기술분야의 통상의 기술자는 명세서를 고려하고, 여기에서 개시한 발명을 실천한 후 본 개시의 가타 실시 방안을 용이하게 생각해낼 수 있다. 본 출원은 본 개시의 임의의 변형, 용도 또는 적용성 변화를 포함하는 것을 취지로 하고, 이러한 변형, 용도 또는 적용성 변화는 본 개시의 일반성 원리를 따르며, 본 개시에서 개시하지 않은 본 기술분야의 공지의 상식 또는 통상적인 기술수단을 포함한다. 명세서 및 실시예는 예시적인 것으로만 간주되고, 본 개시의 진정한 범위 및 요지는 하기의 청구항에 의해 지시된다.
본 개시는 이상에서 이미 서술하고 첨부 도면에서 도시한 정확한 구성에 한정되지 않고, 그 범위를 초과하지 않고 각종 수정 및 변경을 수행할 수 있는 것을 이해해야 한다. 본 개시의 범위는 오직 첨부되는 청구항에 의해 한정된다.
101: 이미지 수집 모듈
102: 목표 확정 모듈
103: 가상 생성 모듈
104: 이미지 표시 모듈

Claims (12)

  1. 제1 카메라 및 제2 카메라를 포함하는 전자 기기에 적용되는 이미지 표시 방법에 있어서,
    상기 방법은
    상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하는 단계,
    상기 제1 실시간 이미지 중의 목표 물체를 확정하는 단계,
    상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하는 단계,
    상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계, 및
    상기 목표 물체가 상기 전자 기기의 사용자일 경우, 상기 목표 물체의 지체 관절을 결정하고 상기 지체 관절에 앵커 포인트를 첨가하며, 상기 앵커 포인트의 운동에 기초하여 상기 목표 물체의 상기 실시간 가상 이미지를 생성하는 단계
    를 포함하는 것을 특징으로 하는 이미지 표시 방법.
  2. 제1항에 있어서,
    상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하기 전에, 상기 방법은
    각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하는 단계 및
    상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하는 단계를 더 포함하고,
    여기서, 상기 상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계는
    상기 실시간 가상 이미지와 서로 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하는 단계를 포함하는 것을 특징으로 하는 방법.
  3. 제1항에 있어서,
    상기 방법은
    상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  4. 제1항에 있어서,
    상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지인 것을 특징으로 하는 방법.
  5. 제1항에 있어서,
    상기 제1 카메라는 전면 카메라이고, 상기 제2 카메라는 후면 카메라이거나
    또는, 상기 제1 카메라는 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라는 회전 가능한 카메라인 것을 특징으로 하는 방법.
  6. 제1 카메라 및 제2 카메라를 포함하는 전자 기기에 적용되는 이미지 표시 장치에 있어서,
    상기 장치는
    상기 제1 카메라를 통해 수집한 제1 실시간 이미지 및 상기 제2 카메라를 통해 수집한 상기 제1 실시간 이미지와 서로 다른 제2 실시간 이미지를 획득하도록 배치되는 이미지 수집 모듈,
    상기 제1 실시간 이미지 중의 목표 물체를 확정하도록 배치되는 목표 확정 모듈,
    상기 목표 물체에 대응되는 실시간 가상 이미지를 생성하도록 배치되는 가상 생성 모듈 및
    상기 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치되는 이미지 표시 모듈을 포함하고,
    상기 목표 물체가 상기 전자 기기의 사용자일 경우, 상기 목표 물체의 지체 관절을 결정하고 상기 지체 관절에 앵커 포인트를 첨가하며, 상기 앵커 포인트의 운동에 기초하여 상기 목표 물체의 상기 실시간 가상 이미지를 생성하도록 구성되는 것을 특징으로 하는 이미지 표시 장치.
  7. 제6항에 있어서,
    상기 장치는
    각각의 상기 제1 실시간 이미지를 수집한 타임 스탬프 및 각각의 상기 제2 실시간 이미지를 수집한 타임 스탬프를 기록하도록 배치되는 시간 기록 모듈 및
    상기 목표 물체가 있는 제1 실시간 이미지의 타임 스탬프에 따라, 상기 실시간 가상 이미지의 타임 스탬프를 설정하도록 배치되는 시간 설정 모듈을 더 포함하고,
    상기 이미지 표시 모듈은 상기 실시간 가상 이미지와 서로 같은 타임 스탬프를 구비하는 제2 실시간 이미지에 상기 실시간 가상 이미지를 중첩 표시하도록 배치되는 것을 특징으로 하는 장치.
  8. 제6항에 있어서,
    상기 장치는
    상기 실시간 가상 이미지가 표시되어 있는 상기 제2 실시간 이미지를 기록하도록 배치되는 영상 기록 모듈을 더 포함하는 것을 특징으로 하는 장치.
  9. 제6항에 있어서,
    상기 실시간 가상 이미지는 3차원 이미지 또는 2차원 이미지인 것을 특징으로 하는 장치.
  10. 제6항에 있어서,
    상기 제1 카메라가 전면 카메라이고, 상기 제2 카메라가 후면 카메라이거나,
    또는, 상기 제1 카메라가 전면 카메라 또는 후면 카메라이고, 상기 제2 카메라가 회전 가능한 카메라인 것을 특징으로 하는 장치.
  11. 제1항 내지 제5항 중 어느 한 항에 기재된 방법을 구현하도록 배치되는 프로세서를 포함하는 것을 특징으로 하는 전자 기기.
  12. 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독 가능 저장 매체에 있어서,
    상기 프로그램이 프로세서에 의해 실행될 경우, 제1항 내지 제5항 중 어느 한 항에 기재된 방법의 단계를 구현하는 것을 특징으로 하는 컴퓨터 판독 가능 저장 매체.
KR1020200165615A 2020-05-29 2020-12-01 이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체 KR102557592B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010478138.8 2020-05-29
CN202010478138.8A CN113747113A (zh) 2020-05-29 2020-05-29 图像显示方法及装置、电子设备、计算机可读存储介质

Publications (2)

Publication Number Publication Date
KR20210147843A KR20210147843A (ko) 2021-12-07
KR102557592B1 true KR102557592B1 (ko) 2023-07-20

Family

ID=73497624

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200165615A KR102557592B1 (ko) 2020-05-29 2020-12-01 이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체

Country Status (5)

Country Link
US (1) US11308702B2 (ko)
EP (1) EP3916683A1 (ko)
JP (1) JP7160887B2 (ko)
KR (1) KR102557592B1 (ko)
CN (1) CN113747113A (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116091675B (zh) * 2023-04-06 2023-06-30 腾讯科技（深圳）有限公司 一种图像处理方法、装置、设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070064813A1 (en) * 2005-09-16 2007-03-22 Terayon Communication Systems, Inc., A Delaware Corporation Distributed synchronous program superimposition
KR102022559B1 (ko) * 2019-05-23 2019-09-18 주식회사 티슈 듀얼 카메라를 이용한 무배경 이미지 촬영과 이를 이용한 합성사진 촬영 방법 및 컴퓨터 프로그램

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007060446A (ja) * 2005-08-26 2007-03-08 Sony Corp メタデータ生成装置、情報処理装置、撮像装置、テレビ会議システム、セキュリティシステム、メタデータ生成方法及びプログラム
JP2007259263A (ja) * 2006-03-24 2007-10-04 Canon Inc 画像処理方法、画像処理装置、プログラム、および記憶媒体
US7855737B2 (en) * 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
KR102079097B1 (ko) * 2013-04-09 2020-04-07 삼성전자주식회사 투명 디스플레이를 이용한 증강현실 구현 장치 및 그 방법
US9354702B2 (en) * 2013-06-03 2016-05-31 Daqri, Llc Manipulation of virtual object in augmented reality via thought
EP3374915B1 (en) * 2016-03-01 2021-06-30 Google LLC Facial template and token pre-fetching in hands free service requests
KR101802308B1 (ko) * 2016-05-02 2017-11-29 홍익대학교세종캠퍼스산학협력단 실시간 사용자 시각에 대응되는 3차원 증강 현실 영상 시현 장치 및 복수의 사용자가 동시 참여하는 3차원 증강 현실 구현 시스템
CN106454079B (zh) * 2016-09-28 2020-03-27 北京旷视科技有限公司 图像处理方法及装置和相机
US10504003B1 (en) * 2017-05-16 2019-12-10 State Farm Mutual Automobile Insurance Company Systems and methods for 3D image distification
US10210648B2 (en) * 2017-05-16 2019-02-19 Apple Inc. Emojicon puppeting
US10627985B2 (en) * 2017-06-16 2020-04-21 Lenovo (Singapore) Pte. Ltd. Manipulation of a virtual object during a conversational session
CN108093171A (zh) * 2017-11-30 2018-05-29 努比亚技术有限公司 一种拍照方法、终端及计算机可读存储介质
CN108416832A (zh) * 2018-01-30 2018-08-17 腾讯科技（深圳）有限公司 媒体信息的显示方法、装置和存储介质
CN109146949B (zh) * 2018-09-05 2019-10-22 天目爱视（北京）科技有限公司 一种基于视频数据的3d测量及信息获取装置
US10944959B2 (en) * 2018-11-12 2021-03-09 Open Space Labs, Inc. Automated spatial indexing of images to video
CN109274983A (zh) * 2018-12-06 2019-01-25 广州酷狗计算机科技有限公司 进行直播的方法和装置
US11223855B2 (en) * 2019-09-18 2022-01-11 Loop Now Technologies Inc. System and method of real-time video overlaying or superimposing display

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070064813A1 (en) * 2005-09-16 2007-03-22 Terayon Communication Systems, Inc., A Delaware Corporation Distributed synchronous program superimposition
KR102022559B1 (ko) * 2019-05-23 2019-09-18 주식회사 티슈 듀얼 카메라를 이용한 무배경 이미지 촬영과 이를 이용한 합성사진 촬영 방법 및 컴퓨터 프로그램

Also Published As

Publication number Publication date
JP2021190076A (ja) 2021-12-13
US11308702B2 (en) 2022-04-19
KR20210147843A (ko) 2021-12-07
JP7160887B2 (ja) 2022-10-25
EP3916683A1 (en) 2021-12-01
CN113747113A (zh) 2021-12-03
US20210375051A1 (en) 2021-12-02

Similar Documents

Publication Publication Date Title
KR102194094B1 (ko) 가상과 실제 물체의 합성 방법, 장치, 프로그램 및 기록매체
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
CN108495032B (zh) 图像处理方法、装置、存储介质及电子设备
KR102018887B1 (ko) 신체 부위 검출을 이용한 이미지 프리뷰
CN106165430A (zh) 视频直播方法及装置
KR20210133112A (ko) 비디오 처리 방법, 장치 및 저장 매체
KR20140106333A (ko) 이미지 센서 위치를 이용한 이미지 영역 설정 장치 및 방법
CN104243818A (zh) 图像处理方法、装置及设备
CN105141942B (zh) 3d图像合成方法及装置
CN108632543B (zh) 图像显示方法、装置、存储介质及电子设备
CN109922252B (zh) 短视频的生成方法及装置、电子设备
JP7110443B2 (ja) 撮影方法及び撮影装置、電子機器、記憶媒体
CN114009003A (zh) 图像采集方法、装置、设备及存储介质
CN106534649A (zh) 双旋转摄像头的构图方法、装置和移动终端
CN104035674A (zh) 图片显示方法和装置
WO2018053722A1 (zh) 全景照片拍摄方法及装置
CN109218709B (zh) 全息内容的调整方法及装置和计算机可读存储介质
KR102557592B1 (ko) 이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체
CN108924529B (zh) 图像显示的控制方法及装置
CN117409119A (zh) 基于虚拟形象的画面显示方法、装置以及电子设备
CN111586296B (zh) 图像拍摄方法、图像拍摄装置及存储介质
CN113286073A (zh) 拍摄方法、拍摄装置及存储介质
CN114078280A (zh) 动作捕捉方法、装置、电子设备及存储介质
JP2015019215A (ja) 撮像装置及び撮像方法
WO2023225910A1 (zh) 视频显示方法及装置、终端设备及计算机存储介质

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant