KR102270723B1 - 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치 - Google Patents

한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치 Download PDF

Info

Publication number
KR102270723B1
KR102270723B1 KR1020200039170A KR20200039170A KR102270723B1 KR 102270723 B1 KR102270723 B1 KR 102270723B1 KR 1020200039170 A KR1020200039170 A KR 1020200039170A KR 20200039170 A KR20200039170 A KR 20200039170A KR 102270723 B1 KR102270723 B1 KR 102270723B1
Authority
KR
South Korea
Prior art keywords
layer
size
image
mapped
elements
Prior art date
Application number
KR1020200039170A
Other languages
English (en)
Inventor
김용택
Original Assignee
(주)클라모스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)클라모스 filed Critical (주)클라모스
Priority to KR1020200039170A priority Critical patent/KR102270723B1/ko
Application granted granted Critical
Publication of KR102270723B1 publication Critical patent/KR102270723B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/222—Control of the character-code memory
    • G09G5/227—Resolution modifying circuits, e.g. variable screen formats, resolution change between memory contents and display screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
    • H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
    • H04N7/56—Synchronising systems therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 디스플레이하는 방법 및 장치가 개시된다. 본 발명의 일실시예에 따른 위치 및 크기가 동적인 적어도 하나 이상의 영상을 표시하는 방법은, 각각의 영상을 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하는 단계, 상기 제1 레이어에 새로 맵핑된 요소에 대응하는 영상의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 제2 레이어에 맵핑하여 표시하는 단계, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하는 단계, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계, 현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하는 단계, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 단계 및 위치 변경이 반영된 영상을 포함한 전체 영상을 화면에 표시하는 단계를 포함한다.

Description

한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치{METHOD AND APPARATUS FOR DISPLAYING A MULTIPLE IMAGES OF VARYING LOCATION AND SIZE USING LIMITED RESOURCES}
본 발명은 영상을 디스플레이하는 기술에 관한 것으로, 특히 한정된 자원을이용하여 위치 및 크기가 동적으로 변화하는 복수의 영상을 표시하기 위한 기술에 관한 것이다.
스마트폰 및 태블릿 컴퓨터 등과 같은 많은 전자 장치들은 이미지를 촬영할 수 있는 카메라와 이미지를 디스플레이할 수 있는 화면을 갖는다. 전자 장치를 이용하여 촬영된 이미지들을 보는 경우, 전자 장치는 촬영된 이미지들을 모두 동일한 사이즈로 디스플레이한다. 모든 촬영된 이미지들이 동인한 사이즈로 디스플레이되는 경우, 사용자는 많은 정보(예를 들어, 이미지 안에 많은 사람들)가 있는 이미지들을 명확하게 볼 수 없다. 사진 앨범에서 썸네일이 디스플레이되는 경우, 썸네일 이미지들은 각각의 썸네일 이미지 내의 정보(예: 이미지 안의 사람 수)가 충분히 사용자에게 인식될 수 있도록 크기가 변경되지 않는다. 즉, 각 이미지들의 크기나 위치가 필요에 따라 변경되거나 재배열될 수 있는 기술이 필요하다.
일 예로, 한국등록특허 제10-1716109호 (등록일: 2017년 3월 8일) "복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템"에는 하나의 카메라에 의해 서로 다른 시간에 촬영된 복수 개의 영상을 하나의 화면을 통해 동시에 재생할 수 있는 기술이 공개된 바 있다. 하지만, 이러한 기술은 서로 다른 시간에 촬영된 복수의 영상을 하나의 화면을 분할하여 재생할 뿐, 크기나 위치가 실시간으로 변경되는 등의 동적인 재생이 불가능하다는 한계가 있다.
한국 등록 특허 제10-1716109호, 2017년 3월 8일 등록(명칭: 복수의 영상의시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템)
본 발명의 목적은 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 시스템을 구현하는 것이다.
상기한 목적을 달성하기 위한 본 발명의 일실시예에 따른 위치 및 크기가 동적인 적어도 하나 이상의 영상을 표시하는 방법은 각각의 영상을 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하는 단계, 상기 제1 레이어에 새로 맵핑된 요소에 대응하는 영상의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 제2 레이어에 맵핑하여 표시하는 단계, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하는 단계, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계, 현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하는 단계, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 단계, 및 위치 변경이 반영된 영상을 포함한 전체 영상을 화면에 표시하는 단계를 포함한다.
이 때, 상기 영상 표시 방법은, 외부 장치 또는 외부 서버로부터 상기 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수를 수신하는 단계를 더 포함할 수 있다.
이 때, 상기 제1 레이어에 맵핑하는 단계는, 상기 영상 데이터, 크기 함수, 위치 함수를 기반으로 현재 시점의 각각의 영상의 크기값 및 위치값을 계산하고, 이를 기반으로 상기 요소를 상기 제1 레이어에 맵핑할 수 있다.
이 때, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계는, 상기 제2 레이어의 영상들 중 크기가 변경된 요소에 대응하는 영상의 크기를 변경된 요소의 크기로 동기할 수 있다.
이 때, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계는, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기에 대한 모니터링 결과, 크기 변화가 발생한 경우에 수행될 수 있다.
이 때, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 단계는, 상기 제1 레이어에 맵핑된 모든 요소들의 위치에 대한 모니터링 결과, 위치 변화가 발생한 경우에 수행될 수 있다.
본 발명의 다른 일실시예에 따른 위치 및 크기가 동적인 적어도 하나 이상의 영상을 표시하는 장치는 각각의 영상을 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하고, 상기 제1 레이어에 새로 맵핑된 요소의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 제2 레이어에 맵핑하여 표시하고, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하고, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하고, 현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하고, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하고, 위치 변경이 반영된 영상을 포함한 전체 영상을 화면에 표시하는 프로세서; 및 상기 요소들의 크기, 요소들의 위치 중 적어도 하나를 저장하는 메모리를 포함한다.
이 때, 상기 영상 표시 장치는, 외부 장치 또는 외부 서버로부터 상기 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수를 수신하는 입출력부를 더 포함할 수 있다.
이 때, 상기 프로세서는, 상기 영상 데이터, 크기 함수, 위치 함수를 기반으로 현재 시점의 각각의 영상의 크기값 및 위치값을 계산하고, 이를 기반으로 상기 요소를 상기 제1 레이어에 맵핑할 수 있다.
이 때, 상기 프로세서는, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영할 때, 상기 제2 레이어의 영상들 중 크기가 변경된 요소에 대응하는 영상의 크기를 변경된 요소의 크기로 동기화할 수 있다.
이 때, 상기 프로세서는, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기에 대한 모니터링 결과, 크기 변화가 발생한 경우에, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영할 수 있다.
이 때, 상기 프로세서는, 상기 제1 레이어에 맵핑된 모든 요소들의 위치에 대한 모니터링 결과, 위치 변화가 발생한 경우에, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영할 수 있다.
본 발명에 따르면, 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 디스플레이하는 시스템을 구현할 수 있다.
도 1은 본 발명의 일실시예에 따른 한정된 자원을 사용하는 표출 영역에서 요소들이 이동할 때, 이에 대응하는 영상들이 함께 이동하는 일예를 나타낸다.
도 2는 본 발명의 일실시예에 따른 영상 표시 장치의 구성을 나타내는 블록도이다.
도 3은 본 발명의 일실시예에 따른 영상 표시 장치에서 영상 표출 레이어의 영상들이 요소 표출 레이어의 요소들에 동기화되는 일예를 나타낸다.
도 4는 본 발명의 일실시예에 따른 영상 표시 장치에 의해 영상의 크기 및 위치가 보정되는 일예를 나타낸다.
도 5는 본 발명의 일실시예에 따른 영상 표시 장치의 동작 순서를 나타내는 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 영상 표시 장치의 동작 순서를 나타내는 흐름도이다.
도 7은 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 블록도이다.
본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 한정된 자원을 사용하는 표출 영역에서 요소들이 이동할 때, 이에 대응하는 영상들이 함께 이동하는 일예를 나타낸다.
도 1을 참조하면, 한정된 자원을 사용하는 표출 영역에서 움직이는 요소들(E1, E2, E3)이 있고, 각 요소들은 이들에 대응하는 표시하는 영상들(V1, V2, V3)이 있다.
제1 요소(E1)가 제1 위치(110)에서 제3 위치(114)로 이동하면, 상기 제1 요소(E1)에 대응하는 제1 영상(V1)은 제2 위치(112)에서 제4 위치(116)으로 제1 요소(E1)를 따라 이동한다.
또한, 제2 요소(E2)가 제5 위치(120)에서 제7 위치(124)로 이동하면, 상기 제2 요소(E2)에 대응하는 제2 영상(V2)는 제6 위치(122)에서 제8 위치(126)으로 제2 요소(E2)를 따라 이동한다.
마찬가지로, 제3 요소(E3)가 제9 위치(130)에서 제11 위치(134)로 이동하면, 상기 제3 요소(E3)에 대응하는 제3 영상(V3)은 제10 위치(132)에서 제12 위치(136)로 제3 요소(E3)를 따라 이동한다.
도 1의 한정된 자원을 사용하는 표출 영역에서는 각 요소들이 움직이면, 이에 대응하는 영상들은 부드럽게 재생되면서 따라 움직일 수 있다.
도 2는 본 발명의 일실시예에 따른 영상 표시 장치의 구성을 나타내는 블록도이다.
도 2를 참조하면, 본 실시예에 따른 영상 표시 장치(200)는 수신부(210), 프로세서(220), 메모리(260), 디스플레이부(270)를 포함한다.
수신부(210)는 외부 장치 또는 외부 서버로부터 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수 중 적어도 하나를 수신한다.
프로세서(220)는 본 발명에 따른 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 디스플레이하는 동작과 관련된 모든 과정을 처리한다.
프로세서(220)는 요소 처리부(225), 동기화부(227), 영상 처리부(230)를 포함한다.
요소 처리부(225)는 수신부(210)를 통하여 수신한 영상 데이터, 크기 함수, 위치 함수를 기반으로 각각의 영상에 대한 크기값 및 위치값을 계산하고, 영상에 대한 크기값 및 위치값을 각각의 요소로서 요소 표출 레이어에 실시간으로 맵핑한다.
동기화부(227)는 요소 표출 레이어의 요소들을 실시간으로 모니터링하여, 요소들의 크기 또는 위치가 변경되면 영상 처리부(230)에 변경된 값을 알려준다.
영상 처리부(230)는 동기화부(227)에서 요소 표출 레이어의 요소들의 실시간 크기 또는 위치에 대한 변경사항을 수신하여 영상 표출 레이어의 영상들에 변경사항을 반영한다.
영상 처리부(230)는 복수의 크기 보정 모듈(240) 및 위치 보정 모듈(250)을 포함하고, 크기 보정 모듈(240)은 제1 크기 보정 모듈(241) 및 제2 크기 보정 모듈(242) 등을 포함한다.
크기 보정 모듈(240)은 요소 표출 레이어의 요소들의 크기가 변경되면, 이에 대응하는 영상들의 크기를 변경한다.
크기 보정 모듈(240)은 요소 표출 레이어의 요소들의 개수와 동일한 수의 크기 보정 모듈(240)이 생성될 수 있으며, 각각의 크기 보정 모듈(241, 242)들은 각각의 영상의 크기를 대응하는 요소들의 크기에 따라서 보정한다.
위치 보정 모듈(250)은 요소 표출 레이어의 요소들의 위치가 변경되면, 이에 대응하는 영상들의 위치를 변경한다.
메모리(260)는 영상 데이터, 크기 함수, 위치 함수, 요소들의 크기, 요소들의 위치 중 적어도 하나를 저장한다.
디스플레이부(270)는 요소들의 크기 및 위치 변화에 따라 크기 및 위치가 변경된 영상을 화면에 표시한다.
도 3은 본 발명의 일실시예에 따른 영상 표시 장치에서 영상 표출 레이어의 영상들이 요소 표출 레이어의 요소들에 동기화되는 일예를 나타낸다.
도 3을 참조하면, 요소 표출 레이어(310)에는 영상의 크기 및 위치를 나타내는 요소들이 맵핑되어 있으며, 영상 표출 레이어(330)에는 요소 표출 레이어(310)의 각 요소에 대응하는 영상들이 맵핑되어 있다.
이 때, 요소 표출 레이어(310)의 요소의 위치가 변경되면, 위치 보정 모듈(350)은 해당하는 요소의 위치 변경을 식별하여 영상 표출 레이어(330)의 대응하는 영상의 위치를 이에 동기화되도록 업데이트하고, 크기 보정 모듈(370)은 해당하는 요소의 크기 변경을 식별하여 영상 표출 레이어(330)의 대응하는 영상의 크기를 이에 동기화되도록 업데이트한다.
도 4는 본 발명의 일실시예에 따른 영상 표시 장치에 의해 영상의 크기 및 위치가 보정되는 일예를 나타낸다.
도 4를 참조하면, 본 발명의 일실시예에 따른 영상 표시 장치는 복수의 크기 보정 모듈(410, 412, 414) 및 하나의 위치 보정 모듈(450)을 포함한다.
크기 보정 모듈(410, 412, 414)은 영상의 개수만큼 영상 표시 장치 내에 생성될 수 있으며, 예를 들어, 도 4와 같이 3개의 크기 보정 모듈(410, 412, 414)이 생성될 수 있다.
크기 보정 모듈(410, 412, 414)은 한 영상에 대하여 여러 크기의 영상 입력을 받는다. 예를 들어, 제1 크기 보정 모듈(410)은 크기 1, 크기 2, ??, 크기 N의 입력을 받을 수 있다.
한 영상에 대하여 여러 크기의 영상 입력을 받은 크기 보정 모듈(410, 412, 414)은 제1 레이어를 모니터링하고 있는 동기화부로부터 각각의 크기 보정 모듈(410, 412, 414)에 대응하는 요소의 크기 변경에 대한 정보를 수신한다. 이 때, 각각의 요소의 크기는 기수신된 크기의 정보들 중 하나일 수 있으며, 예를 들어, 제1 크기 보정 모듈(410)이 수신하는 요소의 크기 정보는 크기 1, 크기 2, ??, 크기 N 중 하나일 수 있다. 크기 보정 모듈(410, 412, 414)은 해당하는 요소의 크기를 동기화부로부터 수신한 변경된 크기로 보정하여 출력한다.
이 때, 크기 보정 모듈(410, 412, 414)은 화면 변화량, 사용 가능 자원(CPU, Memory), 표출 최적 크기 기반으로 훈련된 ANN(Artificial Nerual Network)으로 만들어진 '훈련된 인공신경망 모델'을 사용하여 보정된 출력을 계산할 수 있다.
한편, 위치 보정 모듈(450)은 복수개의 크기 보정 모듈(410, 412, 414)로부터 영상을 입력받고, 동기화부로부터 요소들의 위치 변경에 대한 정보를 수신하여, 해당하는 요소들의 위치를 동기화부로부터 수신한 변경된 위치로 보정하여 출력한다.
이 때, 위치 보정 모듈(450)은 위치가 변경된 여러 개의 영상의 위치를 변경하고, 위치 변경이 반영된 영상을 포함한 전체 영상을 통합하여 하나의 출력으로 출력한다.
이 때, 위치 보정 모듈(450)은 영상 합병 기능을 통해 위치가 보정된 여러 개의 영상을 합친 영상을 계산하여 출력할 수 있다.
도 5는 본 발명의 일실시예에 따른 영상 표시 장치의 동작 순서를 나타내는 흐름도이다. 이 때, 도 5의 실시예에 따른 과정은 도 2의 영상 표시 장치(200)에 의해 수행될 수 있다.
도 5를 참조하면, 영상 표시 장치(200)는 외부 장치 또는 외부 서버로부터 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수 중 적어도 하나를 수신한다(S510).
이 때, 상기 S510의 동작은 영상 표시 장치(200)의 수신부(210)에 의해 수행될 수 있다.
영상 표시 장치(200)는 단계 S510에 의해 수신한 영상 데이터, 크기 함수, 위치 함수를 기반으로, 각각의 영상에 대한 크기값 및 위치값을 계산하고, 각각의 영상을 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑한다(S520).
도 6은 본 발명의 다른 실시예에 따른 영상 표시 장치의 동작 순서를 나타내는 흐름도이다. 이 때, 도 6의 실시예에 따른 과정은 도 2의 영상 표시 장치(200)에 의해 수행될 수 있다.
도 6을 참조하면, 영상 표시 장치(200)는 제1 레이어에 새로 맵핑된 요소에 대응하는 영상의 초기 크기, 초기 위치, 구성 가능한 모든 크기 데이터 값을 수신한다(S610).
영상 표시 장치(200)는 제1 레이어에 새로 맵핑된 요소에 대응하는 영상의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 제2 레이어에 맵핑하여 표시한다(S620).
영상 표시 장치(200)는 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링한다(S630).
영상 표시 장치(200)는 단계 S630의 모니터링 결과, 요소들의 크기에 변화가 발생하였는지 여부를 판단한다(S640).
이 때, 상기 요소들의 크기에 대한 모니터링(S630) 및 크기 변화 발생에 대한 판단(S640)은 영상 표시 장치(200)의 동기화부(227)에서 수행될 수 있다.
단계 S640의 판단 결과, 요소들의 크기에 변화가 발생한 경우, 영상 표시 장치(200)는 제1 레이어의 요소의 크기 변경 사항을 제2 레이어에 반영한다(S650).
이 때, 단계 S650의 동작은 크기 보정 모듈(240)에 의해 수행될 수 있으며, 각각의 크기 보정 모듈(241, 242, ??)은 각각의 크기 보정 모듈(241, 242, ??)에 할당된 하나의 영상의 크기를 보정할 수 있다.
이 때, 영상의 크기에 대한 보정은 화면 변화량, 사용 가능 자원(CPU, Memory), 표출 최적 크기 기반으로 훈련된 ANN(Artificial Nerual Network)로 만들어진 훈련된 인공신경망 모델을 사용하여 보정된 출력을 계산할 수 있다.
영상 표시 장치(200)는 제1 레이어에 맵핑된 각각의 요소들의 위치를 모니터링한다(S660).
영상 표시 장치(200)는 단계 S660의 모니터링 결과, 요소들의 위치에 변화가 발생하였는지 여부를 판단한다(S670).
이 때, 상기 요소들의 위치에 대한 모니터링(S660) 및 위치 변화 발생에 대한 판단(S670)은 영상 표시 장치(200)의 동기화부(227)에서 수행될 수 있다.
단계 S670의 판단 결과, 요소들의 위치에 변화가 발생한 경우, 영상 표시 장치(200)는 제1 레이어의 위치 변경 사항을 제2 레이어에 반영한다(S680).
도 7은 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 블록도이다.
도 7을 참조하면, 본 발명의 실시예는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템에서 구현될 수 있다. 도 7에 도시된 바와 같이, 컴퓨터 시스템은 입출력부(710), 프로세서(730), 메모리(750)를 포함한다.
입출력부(710)는 프로세서(730)와 연결되어, 영상 표시 장치의 영상 표시 방법에 필요한 정보를 송신 및/또는 수신한다. 예를 들어, 입출력부(710)는 외부 장치 또는 외부 서버로부터 상기 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수 중 적어도 하나를 수신할 수 있다.
프로세서(730)는 본 명세서에서 제안된 영상 표시 방법을 구현한다. 구체적으로 프로세서(730)는 본 명세서에서 게시된 실시예에서 설명된 영상 표시 장치의 모든 동작을 구현하며, 도 5, 6에 따른 영상 표시 장치의 모든 동작을 수행한다.
예를 들어, 프로세서(730)는 각각의 영상을 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하고, 상기 제1 레이어에 새로 맵핑된 요소의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 제2 레이어에 맵핑하여 표시하고, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하고, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하고, 현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하고, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하고, 위치 변경이 반영된 영상을 포함한 전체 영상을 화면에 표시할 수 있다.
이 때, 프로세서(730)는, 상기 영상 데이터, 크기 함수, 위치 함수를 반으로 현재 시점의 각각의 영상의 크기값 및 위치값을 계산하고, 이를 기반으로 상기 요소를 상기 제1 레이어에 맵핑할 수 있다.
이 때, 프로세서(730)는, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영할 때, 상기 제2 레이어의 영상들 중 크기가 변경된 요소에 대응하는 영상의 크기를 변경된 요소의 크기로 동기화할 수 있다.
이 때, 프로세서(730)는, 상기 제1 레이어에 맵핑된 각각의 요소들의 크기에 대한 모니터링 결과, 크기 변화가 발생한 경우에, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영할 수 있다.
이 때, 영상의 크기에 대한 보정은 화면 변화량, 사용 가능 자원(CPU, Memory), 표출 최적 크기 기반으로 훈련된 ANN(Artificial Nerual Network)로 만들어진 훈련된 인공신경망 모델을 사용하여 보정된 출력을 계산할 수 있다.
이 때, 프로세서(730)는, 상기 제1 레이어에 맵핑된 모든 요소들의 위치에 대한 모니터링 결과, 위치 변화가 발생한 경우에, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영할 수 있다.
메모리(750)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 이 때, 메모리(750)는 영상 데이터, 크기 함수, 위치 함수, 요소들의 크기, 요소들의 위치 중 적어도 하나를 저장한다.
이상에서와 같이 본 발명에 따른 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 디스플레이하는 방법 및 장치는 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (12)

  1. 위치 및 크기가 동적인 적어도 하나 이상의 영상을 하나의 화면에 표시하는 방법에 있어서,
    각각의 영상을 상기 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하는 단계;
    상기 제1 레이어에 새로 맵핑된 요소에 대응하는 영상의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 상기 화면에 대응하는 제2 레이어에 맵핑하여 표시하는 단계;
    상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하는 단계;
    상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계;
    현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하는 단계; 및
    상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 단계
    를 포함하는 영상 표시 방법.
  2. 제1항에 있어서, 상기 영상 표시 방법은,
    외부 장치 또는 외부 서버로부터 상기 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수 중 적어도 하나를 수신하는 단계를 더 포함하는 것을 특징으로 하는 영상 표시 방법.
  3. 제2항에 있어서, 상기 제1 레이어에 맵핑하는 단계는,
    상기 영상 데이터, 크기 함수, 위치 함수를 기반으로 현재 시점의 각각의 영상의 크기값 및 위치값을 계산하고, 이를 기반으로 상기 요소를 상기 제1 레이어에 맵핑하는 것을 특징으로 하는 영상 표시 방법.
  4. 제1항에 있어서, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계는,
    상기 제2 레이어의 영상들 중 크기가 변경된 요소에 대응하는 영상의 크기를 변경된 요소의 크기로 동기화하는 것을 특징으로 하는 영상 표시 방법.
  5. 제1항에 있어서, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 단계는,
    상기 제1 레이어에 맵핑된 각각의 요소들의 크기에 대한 모니터링 결과,크기 변화가 발생한 경우에 수행되는 것을 특징으로 하는 영상 표시 방법.
  6. 제1항에 있어서, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 단계는,
    상기 제1 레이어에 맵핑된 모든 요소들의 위치에 대한 모니터링 결과, 위치 변화가 발생한 경우에 수행되는 것을 특징으로 하는 영상 표시 방법.
  7. 위치 및 크기가 동적인 적어도 하나 이상의 영상을 하나의 화면에 표시하는 장치에 있어서,
    각각의 영상을 상기 화면에 표시하기 위한 크기 및 위치를 지시하는 요소를 제1 레이어에 맵핑하고,
    상기 제1 레이어에 새로 맵핑된 요소의 초기 크기 및 초기 위치값을 기반으로 상기 요소에 대응하는 영상을 상기 화면에 대응하는 제2 레이어에 맵핑하여 표시하고,
    상기 제1 레이어에 맵핑된 각각의 요소들의 크기를 모니터링하고,
    상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하고,
    현재 제1 레이어에 맵핑된 모든 요소들의 위치를 모니터링하고,
    상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 프로세서; 및
    상기 요소들의 크기, 요소들의 위치 중 적어도 하나를 저장하는 메모리
    를 포함하는 영상 표시 장치.
  8. 제7항에 있어서, 상기 영상 표시 장치는,
    외부 장치 또는 외부 서버로부터 상기 하나 이상의 영상에 대한 영상 데이터, 크기 함수, 위치 함수 중 적어도 하나를 수신하는 입출력부를 더 포함하는 것을 특징으로 하는 영상 표시 장치.
  9. 제8항에 있어서, 상기 프로세서는,
    상기 영상 데이터, 크기 함수, 위치 함수를 기반으로 현재 시점의 각각의 영상의 크기값 및 위치값을 계산하고, 이를 기반으로 상기 요소를 상기 제1 레이어에 맵핑하는 것을 특징으로 하는 영상 표시 장치.
  10. 제7항에 있어서, 상기 프로세서는,
    상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영할 때,
    상기 제2 레이어의 영상들 중 크기가 변경된 요소에 대응하는 영상의 크기를 변경된 요소의 크기로 동기화하는 것을 특징으로 하는 영상 표시 장치.
  11. 제7항에 있어서, 상기 프로세서는,
    상기 제1 레이어에 맵핑된 각각의 요소들의 크기에 대한 모니터링 결과,크기 변화가 발생한 경우에, 상기 제1 레이어의 요소의 크기 변경 사항을 상기 제2 레이어에 반영하는 것을 특징으로 하는 영상 표시 장치.
  12. 제7항에 있어서, 상기 프로세서는,
    상기 제1 레이어에 맵핑된 모든 요소들의 위치에 대한 모니터링 결과, 위치 변화가 발생한 경우에, 상기 제1 레이어의 요소들의 위치 변경 사항을 제2 레이어의 대응하는 영상들에 반영하는 것을 특징으로 하는 영상 표시 장치.
KR1020200039170A 2020-03-31 2020-03-31 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치 KR102270723B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200039170A KR102270723B1 (ko) 2020-03-31 2020-03-31 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200039170A KR102270723B1 (ko) 2020-03-31 2020-03-31 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치

Publications (1)

Publication Number Publication Date
KR102270723B1 true KR102270723B1 (ko) 2021-06-30

Family

ID=76602403

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200039170A KR102270723B1 (ko) 2020-03-31 2020-03-31 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치

Country Status (1)

Country Link
KR (1) KR102270723B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101251304B1 (ko) * 2012-11-26 2013-04-05 주식회사 누리콘 영상 제어 장치
KR101716109B1 (ko) 2015-11-25 2017-03-15 충북대학교 산학협력단 복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101251304B1 (ko) * 2012-11-26 2013-04-05 주식회사 누리콘 영상 제어 장치
KR101716109B1 (ko) 2015-11-25 2017-03-15 충북대학교 산학협력단 복수의 영상의 시간 동기화 방법 및 이러한 방법을 사용하는 멀티 영상 재생 시스템

Similar Documents

Publication Publication Date Title
CN106210861B (zh) 显示弹幕的方法及系统
CN100369461C (zh) 图像捕获设备、图像显示方法和程序
US10204398B2 (en) Image distortion transformation method and apparatus
US11153658B2 (en) Image display method and generating method, device, storage medium and electronic device
CN101681564B (zh) 内容生成系统、内容生成装置以及内容生成方法
CN110636353A (zh) 一种显示设备
US20080068562A1 (en) Image processing system, image processing method, and program product therefor
NO340415B1 (no) Anordning og program for generering av stereografisk billedfremvisning
US20130335594A1 (en) Enhancing captured data
US20150213577A1 (en) Zoom images with panoramic image capture
CN108897512B (zh) 图像发送方法及装置，拼接显示系统
JP2019057891A (ja) 情報処理装置、撮像装置、情報処理方法及びプログラム
US11076197B1 (en) Synchronization of multiple video-on-demand streams and methods of broadcasting and displaying multiple concurrent live streams
US20220308821A1 (en) Dividing method, distribution method, medium, server, system
CN113727154B (zh) 拼接屏的同步播放系统、方法、装置和存储介质
US9875571B2 (en) Image combining apparatus, terminal device, and image combining system including the image combining apparatus and terminal device
US9491447B2 (en) System for providing complex-dimensional content service using complex 2D-3D content file, method for providing said service, and complex-dimensional content file therefor
TW201724864A (zh) 彙總及瀏覽視訊內容之方法、裝置及安排
KR102270723B1 (ko) 한정된 자원을 이용하여 위치 및 크기가 동적인 복수의 영상을 표시하는 방법 및 장치
KR20130044062A (ko) 원격 영상정보 제공시스템
CN108156512B (zh) 一种视频播放控制方法及装置
KR101518696B1 (ko) 증강현실 컨텐츠의 생성 및 재생 시스템과, 이를 이용한 방법
CN115665472A (zh) 传输内容管控装置及方法
US20100045813A1 (en) Digital image capture device and video capturing method thereof
KR20200114348A (ko) 증강현실의 공간맵을 이용한 콘텐츠 공유 장치 및 그 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant