KR20160149141A

KR20160149141A - Electronic Apparatus displaying a plurality of images and image processing method thereof

Info

Publication number: KR20160149141A
Application number: KR1020160059731A
Authority: KR
Inventors: 아닐 아니쉬 파탄카르; 조이 보세
Original assignee: 삼성전자주식회사
Priority date: 2015-06-17
Filing date: 2016-05-16
Publication date: 2016-12-27
Also published as: CN107750369B; CN107750369A; KR102193567B1

Abstract

Disclosed is an electronic device, which comprises: a display which displays a plurality of images on a screen; and a processor which controls the display to: detect the number of objects included in each of the plurality of images; determine a scaling factor of each of the plurality of images based on the detected number of objects; resize one or more images of the plurality of images based on the determined scaling factor on each of the plurality of images; and reorder and display one or more layouts of the plurality of images and the display order based on the resized image, and an image processing method thereof. The present invention aims to provide a mechanism to control the display of a plurality of images in an electronic device.

Description

BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to an electronic device for displaying a plurality of images,

본 개시의 실시 예들은 전자 장치의 이미지 처리와 관련된 것이다. 더욱 구체적으로, 본 개시는 복수의 이미지들의 각 이미지에 포함된 오브젝트의 수에 따라 각각의 이미지의 크기가 변경되어 디스플레이되는 전자 장치 및 이의 이미지 처리 방법에 관한 것이다. Embodiments of the present disclosure relate to image processing of electronic devices. More particularly, the present disclosure relates to an electronic device and its image processing method in which the size of each image is changed and displayed according to the number of objects included in each image of the plurality of images.

스마트 폰 및 태블릿 컴퓨터 등과 같은 많은 전자 장치들은 이미지를 촬영할 수 있는 카메라를 가진다. 전자 장치를 이용하여 촬영된(captured) 이미지들을 보는 경우, 전자 장치는 촬영된 스마트 폰 및 태블릿 컴퓨터 등과 같은 많은 전자 장치들은 이미지를 촬영할 수 있는 카메라를 가진다. 전자 장치를 이용하여 촬영된(captured) 이미지들을 보는 경우, 전자 장치는 촬영된 이미지들을 모두 같은 사이즈로 디스플레이한다. 모든 촬영된 이미지들이 같은 사이즈로 디스플레이되는 경우, 사용자는 많은 정보(예를 들어, 이미지 안에 많은 사람들)가 있는 이미지들을 명확하게 볼 수 없다. 사진 앨범에서 썸네일이 보여지는 경우, 썸네일 이미지들은 각각의 썸네일 이미지 내의 정보(예: 이미 지 안의 사람 수)가 충분히(fully) 사용자에게 인식될 수 있도록 크기가 변경(resize)되지 않는다. 즉, 각 이미지 내에 나타난 정보 또는 콘텐츠를 바탕으로 이미지들의 크기를 변경하고, 이미지들을 재배열하여 디스플레이할 수 있는 메커니즘이 필요하다.Many electronic devices, such as smart phones and tablet computers, have cameras that can take images. When viewing images captured using an electronic device, the electronic device has a camera capable of taking images, many electronic devices, such as smartphones and tablet computers photographed. When viewing images captured using an electronic device, the electronic device displays all photographed images at the same size. When all the photographed images are displayed at the same size, the user can not clearly see the images with a lot of information (for example, many people in the image). When a thumbnail is displayed in a photo album, the thumbnail images are not resized so that the information in each thumbnail image (e.g., the number of people in the image) is fully perceived by the user. That is, there is a need for a mechanism capable of changing the size of images based on the information or content displayed in each image, and rearranging and displaying the images.

본 개시의 실시 예들의 목적은 전자 장치에서 복수의 이미지들의 디스플레이를 관리하기 위한 메커니즘을 제공하기 위한 것이다.It is an object of embodiments of the present disclosure to provide a mechanism for managing the display of a plurality of images in an electronic device.

본 개시의 실시 예들의 다른 목적은 이미지 내에 오브젝트들의 수를 검출하는 메커니즘을 제공하기 위한 것이다.It is another object of embodiments of the present disclosure to provide a mechanism for detecting the number of objects in an image.

본 개시의 실시 예들의 다른 목적은 각 이미지 내에 오브젝트들의 수를 바탕으로 각 이미지에 대한 본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 전자 장치에서 복수의 이미지가 디스플레이됨에 있어, 각 이미지에 포함된 오브젝트의 수를 바탕으로 이미지의 크기를 변경하여 디스플레이함으로써, 사용자에게 각 이미지에 포함된 정보를 더욱 명확하게 제공할 수 있는 전자 장치 및 그 방법을 제공함에 있다. It is another object of embodiments of the present disclosure to provide a method and apparatus for displaying images, each of which is based on the above described need for each image based on the number of objects in each image, The present invention provides an electronic apparatus and method that can more clearly provide information included in each image to a user by changing the size of the image based on the number of objects included in the image.

상술한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 이미지 처리를 수행하는 전자 장치는, 복수의 이미지를 하나의 화면에 디스플레이하는 디스플레이 및 상기 각 복수의 이미지 내에 포함된 오브젝트(object)의 수를 검출하고, 상기 검출된 오브젝트의 수를 바탕으로 상기 각 복수의 이미지에 대한 스케일링 인자(scaling factor)를 결정하며, 상기 결정된 각 복수의 이미지에 대한 스케일링 인자를 바탕으로 상기 각 복수의 이미지 중 적어도 하나의 이미지의 크기를 변경(resizing)하고, 상기 크기가 변경된 이미지를 바탕으로 상기 복수의 이미지의 레이아웃(re-layout) 및 디스플레이 순서(reordering) 중 적어도 하나를 변경하여 디스플레이하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.According to an aspect of the present invention, there is provided an electronic device for performing image processing, the display device including a display for displaying a plurality of images on a single screen, and a display for displaying the number of objects included in each of the plurality of images Determines a scaling factor for each of the plurality of images based on the number of detected objects, and determines a scaling factor for each of the plurality of images based on the determined scaling factor for each of the plurality of images, Resizing one image and controlling the display to change and display at least one of a re-layout and a reordering of the plurality of images based on the resized image Processor.

한편, 본 발명의 일 실시 예에 따른 전자 장치에서 이미지 처리 방법은, 상기 전자 장치에서 복수의 이미지를 인식하는 단계, 상기 각 복수의 이미지 내에 포함된 오브젝트(object)의 수를 검출하는 단계, 상기 검출된 오브젝트의 수를 바탕으로 상기 각 복수의 이미지에 대한 스케일링 인자(scaling factor)를 결정하는 단계, 상기 결정된 각 복수의 이미지에 대한 스케일링 인자를 바탕으로 상기 각 복수의 이미지 중 적어도 하나의 이미지의 크기를 변경(resizing)하는 단계 및 상기 크기가 변경된 이미지를 바탕으로 상기 복수의 이미지의 레이아웃(re-layout) 및 디스플레이 순서(reordering) 중 적어도 하나를 변경하여 상기 복수의 이미지를 전자 장치의 하나의 화면에 디스플레이하는 단계를 포함한다.On the other hand, an image processing method in an electronic device according to an embodiment of the present invention includes the steps of: recognizing a plurality of images in the electronic device; detecting the number of objects included in each of the plurality of images; Determining a scaling factor for each of the plurality of images based on the number of detected objects, determining a scaling factor for each of the plurality of images based on the scaling factor for each of the determined plurality of images, Resizing the image and modifying at least one of re-layout and reordering of the plurality of images based on the resized image to convert the plurality of images into one And displaying it on the screen.

본 개시는, 상술한 다양한 실시 예들에 따라, 전자 장치에서 복수의 이미지를 한 화면에 디스플레이될 때, 이미지에 포함된 오브젝트의 수가 많을수록 이미지를 더 크게 디스플레이하도록 이미지의 크기를 변경하여 디스플레이함으로써 사용자에게 이미지에 포함된 오브젝트 및 콘텐츠 정보를 명확하게 제공할 수 있다.The present disclosure relates to a method and apparatus for displaying a plurality of images on a screen in an electronic device by changing the size of an image so that the larger the number of objects included in the image is, It is possible to clearly provide the object and the content information included in the image.

도 1a 및 도 1b는, 본 개시의 실시 예들에 따라, 전자 장치(시스템)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술 및 본원 발명의 비교를 설명하기 위한 도면들,
도 2는, 본 개시의 실시 예들에 따라, 복수의 이미지의 디스플레이를 관리하기 위한 전자 장치의 간단한 블록도,
도 3은, 본 개시의 실시 예들에 따라, 프로세서의 상세한 블록도,
도 4는, 본 개시의 실시 예들에 따라, 전자 장치에서 복수의 이미지들의 디스플레이를 위한 방법을 도시한 흐름도,
도 5는, 본 개시의 실시 예들에 따라, 하나 이상의 이미지들의 크기를 변경하는(resizing) 방법을 설명하기 위한 흐름도,
도 6a 내지 도 8h는, 본 개시의 다양한 실시 예들에 따라, 전자 장치에서 복수의 이미지를 디스플레이하는 선행 기술과 본원 발명의 비교를 설명하기 위해 도시한 도면들,
도 8i 및 도 8j는, 본 개시의 실시 예들에 따른, 다자간 화상 회의에서 한 명이 떠나는 경우, 복수의 이미지를 디스플레이하는 시나리오를 도시한 도면들,
도 9는, 본 개시의 실시 예들에 따른, 복수의 타일(tiles)을 도시한 도면,
도 10a 및 도 10b는, 본 개시의 실시 예들에 따른, 음악 애플리케이션에서 앨범 커버(album covers)의 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들,
도 11은, 본 개시의 실시 예들에 따른, 하나 이상의 이미지를 선택하기 위한 방법을 설명하기 위한 순서도,
도 12a 및 도 12b는, 본 개시의 실시 예들에 따른, SNS(Social Networking Site)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들,
도 13은, 본 개시의 실시 예들에 따른, 하나 이상의 이미지들을 자르는 방법(cropping)을 도시한 흐름도,
도 14a 및 도 14b는, 본 개시의 실시 예들에 따른, 복수의 이미지들을 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들,
도 15는, 본 개시의 실시 예들에 따른, 전자 장치에서 하나의 이미지의 디스플레이를 관리하기 위한 방법을 도시한 흐름도,
도 16a 및 도 16b는, 본 개시의 실시 예들에 따른, 이미지 상에 사용자 조작 메뉴가 디스플레이되는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들,
도 17a 및 도 17d는, 본 개시의 실시 예들에 따른, 이미지의 자막(caption)이 디스플레이되는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들,
도 18a 및 도 18b는, 본 개시의 실시 예들에 따른, 이미지 상에 자막을 가지는 웨어러블 장치(wearable device)에서 브라우징(browsing)하는 것을 설명하기 위한 도면들,
도 19는, 본 개시의 실시 예들에 따른, 전자 장치에서 복수의 이미지들의 디스플레이하기 위한 방법을 구현한 컴퓨팅 환경을 도시한 도면,
그리고
도 20은, 본 개시의 실시 예들에 따른, 복수의 이미지들에 포함된 객체의 수에 따라 이미지의 크기를 변경하여 디스플레이하는 방법을 설명하기 위한 순서도이다.BRIEF DESCRIPTION OF THE DRAWINGS FIGS. 1A and 1B are diagrams for describing the prior art and comparison of the present invention when displaying a plurality of images in an electronic device (system), according to embodiments of the present disclosure;
2 is a simplified block diagram of an electronic device for managing the display of a plurality of images, according to embodiments of the present disclosure;
3 is a detailed block diagram of a processor, in accordance with embodiments of the present disclosure,
4 is a flow diagram illustrating a method for displaying a plurality of images in an electronic device, in accordance with embodiments of the present disclosure;
Figure 5 is a flow chart illustrating a method of resizing one or more images, in accordance with embodiments of the present disclosure;
Figures 6A through 8H illustrate the prior art for displaying a plurality of images in an electronic device and the figures,
Figures 8i and 8j illustrate scenarios for displaying multiple images when one person leaves in a multi-party videoconference, in accordance with embodiments of the present disclosure;
Figure 9 is a diagram illustrating a plurality of tiles, in accordance with embodiments of the present disclosure;
10A and 10B illustrate a comparison of the prior art and the present invention when displaying a plurality of images of album covers in a music application, according to embodiments of the present disclosure;
11 is a flow diagram illustrating a method for selecting one or more images, in accordance with embodiments of the present disclosure;
12A and 12B illustrate a comparison of the prior art and the present invention when displaying a plurality of images in a social networking site (SNS), according to embodiments of the present disclosure;
Figure 13 is a flow diagram illustrating cropping of one or more images, according to embodiments of the present disclosure;
14A and 14B illustrate a comparison of the prior art and the present invention, when displaying a plurality of images, according to embodiments of the present disclosure;
Figure 15 is a flow diagram illustrating a method for managing the display of one image in an electronic device, in accordance with embodiments of the present disclosure;
16A and 16B are diagrams illustrating a comparison of the prior art and the present invention when a user manipulation menu is displayed on an image, according to embodiments of the present disclosure;
17A and 17D are diagrams illustrating a comparison of the prior art and the present invention when a caption of an image is displayed, in accordance with embodiments of the present disclosure;
18A and 18B are diagrams for explaining browsing in a wearable device having captions on an image, according to embodiments of the present disclosure,
Figure 19 illustrates a computing environment in which a method for displaying a plurality of images in an electronic device is implemented, in accordance with embodiments of the present disclosure;
And
20 is a flowchart for explaining a method of changing the size of an image according to the number of objects included in a plurality of images and displaying the images according to the embodiments of the present disclosure.

본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 개시에 대해 구체적으로 설명하기로 한다. BRIEF DESCRIPTION OF THE DRAWINGS The terminology used herein will be briefly described, and the present disclosure will be described in detail.

본 개시에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다. Although the terms used in this disclosure have taken into account the functions in this disclosure and have made possible general terms that are currently widely used, they may vary depending on the intent or circumstance of the person skilled in the art, the emergence of new technologies and the like. Also, in certain cases, there may be a term selected arbitrarily by the applicant, in which case the meaning thereof will be described in detail in the description of the corresponding invention. Accordingly, the terms used in this disclosure should be defined based on the meaning of the term rather than on the name of the term, and throughout the present disclosure.

본 개시의 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 개시된 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 실시 예들을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 요지를 흐릴 수 있다고 결정되는 경우 그 상세한 설명을 생략한다.The embodiments of the present disclosure are capable of various transformations and may have various embodiments, and specific embodiments are illustrated in the drawings and described in detail in the detailed description. It is to be understood, however, that it is not intended to limit the scope of the specific embodiments but includes all transformations, equivalents, and alternatives falling within the spirit and scope of the disclosure disclosed. In the following description of the embodiments, a detailed description of related arts will be omitted if it is determined that the gist of the present invention may be blurred.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.The terms first, second, etc. may be used to describe various elements, but the elements should not be limited by terms. Terms are used only for the purpose of distinguishing one component from another.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "comprise", "comprising" and the like are used to specify that there is a stated feature, number, step, operation, element, component, or combination thereof, But do not preclude the presence or addition of features, numbers, steps, operations, components, parts, or combinations thereof.

본 개시에서 "모듈" 혹은 "부"는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 "모듈" 혹은 복수의 "부"는 특정한 하드웨어로 구현될 필요가 있는 "모듈" 혹은 "부"를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서(미도시)로 구현될 수 있다.In this disclosure, "module" or "module " performs at least one function or operation, and may be implemented in hardware or software or a combination of hardware and software. Also, a plurality of " modules "or a plurality of" parts "may be implemented as at least one processor (not shown) integrated into at least one module, except" module " .

본 개시에서 이용되는 “시스템”이라는 용어는 본 개시의 실시 예에 따른 복수의 "전자 장치" 또는 하나의 “전자 장치”로 구성된 것을 지칭할 수 있다.The term " system " as used in this disclosure may refer to a plurality of "electronic devices" or "electronic devices" according to embodiments of the present disclosure.

본 개시에서 이용되는 “제어 요소(control elements)”는 본 개시의 실시 예에 따른 ““사용자 조작 메뉴””에 포함될 수 있다.&Quot; Control elements " used in this disclosure may be included in a " user manipulation menu " in accordance with embodiments of the present disclosure.

본 개시에서 이용되는 “제어부(Control unit or Controller)”는 본 개시의 실시 예에 따른 “프로세서”를 지칭할 수 있다.&Quot; Control unit or controller " as used in this disclosure may refer to a " processor " in accordance with an embodiment of the present disclosure.

본 개시에서 이용되는 “컴퓨팅 환경(computing environment)”은 본 개시의 실시 예에 따른 “전자 장치”를 지칭할 수 있다.The " computing environment " used in this disclosure may refer to an " electronic device " in accordance with an embodiment of the present disclosure.

본 개시에서 이용되는 “상대적인 스케일링 인자(relative scaling factor)”는 ““상대적인 스케일링(relative scaling)” 또는 “스케일링 인자(scaling factor)”를 지칭할 수 있다.As used herein, the term " relative scaling factor " may refer to " relative scaling " or " scaling factor. &Quot;

본 개시에서 이용되는 “세트(set)”는 복수의 이미지들로 이루어진 이미지 그룹을 지칭할 수 있다. 예를 들어, 복수의 이미지들로 이루어진 갤러리 애플리케이션 등일 수 있다.A " set " as used in this disclosure may refer to a group of images consisting of a plurality of images. For example, a gallery application composed of a plurality of images, and the like.

본 개시의 실시 예들은 전자 장치에서 복수의 이미지의 디스플레이를 관리하기 위한 방법을 위한 것이다. 상기 방법은 각 이미지에서 오브젝트의 수를 검출하는 단계 및 각 이미지에서 오브젝트의 수를 바탕으로 각 이미지에 대한 상대적인 스케일링 인자를 결정하는 단계를 포함한다. 상기 상대적인 스케일링 인자는 복수의 이미지 중에서 각 이미지의 안에 있는 오브젝트 수를 비교하여 결정할 수 있다. 또한, 상기 방법은 각 이미지에 대한 상대적인 스케일링 인자를 바탕으로 적어도 하나의 이미지 상에서 하나 이상의 동작을 수행하는 단계를 포함한다.Embodiments of the present disclosure are directed to a method for managing the display of a plurality of images in an electronic device. The method includes detecting a number of objects in each image and determining a scaling factor relative to each image based on the number of objects in each image. The relative scaling factor may be determined by comparing the number of objects in each image among a plurality of images. The method also includes performing at least one operation on at least one image based on a relative scaling factor for each image.

본 개시의 일 실시 예에 따라, 하나 이상의 동작을 수행하는 단계는 각 이미지에 대한 상기 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지의 크기를 변경하는 단계 및 전자 장치의 한 화면에 상기 크기가 변경된 이미지들을 디스플레이하는 단계를 포함할 수 있다.According to one embodiment of the present disclosure, performing at least one operation comprises changing the size of one or more images based on the relative scaling factor for each image, and modifying the resized images The method comprising the steps of:

본 개시의 일 실시 예에 따라, 하나 이상의 동작을 수행하는 단계는 각 이미지에 대한 상기 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들을 선택하는 단계 및 전자 장치의 한 화면에 상기 선택된 이미지들을 디스플레이하는 단계를 포함할 수 있다.According to one embodiment of the present disclosure, performing one or more operations comprises selecting one or more images based on the relative scaling factor for each image, and displaying the selected images on one screen of the electronic device .

본 개시의 일 실시 예에 따라, 하나 이상의 동작을 수행하는 단계는 각 이미지에 대한 상기 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들을 자르는(cropping) 단계 및 전자 장치의 한 화면에 상기 선택된 이미지들을 디스플레이하는 단계를 포함할 수 있다. 종래의 시스템들 및 방법들과 달리, 이미지들은 각 이미지 내의 오브젝트 및 각 이미지에서 이미지들의 상대적인 위치를 바탕으로 역동적으로 선택되고, 크기가 변경되고, 순서가 변경되고, 또는 재구조화 될 수 있다. 상술한 오브젝트(데이터 포인트를 참조할 수도 있는)들은 이미지 내에 있는 사람의 얼굴, 빌딩, 동물, 물체, 색상 등일 수 있다. 각 이미지에 대한 상대적인 스케일링 인자는 각 이미지의 크기를 변경하기 위한 복수의 이미지들 사이에서 각 이미지 내에 있는 오브젝트들의 수를 비교하여 결정될 수 있다. 복수의 이미지로 구성된 그룹에서 오브젝트의 수 및 각 이미지들의 상대적인 위치가 결정되면, 시스템(전자 장치)은 오브젝트의 수에 따라 미리보기 화면에서 각 이미지들의 상대적인 크기를 결정한다. 예를 들어, 더 많은 오브젝트를 가지는 이미지는 더 적은 수의 오브젝트를 가지는 이미지보다 크기가 더 크게 변경될 수 있다.According to one embodiment of the present disclosure, performing at least one operation comprises cropping one or more images based on the relative scaling factor for each image, and displaying the selected images on a screen of the electronic device Step < / RTI > Unlike conventional systems and methods, images can be dynamically selected, resized, reordered, or restructured based on the objects in each image and the relative location of the images in each image. The objects described above (which may refer to data points) may be a person's face, building, animal, object, color, etc. in the image. The relative scaling factor for each image may be determined by comparing the number of objects in each image between a plurality of images to change the size of each image. Once the number of objects in a group of images and the relative position of each of the images are determined, the system (electronic device) determines the relative sizes of the images in the preview screen according to the number of objects. For example, an image with more objects may be larger in size than an image with fewer objects.

본 개시의 일 실시 예에 따라, 크기가 변경된 이미지들은 각 이미지의 크기에 따른 타일 모양의 형태로 디스플레이된다. 본 개시에서는 다양한 단계가 포함된 타일 모양의 이미지들을 디스플레이하는 방법에 대해 설명한다. 이미지들의 세트(set)에 포함된 각 이미지의 콘텐츠 또는 정보의 존재가 결정된다. 각 이미지 내의 오브젝트의 수(예, 사람 얼굴)가 검출된다. 또한, 각 이미지에서 오브젝트를 바탕으로 두드러진 영역(salient regions), 대비(contrast) 및 그라데이션(gradient)가 검출된다. 중요한 메트릭은 인간의 지각(perception)을 돕기 위한 비율에 따른 크기(proportional sizes)를 결정하기 위해 평가된다. 이미지들은 주어진 레이아웃에 맞도록 크기를 변경하기 위해 잘릴 수 있고(cropped), 또는 서브 샘플될 수 있다. 또한, 스케일된 이미지들은 타일 형태(in a tiled form)에 디스플레이될 수 있다.According to one embodiment of the present disclosure, resized images are displayed in the form of a tile according to the size of each image. The present disclosure describes a method of displaying tiled images that include various steps. The existence of the content or information of each image included in the set of images is determined. The number of objects in each image (e.g., a human face) is detected. In addition, salient regions, contrast, and gradients are detected based on the object in each image. Critical metrics are evaluated to determine proportional sizes to aid human perception. Images may be cropped or sub-sampled to change the size to fit a given layout. Also, the scaled images can be displayed in an in tiled form.

본 개시의 일 실시 예에 따라, 주어진 이미지들의 세트에서(복수의 이미지로 이루어진 세트), 슬라이드 쇼가 만들어질 수 있다. 슬라이드 쇼는 각 이미지가 순차적으로 딜레이되면서 사용자에게 디스플레이될 수 있다. 딜레이 시간은 각 이미지의 정보 또는 내용(content)에 따른 비율에 의해 결정될 수 있다. 슬라이드 쇼의 지속 시간은 평가된 중요한 메트릭을 바탕으로 결정된다.According to one embodiment of the present disclosure, a set of images (a set of a plurality of images) can be created in a given set of images. The slideshow can be displayed to the user as each image is sequentially delayed. The delay time can be determined by the ratio of the information or content of each image. The duration of the slideshow is determined based on the important metrics evaluated.

또한, 상기 방법은 애플리케이션 아이콘(application icons), 앨범 커버(album covers), 폴더들(folders), 비디오 파일의 아이콘들(video files icons) 등과 같은 이미지 그룹의 크기를 각 이미지 내의 오브젝트의 수 및 각 이미지들의 복수의 이미지 내에서의 상대적 위치를 바탕으로 변경하는데 이용될 수 있다. 예를 들어, 아이콘 안에 사람의 얼굴 또는 오브젝트의 수가 많은 애플리케이션 아이콘은 다른 아이콘의 크기에 비해 상대적으로 크기가 더 크게 변경되어 디스플레이될 수 있다. 또한, 앨범 커버들로 이루어진 그룹은 각 앨범 커버에 있는 사람의 얼굴 또는 물체(objects)의 수를 바탕으로 앨범 커버의 크기가 변경될 수 있다. 예를 들어, 다수의 물체들을(예, 사람 얼굴 또는 정보) 포함하는 앨범 커버는 다른 앨범 커버보다 상대적으로 더 큰 앨범 커버로 크기가 변경되어 디스플레이될 수 있다.The method may also include adjusting the size of the group of images, such as application icons, album covers, folders, video files icons, etc., Can be used to change based on relative positions within a plurality of images of images. For example, an application icon with a large number of faces or objects in the icon may be displayed with a larger magnitude relative to the size of the other icons. Also, the group of album covers can be changed in size based on the number of faces or objects of a person in each album cover. For example, an album cover that includes a number of objects (e.g., a human face or information) may be resized and displayed with a relatively larger album cover than other album covers.

또한, 본 개시의 실시 예에 따른 방법은, 이미지 검색, SNS(Social Network Sites) 애플리케이션, 다자간 화상 회의 애플리케이션, 갤러리 애플리케이션 등과 같은 애플리케이션 안의 복수의 이미지들의 크기를 변경하는 데 이용될 수 있다. 이미지 내에 많은 정보를 포함하는 이미지들은 그렇지 않은 이미지들보다 더 크게 크기를 변경할 수 있으므로, 사용자는 이미지들에 대한 정보를 모두 인식할 수 있다. 따라서, 본 개시에 따른 방법은 사용자 경험을 향상시킬 수 있다.Furthermore, the method according to embodiments of the present disclosure can be used to change the size of a plurality of images in an application such as image retrieval, Social Network Sites (SNS) applications, multi-party video conferencing applications, gallery applications, and the like. Images containing a lot of information in the image can be resized larger than non-images, so that the user can recognize all information about the images. Thus, the method according to the present disclosure can improve the user experience.

또한, 본 개시에 따른 실시 예들은, 전자 장치에서 이미지의 디스플레이를 관리하기 위한 방법을 제공하는 데 있다. 상기 방법은 전자 장치의 한 화면에 디스플레이된 이미지 상에 복수의 제어 요소(a plurality of control elements)가 디스플레이되는 단계 및 이미지 내에서 오브젝트의 수를 검출하는 단계를 포함한다. 또한, 상기 방법은 상기 오브젝트의 수가 0으로 검출된 이미지의 영역에 적어도 하나의 제어 요소의 위치를 다이나믹하게 이동시키는 단계를 포함할 수 있다. 종래 시스템(전자 장치)과 달리, 이미지의 디폴트 위치에 이미지 제어 요소들이 위치할 때, 본 개시에 따른 상기 방법은 이미지 내에서 오브젝트의 수가 0인 이미지의 영역에 상기 이미지 제어 요소들의 위치를 다이나믹하게 이동시킬 수 있다. 따라서, 상기 이미지 제어 요소가 이미지 상에서 오브젝트가 존재하지 않는 영역으로 이동될 때, 이미지가 충분히 인식될 수 있다. 또한, 본 개시에 따른 방법은 카메라 촬영 화면(view field of camera), 이미지 편집 애플리케이션, 이미지 뷰어 등과 같은 애플리케이션에서 이미지 상에 오버레이된 제어 요소들의 위치를 역동적으로 이동시키는데 이용될 수 있다.In addition, embodiments in accordance with the present disclosure are directed to providing a method for managing display of an image in an electronic device. The method includes displaying a plurality of control elements on an image displayed on a screen of the electronic device and detecting the number of objects in the image. The method may also include moving the position of the at least one control element dynamically in an area of the image where the number of objects is detected as zero. When the image control elements are located at the default position of the image, unlike the conventional system (electronic device), the method according to the present disclosure dynamically positions the image control elements in the region of the image with the number of objects in the image being zero Can be moved. Therefore, when the image control element is moved to an area on the image where the object does not exist, the image can be sufficiently recognized. Further, the method according to the present disclosure can be used to dynamically move the position of control elements overlaid on an image in an application such as a view field of camera, an image editing application, an image viewer, and the like.

아래에서는 첨부한 도면을 참고하여 본 개시의 실시 예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to embodiments of the present disclosure, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout. However, the present disclosure may be embodied in many different forms and is not limited to the embodiments described herein. In order that the present disclosure may be more fully understood, the same reference numbers are used throughout the specification to refer to the same or like parts.

도 1a 및 도 1b는, 본 개시의 실시 예들에 따라, 전자 장치에서 복수의 이미지를 디스플레이하는 경우, 종래 기술 및 본원 발명의 비교를 설명하기 위한 도면이다.BRIEF DESCRIPTION OF THE DRAWINGS FIGS. 1A and 1B are diagrams for describing the prior art and comparison of the present invention when displaying a plurality of images in an electronic device, in accordance with embodiments of the present disclosure.

전자 장치(100)는 이미지를 디스플레이할 수 있는 모든 디스플레이 장치일 수 있다. 예를 들어, 전자 장치(100)는 모바일 폰, 태블릿 PC, 랩탑, 텔레비전, 스마트폰, 스마트 와치 등일 수 있다. 상술한 예는 본 개시를 설명하기 위한 일 실시 예일 뿐, 이에 한정하지 않는다.The electronic device 100 may be any display device capable of displaying an image. For example, the electronic device 100 may be a mobile phone, a tablet PC, a laptop, a television, a smart phone, a smart watch, and the like. The above-mentioned example is only one embodiment for explaining the present disclosure, but it is not limited thereto.

도 1a는, 전자 장치(100)에서 복수의 이미지를 디스플레이하는 종래 기술을 설명하기 위한 도면이다. 도 1a를 참조하면, 갤러리 애플리케이션 등과 같은 복수의 이미지를 디스플레이할 수 있는 애플리케이션에서, 전자 장치(100)는 복수의 이미지를 한 화면에 디스플레이할 수 있다. 종래에는, 갤러리에 디스플레이된 복수의 이미지들은 각 이미지들에 포함되어 있는 정보 또는 콘텐츠를 고려하지 않고 모두 동일한 크기를 가진다. FIG. 1A is a diagram for explaining a conventional technique for displaying a plurality of images in the electronic device 100. FIG. Referring to FIG. 1A, in an application capable of displaying a plurality of images such as a gallery application, the electronic device 100 can display a plurality of images on one screen. Conventionally, a plurality of images displayed in a gallery all have the same size without regard to the information or contents included in each of the images.

반면, 도 1b는, 본 개시의 일 실시 예에 따라, 전자 장치(100)에서 복수의 이미지를 디스플레이하는 것을 설명하기 위한 도면이다. 도 1b를 참조하면, 종래 기술과 달리, 복수의 이미지들은 각 이미지의 정보 또는 내용(콘텐츠)를 바탕으로 크기가 변경될 수 있다. 본 개시의 일 실시 예에서, 정보 또는 콘텐츠는 각 이미지에 있는 오브젝트들의 수를 포함할 수 있다. 복수의 이미지들은 도 1b에 도시된 바와 같이 각 이미지 내의 오브젝트 수를 바탕으로 크기가 변경될 수 있다.1B, on the other hand, is a diagram for explaining displaying a plurality of images in the electronic device 100, according to one embodiment of the present disclosure. Referring to FIG. 1B, unlike the prior art, a plurality of images can be resized based on information or content (content) of each image. In one embodiment of the present disclosure, the information or content may include the number of objects in each image. The plurality of images can be resized based on the number of objects in each image as shown in FIG. 1B.

도 1b에서, 3개의 오브젝트(예: 3개의 콘텐츠 아이콘)를 가지는 이미지는 더 큰 사이즈로 디스플레이되기 위해 크기가 변경될 수 있다. 또한, 두 개의 오브젝트(예: 2개의 콘텐츠 아이콘)를 가지는 이미지는 세 개의 오브젝트를 가지는 이미지에 비해 더 작은 크기로 디스플레이되기 위해 크기가 변경될 수 있다. 또한, 하나의 오브젝트(예: 하나의 콘텐츠 아이콘)를 가지는 이미지는 두 개의 오브젝트를 가지는 이미지보다 더 작게 디스플레이되기 위해 크기가 변경될 수 있다. 즉, 복수의 이미지 중에서 각 이미지들은 각 이미지 내에 있는 오브젝트의 수에 따라 이미지의 크기가 변경될 수 있다. 도 1A 및 도 1B에서 복수의 이미지들의 레이아웃은 이미지들의 크기가 변경되기 전과 후가 같음을 알 수 있다.In Fig. 1B, an image having three objects (e.g., three content icons) may be resized to display at a larger size. Also, an image with two objects (e.g., two content icons) can be resized to be displayed at a smaller size than an image with three objects. Also, an image with one object (e.g., one content icon) can be resized to be displayed smaller than an image with two objects. That is, each of the images among the plurality of images can be resized according to the number of objects in each image. In FIGS. 1A and 1B, it can be seen that the layout of the plurality of images is the same before and after the size of the images is changed.

본 개시의 일 실시 예로, 각 이미지의 크기를 변경하기 위하여, 각 이미지에 대한 상대적인 스케일링 인자(relative scaling factor)를 결정할 수 있다. 상대적인 스케일링 인자는 복수의 이미지 중에서 각 이미지 안에 있는 오브젝트의 수를 비교하여 결정될 수 있다. 각 이미지에 대한 상대적인 스케일링 인자를 결정한 후, 복수의 이미지들은 각 이미지에 대한 상대적인 스케일링 인자를 바탕으로 크기가 변경될 수 있다.In one embodiment of the present disclosure, to change the size of each image, a relative scaling factor for each image may be determined. The relative scaling factor may be determined by comparing the number of objects in each image among a plurality of images. After determining the relative scaling factor for each image, the plurality of images can be resized based on the relative scaling factor for each image.

도 1a 및 도 1b에 도시된 이미지들은 본 개시를 설명하기 위한 일 실시 예일 뿐 이에 한정되지 않는다. 이미지에 존재하는 오브젝트들의 수를 바탕으로 어떠한 이미지도 크기가 변경될 수 있다. 예를 들어, 애플리케이션 아이콘들, 앨범 커버들, 폴더들, 비디오 파일들의 아이콘들 등과 같은 이미지들의 크기는 각 이미지들의 상대적인 크기, 오브젝트의 수, 및 다양한 정보 콘텐츠를 바탕으로 변경될 수 있다.The images shown in Figs. 1A and 1B are only examples for explaining the present disclosure, but are not limited thereto. Any image can be resized based on the number of objects present in the image. For example, the size of images such as application icons, album covers, folders, icons of video files, etc. may be changed based on the relative sizes of the respective images, the number of objects, and various information contents.

도 2는, 본 개시의 실시 예들에 따라, 복수의 이미지의 디스플레이를 관리하기 위한 전자 장치의 간단한 블록도이다. 실시 예에서, 전자 장치(100)는 프로세서(202), 저장부(204), 및 디스플레이(206)를 포함한다.2 is a simplified block diagram of an electronic device for managing the display of a plurality of images, in accordance with embodiments of the present disclosure; In an embodiment, the electronic device 100 includes a processor 202, a storage 204, and a display 206.

프로세서(202)는 전자 장치(100)에서 복수의 이미지들의 디스플레이를 관리하기 위한 하나 이상의 동작을 수행할 수 있다. 일 실시 예에서, 프로세서(202)는 각 이미지에 있는 오브젝트들의 수를 검출할 수 있다. 본 개시에서 설명하는 오브젝트들(데이터 포인트일 수도 있음)은 사람 얼굴, 빌딩, 동물, 물체, 색상, 이미지 엔트로피(entropy) 등과 같은 것일 수 있다. 일 실시 예에서, 이미지에 있는 오브젝트는 다음의 세 가지 구별된 특성 중 하나를 가질 수 있다. 예를 들어, 구별된 세 가지 특성은 공간에서 잘 정의된 닫혀진 경계, 주변 배경과 다른 모양, 이미지 내에서 고유하고 두드러지게 눈에 띄는 것일 수 있다. 대부분의 오브젝트들은 상술한 특성 중 몇 가지를 동시에 가질 수 있다. 일 실시 예에서, 이미지에서 오브젝트들을 검출하는 방법은 "Alexe, Bogdan, Thomas Deselaers, and Vittorio Ferrari. "What is an object?" Computer Vision and Pattern Recognition(CVPR), 2010 IEEE Conference on. IEEE, 2010"을 참조할 수 있다. 또한, 이미지에서 오브젝트들을 검출하는 방법은 공지된 다른 방법 또는 향후 개발되는 방법 등을 이용할 수 있다.The processor 202 may perform one or more operations to manage the display of a plurality of images in the electronic device 100. In one embodiment, the processor 202 may detect the number of objects in each image. Objects (which may be data points) described in this disclosure may be human faces, buildings, animals, objects, colors, image entropy, and the like. In one embodiment, an object in an image may have one of the following three distinct characteristics. For example, the three distinct properties may be unique and prominent in the image, well-defined closed boundaries in space, surrounding background and other shapes, and images. Most objects can have some of the above properties at the same time. In one embodiment, a method for detecting objects in an image is described in "Alexe, Bogdan, Thomas Deselaers, and Vittorio Ferrari." What is an object? Computer Vision and Pattern Recognition Can be referred to. In addition, a method of detecting objects in an image may use another known method or a method developed in the future.

이미지가 저장부(204)에 저장되는 경우, 프로세서(202)는 이미지에 포함된 오브젝트의 수는 저장부(204)에 저장되기 전에 결정하고, 결정된 이미지의 오브젝트의 수는 이미지와 함께 저장부(204)에 저장되도록 저장부(204)를 제어할 수 있다.When the image is stored in the storage unit 204, the processor 202 determines the number of objects included in the image before being stored in the storage unit 204, and the number of objects in the determined image is stored in the storage unit 204 in order to control the storage unit 204.

일 실시 예에 따라, 전자 장치(100)에서 이미지들을 저장하는 경우, 각 이미지가 가지는 오브젝트들의 수는 전자 장치(100)에서 이미지들이 저장되기 전에 계산될 수 있다.According to one embodiment, when storing images in the electronic device 100, the number of objects each image has may be calculated before the images are stored in the electronic device 100.

이미지가 전자장치(100)에 실시간으로 로딩되는 경우, 프로세서(202)는 이미지에 포함된 오브젝트의 수는 이미지가 로딩되는 동안 결정되고, 결정된 이미지의 오브젝트의 수는 이미지 정보와 함께 저장부(204)에 저장되도록 저장부(204)를 제어할 수 있다.When an image is loaded in real time on the electronic device 100, the processor 202 determines the number of objects contained in the image while the image is being loaded, and the number of objects in the determined image is stored in the storage 204 The controller 204 may control the storage unit 204 to store the data.

일 실시 예에 따라, 이미지들이 동적으로 로딩되는 경우(예. 웹페이지 상에서), 각 이미지가 가지는 오브젝트들의 수는 웹 페이지가 로딩되는 동안 계산될 수 있다.According to one embodiment, when images are loaded dynamically (e.g., on a web page), the number of objects each image has can be calculated while the web page is loaded.

프로세서(202)는 색상 대비(color contrast), 에지 밀도(edge density), 베이지안 인터그레이션(Bayesian integration), 및 표면 스트라들링(Superficial Straddling) 중 적어도 하나를 이용하여 각 이미지에서 오브젝트들을 검출할 수 있다. 상술한 방법들은 공지된 기술이므로 상세한 설명은 본 개시에서 생략한다. 또한, 상술한 방법들은 본 개시를 위한 실시 예일 뿐, 이에 한정되지 않는다. 프로세서(202)는 다른 공지된 기술 및 공지될 기술을 이용하여 각 이미지에서 오브젝트들을 검출할 수 있다.The processor 202 may detect objects in each image using at least one of color contrast, edge density, Bayesian integration, and superficial straddling . Since the above-described methods are well known in the art, detailed description is omitted in this disclosure. In addition, the above-described methods are only examples for the present disclosure, but are not limited thereto. The processor 202 may detect objects in each image using other known and known techniques.

프로세서(202)는 각 이미지의 내에 오브젝트들의 수를 바탕으로 각 이미지에서 상대적인 스케일링 인자를 결정할 수 있다. 또한, 프로세서(202)는 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 동작을 수행할 수 있다. The processor 202 may determine a relative scaling factor in each image based on the number of objects in each image. In addition, the processor 202 may perform one or more operations based on the relative scaling factor of each image.

즉, 프로세서(202)는 복수의 이미지의 각 이미지 내에 포함된 오브젝트들의 수를 비교하여 각 이미지들의 스케일링 인자를 결정할 수 있다.That is, the processor 202 may compare the number of objects contained in each image of the plurality of images to determine the scaling factor of each of the images.

일 실시 예에 따라, 하나 이상의 동작들을 수행하는 단계는 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들의 크기를 변경하는 단계 및 전자 장치(100)의 한 화면 상에 크기가 변경된 이미지들을 디스플레이하는 단계를 포함할 수 있다.According to one embodiment, performing one or more operations may include varying the size of the one or more images based on the relative scaling factor of each image, and displaying the resized images on one screen of the electronic device 100 Step < / RTI >

프로세서(202)는 크기가 변경된 이미지를 바탕으로 복수의 이미지의 레이아웃 및 디스플레이 순서 중 적어도 하나를 변경(reordering)하여 디스플레이하도록 상기 디스플레이(206)를 제어할 수 있다.The processor 202 may control the display 206 to reordering and displaying at least one of the layout and display order of the plurality of images based on the resized image.

또한, 프로세서(202)는, 복수의 이미지 중에서 상기 각 복수의 이미지에 포함된 상기 오브젝트의 수가 많을수록 상기 이미지의 상대적인 크기를 크게 변경할 수 있다. In addition, the processor 202 may change the relative size of the image significantly as the number of the objects included in each of the plurality of images among the plurality of images increases.

프로세서(202)는 복수의 이미지 중에서 크기가 변경된 이미지 중 이미지 상에 포함된 오브젝트가 이미지 상에 차지하는 비율이 높은 이미지들을 선택적으로 디스플레이하도록 디스플레이(206)을 제어할 수 있다.The processor 202 may control the display 206 to selectively display images that have a high percentage of objects on the image that are included in the image of the resized image among the plurality of images.

즉, 프로세서(202)는 복수의 이미지 중 크기가 변경된 이미지 중에서 오브젝트를 명확히 대표하는 이미지들을 선택해서 디스플레이하도록 디스플레이(206)를 제어할 수 있다. 예를 들어, 여섯 개의 이미지 중 두 개의 이미지가 각각 세 명의 사람을 포함하는 경우, 두 개의 이미지 중 하나는 세 명의 사람이 명확히 식별되고, 나머지 하나의 이미지는 세 명의 사람이 명확히 식별되지 않을 수 있다. 이때, 프로세서(202)는 오브젝트(예: 사람)가 명확히 식별되는 이미지를 선택해서 디스플레이하도록 디스플레이(206)를 제어할 수 있다. 이때, 프로세서(202)는 하나의 이미지 영역에서 오브젝트가 차지하는 비율을 통해 오브젝트의 식별 정도를 결정할 수 있다. 그러나, 상술한 예시는 본 개시를 설명하기 위한 일 실시 예일 뿐, 이에 한정되지 않고 다양한 방법을 통해 오브젝트의 수가 동일한 이미지 내에서 오브젝트의 명확도를 결정할 수 있다.That is, the processor 202 may control the display 206 to select and display images that clearly represent the object, among the plurality of images, of the resized image. For example, if two of the six images each include three persons, one of the two images may be clearly identified as three, and the other one of the three images may not be clearly identified as three . At this point, the processor 202 may control the display 206 to select and display an image in which an object (e.g., a person) is clearly identified. At this time, the processor 202 can determine the degree of object identification through the ratio of objects occupied in one image area. However, the above-described example is only an example for explaining the present disclosure, and it is not limited thereto and various methods can determine the degree of clarity of an object in the same image with the same number of objects.

일 실시 예에 따라, 프로세서(202)는 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들을 자르고(cropping), 전자 장치(100)의 한 화면 상에 선택된 이미지들을 디스플레이하도록 디스플레이(206)를 제어할 수 있다.According to one embodiment, the processor 202 controls the display 206 to crop one or more images based on the relative scaling factor of each image and display the selected images on one screen of the electronic device 100 can do.

프로세서(202)는, 각 복수의 이미지의 ROI(Region of Interest)를 결정하고, 결정된 각 복수의 이미지의 ROI를 바탕으로 복수의 이미지 중 적어도 하나의 이미지로부터 오브젝트가 포함된 영역을 자르고, 잘린 영역의 이미지를 디스플레이하도록 디스플레이(206)를 제어할 수 있다.The processor 202 determines a region of interest (ROI) of each of the plurality of images, and based on the determined ROIs of the plurality of images, cuts out an area including the object from at least one of the plurality of images, Lt; RTI ID = 0.0 > 206 < / RTI >

예를 들어, ROI는 각 이미지에서 두드러진 영역(sailent region)일 수 있다. 두드러진 영역의 검출 방법(salient region detection method)은 각 이미지에서 돌출 영역(salient region)을 검출하는데 이용된다. 프로세서(202)는 이미지 내에서 두드러진 영역(sailent region)이 더 두드러지고 크게 나타나도록 잘린 (cropped) 이미지들의 크기를 변경할 수 있다.For example, the ROI may be a sailent region in each image. A salient region detection method is used to detect a salient region in each image. The processor 202 may change the size of the cropped images so that the sailent regions appear more prominent and larger in the image.

종래의 시스템(전자 장치)들 및 방법들과 달리, 각 이미지 내의 오브젝트 및 각 이미지의 상대적 위치를 바탕으로, 이미지들은 동적으로 선택되고, 크기가 변경되고(resize), 재배열되고(reorder), 구조를 다르게 재구성(restructure)될 수 있다. 각 이미지의 스케일링 인자는 각각의 이미지의 크기 변경(resizing)을 위한 복수의 이미지 중에서 각 이미지의 오브젝트의 수를 비교하여 결정된다.Unlike conventional systems (electronic devices) and methods, based on the objects in each image and the relative position of each image, images are dynamically selected, resized, reordered, The structure can be restructured differently. The scaling factor of each image is determined by comparing the number of objects in each image among a plurality of images for resizing each image.

오브젝트들의 수와 오브젝트들의 상대적인 위치들이 이미지들의 그룹에서 결정되면, 프로세서(202)는 오브젝트의 수에 의해 미리보기(preview)에서 상대적인 크기를 결정할 수 있다. 예를 들어, 전자 장치(100)는 오브젝트의 수가 많은 이미지는 오브젝트의 수가 더 적은 이미지보다 더 큰 크기를 가지도록 할 수 있다.Once the number of objects and the relative positions of the objects are determined in the group of images, the processor 202 may determine the relative size in the preview by the number of objects. For example, the electronic device 100 may have an image with a larger number of objects having a larger size than an image with a smaller number of objects.

프로세서(202)는 복수의 이미지가 디스플레이되는 영역을 지정된 n개의 타일 형상으로 구분하고, 각 복수의 이미지에 포함된 상기 오브젝트의 수에 따라 크기가 변경된 이미지를 각 n개의 타일 형상 내에 다시 렌더링(re-rendering)하여 디스플레이하도록 디스플레이(206)를 제어할 수 있다.The processor 202 divides an area in which a plurality of images are displayed into a specified n tile shape, and re-renders an image whose size is changed according to the number of the objects included in each of the plurality of images in each of the n tile shapes (re the display 206 may be controlled to display it.

프로세서(202)는, 이미지에 오브젝트가 포함되고, 이미지를 설명하는 자막(caption)이 이미지와 분리되어 디스플레이되는 경우, 자막을 이미지 상에 오버레이(overlay)하고, 이미지의 크기를 변경하여 디스플레이하도록 디스플레이(206)를 제어할 수 있다. The processor 202 is configured to overlay the caption on the image and to change the size of the image to display the caption if the caption describing the image is displayed separately from the image, It is possible to control the control unit 206.

프로세서(202)는 복수의 이미지 중 하나가 선택되고, 선택된 이미지 상에 사용자 조작 메뉴가 오버레이되어 디스플레이된 경우, 선택된 이미지 영역에서 오브젝트가 검출되지 않은 영역으로 사용자 조작 메뉴가 이동하여 디스플레이되도록 디스플레이(206)를 제어할 수 있다. The processor 202 may be configured to display one or more of the plurality of images and to display a user operation menu on the selected image area, such that when the user operation menu is overlaid on the selected image, Can be controlled.

예를 들어, 사용자 조작 메뉴는 이미지 상에 오베레이되는 편집 기능을 가지는 아이콘, 메뉴 등일 수 있다. 또한, 사용자 조작 메뉴는 촬영 대기 화면에서 화면에 오버레이되는 아이콘 또는 메뉴 등일 수 있다. For example, the user operation menu may be an icon, a menu, etc., having an editing function that is overlaid on the image. In addition, the user operation menu may be an icon or a menu overlaid on the screen on the shooting standby screen.

그리고 프로세서(202)는 오브젝트가 검출되지 않은 이미지 영역으로 사용자 조작 메뉴를 이동시키는 경우, 오브젝트가 검출되지 영역의 크기에 맞게 사용자 조작 메뉴의 크기를 크거나 작게 변경하여 디스플레이하도록 디스플레이(206)를 제어할 수 있다.When the user moves the user operation menu to the image area where the object is not detected, the processor 202 controls the display 206 to change the size of the user operation menu to be larger or smaller according to the size of the area where the object is not detected can do.

또한, 일 실시 예에 따라, 프로세서(202)는 이미지 내에서 오브젝트들의 수를 검출하고 적어도 하나의 제어 요소(control element)의 위치를 오브젝트의 수가 0으로 인식되는 이미지의 영역으로 동적으로 이동시킬 수 있다. 종래의 시스템(전자장치 100)과 달리, 이미지 제어 요소들이 이미지 내에서 디폴트 위치들에서 이격되어 있는 경우, 본 개시의 실시 예에 따른 방법은 이미지 내에서 오브젝트의 수가 검출되지 않은(오브젝트의 수가 0) 이미지의 영역으로 이미지 제어 요소들의 위치를 동적으로 이동시킬 수 있다. 이미지 제어 요소들이 이미지의 오브젝트가 존재하지 않는 영역 상에 디스플레이되는 경우, 이미지는 사용자에게 충분하게(fully) 인식될 수 있다. 또한, 본 개시의 실시 예에 따른 방법은 카메라의 디스플레이 화면(view field of camera), 이미지 편집 애플리케이션, 이미지 뷰어 등과 같은 애플리케이션에서의 제어 요소들의 동적 이동(shift)에 이용될 수 있다. 또한, 본 개시의 실시 예에 따른 이미지들의 디스플레이를 관리하기 위한 프로세서(202)의 다양한 구성 유닛(units)들은 도 3에서 설명된다. Further, according to one embodiment, the processor 202 may detect the number of objects in the image and dynamically move the position of the at least one control element to a region of the image where the number of objects is recognized as zero have. In contrast to the conventional system (electronic device 100), where the image control elements are spaced apart from the default positions in the image, the method according to an embodiment of the present disclosure is characterized in that the number of objects is not detected in the image ) Dynamically move the position of the image control elements to the area of the image. If the image control elements are displayed on an area where no object of the image exists, the image can be fully recognized by the user. In addition, the method according to embodiments of the present disclosure can be used to dynamically shift control elements in an application such as a camera's view field of camera, an image editing application, an image viewer, and the like. In addition, the various units of the processor 202 for managing the display of images according to embodiments of the present disclosure are described in FIG.

저장부(204)는 복수의 이미지를 저장할 수 있다. 저장부(204)는 하나 이상의 컴퓨터로 판독 가능한 저장 매체를 포함할 수 있다. 저장부(204)는 비활성 저장 요소(non-volatile storage element)를 포함할 수 있다. 비활성 저장 요소들은 예를 들어 마그네틱 하드 디스크, 광학 디스크, 플로피 디스크, 플래쉬 메모리, 또는 EPROM(Electrically Programmable Memories) 또는 EEPROM(Electrically Erasable and Programmable Memories)를 포함할 수 있다. 또한, 저장부(204)는, 일부 실시 예들에서, 비-일시적(non-transitory) 저장 매체일 수 있다. ““비-일시적(non-transitory)””라는 용어는 반송파(carrier wave) 또는 전파 신호(propagated signal) 에서 구현 되지 않은 저장 매체를 나타낼 수 있다. 그러나, ““비-일시적””이라는 용어는 저장부(204)가 비-이동성(non-movable)이라고 해석되어서는 안된다. 일부 실시 예들에서, 저장부(204)는 메모리보다 더욱 많은 양의 정보를 저장할 수 있다. 특정 실시 예들에서, 비-일시적 저장 매체는 시간의 경과에 따라 변할 수 있는 데이터(예: RAM(Random Access Memory) 또는 캐시(cache))를 저장할 수 있다.The storage unit 204 may store a plurality of images. The storage 204 may include one or more computer readable storage media. The storage 204 may include a non-volatile storage element. The inactive storage elements may include, for example, a magnetic hard disk, an optical disk, a floppy disk, a flash memory, or EPROM (Electrically Programmable Memories) or EEPROM (Electrically Erasable and Programmable Memories). In addition, the storage 204, in some embodiments, may be a non-transitory storage medium. The term " non-transitory " may refer to a storage medium that is not implemented in a carrier wave or a propagated signal. However, the term " non-transient " should not be interpreted as storing portion 204 being non-movable. In some embodiments, the storage 204 may store a greater amount of information than the memory. In certain embodiments, the non-temporary storage medium may store data (e.g., RAM (Random Access Memory) or cache) that may change over time.

디스플레이(206)는 전자장치(100)의 한 화면 상에 크기가 변경된(resized) 하나 이상의 이미지들을 디스플레이할 수 있다.The display 206 may display one or more images resized on one screen of the electronic device 100.

도 2는 전자 장치(100)의 한정된 실시 예를 도시하나, 이는 본 개시의 설명을 위한 일 실시 예일 뿐, 이에 한정되지 않는다. 블록도에 포함된 각 부(units)의 명칭 또는 라벨들은 본 개시를 설명하기 위한 것으로 이에 한정되지 않는다. 또한, 전자 장치(100)는 다른 구성 성분 각각과 통신하는 다른 부(units) 또는 서브-부(sub-units)를 포함할 수 있다. 이와 같이, 각 유닛의 기능은 본 발명의 범위를 벗어나지 않으면서 본 명세서에 기재된 상이한 방식으로 단일 유닛으로 결합될 수 있거나 서로 분산 될 수 있다.Figure 2 shows a limited embodiment of an electronic device 100, which is only one embodiment for the purposes of the present disclosure, but is not limited thereto. The names or labels of each unit included in the block diagram are not intended to be limiting of the present disclosure. In addition, electronic device 100 may include other units or sub-units that communicate with each of the other components. As such, the functionality of each unit may be combined into a single unit or distributed to one another in the different ways described herein without departing from the scope of the present invention.

도 3은, 본 개시의 일 실시 예에 따라, 이미지의 레이아웃을 생성하기 위한 프로세서의 상세한 블록도이다.3 is a detailed block diagram of a processor for generating a layout of an image, in accordance with one embodiment of the present disclosure;

도 3을 참조하면, 프로세서(202)는 개별 이미지 분석부(302), 디스플레이 정보부(304), 이미지 크기 계산부(306), 및 이미지 세트 분석부(304) 등의 유닛(units)을 포함할 수 있다.3, the processor 202 includes units such as an individual image analysis unit 302, a display information unit 304, an image size calculation unit 306, and an image set analysis unit 304 .

일 실시 예로, 개별 이미지 분석부(302)는 오브젝트 검출부(302a) 및 오브젝트 분석부(302b)를 포함한다. 오브젝트 검출부(302a)는 이미지에서 하나 이상의 오브젝트를 검출하도록 구성될 수 있다. 오브젝트 검출부(302a)는 하나 이상의 오브젝트를 검출하기 위한 하나 이상의 오브젝트 인식 기술(object recognition techniques)을 이용할 수 있다. 오브젝트 검출부(302a)는 오브젝트들의 좌표를 검출할 수 있다.In one embodiment, the individual image analyzing unit 302 includes an object detecting unit 302a and an object analyzing unit 302b. The object detection unit 302a can be configured to detect one or more objects in the image. The object detecting unit 302a may use one or more object recognition techniques for detecting one or more objects. The object detecting unit 302a can detect the coordinates of the objects.

일 실시 예로, 오브젝트 분석부(302b)는 오브젝트 검출부(302a)로부터 오브젝트의 좌표를 수신하도록 구성될 수 있다. 또한, 오브젝트 분석부(302b)는 오브젝트의 수(C 로 표시), 오브젝트의 크기(S로 표시), 및 오브젝트의 다양한 특징(예: 오브젝트에서 얼굴 식별 등)을 카운팅하는 것과 같은 분석을 수행하도록 구성될 수 있다. 오브젝트 분석부(304)는 각각의 이미지가 오브젝트의 크기, 오브젝트의 개수 및 각 오브젝트에 대한 특징 벡터를 포함하는 3 개의 출력을 생성하도록 이미지를 처리하도록 구성 될 수 있다. 일 실시 예에서, 가중치 w₁ 및 w₂는 각각 오브젝트의 수(the count of objects)와 오브젝트의 크기(size of object)에 할당될 수 있다. In one embodiment, the object analyzing unit 302b may be configured to receive the coordinates of the object from the object detecting unit 302a. The object analyzing unit 302b may also be configured to perform analysis such as counting the number of objects (represented by C), the size of the object (represented by S), and various characteristics of the object Lt; / RTI > The object analysis unit 304 can be configured to process the image such that each image produces three outputs including the size of the object, the number of objects, and the feature vector for each object. In one embodiment, the weights w ₁ and w ₂ may be assigned to the count of objects and the size of object, respectively.

일 실시 예에서, 디스플레이 정보부(304)는 스크린 사이즈 등과 같은 디스플레이 파라미터들을 제공하도록 구성될 수 있다. 디스플레이 정보부(304)는 디스플레이 파라미터들을 이미지 크기 계산부(306)에 입력으로 제공할 수 있다.In one embodiment, the display information section 304 may be configured to provide display parameters such as screen size and the like. The display information unit 304 may provide the display parameters to the image size calculation unit 306 as an input.

일 실시 예에서, 이미지 크기 계산부(306)은 가중치 w₁ 및 w₂를 이용하여 이미지 크기를 계산하도록 구성될 수 있다. 이미지 크기 계산부(306)은 디스플레이 정보부(304)에 의해 제공된 입력과 함께 오브젝트 분석부(302b)(제공된 가중치)로부터 제공된 C와 S를 바탕으로 최종 이미지 크기를 계산하도록 구성될 수 있다.In one embodiment, the image size calculator 306 may be configured to calculate the image size using the weights w ₁ and w ₂ . The image size calculator 306 may be configured to calculate the final image size based on C and S provided from the object analyzer 302b (provided weight) along with the input provided by the display information 304. [

또한, 일 실시 예에서, 이미지 세트 분석부(308)는 인식된 오브젝트 발생부(308a), 메타데이터 유사성 결정부(308b) 및 배경 유사성 분석부(308c)를 포함한다. 인식된 오브젝트 발생부(308a)는 오브젝트 분석부(302b)로부터 입력을 수신하도록 구성될 수 있다. 또한, 인식된 오브젝트 발생부(308a)는 이미지에서 객체의 특징 벡터를 생성하도록 구성될 수 있다.Also, in one embodiment, the image set analyzing unit 308 includes a recognized object generating unit 308a, a metadata similarity determining unit 308b, and a background similarity analyzing unit 308c. The recognized object generating unit 308a may be configured to receive input from the object analyzing unit 302b. Also, the recognized object generator 308a may be configured to generate a feature vector of the object in the image.

일 실시 예에서, 메타데이터 유사성 결정부(308b)는 이미지가 캡쳐될 때 이미지로부터 메타데이터 정보(위치 및 시간 등)를 추출하도록 구성될 수 있다. 메타데이터 정보는 이미지들 사이의 유사성을 결정하는데 이용될 수 있다. 일 실시 예에서, 메타데이터 정보는 최종 레이아웃에서 디스플레이할 이미지를 고르는 동안 하나의 인자(factor)일 수 있다.In one embodiment, the metadata similarity determination unit 308b may be configured to extract metadata information (location and time, etc.) from the image when the image is captured. The metadata information can be used to determine similarities between images. In one embodiment, the metadata information may be a factor while picking up the image to display in the final layout.

일 실시 예에서, 배경 유사성 결정부(308c)는 세트(set)로부터 이미지들의 배경을 분석하고, 배경들 사이에서 유사성을 찾도록 구성될 수 있다. 예를 들어, 두 개의 이미지의 배경들은 모두 ?숲? 또는 ?정원?일 수 있다.In one embodiment, the background similarity determination unit 308c may be configured to analyze the background of images from the set and to find similarities between the backgrounds. For example, the backgrounds of two images are all forests? Or " gardens ".

이미지 세트 분석부(308)는 인식된 오브젝트 발생부(308a), 메타데이터 유사성 결정부(308b) 및 배경 유사성 결정부(308c) 각각에서 가중치가 적용된 출력을 합산하여 ““가중된 공통성 스코어(weighted commonality score)””라고 알려진 값을 계산할 수 있다. 가중된 공통성 스코어는 하나의 이미지가 동일한 (이미지)세트 안에 있는 다른 이미지들, 폴더 내에 있는 다른 이미지들, 또는 앨범 이미지들 내에 있는 다른 이미지들에 대한 유사성의 정도를 나타낸다. The image set analyzing unit 308 adds the weighted outputs of the recognized object generating unit 308a, the metadata similarity determining unit 308b and the background similarity determining unit 308c to " weighted " commonality score) You can calculate a value known as "". The weighted commonness score represents the degree of similarity to other images in which one image is in the same (image) set, other images in the folder, or other images in album images.

일 실시 예에서, UX(User Experience) 정책 선호부(310)는 이미지들의 디스플레이를 결정하기 위한 사용자 경험 정책(user experience policy)를 적용하도록 구성될 수 있다. UX 정책을 바탕으로, 이미지들의 최종 레이아웃이 결정되고 디스플레이될 수 있다.In one embodiment, the UX (User Experience) policy preference 310 may be configured to apply a user experience policy to determine the display of images. UX policy, the final layout of the images can be determined and displayed.

도 3은 프로세서(202)의 한정된 오버뷰를 도시한 것이나, 이는 이에 한정되지 않는다. 도 3에 포함된 각 부(units)의 명칭 또는 라벨들은 본 개시를 설명하기 위한 것으로 이에 한정되지 않는다. 또한, 프로세서(202)는 다른 구성 성분 각각과 통신하는 다른 부(units) 또는 서브-부(sub-units)를 포함할 수 있다. 이와 같이, 각 유닛의 기능은 본 발명의 범위를 벗어나지 않으면서 본 명세서에 기재된 상이한 방식으로 단일 유닛으로 결합될 수 있거나 서로 분산 될 수 있다.3 illustrates a limited overview of the processor 202, but is not so limited. The names or labels of each unit included in FIG. 3 are not intended to limit the present disclosure. In addition, the processor 202 may include other units or sub-units that communicate with each of the other components. As such, the functionality of each unit may be combined into a single unit or distributed to one another in the different ways described herein without departing from the scope of the present invention.

도 4는, 본 개시의 실시 예들에 따라, 전자 장치에서 복수의 이미지들의 디스플레이를 관리하기 위한 방법을 도시한 흐름도이다. 일 실시 예에서, S402 단계에서, 방법(400)은 각 이미지에서 오브젝트들의 개수를 검출하는 단계를 포함한다. 프로세서(202)는 각 이미지에서 오브젝트의 수를 검출할 수 있다. S404 단계에서, 방법(400)은 오브젝트들의 개수를 바탕으로 각 이미지에 대한 상대적인 스케일링 인자를 결정하는 단계를 포함한다. 프로세서(202)는 오브젝트의 개수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정할 수 있다. S406단계에서, 방법(400)은 각 이미지의 상대적인 스케일링 인자를 바탕으로 이미지들 상에서 하나 이상의 동작을 수행하는 단계를 포함한다. 프로세서(202)는 각 이미지의 상대적인 스케일링 인자를 바탕으로 이미지들 상에서 동작들을 수행할 수 있다.Figure 4 is a flow chart illustrating a method for managing the display of a plurality of images in an electronic device, in accordance with embodiments of the present disclosure. In one embodiment, in step S402, the method 400 includes detecting the number of objects in each image. The processor 202 may detect the number of objects in each image. In step S404, the method 400 includes determining a scaling factor relative to each image based on the number of objects. The processor 202 may determine the relative scaling factor of each image based on the number of objects. In step S406, the method 400 includes performing one or more operations on the images based on the relative scaling factor of each image. The processor 202 may perform operations on images based on the relative scaling factor of each image.

방법(400)에서의 다양한 동작, 행위, 블록, 단계 등은 개시된 순서대로 수행될 수 있고, 다른 순서대로 수행될 수도 있으며, 동시에 수행될 수도 있다. 또한, 일부 실시 예에서, 일부 동작, 행위(acts), 블록, 단계, 기능 등은 본 발명의 범위를 벗어나지 않는 범위 내에서 생략, 첨가, 변형, 스킵(skipped), 또는 이상과 같은 것 등을 할 수 있다.The various operations, acts, blocks, steps, etc. in the method 400 may be performed in the order disclosed, and may be performed in a different order or simultaneously. In addition, in some embodiments, some acts, acts, blocks, steps, functions, and the like may be omitted, added, modified, skipped, or the like, without departing from the scope of the present invention. can do.

도 5는, 본 개시의 실시 예들에 따라, 하나 이상의 이미지들의 크기 변경(resizing) 방법을 설명하기 위한 흐름도이다. 일 실시 예에서, S502 단계에서, 방법(500)은 각 이미지의 오브젝트를 검출하는 단계를 포함한다. 프로세서(202)는 각 이미지의 오브젝트 수를 검출할 수 있다. S504 단계에서, 방법(500)은 오브젝트 수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정하는 단계를 포함한다. 프로세서(202)는 오브젝트 수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정할 수 있다.5 is a flow diagram illustrating a method for resizing one or more images, in accordance with embodiments of the present disclosure; In one embodiment, in step S502, the method 500 includes detecting an object of each image. The processor 202 may detect the number of objects in each image. In step S504, the method 500 includes determining the relative scaling factor of each image based on the number of objects. The processor 202 may determine the relative scaling factor of each image based on the number of objects.

S506 단계에서, 방법(500)은 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들의 크기를 변경하는 단계를 포함할 수 있다. 프로세서(202)는 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들의 크기를 변경할 수 있다. S508 단계에서, 방법(500)은 전자 장치(100)의 한 화면 상에서 크기 변경된 하나 이상의 이미지들을 디스플레이하는 단계를 포함할 수 있다. 프로세서(202)는 전자 장치(100)의 스크린상에 크기 변경된 하나 이상의 이미지들을 디스플레이하도록 디스플레이(206)를 제어할 수 있다.In step S506, the method 500 may include varying the size of one or more images based on the relative scaling factor of each image. The processor 202 may change the size of one or more images based on the relative scaling factor of each image. In step S508, the method 500 may include displaying one or more images that have been resized on one screen of the electronic device 100. The processor 202 may control the display 206 to display one or more images that have been resized on the screen of the electronic device 100. [

방법(500)에서의 다양한 동작, 행위, 블록, 단계 등은 개시된 순서대로 수행될 수 있고, 다른 순서대로 수행될 수도 있으며, 동시에 수행될 수도 있다. 또한, 일부 실시 예에서, 일부 동작, 행위(acts), 블록, 단계, 기능 등은 본 발명의 범위를 벗어나지 않는 범위 내에서 생략, 첨가, 변형, 스킵(skipped), 또는 이상과 같은 것 등을 할 수 있다.The various operations, acts, blocks, steps, etc. in the method 500 may be performed in the order disclosed, and may be performed in a different order or simultaneously. In addition, in some embodiments, some acts, acts, blocks, steps, functions, and the like may be omitted, added, modified, skipped, or the like, without departing from the scope of the present invention. can do.

도 6a 내지 도 8h는, 본 개시의 다양한 실시 예들에 따라, 전자 장치에서 복수의 이미지를 디스플레이하는 선행 기술과 본원 발명의 비교를 설명하기 위해 도시한 도면들이다.Figures 6A-8H are diagrams illustrating the comparison of the present invention with prior art displaying a plurality of images in an electronic device, in accordance with various embodiments of the present disclosure.

도 6a 및 도 6b는, 본 개시의 실시 예들에 따라, 전자 장치의 갤러리 애플리케이션에서 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 6a는 전자 장치(100)에서 복수의 이미지가 갤러리 애플리케이션에서 디스플레이되는 종래 기술을 도시한 도면이다. 도 6a를 참조하면, 각 이미지에 포함된 객체들(예: 사람의 수)을 고려하지 않고 복수의 이미지가 디스플레이되어 있는 것을 알 수 있다. 종래의 시스템과 달리, 도 6b는 각 이미지에서 사람의 수를 바탕으로 복수의 이미지들의 크기가 변경된 것을 도시한 도면이다.6A and 6B are diagrams illustrating a comparison of the prior art and the present invention when displaying a plurality of images in a gallery application of an electronic device, in accordance with embodiments of the present disclosure. 6A is a diagram illustrating a prior art in which a plurality of images are displayed in a gallery application in electronic device 100. [ Referring to FIG. 6A, it can be seen that a plurality of images are displayed without considering the objects (e.g., the number of people) included in each image. Unlike the conventional system, FIG. 6B shows the size of a plurality of images changed based on the number of people in each image.

도 6b를 참조하면, 사람의 수가 더 많은 이미지는 더 크게 크기가 변경되어 디스플레이되는 것을 알 수 있다. 예를 들어, 가장 많은 사람이 있는 이미지가 가장 크게 크기가 변경되어 디스플레이되고, 세 사람이 있는 이미지는 두 사람이 있는 이미지보다 더 크게 디스플레이되도록 크기가 변경될 수 있다. 또한, 한 사람이 있는 이미지는 가장 작게 크기가 변경되어 디스플레이 될 수 있다. 또한, 두 사람이 있는 이미지 중 이미지 상에 사람의 전신이 포함된 이미지가 사람의 반신만 포함된 이미지보다 더 크게 크기가 변경되어 디스플레이될 수 있다. 도 6b는 도 6a와 다르게 이미지들의 크기가 이미지의 객체의 개수에 따라 변경되고, 이미지들의 변경된 크기에 따라 레이아웃 및 이미지의 디스플레이 순서도 변경되어 디스플레이되는 것이 도시된다. 그러나, 이는 본 개시를 설명하기 위한 일 실시 예일 뿐, 이에 한정되지 않는다. 예를 들어, 도 6b는, 복수의 이미지의 레이아웃들을 도 6a와 동일하게 유지한 채, 각 이미지들을 이미지의 객체 수를 바탕으로 크기를 재변경하여 디스플레이한 것을 도시한다.Referring to FIG. 6B, it can be seen that an image with a larger number of people is displayed with a larger size displayed. For example, an image with the most people can be resized to the largest size, and an image with three people can be resized to display larger than an image with two people. Also, an image with one person can be displayed with the smallest size changed. In addition, the image including the whole body of the person on the image among the images having two persons can be displayed and changed in size larger than the image including only the half person of the person. 6B is different from FIG. 6A in that the size of the images is changed according to the number of objects of the image, and the display order of the layout and images is also changed and displayed according to the changed size of the images. However, this is only one embodiment for explaining the present disclosure, but is not limited thereto. For example, FIG. 6B shows that the layouts of a plurality of images are maintained in the same manner as in FIG. 6A, and the images are displayed by changing the sizes based on the number of objects in the image.

도 6b에 도시된 바와 같이 이미지들의 크기가 변경된 경우, 사용자는 전자장치(100)를 통해 그룹 이미지(여러 사람이 있는 이미지)에서 개별 사람을 더욱 명확히 식별할 수 있다. 예를 들어, 도 6a에서는 사용자가 가장 많은 사람이 있는 이미지에서 개별 사람들을 식별하는 것이 어려울 수 있다. 그러나, 도 6b에서는 가장 많은 사람이 있는 이미지가 가장 크게 이미지의 크기가 변경되어 디스플레이되어, 사용자는 이미지에서 개별 사람들을 충분히 인식할 수 있다. 즉, 본 개시의 실시 예에 따라, 복수의 이미지에서 각 이미지의 오브젝트 수를 바탕으로 이미지의 크기 변경함으로써, 전자 장치(100)는 각 이미지의 정보 또는 콘텐츠를 용이하게 인식할 수 있도록 복수의 이미지를 디스플레이하여 사용자 경험(UX, user experience)을 향상(enhance)시킬 수 있다.When the size of the images is changed as shown in FIG. 6B, the user can more clearly identify the individual in the group image (the image with multiple persons) through the electronic device 100. FIG. For example, in Figure 6A it may be difficult for a user to identify individual persons in the image with the most people. However, in FIG. 6B, the image with the largest number of people is displayed with the largest image size changed, so that the user can fully recognize individual persons in the image. That is, according to the embodiment of the present disclosure, by changing the size of an image based on the number of objects of each image in a plurality of images, the electronic device 100 can display a plurality of images May be displayed to enhance the user experience (UX).

도 7a 및 도 7b는, 본 개시의 실시 예들에 따라, 콜라주(collage)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 7a는 콜라주에서 복수의 이미지가 제공되는 종래의 기술을 도시한 도면이다. 도 7a를 참조하면, 각 이미지에 포함된 객체들(예: 사람의 수)을 고려하지 않고 복수의 이미지가 디스플레이되어 있는 것을 알 수 있다. 종래의 시스템과 달리, 도 7b는 각 이미지에서 사람의 수를 바탕으로 복수의 이미지들의 크기가 변경된 것을 도시한 도면이다. 즉, 콜라주에서 이미지들은 각 이미지의 오브젝트 수에 따라 크기가 변경된다.7A and 7B are diagrams illustrating a comparison of the prior art and the present invention when displaying a plurality of images in a collage, in accordance with embodiments of the present disclosure. 7A is a diagram illustrating a conventional technique in which a plurality of images are provided in a collage. Referring to FIG. 7A, it can be seen that a plurality of images are displayed without considering the objects included in each image (e.g., the number of people). Unlike the conventional system, FIG. 7B shows that the sizes of a plurality of images are changed based on the number of people in each image. That is, the images in the collage are resized according to the number of objects in each image.

도 7b를 참조하면, 가장 많은 사람이 있는 이미지는 가장 큰 크기로 디스플레이된다. 또한, 세 사람이 있는 이미지는 가장 많은 사람이 있는 이미지보다 더 작게 크기가 변경되어 디스플레이된다. 또한, 한 사람이 있는 이미지는 두 사람이 있는 이미지보다 더 작게 크기가 변경되어 디스플레이된다. 즉, 도 7b에 도시된 바와 같이 각 이미지에서 사람의 수에 따라 콜라주에서 각 이미지는 크기가 변경된다. Referring to FIG. 7B, the image with the largest number of people is displayed at the largest size. Also, an image with three persons is displayed in a smaller size than the image with the most people. Also, an image with one person is displayed in a smaller size than the image with two people. That is, as shown in FIG. 7B, each image in the collage is resized according to the number of people in each image.

또한, 종래에는, 콜라주를 앨범 애플리케이션에서 디스플레이하는 경우, 전자 장치(100)는 콜라주 미리보기 이미지에서 각 이미지의 전체 이미지를 보여주지 않고 이미지 중 일부 영역이 디스플레이된다. 그러나, 본 개시의 일 실시 예에 따라, 전자 장치(100)는 이미지 내에 포함된 객체 수에 따라 이미지의 크기를 변경함으로써 콜라주 미리보기 이미지에서 이미지에 포함된 정보(예: 사람 얼굴 등의 콘텐츠 정보) 전체가 보여지도록 디스플레이 될 수 있다. 도 7a 및 도 7b에서 복수의 이미지들의 레이아웃은 동일하게 도시되었으나, 이는 본 개시를 설명하기 위한 일 실시 예일 뿐 이에 한정되지 않는다.Also, conventionally, when displaying a collage in an album application, the electronic device 100 does not show the entire image of each image in the collage preview image, but some area of the image is displayed. However, in accordance with one embodiment of the present disclosure, the electronic device 100 may change the size of the image in accordance with the number of objects contained within the image, such that information contained in the image (e.g., content information May be displayed to be visible. 7A and 7B, the layouts of the plurality of images are shown in the same manner, but this is only one embodiment for explaining the present disclosure, and the present invention is not limited thereto.

도 8a 및 도 8b는, 본 개시의 실시 예들에 따라, 다자간(multi party) 화상 회의(video conference)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술 및 본원 발명의 비교를 도시한 도면이다. 도 8a는 다자간 화상회의에서 사람들을 디스플레이하는 종래 기술을 도시한 도면이다. 도 8a를 참조하면, 다자간 화상 회의의 각 이미지에서 오브젝트의 수(예: 사람의 수)를 고려하지 않고 복수의 이미지들이 디스플레이되는 것을 알 수 있다. 종래 기술과 달리, 도 8b는 다자간 화상 회의의 각 이미지에서 사람의 수를 바탕으로 복수의 이미지들의 크기가 변경되는 것을 설명하기 위한 도면이다. 도 8에는 화상 회의에 참석한 참석자들의 수에 따라 각 이미지의 크기가 변경되는 것이 도시된다.8A and 8B are diagrams illustrating the prior art and comparison of the present invention when displaying multiple images in a multi-party video conference, in accordance with embodiments of the present disclosure. 8A is a diagram illustrating a prior art for displaying people in a multipoint videoconference. 8A, it can be seen that a plurality of images are displayed without considering the number of objects (e.g., the number of persons) in each image of the multipoint videoconference. Unlike the prior art, FIG. 8B is a diagram for explaining how the size of a plurality of images is changed based on the number of people in each image of a multi-party video conference. FIG. 8 shows that the size of each image is changed in accordance with the number of participants attending the video conference.

도 8c 및 도 8d는, 본 개시의 실시 예들에 따른, 두 채널을 동시에 보여주는 텔레비전에서 복수의 이미지를 디스플레이하는 경우, 선행 기술 및 본원 발명의 다른 비교를 도시한 도면이다. 도 8c는, 텔레비전에서 두 개의 채널을 동시에 보여주는 경우, 어느 순간의 시간에, 각 채널에 대응되는 화면 윈도우에 이미지가 디스플레이되는 것을 도시한다. 종래 기술과 달리, 도 8d는 각 윈도우의 오브젝트 수를 바탕으로 각 채널의 윈도우의 크기가 조절되는 것을 도시한 도면이다. 도 8d를 참조하면, 세 명의 선수가 있는 윈도우의 크기가 한명의 뉴스 앵커가 있는 윈도우의 크기보다 더 크게 크기가 변경된다. 즉, 텔레비전에서 두 개의 채널을 동시에 보여줄 때, 윈도우들의 크기는 각 윈도우에 있는 사람의 수를 바탕으로 동적으로 조절될 수 있다. 8C and 8D are diagrams illustrating prior art and other comparisons of the present invention when displaying a plurality of images on a television showing both channels simultaneously, in accordance with embodiments of the present disclosure. FIG. 8C shows an image displayed on a screen window corresponding to each channel at a certain time instant when two channels are simultaneously displayed on a television. Unlike the prior art, FIG. 8D shows that the window size of each channel is adjusted based on the number of objects in each window. 8D, the size of the window with three players is changed to be larger than the size of the window with one news anchor. That is, when displaying two channels simultaneously on a television, the size of the windows can be dynamically adjusted based on the number of people in each window.

도 8e 및 도 8f는, 본 개시의 실시 예들에 따른, 비디오 보안(video surveillance)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 또 다른 비교를 도시한 도면이다. 도 8e는, 비디오 보안에서, 복수의 이미지들이 디스플레이되는 종래 기술을 도시한 도면이다. 종래에는 복수의 이미지들이 디스플레이되는 동안 각 이미지의 오브젝트 수를 고려하지 않는다. 종래 기술과 달리, 도 8f는 복수의 이미지들에서 각 이미지가 각 이미지의 오브젝트 수를 바탕으로 크기가 변경된 것을 도시한 도면이다. 도 8f를 참조하면, 비디오 보안(video surveillance)에서 비디오 피드(video feeds)들은 오브젝트들의 수에 따라 크기가 변경된다.8E and 8F illustrate another comparison of the present invention with prior art when displaying a plurality of images in video surveillance, in accordance with embodiments of the present disclosure. 8E is a diagram illustrating a prior art in which, in video security, a plurality of images are displayed. Conventionally, the number of objects of each image is not considered while a plurality of images are displayed. Unlike the prior art, FIG. 8F shows that in an image, each image is resized based on the number of objects in each image. Referring to FIG. 8F, in video surveillance, video feeds are resized according to the number of objects.

도 8g 및 도 8h는, 본 개시의 실시 예들에 따른, 웹페이지에서 이미지를 검색한 결과 이미지들이 디스플레이되는 종래 기술 및 본원 발명의 비교를 설명하기 위한 도면이다. 도 8g는, 웹페이지에서 검색된 이미지들이 모두 동일한 크기로 디스플레이되는 종래 기술을 도시한 도면이다. 종래와 달리, 본 개시의 일 실시 예에 따라, 도 8h는, 검색된 이미지들은 각 이미지의 오브젝트 수에 따라 크기를 변경하여 디스플레이되는 것을 도시한 도면이다. 이미지들이 웹 페이지에서 로딩되는 경우, 각 이미지의 오브젝트 수는 이미지들이 로딩되는 동안 계산될 수 있다. 또한, 각 이미지의 오브젝트 수를 바탕으로 이미지들의 크기는 동적으로 크기가 변경될 수 있고, 크기가 변경된 이미지들은 웹페이지 안에서 디스플레이될 수 있다.8G and 8H are diagrams illustrating the prior art and comparison of the present invention in which images are displayed as a result of retrieving an image in a web page, in accordance with embodiments of the present disclosure. FIG. 8G is a diagram showing a prior art in which images retrieved from a web page are all displayed at the same size. Unlike the prior art, according to one embodiment of the present disclosure, FIG. 8H is a diagram showing that the retrieved images are resized and displayed according to the number of objects in each image. When images are loaded in a web page, the number of objects in each image can be calculated while the images are being loaded. Also, based on the number of objects in each image, the size of the images can be dynamically resized, and the resized images can be displayed within a web page.

도 8i 및 도 8j는, 본 개시의 실시 예들에 따른, 다자간 화상 컨퍼런스에서 한 명이 떠나는 경우, 복수의 이미지를 디스플레이하는 시나리오를 도시한 도면이다. 도 8i는 다자간 화상 회의가 진행중인 것을 도시한다. 화상회의 동안, 한 사람(801)이 화상 회의 자리를 떠날 수 있다. 화상회의 도중 한 사람(801)이 떠난 경우, 나머지 사람들의 수를 바탕으로 화상 회의에서 각 이미지들은 크기가 변경될 수 있다. 도 8j는 회상회의 도중 한 사람(801)이 떠난 후의 이미지를 도시한 도면이다. 한 사람(801)이 화상 회의 자리를 떠난 경우, 도 8i에 도시된 이미지들은 도 8j에 도신된 바와 같이 크기가 변경될 수 있다. 또한, 화상 회의 도중 한 명 이상의 사람들이 회의에 합석한 경우, 다자간 화상 회의에서 이미지들은 이미지 내의 오브젝트 수에 따라 크기가 변경되어 디스플레이될 수 있다.Figures 8i and 8j are diagrams illustrating scenarios for displaying multiple images when one person leaves in a multi-party video conference, in accordance with the embodiments of the present disclosure. Figure 8i shows that a multipoint videoconference is in progress. During a video conference, one person 801 may leave the video conference. When a person 801 leaves during a videoconference, each image in the videoconference can be resized based on the number of people remaining. 8J is a diagram showing an image after one person 801 leaves during a recall meeting. When one person 801 leaves the videoconference room, the images shown in Fig. 8I can be resized as shown in Fig. 8J. Also, if more than one person joins the conference during a video conference, the images in the multi-party video conference may be sized and displayed depending on the number of objects in the image.

프로세서(202)는 복수의 이미지가 디스플레이되는 영역을 지정된 n개의 타일 형상으로 구분할 수 있다. 또한, 프로세서(202)는 각 복수의 이미지에 포함된 오브젝트의 수에 따라 크기가 변경된 이미지를 각 n개의 타일 형상 내에 다시 렌더링(re-rendering)하여 디스플레이하도록 디스플레이(260)를 제어할 수 있다.The processor 202 may divide an area where a plurality of images are displayed into a designated n tile shape. In addition, the processor 202 may control the display 260 to re-render and display the resized image in each of the n tile shapes according to the number of objects included in each of the plurality of images.

도 9는, 본 개시의 실시 예들에 따른, 복수의 타일(tiles)을 도시한 도면이다. 도 9를 참조하면, 각 아이콘은 하나의 타일 형상을 나타낸다. 각 타일은 각 타일 내의 오브젝트의 수를 바탕으로 크기가 변경될 수 있다. 애플리케이션 아이콘들 및 폴더 아이콘들은 각각 사람의 얼굴 등과 같은 오브젝트를 가질 수 있는 이미지들일 수 있다. 애플리케이션 아이콘들 및 폴더들은 오브젝트 수를 계산하여 크기가 변경될 수 있다. 애플리케이션 아이콘들 및 폴더들은 오브젝트의 수에 비례하여 크기가 변경될 수 있다. 예를 들어, 더 많은 오브젝트를 가진 아이콘의 이미지 크기는 더 적은 오브젝트를 가진 아이콘들의 이미지 크기보다 상대적으로 더 크게 디스플레이될 수 있다.Figure 9 is a diagram illustrating a plurality of tiles, in accordance with embodiments of the present disclosure; Referring to FIG. 9, each icon represents one tile shape. Each tile can be resized based on the number of objects in each tile. The application icons and folder icons may be images that may have objects such as a human face, respectively. Application icons and folders can be resized by calculating the number of objects. The application icons and folders may be resized in proportion to the number of objects. For example, the image size of an icon with more objects can be displayed relatively larger than the image size of icons with fewer objects.

도 10a 및 도 10b는, 본 개시의 실시 예들에 따른, 음악 애플리케이션에서 앨범 커버(album covers)의 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 10a는 앨범 커버의 이미지들을 도시한 종래 기술을 도시한 도면이다. 도 10a를 참조하면, 앨범 커버의 각 이미지의 오브젝트 수를 고려하지 않고 앨범 커버의 이미지들이 동일한 크기로 디스플레이된다. 반면, 도 10b는, 종래와 달리, 앨범 커버의 이미지들의 크기가 변경되어 디스플레이되는 것을 도시한 도면이다. 도 10b를 참조하면, 가장 많은 오브젝트를 가진 앨범 아이콘이 가장 크게 크기가 변경되어 디스플레이된다.10A and 10B illustrate a comparison of the prior art and the present invention when displaying a plurality of images of album covers in a music application, in accordance with embodiments of the present disclosure. 10A is a diagram showing a conventional art showing images of an album cover. Referring to FIG. 10A, images of the album cover are displayed at the same size without considering the number of objects of each image of the album cover. On the other hand, Fig. 10B is a diagram showing that the size of images of the album cover is changed and displayed unlike the related art. Referring to FIG. 10B, an album icon having the largest number of objects is displayed with the largest size changed.

도 11은, 본 개시의 실시 예들에 따른, 하나 이상의 이미지를 선택하기 위한 방법을 설명하기 위한 흐름도이다. 일 실시 예에서, S1102 단계에서, 방법(1100)은 각 이미지에서 오브젝트의 수를 검출하는 단계를 포함한다. 프로세서(202)는 각 이미지에서 오브젝트의 수를 검출할 수 있다. S1104 단계에서, 방법(1100)은 오브젝트의 수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정하는 단계를 포함한다. 프로세서(202)는 오브젝트의 수를 바탕으로 각 이미지의 스케일링 인자를 결정할 수 있다.11 is a flow chart illustrating a method for selecting one or more images, in accordance with embodiments of the present disclosure; In one embodiment, in step S1102, the method 1100 includes detecting the number of objects in each image. The processor 202 may detect the number of objects in each image. In step S1104, the method 1100 includes determining a relative scaling factor of each image based on the number of objects. The processor 202 may determine the scaling factor of each image based on the number of objects.

S1106 단계에서, 방법(1100)은 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지를 선택하는 단계를 포함한다. 프로세서(202)는 각 이미지의 상대적인 스케일링 인자를 바탕으로 하나 이상의 이미지들을 선택할 수 있다. S1108단계에서, 방법(1100)은 전자 장치(100)의 스크린 상에 크기 변경된 하나 이상의 이미지들을 디스플레이하는 단계를 포함한다. 프로세서(202)는 전자 장치(100)의 스크린 상에 하나 이상의 크기 변경된 이미지들을 디스플레이할 수 있다.In step S1106, the method 1100 includes selecting one or more images based on the relative scaling factor of each image. The processor 202 may select one or more images based on the relative scaling factor of each image. In step S1108, the method 1100 includes displaying one or more images that have been resized on the screen of the electronic device 100. [ The processor 202 may display one or more resized images on the screen of the electronic device 100.

방법(1100)에서의 다양한 동작, 행위, 블록, 단계 등은 개시된 순서대로 수행될 수 있고, 다른 순서대로 수행될 수도 있으며, 동시에 수행될 수도 있다. 또한, 일부 실시 예에서, 일부 동작, 행위(acts), 블록, 단계, 기능 등은 본 발명의 범위를 벗어나지 않는 범위 내에서 생략, 첨가, 변형, 스킵(skipped), 또는 이상과 같은 것 등을 할 수 있다.The various operations, acts, blocks, steps, and so on in method 1100 may be performed in the order disclosed, and may be performed in a different order, or simultaneously. In addition, in some embodiments, some acts, acts, blocks, steps, functions, and the like may be omitted, added, modified, skipped, or the like, without departing from the scope of the present invention. can do.

도 12a 및 도 12b는, 본 개시의 실시 예들에 따른, SNS(Social Networking Site)에서 복수의 이미지를 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 12a는 SNS에서 이미지들이 디스플레이되는 종래 기술을 도시한 도면이다. 도 12a를 참조하면, 복수의 이미지들은 각 이미지에서 오브젝트의 수(예: 사람의 수)를 고려하지 않고 디스플레이 되거나 사용자가 디스플레이하기 위한 이미지를 수동으로(manually) 선택해야 하는 것을 알 수 있다. 반면, 도 12b는, 종래와 달리, SNS에서 복수의 이미지들이 각 이미지의 사람 수를 바탕으로 동적으로 선택될 수 있다. 도 12b를 참조하면, SNS의 이미지 피드(feed)에서, 이미지들은 오브젝트의 수에 따라 동적으로 선택되어 크기가 변경되어 디스플레이될 수 있다.12A and 12B are diagrams illustrating a comparison of the prior art and the present invention when displaying a plurality of images in a social networking site (SNS), in accordance with embodiments of the present disclosure. 12A is a diagram showing a prior art in which images are displayed in the SNS. Referring to FIG. 12A, it can be seen that a plurality of images are displayed without considering the number of objects (e.g., the number of objects) in each image, or the user has to manually select an image for display. On the other hand, Fig. 12B shows that, unlike the prior art, a plurality of images in the SNS can be dynamically selected based on the number of people in each image. Referring to FIG. 12B, in the image feed of the SNS, the images may be dynamically selected and resized and displayed according to the number of objects.

도 13은, 본 개시의 실시 예들에 따른, 하나 이상의 이미지들을 자르는 방법(cropping)을 도시한 흐름도이다. 일 실시 예에서, S1302단계에서, 방법(1300)은 각 이미지의 오브젝트 수를 검출하는 단계를 포함한다. 프로세서(202)는 각 이미지의 오브젝트 수를 검출할 수 있다. S1304단계에서, 방법(1300)은 오브젝트의 수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정하는 단계를 포함한다. 프로세서(202)는 오브젝트 수를 바탕으로 각 이미지의 상대적인 스케일링 인자를 결정할 수 있다.13 is a flow chart illustrating cropping of one or more images in accordance with embodiments of the present disclosure. In one embodiment, in step 1302, the method 1300 includes detecting the number of objects in each image. The processor 202 may detect the number of objects in each image. In step 1304, the method 1300 includes determining the relative scaling factor of each image based on the number of objects. The processor 202 may determine the relative scaling factor of each image based on the number of objects.

S1306단계에서, 방법(1300)은 각 이미지의 상대적 스케일링 인자를 바탕으로 하나 이상의 이미지를 자르는 단계(cropping)를 포함한다. 프로세서(202)는 각 이미지의 상대적 스케일링 인자를 바탕으로 하나 이상의 이미지들을 자를 수 있다. S1308단계에서, 방법(1300)은 전자 장치(100)의 스크린 상에서 하나 이상의 크기 변경된 이미지들을 디스플레이하는 단계를 포함한다. 프로세서(202)는 전자 장치(100)의 스크린 상에서 크기 변경된 하나 이상의 이미지들을 디스플레이할 수 있다.In step 1306, the method 1300 includes cropping one or more images based on the relative scaling factor of each image. The processor 202 may crop one or more images based on the relative scaling factor of each image. In step 1308, the method 1300 includes displaying one or more resized images on the screen of the electronic device 100. The processor 202 may display one or more images that have been resized on the screen of the electronic device 100.

제안된 방법(1300)으로, 이미지들은 각 이미지의 상대적 스케일링 인자를 바탕으로 잘릴 수 있다. 또한, 잘린 후 크기 변경된 이미지들은 전자 장치(100)의 스크린 상에 디스플레이될 수 있다. 이미지들이 잘린 경우, 사용자는 충분하게 이미지를 인식할 수 있고, 이미지를 보는 동안 사용자 경험이 증대될 수 있다. With the proposed method 1300, images can be truncated based on the relative scaling factor of each image. In addition, the resized images may be displayed on the screen of electronic device 100 after being truncated. If the images are truncated, the user will be able to recognize the image sufficiently and the user experience can be increased while viewing the image.

방법(1300)에서의 다양한 동작, 행위, 블록, 단계 등은 개시된 순서대로 수행될 수 있고, 다른 순서대로 수행될 수도 있으며, 동시에 수행될 수도 있다. 또한, 일부 실시 예에서, 일부 동작, 행위(acts), 블록, 단계, 기능 등은 본 발명의 범위를 벗어나지 않는 범위 내에서 생략, 첨가, 변형, 스킵(skipped), 또는 이상과 같은 것 등을 할 수 있다.The various operations, acts, blocks, steps, etc. in the method 1300 may be performed in the order disclosed, and may be performed in a different order or simultaneously. In addition, in some embodiments, some acts, acts, blocks, steps, functions, and the like may be omitted, added, modified, skipped, or the like, without departing from the scope of the present invention. can do.

도 14a 및 도 14b는, 본 개시의 실시 예들에 따른, 복수의 이미지들을 디스플레이하는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 14a는 복수의 이미지가 디스플레이된 종래 기술을 도시한 도면이다. 도 14a에 도시된 바와 같이, 본 개시의 일 실시 예에 따라, 복수의 이미지 상에서 자르는 단계(cropping)가 수행될 수 있다. 도 14b는 잘린 이미지가 크기 변경되어 디스플레이되는 것을 도시한 도면이다. 일 실시 예에서, 도 14a에 도시된 바와 같이, 돌출 영역 검출 방법(salient region detection method)은 각 이미지에서 돌출 영역(salient region)을 검출하는데 이용된다. 돌출 영역은 더 두드러지고 크게 나타나도록 이미지들은 크기가 변경된다. 예를 들어, 도 14b의 첫 번째 이미지의 안내판(1410)의 내용은 도 14a의 네 번째 이미지의 안내판(1410) 보다 이미지의 크기가 크게 변경되어 이미지 내의 정보확인이 용이할 수 있다. 도 14b의 두 번째 이미지의 건물은 도 14a의 다섯 번째 이미지의 건물에서보다 명확하게 인식 가능하게 크기가 변경되어 디스플레이된다. 도 14b의 세 번째 이미지의 버스는 도 14a에 세 번째 이미지에서 버스를 자르고 크기를 변경하여 시각적으로 더욱 명확하게 도시된다.14A and 14B are diagrams illustrating a comparison of the prior art and the present invention when displaying a plurality of images, in accordance with embodiments of the present disclosure. 14A is a diagram showing a prior art in which a plurality of images are displayed. As shown in FIG. 14A, according to one embodiment of the present disclosure, cropping on a plurality of images may be performed. Fig. 14B is a view showing that the cropped image is displayed with its size changed. Fig. In one embodiment, as shown in Fig. 14A, a salient region detection method is used to detect a salient region in each image. The images are resized so that the protruding areas appear more prominent and larger. For example, the content of the guide plate 1410 of the first image in FIG. 14B may be larger than that of the guide plate 1410 of the fourth image in FIG. 14A, so that information in the image can be easily identified. The building of the second image in Fig. 14B is displayed in a size that is clearly recognizable and changed in the building of the fifth image of Fig. 14A. The bus of the third image of FIG. 14B is shown visually more clearly by cutting and resizing the bus in the third image in FIG. 14A.

도 15는, 본 개시의 실시 예들에 따른, 전자 장치에서 하나의 이미지의 디스플레이를 관리하기 위한 방법을 도시한 흐름도이다. 일 실시 예에서, S1502 단계에서, 방법(1500)은 이미지 상에서 복수의 제어 요소들을 디스플레이하는 단계를 포함한다. 프로세서(202)는 이미지 상에서 복수의 제어 요소들을 디스플레이하도록 디스플레이를 제어할 수 있다. S1504 단계에서, 방법(1500)은 이미지에서 오브젝트의 수를 검출하는 단계를 포함한다. 프로세서(202)는 이미지에서 오브젝트의 수를 검출할 수 있다.15 is a flow diagram illustrating a method for managing the display of one image in an electronic device, in accordance with embodiments of the present disclosure. In one embodiment, in step 1502, the method 1500 includes displaying a plurality of control elements on the image. The processor 202 may control the display to display a plurality of control elements on the image. In step S1504, the method 1500 includes detecting the number of objects in the image. The processor 202 may detect the number of objects in the image.

S1506단계에서, 방법(1500)은 이미지 상에서 오브젝트의 수가 0으로 검출된 이미지 영역으로 하나 이상의 제어 요소들의 위치를 동적으로 이동시키는 단계를 포함할 수 있다. 프로세서(202)는 이미지 상에서 오브젝트가 검출되지 않은 영역으로 하나 이상의 제어 요소들의 위치를 이동시킬 수 있다.In step S1506, the method 1500 may include dynamically moving the location of one or more control elements to an image area where the number of objects on the image is detected as zero. The processor 202 may move the position of one or more control elements to an area where no object is detected on the image.

제안된 방법(1500)에서, 이미지 제어 요소들은 오브젝트의 수가 검출되지 않은 이미지 영역 상에 디스플레이된다. 즉, 종래와 달리, 이미지 제어 요소들이 이미지 영역 상에서 오브젝트가 검출되지 않은 영역으로 이동되어 디스플레이됨으로써, 이미지의 정보 및 오브젝트들은 충분하게(fully) 인식될 수 있다. In the proposed method 1500, the image control elements are displayed on an image area where the number of objects is not detected. That is, unlike the prior art, the information and objects of the image can be fully recognized by moving the image control elements to the area where the object is not detected on the image area.

방법(1500)에서의 다양한 동작, 행위, 블록, 단계 등은 개시된 순서대로 수행될 수 있고, 다른 순서대로 수행될 수도 있으며, 동시에 수행될 수도 있다. 또한, 일부 실시 예에서, 일부 동작, 행위(acts), 블록, 단계, 기능 등은 본 발명의 범위를 벗어나지 않는 범위 내에서 생략, 첨가, 변형, 스킵(skipped), 또는 이상과 같은 것 등을 할 수 있다.The various operations, acts, blocks, steps, etc. in the method 1500 may be performed in the order disclosed, and may be performed in a different order or simultaneously. In addition, in some embodiments, some acts, acts, blocks, steps, functions, and the like may be omitted, added, modified, skipped, or the like, without departing from the scope of the present invention. can do.

도 16a 및 도 16b는, 본 개시의 실시 예들에 따른, 이미지 편집 애플리케이션 상에 제어 요소들이 디스플레이되는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 16a는, 이미지 제어 요소들을 가지는 이미지 편집 애플리케이션이 디스플레이되는 종래 기술을 도시한 도면이다. 도 16a를 참조하면, 이미지 제어 요소들은 디폴트 위치에 이격되어 있다. 이미지 상에 이미지 제어 요소들이 디폴트 위치에서 이격되어 디스플레이되는 경우, 이미지 제어 요소들이 이미지 상에 오버레이되어 디스플레이되므로 이미지 내의 정보 또는 오브젝트들은 충분하게 인식될 수 없다. 도 16b는, 종래 기술과 달리, 이미지 제어 요소들이 오브젝트가 검출되지 않은 이미지의 영역으로 이동되어 디스플레이되는 것을 도시한 도면이다. 도 16b를 참조하면, 이미지 제어 요소들은 오브젝트가 없는 이미지 상에 디스플레이된다. 즉, 종래 기술과 대조적으로, 오브젝트가 없는 이미지의 영역 상에 이미지 제어 요소들이 디스플레이되는 경우, 이미지 내의 정보 및 오브젝트들은 충분하게 인식될 수 있다. 비슷한 방법으로, 카메라 뷰 파인더 애플리케이션에서, 이미지 제어 요소들은 오브젝트 수가 0으로 검출된 이미지 영역에 디스플레이될 수 있다. 16A and 16B are diagrams illustrating a comparison of the prior art and the present invention when control elements are displayed on an image editing application, in accordance with embodiments of the present disclosure. 16A is a diagram illustrating a prior art in which an image editing application having image control elements is displayed. 16A, the image control elements are spaced apart from their default positions. When the image control elements are displayed apart from the default position on the image, the information or objects in the image can not be sufficiently recognized because the image control elements are displayed overlaid on the image. 16B is a diagram showing that, unlike the prior art, image control elements are moved and displayed in an area of an image where an object is not detected. Referring to FIG. 16B, image control elements are displayed on an image without an object. That is, in contrast to the prior art, when image control elements are displayed on an area of an image without an object, the information and objects in the image can be sufficiently recognized. In a similar manner, in the camera viewfinder application, the image control elements may be displayed in the image area where the number of objects is detected as zero.

이때, 이미지 제어 요소들은 이미지를 캡쳐하거나 편집하기 위한 사용자 조작 메뉴 또는 아이콘 등을 포함할 수 있다. 또한, 사용자 조작 메뉴가 메뉴 형태의 UI가 아닌 개별적인 아이콘 형태로 디스플레이된 경우, 전자 장치(100)는 각각의 아이콘은 이미지의 오브젝트 검출 수가 0인 영역으로 아이콘이 이동하여 디스플레이되도록 디스플레이를 제어할 수 있다.At this time, the image control elements may include a user operation menu or an icon for capturing or editing an image. In addition, when the user operation menu is displayed in the form of a separate icon rather than a UI in the form of a menu, the electronic device 100 can control the display such that each icon is displayed by moving the icon to the area where the number of object detection of the image is zero have.

도 17a 및 도 17d는, 본 개시의 실시 예들에 따른, 이미지의 자막(caption)이 디스플레이되는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면들이다.17A and 17D are diagrams illustrating a comparison of the prior art and the present invention when a caption of an image is displayed, in accordance with embodiments of the present disclosure.

도 17a 및 도 17b는, 본 개시의 실시 예들에 따른, 웹 페이지 상에서 이미지의 자막(caption)이 디스플레이되는 경우, 선행 기술과 본원 발명의 비교를 도시한 도면이다. 도 17a는 이미지의 자막(1710)이 이미지 아래에 디스플레이되는 종래 기술을 도시한 도면이다. 반면, 종래 기술과 다르게, 도 17b는 이미지의 자막(1710-1)이 이미지 상에 오버레이되는 것을 도시한 도면이다. 일 실시 예에서, 이미지 상에서 오버레이되기 위한 자막(예, 글자)의 적절한 위치는 이미지의 오브젝트가 검출되지 않은 영역으로 결정된다. 또한, 자막이 이미지 상에 오버레이됨에 따라 이미지의 크기는 더 크게 변경되어 디스플레이될 수 있다.17A and 17B illustrate a comparison of the prior art and the present invention when a caption of an image is displayed on a web page, in accordance with embodiments of the present disclosure. 17A is a diagram illustrating a prior art in which a caption 1710 of an image is displayed under an image. On the other hand, unlike the prior art, Fig. 17B shows that the caption 1710-1 of the image is overlaid on the image. In one embodiment, the appropriate position of the subtitle (e.g., character) to be overlaid on the image is determined to be the area where the object of the image is not detected. Further, as the subtitle is overlaid on the image, the size of the image can be changed and displayed larger.

일 실시 예에서, 프로세서(202)는 이미지 상에 자막이 오버레이되기 위한 적합한 폰트 색상 및 크기가 결정할 수 있다. 예를 들어, 자막(캡션)의 폰트 색상은 자막의 배경이 되는 이미지의 색상과 대조되는 색상으로 결정될 수 있다. 또한, 자막의 스타일을 결정하는 요소들은 자동으로 업데이트될 수도 있고, 사용자 명령에 의해 결정될 수도 있다.In one embodiment, the processor 202 may determine the appropriate font color and size for the subtitle to be overlaid on the image. For example, the font color of the caption (caption) can be determined by the color contrasted with the color of the image that is the background of the caption. In addition, the elements that determine the style of the subtitles may be updated automatically or may be determined by a user command.

도 17c 및 도 17d는, 본 개시의 실시 예들에 따른, 이미지의 자막이 디스플레이되는 경우, 선행 기술과 본원 발명의 다른 비교를 도시한 도면이다. 도 17c는 이미지의 자막이 이미지 아래에 디스플레이되는 종래 기술을 도시한 도면이다. 도 17d는, 본 개시의 일 실시 예로, 이미지의 자막이 이미지에 오버레이된 복수의 이미지들을 도시한 도면이다. 예를 들어, 도 17d에 도시된 바와 같이, 하나의 웹 페이지 상에서, 이미지의 자막이 오버레이된 이미지가 복수 개인 경우, 프로세서(202)는 복수의 자막이 오버레이된 이미지들을 하나의 갤러리 형태로 디스플레이하도록 디스플레이를 제어할 수 있다. 또한, 프로세서(202)는 갤러리 형태로 디스플레이된 복수의 이미지들에서 각 이미지의 오브젝트 수를 바탕으로 이미지의 크기를 변경할 수도 있다.17C and 17D are diagrams illustrating the prior art and other comparisons of the present invention when subtitles of an image are displayed, in accordance with embodiments of the present disclosure. Figure 17C is a diagram illustrating a prior art in which the caption of an image is displayed below the image. 17D is a diagram illustrating a plurality of images overlaid on an image with subtitles of an image in one embodiment of the present disclosure. For example, as shown in FIG. 17D, when there are a plurality of images on which a caption of an image is overlaid on one web page, the processor 202 displays a plurality of subtitles on the overlaid images in a single gallery form The display can be controlled. In addition, the processor 202 may change the size of the image based on the number of objects of each image in a plurality of images displayed in a gallery form.

도 18a 및 도 18b는, 본 개시의 실시 예들에 따른, 웨어러블 장치(wearable device)에서 이미지 상에 자막으로 검색(browsing)하는 일 실시 예를 도시한 도면이다. 도 18a 및 도 18b를 참조하면, 웨어러블 장치(100) 상에서 이미지 상에 오버레이된 자막으로 자막과 관련된 웹사이트는 검색될 수 있다. 예를 들어, 웨어러블 장치에서 자막을 가지는 이미지는 자막이 이미지 상에 오버레이되어 디스플레이될 수 있다. 이때, 자막이 이미지 상에 오버레이됨에 따라 이미지의 크기를 크게 변경되어 디스플레이될 수 있다. 이미지 상에 오버레이된 자막을 클릭하거나 또는 자동으로 관련 내용이 웹사이트에서 검색될 수 있다.18A and 18B are diagrams illustrating an embodiment of browsing subtitles on an image in a wearable device, according to embodiments of the present disclosure. Referring to FIGS. 18A and 18B, a web site associated with the subtitles may be retrieved with the subtitles overlaid on the image on the wearable device 100. For example, an image with subtitles in a wearable device may be displayed overlaid on the image. At this time, as the subtitle is overlaid on the image, the size of the image can be greatly changed and displayed. Click on the overlayed subtitles on the image, or the relevant content can be automatically searched on the website.

도 19는, 본 개시의 실시 예들에 따른, 전자 장치에서 복수의 이미지들의 디스플레이를 관리하기 위한 방법을 구현한 컴퓨팅 환경을 도시한 도면이다. 도 19에 도시된 바와 같이, 전자 장치(100)의 컴퓨팅 환경은 프로세서(1904) 및 ALU(Arithmetic Logic Unit)(1906), 메모리(1910), 저장부(1912), 복수의 네트워킹 장치들(1916), 및 복수의 입출력(I/O) 장치들(1914)을 포함한다. 처리부(1908)는 스킴(schemes)의 명령(instructions)들을 처리한다. 처리부(1908)는 명령어(instructions) 처리를 위해 프로세서(1904)로부터 명령(commands)을 수신한다. 또한, 명령(instructions)의 실행과 관련된 모든 로직 및 산술 연산은 ALU(1906)의 도움으로 계산된다.19 is a diagram of a computing environment that implements a method for managing the display of a plurality of images in an electronic device, in accordance with embodiments of the present disclosure. 19, the computing environment of the electronic device 100 includes a processor 1904 and an arithmetic logic unit (ALU) 1906, a memory 1910, a storage 1912, a plurality of networking devices 1916 ), And a plurality of input / output (I / O) devices 1914. The processing unit 1908 processes the instructions of the schemes. Processing unit 1908 receives commands from processor 1904 for processing instructions. All logic and arithmetic operations associated with the execution of instructions are also computed with the help of ALU 1906. [

전자 장치(100)의 전체 컴퓨팅 환경은 다수의 동종 및 / 또는 이종의 코어, 다른 종류의 다수의 CPU, 특수 매체, 다른 가속기들로 구성 될 수 있다. 처리부(1908)은 스킴의 명령어들(instructions)을 처리하는 역할을 한다. 또한, 복수의 처리부(1908)은 싱글 칩 또는 멀티 칩 상에 위치할 수 있다.The overall computing environment of electronic device 100 may comprise a plurality of homogeneous and / or heterogeneous cores, a plurality of different types of CPUs, special media, and other accelerators. The processing unit 1908 serves to process instructions of the scheme. Further, the plurality of processing units 1908 may be located on a single chip or a multi-chip.

구현에 필요한 명령어 및 코드를 포함하는 스킴(scheme)은 메모리(1910) 또는 스토리지(1912) 또는 둘 모두에 저장된다. 실행시, 명령어들은, 대응하는 메모리(1910) 또는 스토리지(1912)로부터 페치(fetch)될 수 있고, 처리부(1908)에 의해 실행될 수 있다.A scheme containing the instructions and code necessary for implementation is stored in memory 1910 or in storage 1912 or both. Upon execution, the instructions may be fetched from the corresponding memory 1910 or storage 1912 and executed by the processing unit 1908. [

하드웨어 구현의 경우, 다양한 네트워크 장치 (1916) 또는 외부 I / O 장치(1914)는 통신부(미도시)와 입출력부(미도시)를 통해 구현을 지원하는 컴퓨팅 환경에 연결될 수 있다.For a hardware implementation, various network devices 1916 or external I / O devices 1914 may be coupled to a computing environment that supports implementation through a communication unit (not shown) and an input / output unit (not shown).

본 개시에 개시된 실시 예들은 적어도 하나의 하드웨어 디바이스에서 실행하고 요소들을 제어하기 위해 네트워크 관리 기능을 수행하는 하나 이상의 소프트웨어 프로그램을 통해 구현 될 수 있다. 도 1a 내지 도 20에 도시 된 요소들은 적어도 하나의 하드웨어 디바이스들 중 하나, 또는 하드웨어 장치, 소프트웨어 모듈의 조합을 할 수 있는 블록을 포함한다.The embodiments disclosed in this disclosure may be implemented through one or more software programs that execute on at least one hardware device and perform network management functions to control the elements. The elements shown in Figs. 1A to 20 include one of at least one hardware devices, or a combination of hardware devices and software modules.

도 20은, 본 개시의 실시 예들에 따른, 복수의 이미지들에 포함된 객체의 수에 따라 이미지의 크기를 변경하여 디스플레이하는 방법을 설명하기 위한 순서도이다.20 is a flowchart for explaining a method of changing the size of an image according to the number of objects included in a plurality of images and displaying the images according to the embodiments of the present disclosure.

S2010 단계에서, 전자 장치(100)는 복수의 이미지를 인식한다. 예를 들어, 전자 장치(100)는 갤러리 애플리케이션 등과 같이 복수의 이미지들이 저장되는 애플리케이션에서 새로운 이미지가 저장되는 경우, 새로운 이미지를 인식할 수 있다. In step S2010, the electronic device 100 recognizes a plurality of images. For example, the electronic device 100 can recognize a new image when a new image is stored in an application in which a plurality of images are stored, such as a gallery application.

전자 장치(100)는 이미지가 전자 장치(100) 내에 저장되는 이미지일 때, 이미지가 전자 장치(100)에 저장되기 전에 이미지를 인식할 수 있다. 전자 장치(100)는 이미지가 웹사이트 등과 같은 웹브라우저를 통해 실시간 업로딩되는 이미지일 때, 이미지가 업로딩되는 도중에 이미지를 인식할 수 있다.The electronic device 100 can recognize an image before it is stored in the electronic device 100 when the image is an image stored in the electronic device 100. The electronic device 100 can recognize an image while the image is being uploaded, when the image is an image that is uploaded in real time via a web browser such as a web site.

S2020 단계에서, 전자 장치(100)는 각 이미지 내에 포함된 오브젝트 수를 검출한다. 예를 들어, 전자 장치(100)는 인식된 이미지 상에서 얼굴 검출기 등과 같은 프로그램을 실행하여 이미지 내의 오브젝트(예: 사람 얼굴)를 검출할 수 있다. 전자 장치(100)는 이미지 내에 모든 얼굴 각각에 윤곽 상자(bounding box)를 통해 얼굴은 검출하여 얼굴 수를 획득할 수 있다. 전자 장치(100)는 윤곽 상자 좌표 값 및 얼굴 수를 이미지 파일과 함께 메타데이터로 저장할 수 있다. 이미지 내에서 얼굴을 검출하는 기술은 공지된 내용이므로 상세한 설명은 생략한다.In step S2020, the electronic device 100 detects the number of objects contained in each image. For example, the electronic device 100 may execute a program such as a face detector on a recognized image to detect an object (e.g., a human face) in the image. The electronic device 100 may obtain a face number by detecting a face through a bounding box on each face in the image. The electronic device 100 may store the contour box coordinate values and the number of faces together with the image file as metadata. A technique for detecting a face in an image is well known in the art and a detailed description thereof will be omitted.

S2030 단계에서, 전자 장치(100)는 이미지의 오브젝트 수를 바탕으로 각 이미지에 대한 스케일링 인자를 결정할 수 있다. 예를 들어, 스케일링 인자는 각 이미지의 크기 변경 비율을 결정하는 것일 수 있다. 예를 들어, 각 이미지의 크기 변경 비율은 이미지 상의 얼굴 영역을 전체 이미지 영역으로 나눈 값일 수 있다. In step S2030, the electronic device 100 may determine a scaling factor for each image based on the number of objects in the image. For example, the scaling factor may be to determine the resizing ratio of each image. For example, the resizing ratio of each image may be a value obtained by dividing the face region on the image by the entire image region.

또한, 전자 장치(100)는 각 이미지의 색상 대비(color contrast), 에지 밀도(edge density), 베이지안 인터그레이션(Bayesian integration), 및 표면 스트라들링(Superficial Straddling) 중 적어도 하나를 이용하여 각 이미지 내의 오브젝트 수에 따른 스케일링 인자를 결정할 수도 있다. 이미지의 색상 대비(color contrast), 에지 밀도(edge density), 베이지안 인터그레이션(Bayesian integration), 및 표면 스트라들링(Superficial Straddling) 를 계산하는 공식(equation)은 공지된 기술이므로 상세한 설명은 생략한다. The electronic device 100 may also use at least one of color contrast, edge density, Bayesian integration, and Superficial Straddling of each image to determine the angle And determine a scaling factor according to the number of objects in the image. Since the equation for calculating color contrast, edge density, Bayesian integration, and superficial straddling of an image is a well-known technique, a detailed description is omitted do.

또한, 전자 장치(100)는 이미지에서 오브젝트를 바탕으로 두드러진 영역(salient regions), 대비(contrast) 및 그라데이션(gradient)을 이용하여 스케일링 인자를 결정할 수도 있다.In addition, the electronic device 100 may determine the scaling factor using salient regions, contrast, and gradients based on the object in the image.

전자 장치(100)는 결정된 스케일링 인자에 관한 정보를 메타데이터로 저장할 수 있다.The electronic device 100 may store information about the determined scaling factor as metadata.

S2040 단계에서, 전자 장치(100)는 스케일링 인자를 바탕으로 복수의 이미지 중 적어도 하나의 이미지의 크기를 변경할 수 있다. 이미지에서 오브젝트 수에 따른 이미지 크기 변경은 본 개시에서 상세히 설명하였으므로, 여기에서는 이에 대한 설명은 생략한다.In step S2040, the electronic device 100 may change the size of at least one of the plurality of images based on the scaling factor. Since the image size change according to the number of objects in the image has been described in detail in the present disclosure, a description thereof will be omitted here.

S2050 단계에서, 전자 장치(100)는 크기가 변경된 이미지의 레이아웃 및 디스플레이 순서 중 적어도 하나를 변경하여 전자 장치(100)의 한 화면에 디스플레이한다. 본 개시의 설명의 편의를 위해, 4개의 이미지는 각각 상이한 개수의 오브젝트(예:사람 수)를 포함한다고 가정한다. 예를 들어, 종래에는, 갤러리 애플리케이션에서 동일한 크기로 4개의 이미지를 한 화면에 디스플레이할 수 있다. 반면, 본 개시의 일 실시 예에 따라, 4개의 이미지는 각 이미지가 포함하는 오브젝트의 수에 따라 상이한 크기로 변경되어 디스플레이될 수 있다. 이때, 4개의 이미지를 디스플레이하는 레이아웃 내에서 각각의 레이아웃이 변경될 수도 있고, 각각의 디스플레이 순서도 변경될 수 있다. In step S2050, the electronic device 100 changes at least one of the layout and the display order of the resized image, and displays it on one screen of the electronic device 100. [ For ease of description of this disclosure, it is assumed that each of the four images contains a different number of objects (e.g., the number of people). For example, conventionally, four images can be displayed on one screen at the same size in a gallery application. On the other hand, according to one embodiment of the present disclosure, the four images can be displayed and changed in different sizes depending on the number of objects each image contains. At this time, each layout may be changed within a layout displaying four images, and each display order may be changed.

또한, 4개의 이미지의 크기가 변경됨에 따라 4개의 이미지 전체를 디스플레이하기 위한 레이아웃 내부에 빈 영역이 생기도록 4개의 이미지를 배열할 수도 있다. 이때, 전자 장치(100)는 여백에 다른 이미지를 추가로 디스플레이할 수 있게 되어 4개보다 더 많은 이미지를 디스플레이할 수 있다. 따라서, 전자 장치(100)는 각 이미지의 오브젝트를 명확하게 디스플레이하도록 이미지의 크기를 변경하여 디스플레이할 수도 있고, 사용자에게 추가 이미지를 제공하여 더 많은 정보를 제공할 수도 있다.In addition, as the size of the four images is changed, the four images may be arranged so that a blank area is created inside the layout for displaying all four images. At this time, the electronic device 100 can display additional images in the margin, thereby displaying more than four images. Thus, the electronic device 100 may change the size of the image to display the object of each image clearly and display it, or may provide additional information to the user by providing additional images.

또 다른 예로, 전자 장치(100)는 4개의 이미지 중 오브젝트가 명확히 표시되는 일부 이미지를 선택하여 디스플레이할 수도 있다. 예를 들어, 전자 장치(100)는 4개의 이미지가 디스플레이될 수 있는 레이아웃에 3개의 이미지가 디스플레이되도록 할 수 있다. 따라서, 전자 장치(100)는 이미지 내에 포함된 오브젝트 정보를 사용자에게 더욱 명확하게 제공하여 UX(User Experience)를 향상시킬 수 있다.As another example, the electronic device 100 may select and display some of the four images in which the object is clearly displayed. For example, the electronic device 100 may allow three images to be displayed in a layout where four images can be displayed. Accordingly, the electronic device 100 can improve the UX (User Experience) by more clearly providing the object information contained in the image to the user.

본 개시의 일 실시 예로, 프로세서(202)는 RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스, 버스로 구성될 수 있다. 이때, RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 등은 버스를 통해 서로 연결될 수 있다. In one embodiment of the present disclosure, the processor 202 may be comprised of RAM, ROM, graphics processing unit, main CPU, first through n interfaces, and a bus. At this time, the RAM, the ROM, the graphics processing unit, the main CPU, the first to nth interfaces, and the like may be connected to each other via a bus.

RAM은 O/S 및 어플리케이션 프로그램을 저장한다. 구체적으로, 전자 장치(100)가 부팅되면 O/S가 RAM에 저장되고, 사용자가 선택한 각종 어플리케이션 데이터가 RAM에 저장될 수 있다. The RAM stores O / S and application programs. Specifically, when the electronic device 100 is booted, the O / S is stored in the RAM, and various application data selected by the user can be stored in the RAM.

ROM에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, 메인 CPU는 ROM에 저장된 명령어에 따라 메모리에 저장된 O/S를 RAM에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU는 메모리에 저장된 각종 어플리케이션 프로그램을 RAM에 복사하고, RAM에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.ROM stores a set of commands for booting the system and the like. When a turn-on command is input and power is supplied, the main CPU copies the O / S stored in the memory to the RAM according to the command stored in the ROM, and executes the O / S to boot the system. When the booting is completed, the main CPU copies various application programs stored in the memory to the RAM, executes the application programs copied to the RAM, and performs various operations.

메인 CPU는 메모리에 액세스하여, 메모리에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 메인 CPU는 메모리에 저장된 각종 프로그램, 콘텐트, 데이터 등을 이용하여 다양한 동작을 수행한다. The main CPU accesses the memory and performs booting using the O / S stored in the memory. The main CPU performs various operations using various programs, contents, and data stored in the memory.

제1 내지 n 인터페이스는 상술한 각종 구성요소들과 연결된다. 제1 내지 n 인터페이스 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.The first to n-th interfaces are connected to the various components described above. One of the first to n interfaces may be a network interface connected to an external device via a network.

다양한 실시 예에 따른 장치 (예: 모듈들 또는 전자 장치(100)) 또는 방법 (예: 동작들)은, 예컨대, 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 유지되는(maintain) 프로그램들 중 적어도 하나의 프로그램에 포함된 명령어(instructions)를 실행하는 적어도 하나의 컴퓨터(예: 프로세서 202)에 의하여 수행될 수 있다. Devices (e.g., modules or electronic device 100) or methods (e.g., operations) in accordance with various embodiments may be implemented in a computer-readable storage medium, for example, May be performed by at least one computer (e.g., processor 202) executing instructions contained in at least one of the programs.

상기 명령어가 컴퓨터(예: 프로세서 202)에 의해 실행될 경우, 상기 적어도 하나의 컴퓨터는 상기 명령어에 해당하는 기능을 수행할 수 있다. 이 때, 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리가 될 수 있다. When the instruction is executed by a computer (e.g., processor 202), the at least one computer may perform a function corresponding to the instruction. At this time, the computer-readable storage medium may be, for example, the memory.

프로그램은, 예로, 하드디스크, 플로피디스크, 마그네틱 매체 (magnetic media)(예: 자기테이프), 광기록 매체 (optical media)(예: CD-ROM (compact disc read only memory), DVD (digital versatile disc), 자기-광 매체 (magneto-optical media)(예: 플롭티컬 디스크 (floptical disk)), 하드웨어 장치 (예: ROM (read only memory), RAM (random access memory), 또는 플래시 메모리 등) 등과 같은 컴퓨터로 읽을 수 저장 매체에 포함될 수 있다. The program may be stored on a computer readable recording medium, such as a hard disk, a floppy disk, magnetic media (e.g. magnetic tape), optical media (e.g., compact disc read only memory (CD- ), Magneto-optical media (e.g., floptical disk), hardware devices (e.g., read only memory (ROM), random access memory (RAM) And may be included in a computer readable storage medium.

이 경우, 저장 매체는 일반적으로 전자 장치(100)의 구성의 일부로 포함되나, 전자 장치(100)의 포트(port)를 통하여 장착될 수도 있으며, 또는 전자 장치(100)의 외부에 위치한 외부 기기(예로, 클라우드, 서버 또는 다른 전자 기기)에 포함될 수도 있다. 또한, 프로그램은 복수의 저장 매체에 나누어 저장될 수도 있으며, 이 때, 복수의 저장 매체의 적어도 일부는 전자 장치(100)의 외부 기기에 위치할 수도 있다.In this case, the storage medium is typically included as part of the configuration of the electronic device 100, but may be mounted through a port of the electronic device 100 or may be external to the electronic device 100 For example, a cloud, a server, or other electronic device). In addition, the program may be stored in a plurality of storage media, and at least a part of the plurality of storage media may be located in an external device of the electronic device 100. [

또한, 이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It should be understood that various modifications may be made by those skilled in the art without departing from the spirit and scope of the present disclosure.

202: 프로세서
204: 저장부
206: 디스플레이202: Processor
204:
206: Display

Claims

An electronic device for performing image processing,
A display for displaying a plurality of images on one screen; And
Detecting a number of objects included in each of the plurality of images,
Determining a scaling factor for each of the plurality of images based on the number of the detected objects,
Resizing at least one of the plurality of images based on a scaling factor for each of the determined plurality of images,
And controlling the display to reordering and displaying at least one of a layout and a display order of the plurality of images based on the resized image.

The method according to claim 1,
The processor comprising:
Wherein the larger the number of the objects included in each of the plurality of images among the plurality of images, the larger the relative size of the image.

The method according to claim 1,
The processor comprising:
And controls the display to selectively display images with a high percentage of the objects included on the image occupying the image, among the plurality of images.

The method according to claim 1,
The processor comprising:
Determining a region of interest (ROI) of each of the plurality of images, cutting an area including the object from at least one image of the plurality of images based on ROIs of the determined plurality of images, And controls the display to display an image.

The method according to claim 1,
The processor comprising:
Wherein when one of the plurality of images is selected and a user operation menu is overlaid on the selected image, the user operation menu is moved to an area where the object is not detected in the selected image area, Lt; / RTI >

The method according to claim 1,
The processor comprising:
The method of claim 1, further comprising: dividing an area in which the plurality of images are displayed into a designated n tile shape; re-rendering the image whose size is changed according to the number of objects included in each of the plurality of images, rendering the display.

The method according to claim 1,
The processor comprising:
The method of claim 1, wherein if the image includes the object and a caption describing the image is displayed separately from the image, the method may include overlaying the caption on the image, An electronic device for controlling a display.

The method according to claim 1,
The processor comprising:
And comparing the number of objects included in each image of the plurality of images to determine the scaling factor.

The method according to claim 1,
The processor comprising:
Wherein the object is detected using at least one of color contrast, edge density, Bayesian integration, and superficial straddling.

The method according to claim 1,
Further comprising: a storage unit,
The processor comprising:
The number of objects included in the image is determined before being stored in the storage unit when the image is stored in the storage unit and the number of objects of the determined image is stored in the storage unit together with the image,
When an image is loaded in real time on the electronic device, the number of objects included in the image is determined while the image is loaded, and the determined number of objects of the image is stored in the storage together with the image information Lt; / RTI >

A method of processing an image in an electronic device,
Recognizing a plurality of images in the electronic device;
Detecting a number of objects included in each of the plurality of images;
Determining a scaling factor for each of the plurality of images based on the number of detected objects;
Resizing at least one image of each of the plurality of images based on a scaling factor for each of the determined plurality of images; And
And displaying the plurality of images on one screen of the electronic device by reordering at least one of layout and display order of the plurality of images based on the resized image.

12. The method of claim 11,
Wherein changing the size of the image comprises:
Wherein the larger the number of objects included in each of the plurality of images, the larger the relative size of the image.

12. The method of claim 11,
Wherein the displaying comprises:
Wherein the size of the plurality of images is larger than the size of the object.

12. The method of claim 11,
Determining a region of interest (ROI) of each of the plurality of images;
Cutting an area including the object from at least one image of the plurality of images based on the determined ROI of the plurality of images;
And displaying an image of the cropped area.

12. The method of claim 11,
When one of the plurality of images is selected and a user operation menu is overlaid and displayed on the selected image, the user operation menu is moved to an area where the object is not detected in the selected image area and displayed Further comprising:

12. The method of claim 11,
Dividing an area in which the plurality of images are displayed into a designated n tile shape;
And re-rendering and displaying the resized image in each of the n tile shapes according to the number of objects included in each of the plurality of images.

12. The method of claim 11,
Overlaying the caption on the image if the caption describing the image is displayed separately from the image, changing the size of the image and displaying the caption; &Lt; / RTI >

12. The method of claim 11,
Wherein determining the scaling factor comprises:
And comparing the number of objects included in each image of the plurality of images to determine the scaling factor.

12. The method of claim 11,
Wherein the detecting comprises:
A method of detecting an object using at least one of color contrast, edge density, Bayesian integration, and superficial straddling.

12. The method of claim 11,
Determining, when an image is stored in the electronic device, the number of objects included in the image before being stored in the electronic device, and storing the number of objects in the determined image in the electronic device together with the image; And
When an image is loaded in real time on the electronic device, the number of objects included in the image is determined while the image is loaded, and the determined number of objects of the image is stored in the electronic device together with the image information &Lt; / RTI >