KR20160135108A - 이미지 처리 방법 및 그 시스템 - Google Patents

Abstract

이미지 처리 방법 및 그 시스템이 제공된다. 상기의 이미지 처리 방법은 데이터 처리 시스템에 설치되는 이미지 처리 시스템이 이미지 디스플레이 요청에 응답하여 원본 이미지에 기초하여 상기 원본 이미지에 상응하는 제1썸네일(thumbnail)을 생성하는 단계, 상기 이미지 처리 시스템이 생성한 상기 제1썸네일을 디스플레이하기 위해 디코딩을 수행하는 단계, 및 상기 이미지 처리 시스템이 디코딩된 상기 제1썸네일을 상기 데이터 처리 시스템에 디스플레이하는 단계를 포함하며, 상기 제1썸네일을 디스플레이하기 위해 디코딩을 수행하는 단계는 상기 이미지 처리 시스템이 상기 제1썸네일에 상응하는 리젼(region) 정보-상기 리젼 정보는 상기 제1썸네일을 구성하는 복수의 리젼들 각각의 위치를 나타내는 정보임-를 생성하는 단계를 포함한다.

Description

이미지 처리 방법 및 그 시스템{Method and system for image processing}

본 발명은 이미지 처리 방법 및 그 시스템에 관한 것으로, 보다 상세하게는 효율적인 리젼 디코딩 및/또는 효율적인 썸네일 활용을 수행할 수 있는 이미지 처리 방법 및 그 시스템에 관한 것이다.

영상촬영수단의 고화질화로 인해 고화질의 이미지가 데이터 처리 시스템(예컨대, 모바일 폰, 태블릿, PC, 또는 웹 서버 등)에서 많이 활용되고 있다.

그리고 이미지의 고화질화로 인해, 썸네일 및 리젼 디코딩(region decoding) 등이 적극적으로 활용되고 있다.

썸네일은 원본 이미지를 작은 크기의 이미지로 줄여서 생성한 이미지로, 해당 원본 이미지 자체를 디스플레이하는 대신에 상기 썸네일을 디스플레이하기 위한 용도로 많이 이용되고 있다.

종래에는 주로 이미지 리스트 등과 같이 사용자가 직관적으로 원본 이미지가 어떠한 이미지인지를 파악하기 위한 용도로 주로 활용하고 있지만, 최근에는 고화질의 이미지를 디코딩하여 디스플레이하기 전까지 소요되는 시간동안 미리 만들어둔 썸네일을 그대로 또는 일정 비율로 스캐일링(scaling)하여 보여줌으로써 사용자 환경에 실시간성을 부여하기 위한 방법 등과 같이 다양한 활용방식으로 이용되고 있다. 또한, 이러한 썸네일의 다양한 활용을 위해 스몰 썸네일, 미디엄 썸네일, 라지 썸네일 등과 같이 다양한 크기의 썸네일을 상황에 따라 활용하고 있는 실정이다.

한편, 리젼 디코딩은 이미지의 일부분만을 디코딩할 필요가 있음으로 인해 널리 활용되고 있다. 이러한 리젼 디코딩이 가능하기 위해서는 이미지를 일정한 리젼(region, 또는 영역)으로 구분하고, 구분된 영역에 기초하여 특정 리젼 또는 리젼들만을 선택적으로 원본 이미지에서 디코딩할 수 있어야 한다. 이를 위해서는 리젼 정보(region information, 또는 region map)이 필요할 수 있으며, 이러한 리젼 정보를 이용한 리젼 디코딩은 다양한 이미지 또는 비디오 디코딩에 널리 활용되고 있다.

특히 이러한 리젼 디코딩은 사용자가 원하는 이미지의 특정 영역을 줌(zoom)하고자 하는 경우에 널리 이용되고 있다. 즉, 사용자가 원하는 이미지의 특정 영역을 선택하여 줌 요청을 하면, 이미지 솔루션은 해당 특정 영역을 선택적으로 또는 우선적으로 원본 이미지에서 디코딩하여 주밍(zooming)할 수 있고, 이를 위해서는 상기 특정 영역을 다른 영역과 구분하기 위한 리젼 정보가 필요하다.

그리고 이러한 리젼 디코딩은 썸네일을 디스플레이한 상황에서도 많이 발생하고 있다. 예컨대, 사용자의 데이터 처리 시스템에 저장된 원본 이미지가 고화질 또는 큰 사이즈인 경우, 이미지 솔루션은 원본 이미지에 상응하는 적당한 썸네일(예컨대, 라지 썸네일)을 디스플레이할 수 있다. 그리고 상기 썸네일이 디스플레이된 상태에서 줌 요청이 입력되면, 줌이 요청된 원본 이미지의 일정 영역을 디코딩하여 주밍된 이미지를 디스플레이하곤 한다. 이때 줌이 요청된 원본 이미지의 일정 영역을 판단하기 위해서는 상기 원본 이미지의 리젼 정보가 필요하다.

도 1은 종래의 리젼 디코딩을 설명하기 위한 도면이다.

우선, 도 1a에 도시된 바와 같이 종래의 이미지 솔루션은 소정의 이미지에 대한 디스플레이 요청에 응답하여, 상기 이미지 자체를 디코딩하여 디스플레이할 수도 있고, 상기 이미지에 상응하는 썸네일 이미지를 디스플레이할 수 있다(S10). 그리고 사용자는 디스플레이된 이미지의 원본 또는 썸네일 이미지에 대해 특정 영역을 선택한 후 줌 요청을 입력할 수 있다(S11). 그러면, 상기 이미지 솔루션은 상기 특정 영역을 우선적으로 또는 선택적으로 디코딩하기 위해 리젼 디코딩을 수행하여 주밍을 할 수 있는데(S13), 이를 위해서는 전술한 바와 같이 원본 이미지의 리젼 정보가 필요하게 된다. 따라서 상기 이미지 솔루션은 줌 요청이 입력되면, 그때서야 상기 이미지의 원본에 대해 역부호화 과정(예컨대, 호프만 디코딩 등)을 거쳐서 리젼 정보를 생성한 후(S12), 줌을 수행하게 된다(S13).

상기 리젼 정보는 도 1b에 도시된 바와 같이 이미지(예컨대, 이미지 원본 10)가 미리 정해진 크기를 갖는 다수의 리젼들로(예컨대, 11, 12, 13, 14 등) 구분되면, 각각의 리젼들을 특정할 수 있는 정보(예컨대, 12-1, 13-1, 14-1 등)일 수 있다. 예컨대, 상기 리젼 정보는 도 1b에 도시된 바와 같이 각각의 리젼의 최좌측 픽셀들의 위치일 수 있지만, 다양한 실시 예가 가능할 수 있다.

이처럼 종래에는 원본 이미지 또는 썸네일 이미지가 디스플레이된 후, 리젼 디코딩이 필요한 프로세스가 요청되면, 이미지 솔루션은 원본 이미지의 리젼 정보를 생성하고, 리젼 정보가 생성된 후에 리젼 디코딩을 수행할 수 있었다. 따라서 종래의 이미지 솔루션들은 예컨대, 사용자가 줌 요청을 하면 약간의 인터벌(리젼 정보를 생성하기 위한 시간)이 생긴 후에 줌이 수행되곤 하였으며, 이로 인한 사용자의 사용성이 저하되는 문제점이 있었다. 즉, 종래에는 원본 이미지 또는 썸네일 이미지가 디스플레이된 후, 리젼 디코딩을 수행할 요청(예컨대, 줌 요청)이 입력되면 그때서야 리젼 디코딩을 위한 리젼 정보를 생성하는 프로세스를 수행하였다.

또한, 실시간으로 썸네일 이미지를 생성하여 디스플레이하여야 하는 경우 또는 썸네일 이미지로부터 줌(확대/축소)을 수행하여야 할 경우, 기존에는 순차적으로 썸네일 이미지에 상응하는 원본 이미지의 리젼들을 디코딩하여 그래픽 엔진에 업로드하거나, 줌이 수행된 후의 줌 이미지를 디스플레이하기 위해 줌 이미지에 포함될 리젼을 미리 정해진 리젼(예컨대, 최좌측상단 리젼)부터 순차적으로 그래픽 엔진에 업로드하였다. 따라서 고화질의 이미지인 경우에는 사용자에게 순차적으로 각각의 리젼들이 흐릿한 상태(예컨대, 다른 썸네일 이미지가 디스플레이되고 있는 상태이거나 줌 전의 이미지가 디스플레이되고 있는 상태)에서 클리어(clear)한 상태(디스플레이될 썸네일의 리젼이 디코딩되어 디스플레이되거나, 줌 이미지의 리젼이 디스플레이되는 상태)로 변환되는 것이 가시적으로 확인되기도 하는 문제점이 있었다.

1020090056107 "이동단말기 및 그의 디지털 이미지 처리방법" 1020090115344 "이동단말기 및 그의 이미지 처리방법"

따라서 본 발명이 이루고자 하는 기술적인 과제는 원본 이미지 또는 썸네일 이미지를 디스플레이할 경우, 상기 원본 이미지를 디스플레이하기 위해 또는 썸네일 이미지를 생성하기 위해 원본 이미지를 디코딩하면서 미리 원본 이미지의 리젼 정보를 생성함으로써, 추후에 원본 이미지가 디스플레이된 상태 또는 썸네일 이미지가 디스플레이된 상태에서 리젼 디코딩을 수행하여야 할 경우 즉각적인 리젼 디코딩이 수행될 수 있는 이미지 처리 방법 및 그 시스템을 제공하는 것이다.

또한 썸네일 이미지를 그래픽 엔진에 업로드할 때, 썸네일 이미지에 포함되는 영역(리젼 또는 타일)별로 순차적으로 그래픽 엔진에 업로드하지 않고, 복수 또는 전체의 영역을 한 번에 그래픽 엔진에 업로드할 수 있는 이미지 처리 방법 및 그 시스템을 제공하는 것이다.

또한, 줌 시에 줌 이미지에 포함될 영역 중 사용자에게 우선적으로 인식되는 영역부터 순차적으로 디스플레이를 할 수 있는 이미지 처리 방법 및 그 시스템을 제공하는 것이다.

또한, 스몰 썸네일을 원본 비율(원본 이미지 비율)로 생성함으로써, 스몰 썸네일을 디스플레이하여야 할 경우에 사용성을 높일 수 있는 이미지 처리 방법 및 그 시스템을 제공하는 것이다.

상기의 기술적 과제를 해결하기 위한 이미지 처리 방법은 데이터 처리 시스템에 설치되는 이미지 처리 시스템이 이미지 디스플레이 요청에 응답하여, 원본 이미지 또는 제1썸네일을 디스플레이하도록 판단한 경우, 상기 원본 이미지를 디코딩하는 단계, 상기 이미지 처리 시스템이 상기 원본 이미지를 디코딩한 후 디코딩된 상기 원본 이미지 또는 상기 원본 이미지에 상응하는 제1썸네일을 생성한 후 생성된 상기 제1썸네일을 상기 데이터 처리 시스템에 디스플레이하는 단계를 포함하며, 상기 원본 이미지를 디코딩하는 단계는 상기 이미지 처리 시스템이 상기 원본 이미지를 디코딩하면서 상기 원본 이미지에 상응하는 리젼(region) 정보-상기 리젼 정보는 상기 원본 이미지를 구성하는 복수의 리젼들 각각의 위치를 나타내는 정보임-를 생성하는 단계를 포함한다.

상기 이미지 처리 방법은 상기 이미지 처리 시스템이 상기 원본 이미지에 상응하는 제2썸네일을 미리 생성하여 저장해두는 단계를 더 포함하며, 상기 제1썸네일은 라지(large) 썸네일 또는 미디엄(medium) 썸네일이고, 상기 제2썸네일은 스몰(small) 썸네일인 것을 특징으로 하며, 상기 이미지 처리 시스템은 선택적으로 상기 제2썸네일 또는 상기 제1썸네일을 디스플레이하되, 상기 제2썸네일 디스플레이할 경우에는 미리 생성되어 저장되어 있는 상기 제2썸네일을 스플레이하고, 상기 제1썸네일을 디스플레이 할 경우에는 상기 원본 이미지를 디코딩하여 상기 제1썸네일을 생성한 후 상기 제1썸네일을 디스플레이하는 것을 특징으로 할 수 있다.

상기 이미지 처리 방법은 상기 이미지 처리 시스템이 상기 제1썸네일에 포함될 복수의 타일들을 순차적으로 디코딩하여 디코딩된 텍스쳐들을 상기 데이터 처리 시스템에 구비된 저장장치에 저장하는 단계를 더 포함하며, 상기 이미지 처리 시스템이 상기 원본 이미지를 디코딩한 후 디코딩된 상기 원본 이미지 또는 상기 원본 이미지에 상응하는 제1썸네일을 생성한 후 생성된 상기 제1썸네일을 상기 데이터 처리 시스템에 디스플레이하는 단계는, 상기 저장장치에 저장된 상기 텍스쳐들을 한 번에 그래픽 엔진에 로딩하는 단계를 포함할 수 있다.

상기 이미지 처리 방법은 상기 원본 이미지에 상응하며 미리 저장된 제2썸네일을 디스플레이하는 단계를 더 포함하며, 상기 제2썸네일을 디스플레이한 후 상기 제1썸네일을 디스플레이하는 경우에, 상기 이미지 처리 시스템이 상기 저장장치에 저장된 상기 복수의 타일들의 텍스쳐들을 한 번에 그래픽 엔진에 로딩하는 것을 특징으로 할 수 있다.

상기 이미지 처리 방법은 상기 이미지 처리 시스템이 디스플레이된 상기 제1썸네일의 특정 영역에 대한 줌 요청을 수신하는 단계, 수신된 줌 요청에 응답하여 기 생성된 상기 리젼 정보에 기초하여 줌을 수행하는 단계를 더 포함할 수 있다.

상기 수신된 줌 요청에 응답하여 기 생성된 상기 리젼 정보에 기초하여 줌을 수행하는 단계는, 상기 줌 요청에 응답하여 줌 수행 후에 디스플레이될 줌 이미지 중에서 기준영역을 우선적으로 디코딩하여 디스플레이하는 단계 및 상기 기준영역으로부터 근거리 순서대로 순차적으로 디코딩하여 디스플레이하는 단계를 포함할 수 있다.

상기 기준 영역은 상기 특정 영역의 중앙에 상응하는 위치의 영역인 것을 특징으로 할 수 있다.

상기 이미지 처리 방법은 상기 제2썸네일을 상기 원본 이미지에 상응하는 원본 비율로 생성하여 저장하는 단계를 더 포함하며, 상기 이미지 처리 시스템은 상기 제2썸네일을 그리드 뷰(grid view) 비율로 디스플레이할 때는 상기 제2썸네일을 상기 그리드 뷰 비율로 크로핑(cropping)하여 디스플레이하고, 원본 비율로 디스플레이할 때는 상기 제2썸네일을 디스플레이하는 것을 특징으로 할 수 있다.

상기 기술적 과제를 해결하기 위한 이미지 처리방법은 이미지 처리 시스템이 원본 이미지에 상응하는 제2썸네일을 디스플레이하는 단계, 상기 이미지 처리 시스템이 상기 제2썸네일을 디스플레이한 후 상기 원본 이미지에 상응하는 제1썸네일을 디스플레이하기 위해, 상기 제1썸네일에 포함될 복수의 타일들을 순차적으로 디코딩하여 상기 데이터 처리 시스템에 구비된 저장장치에 저장하는 단계, 및 상기 저장장치에 저장된 상기 복수의 타일들의 텍스쳐를 한 번에 그래픽 엔진에 로딩하는 단계를 포함한다.

상기 기술적 과제를 해결하기 위한 이미지 처리방법은 이미지 처리 시스템이 데이터 치리 시스템에 디스플레이된 이미지의 특정 영역에 대한 줌 요청을 수신하는 단계, 수신된 줌 요청에 응답하여 줌 수행 후에 디스플레이될 줌 이미지 중에서 상기 줌 이미지의 중앙부에 위치한 소정의 기준영역을 우선적으로 디코딩하여 디스플레이하는 단계, 및 상기 기준영역으로부터 근거리 순서대로 순차적으로 상기 줌 이미지의 타영역을 디코딩하여 디스플레이하는 단계를 포함한다.

상기 기술적 과제를 해결하기 위한 이미지 처리방법은 이미지 처리 시스템이 원본 이미지에 상응하는 썸네일을 원본 비율로 미리 생성하여 데이터 처리 시스템에 저장하는 단계, 상기 이미지 처리 시스템이 상기 썸네일을 그리드 뷰(grid view) 비율로 디스플레이할 때는 상기 제2썸네일을 상기 그리드 뷰 비율로 크로핑(cropping)하여 디스플레이하고, 화면비율로 디스플레이할 때는 상기 썸네일을 디스플레이하는 단계를 포함한다.

상기 이미지 처리방법은 데이터 처리 시스템에 설치된 컴퓨터 프로그램에 의해 구현될 수 있다.

상기 기술적 과제를 해결하기 위한 이미지 처리 시스템은 이미지 디스플레이 요청에 응답하여 원본 이미지에 기초하여 상기 원본 이미지에 상응하는 제1썸네일(thumbnail)을 생성하기 위한 썸네일 생성모듈, 생성한 상기 제1썸네일을 디코딩하기 위한 디코딩 모듈, 및 상기 디코딩된 상기 제1썸네일을 상기 이미지 처리 시스템이 설치된 데이터 처리 시스템에 디스플레이하기 위한 제어모듈을 포함하며, 상기 디코딩 모듈은 상기 제1썸네일을 생성하면서, 상기 원본 이미지에 상응하는 리젼(region) 정보-상기 리젼 정보는 상기 원본 이미지를 구성하는 복수의 리젼들 각각의 위치를 나타내는 정보임-를 생성하는 것을 특징으로 한다.

상기 썸네일 생성모듈은 상기 원본 이미지에 상응하는 제2썸네일을 저장하고 있는 것을 특징으로 하며, 상기 제1썸네일은 라지(large) 썸네일이고, 상기 제2썸네일은 스몰(small) 썸네일 또는 미디엄(medium) 썸네일인 것을 특징으로 하며, 상기 제어모듈은 상기 제2썸네일을 디스플레이할 경우에는 미리 저장하고 있는 상기 제2썸네일을 디스플레이하고, 상기 제1썸네일을 디스플레이할 경우에는 상기 원본 이미지가 디코딩된 후 생성된 상기 제1썸네일을 디스플레이할 수 있다.

상기 디코딩 모듈은, 생성된 상기 제1썸네일에 포함될 복수의 타일들을 순차적으로 디코딩하여 디코딩된 텍스쳐들을 상기 데이터 처리 시스템에 구비된 저장장치에 저장하며, 상기 제어모듈은 상기 저장장치에 저장된 상기 텍스쳐들을 한 번에 그래픽 엔진에 로딩하는 단계를 포함할 수 있다.

상기 이미지 처리 시스템은 디스플레이된 상기 제1썸네일의 특정 영역에 대한 줌 요청을 수신하기 위한 인터페이스 모듈을 더 포함하며, 상기 제어모듈은 수신된 줌 요청에 응답하여 미리 생성된 상기 리젼 정보에 기초하여 줌을 수행할 수 있다.

상기 기술적 과제를 해결하기 위한 이미지 처리 시스템은 데이터 치리 장치에 디스플레이된 이미지의 특정 영역에 대한 줌 요청을 수신하기 위한 인터페이스 모듈, 및 수신된 줌 요청에 응답하여 줌 수행 후에 디스플레이될 줌 이미지 중에서 상기 줌 이미지의 중앙부에 위치한 소정의 기준영역을 우선적으로 디코딩하여 디스플레이한 후, 상기 기준영역으로부터 근거리 순서대로 순차적으로 상기 줌 이미지의 타영역을 디코딩하여 디스플레이하기 위한 제어모듈을 포함한다.

상기 기술적 과제를 해결하기 위한 이미지 처리 시스템은 원본 이미지에 상응하는 썸네일을 원본 비율로 미리 생성하여 데이터 처리 시스템에 저장하기 위한 썸네일 생성모듈, 상기 썸네일을 그리드 뷰(grid view) 비율로 디스플레이할 때는 상기 제2썸네일을 상기 그리드 뷰 비율로 크로핑(cropping)하여 디스플레이하고, 화면비율로 디스플레이할 때는 상기 썸네일을 디스플레이하기 위한 제어모듈을 포함한다.

본 발명의 기술적 사상에 따르면 썸네일 이미지를 원본 이미지로부터 실시간으로 생성하여 디스플레이하거나 또는 원본 이미지 자체를 디스플레이 할 경우, 리젼 디코딩이 필요한 사용자의 요청이 입력되기 전에 미리 원본 이미지를 디코딩하면서 상기 원본 이미지의 리젼 정보를 생성해 둘 수 있으므로 즉각적인 리젼 디코딩이 수행될 수 있는 효과가 있다.

또한 썸네일 이미지를 그래픽 엔진에 업로드할 때, 썸네일 이미지에 포함되는 영역(리젼 또는 타일)별로 순차적으로 그래픽 엔진에 업로드하지 않고, 복수 또는 전체의 영역을 한 번에 그래픽 엔진에 업로드할 수 있어서 사용자에게 이미지가 순차적으로 클리어해지는 것과 같은 시각적 효과를 방지할 수 있어서 사용성이 높아질 수 있으며 전체적인 디스플레이 시간이 빨라질 수 있는 효과가 있다.

또한, 줌 시에 줌 이미지에 포함될 영역 중 사용자에게 우선적으로 인식되는 영역부터 순차적으로 디스플레이를 함으로써, 사용자에게 가시적인 불편함을 느끼지 않도록 줌을 수행할 수 있는 효과가 있다.

또한, 스몰 썸네일을 원본 비율로 생성함으로써, 스몰 썸네일을 원본 비율 또는 그리드 비율로 모두 디스플레이하여야 할 경우에 효율적인 디스플레이가 가능한 효과가 있다.

본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 간단한 설명이 제공된다.
도 1은 종래의 리젼 디코딩을 설명하기 위한 도면이다.
도 2는 본 발명의 기술적 사상에 따른 이미지 처리 시스템의 개략적인 구성을 나타내는 도면이다.
도 3은 본 발명의 기술적 사상에 따른 이미지 처리 방법을 개략적으로 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시예에 따라 썸네일 이미지가 디스플레이되는 환경을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시예에 따른 이미지 처리 방법에 따라 이미지를 그래픽 엔진에 업로드하는 방법을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 이미지 처리 방법에 따라 줌을 수행하기 위한 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시 예에 따른 wstn(wide_small_thumbnail)을 설명하기 위한 도면이다.

본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시 예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다.

또한, 본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터를 '전송'하는 경우에는 상기 구성요소는 상기 다른 구성요소로 직접 상기 데이터를 전송할 수도 있고, 적어도 하나의 또 다른 구성요소를 통하여 상기 데이터를 상기 다른 구성요소로 전송할 수도 있는 것을 의미한다.

반대로 어느 하나의 구성요소가 다른 구성요소로 데이터를 '직접 전송'하는 경우에는 상기 구성요소에서 다른 구성요소를 통하지 않고 상기 다른 구성요소로 상기 데이터가 전송되는 것을 의미한다.

이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.

도 2는 본 발명의 기술적 사상에 따른 이미지 처리 시스템의 개략적인 구성을 나타내는 도면이다.

도 2를 참조하면, 본 발명의 기술적 사상에 따른 이미지 처리 시스템(100)은 제어모듈(110), 썸네일 생성모듈(120), 및 디코딩 모듈(130)을 포함한다. 상기 이미지 처리 시스템(100)은 인터페이스 모듈(140)을 더 포함할 수 있다.

본 명세서에서 '모듈'이라 함은, 본 발명의 기술적 사상을 수행하기 위한 하드웨어 및 상기 하드웨어를 구동하기 위한 소프트웨어의 기능적, 구조적 결합을 의미할 수 있다. 예컨대, 상기 '모듈'은 소정의 코드와 상기 소정의 코드가 수행되기 위한 하드웨어 리소스(resource)의 논리적인 단위를 의미할 수 있으며, 반드시 물리적으로 연결된 코드를 의미하거나, 한 종류의 하드웨어를 의미하는 것은 아님은 본 발명의 기술분야의 평균적 전문가에게는 용이하게 추론될 수 있다.

구현 예에 따라, 상기 이미지 처리 시스템(100)은 어느 하나의 물리적 장치가 아니라, 복수의 물리적 장치에 분산되어 설치될 수도 있다. 필요에 따라, 상기 이미지 처리 시스템(100)에 포함된 각각의 구성들이 독립적인 물리적 장치들로 구현되면, 이러한 물리적 장치들이 유무선 네트워크를 통해 유기적으로 결합되어 구현되어 본 발명의 기술적 사상에 따른 상기 이미지 디코딩 시스템(100)을 구현할 수도 있다.

상기 제어모듈(110)은 상기 이미지 처리 시스템(100)의 다른 구성(예컨대, 상기 썸네일 생성모듈(120), 디코딩 모듈(130), 및/또는 인터페이스 모듈(140) 등)의 기능 및/또는 리소스를 제어할 수 있다.

상기 이미지 처리 시스템(100)은 소정의 데이터 처리 시스템에 설치되어 본 발명의 기술적 사상에 따른 동작 및/또는 기능을 구현할 수 있다. 이를 위해 상기 이미지 처리 시스템(100)은 상기 이미지 처리 시스템(100)의 동작 및/또는 기능을 구현하기 위한 소프트웨어(컴퓨터 프로그램, 이미지 솔루션) 및 상기 데이터 처리 시스템의 하드웨어가 유기적으로 결합되어 구현되는 시스템을 의미할 수 있다.

상기 데이터 처리 시스템은 예컨대, 모바일 폰, 태블릿, 컴퓨터, 서버 등과 같이 본 발명의 기술적 사상을 구현할 수 있는 데이터 프로세싱 능력이 존재하는 다양한 하드웨어로 구현될 수 있다. 일 예에 의하면, 상기 데이터 처리 시스템은 복수의 물리적 장치가 유/무선 네트워크를 통해 유기적으로 결합되어 구현되는 장치를 의미할 수도 있다.

상기 이미지 처리 시스템(100)은 데이터 처리 시스템에 저장되는 원본 이미지에 상응하는 썸네일을 생성할 수 있다. 상기 이미지 처리 시스템(100)은 썸네일이 디스플레이 될 필요가 있기 전에 미리 소정의 썸네일을 생성해둘 수도 있다. 또한, 상기 이미지 처리 시스템(100)은 썸네일이 디스플레이될 필요가 있을 때 실시간으로 상기 원본 이미지로부터 썸네일을 생성하여 디스플레이할 수도 있다. 상기 이미지 처리 시스템(100)은 적어도 두 종류 이상의 썸네일을 이용하는 시스템일 수 있다. 어느 한 종류의 썸네일은 상기 이미지 처리 시스템(100)이 원본 이미지가 획득되면, 미리 생성해두는 썸네일일 수 있다. 이처럼 미리 생성해두는 썸네일은 스몰(small) 썸네일 또는 미디엄(medium) 썸네일 일 수 있다. 또 다른 종류의 썸네일은, 상기 이미지 처리 시스템(100)이 원본 이미지로부터, 썸네일의 디스플레이가 필요할 경우, 실시간으로 생성하는 썸네일일 수 있다. 이러한 경우는 일반적으로 그 용량(크기)가 커서 미리 생성해두기에는 자원의 소모가 많은 썸네일일 수 있으며, 라지(large) 썸네일 또는 미디엄 썸네일일 수 있다. 미디엄 썸네일의 경우에는 구현 예에 따라 미리 생성해서 저장해둘 수도 있고, 라지 썸네일과 같이 실시간으로 생성해서 사용할 수도 있다. 이러한 썸네일의 생성은 상기 이미지 처리 시스템(100)에 포함된 썸네일 생성모듈(120)에 의해 수행될 수 있다. 상기 썸네일 생성모듈(120)이 썸네일을 생성하는 방법에 대해서는 다양한 선행기술들이 공지되어 있으므로, 상세한 설명은 생략하도록 한다.

어떠한 경우든 본 명세서에서는, 이미지 디스플레이를 하기 위해 실시간으로 원본 이미지로부터 생성되는 썸네일이 제1썸네일일 수 있고, 이미지 처리시스템(100)이 미리 생성하여 저장하고 있는 썸네일이 제2썸네일일 수 있다. 물론, 구현 예에 따라서는 제1썸네일도 미리 상기 이미지 처리시스템(100)이 생성하여 저장하고 있을 수도 있다. 상기 제1썸네일은 데이터 처리시스템의 디스플레이 사이즈일 수 있고, 제2썸네일은 제1썸네일보다 용량 및/또는 사이즈가 작은 이미지일 수 있다.

또한, 본 명세서에서 썸네일을 디스플레이한다고 함은, 썸네일을 그대로 디스플레이하는 것뿐만 아니라 필요에 따라 썸네일을 스캐일링하여 디스플레이하는 것을 포함하는 의미로 정의할 수 있다.

잘 알려진 바와 같이, 상기 이미지 처리 시스템(100)은 사용자의 입력요청의 시간간격 또는 입력요청의 종류에 따라 적응적으로 특정 원본 이미지에 상응하는 스몰 썸네일, 미디엄 썸네일, 또는 라지 썸네일을 선택하여 디스플레이할 수 있다. 예컨대, 빠른 응답(디스플레이)가 필요한 경우에는 미리 저장해둔 제2썸네일을 그대로 또는 일정 비율로 스캐일링 하여 디스플레이하고, 그렇지 않은 경우에는 제1썸네일을 생성하여 디스플레이할 수 있다. 또한, 경우에 따라서는 원본 이미지 자체를 디코딩하여 디스플레이할 수도 있다. 구현 예에 따라서는 응답의 즉시성을 높이기 위해 제2썸네일을 우선적으로 디스플레이한 후 다시 제1썸네일을 디스플레이할 수도 있다.

예컨대, 도 4에 도시된 바와 같이 상기 이미지 처리 시스템(100)은 데이터 처리 시스템에 소정의 이미지를 디스플레이할 수 있는데, 이때 디스플레이되는 이미지는 소정의 원본 이미지(예컨대, img1)에 상응하는 스몰 썸네일(stn_img1)일 수도 있고, 미디엄 썸네일(mtn_img1)일 수도 있고, 라지 썸네일(ltn_img1)일 수도 있다. 또는 원본 이미지 자체일 수도 있다. 만약, 사용자가 빠른 속도로 스와이핑(swiping)을 수행하면서 복수의 이미지들(예컨대, img1, img2, img 3등)을 순차적으로 보기를 원하는 경우, 상기 이미지 처리 시스템(100)은, 도 4에 도시된 바와 같이 복수의 이미지들(예컨대, img1, img2, img 3등) 각각의 스몰 썸네일들(예컨대, stn_img1, stn_img2, stn_img3 등)을 리스트 업한 상태에서, 소정의 디스플레이 영역에 순차적으로 선택되는 이미지들을 디스플레이할 수 있다. 이때 상기 이미지 처리 시스템(100)은 순차적으로 선택되는 이미지들 각각의 원본 이미지를 디스플레이하는 것이 아니라, 상기 원본 이미지에 상응하는 썸네일을 선택적으로 디스플레이할 수 있다. 예컨대, 빠른 속도의 선택 또는 요청(예컨대, 스와이핑)에 대응하기 위해 제2썸네일(예컨대, 스몰 썸네일 또는 미디엄 썸네일)을 그대로 또는 스캐일링하여 우선적으로 디스플레이한 후, 특정 이미지에 대해 상세한 또는 명확한 이미지를 디스플레이하여야 할 경우(예컨대, 스와이핑이 멈춘 경우) 해당하는 상기 특정 이미지의 제1썸네일(예컨대, 라지 썸네일)을 디스플레이할 수 있다. 상기 이미지 처리 시스템(100)에 포함된 제어모듈(110)은 이처럼 적응적으로 원본 이미지 자체를 디스플레이할지 썸네일을 디스플레이할지, 어떤 썸네일을 디스플레이할지, 또는 선택된 썸네일을 어떻게 디스플레이할지 여부 등을 결정하고, 적절한 이미지 프로세싱(예컨대, 스캐일링, 줌, 리젼 디코딩)을 수행하도록, 상기 이미지 처리 시스템(100)에 포함된 다른 구성들을 제어할 수 있다.

그리고 상기 제1썸네일이 디스플레이된 후(또는 원본 이미지가 디스플레이된 후)에, 일반적으로 사용자는 리젼 디코딩(예컨대, 줌)을 위한 요청(예컨대, 줌 요청)을 수행하게 된다. 이러한 경우, 도 1에서 설명한 바와 같이, 종래에는 제1썸네일이 디스플레이된 후(또는 원본 이미지가 디스플레이된 후)에 상기 요청을 처리하기 위해 상기 원본 이미지의 리젼 정보를 생성하여야 했다. 하지만, 리젼 정보를 생성하기 위해서는 상기 원본 이미지의 디코딩 과정 특히, 인코딩된 원본 이미지의 역부호화 과정(예컨대, 역 호프만 디코딩)이 수행되어야 한다. 그리고 이러한 역부호화 과정을 통해 상기 리젼 정보가 생성된 후에 상기 요청을 수행할 수 있었다.

이러한 문제점을 해결하기 위해, 상기 이미지 처리 시스템(100)에 포함된 디코딩 모듈(130)은 상기 제1썸네일 또는 원본 이미지를 디스플레이하기 위해 상기 원본 이미지의 디코딩을 수행하는 과정에서 미리 상기 원본 이미지의 리젼 정보를 생성할 수 있다. 즉, 종래와 같이 원본 이미지 또는 제1썸네일의 디스플레이 후에 소정의 요청(예컨대, 줌 요청)에 응답하여 상기 리젼 정보를 생성하는 것이 아니라, 상기 원본 이미지를 디스플레이하거나 또는 상기 제1썸네일을 생성하기 위해 상기 원본 이미지의 디코딩을 수행하는 과정에서 상기 리젼 정보를 생성할 수 있다.

이러한 경우, 종래에는 제1썸네일 또는 원본 이미지의 디스플레이를 위해 역부화 과정을 거친후 디스플레이를 수행하고, 상기 요청이 입력되면 다시 상기 리젼 정보를 생성하기 위해 다시 원본 이미지의 역 부호화 과정을 거쳐야 했지만, 본 발명의 기술적 사상에 의하면 제1썸네일의 또는 원본 이미지의 디스플레이를 위해 역부호화 과정을 거치면서 미리 상기 리젼 정보를 생성하므로, 반복적인 역 부호화 과정을 거치지 않을 수 있다. 따라서 비록 원본 이미지 또는 상기 제1썸네일이 디스플레이되는 시간이 살짝 늘어날 수도 있지만, 즉각적인 리젼 디코딩이 수행될 수 있는 효과가 있다.

구현 예에 따라 상기 제1썸네일이 미리 생성되어 있고, 상기 이미지 처리시스템(100)은 상기 제1썸네일을 디스플레이하도록 판단할 수 있다. 이러한 경우에는 상기 제1썸네일이 미리 생성되어 있으므로, 제1썸네일을 생성하는 과정에서 수행되는 원본 이미지의 디코딩시에 리젼 정보를 생성하는 것이 아니라, 사용자의 액션(예컨대, 사용자가 복수의 사진을 스와이핑하다가 멈추는 경우 또는 디스플레이된 제1썸네일을 움직이는 동작을 하다가 멈추는 경우 등)에 기초하여 미리 즉, 리젼 디코딩이 수행되는 요청이 입력되기 전에 리젼 정보를 생성할 수도 있다.

예컨대, 상기 이미지 처리 시스템(100)은 복수의 이미지들을 연속해서 스와이핑하다가 특정 이미지에서 스와이핑을 멈출 수 있다. 그리고 상기 이미지 처리 시스템(100)은 미리 생성되어 저장된 상기 제1썸네일을 디스플레이할 수 있다. 이러한 경우, 상기 제1썸네일을 통해 리젼 디코딩이 수행되는 요청(예컨대, 줌 요청)이 입력되기 전이라도 상기 이미지 처리 시스템(100)은 상기 제1썸네일에 상응하는 원본 이미지의 리젼 정보를 생성할 수 있다. 즉, 스와이핑 동작 중에는 리젼 디코딩이 수행되는 요청(예컨대, 줌 요청)이 입력될 가능성이 적지만, 스와이핑 동작이 멈춘 경우에는 리젼 디코딩이 수행되는 요청(예컨대, 줌 요청)이 입력될 가능성이 상대적으로 높아질 수 있다. 따라서 상기 스와이핑 동작이 멈추는 경우에 미리 상기 이미지 처리 시스템(100)은 상기 제1썸네일에 상응하는 원본 이미지의 리젼 정보를 생성할 수 있다.

예컨대, 상기 이미지 처리 시스템(100)은 미리 생성되어 있던 제1썸네일을 디스플레이한 후, 사용자의 입력에 따라 이미지를 움직이는 동작을 수행할 수 있다. 이처럼 이미지를 움직이는 중에는 리젼 디코딩이 수행되는 요청(예컨대, 줌 요청)이 입력될 가능성이 낮다. 그러다가 이미지를 움직이는 동작이 멈추는 경우, 상기 이미지 처리 시스템(100)은 미리 디스플레이되고 있는 이미지에 상응하는 원본 이미지의 리젼 정보를 생성해둘 수 있다.

또한, 상기 제2썸네일이 디스플레이된 상태에서는 일반적으로 리젼 디코딩이 수행되는 요청이 입력되는 경우가 거의 없으므로, 상기 이미지 처리 시스템(100)에 포함된 제어모듈(110)은 제1썸네일을 디스플레이하고자 할 경우에는 상기 디코딩 모듈(130)을 제어하여 상기 제1썸네일의 디스플레이를 위한 디코딩 과정에서 상기 원본 이미지에 상응하는 리젼 정보를 생성하도록 제어할 수 있고, 상기 제2썸네일을 디스플레이하고자 하는 경우에는 미리 생성하여 저장해둔 상기 제2썸네일을 바로 디코딩하여 디스플레이할 수 있다. 이러한 과정을 도 3을 참조하여 설명하면 다음과 같다.

도 3은 본 발명의 기술적 사상에 따른 이미지 처리 방법을 개략적으로 설명하기 위한 도면이다.

도 2 및 도 3을 참조하면, 상기 이미지 처리 시스템(100)은 상기 데이터 처리 시스템을 통해 사용자 요청을 수신할 수 있다(S100). 상기 사용자 요청은 전술한 바와 같이 특정 이미지의 디스플레이 요청, 다른 이미지를 선택하기 위한 요청 등과 같이 다양할 수 있다. 이러한 사용자 요청은 상기 이미지 처리 시스템(100)에 포함된 인터페이스 모듈(140)에 의해 수신될 수 있다.

그러면, 상기 이미지 처리 시스템(100)에 포함된 제어모듈(110)은 사용자 요청에 응답하여 디스플레이될 이미지에 상응하는 원본 이미지 또는 썸네일을 디스플레이할지 여부 및/또는 어떠한 썸네일을 디스플레이할지 여부를 판단할 수 있다(S110). 만약 제2썸네일을 디스플레이하여야 한다고 판단한 경우(예컨대, 빠른 응답이 필요한 경우), 상기 제어모듈(110)은 제2썸네일을 디스플레이 할 수 있다(S160). 이를 위해 상기 제어모듈(110)은 상기 데이터 처리 시스템에 미리 저장된 제2썸네일을 디코딩하고, 디코딩된 텍스쳐를 그래픽 엔진(예컨대, OpenGL 엔진 등, 200)에 업로드할 수 있다. 그러면 상기 그래픽 엔진은 업로드된 텍스쳐에 상응하는 이미지를 상기 데이터 처리 시스템에 구비된 디스플레이 장치에 디스플레이할 수 있다.

만약 상기 제어모듈(110)이 상기 제1썸네일을 디스플레이하도록 판단한 경우(예컨대, 제2썸네일이 디스플레이된 상태에서 사용자가 추가적인 액션이 없어서 보다 클리어한 이미지인 제1썸네일을 디스플레이하여야 하는 경우) 또는 원본 이미지를 디스플레이하도록 판단한 경우(S110), 상기 제어모듈(110)은 상기 썸네일 생성모듈(120)을 통해 원본 이미지에 기초하여 제1썸네일(예컨대, 라지 썸네일)을 생성하도록 할 수 있다. 제1썸네일을 생성하기 위해 상기 디코딩 모듈(130)은 원본 이미지를 디코딩하여야 하는데, 상기 제어모듈(110)은 이 과정에서 상기 원본 이미지에 상응하는 리젼정보를 생성하도록 상기 디코딩 모듈(130)을 제어할 수 있다(S120). 그리고 상기 제1썸네일이 생성된 후, 상기 제어모듈(110)은 상기 제1썸네일(예컨대, 라지 썸네일)의 디코딩된 텍스쳐를 그래픽 엔진(200)에 업르드함으로써 상기 제1썸네일(예컨대, 라지 썸네일)을 디스플레이할 수 있다(S130).

물론, 상기 제어모듈(110)이 원본 이미지를 디스플레이하도록 판단한 경우에도, 상기 제어모듈(110)은 상기 원본 이미지를 디코딩하여야 하며 상기 원본 이미지를 디코딩하면서 상기 리젼 정보를 생성할 수 있다.

결국, 상기 제어모듈(110)은 원본 이미지를 디스플레이하든 제1썸네일을 디스플레이하든, 리젼 정보의 생성이 필요한 요청(예컨대, 줌 요청)이 사용자로부터 입력되기 전에, 미리 상기 원본 이미지를 디코딩하면서 상기 원본 이미지의 리젼정보를 생성해둘 수 있다.

그러면 원본 이미지 또는 제1썸네일(예컨대, 라지 썸네일)이 디스플레이된 후, 만약 줌 요청이 사용자로부터 수신된 경우에는(S140) 즉각적으로 이미 생성된 리젼 정보를 이용해 줌 즉, 리젼 디코딩을 수행할 수 있다(S150). 물론, 리젼 디코딩을 수행하도록 하는 요청이 입력되지 않은 경우에는, 미리 생성한 상기 리젼 정보는 사용되지 않을 수도 있다. 하지만, 어차피 원본 이미지 또는 제1썸네일(예컨대, 라지 썸네일)을 디스플레이하기 위한 디코딩 과정에서 상기 리젼 정보를 생성하므로, 약간의 추가적인 프로세스만으로 리젼 디코딩을 수행하여야 할 때에는 훨씬 빠르고 즉각적인 리젼 디코딩(예컨대, 줌)이 수행될 수 있는 효과가 있다.

한편, 상기 제어모듈(110)이 상기 제1썸네일을 디스플레이하는 과정(S130)에서, 종래에는 상기 제1썸네일에 포함되는 타일(tile)을 순차적으로 디스플레이하였다. 상기 타일은 구현 예에 따라 리젼과 동일할 수도 있고, 복수의 리젼들이 하나의 타일을 이룰 수도 있다. 어떠한 경우든, 종래에는 상기 타일이 순차적으로 디코딩되면서 그래픽 엔진(200)에 업로드되어 순차적으로 상기 제1썸네일에 포함된 타일들이 클리어하게 디스플레이되었다. 하지만 이러한 경우, 반복적인 그래픽 엔진(200)의 업로드로 인한 리던던시(redundancy)가 존재하였고, 사용자에게는 각각의 타일별로 이미지가 흐릿하다가 명확해지는 과정이 가시적으로 확인될 수 있어서 디코딩 속도가 느리다는 느낌을 주거나 사용성이 저하되는 문제점이 있었다.

이러한 문제점을 해결하기 위한 기술적 사상은 도 5를 참조하여 설명하도록 한다.

도 5는 본 발명의 일 실시예에 따른 이미지 처리 방법에 따라 이미지를 그래픽 엔진에 업로드하는 방법을 설명하기 위한 도면이다.

도 5a는 종래에 제1썸네일을 디스플레이하는 과정을 개략적으로 도시하고 있고, 도 5b는 5a에 따라 데이터 처리 시스템(1000)에 디스플레이되는 이미지의 변화를 설명하기 위한 도면이다.

상기 데이터 처리 시스템에는 도 5b에 도시된 바와 같이, 우선 제2썸네일(20)이 그대로 또는 스캐일링 되어 디스플레이된 상황일 수 있으며, 이때에는 흐릿한 이미지가 디스플레이되고 있는 상황일 수 있다.

이후 종래의 이미지 처리 시스템은 제1썸네일을 디스플레이하기 위해, 상기 제1썸네일의 제1리젼(예컨대, 21)을 디코딩할 수 있다(S20). 도 5에서는 종래의 이미지 처리 시스템이 그래픽 엔진(200)에 업로드하는 단위인 타일이 전술한 바와 같은 리젼과 동일한 일 예를 도시하고 있지만, 복수의 리젼들이 하나의 타일이 될 수도 있음은 물론이다.

그리고 디코딩된 결과 획득된 제1리젼(예컨대,21)의 텍스쳐(texture)를 종래의 이미지 처리 시스템은 그래픽 엔진에 업로드할 수 있다(S21). 그러면 제2썸네일이 디스플레이되고 있던 제12리젼(예컨대, 21)은 제1썸네일에 기초하여 디스플레이됨으로써 클리어한 이미지(예컨대, 해상도가 높은 이미지)가 디스플레이될 수 있다.

그리고 상기 종래의 이미지 처리 시스템은 다른 리젼이 존재하지 않을 때까지, 순차적으로 다음 리젼들(예컨대, 22, 23, 24)을 디코딩하고 그래픽 엔진에 업로드하는 작업을 반복적으로 수행할 수 있다(S22, 23, 24). 그러면 상기 데이터 처리 시스템(1000)에 디스플레이되고 있는 이미지(20)의 각각의 리젼들(예컨대, 22, 23, 24 등)이 순차적으로 클리어 한 이미지로 대체될 수 있다. 즉, 각각의 리젼들(예컨대, 21, 22, 23, 24)에 해당하는 이미지가 제2썸네일로부터 획득되는 이미지로부터, 제2썸네일보다 많은 정보가 포함된 제1썸네일로부터 획득되는 이미지로 순차적으로 대체될 수 있다. 이러한 경우, 사용자는 순차적으로 상기 데이터 처리 시스템(1000)에 디스플레이되는 이미지가 클리어 하게 변화되는 것을 인지할 수 있는 문제점이 있다.

따라서 본 발명의 기술적 사상에 따른 상기 이미지 처리 시스템(100)은, 도 5c와 같이 각각의 타일들별로 순차적으로 그래픽 엔진(200)에 업로드하는 것이 아니라, 복수의 타일들(예컨대, 제1썸네일에 포함된 타일들 전체)을 한 번에 그래픽 엔진(200)에 업로드함으로써 이러한 문제점을 해결함과 동시에 반복적으로 그래픽 엔진(200)에 업로드하는 프로세스를 줄일 수 있다.

도 5c를 참조하면, 상기 제어모듈(110)은 디코딩 모듈(130)을 제어하여 상기 제1썸네일의 제1타일(예컨대, 리젼, 21)을 디코딩할 수 있다(S200). 그리고 그 결과 획득된 텍스쳐를 소정의 저장장치(예컨대, 데이터 처리 시스템(1000)에 구비된 메모리 장치)에 저장할 수 있다(S210). 그리고 더 이상 남은 타일(리젼)들이 존재하지 않을 때까지 반복적으로 타일별 디코딩 및 텍스쳐의 저장을 반복적으로 수행할 수 있다(S220, S230). 그리고 모든 타일들에 대해 텍스쳐가 생성되어 저장되면, 상기 제어모듈(110)은 한 번에 상기 타일들을 그래픽 엔진(200)에 업로드할 수 있다(S240). 그러면, 예컨대, 도 5b에 도시된 바와 같이 제2썸네일이 디스플레이되고 있는 상황에서 한 번에 다수(또는 전체)의 타일들(예컨대, 21, 22, 23, 24)이 클리어 한 이미지로 대체될 수 있다. 이러한 경우, 어느 하나의 타일(예컨대, 21)이 클리어 해지는 시간은 보다 길어질 수 있지만, 전체 타일들이 클리어 해지는 시간은 짧아질 수 있으며, 사용자는 순차적으로 이미지가 클리어 해지는 것과 같은 불편함을 겪지 않을 수 있게 된다.

한편, 제1썸네일이 디스플레이된 후 사용자는 리젼 디코딩(예컨대, 줌)이 필요한 소정의 요청을 입력할 수 있다. 이러한 경우 전술한 바와 같이 상기 이미지 처리 시스템(100)은 상기 요청이 입력된 후 리젼 정보를 생성하는 것이 아니라, 상기 제1썸네일을 디스플레이하기 위한 원본 이미지의 디코딩 과정에서 생성한 리젼 정보를 이용하여 즉각적인 줌을 수행할 수 있음은 전술한 바와 같다.

한편, 줌을 수행하기 위해서는 원본 이미지로부로부터 줌 이미지(즉, 줌이 수행된 이미지)를 디코딩하여 디스플레이하는 과정이 필요하게 된다. 이때 원본 이미지로부터 줌 된 이미지에 포함되는 각각의 영역을 디코딩하여 디스플레이하는 과정이 필요하다. 이러한 경우 종래에는 확대후의 이미지 즉 줌 이미지에 포함될 각각의 타일을 줌 이미지의 미리 정해진 영역 또는 타일(예컨대, 최좌측 상단부터)부터 순차적으로 디코딩하여 디스플레이하였다. 그리고 상기 미리 정해진 영역은 줌의 특성과는 전혀 무관하게 미리 정해진 영역이었다. 따라서 이러한 경우에도 줌 이미지가 전체적으로 클리어 해지기 위해서(즉, 줌 이미지에 포함될 각각의 타일이 원본 이미지로부터 디코딩되어 디스플레이되기 위해서)는 도 5에서 설명한 바와 같이 단순히 줌 이미지에서 미리 정해진 타일부터 순서대로 클리어 해지게 되었다. 하지만, 본 발명의 기술적 사상에 의하면, 줌을 수행할 때에 줌 이미지에 포함된 타일들의 디코딩 및 디스플레이 순서를 제어함으로써 사용자가 가시적으로 인지하는 디코딩의 체감속도를 높일 수 있는 기술적 사상을 제공한다. 이러한 기술적 사상은 도 6을 참조하여 설명하도록 한다.

도 6은 본 발명의 일 실시 예에 따른 이미지 처리 방법에 따라 줌을 수행하기 위한 방법을 설명하기 위한 도면이다.

도 6을 참조하면, 도 6a와 같이 제1썸네일(30)이 디스플레이된 상태에서 사용자는 소정의 영역(예컨대, 31)에 대해 줌 요청을 입력할 수 있다. 상기 줌 요청에는 줌 비율 등의 정보가 더 포함될 수 있음은 물론이다.

그러면 도 6b에 도시된 바와 같이 상기 영역(예컨대, 31)에 상응하는 줌 이미지가 상기 데이터 처리 시스템(1000)에 디스플레이될 수 있다. 이때 종래의 이미지 처리 시스템은 확대 후에 디스플레이될 줌 이미지(예컨대, 32)를 상기 줌 요청에 기초하여 특정하고, 특정된 줌 이미지에 포함될 각각의 타일들을 예컨대, 최좌측 상단의 타일(예컨대, j)부터 순차적으로 디코딩하여 디스플레이하였다. 이러한 경우, 종래에는 상기 줌 이미지(32)가 예컨대, 타일 j, k, l, m, i, b, c, n, h, a, d, o, g, f, e, p의 순서대로 클리어(즉, 원본 이미지로부터 해당하는 타일의 디코딩 및 디스플레이) 해졌었다. 이러한 경우 도 5에서 설명한 바와 마찬가지로 사용자는 가시적으로 타일들이 순차적으로 클리어해지는 것을 인지할 수 있으며, 이러한 경우 불편함 또는 디코딩의 체감속도의 저하로 인한 사용성의 저하의 문제점이 있었다.

하지만, 본 발명의 기술적 사상에 의하면, 상기 제어모듈(110)은 상기 줌 이미지(32)의 중앙부의 소정의 타일(영역)을 가장 우선적으로 디코딩하여 디스플레이할 타일로 선택할 수 있다. 예컨대, 상기 제어모듈(110)은 도 6b에서 타일 a, b, c, 또는 d 중에 어느 하나를 기준 영역으로 선택할 수 있다.

그리고 상기의 기준영역부터 근거리의 영역(타일)의 순서대로 디코딩 및 디스플레이를 수행할 수 있다. 예컨대, 상기 기준영역이 타일 a로 선택된 경우, 상기 제어모듈(110)은 a를 가장 먼저 디코딩 및 디스플레이하고, b, c, d, e, f, g, h, i, j, k, l, m, n, o, 및 p의 순서대로 디코딩 및 디스플레이할 수 있다. 물론, 기준영역으로부터 동일한 거리에 위치한 타일의 경우에는 그 순서가 변경될 수도 있다. 어떠한 경우든 상기 제어모듈(110)은 줌 이미지(32)의 중앙부터 각각의 영역이 클리어해지고 순차적으로 외곽의 영역들이 클리어해지도록 제어할 수 있다. 예컨대, 상기 줌 이미지(32)의 중앙부의 소정의 영역을 기준영역으로 설정한 후, 상기 기준영역을 중심으로 회오리 형태로 순차적으로 각각의 영역을 디코딩 및 디스플레이할 수 있지만 이에 국한되는 것은 아니다.

이처럼 줌 이미지(32)의 중앙부터 순차적으로 외곽으로 각각의 영역이 클리어해지면, 사용자는 줌의 수행시에 우선적으로 주목하는 부분이 줌을 하는 영역의 중앙 부분이므로 또는 줌 이미지(32)의 중앙부터 자연스럽게 주목을 하게 되므로, 종래의 방식에 비해 줌 이미지 전체의 디코딩 시간이 동일하거나 유사할지라도 훨씬 디코딩의 체감속도가 높은 것으로 인지시킬 수 있어서, 사용성의 증대를 가져올 수 있는 효과가 있다. 물론, 상기의 줌 시의 줌 이미지의 디코딩 및 디스플레이 순서의 제어는 이미 디스플레이 되고 있는 이미지가 제1썸네일일 경우로 한정될 필요는 없으며, 어떠한 이미지가 디스플레이되고 있는 상황에서도 상술한 바와 같은 기술적 사상이 적용될 수 있음을 본 발명의 기술분야의 평균적 전문가는 용이하게 추론할 수 있을 것이다.

한편, 본 발명의 기술적 사상에 의하면, 스몰 썸네일의 활용성을 높이는 기술적 사상을 추가적으로 제공한다. 스몰 썸네일은 일반적으로 그리드 뷰(grid view)를 위해 미리 정해진 비율 즉, 그리드 비율로 생성되어 왔었다. 상기 그리드 비율은 정사각형의 비율(1:1)이거나 또는 구현 예에 따라 정사각형과 유사한 비율(예컨대, 3:4 등)이 이용되어 왔었다.

즉, 상기 스몰 썸네일은 원본 이미지의 비율 즉, 원본 비율과는 무관하게 미리 정해진 그리드 비율로 생성되어 왔었다. 하지만 이러한 경우, 스몰 썸네일이 원본 비율로 디스플레이되는 것이 보다 적합한 경우에는 이미지가 존재하지 않는 영역이 발생하는 등의 문제점이 발생할 수 있다. 이러한 문제점 및 이를 위한 본 발명의 기술적 사상은 도 7을 참조하여 설명하도록 한다.

도 7은 본 발명의 일 실시 예에 따른 wstn(wide_small_thumbnail)을 설명하기 위한 도면이다.

우선 도 7a에 도시된 바와 같은 원본 이미지(예컨대, img1)이 존재할 수 있다. 이러한 경우, 종래의 이미지 처리 시스템은 도 7b에 도시된 바와 같이 상기 이미지 처리 시스템이 이용하는 그리드 비율에 상응하는 스몰 썸네일(예컨대, stn_img1)을 미리 생성해두고, 도 4에서 설명한 바와 같은 경우, 또는 도 7c에 도시된 바와 같이 이미지들의 리스트를 나타내기 위해 그리드 비율의 스몰 썸네일(예컨대, stn_img1)을 이용하였다. 이때 종래에는 원본 이미지를 그리드 비율로 크로핑(cropping)한 후, 이미지를 축소하여 스몰 썸네일(예컨대, stn_img1)을 생성하였고 그에 따라 도 7b에 도시된 바와 같은 썸네일을 생성하였었다.

하지만 이러한 경우, 상기 스몰 썸네일(예컨대, stn_img1)을 원본 비율로 디스플레이할 필요가 있는 경우에는 도 7d에 도시된 바와 같이 상기 스몰 썸네일(예컨대, stn_img1)을 스캐일링하여 디스플레이하면 어떠한 이미지도 디스플레이되지 않는 영역(예컨대, 40)이 발생하게 된다. 또는 구현 예에 따라 상기 스몰 썸네일(예컨대, stn_img1)을 어느 한 방향(예컨대, 가로방향, 세로방향)을 기준으로 화면 크기대로 스캐일링할 수도 있는데, 이러한 경우에도 도 7b에 도시된 썸네일이 확대되어 디스플레이되는 것일 뿐, 크로핑된 부분은 스몰 썸네일(stn_img1)에 존재하지 않으므로 원본 이미지와는 다른 이미지가 디스플레이되는 것은 마찬가지였다.

이러한 문제점을 해결하기 위해, 본 발명의 기술적 사상에 따른 상기 이미지 처리 시스템(100)에 포함된 썸네일 생성모듈(120)은 도 7e에 도시된 바와 같이 원본 이미지의 비율 즉, 원본 비율을 갖는 스몰 썸네일(예컨대, wide small thumbail, wstn_img1)을 생성할 수 있다.

이처럼 원본 비율을 갖는 스몰 썸네일(예컨대, wstn_img1)을 생성하는 경우, 상기 제어모듈(110)은 원본 비율대로 상기 원본 이미지에 상응하는 스몰 썸네일(예컨대, wstn_img1)을 디스플레이하고자 하는 경우에는, 도 7g에 도시된 바와 같이 상기 스몰 썸네일(예컨대, wstn_img1)을 단순히 스캐일링하여 디스플레이할 수 있다. 이때에는 예컨대 어느 한 방향(예컨대, 가로방향)을 기준으로 화면의 크기에 맞도록 스캐일링을 하여 디스플레이할 수 있으며, 이러한 경우에는 도 7d에 도시된 바와 같이 스몰 썸네일을 이용하여 확대 디스플레이하는 경우에도 원본 이미지가 훼손되지 않고 디스플레이될 수 있다.

또한, 상기 스몰 썸네일(예컨대, wstn_img1)을 그리드 비율로 디스플레이할 필요가 있는 경우(예컨대, 도 7f와 같은 경우), 상기 제어모듈(110)은 상기 스몰 썸네일(예컨대, wstn_img1)을 그리드 비율에 상응하도록 크로핑(cropping)하여 디스플레이할 수 있다. 예컨대, 단순히 상기 스몰 썸네일(예컨대, wstn_img1)의 양쪽 소정의 길이를 크로핑하여 그리드 비율을 갖는 스몰 썸네일(예컨대, cropping wide small thumnail)을 생성할 수 있다.

결국 본 발명의 기술적 사상에 의하면, 스몰 썸네일을 생성할 때 원본 비율에 상응하는 스몰 썸네일(예컨대, wstn_img1)을 생성함으로써, 스몰 썸네일을 스캐일링하여 디스플레이할 경우에도 원본 이미지가 훼손되지 않은 이미지가 디스플레이될 수 있고, 그리드 비율로 디스플레이할 필요가 있는 경우에는 간단하게 스몰 썸네일(예컨대, wstn_img1)을 크로핑하여 사용함으로써 필요에 따라 적응적으로 적합한 이미지를 상기 스몰 썸네일(예컨대, wstn_img1)에 기초하여 디스플레이할 수 있는 효과가 있다.

또한, 본 발명의 기술적 사상에 의한 스몰 썸네일(예컨대, wstn_img1)을 이용하는 경우, 일반적으로 스몰 썸네일을 그리드 비율로 디스플레이하는 경우는 주로 이미지 리스트업 등과 같이 실시간성 또는 즉각적인 응답이 요구되는 경우가 적은 반면 스몰 썸네일을 확대하여 보여주는 경우 또는 원본 비율로 보여주는 경우는 일반적으로 빠르고 즉각적인 응답이 요구되는 경우가 많으므로, 스몰 썸네일을 이용한 디스플레이에 훨씬 효과적일 수 있다.

한편, 본 발명의 실시예에 따른 이미지 처리 방법은 컴퓨터가 읽을 수 있는 프로그램 명령 형태로 구현되어 컴퓨터로 읽을 수 있는 기록 매체에 저장될 수 있으며, 본 발명의 실시예에 따른 제어 프로그램 및 대상 프로그램도 컴퓨터로 판독 가능한 기록 매체에 저장될 수 있다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.

기록 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 소프트웨어 분야 당업자에게 공지되어 사용 가능한 것일 수도 있다.

컴퓨터로 읽을 수 있는 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media) 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 또한 상술한 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 전자적으로 정보를 처리하는 장치, 예를 들어, 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.

상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성요소들도 결합된 형태로 실시될 수 있다.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타나며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (5)

1. 데이터 처리 시스템에 설치되는 이미지 처리 시스템이 상기 데이터 처리 시스템에 미리 저장된 썸네일이 아닌 실시간으로 썸네일을 생성하여 디스플레이하는 이미지 처리방법에 있어서,
   상기 이미지 처리 시스템이 원본 이미지를 디코딩하면서 상기 원본 이미지에 상응하는 리젼(region) 정보-상기 리젼 정보는 상기 원본 이미지를 구성하는 복수의 리젼들 각각의 위치를 나타내는 정보임-를 생성하는 단계;
   상기 이미지 처리 시스템이 상기 원본 이미지가 디코딩된 후 디코딩된 상기 원본 이미지에 상응하는 상기 썸네일을 생성하여 생성된 상기 썸네일을 상기 데이터 처리 시스템에 디스플레이하는 단계;
   상기 이미지 처리 시스템이 디스플레이된 상기 제1썸네일의 특정 영역에 대한 줌 요청을 수신하는 단계;
   수신된 줌 요청에 응답하여, 상기 썸네일의 생성 전에 기 생성된 상기 리젼 정보에 기초하여 줌을 수행하는 단계를 포함하는 이미지 처리 방법.
   
   
2. 소정의 썸네일을 그리드 뷰 비율 및 화면비율로 선택적으로 디스플레이할 수 있는 이미지 처리 방법에 있어서,
   이미지 처리 시스템이 원본 이미지에 상응하는 썸네일을 원본 비율로 미리 생성하여 데이터 처리 시스템에 저장하는 단계;
   상기 이미지 처리 시스템이 상기 썸네일을 그리드 뷰(grid view) 비율로 디스플레이할 때는 상기 썸네일을 상기 그리드 뷰 비율로 크로핑(cropping)하여 디스플레이하고, 화면비율로 디스플레이할 때는 상기 썸네일을 디스플레이하는 단계를 포함하는 이미지 처리 방법.
   
3. 데이터 처리 시스템에 설치되어 제1항 또는 제2항 중 어느 한 항에 기재된 방법을 수행하기 위한 매체에 기록된 컴퓨터 프로그램.
   
4. 데이터 처리 시스템에 설치되는 이미지 처리 시스템이 상기 데이터 처리 시스템에 미리 저장된 썸네일이 아닌 실시간으로 썸네일을 생성하여 디스플레이하는 이미지 처리 시스템에 있어서,
   상기 이미지 처리 시스템이 원본 이미지를 디코딩하면서 상기 원본 이미지에 상응하는 리젼(region) 정보-상기 리젼 정보는 상기 원본 이미지를 구성하는 복수의 리젼들 각각의 위치를 나타내는 정보임-를 생성하기 위한 디코딩 모듈는 단계;
   상기 이미지 처리 시스템이 상기 원본 이미지가 디코딩된 후 디코딩된 상기 원본 이미지에 상응하는 상기 썸네일을 생성하는 썸네일 생성모듈; 및
   생성된 상기 썸네일을 상기 데이터 처리 시스템에 디스플레이하는 제어모듈; 및
   디스플레이된 상기 제1썸네일의 특정 영역에 대한 줌 요청을 수신하기 위한 인터페이스 모듈을 포함하며,
   상기 제어모듈은,
   수신된 줌 요청에 응답하여, 상기 썸네일의 생성 전에 기 생성된 상기 리젼 정보에 기초하여 줌을 수행하는 이미지 처리 시스템.
   
5. 소정의 썸네일을 그리드 뷰 비율 및 화면비율로 선택적으로 디스플레이할 수 있는 이미지 처리 시스템에 있어서,
   원본 이미지에 상응하는 썸네일을 원본 비율로 미리 생성하여 데이터 처리 시스템에 저장하기 위한 썸네일 생성모듈;
   상기 썸네일을 그리드 뷰(grid view) 비율로 디스플레이할 때는 상기 썸네일을 상기 그리드 뷰 비율로 크로핑(cropping)하여 디스플레이하고, 화면비율로 디스플레이할 때는 상기 썸네일을 디스플레이하기 위한 제어모듈을 포함하는 이미지 처리 시스템.
   

Images