KR20100066210A - Photographing information providing serve - Google Patents
Photographing information providing serve Download PDFInfo
- Publication number
- KR20100066210A KR20100066210A KR1020080124904A KR20080124904A KR20100066210A KR 20100066210 A KR20100066210 A KR 20100066210A KR 1020080124904 A KR1020080124904 A KR 1020080124904A KR 20080124904 A KR20080124904 A KR 20080124904A KR 20100066210 A KR20100066210 A KR 20100066210A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- mobile communication
- communication terminal
- location
- photographing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42348—Location-based services which utilize the location information of a target
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/023—Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
- H04W88/02—Terminal devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
- H04W88/18—Service support devices; Network management devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2242/00—Special services or facilities
- H04M2242/14—Special services or facilities with services dependent on location
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2242/00—Special services or facilities
- H04M2242/15—Information service where the information is dependent on the location of the subscriber
Abstract
Description
본 발명은 카메라 촬영 정보 제공 서버에 관한 것으로서, 보다 상세하게는 이동통신 단말에 촬여정보를 제공하는 서버에 관한 것이다.The present invention relates to a camera photographing information providing server, and more particularly, to a server for providing photographing information to a mobile communication terminal.
최근 핸드폰에 탑재된 카메라의 성능이 비약적으로 발전하고 있으며, 추후에는 핸드폰에 구비된 카메라가 하이엔드 디지털 카메라의 성능을 따라 잡을 것이라 예측되고 있다.Recently, the performance of the camera mounted on the mobile phone is rapidly improving, and it is predicted that the camera equipped on the mobile phone will catch up with the performance of the high-end digital camera in the future.
핸드폰 사용자들도 일상 생활의 추억하고 싶은 순간들을 핸드폰 카메라로 찍어서 소장하며, 또한 친구들 간에 찍은 사진을 공유하고 있다.Mobile phone users also take pictures of their favorite moments with their cell phone cameras and share their pictures with friends.
일반적으로, DSLR(Digital Single Lens Reflex) 또는 하이엔드 디지털 카메라의 경우 일반 디지털 카메라와는 달리 카메라 설정을 달리하거나 사진을 찍는 위치를 달리하는 경우, 사진의 퀄리티가 크게 차이가 난다. 따라서, 핸드폰에 탑재된 카메라도 또한 일반 디지털카메라처럼 자동모드(auto mode)로 사진을 찍는 경우, 사진의 만족도가 크게 떨어질 가능성이 크다는 문제점이 있다. In general, digital single lens reflex (DSLR) or high-end digital cameras, unlike general digital cameras, if the camera settings are different or the location where the pictures are taken, the quality of the picture is significantly different. Therefore, the camera mounted on the mobile phone also has a problem in that when taking a picture in the automatic mode (auto mode) like a general digital camera, the satisfaction of the picture is greatly reduced.
본 발명의 목적은 이동통신 단말 사용자에게 현재 이동통신 단말의 위치 또는 사용자가 원하는 목적지의 추천촬영지 정보를 제공할 수 있는 촬영정보 제공서버를 제안하는 것이다. An object of the present invention is to propose a shooting information providing server that can provide the user of the mobile communication terminal with the current location of the mobile communication terminal or the recommended location information of the desired destination.
본 발명의 다른 목적은, 이동통신 단말 사용자가 사진 촬영 초보자라더라도 보다 손쉽게 고품질의 사진을 촬영할 수 있도록, 이동통신 단말이 자동으로 카메라 설정을 자동설정하는 카메라 환경설정 정보를 제공하는 촬영정보 제공서버를 제안하는 것이다. Another object of the present invention is a shooting information providing server that provides camera configuration information for automatically setting camera settings by the mobile communication terminal so that the mobile communication terminal user can easily take a high-quality picture even if a beginner to take a picture. To suggest.
본 발명의 또 다른 목적은 사용자가 보다 손쉽게 구도를 변경하여 사진을 촬영할 수 있도록, 추천구도에 따라 카메라 위치변경 안내메시지를 제공하는 촬영정보제공서버를 제안하는 것이다. Still another object of the present invention is to propose a photographing information providing server that provides a camera position change guide message according to a recommendation composition so that a user can take a picture by changing the composition more easily.
본 발명의 일 측면에 따르면, 이동통신 단말의 위치정보를 제공하는 위치정보 제공서버; 및 상기 이동통신 단말로부터 수신되는 촬영정보 요청에 따라, 상기 위치정보 제공서버에 상기 이동통신 단말의 위치정보를 요청하고, 수신되는 상기 이동통신 단말의 위치정보에 따라 상기 촬영정보 요청에 따른 촬영정보를 제공하는 촬영정보 제공서버를 포함하는 촬영정보 제공 시스템이 제공된다.According to an aspect of the present invention, a location information providing server for providing location information of a mobile communication terminal; And requesting the location information of the mobile communication terminal from the location information providing server according to the shooting information request received from the mobile communication terminal, and shooting information according to the shooting information request according to the received location information of the mobile communication terminal. Provided is a shooting information providing system including a shooting information providing server for providing a.
본 발명의 다른 측면에 의하면, 이동통신 단말에 촬영 정보를 제공하는 서버에 있어서, 지역별 촬영지 정보를 포함하고, 상기 지역별 촬영지 정보 중 상기 이동통신 단말의 위치에 따른 추천촬영지를 제공하는 촬영지 결정부; 및 영상별 구도 정보를 포함하고, 상기 이동통신 단말로부터 수신되는 주요영상에 따라 상기 영상별 구도 정보에서 선택된 구도 정보인 추천구도를 제공하는 구도 결정부를 포함하는 촬영정보 제공서버가 제공된다. According to another aspect of the present invention, a server for providing photographing information to a mobile communication terminal, including a photographing location information for each region, the photographing location determination unit for providing a recommended photographing location according to the location of the mobile communication terminal of the region-specific photographing location information; And a composition determining unit including composition information for each image and providing recommendation composition which is composition information selected from the composition information for each image according to the main image received from the mobile communication terminal.
본 발명에 따른 촬영정보 제공서버는 이동통신 단말 사용자에게 현재 이동통신 단말의 위치 또는 사용자가 원하는 목적지의 추천촬영지 정보를 제공할 수 있다는 장점이 있다.The shooting information providing server according to the present invention has an advantage of providing the mobile communication terminal user with the current location of the mobile communication terminal or recommendation shooting location information of a destination desired by the user.
또한, 이동통신 단말 사용자가 사진 촬영 초보자라더라도 보다 손쉽게 고품질의 사진을 촬영할 수 있도록, 이동통신 단말 위치를 고려한 카메라 환경설정을 제공하여, 이동통신 단말이 카메라를 자동으로 설정할 수 있다는 장점이 있다.In addition, the mobile communication terminal user has a merit that a mobile communication terminal can automatically set up a camera by providing a camera environment setting in consideration of the mobile communication terminal location so that even a beginner of photography can easily take a high quality picture.
또한, 추천구도에 따라 카메라 위치변경 안내메시지를 제공하여, 사용자가 보다 손쉽게 구도를 변경하여 사진을 촬영할 수 있다는 장점이 있다. In addition, by providing a camera position change guide message according to the recommendation composition, there is an advantage that the user can easily change the composition to take a picture.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the present invention to specific embodiments, it should be understood to include all transformations, equivalents, and substitutes included in the spirit and scope of the present invention. In the following description of the present invention, if it is determined that the detailed description of the related known technology may obscure the gist of the present invention, the detailed description thereof will be omitted.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. The terms first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.
이하, 본 발명의 실시예를 첨부한 도면들을 참조하여 상세히 설명하기로 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면 번호에 상관없이 동일한 수단에 대해서는 동일한 참조 번호를 사용하기로 한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. In order to facilitate a thorough understanding of the present invention, the same reference numerals are used for the same means regardless of the number of the drawings.
도 1은 본 발명의 실시예에 따른 촬영 정보를 이동통신 단말에 제공하는 촬 영정보 제공시스템의 연결구조를 예시한 도면이다. 1 is a diagram illustrating a connection structure of a photographing information providing system for providing photographing information to a mobile communication terminal according to an exemplary embodiment of the present invention.
도 1을 참조하면, 본 발명의 실시예에 따른 촬영정보를 제공하는 촬영정보 제공시스템은 이동통신 단말(100), 이동통신망(110), 인터넷망(120), 날씨정보 제공서버(140), LBS(Location Based Service)서버(150) 및 촬영정보 제공서버(130) 중 하나 이상을 포함할 수 있다.Referring to FIG. 1, a photographing information providing system for providing photographing information according to an exemplary embodiment of the present invention includes a
이동통신 단말(100)의 구조에 대해서는 이후 도 2를 참조하여 상세히 후술한다.The structure of the
이동통신 단말(100)이 연결된 이동통신망(110)은 예를 들어 WCDMA (Wideband Code Division Multiple Access)망의 경우 Node-B, RNC(Radio Network Controller), SGSN(Serving GPRS Service Node) 및 GGSN(Gateway GPRS Service Node)를 포함할 수 있으며, 이는 공지된 기술이므로 본 명세서에서 상세한 설명은 생략한다.The
도 1에 예시된 이동통신망(110)은 WCDMA망의 경우를 가정하여 예시한 일 례에 불과하며, 데이터 패킷을 송수신할 수 있는 이동통신망의 경우 그 명칭에 관계없이 해당할 수 있다.The
날씨정보 제공서버(140)는 지역별, 보다 상세하게는 이동통신 단말위치별 날씨정보를 제공할 수 있다. 날씨정보를 제공하는 다양한 방법이 공지되어 있으므로, 날씨정보 제공서버(140)에 대한 상세한 설명은 생략한다.The weather
LBS 서버(150)는 위치 기반 서비스를 제공하는 위치정보 제공서버의 일례로서, 예를 들어 위성 위치확인 시스템(GPS; Global Positioning System)과 연계되어 이동통신 단말의 위치정보를 제공할 수 있다. 이동통신 단말(100)의 위치를 계산하는 방법에 있어서 이동통신 단말이 속한 셀 식별자-이하, "Cell ID"이라 함-를 전달하는 Cell-ID 방식, 단말로부터 각 기지국으로 전파가 도달되는 시간을 측정한 후 삼각측량을 이용하여 이동통신 단말의 위치를 계산하는 방법 및 GPS를 이용한 방법 등 다양한 측위 기술이 공지되어 있으므로, 본 명세서에서 상세한 설명은 생략한다.The LBS
본 발명의 실시예에 따른 촬영정보 제공서버(120)는 이후 도 3을 참조하여 상세히 후술한다.Shooting
지금까지 본 발명의 실시예에 따른 촬영정보를 제공하기 위한 촬영정보 제공시스템의 연결구조를 중심으로 설명하였다. Up to now, a description has been given of a connection structure of a photographing information providing system for providing photographing information according to an exemplary embodiment of the present invention.
도 2에 예시된 구성은 일 례에 불과하며, 날씨정보 제공서버(140) 및/또는 LBS 서버(150)의 전부 또는 일부가 촬영정보 제공서버(130)에 포함될 수 있음은 본 발명의 기술적 사상에 비추어 당업자에게 자명하다. The configuration illustrated in FIG. 2 is just an example, and all or a part of the weather
이하, 도 2를 참조하여 본 발명의 실시예에 따른 이동통신 단말(100)에 대해서 설명한다.Hereinafter, a
도 2는 본 발명의 실시예에 따른 이동통신 단말의 구조를 예시한 블록도이다.2 is a block diagram illustrating a structure of a mobile communication terminal according to an embodiment of the present invention.
도 2를 참조하면, 이동통신 단말(100)은 통신부(101), 표시부(102), 카메라부(103), 영상처리부(104), 입력부(105) 및 음성 출력부(106) 중 하나 이상을 포함 할 수 있다.Referring to FIG. 2, the
여기서, 통신부(101)은 이동통신망(110) 및 인터넷망(120)을 통하여 촬영정보 제공서버(130)간에 데이터를 송수신할 수 있다.Here, the
표시부(102)는 입력, 처리과정 및 처리결과를 표시할 수 있으며, 예를 들어 LCD 등이 될 수 있다. 표시부(102)는 영상처리부(104, 후술함)로부터 입력되는 영상을 사용자에게 출력할 수 있다.The
카메라부(103)는 이동통신 단말에 구비된 카메라(미도시)를 포함하며, 카메라에 인입되는 신호를 처리하여 입력영상를 출력할 수 있다. 또한, 카메라부(103)는 카메라 설정을 입력받는 경우, 입력받은 카메라 설정정보에 따라 이동통신 단말(100)에 구비된 카메라를 설정할 수 있다. The
여기서, 카메라 설정정보는 카메라의 WB값, ISO값, 셔터스피드값 및 조리개값 중 하나 이상을 포함할 수 있다.Here, the camera setting information may include at least one of a WB value, an ISO value, a shutter speed value, and an aperture value of the camera.
영상 처리부(104)는 카메라부(103)으로부터 입력되는 입력영상에서 주요영상(Key feature)을 추출할 수 있다. 주요 영상은 입력영상의 외곽선이나, 입력영상에서 픽셀값의 변화가 큰 부분 등에서 추출될 수 있으며, 다양한 방법이 공지되어 있으므로 본 명세서에서 상세한 설명은 생략한다. 또한, 영상 처리부(104)는 입력영상에 구도정보를 포함하여 표시부(102)에 출력할 수 있다.The
입력부(105)는 사용자로부터 소정의 명령을 입력받을 수 있다. 예를 들어, 숫자및 특수 목적키의 키패드 형식 또는 터치 스크린 등이 될 수 있다.The
음성 출력부(106)는 스피커를 통하여 사용자에게 음성신호를 출력할 수 있 다.The
지금까지 도 2를 참조하여 본 발명의 실시예에 따른 이동통신 단말(100)의 구조에 대해서 설명하였다. 이하 도 3을 참조하여 본 발명의 실시예에 따른 촬영정보 제공서버(130)에 대해서 설명한다.So far, the structure of the
도 3은 본 발명의 실시예에 따른 촬영정보 제공서버(130)의 구성을 예시한 블록도이다. 3 is a block diagram illustrating a configuration of a photographing
도 3을 참조하면, 본 발명의 실시예에 따른 촬영정보 제공서버(130)는 통신부(131), 촬영지 결정부(132), 구도 결정부(133), 카메라설정 결정부(134) 및 안내메시지 생성부(135) 중 하나 이상을 포함할 수 있다.Referring to FIG. 3, the photographing
통신부(131)은 이동통신망(110) 및 인터넷망(120)을 통하여 이동통신 단말(100)과 데이터를 송수신하거나, 인터넷망(120)을 통하여 날씨정보 제공서버(140) 및 LBS 서버(150)간에 데이터를 송수신할 수 잇다. The
촬영지 결정부(132)는 지역별 촬영지 정보를 포함할 수 있다.The photographing
여기서, 지역별 촬영지 정보는 촬영지 이름, 대표이미지, 촬영지의 위치정보 중 하나 이상을 포함할 수 있다.Here, the photographing location information for each region may include at least one of a photographing location name, a representative image, and location information of a photographing location.
촬영지 결정부(132)는 통신부(131)를 통하여 이동통신 단말(100)로부터 추천촬영지 정보요청을 수신하는 경우, 이동통신 단말(100)의 위치에 따른 추천촬영지를 결정할 수 있다. 여기서, 추천촬영지가 복수개로 결정될 수 있음은 당업자에게 자명하다.When the photographing
예를 들어, 촬영지 결정부(132)는 지역별 촬영지 정보 중 이동통신 단말(100)의 위치에서 소정의 범위내에 있는 촬영지를 추천촬영지로 결정할 수 있다.For example, the photographing
여기서, 이동통신 단말(100)의 위치는 통신부(131)를 통하여 LBS 서버(150)로부터 수신할 수 있다. Here, the position of the
구도 결정부(133)는 복수개의 영상별 구도정보를 포함하고, 통신부(131)를 통하여 이동통신 단말(100)로부터 주요영상을 수신하는 경우, 주요영상에 기초하여 복수개의 영상별 구도정보 중에서 추천 구도를 결정할 수 있다. The
예를 들어, 구도 결정부(133)는 주요영상의 구도정보인 주요구도정보를 주요영상에서 추출하고, 주요구도정보에 기초하여 영상별 구도정보 중에서 추천구도를 결정할 수 있다.For example, the
예를 들어, 구도 결정부(133)는 주요영상과 유사한 영상을 미리 저장된 영상 중에서 추출하고, 해당 영상의 구도정보를 추천구도정보로 결정할 수 있다.For example, the
여기서, 추천구도 정보는 복수개가 결정될 수 있음은 당업자에게 자명하다. Here, it will be apparent to those skilled in the art that a plurality of recommended composition information may be determined.
카메라설정 결정부(134)는 날씨에 따른 카메라 설정정보를 포함하고, 이동통신 단말(100) 위치의 날씨에 따른 추천카메라설정을 결정할 수 있다. The
여기서, 이동통신 단말의 위치는 앞서 LBS 서버(150)로부터 제공받을 수 있으며, 위치에 따른 날씨정보는 날씨정보 제공서버(140)로부터 제공받을 수 있다.Here, the location of the mobile communication terminal may be provided from the
여기서, 추천카메라설정은 WB값, ISO값, 셔터스피드값 및 조리개값 중 하나 이상을 포함할 수 있다. Here, the recommended camera setting may include at least one of a WB value, an ISO value, a shutter speed value, and an aperture value.
안내메시지 생성부(135)는 이동통신 단말(100)로부터 수신되는 주요영상과 구도 결정부(133)가 결정한 추천구도 정보를 이용하여 안내 메시지를 생성할 수 있다. The
예를 들어, 안내메시지 생성부(135)는 추천구도를 기준으로 주요영상이 우측에 있는 경우, "카메라를 좌측으로 이동하십시요"라는 안내 메시지를 생성할 수 있다.For example, the guide
지금까지 도 3을 참조하여 본 발명의 실시예에 따른 촬영정보 제공서버(130)의 구성에 대해서 설명하였다.So far, the configuration of the photographing
그러나, 도 3에 예시된 촬영정보 제공서버(130)의 구성은 일 례에 불과하며, 다양하게 구현될 수 있다. However, the configuration of the photographing
예를 들어, 촬영정보 제공서버(130)는 별도의 저장부(미도시)를 포함할 수 있고, 촬영지 결정부(132), 구도 결정부(133) 및 카메라설정 결정부(134)가 각각 포함하는 지역별 촬영지 정보, 영상별 구도정보 및 날씨별 카메라 설정을 포함할 수 있음은 당업자에게 자명하다.For example, the photographing
따라서, 도 2 및 도 3에 예시된 구성부들에 대한 구분은 각 구성부가 담당하는 주기능별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다. 따라서, 본 명세서를 통해 설명되는 각 구성부들의 존재 여부는 기능적으로 해석되어져야 할 것이며, 이러한 이유로 구성부들의 구성은 본 발명의 목적을 달성할 수 있는 한도 내에서 도면에 예시된 일 례와 상이해질 수 있음을 명확히 밝혀둔다.Accordingly, the divisions of the components illustrated in FIGS. 2 and 3 are merely classified by the main functions of each component. That is, two or more components to be described below may be combined into one component, or one component may be provided divided into two or more for each function. Each of the components to be described below may additionally perform some or all of the functions of other components in addition to the main functions of the components, and some of the main functions of each of the components are different. Of course, it may be carried out exclusively by. Therefore, the existence of each component described through this specification should be interpreted functionally, and for this reason, the configuration of the components differs from the examples illustrated in the drawings to the extent that the objects of the present invention can be achieved. Make it clear that it can be done.
따라서, 이하 도 4내지 도 5를 참조하여 본 발명의 실시예에 따른 촬영정보 제공 방법을 설명함에 있어서, 촬영정보 제공서버(120)의 내부 구성에 제한 받지 아니하고, 촬영정보 제공서버(120)를 전체 주체로 하여 설명한다. Therefore, in the following description of the method for providing photographing information according to an embodiment of the present invention with reference to FIGS. 4 to 5, the photographing
도 4는 본 발명의 제1 실시예에 따라 촬영정보 제공서버(120)가 이동통신 단말(100)에 촬영정보를 제공하는 방법을 예시한 순서도이다.4 is a flowchart illustrating a method of providing photographing information to the
이하, 도 4를 참조하여 본 발명의 제1 실시예에 따른 촬영정보를 제공하는 방법에 있어서, 앞서 도 2 내지 도 3을 참조하여 설명한 부분과 중복되는 설명은 도 4에 예시된 설정정보 제공방법의 요지를 흐릴 수 있으므로 생략한다. Hereinafter, in the method of providing photographing information according to the first embodiment of the present invention with reference to FIG. 4, the description overlapping with the above description with reference to FIGS. 2 to 3 will be described with reference to FIG. 4. Omitted because it may blur the point.
도 4를 참조하면, 단계 s402에서 이동통신 단말(100)은 추천촬영지 정보요청을 이동통신망(110) 및 인터넷망(120)을 통하여 설정정보 제공서버(130)에 전송할 수 있다.Referring to FIG. 4, in step s402, the
여기서, 도 4에는 도시하지 아니하였으나, 단계 s402이전에 촬영정보 제공서버(130)가 이동통신 단말(100)로부터 수신되는 촬영정보 요청에 따라 추천촬영지 정보, 구도 정보 또는 설정정보 중 하나 이상을 요청받기 위한 안내 트래픽 또는 이동통신 단말(100)용 웹컨텐츠를 이동통신 단말(100)에 전송할 수 있음은 당업자 에게 자명하다.Although not shown in FIG. 4, before the step s402, the photographing
이어서, 단계 s404 및 단계 s406에서 촬영정보 제공서버(130)는 LBS서버(150)에 이동통신 단말(100)의 위치정보를 요청하여 응답을 수신할 수 있다.Subsequently, in step s404 and step s406, the photographing
여기서, 이동통신 단말(100)에 위치확인모듈(예를 들어, GPS(Global Positioning System)모듈)등이 구비될 수 있고, 단계 S402에서 추천촬영지 정보요청과 함께 이동통신 단말(100)의 위치정보가 촬영정보 제공서버(130)에 수신되는 경우, 단계 s404 및 단계 s406은 수행되지 아니할 수 있음은 당업자에게 자명하다.Here, the
이어서, 단계 s408에서 촬영정보 제공서버(130)는 이동통신 단말의 위치에서 지정된 범위 내에 있는 추천촬영지를 결정할 수 있다.Subsequently, in step S408, the photographing
앞서, 도 3을 참조하여 촬영정보 제공서버(130)가 지역별 촬영지 정보를 포함할 수 있으며, 촬영지 정보에는 촬영지 이름, 대표이미지, 위치정보 중 하나 이상이 포함될 수 있음은 설명하였다.Referring to FIG. 3, the photographing
단계 s408에서 촬영정보 제공서버(130)가 추천촬영지를 결정함에 있어서, 이동통신 단말(100)로부터 선호하는 특정 주제(예를 들어, 건물, 나무, 꽃)에 대하여 부가적인 입력을 받을 수 있고, 그 주제를 이용하여 이동통신 단말(100)의 위치에 따른 추천촬영지를 결정할 수 있음은 당업자에게 자명하다.In step s408, when the photographing
또한, 단계 s408에서 촬영정보 제공서버(130)가 이동통신 단말(100)의 현재 위치를 이용하여 추천촬영지를 결정하는 것으로 설명하였으나, 이동통신 단말(100)로부터 목적지 정보(예를 들어, 지명)을 입력 받고, 단계 s404 및 단계 s406에서 목적지 정보에 따른 위치를 수신하여 추천촬영지를 결정할 수 있음은 당업자에게 자명하다.In addition, in step s408, the photographing
이어서, 단계 s410에서 촬영정보 제공서버(130)는 결정한 추천촬영지 정보를 이동통신 단말(100)에 제공할 수 있다.Subsequently, in step S410, the shooting
이어서, 단계 s412에서 촬영정보 제공서버(130)가 이동통신 단말(100)로부터 카메라 설정요청을 수신하는 경우, 단계 s414 및 단계 s416에서 LBS 서버(150)로부터 이동통신 단말(100)의 위치정보를 요청하여 수신할 수 있다.Subsequently, when the photographing
여기서, 단계 s414 및 단계 s416은 이동통신 단말(100)의 위치가 변경된 것을 전제로하여 예시된 것이며, 단계 s410이후 곧 이어서 단계 s412단계가 수행된 경우 단계 s414및 단계 s416은 생략될 수 있음은 본 발명의 기술적 사상에 비추어 당업자에게 자명하다.Here, the steps s414 and s416 are illustrated on the assumption that the position of the
이어서, 단계 s418 및 단계 s420에서 촬영정보 제공서버(130)은 인터넷망을 통하여 날씨정보 제공서버(140)에 이동통신 단말(100) 위치의 날씨정보를 요청하여 해당하는 정보를 수신할 수 있다.Subsequently, in steps 418 and 420, the photographing
이어서, 단계 s422에서 촬영정보 제공서버(130)는 수신한 이동통신 단말(100) 위치의 날씨정보에 따른 카메라설정을 결정할 수 있다.Subsequently, in operation S422, the photographing
앞서, 도 3을 참조하여 촬영정보 제공서버(130)가 날씨별 카메라 설정을 포함할 수 있고, 카메라 설정에는 카메라의 WB값, ISO값, 셔터스피드값 및 조리개값 중 하나 이상이 포함될 수 있음은 설명하였다.Referring to FIG. 3, the photographing
여기서, 단계 s424에서 촬영정보 제공서버(130)가 결정된 카메라 설정정보를 이동통신 단말(100)에 제공함에 있어서, 이동통신 단말(100)의 카메라를 결정된 카 메라 설정으로 제어하기 위하여 제어신호를 전송할 수 있음은 본 발명의 기술적 사상에 비추어 당업자에게 자명하다. Here, in providing the camera setting information determined by the photographing
이어서, 단계 s426에서 이동통신 단말(100)은 수신되는 카메라 설정에 따라 카메라의 설정을 변경하거나, 카메라를 수신되는 카메라 설정으로 설정되도록 제어할 수 있다.Subsequently, in step S426, the
따라서, 본 발명의 제1 실시예에 따르면, 이동통신 단말(100) 사용자는 현재 이동통신 단말(100)의 위치 또는 사용자가 원하는 목적지의 추천촬영지 정보를 촬영정보 제공서버(100)로부터 제공받을 수 있다는 장점이 있다.Therefore, according to the first exemplary embodiment of the present invention, the user of the
또한, 본 발명의 제1 실시예에 따르면, 촬영정보 제공서버(130)로부터 수신되는 카메라 설정정보에 따라 이동통신 단말(100)에 구비된 카메라가 자동설정됨으로써, 클라이언트 단말(100) 사용자가 사진 촬영 초보자라더라도 보다 손쉽게 고품질의 사진을 촬영할 수 있다는 장점이 있다. In addition, according to the first embodiment of the present invention, the camera provided in the
지금까지 도 4를 참조하여 본 발명의 제1 실시예에 따라 촬영정보 제공서버(130)가 카메라 설정정보를 제공하는 방법을 설명하였다.So far, the method of providing the camera setting information by the shooting
그러나, 이는 일례에 불과하며, 도 4에 예시된 단계의 일부 순서가 변경되거나, 생략될 수 있음은 당업자에게 자명하다.However, this is only an example, and it will be apparent to those skilled in the art that some order of steps illustrated in FIG. 4 may be changed or omitted.
이하, 도 5을 참조하여 촬영정보 제공서버(130)가 구도정보 및 안내메시지를 더 제공할 수 있음을 설명한다.Hereinafter, referring to FIG. 5, the photographing
도 5는 본 발명의 제2 실시예에 따라 촬영정보 제공서버(130)가 이동통신 단 말에 구도정보 및 설정정보를 제공하는 방법을 예시한 순서도이다.FIG. 5 is a flowchart illustrating a method in which the photographing
이하, 도 5를 참조하여 설명함에 있어서, 앞서 도 4를 참조하여 설명한 부분과 중복되는 설명은 도 5에 예시된 구도정보를 제공할 수 있는 방법의 요지를 흐릴 수 있음으로 생략한다.Hereinafter, in the description with reference to FIG. 5, the description overlapping with the above description with reference to FIG. 4 may be omitted since it may obscure the gist of the method for providing the composition information illustrated in FIG. 5.
도 5에는 도시하지 아니하였으나, 도 4의 단계 s402 내지 단계 s412 중 하나 이상의 단계가 도 5의 단계 s502 이전에 수행될 수 있다. Although not shown in FIG. 5, one or more of steps s402 to s412 of FIG. 4 may be performed before step s502 of FIG. 5.
도 5를 참조하면, 단계 s502에서 이동통신 단말(100)은 카메라를 통하여 입력되는 입력영상에서 외곽선 또는 픽셀값이 급변하는 지점 등을 이용하여 주요영상을 추출할 수 있다. Referring to FIG. 5, in operation s502, the
이어서, 단계 s504에서 촬영정보 제공서버(130)는 이동통신 단말(100)로부터 수신되는 주요영상을 이용하고, 단계 s506에서 수신한 주요영상을 이용하여 추천구도를 결정할 수 있다.Subsequently, in step S504, the photographing
예를 들어, 촬영정보 제공서버(130)는 주요영상의 구도정보인 주요구도정보를 주요영상에서 추출하고, 주요구도정보에 기초하여 영상별 구도정보 중에서 추천구도를 결정할 수 있다.For example, the photographing
예를 들어, 촬영정보 제공서버(130)는 주요영상에 유사한 영상을 추출하고, 해당 영상의 구도정보를 추천구도로 결정할 수 있다.For example, the photographing
이어서, 단계 s518에서 촬영정보 제공서버(130)는 결정된 추천구도와 주요영상을 이용하여 카메라의 위치변경 안내메시지를 생성할 수 있다.Subsequently, in operation S518, the photographing
예를 들어, 촬영정보 제공서버(130)는 주요영상의 구도인 주요구도정보를 추 출하고, 추출된 주요구도정보와 단계 s518에서 결정된 추천구도정보를 비교하여 카메라의 위치변경 안내메시지를 생성할 수 있다.For example, the photographing
예를 들어, 촬영정보 제공서버(130)는 추천구도를 기준으로 주요영상이 우측에 있는 경우, "카메라를 좌측으로 이동하십시요"라는 안내 메시지를 생성할 수 있다.For example, the photographing
이어서, 단계 s520에서 촬영정보 제공서버(130)는 결정된 추천구도 정보 및 안내메시지 정보를 이동통신 단말(100)에 제공할 수 있고, 단계 s522에서 이동통신 단말(100)는 수신한 추천구도 정보 및 안내 메시지를 이동통신 단말(100) 사용자에게 출력할 수 있다.Subsequently, in step s520, the photographing
지금까지 도 5를 참조하여 본 발명의 실시예에 따른 추천구도 정보 및 카메라 위치변경 안내메시지를 촬영정보 제공서버(130)가 이동통신 단말(100)에 제공하는 방법을 설명하였다.So far, the method of providing the recommendation composition information and the camera position change guide message to the
도 5에 예시된 순서는 일 례에 불과하며, 앞서 도 4에 예시된 단계와 다양한 순서로 조합되어 수행될 수 있음은 본 발명의 기술적 사상에 비추어 당업자에게 자명하다.The order illustrated in FIG. 5 is only one example, and it may be apparent to those skilled in the art in view of the technical spirit of the present invention that it may be performed in combination with the steps illustrated in FIG. 4 in various orders.
또한, 단계 s506에서 촬영정보 제공서버(130)가 추천구도를 복수개로 결정할 수 있고, 이동통신 단말(100)에 복수개의 추천구도정보를 제공하여(미도시) 사용자로부터 복수개의 추천구도 중 선택된 추천구도 정보를 이동통신 단말(100)로부터 수신(미도시)할 수 있다. 이 경우, 단계 s518에서는 이동통신 단말(100) 사용자가 복수개의 추천구도 중 선택한 추천구도 정보를 이용하여 카메라의 위치변경 안내메 시지를 생성할 수 있음은 본 발명의 기술적 사상에 비추어 당업자에게 자명하다. In operation 506, the photographing
또한, 단계 s520에서 촬영정보 제공서버(130)가 이동통신 단말(100)로 주요영상의 구도인 주요구도 정보를 더 전송할 수 있음은 당업자에게 자명하다.In addition, it will be apparent to those skilled in the art that the photographing
도 6은 본 발명의 제2 실시예에 따라 이동통신 단말(100)에 표시되는 카메라 위치변경 안내메시지를 예시한 그림이다.6 is a diagram illustrating a camera position change guide message displayed on the
도 6을 참조하면, 이동통신 단말(100)은 사용자에게 입력영상에서 설정정보 제공서버가 추출한 주요구도정보(602)와 추천구도 정보(604)를 함께 출력할 수 있다.Referring to FIG. 6, the
또한, 이동통신 단말(100)은 촬영정보 제공서버(130)로부터 수신한 카메라 위치변경 안내메시지(600)를 사용에게 출력할 수 있다.In addition, the
따라서, 본 발명의 제2 실시예에 따르면, 이동통신 단말(100)은 촬영정보 제공서버(130)로부터 수신되는 카메라 위치변경 안내메시지를 사용자에게 출력함으로써, 이동통신 단말(100)의 사용자가 사진 촬영 초보자로도 보다 손 쉽게 좋은 구도로 사진을 촬영할 수 있다는 장점이 있다. Therefore, according to the second embodiment of the present invention, the
본 발명의 실시예에 따른 촬영정보 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. The photographing information providing method according to an exemplary embodiment of the present invention may be implemented in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. Computer-readable media may include, alone or in combination with the program instructions, data files, data structures, and the like.
컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media) 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 또한 상술한 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. The program instructions recorded on the computer readable medium may be those specially designed and constructed for the present invention, or may be known and available to those skilled in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Hardware devices specially configured to store and execute program instructions such as magneto-optical media and ROM, RAM, flash memory and the like. In addition, the above-described medium may be a transmission medium such as an optical or metal wire, a waveguide, or the like including a carrier wave for transmitting a signal specifying a program command, a data structure, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the appended claims. It will be understood that the invention may be varied and varied without departing from the scope of the invention.
도 1은 본 발명의 실시예에 따른 카메라 설정 정보를 이동통신 단말에 제공하는 시스템의 연결구조를 예시한 도면.1 is a diagram illustrating a connection structure of a system for providing camera setting information to a mobile communication terminal according to an embodiment of the present invention.
도 2는 본 발명의 실시예에 따른 이동통신 단말의 구조를 예시한 블록도.2 is a block diagram illustrating a structure of a mobile communication terminal according to an embodiment of the present invention.
도 3은 본 발명의 실시예에 따른 촬영정보 제공서버의 구성을 예시한 블록도.3 is a block diagram illustrating a configuration of a photographing information providing server according to an exemplary embodiment of the present invention.
도 4는 본 발명의 제1 실시예에 따라 촬영정보 제공서버가 이동통신 단말(100)에 카메라 설정정보를 제공하는 방법을 예시한 순서도.4 is a flowchart illustrating a method of providing camera setting information to a
도 5는 본 발명의 제2 실시예에 따라 촬영정보 제공서버가 이동통신 단말에 구도정보 및 설정정보를 제공하는 방법을 예시한 순서도.5 is a flowchart illustrating a method of providing composition information and setting information to a mobile communication terminal by a photographing information providing server according to a second embodiment of the present invention.
도 6은 본 발명의 제2 실시예에 따라 이동통신 단말(100)에 표시되는 카메라 위치변경 안내메시지를 예시한 그림.6 is a diagram illustrating a camera position change guide message displayed on the
<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>
100 : 이동통신 단말100: mobile communication terminal
130 : 촬영정보 제공서버130: shooting information providing server
131 : 통신부131: communication unit
132 : 촬영지 결정부132: shooting location determination unit
133 : 구도 결정부133: composition determination unit
134 : 카메라설정 결정부134: camera setting determiner
135 : 안내메시지 생성부135: guide message generation unit
140 : 날씨정보 제공서버140: weather information server
150 : 위치정보 제공서버150: location information server
Claims (6)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080124904A KR101016639B1 (en) | 2008-12-09 | 2008-12-09 | Photographing information providing serve |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080124904A KR101016639B1 (en) | 2008-12-09 | 2008-12-09 | Photographing information providing serve |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100066210A true KR20100066210A (en) | 2010-06-17 |
KR101016639B1 KR101016639B1 (en) | 2011-02-25 |
Family
ID=42365329
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080124904A KR101016639B1 (en) | 2008-12-09 | 2008-12-09 | Photographing information providing serve |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101016639B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102685207A (en) * | 2012-03-20 | 2012-09-19 | 西安联客信息技术有限公司 | Intelligent photographic method based on cloud service and cloud service equipment |
EP3366004A4 (en) * | 2015-10-23 | 2018-10-17 | Telefonaktiebolaget LM Ericsson (PUBL) | Providing camera settings from at least one image/video hosting service |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101977703B1 (en) | 2012-08-17 | 2019-05-13 | 삼성전자 주식회사 | Method for controlling photographing in terminal and terminal thereof |
KR101653041B1 (en) * | 2014-05-23 | 2016-08-31 | 주식회사 카카오 | Method and apparatus for recommending photo composition |
CN105072340B (en) * | 2015-08-07 | 2018-11-30 | 北京橙鑫数据科技有限公司 | Photography service providing method and device |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100780438B1 (en) * | 2006-08-22 | 2007-11-29 | 삼성전자주식회사 | Apparatus method for setting of controlling information in terminal with camera |
-
2008
- 2008-12-09 KR KR1020080124904A patent/KR101016639B1/en not_active IP Right Cessation
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102685207A (en) * | 2012-03-20 | 2012-09-19 | 西安联客信息技术有限公司 | Intelligent photographic method based on cloud service and cloud service equipment |
EP3366004A4 (en) * | 2015-10-23 | 2018-10-17 | Telefonaktiebolaget LM Ericsson (PUBL) | Providing camera settings from at least one image/video hosting service |
US10536628B2 (en) | 2015-10-23 | 2020-01-14 | Telefonaktiebolaget Lm Ericsson (Publ) | Providing camera settings from at least one image/video hosting service |
Also Published As
Publication number | Publication date |
---|---|
KR101016639B1 (en) | 2011-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7797740B2 (en) | System and method for managing captured content | |
US8238693B2 (en) | Apparatus, method and computer program product for tying information to features associated with captured media objects | |
US9955308B2 (en) | Method and apparatus for providing directional participant based image and video sharing | |
US7474959B2 (en) | Method for providing recommendations using image, location data, and annotations | |
WO2017156793A1 (en) | Geographic location-based video processing method | |
CN109495686B (en) | Shooting method and equipment | |
JP2010531089A (en) | Digital camera and method for storing image data including personal related metadata | |
KR101016639B1 (en) | Photographing information providing serve | |
US10277662B2 (en) | Photo request using a location identifier | |
CN101933016A (en) | Camera system and based on the method for picture sharing of camera perspective | |
JP2007537525A (en) | System and method for automatically correcting multimedia messages | |
US20120046042A1 (en) | Apparatus and method for power control in geo-tagging in a mobile terminal | |
CN105975570A (en) | Geographic position-based video search method and system | |
KR100947336B1 (en) | Method and System for providing video service based on keyword | |
EP4084482A1 (en) | Stream pull method and device for live stream | |
CN114009003A (en) | Image acquisition method, device, equipment and storage medium | |
CN108419009A (en) | Image definition enhancing method and device | |
WO2022021126A1 (en) | Satellite communication method, apparatus, and storage medium | |
EP3955152A1 (en) | Image processing device, image processing method, program, and imaging device | |
CN105933651A (en) | Method and apparatus for jumper connection of video on the basis of object route | |
KR20050082593A (en) | Method and device for storing image file using gps | |
KR20190021814A (en) | Method and apparatus for providing broadcasting video | |
JP2013207418A (en) | Imaging system and imaging management server | |
CN107018324B (en) | Photo synthesis method and device | |
US20120246180A1 (en) | Portable device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
N231 | Notification of change of applicant | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140205 Year of fee payment: 4 |
|
LAPS | Lapse due to unpaid annual fee |