KR20110044294A - 이미지 내에서의 개체 식별 - Google Patents

이미지 내에서의 개체 식별 Download PDF

Info

Publication number
KR20110044294A
KR20110044294A KR1020117005823A KR20117005823A KR20110044294A KR 20110044294 A KR20110044294 A KR 20110044294A KR 1020117005823 A KR1020117005823 A KR 1020117005823A KR 20117005823 A KR20117005823 A KR 20117005823A KR 20110044294 A KR20110044294 A KR 20110044294A
Authority
KR
South Korea
Prior art keywords
image
interest
user
region
indication
Prior art date
Application number
KR1020117005823A
Other languages
English (en)
Other versions
KR101617814B1 (ko
Inventor
유시 징
마이클 핑크
미셸 코벨
슈미트 발루자
Original Assignee
구글 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구글 인코포레이티드 filed Critical 구글 인코포레이티드
Publication of KR20110044294A publication Critical patent/KR20110044294A/ko
Application granted granted Critical
Publication of KR101617814B1 publication Critical patent/KR101617814B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

제1 사용자(102a)와 연계된 디스플레이 디바이스 상에 제시된 이미지(122a) 일부의 제1 표시가 개체를 식별하기 위한 프롬프트에 응답하여 수신된다. 제2 사용자(102b)와 연계된 디스플레이 디바이스 상에 제시된 이미지(122a) 일부의 제2 표시가 개체를 식별하기 위한 프롬프트에 응답하여 수신된다. 상기 이미지에 있는 관심 영역은 상기 제1 표시 및 제2 표시에 기초하여 식별된다. 상기 관심영역은 그 개체의 식별자와 연계된다. 지시자는 이미지(122a)에 있는 관심영역과 연계되고, 그 지시자는 개체와 관련된 정보를 제시하도록 설정되어 있다. 이미지(122a)의 후속 제시에, 이미지(122a)에 있는 관심영역과 연계된 지시자의 제시가 가능하도록 한다.

Description

이미지 내에서의 개체 식별{OBJECT IDENTIFICATION IN IMAGES}
본 출원은, 2008년 8월 11일에 출원되고 발명의 명칭이 "이미지 개체 식별"인 미국 가출원 번호 제 61/188,748호 및 2009년 8월 10일에 출원되고 발명의 명칭 "이미지 개체 식별"인 미국 특허 출원 번호 12/538,283에 대한 우선권을 주장하며, 이들 출원의 개시 내용은 그 전체가 참조로써 통합된다.
본 발명은 개체 식별과 관련이 있다. 인터넷은 일부가 디스플레이 가능한 정보와 관련된 다수의 이미지를 포함한다. 예를 들어, 사용자는 개(dog)의 이미지를 선택할 수 있고, 품종, 이름 등과 같이 개에 관한 정보를 수신할 수 있다.
본 발명은 디스플레이 디바이스상에 제시된 이미지에서 사용자로부터 이미지 일부들의 표시를 수신하고 그 표시를 기초로 관심영역을 식별하여 이미지의 후속 표시에 상기 관심영역과 관련 정보를 나타내는 지시자를 표시하는 방법 및 시스템을 제공하는 것을 과제로 한다.
제1 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제1 표시(indication)는 개체를 식별하기 위한 프롬프트(prompt)에 응답하여 수신된다. 제2 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제2 표시는 개체를 식별하기 위한 프롬프트에 응답하여 수신된다. 이미지에 있는 관심영역은 제1 표시 및 제2 표시를 기초로 식별된다. 관심영역은 개체의 식별자와 연계되어 있다. 지시자(designator)는 개체와 연관된 정보를 제시하기 위해 설정된 것으로서, 상기 이미지의 관심영역과 연계되어 있다. 이미지의 관심영역과 연계된 지시자의 제시는 이미지의 후속 제시에서 가능하게 된다.
본 발명의 하나 이상의 구현에 대한 세부 사항은 첨부한 도면 및 명세서에서 개시되어 있다. 본 발명의 다른 특징들, 목적들 및 장점들은 명세서 및 도면, 및 청구항으로부터 명백하게 된다.
본 발명은 사용자가 이미지의 일부에 표시를 제공함으로써, 표시된 이미지의 일부가 관심영역으로 식별되고 그 관심영역과 연관된 정보를 얻을 수 있는 효과가 있다.
도 1은 관심영역들이 이미지들에서 식별될 수 있는 예시적인 환경(100)의 블럭 다이어그램이다.
도 2 내지 도 4는 이미지 일부들의 표시들을 제공하기 위한 예시적인 사용자 인터페이스를 도시한다.
도 5는 식별된 관심영역을 포함하는 예시적인 이미지를 도시한다.
도 6은 관심영역을 포함하는 이미지를 디스플레이하기 위한 예시적인 사용자 인터페이스이다.
도 7은 이미지에서 관심영역을 식별하기 위한 예시적인 프로세스 흐름도이다.
도 8은 이미지에서 관심영역을 식별하기 위한 예시적인 프로세스 흐름도이다.
도 9는 본 명세서에서 설명되는 시스템 및 방법을 구현하기 위해 이용될 수 있는 예시적인 컴퓨터 시스템의 블록 다이어그램이다.
다수의 도면에서 동일한 참조 번호 및 부호는 동일한 구성요소를 가리킨다.
도 1은 이미지들의 관심영역들을 사용자가 식별할 수 있는 예시적인 환경(100)을 도시한다. 일부 구현에 있어, 일반적으로, 사용자는, 사용자가 접근가능한 디스플레이 디바이스 상에 디스플레이된 이미지에 개체(개, 자동차, 빌딩과 같은 것)의 특정 유형이 나타나는 곳을 식별할 수 있다. 이미지 내 개체의 유형 및 개체의 위치는 저장될 수 있고, 나중에 개체의 유형을 기초로 그 이미지의 검색을 가능하게 한다.
일부 구현에 있어, 사용자가 이미지 안에서 개체의 유형을 식별하는 것을 장려하기 위해, "이미지 보물찾기(image treasure hunt)" 활동이 운영되어, 사용자가 특정 이미지 안에서 특정 개체를 식별하기 위해 이미지를 자세히 살펴보는 것이 장려될 수 있다. 일 예로, 개를 포함하는 특정 이미지가 "이미지 보물찾기"의 목표로 선택될 수 있고, 게임을 하는 사용자들에게 그 목표물이 개임이 공지된다. 사용자들은 이후에 "이미지 보물찾기"의 목표물인 개의 특정 이미지를 찾기 위해 이미지들을 계속 검색한다. 사용자가 개가 있는 이미지를 식별할 때마다, 사용자는 그 이미지에 있는 개가 "이미지 보물찾기"의 목표물인지를 확인하기 위해 이미지에 있는 개의 위치를 표시한다. 다양한 이미지에서 사용자들이 개들을 식별할 때, 다양한 이미지에 있는 개들의 위치들은, 그 이미지에 포함되어 있는 개를 기초로 나중에 각각의 이미지의 검색이 가능하도록 저장된다. 이와 같이, "이미지 보물찾기"는 이미지들에 포함된 개체들의 유형을 목록화하도록 돕는다.
특히, 환경(100)은 네트워크(115)를 통해 클라이언트 디바이스들(102a 및 102b)에 이미지들을 제공하도록 구성된 이미지 서버(120)를 포함한다.
이미지 서버(120)는 이미지(예컨대, 이미지(122a))를 저장하는 이미지 저장소(122)를 포함한다. 이미지 저장소(122) 및 이미지 표시 저장소(123)는 예를 들어 관계 데이터베이스 또는 분산 파일 시스템을 포함하는 다양한 데이터 저장소 기술을 이용하여 구현될 수 있다. 일부 구현에 있어, 이미지 저장소(122)는 지도상에서 주소 또는 위치에 상응하는 이미지를 가진 지도 어플리케이션(map application)의 일부일 수 있다. 덧붙여 또는 대안적으로, 예를 들어 이미지들 또는 이미지들의 일부는 비디오 컨텐츠 아이템의 프레임들일 수 있다.
이미지 서버(120)는 또한 이미지 저장소(122)에 저장된 이미지에서 개체의 표시(예컨대, 표시 123a)를 저장하는 이미지 표시 저장소(123)를 포함한다. 이미지 표시는 이미지 저장소(122)에 있는 이미지와 연계되어 있다. 이미지 표시들은 예를 들어 클라이언트 디바이스들(102a 및 102b)에서 이미지들을 보는 사용자들로부터 수신될 수 있다.
이미지 표시는 연계된 이미지의 일부를 가리킨다. 일부 구현에 있어, 그 일부는 픽셀(pixel) 위치, 또는 연계된 이미지 내 픽셀 집합의 위치를 가리키거나 나타낼 수 있다. 덧붙여 또는 대안적으로, 그 일부는 예컨대 그 이미지 내에 또는 그 이미지와 관련하여 그 일부의 경계 좌표들을 포함하거나 나타낼 수 있다. 이미지 내의 영역을 나타내기 위한 다른 기술들이 사용될 수도 있다.
이미지 표시는 이미지 저장소(122)에 있는 연계된 이미지로부터의 개체의 식별자와 연계될 수 있다. 예를 들어, 개체의 식별자는 표시된 일부가 식별하고자 하는 이미지의 특정 개체를 식별할 수 있다. 더욱 구체적인 예로서, 식별자는 이미지에 있는 개체가 개, 개의 특정 종류, 또는 특정 환경이나 특정 활동을 하는 개(예컨대, 해변에서의 개, 도그쇼에서 개, 프리스비를 하고 노는 독일 셰퍼드)라고 표시할 수 있다. 일부 구현에 있어, 식별자가 나타내는 것의 세분성(granularity)은 더욱 미세화될 수 있다.
일부 구현에 있어, 개체의 식별자는 클라이언트 디바이스들(102a 또는 102b)에서 사용자에 의해 제공될 수 있다. 이미지(212a) 일부의 표시는 사용자 식별자와 추가적으로 연계될 수 있다. 사용자 식별자는 이미지 일부의 특정 표시로 되는 이미지 선택을 한 사용자를 식별할 수 있다. 사용자 식별자들은, 그 식별자가 사용자 식별자와 관련된 사람을 식별하는 데 사용될 수 없으나 식별이 발생한 나라 또는 세계의 지역을 식별하도록 하기 위해 익명화될 수 있다.
이미지 서버(120)는 관심영역 엔진(125)을 더 포함할 수 있다. 관심영역 엔진(125)은 개체의 공통적인 표시를 가진 이미지들과 연계된 이미지 일부의 표시를 사용하여, 이미지 저장소(122)에 저장된 이미지들에서 관심영역들을 식별할 수 있다. 일부 구현에 있어, 관심영역 엔진(125)은 이미지의 표시된 일부들을 결합함으로써 관심영역을 식별할 수 있다. 예를 들어, 특정 이미지가 "나무(tree)"의 공통적인 개체 식별자를 가진 이미지 일부의 4개의 관련 표시를 갖는다면, 이후에 관심영역은 그 이미지 경계를 결정하거나 근사화하기 위해, 이미지의 표시된 4개의 일부들을 조합, 외삽(extrapolating) 또는 사용함으로써 식별될 수 있다.
덧붙여 또는 대안적으로, 관심영역 엔진(125)은 이미지의 표시된 일부를 둘러싸거나 또는 연계된 영역 또는 모양을 생성하기 위해, 이미지의 표시된 일부들을 사용하여 관심영역을 식별할 수 있다. 예를 들어, 이미지(122a)가 이미지 일부들의 4개의 연계된 표시들을 가지면, 관심영역 엔진(125)이 이미지의 4개의 표시된 일부를 포함하며, 원(circle)과 같은 모양을 갖는 관심영역을 식별할 수 있다. 예를 들어, 그 모양은 "가장 적합한" 또는 그 밖의 모양 생성 알고리즘들을 이용하여 생성될 수 있다.
일부 구현에 있어, 관심영역들을 식별하기 전에 관심영역 엔진(125)은 신뢰할 수 없거나, 부정확하거나, 잘못된 또는 부정한(총괄하여, "신뢰할 수 없는") 표시들을 식별하고, 제거할 수 있다. 일부 구현에 있어, 관심영역 엔진(125)은 연계된 사용자 식별자를 이용하여 이미지 일부의 신뢰할 수 없는 표시들을 식별할 수 있다. 예를 들어, 사용자 식별자는 연계된 사용자 등급(rating)을 가질 수 있다. 사용자 등급은 사용자 식별자와 연계된 이미지 일부의 표시 개수들(예컨대, 다수의 연계된 표시들이 소수인 사용자 식별자는 연계된 표시들과 연계된 사용자 식별자보다 더 신뢰할 수 있음) 및 다른 사용자들로부터의 피드백(예컨대, 다른 사용자들은 정확성을 위한 표시들의 질을 평가함)을 포함하는 다양한 요소들에 기초할 수 있다. 관심영역 엔진(125)는 예를 들어 임계 신뢰도 점수보다 더 높은 사용자 점수를 가진 사용자를 식별하는 연계된 사용자 식별자를 구비한 표시들만 참작하는 것과 같이, 신뢰도를 기초로 표시들을 참작할 수 있다.
일부 구현에 있어, 관심영역 엔진(125)은 공통 개체 식별자를 구비한 다른 표시들과는 확연히 다른 표시들을 식별함으로써 이미지 일부의 신뢰할 수 없는 표시들을 식별할 수 있다. 공통 개체 식별자를 가진 이미지 일부의 표시들은 다함께 무리지어 있거나 동일한 이미지에서 서로 가까이에 놓이는 경향이 있다. 그러므로, 특정 표시가 다른 표시에 비해 이미지의 다른 영역에 배치되었다면, 그 표시는 신뢰할 수 없고, 관심영역 엔진(125)에 의해 관심영역을 식별하는 데 이용될 수 없다. 예를 들어, 이미지에서 나무 개체와 연계된 이미지 일부의 표시들 대부분이 일반적으로 이미지의 아래 사분면에 위치하지만 분리된(outlier) 표시가 위 사분면에 위치하고 있다면, 위 사분면에 위치한 표시는 신뢰할 수 없다고 참작된다. 관심영역 엔진(125)은 예를 들어, 신뢰할 수 없는 표시 없이 관심영역을 식별할 수 있다.
이미지 서버(120)는 이미지 일부들의 표시들 및 관련된 개체 식별자들을 제공하도록 사용자에게 인센티브(incentive)를 제공할 수 있다. 인센티브는 이미지 일부의 목표 또는 목적(goal)를 찾거나 식별하기 위해 콘테스트(contest)의 형태로 제공될 수 있다. 콘테스트가 필수적으로 포상을 포함할 필요가 없더라도, 콘테스트는 포상과 관련될 수 있다. 일부 구현에 있어, 프로모터 서버(130)는 하나 이상의 이미지(122a)에서 관심영역의 지정들을 목표 또는 목적 영역, 또는 개체로서 전송할 수 있다. 예를 들어, 스포츠카 프로모터는 이미지 저장소(122)로부터 스포츠카를 포함하는 이미지(122a)를 선택할 수 있다. 프로모터는 그 스포츠카에 상응하는 이미지에서 관심영역을 식별할 수 있고, 목적 영역으로서 그 관심영역을 지정할 수 있다. 프로모터는 "이미지 보물찾기"와 같은 콘테스트를 후원(sponsor)할 수 있고, 여기서 참가자들은 스포츠카에 상응하는, 이미지 저장소(122)에 있는 이미지(122a)의 일부를 표시하도록 요구될 수 있다. 예를 들어, 참가자들이 이미지(122a)에 있는 목표 영역에 상응하는 이미지 일부의 표시를 제공하면, 참가자들은 포상을 받을 수 있다. 콘테스트 참가자들로부터 받은 이미지 일부의 표시들은 이미지 저장소(122)의 이미지들에서 관심영역을 식별하고 스포츠카에 상응하는 개체 식별자를 가진 관심영역과 연계되도록 사용될 수 있다. 콘테스트를 통해 프로모터(130)는 예를 들어 사용자들이 이미지 저장소(122)에 있는 스포츠카에 상응하는 이미지 일부의 표시들을 제공하도록 장려할 수 있다.
이미지 서버(120) 및 관심영역 엔진(125)은 단일 컴퓨터 시스템상에서 또는 다수의 컴퓨터(예컨대, 서버 팜(server farm)) 및 지리적으로 분리된 컴퓨터들을 포함하는 분산된 컴퓨터 시스템으로 구현될 수 있다. 예를 들어, 컴퓨터 시스템 구현의 일 예는 도 9에 도시되어 있다.
클라이언트 디바이스들(102a 및 102b)은, 예를 들어 데스크탑 및 랩탑 컴퓨터, 개인 디지털 어시스턴트, 셀룰러 전화, 스마트 전화, 이메일 메시징 휴대 디바이스, 휴대 미디어 플레이어(뮤직 플레이어 또는 비디오 플레이어와 같은), 비디오 게임 콘솔, 휴대용 게임 디바이스 및 셋톱 박스, 또는 상기의 조합을 포함하는 다양한 네트워크-이용가능한 디바이스들을 포함할 수 있다.
클라이언트 디바이스들(120a 및 120b)은 이미지 서버(120)로부터 이미지를 수신하고 디스플레이하도록 각각 설정된다. 또한 클라이언트 디바이스들(120a 및 120b)은 사용자가 디스플레이된 이미지에서 개체의 표시를 식별할 수 있도록 설정된다.
예를 들어, 사용자가 클라이언트 디바이스(102a 또는 102b)에 디스플레이된 이미지에서 나무에 상응하는 개체를 클릭하거나 다른 방식으로 선택할 수 있다. 개체를 선택한 후에, 사용자는 이미지의 선택된 일부가 상응하는 개체의 식별자를 제공하도록 프롬프트될 수 있다. 따라서, 사용자는 "나무"를 타이핑(typing)하거나 또는 디스플레이된 표현의 집합으로부터 표현을 선택함으로써 그 선택이 나무라는 식별자를 제공할 수 있다.
일부 구현에 있어, 개체의 식별자는 표시를 식별자가 제공하기 전에 결정될 수 있다. 예를 들어 클라이언트 디바이스(102a 또는 102b)의 사용자는 콘테스트 또는 프로모션의 부분으로서 디스플레이된 이미지에 자동차 개체들을 식별하도록 요구될 수 있다. 따라서, 예를 들어 사용자가 선택 또는 제공한 이미지 일부의 표시들을 "자동차" 개체 식별자와 연계될 수 있다.
클라이언트 디바이스들(102a 및 102b) 각각은 디스플레이된 이미지에 있는 개체의 표시를 이미지 서버(120)에 보내도록 설정될 수 있다. 다른 비클라이언트-서버 구성도 가능하다.
예를 들어, 표시들은 디스플레이 디바이스 상에 이미지들을 보는 사용자들로부터 보내질 수 있다. 이미지 일부의 표시는, 사용자가 개체에 상응한다고 느끼는, 디스플레이된 이미지에 있는 영역을 표시하거나 특정할 수 있다. 특정 이미지와 연계된 수신된 표시들은 그 이미지에 있는 개체들에 상응하는 이미지의 관심영역들을 식별하는 데 사용될 수 있다. 관심영역들은 선택 시 개체와 관련된 정보의 제시를 초래하도록 설정된 사용자-선택가능한 링크와 연계될 수 있다. 나중에 사용자가 이미지를 요청할 때, 관심영역과 연계된 사용자-선택가능한 링크는 요청된 이미지와 하께 사용자에게 제시될 수 있다. 사용자가 사용자-선택가능한 링크를 활성화시키면, 개체와 관련된 정보가 사용자에게 제시될 수 있다.
예를 들어, 사용자들은 개의 개체를 포함하는 이미지를 볼 수 있다. 사용자들은 그 개 개체에 상응하는, 이미지 일부의 표시를 제공할 수 있다. 예를 들어, 사용자는 개를 클릭하거나, 이미지에 있는 개의 윤곽을 그림으로써 표시를 제공할 수 있다. 이미지에 있는 개에 상응하는 관심영역은 이미지 일부의 표시들을 사용하여 식별될 수 있다. 예를 들어, 수신된 표시들은 이미지에 있는 관심영역을 정의하기 위해 결합하거나 종합될 수 있다. 개 개체에 관한 정보가 제시되도록 하기 위해 구성된 하이퍼링크(hyper-link) 또는 다른 사용자-선택가능한 링크는 관심영역과 연계될 수 있다. 나중에 사용자가 이미지를 보고, 이미지에 있는 관심영역을 클릭 또는 다른 방식으로 선택할 때, 링크가 활성화되고 개에 대한 정보가 사용자에게 제시될 수 있다. 예를 들어, 개에 관한 웹페이지가 검색되고 사용자에게 디스플레이되거나 또는 개에 대한 정보를 포함하는 팝업창이 이미지에 있는 관심영역 부근에 디스플레이될 수 있다.
일부 구현에 있어, 클라이언트 디바이스들(102a 및 102b)은 또한 이미지에 있는 개체의 표시와 함께 사용자 식별자를 제공할 수 있다. 예를 들어, 사용자 식별자는 클라이언트 디바이스(102a 또는 102b)에서 쿠키 또는 다른 파일에 저장될 수 있다. 다른 구현에 있어, 사용자 식별자는 표시 전에 사용자에 의해 제공될 수 있다. 예를 들어, 사용자가 이미지 일부의 표시를 제공하기 전에 이미지 서버에 로그인하거나 다른 방식으로 그들 자신을 식별할 수 있다. 게다가, 예를 들어 사용자 식별자들은, 식별자가 사용자 식별자와 연계된 사람을 식별하는 데 사용될 수 없도록 익명화될 수 있다.
네트워크(115)는 예를 들어 공중-교환 전화망, 셀룰러 전화망, 및/또는 인터넷과 같은 다양한 공공 및 사설 네트워크를 포함할 수 있다.
도 2 내지 4는 사용자가 이미지 내에 개체들의 식별자를 제공할 수 있게 구성된 예시적인 사용자 인터페이스(200)의 실시예이다. 더욱 상세히는, 사용자 인터페이스(200)는 사용자가 이미지 일부의 표시를 제공하도록 한다. 사용자 인터페이스(200)는 클라이언트 디바이스(예컨대, 클라이언트 디바이스(102a 및 102b))상에 디스플레이될 수 있다. 도 2 내지 4에 도시된 예에서, 세 명의 사용자: 사용자 A; 사용자 B; 및 사용자 C는 이미지 일부들의 표시들을 제공할 수 있다. 일부 구현에 있어, 사용자들은 "이미지 보물찾기"와 같이 콘테스트 또는 프로모션의 일부로서 표시들을 제공할 수 있다. 프로모터(예컨대, 프로모터 디바이스(130)를 사용함)는 이미지 저장소(122)에 있는 특정 이미지(122a)에 관심영역을 목적 영역으로서 정의할 수 있다.
콘테스트의 참가자들은 이미지 저장소(122)의 이미지들에 있는 개체들을 클릭하거나 다른 방식으로 선택함으로써 이미지 저장소(122)의 많은 이미지들 중에서 목적 영역을 찾기 위해 시도한다. 만약 참가자가 목적 영역 안에 있는 개체를 선택한다면 참가자는 포상 또는 일부 다른 대가를 받을 수 있다.
도 2 내지 4에 도시된 예들에서, 이미지 저장소(122)는 거리 주소에 상응하는 이미지들의 데이터베이스이다. 이미지 저장소(122)는 예를 들어 지도 어플리케이션의 일부일 수 있다. 콘테스트의 일부로서, 프로모터(130)는 목적 영역으로서 특정 거리 주소에 상응하는 하나 이상의 이미지(122a) 중 특정 자동차의 이미지 안의 영역을 목적 영역으로 선택할 수 있다. 예를 들어, 사용자A, B 및 C는 사용자 인터페이스(200)를 사용하여 목적 영역을 찾는 시도를 한다.
사용자 인터페이스(200)는 목적 디스플레이(220)를 포함한다. 목적 디스플레이(220)는 사용자를 식별하고, 사용자가 참여하는 콘테스트의 목적을 설명하는 메시지를 제공한다. 예를 들어, 도 2에서, 목적 디스플레이(220)는 사용자의 신원을 사용자 A와 같이 표시하고 사용자가 창(230)에 디스플레이된 이미지에서 자동차들을 찾아내도록 지시하는 "사용자 A님, 환영합니다. 아래 이미지에서 자동차를 클릭하세요!"를 디스플레이할 수 있다. 일부 구현에 있어, 예를 들어, 콘테스트 또는 목적 디스플레이(220)에서 사용자가 식별되도록, 사용자는 로그인, 쿠키 또는 다른 식별자를 통한 신원증명을 제공할 수 있다.
사용자 인터페이스(200)는 주소 선택 필드(210)를 포함한다. 주소 선택 필드(210)는 사용자에 의해 입력된 주소를 수신하도록 설정된다. 도 2 내지 4의 실시예로서, 사용자는 각각 "123 Main street, Mountain view" 주소를 입력하였다. 예를 들어, 입력한 주소를 "검색" 버튼을 이용하여 제출하면, 주소는 이미지 서버(120)에 보내지고, 이에 응답하여, 이미지 서버(120)는 제출된 주소에 상응하는 이미지(122a)를 예를 들어 클라이언트 디바이스(102a)에서 수신 및 디스플레이되도록 보낼 수 있다. 도 2 내지 4의 실시예로서, 예를 들어, 상응하는 이미지(122a)는 디스플레이 창(230)에 디스플레이된다.
디스플레이 창(230)은 주소 선택 필드(210)에 제출된 주소와 연계된 이미지(122a)를 디스플레이한다. 게다가, 클라이언트 디바이스(102a)는 디스플레이 윈도우(230)에 도시된 이미지 일부의 표시 또는 표시들을 사용자들로부터 수신하도록 설정된다. 도 2 내지 4의 실시예로서, 사용자들은 커서(240)를 이용하여 이미지 일부들의 표시들을 제공할 수 있다. 사용자 A, B 및 C에 의해 표시된 이미지 일부들은 각각 도 2 내지 4에서 일부들(250, 350 및 450)로 도시된다.
도 2 내지 4의 실시예에서, 세 명의 사용자들이 목적 영역을 찾기 위해 콘테스트에 참가한다. 도 2 내지 4의 목적 디스플레이(220)에 표시된 것처럼, 사용자들은 특정 자동차에 상응하는 목적 영역을 찾기 위해 시도한다. 따라서, 사용자들 각각은 디스플레이 창(230)에 도시된 이미지에 자동차 개체를 선택한다.
사용자에 의한 각각의 선택은 이미지 일부의 표시가 될 수 있다. 예를 들어, 도 2에 도시된 것처럼, 사용자 A는 이미지의 일부(250)에 의해 예시된 바와 같이 자동차 개체의 상부 부근을 선택하였다. 도 3에 도시된 것처럼, 사용자 B는 이미지의 일부(350)에 의해 예시된 바와 같이 자동차 개체의 트렁크 주위를 선택하였다. 도 4에 도시된 것처럼, 사용자 C는 이미지의 일부(450)에 의해 예시된 바와 같이 자동차 개체의 측면 근처를 선택하였다. 예를 들어, 이미지 일부의 표시들(250, 350 및 450)은 이미지 서버(120)에 보내지고, 거기서 일부들은 이미지와 연계되고 이미지 표시 저장소(121)에 저장된다.
게다가, 표시들(250, 350 및 450)은 개체 식별자 및/또는 사용자 식별자와 추가적으로 연계될 수 있다. 사용자들은 자동차에 상응하는 목적 영역을 찾기 위해 콘테스트에 참가하기 때문에, 사용자들로부터 수신된 표시들은 "자동차" 개체 식별자와 연계될 수 있다. 각각의 표시는 표시를 제공한 사용자를 식별하는 사용자 식별자와 추가적으로 연계될 수 있다(예컨대, 사용자 A, B 또는 C).
도 5는 식별된 관심영역을 포함하는 예시적인 이미지(500)의 실시예이다. 도 2 내지 4에 대하여 상기 설명된 예를 계속하면, 사용자 A, B 및 C는 이미지(500)에 도시된 자동차 개체에 대하여 선택을 하고, 이 선택은 이미지 서버(120)에 보내지는 이미지 일부들(250, 350 및 450)의 표시들이 된다.
이미지 일부(250, 350 및 450)의 수신된 표시들은 이미지(500)에 있는 관심영역(550)을 식별하는 데 사용될 수 있다. 예를 들어, 관심영역은 관심영역 엔진(125)에 의해 식별될 수 있다. 일부 구현에 있어, 관심영역은 개체의 동일한 식별자를 가진 이미지에 대해 수신된 표시(들)에 상응하는 이미지 일부들로부터 픽셀을 조합함으로써 식별될 수 있다. 예를 들어, 관심영역(550)은 개체 자동차와 연계된 이미지의 수신된 일부(예컨대, 이미지의 일부(250, 350, 450))에 의해 표시된 픽셀들을 조합함으로써 식별될 수 있다. 일부 구현에 있어, 관심영역(550)은 동일한 개체와 연계된 이미지 일부들을 둘러싼 형상 또는 영역을 생성함으로써 식별될 수 있다.
예시된 바와 같이, 관심영역(550)은 자동차의 공통 개체 식별자를 가진 이미지 일부들(250, 350 및 450)을 포함하도록 식별된 영역이다. 관심영역(500)의 경계는 이미지 일부들(250, 350 및 450)의 경계를 포함하고, 또한 식별되지 않은 이미지의 일부들을 포함한다. 또한 이미지들에 있는 개체들이 연속적이기 때문에, 이미지의 표시된 일부들 사이의 영역들은 이미지에 있는 개체와 연계될 가능성이 높다.
식별된 관심영역(550)은 개체의 표시와 연계될 수 있다. 예를 들어, 상술한 예를 계속하여, 식별된 관심영역(550)은 자동차 개체의 표시와 연계될 수 있다. 더 나아가, 식별된 관심영역(550)은 사용자-선택가능한 링크와 연계될 수 있다. 사용자-선택가능한 링크는 관심영역(550)과 연계된 개체에 관련된 정보를 제시하도록 설정될 수 있다. 예를 들어, 사용자-선택가능한 링크는 선택 시 자동차 개체에 관한 정보를 제시하도록 설정될 수 있다.
도 6은 관심영역을 포함하는 이미지를 디스플레이하기 위한 예시적인 사용자 인터페이스(600)이다. 사용자 인터페이스(600)는 연계된 이미지를 보기 위해 주소를 특정하기 위한 주소 선택 필드(610) 및 입력된 주소와 연계된 이미지를 디스플레이하기 위한 디스플레이 윈도우(630)를 포함할 수 있다.
도 2 내지 5에 대하여 설명한 예를 계속하여, 사용자는 주소 선택 필드(610)에 입력된 주소에 상응하는 이미지를 보기 위해 요청한다. 입력된 주소 "123 Main street, Mountain view, Ca."에 상응하는 이미지가 디스플레이 윈도우(630)에 디스플레이된다.
도 2 내지 5에서 설명한 것처럼, 주소에 상응하는 이미지는 연계된 사용자-선택가능한 링크를 갖는 관심영역(550)을 가질 수 있다. 관심영역은 목적 이미지를 찾기 위한 콘테스트 동안 수신된 이미지 일부들의 표시들을 사용하여 식별되고, 이미지 및 사용자-선택가능한 링크와 연계된다. 사용자가 사용자 인터페이스(600)를 통해 이미지를 요청할 때, 이미지는 연계된 사용자-선택가능한 링크와 함께 이미지 서버(120)로부터 검색된다. 이미지는 클라이언트 디바이스(120a)에 의해, 사용자 선택가능한 링크 및 연계된 관심영역(550)과 함께 디스플레이 창(630) 내에 디스플레이된다.
도시된 바와 같이, 사용자는 이미지 안에 관심영역(550)을 클릭하거나 다른 방식으로 선택하였다. 따라서, 관심영역(550)과 연계된 사용자 선택가능한 링크는 활성화 되어 텍스트 박스(670)가 디스플레이된다. 도시된 예와 같이, 텍스트 박스(670)는 사용자에게 자동차에 관한 부가 정보를 디스플레이하도록 웹페이지로의 하이퍼링크를 포함한다.
도 7은 이미지 내의 관심영역을 식별하기 위한 예시적인 프로세스 흐름도(700)이다. 예를 들어, 프로세스 흐름도는 이미지 서버(120)에 의해 구현될 수 있다.
제1 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제1 표시가 수신된다(705). 예를 들어, 이미지 일부의 제1 표시는 사용자가 이미지 일부에 표시할 때 클라이언트 디바이스(102a)로부터 이미지 서버(120)에 의해 수신될 수 있다. 일부 구현에 있어, 표시는 클라이언트 디바이스의 디스플레이상에 제시된 이미지의 픽셀 또는 픽셀 위치를 가리킬 수 있다.
일부 구현에 있어, 표시는 개체를 식별하기 위한 프롬프트에 응답하여 수신된다. 예를 들어, 사용자는 디스플레이 디바이스상에 제시된 이미지 내에 자동차와 같은 개체를 찾아내도록 촉구될 수 있다. 따라서, 사용자는, 디스플레이 디바이스상의 이미지 중 자동차라고 표명할 일부를 클릭하거나 또는 다른 방식으로 선택할 수 있다. 예를 들어, 선택된 일부의 표시는 이후에 클라이언트 디바이스(102a)에 의해 송신되고, 이미지 서버(120)에 의해 수신된다.
제2 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제2 표시가 수신된다(710). 예를 들어, 제2 사용자가 이미지 일부를 표시할 때, 이미지 일부의 제2 표시가 클라이언트 디바이스(102b)로부터 이미지 서버(120)에 의해 수신될 수 있다.
이미지 내의 관심영역은 제1 표시 및 제2 표시를 기초로 결정된다(715). 예를 들어, 이미지 내의 관심영역은 이미지 서버(120)의 관심영역 엔진(125)에 의해 식별될 수 있다. 일부 구현에 있어, 관심영역은 이미지의 표시된 일부들을 결합함으로써 식별될 수 있다. 덧붙여 또는 대안적으로, 예를 들어 관심영역은 제1 및 제2 표시된 일부들을 둘러싸는 형상 또는 영역을 생성함으로써 식별될 수 있다.
관심영역은 개체의 표시와 연계된다(715). 예를 들어, 관심영역은 이미지 서버(120)의 관심영역 엔진(125)에 의해 개체의 표시와 연계될 수 있다.
선택적으로 사용자-선택가능한 링크 또는 다른 지시자는 이미지 내의 관심영역과 연계될 수 있다(720). 예를 들어, 사용자-선택가능한 링크는 이미지 서버(120)의 관심영역 엔진(125)에 의해 이미지의 관심영역과 연계될 수 있다. 일부 구현에 있어, 사용자-선택가능한 링크는 사용자에 의해 선택될 때 개체와 관련된 정보를 제시하도록 설정된다. 예를 들어, 개체가 차라면, 사용자-선택가능한 링크는, 사용자가 이미지 내의 관심영역을 선택할 때 자동차에 관한 정보가 창에 디스플레이되도록 할 수 있다. 유사하게, 사용자-선택가능한 링크는 사용자가 관심영역을 선택할 때 인터넷 브라우저로 하여금 자동차와 연계된 웹페이지를 열도록 할 수 있다.
이미지에 있는 관심영역과 연계된 사용자-선택가능한 링크 또는 다른 지시자는 이미지의 후속 제시들에서 디스플레이될 수 있다(725). 예를 들어, 사용자-선택가능한 링크는 이미지 서버(120)에 의해 제시될 수 있다. 클라이언트 디바이스(120a)의 사용자는 이미지 서버(120)로부터 이미지를 요청할 수 있다. 이미지 서버(120)가 요청된 이미지를 클라이언트 디바이스(102a)에 제시할 때, 이미지 서버(120)는 또한 연계된 사용자-선택가능한 링크를 사용자 디바이스(102a)에 제시한다. 클라이언트 디바이스(102a)는 예를 들어 클라이언트 디바이스(102a)와 연계된 디스플레이 디바이스상에서 사용자에게 이미지 및 연계된 링크를 제시할 수 있다. 덧붙여 또는 대안적으로, 이미지 서버는 후속 제시를 위해 다른 서버에 사용자-선택가능한 링크 및 이미지(또는 그것에 대한 표시)를 보낼 수 있다.
일부 구현에 있어서, 이미지 서버는, 이미지에 있는 개체를 식별할 때, 이미지에 있는 개체의 다른 표시들과는 실질적으로는 다른 외부 표시들을 결정하고 무시할 수 있다.
도 8은 이미지에 있는 관심영역을 식별하기 위한 다른 예시적인 프로세스 흐름도(800)이다. 예를 들어, 프로세스 흐름도는 이미지 서버(120)에 의해 구현될 수 있다.
이미지 일부의 표시들은 다른 사용자들로부터 수신된다(805). 이미지 일부의 표시들은 클라이언트 디바이스(예컨대, 클라이언트 디바이스 102a 및 102b)로부터 수신될 수 있다. 일부 구현에 있어, 이미지는 이미지 서버(120)의 이미지 저장소(122)에 저장된 이미지 컬렉션의 일부가 될 수 있다. 이미지 컬렉션은 예를 들어 지도 어플리케이션의 일부가 될 수 있고, 또는 비디오 컨텐츠 아이템이 될 수도 있다.
또한, 수신된 표시들은 개체 식별자들을 포함하거나 연계될 수 있고, 이 개체 식별자들은 표시들이 식별하고자 표명하는, 연계된 이미지에 있는 개체를 식별한다. 일부 구현에 있어, 연계된 개체 식별자들은 특정 표시들을 제공하는 클라이언트 디바이스들과 연계된 사용자들에 의해 제공될 수 있다. 다른 구현에 있어, 개체 식별자들은 이미지 서버(120)에 의해 제공될 수 있다. 예를 들어, 이미지 일부의 표시들은 개체의 특정 유형을 묘사하는 목적 영역을 찾기 위해 콘테스트 또는 프로모션에 참가하는 사용자들로부터 수신되고, 연계된 개체 식별자는 프로모션에 의해 특정된 개체에 상응할 수 있다.
이미지 내의 관심영역은 공통 연계 개체 식별자를 가진 이미지 일부의 표시들을 기초로 결정된다(810). 예를 들어, 관심영역은 이미지 서버(120)의 관심영역 엔진(125)에 의해 식별될 수 있다. 일부 구현에 있어, 관심영역은 공통 연계 개체 식별자를 가진 이미지들의 일부들을 결합함으로써 식별될 수 있다. 예를 들어, 이미지들의 일부들이 이미지 내의 픽셀 영역들을 식별하면, 식별된 관심영역은 식별된 픽셀 영역들을 포함할 수 있다. 덧붙여 또는 대안적으로, 식별된 관심영역은 표시들을 둘러싼 형상 또는 영역을 생성함으로써 식별될 수 있다.
공통 연계 개체 식별자는 식별된 관심영역과 연계된다(815). 예를 들어, 개체 식별자는 이미지 서버(120)의 관심영역 엔진(125)에 의해 식별된 관심영역과 연계될 수 있다.
프로세스(800) 구현의 한 예로서, 다양한 사용자들은 특정 이미지에 도시된 특정 고양이를 식별하기 위한 "이미지 보물 찾기"에 참가하는 것으로 등록되거나 다른 방식으로 식별될 수 있다. 사용자 각각이 이미지 저장소에 있는 이미지들을 열람하고 디스플레이함에 따라서, 사용자는 열람하고 디스플레이한 이미지에 도시된 고양이에 대한 모든 묘사를 식별한다. 사용자가 고양이에 대한 묘사를 식별할 때, 사용자의 클라이언트 디바이스는 고양이를 묘사한 것으로 사용자가 식별했던 이미지 일부의 표시, 고양이 묘사가 출현한 이미지를 식별한 표시, 및 고양이를 묘사한 것으로 이미지의 식별된 일부를 식별하는 개체 식별자를 이미지 서버에 보낸다. 이미지 서버는 다른 사용자들이 제출한 특정 이미지에 대한 정보를 그룹화하고 공통 개체 식별자 "고양이"에 대해 제출된 이미지들의 일부들에 기초하여 관심영역(여기서, 고양이에 대한 묘사)을 식별하도록 이미지에 대한 정보를 처리한다. 이러한 방식으로, 이미지 서버는 이미지가 고양이의 묘사 및 이미지 내 고양이가 묘사된 위치를 포함하는 표시를 저장할 수 있다.
도 9는 여기서 설명하는 시스템 및 방법들을 구현하기 위해 이용될 수 있는 예시적인 컴퓨터 시스템(900)의 블록 다이어그램이다. 예를 들어, 이미지 서버(120)는 시스템(900)을 이용하여 구현될 수 있다.
시스템(900)은 프로세서(910), 메모리(920), 저장 디바이스(930) 및 입력/출력 디바이스(940)를 포함한다. 구성요소 각각(910, 920, 930 및 940)은 예를 들어 시스템 버스(950)를 이용하여 상호 연결된다. 프로세서(910)는 시스템(900)내에서 실행을 위한 명령을 처리할 수 있다. 일 구현에 있어, 프로세서(910)는 싱글-스레디드(single-threaded) 프로세서이다. 다른 구현에 있어, 프로세서(910)는 멀티-스레디드(multi-threaded) 프로세서이다. 프로세서(910)는 메모리(920) 또는 저장 디바이스(930)에 저장된 명령들을 처리할 수 있다.
메모리(920)는 시스템(900) 내에 정보를 저장한다. 일 구현에 있어, 메모리(920)는 컴퓨터-판독가능한 매체이다. 일 구현에 있어, 메모리(920)는 휘발성 메모리 유닛이다. 다른 구현에 있어, 메모리(920)는 비휘발성 메모리 유닛이다.
저장 디바이스(930)는 시스템(900)에 대한 대용량 저장소를 제공할 수 있다. 일 구현에 있어, 저장 디바이스(930)는 컴퓨터-판독가능한 매체이다. 다양한 다른 구현에 있어, 저장 디바이스(930)는 예를 들어 하드 디스크 디바이스, 광학 디스크 디바이스, 또는 일부 다른 대용량 저장 디바이스를 포함할 수 있다.
입력/출력 디바이스(940)는 시스템(900)에 대한 입력/출력 작용을 제공한다. 일 구현에 있어, 입력/출력 디바이스(940)는 하나 이상의 네트워크 인터페이스 디바이스(예컨대, 이더넷(Ethernet) 카드), 시리얼 통신 디바이스(예컨대, RS-232 포트) 및/또는 무선 인터페이스 디바이스(예컨대, 802.11 카드)를 포함할 수 있다. 다른 구현에 있어, 입력/출력 디바이스는 입력 데이터를 수신하고 출력 데이터를 다른 입력/출력 디바이스, 예컨대, 키보드, 프린터 및 디스플레이 디바이스(960)에 보내도록 설정된 드라이버 디바이스들을 포함할 수 있다.
본 특허 명세서에서 설명하는 장치, 방법, 흐름 다이어그램, 및 구조 블럭 다이어그램은 컴퓨터 프로세싱 시스템에 의해 수행가능한 프로그램 명령들을 포함하는 프로그램 코드를 포함한 컴퓨터 프로세싱 시스템으로 구현될 수 있다. 다른 구현들 또한 사용될 수 있다. 게다가, 특정 방법들 및/또는 단계들을 보완한 상응하는 활동 및 개시된 구조적 수단들을 보완한 상응하는 기능들을 설명하는, 본 특허 명세서에서 설명하는 흐름 다이어그램 및 구조 블록 다이어그램은 또한 소프트웨어 구조 및 알고리즘, 및 그와 동등한 것에 상응하여 구현될 수 있다.
여기 작성된 명세서는 본 발명의 최적의 모드를 설명하고 본 발명을 설명하고 본 기술분야의 당업자가 본 발명을 만들고 사용할 수 있도록 예들을 제공한다. 여기 작성된 명세서는 설명된 정확한 용어들에 발명이 한정되지 않는다. 그러므로, 발명이 상기 설명된 예들을 참조하여 더 자세히 설명되는 동안, 당업자는 본 발명의 사상을 이탈하지 않고 많은 변경 및 변형을 만들 수 있다.

Claims (20)

  1. 컴퓨터로 구현되는 방법으로서,
    제1 사용자와 연계된 디스플레이 디바이스 상에 제시된 이미지 일부의 제1 표시(a first indication of a portion of an image)로서, 개체를 식별하기 위한 프롬프트(prompt)에 응답하여 수신되고 있는 상기 제1 표시를 적어도 하나의 프로세서에 의해 수신하는 단계;
    제2 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제2 표시로서, 개체를 식별하기 위한 프롬프트에 응답하여 수신되고 있는 상기 제2 표시를 적어도 하나의 프로세서에 의해 수신하는 단계;
    적어도 하나의 프로세서에 의해, 상기 제1 표시 및 상기 제2 표시에 기초하여 이미지 내의 관심영역을 식별하는 단계;
    적어도 하나의 프로세서에 의해, 상기 개체의 식별자와 상기 관심영역을 연계시키는 단계;
    적어도 하나 이상의 프로세서에 의해, 상기 이미지 내의 관심영역과 상기 개체와 관련된 정보를 제시하도록 설정된 지시자(designator)를 연계시키는 단계; 및
    적어도 하나 이상의 프로세서에 의해, 상기 이미지의 후속 제시들에서 상기 이미지의 관심영역과 연계된 상기 지시자의 제시를 가능하게 하는 단계를 포함하는 컴퓨터로 구현되는 방법.
  2. 컴퓨터로 구현되는 방법으로서,
    적어도 하나 이상의 프로세서에 의해, 이미지 일부의 복수의 표시들을 수신하는 단계로서, 상기 이미지는 이미지 컬렉션(collection)의 일부이고, 상기 표시들은 연계된 개체 식별자(associated object identifier)를 갖는 상기 수신하는 단계;
    적어도 하나 이상의 프로세서에 의해, 공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 단계; 및
    적어도 하나 이상의 프로세서에 의해, 상기 식별된 관심영역과 상기 공통 연계된 개체 식별자를 연계시키는 단계를 포함하는 컴퓨터로 구현되는 방법.
  3. 청구항 2에 있어서,
    상기 표시들은 사용자와 추가적으로 연계되고, 각각의 사용자는 사용자 점수와 연계되며,
    공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 상기 단계는, 공통 연계된 개체 식별자를 구비하고, 또한 연계된 사용자 점수가 임계 사용자 점수보다 더 높은 연계된 사용자를 구비한 이미지 일부의 표시들에 기초하여 이미지의 관심영역을 식별하는 단계를 포함하는 방법.
  4. 청구항 2에 있어서,
    상기 이미지 컬렉션들 내에 있는 하나 이상의 이미지에서 목적 영역(goal region)을 정의하는 단계; 및
    이미지 일부의 수신된 표시가 목적 영역의 일부를 가리키는지 여부를 결정하는 단계를 더 포함하는 방법.
  5. 청구항 4에 있어서,
    상기 표시들은 사용자와 추가적으로 연계되고, 이미지 일부의 수신된 표시가 목적 영역의 일부를 가리킨다면 상기 수신된 표시와 연계된 사용자에게 포상을 수여하는 단계를 더 포함하는 방법.
  6. 청구항 2에 있어서,
    부정한(fraudulent) 표시들을 식별하는 단계를 더 포함하고,
    공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 상기 단계는, 공통 연계된 개체 식별자를 가진 이미지 일부의 비-부정한 표시들을 기초로 이미지 내의 관심 영역을 식별하는 단계를 더 포함하는 방법.
  7. 청구항 2에 있어서,
    상기 식별된 관심영역과 사용자-선택가능한 링크를 연계시키는 단계를 더 포함하는 방법.
  8. 청구항 2에 있어서,
    이미지 컬렉션은 비디오 컨텐츠 아이템인 방법.
  9. 청구항 2에 있어서,
    이미지 컬렉션은 지도 애플리케이션(map application)의 일부인 방법.
  10. 복수의 이미지들 및 상기 이미지들 일부의 연계된 표시들을 저장하는 데이터 저장소로서, 상기 표시들은 연계된 개체 식별자 및 연계된 사용자를 가진 상기 데이터 저장소; 및
    프로세서를 포함하고, 상기 프로세서는
    공통 개체 식별자와 연계된 이미지 일부의 표시들을 식별하고,
    상기 이미지의 표시된 일부들에 기초한 관심영역을 상기 이미지에서 식별하고,
    상기 식별된 관심영역과 상기 공통 개체 식별자를 연계시키도록 적응되는 시스템.
  11. 청구항 10에 있어서, 상기 프로세서는
    상기 데이터 저장소에 저장된 부정한 표시들을 식별하고; 및
    상기 데이터 저장소로부터 상기 부정한 표시들을 제거하도록 적응된 시스템.
  12. 청구항 10에 있어서, 상기 프로세서는
    표시와 연계된 각각의 사용자에 대한 점수를 결정하고; 및
    임계 점수보다 낮게 점수가 결정된 연계된 사용자가 있는 표시들을 상기 데이터 저장소로부터 제거하도록 적응된 시스템.
  13. 컴퓨터 판독가능한 매체 상에 인코드되는 명령들로서, 상기 명령들은 실행시에 컴퓨터로 하여금,
    제1 사용자와 연계된 디스플레이 디바이스 상에 제시된 이미지 일부의 제1 표시로서, 개체를 식별하기 위한 프롬프트(prompt)에 응답하여 수신되고 있는 상기 제1 표시를 수신하는 단계;
    제2 사용자와 연계된 디스플레이 디바이스상에 제시된 이미지 일부의 제2 표시로서, 개체를 식별하기 위한 프롬프트에 응답하여 수신되고 있는 상기 제2 표시를 수신하는 단계;
    상기 제1 표시 및 상기 제2 표시에 기초하여 이미지 내의 관심영역을 식별하는 단계;
    상기 개체의 식별자와 상기 관심영역을 연계시키는 단계;
    상기 이미지 내의 관심영역과 상기 개체와 관련된 정보를 제시하도록 설정된 지시자를 연계시키는 단계; 및
    상기 이미지의 후속 제시들에서 상기 이미지의 관심영역과 연계된 상기 지시자의 제시를 가능하게 하는 단계를 포함하는 동작들을 수행하게 하는 명령들.
  14. 컴퓨터 판독가능한 매체 상에 인코드되는 명령들로서, 상기 명령들은 실행시에 컴퓨터로 하여금,
    이미지 일부의 복수의 표시들을 수신하는 단계로서, 상기 이미지는 이미지 컬렉션의 일부이고, 상기 표시들은 연계된 개체 식별자를 갖는 상기 수신하는 단계;
    공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 단계; 및
    상기 식별된 관심영역과 상기 공통 연계된 개체 식별자를 연계시키는 단계를 포함하는 동작들을 수행하게 하는 명령들.
  15. 청구항 14에 있어서,
    상기 표시들은 사용자와 추가적으로 연계되고, 각각의 사용자는 사용자 점수와 연계되며, 공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 상기 단계는, 공통 연계된 개체 식별자를 구비하고, 또한 연계된 사용자 점수가 임계 사용자 점수보다 더 높은 연계된 사용자를 구비한 이미지 일부의 표시들에 기초하여 이미지의 관심영역을 식별하는 단계를 포함하는 명령들.
  16. 청구항 14에 있어서,
    상기 이미지 컬렉션들 내에 있는 하나 이상의 이미지에서 목적 영역을 정의하는 단계; 및
    이미지 일부의 수신된 표시가 목적 영역의 일부를 가리키는지 여부를 결정하는 단계를 더 포함하는 명령들.
  17. 청구항 16에 있어서,
    상기 표시들은 사용자와 추가적으로 연계되고, 이미지 일부의 수신된 표시가 목적 영역의 일부를 가리킨다면 상기 수신된 표시와 연계된 사용자에게 포상을 수여하는 단계를 더 포함하는 명령들.
  18. 청구항 14에 있어서,
    부정한 표시들을 식별하는 단계를 더 포함하고,
    공통 연계된 개체 식별자를 가진 이미지 일부의 표시들을 기초로 이미지 내의 관심영역을 식별하는 상기 단계는, 공통 연계된 개체 식별자를 가진 이미지 일부의 비-부정한 표시들을 기초로 이미지 내의 관심 영역을 식별하는 단계를 더 포 함하는 명령들.
  19. 청구항 14에 있어서,
    상기 식별된 관심영역과 사용자-선택가능한 링크를 연계시키는 단계를 더 포함하는 명령들.
  20. 청구항 14에 있어서,
    상기 이미지 컬렉션이 비디오 컨텐츠 아이템인 명령들.
KR1020117005823A 2008-08-11 2009-08-11 이미지 내에서의 개체 식별 KR101617814B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US18874808P 2008-08-11 2008-08-11
US61/188,748 2008-08-11
US12/538,283 US20100034466A1 (en) 2008-08-11 2009-08-10 Object Identification in Images
US12/538,283 2009-08-10

Publications (2)

Publication Number Publication Date
KR20110044294A true KR20110044294A (ko) 2011-04-28
KR101617814B1 KR101617814B1 (ko) 2016-05-18

Family

ID=41653031

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117005823A KR101617814B1 (ko) 2008-08-11 2009-08-11 이미지 내에서의 개체 식별

Country Status (8)

Country Link
US (1) US20100034466A1 (ko)
EP (1) EP2329402A4 (ko)
JP (1) JP2011530772A (ko)
KR (1) KR101617814B1 (ko)
CN (1) CN102177512A (ko)
AU (1) AU2009282190B2 (ko)
CA (1) CA2735577A1 (ko)
WO (1) WO2010019537A2 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160006909A (ko) 2014-07-10 2016-01-20 김진곤 이미지 처리 방법과 이를 저장하는 저장 매체
KR20160085742A (ko) 2016-07-11 2016-07-18 김진곤 이미지 처리 방법

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150178777A1 (en) 2008-02-05 2015-06-25 Google Inc. Informational and Advertiser Links for Use in Web Mapping Services
US20100004995A1 (en) 2008-07-07 2010-01-07 Google Inc. Claiming Real Estate in Panoramic or 3D Mapping Environments for Advertising
US8028470B2 (en) 2009-04-21 2011-10-04 Deere & Company Robotic watering unit
US8437879B2 (en) 2009-04-21 2013-05-07 Deere & Company System and method for providing prescribed resources to plants
US9538714B2 (en) 2009-04-21 2017-01-10 Deere & Company Managing resource prescriptions of botanical plants
US8321365B2 (en) * 2009-04-21 2012-11-27 Deere & Company Horticultural knowledge base for managing yards and gardens
US8321061B2 (en) 2010-06-17 2012-11-27 Deere & Company System and method for irrigation using atmospheric water
US9357759B2 (en) 2010-08-20 2016-06-07 Deere & Company Networked chemical dispersion system
US8504234B2 (en) 2010-08-20 2013-08-06 Deere & Company Robotic pesticide application
US9076105B2 (en) 2010-08-20 2015-07-07 Deere & Company Automated plant problem resolution
US8560600B2 (en) * 2011-09-26 2013-10-15 Google Inc. Managing map elements using aggregate feature identifiers
US9027048B2 (en) * 2012-11-14 2015-05-05 Bank Of America Corporation Automatic deal or promotion offering based on audio cues
JP6064618B2 (ja) * 2013-01-23 2017-01-25 富士ゼロックス株式会社 情報処理装置及びプログラム
WO2014130591A1 (en) * 2013-02-19 2014-08-28 Digitalglobe, Inc. Crowdsourced search and locate platform
CN103514296A (zh) * 2013-10-16 2014-01-15 上海合合信息科技发展有限公司 数据存储方法及装置，数据查询方法及装置
CN104866486A (zh) * 2014-02-21 2015-08-26 联想(北京)有限公司 一种信息处理方法及电子设备
WO2015157344A2 (en) * 2014-04-07 2015-10-15 Digitalglobe, Inc. Systems and methods for large scale crowdsourcing of map data location, cleanup, and correction
US20150296215A1 (en) * 2014-04-11 2015-10-15 Microsoft Corporation Frame encoding using hints
US20150310300A1 (en) * 2014-04-28 2015-10-29 Distiller, Llc System and method for multiple object recognition and personalized recommendations
US10216996B2 (en) 2014-09-29 2019-02-26 Sony Interactive Entertainment Inc. Schemes for retrieving and associating content items with real-world objects using augmented reality and object recognition
US10118696B1 (en) 2016-03-31 2018-11-06 Steven M. Hoffberg Steerable rotating projectile
US10264297B1 (en) 2017-09-13 2019-04-16 Perfect Sense, Inc. Time-based content synchronization
US10535006B2 (en) 2018-01-23 2020-01-14 Here Global B.V. Method, apparatus, and system for providing a redundant feature detection engine
US11712637B1 (en) 2018-03-23 2023-08-01 Steven M. Hoffberg Steerable disk or ball
US10868620B2 (en) * 2018-12-26 2020-12-15 The Nielsen Company (Us), Llc Methods and apparatus for optimizing station reference fingerprint loading using reference watermarks
US11113839B2 (en) * 2019-02-26 2021-09-07 Here Global B.V. Method, apparatus, and system for feature point detection
JP7386890B2 (ja) * 2019-04-08 2023-11-27 グーグル エルエルシー 製品ソースリンクを使用したメディア注釈
US11212560B2 (en) 2019-06-24 2021-12-28 The Nielsen Company (Us), Llc Use of steganographically-encoded time information as basis to establish a time offset, to facilitate taking content-related action
US11234049B2 (en) * 2019-06-24 2022-01-25 The Nielsen Company (Us), Llc Use of steganographically-encoded time information as basis to control implementation of dynamic content modification
CN112995759A (zh) * 2019-12-13 2021-06-18 腾讯科技（北京）有限公司 互动业务处理方法、系统、装置、设备及存储介质
US11284144B2 (en) * 2020-01-30 2022-03-22 Snap Inc. Video generation system to render frames on demand using a fleet of GPUs
US11036781B1 (en) 2020-01-30 2021-06-15 Snap Inc. Video generation system to render frames on demand using a fleet of servers
US11356720B2 (en) 2020-01-30 2022-06-07 Snap Inc. Video generation system to render frames on demand
US11991419B2 (en) 2020-01-30 2024-05-21 Snap Inc. Selecting avatars to be included in the video being generated on demand
WO2021155249A1 (en) 2020-01-30 2021-08-05 Snap Inc. System for generating media content items on demand
GB2597334A (en) 2020-07-17 2022-01-26 Playrcart Ltd A media player
US20220318334A1 (en) * 2021-04-06 2022-10-06 Zmags Corp. Multi-link composite image generator for electronic mail (e-mail) messages

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2008A (en) * 1841-03-18 Gas-lamp eok conducting gas pkom ah elevated buhner to one below it
US6205231B1 (en) * 1995-05-10 2001-03-20 Identive Corporation Object identification in a moving video image
US6496981B1 (en) * 1997-09-19 2002-12-17 Douglass A. Wistendahl System for converting media content for interactive TV use
US20020056136A1 (en) * 1995-09-29 2002-05-09 Wistendahl Douglass A. System for converting existing TV content to interactive TV programs operated with a standard remote control and TV set-top box
US6070167A (en) * 1997-09-29 2000-05-30 Sharp Laboratories Of America, Inc. Hierarchical method and system for object-based audiovisual descriptive tagging of images for information retrieval, editing, and manipulation
US7577978B1 (en) * 2000-03-22 2009-08-18 Wistendahl Douglass A System for converting TV content to interactive TV game program operated with a standard remote control and TV set-top box
KR20010105634A (ko) * 2000-05-17 2001-11-29 김장태 인터넷상의 지도 정보 서비스방법
JP4139990B2 (ja) * 2002-06-06 2008-08-27 ソニー株式会社 画像処理装置、画像処理方法、画像処理プログラム及び画像処理プログラム格納媒体
GB0229625D0 (en) * 2002-12-19 2003-01-22 British Telecomm Searching images
US7980953B2 (en) * 2003-07-01 2011-07-19 Carnegie Mellon University Method for labeling images through a computer game
KR20050094557A (ko) * 2004-03-23 2005-09-28 김정태 정지 컨텐츠의 영역 추출 시스템
KR100609022B1 (ko) * 2004-06-09 2006-08-03 학교법인 영남학원 공간관계와 주석을 이용한 이미지 검색 방법
US7562056B2 (en) * 2004-10-12 2009-07-14 Microsoft Corporation Method and system for learning an attention model for an image
US7724954B2 (en) * 2005-11-14 2010-05-25 Siemens Medical Solutions Usa, Inc. Method and system for interactive image segmentation
US20080086356A1 (en) * 2005-12-09 2008-04-10 Steve Glassman Determining advertisements using user interest information and map-based location information
US8109819B2 (en) * 2006-02-21 2012-02-07 Topcoder, Inc. Internet contest
US20080059281A1 (en) * 2006-08-30 2008-03-06 Kimberly-Clark Worldwide, Inc. Systems and methods for product attribute analysis and product recommendation
JP2008165345A (ja) * 2006-12-27 2008-07-17 Rasis Software Service Co Ltd ウェブサイトの広告デザイン募集システム、広告デザイン募集方法、プログラムおよびコンピュータ読取可能記録媒体
US8206222B2 (en) * 2008-01-29 2012-06-26 Gary Stephen Shuster Entertainment system for performing human intelligence tasks

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160006909A (ko) 2014-07-10 2016-01-20 김진곤 이미지 처리 방법과 이를 저장하는 저장 매체
KR20160085742A (ko) 2016-07-11 2016-07-18 김진곤 이미지 처리 방법

Also Published As

Publication number Publication date
WO2010019537A3 (en) 2010-04-22
JP2011530772A (ja) 2011-12-22
EP2329402A2 (en) 2011-06-08
AU2009282190B2 (en) 2015-02-19
CN102177512A (zh) 2011-09-07
US20100034466A1 (en) 2010-02-11
WO2010019537A2 (en) 2010-02-18
AU2009282190A1 (en) 2010-02-18
EP2329402A4 (en) 2012-12-05
KR101617814B1 (ko) 2016-05-18
CA2735577A1 (en) 2010-02-18

Similar Documents

Publication Publication Date Title
KR101617814B1 (ko) 이미지 내에서의 개체 식별
KR102541468B1 (ko) 메시지의 우선 순위 지정
US9220984B2 (en) Social information game system
JP5905449B2 (ja) ソーシャルネットワーキングエンジンのユーザにコンテンツを方向付けるためのシステム及び方法
US11425213B2 (en) System and method for modifying a preference
US20140176536A1 (en) Systems and Methods for Generating Enhanced Screenshots
US20150142767A1 (en) Scoring authors of social network content
US20140222833A1 (en) Trusted Social Networks
MX2013014211A (es) Clasificacion basada en contexto de resultados de busqueda.
US20110004520A1 (en) System to present business network notifications in conjunction with display advertisements
US20130079144A1 (en) Campaign messaging system
US20100257019A1 (en) Associating user-defined descriptions with objects
Chamberlain Using social media for biomonitoring: how Facebook, Twitter, Flickr and other social networking platforms can provide large-scale biodiversity data
US8647209B1 (en) System and method for creating and/or serving online games embedded in websites
US9542504B2 (en) Metanodes for open graph protocols
US11509610B2 (en) Real-time messaging platform with enhanced privacy
US11514400B2 (en) Applying for a job using a mobile computing device
US20070245265A1 (en) Perception research system and method
US10643251B1 (en) Platform for locating and engaging content generators
US8082176B2 (en) Message character string output system, its control method, and information storage medium
CN110048931B (zh) 一种消息处理方法、装置和设备
Mendes Automatic website generation for low ranking football clubs: An empirical study
McCormick SEO made simple for 2011
WO2014159705A1 (en) Method and apparatus for lead generation
WO2012067782A1 (en) Social information game system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee