WO2017135489A1 - 시각적 콘텐츠의 애노테이션 장치 및 방법 - Google Patents

시각적 콘텐츠의 애노테이션 장치 및 방법 Download PDF

Info

Publication number
WO2017135489A1
WO2017135489A1 PCT/KR2016/001491 KR2016001491W WO2017135489A1 WO 2017135489 A1 WO2017135489 A1 WO 2017135489A1 KR 2016001491 W KR2016001491 W KR 2016001491W WO 2017135489 A1 WO2017135489 A1 WO 2017135489A1
Authority
WO
WIPO (PCT)
Prior art keywords
visual content
information
beacon signal
annotation
content
Prior art date
Application number
PCT/KR2016/001491
Other languages
English (en)
French (fr)
Inventor
김성민
윤경용
Original Assignee
주식회사 얍컴퍼니
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 얍컴퍼니 filed Critical 주식회사 얍컴퍼니
Publication of WO2017135489A1 publication Critical patent/WO2017135489A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/08—Access security
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services

Definitions

  • the present invention relates to an annotation apparatus and method for visual content.
  • SMS social network service
  • the location and time information of the individual's activity can be shared in real time with an image or a video, and the response can be confirmed in real time.
  • the presently provided mobile messenger or SNS service can only share the overall response to the image or video, it refers to the content of a specific location of the visual content and cannot share information.
  • the current messenger or SNS service instructs the construction site to reflect a specific part in the design drawing, or refers to a specific product among the listed products in the online shopping mall to exchange information in real time, It does not provide a service platform to instantly share information about the stores in the location with friends, talk with them, and store the contents.
  • Patent Document 1 Republic of Korea Patent No. 10-1570117 (Nov. 12, 2015 registration)
  • the present invention provides an annotation apparatus and method for visual content that can generate and match annotation information on visual content based on data in a beacon signal broadcast around the mobile terminal.
  • the present invention also provides an annotation apparatus and method for visual content that can generate annotation information of visual content through analysis of received content based on location information in a beacon signal.
  • the present invention receives basic index information from an external server based on information obtained through object analysis of visual content, and at least one annotation information generated based on a beacon signal using the received basic index information to visual content.
  • An annotation apparatus and method for visual content capable of selecting suitable annotation information is provided.
  • the apparatus for annotating visual content is based on a visual content acquisition unit for acquiring visual content and a position of the mobile terminal acquiring the visual content.
  • a beacon signal receiving unit for receiving at least one beacon signal generated within a set radius
  • An annotation information generating unit for generating at least one annotation information for the visual content through the analysis of the beacon signal
  • the generated annotation information And a visual content storage unit that matches the visual content and stores the same in the search database server.
  • the annotation information generation unit may include a selection module for selecting a beacon signal including frame data or position information among the at least one or more beacon signals received, frame data in the beacon signal selected by the selection module, or It may include an information generating module for generating at least one annotation information based on the location information.
  • the information generating module transmits the location information in the beacon signal to a content providing server to receive content corresponding to the location information, and analyzes the received content by analyzing one or more annotation information. Can be generated.
  • the annotation information generating unit generates a search information through a connection module for connecting the index providing server and the annotation apparatus through a mobile communication network, and object analysis of the visual content, And a visual content analysis module which transmits search information to the index providing server to request and receive basic index information of the visual content, wherein the information generating module comprises at least one of the annotation information based on the basic index information.
  • the visual content acquisition unit includes a screen including a control interface for controlling the operation of the visual content and the beacon signal receiver through the execution of a visual browser stored in a recording medium in an executable form in the mobile terminal.
  • the display unit may be displayed on the mobile terminal, and the beacon signal receiving unit may operate according to an operation of the control interface to receive the beacon signal.
  • the visual content acquisition unit interlocks with the image capturing unit in the mobile terminal to execute the visual browser to set the image captured by the image capturing unit as visual content to set the screen to the mobile terminal. Can be displayed on.
  • the method of annotating visual content obtaining the visual content and displaying on the mobile terminal, and obtains the visual content through the operation of the beacon signal receiver
  • the method may include storing the generated annotation information and the visual content in a search database server.
  • the mobile terminal further includes a visual browser stored in a recording medium in an executable form, and the displaying may include the operation of the visual content and the beacon signal receiving unit through execution of the visual browser. And displaying a screen including a control interface for controlling on the mobile terminal, wherein receiving the beacon signal may receive the beacon signal according to an operation of the control interface.
  • the displaying may include executing the visual browser as the image capturing unit in the mobile terminal captures an image, and setting the image captured by the image capturing unit as visual content. And then displaying the visual content and the control interface on the mobile terminal using the visual browser.
  • generating the annotation information includes selecting a beacon signal including frame data or position information among the at least one or more received beacon signals, and frame data or position information in the selected beacon signal. Generating at least one annotation information based on the;
  • generating the annotation information may include transmitting location information in the beacon signal to a content providing server, receiving content matched with the location information from the content providing server, The method may include generating at least one annotation information through analysis of the received content.
  • the generating of the annotation information comprises: generating search information through object analysis of the visual content, and transmitting the generated search information to an index providing server to the visual content. And requesting and receiving basic index information on the target information, and generating annotation information to be applied to the visual content by selecting at least one or more of the annotation information based on the basic index information.
  • an annotation apparatus for visual content that can generate the annotation information for the visual content based on the data in the beacon signal broadcasted around the mobile terminal to match the visual content And by providing a method, it is possible to generate accurate annotation information for various objects included in the visual content.
  • any one of the problem solving means of the present invention described above based on the information obtained through the object analysis of the visual content, receiving the base index information from the external server, and using the received base index information to receive the beacon signal
  • receiving the base index information from the external server based on the information obtained through the object analysis of the visual content, receiving the base index information from the external server, and using the received base index information to receive the beacon signal
  • 1 is an overall network configuration to which the annotation device for visual content is applied according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing a detailed configuration of an annotation apparatus for visual content according to an embodiment of the present invention.
  • FIG. 3 is a diagram for describing a visual browser provided by an annotation apparatus for visual content according to an embodiment of the present invention.
  • FIG. 4 is a flowchart illustrating a process of matching and storing annotation information in visual content by an annotation apparatus of visual content according to an exemplary embodiment of the present invention.
  • a "part" includes the unit realized by hardware, the unit implemented by software, and the unit implemented using both.
  • one unit may be realized using two or more pieces of hardware, or two or more units may be realized by one piece of hardware.
  • 1 is an overall network configuration to which the annotation device for visual content is applied according to an embodiment of the present invention.
  • the entire network includes a mobile terminal 100 including an annotation device 110 for visual content, a plurality of beacon transmitters 130 connected to a local area network 120, and a mobile terminal 100. And a content providing server 150, an index providing server 160, and a search database server 170 connected through the mobile communication network 140.
  • the short range wireless communication network 120 may include any one of Wi-Fi, Bluetooth LE communication, and infrared communication, but is not limited thereto.
  • the mobile terminal 100 receives the beacon signal broadcast from the beacon transmitter 130 through the local area network 120, and provides the content providing server 150 through the mobile communication network 140 based on the data in the beacon signal. The information may be received by accessing the index providing server 160 or the like.
  • the mobile terminal 100 includes a communication module that can be connected to the local area network 120, for example, a communication module such as Bluetooth LE, Wi-Fi, infrared communication, Zigbee, Bluetooth, or the like, or can be connected to the mobile communication network 140.
  • Module for example, a mobile communication module that can be connected to the mobile communication network 140, such as LTE, 3G.
  • the mobile terminal 120 may further include an annotation apparatus 110 for visual content that may match annotation information suitable for visual content at an arbitrary location and transmit the annotation information to an external search database server 170.
  • the mobile terminal 100 is a mobile communication device that ensures portability and mobility.
  • the mobile terminal 100 is a personal communication system (PCS), a global system for mobile communication (GSM), a personal digital cellular (PDC), or a PHS (PHS).
  • PCS personal communication system
  • GSM global system for mobile communication
  • PDC personal digital cellular
  • PHS PHS
  • PDA Personal Handyphone System
  • PDA Personal Digital Assistant
  • IMT International Mobile Telecommunication
  • CDMA Code Division Multiple Access
  • W-CDMA W-Code Division Multiple Access
  • WBRO Wireless Broadband Internet
  • It may include all kinds of handheld based wireless communication devices such as smart phones, smart pads, tablet PCs, and the like.
  • the content providing server 150 stores various contents mapped to the location information, for example, restaurant information corresponding to the location information, discount information, food information provided by a company corresponding to the location information, and the like. In response to the content request of the mobile terminal 100, the content mapped to the location information may be provided to the mobile terminal 100 in response.
  • the index providing server 160 may store and manage unique index information (feature information) about various contents, such as visual contents, visual contents about a location (region), food-related visual contents, and the like.
  • the index providing server 160 receives a request for unique index information using the information on the visual content or the location information from the mobile terminal 100, and in response to the received request to the information or position information on the visual content
  • the unique index information may be transmitted to the mobile terminal 100.
  • the plurality of beacon transmitters 130 may be connected to the short range wireless communication network 120 to broadcast a beacon signal including frame data or a beacon signal including location information.
  • the plurality of beacon transmitters 130 according to an embodiment of the present invention has a unique identification information for the location information and a beacon corresponding to the sound signal in a manner of generating a sound signal of a high frequency band, for example sound waves in a predetermined variation pattern The signal can be broadcast.
  • Annotation apparatus 110 of the visual content of the mobile terminal 100 that has received the beacon signal corresponding to the sound signal as described above provides the unique identification information and the unique information of the mobile terminal 100 corresponding to the beacon signal content providing server ( The content providing server 150 may provide the content to the mobile terminal 100 based on the location information corresponding to the unique identification information.
  • FIG 2 is a block diagram showing a detailed configuration of the annotation device 110 of visual content according to an embodiment of the present invention
  • Figure 3 is provided by the annotation device 110 of visual content according to an embodiment of the present invention It is a figure for demonstrating a visual browser.
  • the annotation device 110 for visual content may include an image capturing unit 200, a visual content obtaining unit 210, a beacon signal receiving unit 220, an annotation information generating unit 230, and a visual content storing unit.
  • the unit 240 may be included.
  • the image capturing unit 200 may provide the object information obtaining unit 230 with image capturing range information generated based on the operation state information of the camera according to the image capturing.
  • the image capturing unit 200 may generate the image capturing range information, which is the area information on which the image is captured, based on the zoom, tilt, and the like of the camera operation state, and provide the image capturing range information to the annotation information generating unit 230. .
  • the visual content acquisition unit 210 may obtain the visual content from the mobile terminal 100 and then display it on a display device of the mobile terminal 100, for example, the touch screen 300.
  • the visual content acquisition unit 210 is a control interface 310 for controlling the operation of the visual content and the beacon signal receiver 220 through execution of a visual browser stored in a recording medium in an executable form in the mobile terminal 100.
  • the screen including) may be displayed on the touch screen 300 of the mobile terminal 100 as shown in FIG. 3.
  • control interface 310 may be displayed on the touch screen by overlapping with the visual content.
  • the visual browser may be executed in conjunction with the image capturing unit 200, for example a camera of the mobile terminal 100. Specifically, as a specific image is captured by the image capturing unit 200 of the mobile terminal 100, the visual browser sets the captured image as visual content and displays a screen including a control interface 310 in the visual content. It may be displayed on the touch screen 300 of (100).
  • the beacon signal receiver 220 may be executed according to an operation of the control interface 310, for example, a touch, to receive a beacon signal broadcast within a predetermined radius at the location of the mobile terminal 100.
  • the beacon signal receiver 220 receives a beacon signal broadcast from the beacon transmitter 130 located within a preset radius according to the operation of the control interface 310, and receives the beacon signal from the annotation information generator 230. ) Can be provided.
  • the beacon signal receiver 220 may be any one of a Bluetooth LE, an infrared communication module, and a Wi-Fi module.
  • the annotation information generator 230 selects a beacon signal including frame data or position information among the beacon signals received through the beacon signal receiver 220 and generates annotation information based on frame data or position information in the selected beacon signal. can do.
  • annotation information generation unit 230 selects only the beacon signal broadcast from the beacon transmitter 130 located in the region corresponding to the image capture range of the beacon signal received through the beacon signal receiving unit 220, the selected beacon signal Based on the annotation information can be generated.
  • annotation information generator 230 may include a selection module 232 and an information generation module 234.
  • the selection module 232 may select and output only the beacon signal including frame data or position information among the at least one or more beacon signals received to the information generation module 234.
  • the selection module 232 may select and output only the beacon signal having the location information included in the image capturing range information among the received beacon signals, that is, the beacon signal having the location information, to the information generating module 234.
  • the information generation module 234 may generate at least one annotation information based on frame data or position information in the beacon signal provided from the selection module 232.
  • the information generating module 234 extracts frame data through analysis of the beacon signal provided from the selection module 232, and then generates annotation information for visual content based on the extracted frame data or generates position information in the beacon signal.
  • One or more annotation information may be generated by analyzing the received content in response to the request for the content by transmitting it to the content providing server 150 through the mobile communication network 140.
  • annotation information generator 230 may further include a visual content analysis module 236 and a connection module 238.
  • the visual content analysis module 236 generates information for search through object analysis on visual content, and generates the search information to the index providing server 160 connected to the mobile communication network 140 through the access module 238. By requesting the basic index information for the object in the visual content by transmitting, in response to the basic index information can be received and provided to the information generation module 234.
  • the information generation module 234 selects the annotation information to be matched with the visual content from the at least one annotation information generated using the basic index information provided from the visual content analysis module 236, and stores the selected annotation information as the visual content storage unit. 240 may be provided.
  • the visual content storage unit 240 may match the selected annotation information or generated annotation information with the visual content, and then transmit the stored annotation information to the search database server 170.
  • FIG. 4 is a flowchart illustrating a process of matching and storing annotation information in visual content by the annotation apparatus 110 of visual content according to an exemplary embodiment of the present invention.
  • the visual content obtaining unit 210 uses the image captured through the execution of the visual browser as visual content, and the control interface 310. Provides a screen including a on the touch screen 300 (S400, S402).
  • the beacon signal receiver 220 receives a beacon signal broadcast within a predetermined radius (S406). At this time, the beacon signal receiving unit 220 receives only the beacon signal having a signal strength of a predetermined value or more and provides it to the annotation information generator 230.
  • the annotation information generation unit 230 generates a plurality of annotation information based on the frame data in the beacon signal or the position information in the beacon signal (S408). Specifically, the annotation information generation unit 230 transmits the unique identification information corresponding to the location information to the content providing server 150 connected to the mobile communication network 140 to request the content, and in response to the request, Annotation information may be generated through analysis or annotation information may be generated through analysis of frame data.
  • the annotation information generation unit 230 generates information for searching for the object by analyzing the object of the visual content (S410), the index providing server 160 connected to the generated search information for the mobile communication network (140) In step S412, the basic index information is received by the transmission.
  • the annotation information generator 230 selects annotation information to be applied to the visual content from the plurality of annotation information based on the basic index information (S414), and provides the selected annotation information to the visual content storage unit 240. do.
  • the visual content storage unit 240 generates matching data by matching the annotation information provided to the visual content (S416), and transmits and stores the generated matching data to the search database server 170 (S418). .
  • Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media.
  • Computer readable media may include both computer storage media and communication media.
  • Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.
  • Communication media typically includes computer readable instructions, data structures, program modules, or other data in a modulated data signal such as a carrier wave, or other transmission mechanism, and includes any information delivery media.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 비콘 신호를 기반으로 애노테이션 정보를 생성하여 시각적 콘텐츠에 매칭시킬 수 있는 장치 및 방법에 관한 것으로, 이를 위하여 시각적 콘텐츠를 획득하는 시각적 콘텐츠 획득부와, 상기 시각적 콘텐츠를 획득한 모바일 단말의 위치를 기준으로 기 설정된 반경 내에서 발생되는 적어도 하나 이상의 비콘 신호를 수신하는 비콘 신호 수신부와, 상기 비콘 신호의 분석을 통해 상기 시각적 콘텐츠에 대한 적어도 하나 이상의 애노테이션 정보를 생성하는 애노테이션 정보 생성부와, 상기 생성한 애노테이션 정보와 상기 시각적 콘텐츠를 매칭시켜 검색용 데이터베이스 서버에 저장하는 시각적 콘텐츠 저장부를 포함하는 시각적 콘텐츠의 애노테이션 장치를 제공한다.

Description

시각적 콘텐츠의 애노테이션 장치 및 방법
본 발명은 시각적 콘텐츠의 애노테이션 장치 및 방법에 관한 것이다.
최근 몇 컴퓨터와 통신 기술의 발달로 인터넷을 통해 사용자간 정보를 공유하는 소셜 네트워크 서비스(Social Network Service; SNS) 산업이 크게 발전하였다. 따라서 기존의 SMS를 통한 정보 공유나, PC를 통한 메신저를 통한 정보 공유 방식이 아닌 언제 어디서나 모바일 단말을 통해 정보를 실시간으로 공유하고 있다.
즉, 개인이 활동하는 위치, 시간 정보를 이미지나 영상으로 실시간으로 공유하고 이에 대한 반응을 실시간으로 확인할 수 있다. 그러나, 현재 제공되는 모바일 메신저나 SNS 서비스의 경우 이미지나 영상에 대한 전체적인 반응 만을 공유할 수 있을 뿐, 시각적 콘텐츠 중 특정 위치에 대한 내용을 지칭하며 정보를 공유할 수는 없다.
*예를 들어 현재의 메신저나 SNS서비스는 공사현장에서 특정부분을 설계도면에 반영시키도록 지시하거나, 온라인 쇼핑몰의 나열된 상품들 중 특정 상품을 지칭하여 실시간으로 정보를 주고 받거나, 웹 지도 상에서의 특정 위치에 존재하는 가게에 대한 정보를 즉각적으로 지인들과 공유하고 함께 이야기하며 그 내용을 저장할 수 있는 서비스 플랫폼을 제공해 주지는 못하고 있다.
[선행기술문헌]
[특허문헌]
(특허문헌 1) 대한민국 등록특허10-1570117호(2015.11.12. 등록)
본 발명은 시각적 콘텐츠에 대한 애노테이션 정보를 모바일 단말의 주변에서 브로드캐스팅되는 비콘 신호 내 데이터를 기반으로 생성하여 매칭시킬 수 있는 시각적 콘텐츠의 애노테이션 장치 및 방법을 제공한다.
또한, 본 발명은 비콘 신호 내 위치 정보를 기반으로 수신한 콘텐츠의 분석을 통해 시각적 콘텐츠의 애노테이션 정보를 생성할 수 있는 시각적 콘텐츠의 애노테이션 장치 및 방법을 제공한다.
본 발명은 시각적 콘텐츠의 객체 분석을 통해 획득한 정보를 기반으로 외부 서버로부터 기본 인덱스 정보를 수신하며, 수신한 기본 인덱스 정보를 이용하여 비콘 신호를 기반으로 생성한 적어도 하나 이상의 애노테이션 정보에서 시각적 콘텐츠에 적합한 애노테이션 정보를 선택할 수 있는 시각적 콘텐츠의 애노테이션 장치 및 방법을 제공한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상기한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치는 시각적 콘텐츠를 획득하는 시각적 콘텐츠 획득부와, 상기 시각적 콘텐츠를 획득한 모바일 단말의 위치를 기준으로 기 설정된 반경 내에서 발생되는 적어도 하나 이상의 비콘 신호를 수신하는 비콘 신호 수신부와, 상기 비콘 신호의 분석을 통해 상기 시각적 콘텐츠에 대한 적어도 하나 이상의 애노테이션 정보를 생성하는 애노테이션 정보 생성부와, 상기 생성한 애노테이션 정보와 상기 시각적 콘텐츠를 매칭시켜 검색용 데이터베이스 서버에 저장하는 시각적 콘텐츠 저장부를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 애노테이션 정보 생성부는 상기 수신한 적어도 하나 이상의 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호를 선택하는 선택 모듈과, 상기 선택 모듈에 의해 선택된 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 적어도 하나 이상의 애노테이션 정보를 생성하는 정보 생성 모듈을 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 정보 생성 모듈은 상기 비콘 신호 내 위치 정보를 콘텐츠 제공 서버에 전송하여 상기 위치 정보에 대응하는 콘텐츠를 수신하며, 상기 수신한 콘텐츠의 분석을 통해 하나 이상의 애노테이션 정보를 생성할 수 있다.
본 발명의 실시예에 따르면, 상기 애노테이션 정보 생성부는 이동 통신망을 통해 인덱스 제공 서버와 상기 애노테이션 장치를 연결시키는 접속 모듈과, 상기 시각적 콘텐츠에 대한 객체 분석을 통해 검색용 정보를 생성하며, 상기 생성한 검색용 정보를 상기 인덱스 제공 서버에 전송하여 상기 시각적 콘텐츠에 대한 기본 인덱스 정보를 요청하여 수신하는 시각적 콘텐츠 분석 모듈을 포함하며, 상기 정보 생성 모듈은 상기 기본 인덱스 정보를 기반으로 상기 애노테이션 정보 중 적어도 하나 이상을 선택할 수 있다.
본 발명의 실시예에 따르면, 상기 시각적 콘텐츠 획득부는 상기 모바일 단말 내 실행 가능한 형태로 기록매체에 저장된 비주얼 브라우저의 실행을 통해 상기 시각적 콘텐츠와 상기 비콘 신호 수신부의 동작을 제어하기 위한 제어 인터페이스를 포함한 화면을 상기 모바일 단말에 디스플레이하며, 상기 비콘 신호 수신부는 상기 제어 인터페이스의 조작에 따라 동작하여 상기 비콘 신호를 수신할 수 있다.
본 발명의 실시예에 따르면, 상기 시각적 콘텐츠 획득부는 상기 모바일 단말 내 영상 촬영부와 연동되어 상기 비주얼 브라우저를 실행시켜 상기 영상 촬영부에 의해 촬영된 영상을 시각적 콘텐츠로 설정하여 상기 화면을 상기 모바일 단말에 디스플레이할 수 있다.
상기한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 실시예에 따른 시각적 콘텐츠으 애노테이션 방법은 시각적 콘텐츠를 획득하여 모바일 단말에 표시하는 단계와, 비콘 신호 수신부의 동작을 통해 상기 시각적 콘텐츠를 획득한 모바일 단말의 위치를 기준으로 기 설정된 반경 내에서 발생되는 적어도 하나 이상의 비콘 신호를 수신하는 단계와, 상기 비콘 신호 내 데이터의 분석을 통해 상기 시각적 콘텐츠에 대한 적어도 하나 이상의 애노테이션 정보를 생성하는 단계와, 상기 생성한 애노테이션 정보와 상기 시각적 콘텐츠를 매칭시켜 검색용 데이터베이스 서버에 저장하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 모바일 단말은 실행 가능한 형태로 기록매체에 저장된 비주얼 브라우저를 더 포함하며, 상기 표시하는 단계는 상기 비주얼 브라우저의 실행을 통해 상기 시각적 콘텐츠와 상기 비콘 신호 수신부의 동작을 제어하기 위한 제어 인터페이스를 포함한 화면을 상기 모바일 단말에 표시하는 단계를 포함하며, 상기 비콘 신호를 수신하는 단계는 상기 제어 인터페이스의 조작에 따라 상기 비콘 신호를 수신할 수 있다.
본 발명의 실시예에 따르면, 상기 표시하는 단계는 상기 모바일 단말 내 영상 촬영부에서 영상을 촬영함에 따라 상기 비주얼 브라우저를 실행시키는 단계와, 상기 영상 촬영부에 의해 촬영된 영상을 시각적 콘텐츠로 설정한 후 상기 비주얼 브라우저를 이용하여 상기 시각적 콘텐츠와 상기 제어 인터페이스를 상기 모바일 단말에 표시하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 애노테이션 정보를 생성하는 단계는 상기 수신한 적어도 하나 이상의 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호를 선택하는 단계와, 상기 선택된 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 적어도 하나 이상의 애노테이션 정보를 생성하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 애노테이션 정보를 생성하는 단계는 상기 비콘 신호 내 위치 정보를 콘텐츠 제공 서버에 전송하는 단계와, 상기 콘텐츠 제공 서버로부터 상기 위치 정보에 매칭된 콘텐츠를 수신하는 단계와, 상기 수신한 콘텐츠의 분석을 통해 적어도 하나 이상의 애노테이션 정보를 생성하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 애노테이션 정보를 생성하는 단계는 상기 시각적 콘텐츠에 대한 객체 분석을 통해 검색용 정보를 생성하는 단계와, 상기 생성한 검색용 정보를 인덱스 제공 서버에 전송하여 상기 시각적 콘텐츠에 대한 기본 인덱스 정보를 요청하여 수신하는 단계와, 상기 기본 인덱스 정보를 기반으로 상기 애노테이션 정보 중 적어도 하나 이상을 선택하여 상기 시각적 콘텐츠에 적용될 애노테이션 정보를 생성하는 단계를 포함할 수 있다.
상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 시각적 콘텐츠에 대한 애노테이션 정보를 모바일 단말의 주변에서 브로드캐스팅되는 비콘 신호 내 데이터를 기반으로 생성하여 시각적 콘텐츠에 매칭시킬 수 있는 시각적 콘텐츠의 애노테이션 장치 및 방법을 제공함으로써, 시각적 콘텐츠 내 포함된 다양한 객체에 대한 정확한 애노테이션 정보 생성이 가능할 수 있다.
또한, 전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 시각적 콘텐츠의 객체 분석을 통해 획득한 정보를 기반으로 외부 서버로부터 기본 인덱스 정보를 수신하며, 수신한 기본 인덱스 정보를 이용하여 비콘 신호를 기반으로 생성한 적어도 하나 이상의 애노테이션 정보에서 시각적 콘텐츠에 적합한 애노테이션 정보를 선택하여 시각적 콘텐츠에 매칭시킴으로써, 불필요한 정보가 애노테이션 정보로 설정되는 것을 방지할 수 있다.
도 1은 본 발명의 일 실시예에 따른 시각적 콘텐츠의 애노테이션 장치가 적용된 전체 네트워크 구성도이다.
도 2는 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치의 세부 구성을 도시한 블록도이다.
도 3은 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치에 의해 제공되는 비주얼 브라우저를 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치가 시각적 콘텐츠에 애노테이션 정보를 매칭하여 저장하는 과정을 도시한 흐름도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 발명 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함" 한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.
본 발명 명세서 전체에서 사용되는 정도의 용어 "약", "실질적으로" 등은 언급된 의미에 고유한 제조 및 물질 허용오차가 제시될 때 그 수치에서 또는 그 수치에 근접한 의미로 사용되고, 본 발명의 이해를 돕기 위해 정확하거나 절대적인 수치가 언급된 개시 내용을 비양심적인 침해자가 부당하게 이용하는 것을 방지하기 위해 사용된다. 본 발명 명세서 전체에서 사용되는 정도의 용어 "~(하는) 단계" 또는 "~의 단계"는 "~ 를 위한 단계"를 의미하지 않는다.
*본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1개의 유닛이 2개 이상의 하드웨어를 이용하여 실현되어도 되고, 2개 이상의 유닛이 1개의 하드웨어에 의해 실현되어도 된다. 본 명세서 있어서 단말, 장치 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말, 장치 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말, 장치 또는 디바이스에서 수행될 수도 있다. 이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 시각적 콘텐츠의 애노테이션 장치가 적용된 전체 네트워크 구성도이다.
도 1에 도시된 바와 같이, 전체 네트워크는 시각적 콘텐츠의 애노테이션 장치(110)를 포함한 모바일 단말(100)과, 근거리 무선 통신망(120)에 연결된 복수의 비콘 송신기(130)와, 모바일 단말(100)과 이동 통신망(140)을 통해 연결된 콘텐츠 제공 서버(150), 인덱스 제공 서버(160) 및 검색용 데이터베이스 서버(170) 등을 포함할 수 있다.
본 발명의 실시예에서 근거리 무선 통신망(120)은 와이파이, 블루투스 LE 통신 및 적외선 통신 중 어느 하나를 들 수 있으나, 이에 한정하지는 않는다.
모바일 단말(100)은 근거리 무선 통신망(120)을 통해 비콘 송신기(130)로부터 브로드캐스팅되는 비콘 신호를 수신하며, 비콘 신호 내 데이터를 기반으로 이동 통신망(140)을 통해 콘텐츠 제공 서버(150) 및 인덱스 제공 서버(160) 등에 접속하여 정보를 수신할 수 있다. 이를 위하여, 모바일 단말(100)은 근거리 무선 통신망(120)에 접속 가능한 통신 모듈, 예컨대 블루투스 LE, 와이파이, 적외선 통신, 지그비, 블루투스 등과 같은 통신 모듈을 구비하거나 이동 통신망(140)에 접속 가능한 이동 통신 모듈, 예컨대 LTE, 3G 등과 같은 이동 통신망(140)에 접속 가능한 이동 통신 모듈을 구비할 수 있다.
또한, 모바일 단말(120)은 임의의 위치에서 시각적 콘텐츠에 적합한 애노테이션 정보를 매칭시켜 외부의 검색용 데이터베이스 서버(170)에 전송할 수 있는 시각적 콘텐츠의 애노테이션 장치(110)를 더 구비할 수 있다.
상술한 바와 같은 모바일 단말(100)은 휴대성과 이동성이 보장되는 이동 통신 장치로서, 예를 들면, PCS(Personal Communication System), GSM(Global System for Mobile communication), PDC(Personal Digital Cellular), PHS(Personal Handyphone System), PDA(Personal Digital Assistant), IMT(International Mobile Telecommunication)-2000, CDMA(Code Division Multiple Access)-2000, W-CDMA(W-Code Division Multiple Access), Wibro(Wireless Broadband Internet) 단말, 스마트폰(Smartphone), 스마트패드(SmartPad), 태블릿 PC등과 같은 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있다.
콘텐츠 제공 서버(150)는 위치 정보에 매핑된 다양한 콘텐츠, 예컨대 위치 정보에 해당하는 맛집 정보, 할인 정보, 위치 정보에 해당하는 업체에서 제공하는 음식 정보 등과 같은 다양한 콘텐츠가 저장되며, 위치 정보를 이용한 모바일 단말(100)의 콘텐츠 요청에 따라 이에 대한 응답으로 위치 정보에 매핑된 콘텐츠를 모바일 단말(100)에 제공할 수 있다.
인덱스 제공 서버(160)는 다양한 콘텐츠, 예컨대 시각적 콘텐츠, 위치(지역)에 대한 시각적 콘텐츠, 음식 관련 시각적 콘텐츠 등에 대한 고유 인덱스 정보(특징 정보)를 저장 및 관리할 수 있다.
또한, 인덱스 제공 서버(160)는 시각적 콘텐츠에 대한 정보 또는 위치 정보를 이용한 고유 인덱스 정보의 요청을 모바일 단말(100)로부터 수신하며, 수신한 요청에 대한 응답으로 시각적 콘텐츠에 대한 정보 또는 위치 정보에 대한 고유 인덱스 정보를 모바일 단말(100)에 전송할 수 있다.
복수의 비콘 송신기(130)는 근거리 무선 통신망(120)에 연결되어 프레임 데이터를 포함한 비콘 신호 또는 위치 정보를 포함한 비콘 신호를 브로드캐스팅할 수 있다. 특히, 본 발명의 실시예에 따른 복수의 비콘 송신기(130)는 위치 정보에 대한 고유 식별 정보를 갖고 미리 설정된 변동 패턴으로 고주파 대역의 사운드 신호, 예컨대 음파를 발생시키는 방식으로 사운드 신호에 해당하는 비콘 신호를 브로드캐스팅할 수 있다.
상기와 같은 사운드 신호에 해당하는 비콘 신호를 수신한 모바일 단말(100)의 시각적 콘텐츠의 애노테이션 장치(110)는 비콘 신호에 대응하는 고유 식별 정보 및 모바일 단말(100)의 고유 정보를 콘텐츠 제공 서버(150)에 전송하며, 콘텐츠 제공 서버(150)는 고유 식별 정보에 해당하는 위치 정보를 기반으로 콘텐츠를 모바일 단말(100)에 제공할 수 있다.
상기와 같은 모바일 단말(100) 내 시각적 콘텐츠의 애노테이션 장치(110)의 세부 구성 및 동작에 대해 도 2 및 도 3을 참조하여 설명한다.
도 2는 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치(110)의 세부 구성을 도시한 블록도이며, 도 3은 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치(110)에 의해 제공되는 비주얼 브라우저를 설명하기 위한 도면이다.
도 2에 도시된 바와 같이, 시각적 콘텐츠의 애노테이션 장치(110)는 영상 촬영부(200), 시각적 콘텐츠 획득부(210), 비콘 신호 수신부(220), 애노테이션 정보 생성부(230) 및 시각적 콘텐츠 저장부(240) 등을 포함할 수 있다.
영상 촬영부(200)는 영상 촬영에 따른 카메라의 조작 상태 정보를 기초로 생성한 영상 촬영 범위 정보를 객체 정보 획득부(230)에 제공할 수 있다. 구체적으로, 영상 촬영부(200)는 카메라의 조작 상태인 줌, 틸트 등을 기초하여 영상이 촬영된 영역 정보인 영상 촬영 범위 정보를 생성한 후 이를 애노테이션 정보 생성부(230)에 제공할 수 있다.
시각적 콘텐츠 획득부(210)는 모바일 단말(100)에서 시각적 콘텐츠를 획득한 후 이를 모바일 단말(100)의 표시 장치, 예컨대 터치스크린(300) 상에 디스플레이할 수 있다. 구체적으로, 시각적 콘텐츠 획득부(210)는 모바일 단말(100) 내 실행 가능한 형태로 기록매체에 저장된 비주얼 브라우저의 실행을 통해 시각적 콘텐츠와 비콘 신호 수신부(220)의 동작을 제어하기 위한 제어 인터페이스(310)를 포함한 화면을 도 3에 도시된 바와 같이 모바일 단말(100)의 터치스크린(300) 상에 디스플레이할 수 있다.
*본 발명의 실시예에서 제어 인터페이스(310)는 시각적 콘텐츠와 오버랩 되어 터치스크린 상에 디스플레이될 수 있다.
한편, 본 발명의 실시예에 따른 비주얼 브라우저는 모바일 단말(100)의 영상 촬영부(200), 예컨대 카메라와 연동되어 실행될 수 있다. 구체적으로, 모바일 단말(100)의 영상 촬영부(200)에서 특정 영상이 촬영됨에 따라 비주얼 브라우저는 촬영된 영상을 시각적 콘텐츠로 설정함과 더불어 시각적 콘텐츠 내 제어 인터페이스(310)를 포함한 화면을 모바일 단말(100)의 터치스크린(300) 상에 디스플레이할 수 있다.
또한, 제어 인터페이스(310)의 조작, 예컨대 터치에 따라 비콘 신호 수신부(220)는 실행되어 모바일 단말(100)의 위치에서 기 설정된 반경 내로 브로드캐스팅되는 비콘 신호를 수신할 수 있다. 구체적으로, 비콘 신호 수신부(220)는 제어 인터페이스(310)의 조작에 따라 기 설정된 반경 내 위치한 비콘 송신기(130)에서 브로드캐스팅되는 비콘 신호를 수신하며, 수신한 비콘 신호를 애노테이션 정보 생성부(230)에 제공할 수 있다.
본 발명의 실시예에서 비콘 신호 수신부(220)는 블루투스 LE, 적외선 통신 모듈 및 와이파이 모듈 중 어느 하나일 수 있다.
애노테이션 정보 생성부(230)는 비콘 신호 수신부(220)를 통해 수신한 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호를 선택하며, 선택한 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 애노테이션 정보를 생성할 수 있다.
또한, 애노테이션 정보 생성부(230)는 비콘 신호 수신부(220)를 통해 수신한 비콘 신호 중 영상 촬영 범위에 해당하는 영역에 위치한 비콘 송신기(130)로부터 브로드캐스팅되는 비콘 신호만을 선택하며, 선택한 비콘 신호를 기반으로 애노테이션 정보를 생성할 수 있다.
이를 위하여 애노테이션 정보 생성부(230)는 선택 모듈(232) 및 정보 생성 모듈(234)을 포함할 수 있다.
선택 모듈(232)은 수신한 적어도 하나 이상의 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호만을 선택하여 정보 생성 모듈(234)에 출력할 수 있다.
또한, 선택 모듈(232)은 수신한 비콘 신호, 즉 위치 정보를 갖는 비콘 신호 중 영상 촬영 범위 정보에 포함된 위치 정보를 갖는 비콘 신호만을 선택하여 정보 생성 모듈(234)에 출력할 수 있다.
정보 생성 모듈(234)은 선택 모듈(232)로부터 제공받은 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 적어도 하나 이상의 애노테이션 정보를 생성할 수 있다. 구체적으로, 정보 생성 모듈(234)은 선택 모듈(232)로부터 제공받은 비콘 신호의 분석을 통해 프레임 데이터를 추출한 후 추출한 프레임 데이터를 기반으로 시각적 콘텐츠에 대한 애노테이션 정보를 생성하거나 비콘 신호 내 위치 정보를 이동 통신망(140)을 통해 콘텐츠 제공 서버(150)에 전송하여 콘텐츠를 요청한 후 이에 대한 응답으로 수신한 콘텐츠에 대한 분석을 통해 하나 이상의 애노테이션 정보를 생성할 수 있다.
한편, 애노테이션 정보 생성부(230)는 시각적 콘텐츠 분석 모듈(236) 및 접속 모듈(238)을 더 포함할 수 있다.
시각적 콘텐츠 분석 모듈(236)은 시각적 콘텐츠에 대한 객체 분석을 통해 검색용 정보를 생성하며, 생성한 검색용 정보를 접속 모듈(238)을 통해 이동 통신망(140)에 연결된 인덱스 제공 서버(160)에 전송하여 시각적 콘텐츠 내 객체에 대한 기본 인덱스 정보를 요청하며, 이에 대한 응답으로 기본 인덱스 정보를 수신하여 정보 생성 모듈(234)에 제공할 수 있다.
정보 생성 모듈(234)은 시각적 콘텐츠 분석 모듈(236)로부터 제공받은 기본 인덱스 정보를 이용하여 생성한 적어도 하나 이상의 애노테이션 정보에서 시각적 콘텐츠에 매칭될 애노테이션 정보를 선택하며, 선택한 애노테이션 정보를 시각적 콘텐츠 저장부(240)에 제공할 수 있다.
시각적 콘텐츠 저장부(240)는 선택한 애노테이션 정보 또는 생성한 애노테이션 정보를 시각적 콘텐츠에 매칭시킨 후 이를 검색용 데이터베이스 서버(170)에 전송하여 저장할 수 있다.
상기와 같은 구성을 갖는 시각적 콘텐츠의 애노테이션 장치(110)가 동작하는 과정에 대해 도 4를 참조하여 설명한다.
도 4는 본 발명의 실시예에 따른 시각적 콘텐츠의 애노테이션 장치(110)가 시각적 콘텐츠에 애노테이션 정보를 매칭하여 저장하는 과정을 도시한 흐름도이다.
도 4에 도시된 바와 같이, 먼저 영상 촬영부(200)에 의해 영상이 촬영됨에 따라 시각적 콘텐츠 획득부(210)는 비주얼 브라우저의 실행을 통해 촬영된 영상을 시각적 콘텐츠로 하며, 제어 인터페이스(310)를 포함한 화면을 터치스크린(300) 상에 제공한다(S400, S402).
그런 다음, 제어 인터페이스(310)가 조작되면(S404), 비콘 신호 수신부(220)는 기 설정된 반경 내로 브로드캐스팅되는 비콘 신호를 수신한다(S406). 이때, 비콘 신호 수신부(220)는 기 설정된 값 이상의 신호 세기를 갖는 비콘 신호만을 수신하여 애노테이션 정보 생성부(230)에 제공한다.
이후, 애노테이션 정보 생성부(230)는 비콘 신호 내 프레임 데이터 또는 비콘 신호 내 위치 정보를 기반으로 복수의 애노테이션 정보를 생성한다(S408). 구체적으로, 애노테이션 정보 생성부(230)는 위치 정보에 대응하는 고유 식별 정보를 이동 통신망(140)에 연결된 콘텐츠 제공 서버(150)에 전송하여 콘텐츠를 요청하고, 요청에 대한 응답으로 수신한 콘텐츠의 분석을 통해 애노테이션 정보를 생성하거나 프레임 데이터의 분석을 통해 애노테이션 정보를 생성할 수 있다.
그리고 나서, 애노테이션 정보 생성부(230)는 시각적 콘텐츠의 객체 분석을 통해 객체에 대한 검색용 정보를 생성하며(S410), 생성한 검색용 정보를 이동 통신망(140)에 연결된 인덱스 제공 서버(160)에 전송하여 기본 인덱스 정보를 수신한다(S412).
이후, 애노테이션 정보 생성부(230)는 기본 인덱스 정보를 기초하여 복수의 애노테이션 정보에서 시각적 콘텐츠에 적용될 애노테이션 정보를 선택하며(S414), 선택한 애노티에션 정보를 시각적 콘텐츠 저장부(240)에 제공한다.
이에 따라, 시각적 콘텐츠 저장부(240)는 시각적 콘텐츠에 제공받은 애노테이션 정보를 매칭시켜 매칭 데이터를 생성하며(S416), 생성한 매칭 데이터를 검색용 데이터베이스 서버(170)에 전송하여 저장한다(S418).
상술한 바와 같은 시각적 콘텐츠에 애노테이션 정보를 매칭하여 저장하는 방법은 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
[부호의 설명]
100 : 모바일 단말
110 : 애노테이션 장치
120 : 근거리 무선 통신망
130 : 비콘 송신기
140 : 이동 통신망
150 : 콘텐츠 제공 서버
160 : 인덱스 제공 서버
170 : 검색용 데이터베이스 서버
200 : 영상 촬영부
210 : 시각적 콘텐츠 획득부
220 : 비콘 신호 수신부
230 : 애노테이션 정보 생성부
240 : 시각적 콘텐츠 저장부
무

Claims (12)

  1. 시각적 콘텐츠를 획득하는 시각적 콘텐츠 획득부와,
    상기 시각적 콘텐츠를 획득한 모바일 단말의 위치를 기준으로 기 설정된 반경 내에서 발생되는 적어도 하나 이상의 비콘 신호를 수신하는 비콘 신호 수신부와,
    상기 비콘 신호의 분석을 통해 상기 시각적 콘텐츠에 대한 적어도 하나 이상의 애노테이션 정보를 생성하는 애노테이션 정보 생성부와,
    상기 생성한 애노테이션 정보와 상기 시각적 콘텐츠를 매칭시켜 검색용 데이터베이스 서버에 저장하는 시각적 콘텐츠 저장부를 포함하는 시각적 콘텐츠의 애노테이션 장치.
  2. 제1항에 있어서,
    상기 애노테이션 정보 생성부는,
    상기 수신한 적어도 하나 이상의 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호를 선택하는 선택 모듈과,
    상기 선택 모듈에 의해 선택된 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 적어도 하나 이상의 애노테이션 정보를 생성하는 정보 생성 모듈을 포함하는 시각적 콘텐츠의 애노테이션 장치.
  3. 제2항에 있어서,
    상기 정보 생성 모듈은,
    상기 비콘 신호 내 위치 정보를 콘텐츠 제공 서버에 전송하여 상기 위치 정보에 대응하는 콘텐츠를 수신하며, 상기 수신한 콘텐츠의 분석을 통해 하나 이상의 애노테이션 정보를 생성하는 시각적 콘텐츠의 애노테이션 장치.
  4. 제2항에 있어서,
    상기 애노테이션 정보 생성부는,
    이동 통신망을 통해 인덱스 제공 서버와 상기 애노테이션 장치를 연결시키는 접속 모듈과,
    상기 시각적 콘텐츠에 대한 객체 분석을 통해 검색용 정보를 생성하며, 상기 생성한 검색용 정보를 상기 인덱스 제공 서버에 전송하여 상기 시각적 콘텐츠에 대한 기본 인덱스 정보를 요청하여 수신하는 시각적 콘텐츠 분석 모듈을 포함하며,
    상기 정보 생성 모듈은,
    상기 기본 인덱스 정보를 기반으로 상기 애노테이션 정보 중 적어도 하나 이상을 선택하는 시각적 콘텐츠의 애노테이션 장치.
  5. 제1항에 있어서,
    상기 시각적 콘텐츠 획득부는 상기 모바일 단말 내 실행 가능한 형태로 기록매체에 저장된 비주얼 브라우저의 실행을 통해 상기 시각적 콘텐츠와 상기 비콘 신호 수신부의 동작을 제어하기 위한 제어 인터페이스를 포함한 화면을 상기 모바일 단말에 디스플레이하며,
    상기 비콘 신호 수신부는,
    상기 제어 인터페이스의 조작에 따라 동작하여 상기 비콘 신호를 수신하는 시각적 콘텐츠의 애노테이션 장치.
  6. 제5항에 있어서,
    상기 시각적 콘텐츠 획득부는, 상기 모바일 단말 내 영상 촬영부와 연동되어 상기 비주얼 브라우저를 실행시켜 상기 영상 촬영부에 의해 촬영된 영상을 시각적 콘텐츠로 설정하여 상기 화면을 상기 모바일 단말에 디스플레이하는 시각적 콘텐츠의 애노테이션 장치.
  7. 시각적 콘텐츠를 획득하여 모바일 단말에 표시하는 단계와,
    비콘 신호 수신부의 동작을 통해 상기 시각적 콘텐츠를 획득한 모바일 단말의 위치를 기준으로 기 설정된 반경 내에서 발생되는 적어도 하나 이상의 비콘 신호를 수신하는 단계와,
    상기 비콘 신호 내 데이터의 분석을 통해 상기 시각적 콘텐츠에 대한 적어도 하나 이상의 애노테이션 정보를 생성하는 단계와,
    상기 생성한 애노테이션 정보와 상기 시각적 콘텐츠를 매칭시켜 검색용 데이터베이스 서버에 저장하는 단계를 포함하는 시각적 콘텐츠의 애노테이션 방법.
  8. 제7항에 있어서,
    상기 모바일 단말은 실행 가능한 형태로 기록매체에 저장된 비주얼 브라우저를 더 포함하며,
    상기 표시하는 단계는,
    상기 비주얼 브라우저의 실행을 통해 상기 시각적 콘텐츠와 상기 비콘 신호 수신부의 동작을 제어하기 위한 제어 인터페이스를 포함한 화면을 상기 모바일 단말에 표시하는 단계를 포함하며,
    상기 비콘 신호를 수신하는 단계는,
    상기 제어 인터페이스의 조작에 따라 상기 비콘 신호를 수신하는 시각적 콘텐츠의 애노테이션 방법.
  9. 제8항에 있어서,
    상기 표시하는 단계는,
    상기 모바일 단말 내 영상 촬영부에서 영상을 촬영함에 따라 상기 비주얼 브라우저를 실행시키는 단계와,
    상기 영상 촬영부에 의해 촬영된 영상을 시각적 콘텐츠로 설정한 후 상기 비주얼 브라우저를 이용하여 상기 시각적 콘텐츠와 상기 제어 인터페이스를 상기 모바일 단말에 표시하는 단계를 포함하는 시각적 콘텐츠의 애노테이션 방법.
  10. 제7항에 있어서,
    상기 애노테이션 정보를 생성하는 단계는,
    상기 수신한 적어도 하나 이상의 비콘 신호 중 프레임 데이터 또는 위치 정보를 포함한 비콘 신호를 선택하는 단계와,
    상기 선택된 비콘 신호 내 프레임 데이터 또는 위치 정보를 기반으로 적어도 하나 이상의 애노테이션 정보를 생성하는 단계를 포함하는 시각적 콘텐츠의 애노테이션 방법.
  11. 제10항에 있어서,
    상기 애노테이션 정보를 생성하는 단계는,
    상기 비콘 신호 내 위치 정보를 콘텐츠 제공 서버에 전송하는 단계와,
    상기 콘텐츠 제공 서버로부터 상기 위치 정보에 매칭된 콘텐츠를 수신하는 단계와,
    상기 수신한 콘텐츠의 분석을 통해 적어도 하나 이상의 애노테이션 정보를 생성하는 단계를 포함하는 시각적 콘텐츠의 애노테이션 방법.
  12. 제10항에 있어서,
    상기 애노테이션 정보를 생성하는 단계는,
    상기 시각적 콘텐츠에 대한 객체 분석을 통해 검색용 정보를 생성하는 단계와,
    상기 생성한 검색용 정보를 인덱스 제공 서버에 전송하여 상기 시각적 콘텐츠에 대한 기본 인덱스 정보를 요청하여 수신하는 단계와,
    상기 기본 인덱스 정보를 기반으로 상기 애노테이션 정보 중 적어도 하나 이상을 선택하여 상기 시각적 콘텐츠에 적용될 애노테이션 정보를 생성하는 단계를 포함하는 시각적 콘텐츠의 애노테이션 방법.
PCT/KR2016/001491 2016-02-02 2016-02-15 시각적 콘텐츠의 애노테이션 장치 및 방법 WO2017135489A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0012688 2016-02-02
KR1020160012688A KR101816057B1 (ko) 2016-02-02 2016-02-02 시각적 콘텐츠의 애노테이션 장치 및 방법

Publications (1)

Publication Number Publication Date
WO2017135489A1 true WO2017135489A1 (ko) 2017-08-10

Family

ID=59500357

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/001491 WO2017135489A1 (ko) 2016-02-02 2016-02-15 시각적 콘텐츠의 애노테이션 장치 및 방법

Country Status (2)

Country Link
KR (1) KR101816057B1 (ko)
WO (1) WO2017135489A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100023616A (ko) * 2008-08-22 2010-03-04 한국과학기술원 무선 네트워크 시스템, 무선 네트워크 통신 방법 및 무선 네트워크 통신장치
KR20120084164A (ko) * 2011-01-19 2012-07-27 주식회사 시공테크 위치인식을 이용한 모바일 단말기에서 콘텐츠를 이용하는 방법 및 시스템
KR20130120417A (ko) * 2012-04-25 2013-11-04 장인지 무선 기기가 네트워크 접속 장비를 이용하여 현재 위치한 공간에 매핑된 정보를 액세스하는 방법 및 네트워크 접속 장비를 이용하여, 현재 위치한 공간에 매핑된 정보를 액세스하는 장치
JP2014149832A (ja) * 2013-01-31 2014-08-21 Samsung Electronics Co Ltd 客体表示方法、客体提供方法及びそのためのシステム
KR101570117B1 (ko) * 2014-06-03 2015-11-18 한승훈 시각적 콘텐츠 기반 정보 입력 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100023616A (ko) * 2008-08-22 2010-03-04 한국과학기술원 무선 네트워크 시스템, 무선 네트워크 통신 방법 및 무선 네트워크 통신장치
KR20120084164A (ko) * 2011-01-19 2012-07-27 주식회사 시공테크 위치인식을 이용한 모바일 단말기에서 콘텐츠를 이용하는 방법 및 시스템
KR20130120417A (ko) * 2012-04-25 2013-11-04 장인지 무선 기기가 네트워크 접속 장비를 이용하여 현재 위치한 공간에 매핑된 정보를 액세스하는 방법 및 네트워크 접속 장비를 이용하여, 현재 위치한 공간에 매핑된 정보를 액세스하는 장치
JP2014149832A (ja) * 2013-01-31 2014-08-21 Samsung Electronics Co Ltd 客体表示方法、客体提供方法及びそのためのシステム
KR101570117B1 (ko) * 2014-06-03 2015-11-18 한승훈 시각적 콘텐츠 기반 정보 입력 방법

Also Published As

Publication number Publication date
KR101816057B1 (ko) 2018-01-30
KR20170091877A (ko) 2017-08-10

Similar Documents

Publication Publication Date Title
KR100659253B1 (ko) 휴대용 단말기에서 블루투스 장치 검색 방법
WO2016068550A1 (en) Method of changing profile using identification module and electronic device implementing same
WO2016036025A1 (en) Method and apparatus for controlling operation based on distance between transmission device and reception device
WO2012060646A1 (en) Method and apparatus for connecting wireless network in a digital device
KR20160089270A (ko) 연결방법, 장치, 프로그램 및 기록매체
WO2017082638A1 (en) Apparatus and method for measuring positions of devices
CN102801721A (zh) 设备连接方法、电子设备和服务器
JP2016535523A (ja) ネットワーク接続方法、装置、プログラム、及び記録媒体
WO2013154406A1 (en) Method and system for establishing wireless local area network link between portable terminals
WO2016013767A1 (ko) 근거리 무선 장치를 이용한 이동 단말기들 사이의 커뮤니케이션 서비스 제공 방법
WO2013165205A1 (en) Method and system for managing module identification information, and device supporting the same
JP6080561B2 (ja) 生成機器、制御方法、及びプログラム
KR101684203B1 (ko) 스트림 미디어 데이터를 방송하기 위한 방법 및 장치
WO2014088146A1 (ko) Ｓｎｓ를 이용한 사물통신 시스템, 방법 및 그 사물통신 서버
WO2013109024A1 (en) Method and apparatus for establishing wireless local area network link between portable terminals
EP3138306A1 (en) Electronic device and method for providing emergency video call service
US20180173746A1 (en) Communication Supporting Device, Method, and Comuper Program
WO2016028113A1 (en) Electronic device and call-forwarding control method thereof
WO2014038790A1 (ko) 채팅서비스와 응용서비스를 연결하는 방법 및 시스템
CN104537526A (zh) 数值转移的方法、终端及装置
WO2017135490A1 (ko) 시각적 콘텐츠의 객체 인식 장치 및 방법
WO2017135489A1 (ko) 시각적 콘텐츠의 애노테이션 장치 및 방법
CN106454916A (zh) 无线局域网连接方法及装置
WO2023027389A1 (ko) 콘텐츠 제공 장치 및 그 방법
KR102025363B1 (ko) 휴대형 단말기

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16889468

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 11.12.2018)

122 Ep: pct application non-entry in european phase

Ref document number: 16889468

Country of ref document: EP

Kind code of ref document: A1