WO2018043848A1 - 위치 제공 방법 및 이를 위한 장치 - Google Patents
위치 제공 방법 및 이를 위한 장치 Download PDFInfo
- Publication number
- WO2018043848A1 WO2018043848A1 PCT/KR2017/001463 KR2017001463W WO2018043848A1 WO 2018043848 A1 WO2018043848 A1 WO 2018043848A1 KR 2017001463 W KR2017001463 W KR 2017001463W WO 2018043848 A1 WO2018043848 A1 WO 2018043848A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- location
- user
- facilities
- buildings
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W64/00—Locating users or terminals or network equipment for network management purposes, e.g. mobility management
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30181—Earth observation
- G06T2207/30184—Infrastructure
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/09—Recognition of logos
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
Definitions
- the present invention relates to a location providing service, which is configured to calculate a current location of a user of a terminal device by analyzing voice information or image information through a location providing device installed in a server or a terminal device, and display the same on a map DB. It relates to a providing method and an apparatus therefor.
- the mobile communication terminal As an example, it has been implemented to use various functions such as data communication, taking a picture or video using a camera, playing music or a video file, playing a game, watching a broadcast, etc., in addition to the basic voice communication function. .
- a terminal device As a representative example, there are a location service using a personal computer and an electronic phone.
- the positioning is a technology for determining the exact location of the service request terminal device, such as a satellite navigation system for receiving a signal from a GPS satellite to calculate the current location of the user, or a method based on a cell ID.
- positioning in the room may be installed by a separate device such as beacon to determine the location.
- the voice information or image information analysis is performed by a user of a terminal device inputting a voice for a name of a nearby building or facility within a viewing range, or photographing an image including a shape, a signboard, or a logo of the facility.
- a method of providing a location for calculating a current location of a user of a terminal device and a device therefor are provided.
- the present invention does not use GPS or beacons, but uses only voice information or image information through the terminal device, and displays the current location of the user calculated using the location relationship of the user and the building or facility on the map DB.
- the present invention provides a location providing method and a device therefor in which a user can easily grasp his / her location by displaying and providing the terminal device.
- a device for providing a location obtains voice information or image information about a plurality of buildings or facilities existing in a user's field of view based on a user's current location.
- An information processing module for extracting identification information of the plurality of buildings or facilities from the voice information or the image information; Obtaining location information of the plurality of buildings or facilities from the voice information or image information based on the identification information, and taking the current location of the user from the location information in consideration of the location relationship of the plurality of buildings or facilities with the user.
- Calculating position calculating module And a storage module for storing a map DB including identification information and location information of the plurality of buildings or facilities.
- the information processing module converts the voice information into text to extract identification information of the plurality of buildings or facilities, or analyzes the text included in the image information. Identification information of a plurality of buildings or facilities can be extracted.
- the location calculation module may map and display the calculated current location on the pre-stored map DB.
- the position calculating module when the position calculating module calculates the position using the image information, the position calculating module further obtains photographing direction information related to the image information through the information processing module.
- the current position may be calculated by further considering the acquired photographing direction information.
- the location providing method for achieving the above object is the voice information about a plurality of buildings or facilities existing in the viewing range of the user based on the current location of the user or Obtaining image information; Extracting identification information of the plurality of buildings or facilities from the voice information or the image information; Obtaining location information of the plurality of buildings or facilities from the voice information or the image information based on the identification information; And calculating the current location of the user from the location information in consideration of the location relationship of the user with the plurality of buildings or facilities.
- the extracting of the identification information may extract identification information of the plurality of buildings or facilities by converting the voice information into a text.
- the extracting of the identification information may extract identification information of the plurality of buildings or facilities by analyzing a character included in the image information.
- the obtaining of the image information may further include obtaining photographing direction information related to the image information, and calculating the current position may include obtaining the photographing direction information.
- the current position may be calculated in further consideration.
- the method may further include mapping and displaying the calculated current location on a pre-stored map DB.
- a computer program for executing a location providing method is recorded.
- the present invention does not require a separate infrastructure for positioning the user's current location, and has the effect that the current location can be determined using only the terminal device that the user carries regardless of the GPS shadow area.
- FIG. 1 is a block diagram of a system for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- FIG. 2 is a diagram illustrating a configuration of an apparatus for providing a location based on voice information or image information according to an exemplary embodiment of the present invention.
- FIG. 3 is a diagram illustrating a configuration of a server for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- FIG. 4 is a diagram illustrating a configuration of a terminal device for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- FIG. 5 is a flowchart illustrating a location providing method using voice information in a location providing apparatus according to an exemplary embodiment of the present invention.
- FIG. 6 is a flowchart illustrating a location providing method using image information in a location providing apparatus according to another exemplary embodiment of the present invention.
- FIG. 7 is a flowchart illustrating a method of providing a location using voice information or image information in a server in which a location providing apparatus according to an embodiment of the present invention is installed in a server.
- FIG. 8 is a flowchart illustrating a method of providing a location using voice information or image information in a terminal device by installing the location providing device according to another embodiment of the present invention.
- FIG. 9 is an exemplary view of displaying a current location of a user calculated on a map DB and providing the same through a terminal device according to an embodiment of the present invention.
- FIG. 10 is a diagram illustrating an operating environment of an apparatus for a location providing method according to an exemplary embodiment of the present invention.
- first and second are used to describe various components, and are used only to distinguish one component from another component, and to limit the components. Not used.
- the second component may be referred to as the first component, and similarly, the first component may also be referred to as the second component.
- a component when referred to as being “connected” or “connected” to another component, it means that it may be connected or connected logically or physically. In other words, although a component may be directly connected or connected to other components, it should be understood that other components may exist in the middle, and may be connected or connected indirectly.
- unit for processing at least one function or operation, which may be implemented by hardware or software or a combination of hardware and software.
- FIG. 1 is a block diagram of a system for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- a system for providing a location using voice information or image information includes a server 100 and a terminal device 200 connected through a communication network 300. can do.
- the server 100 is a device of a service provider that provides a current location of a user using voice information or image information according to the present invention
- the terminal device 200 is a map reflecting the current location of the user according to the present invention. Is the device on the user side that is displayed.
- the terminal device 200 performs an operation of transmitting and receiving data for providing a current location of a user in cooperation with the server 100 through the communication network 300.
- the server 100 and the terminal device 200 according to the present invention may be equipped with one or more processors to process functions according to the present invention described below by processing program instructions for executing the method according to the present invention.
- this processor may be a single-threaded processor, and in other implementations, the processor may be a multi-threaded processor.
- the processor is capable of processing instructions stored on memory or storage devices.
- the communication network 300 performs a series of data transmission / reception operations for data transmission and information exchange between the server 100 and the terminal device 200.
- the communication network 300 may be used in various forms of communication network, for example, WLAN (WLAN, Wireless LAN), Wi-Fi (Wi-Fi), Wibro, Wimax (Wimax), high-speed downlink packet access (HSDPA , Wireless communication such as High Speed Downlink Packet Access, or wired Ethernet, xDSL (ADSL, VDSL), HFC (Hybrid Fiber Coax), FTTC (Fiber to The Curb), FTTH (Fiber To The Home) Communication schemes can be used.
- WLAN WLAN, Wireless LAN
- Wi-Fi Wi-Fi
- Wibro Wimax
- Wimax Wimax
- HSDPA Wireless communication such as High Speed Downlink Packet Access
- xDSL ADSL, VDSL
- HFC Hybrid Fiber Coax
- FTTC Wireless to The Curb
- FTTH Fiber To The Home
- the communication network 300 is not limited to the above-described communication method, and may include all types of communication methods well-known or developed in addition to the above-described communication method.
- the terminal device 100 used in the present invention refers to a terminal device capable of transmitting and receiving various data via the communication network 300 according to a user's key operation, and will mainly be a smart phone, but is not limited thereto.
- the mobile device may be any portable device including a voice input function, a communication function, and a photographing function.
- it may be one of a tablet PC, a laptop, a personal digital assistant (PDA), a mobile communication terminal, and the like.
- PDA personal digital assistant
- the terminal device 200 is a terminal for performing voice or data communication using the communication network 300, a memory for storing a browser, a program and a protocol for communicating with the server 100 via the communication network 300,
- the terminal device includes a microprocessor for executing and controlling various programs.
- FIG. 2 is a diagram illustrating a configuration of an apparatus for providing a location based on voice information or image information according to an exemplary embodiment of the present invention.
- the location providing apparatus 400 based on voice information or image information includes an information processing module 410, a location calculation module 420, and a storage module 430. can do.
- the location providing device 400 is a device that receives voice information or image information from a user and informs the user of the current location through analysis of the information.
- the location providing device 400 is implemented in software or hardware to provide the inside of the server 100 or the terminal device 200. Is installed on.
- the server 100 controls all of the calculation of the location, and the calculated current location of the user is determined by the server 100. It may be provided to the terminal device 200 through interworking between the terminal devices 200.
- the location providing device 400 is provided in the terminal device 200 or is provided in the server 100.
- the device 400 may be installed and stored in the terminal device 200, and the location calculation process may be performed by a single operation of the terminal device 200.
- the information processing module 410 In order to calculate the current location of the user of the terminal device 200 through the location providing device 400, the information processing module 410 first receives voice information or image information of a plurality of buildings or facilities from the terminal device 200. do.
- the plurality of buildings or facilities may be, for example, an outdoor building or an indoor shop, a fountain or an escalator.
- the voice information is information on a plurality of buildings or facilities input by a user through the terminal device 200 as voices, and uses the user's voice for a name of a facility or a brand name of a store. The information entered.
- the image information according to another embodiment of the present invention is information on a plurality of buildings or facilities photographed using the terminal device 200, and photographs a signboard including the form, brand name, logo, mark, etc. of the facility. Means photo image.
- the image information may be one image information photographed by including a plurality of buildings or facilities in a single photo, or a plurality of image informations each of which a user photographs a plurality of buildings or facilities within a viewing range at a location. It may be.
- the image information may further include information on a direction in which the image is photographed and transmitted to the information processing module 410.
- an indoor place such as a complex shopping center is described by way of example, but is not limited to indoors.
- the user inputs information about a plurality of buildings or facilities in the user's field of view through the terminal device 200 as a voice or an image at the current location, which is an information processing module 410 of the location providing device 400. Is sent).
- the information according to an embodiment of the present invention may include the brand names and facilities of the coffee shop and the women's wear. It is the voice which inputs the escalator which is a name into the terminal apparatus 200 by nurturing.
- the information according to another embodiment of the present invention is a photographic image of a signboard and an escalator which are taken to show a brand name or a logo of a coffee shop and a women's wear using the terminal device 200 at a current location of the user.
- the information processing module 410 may perform the voice information or the image information. Identification information of the plurality of buildings or facilities is extracted from the same.
- the information processing module 410 is the name of the facility 'escalator' and the brand name 'xxx' of the coffee shop and women's clothing through the analysis of the voice signal from the voice information; Extract 'yyy'
- the voice information is converted into characters of 'escalator', 'xxx', and 'yyy', which can be performed through various voice recognition and conversion techniques.
- the information processing module 410 may analyze the similar images of the shape of the brand logo or the facility and the character analysis of the brand name of the signboard. Through the above identification information is extracted. Extraction of the identification information using the image information may be performed through a known image processing technique.
- the information processing module 410 receives the image information, in addition to the photographed image, the direction information in which the image is photographed may be received together.
- the location calculation module 420 performs overall control of the location providing apparatus 400, and in particular, a user on a map DB using the identification information extracted from the voice information or the image information. It is possible to control an operation related to calculating a current location of and mapping and displaying the current location on a pre-stored map.
- the location calculation module 420 obtains location information of the plurality of buildings or facilities based on the identification information, and considers the location relationship between the plurality of buildings or facilities and a user, and the location Compute the current location of the user from the information.
- the acquired location information of the plurality of buildings or facilities may be represented by address information such as the number of addresses where the buildings or facilities are located or latitude or longitude.
- the meaning of considering the positional relationship between the plurality of buildings or facilities and the user means to consider a location where the plurality of buildings or facilities existing in the viewing range are commonly overlapped at the point where the user is currently located.
- the location calculation module 420 calculates a location that is commonly overlapped as a current location in consideration of the identification information, location information, and the location relationship between the plurality of buildings or facilities in the map DB in the storage module 430.
- the location calculation module 420 may determine the user by considering identification information extracted from the voice information, location information, and location relationship with the user. Calculate the current position of.
- the location information of the places is found on the map DB by obtaining location information such as an address, latitude, and longitude from identification information of the escalator, the xxx coffee shop, and the yyy women's wear.
- location information such as an address, latitude, and longitude from identification information of the escalator, the xxx coffee shop, and the yyy women's wear.
- the escalator, xxx coffee shop, and yyy women's clothing on the map DB finds a specific location on the map DB at a time and calculates it as the user's current location.
- the location calculation module 420 may further include an image in addition to identification information, location information, and positional relationship with the user extracted from the image information.
- the current position of the user is calculated by further considering the photographing shooting direction information.
- the accuracy may be higher than that of calculating the location of the user using voice information.
- the location calculation module 420 maps and displays the calculated current location on a map, and outputs it to the terminal device 200.
- the storage module 430 is a device for storing data.
- the storage module 430 includes a main memory device and an auxiliary memory device, and stores an application program required for a functional operation of the location providing device 400.
- the storage module 430 may largely include a program area and a data area.
- the storage module 430 according to the present invention includes a map DB including identification information and location information of a plurality of buildings or facilities.
- the location providing device 400 is implemented in the form of software or hardware as described above, and is installed in the server 100 or the terminal device 200. If the location providing device 400 is installed in the server 100, the server 100 and the terminal device are provided. If the location providing service is performed by the interworking through the communication network 300 between the 200 and is installed in the terminal device 200, all processes may be directly performed by the terminal device 200.
- the location providing apparatus 400 if the location providing apparatus 400 is installed in the server 100, voice information or image information of the plurality of buildings or facilities input through the terminal device 200 is photographed. Is transmitted to the server 100, the server 100 through the location providing apparatus 400, all processes, such as the analysis of the information and extraction of the identification information and the current location of the user is calculated through this, the server 100 The control unit outputs the current location of the user on the map by mapping it to the terminal device 200 and controls the terminal device 200 to output it.
- the location providing device 400 is installed in the terminal device 200, the location providing device 400 is already installed in the terminal device 200 or is located from the server 100.
- the providing device 400 is downloaded and stored in the terminal device 200, and the user inputs information on a plurality of buildings or facilities by voice or photographs the information using the terminal device 200, the terminal device 200 is provided. All of the above processes are performed, and the current location of the user is displayed on a map and output.
- the present invention is provided by the user through the interworking of the server 100 and the terminal device 200 in which the location providing device 400 is installed or through the terminal device 200 in which the location providing device 400 is installed. You'll be provided with a map of your location so you can easily see where you are.
- FIG. 3 is a diagram illustrating a configuration of a server for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- the server 100 includes a server controller 110, a server communication unit 120, and a server storage unit 130.
- the server communication unit 120 communicates with the terminal device 200 through the communication network 300 to transmit and receive data for providing the current location of the user.
- the server storage unit 130 stores all programs for providing the current location of the user, and in particular, the location providing apparatus 400 implemented in software or hardware form may be stored.
- the server controller 110 controls the execution of the location providing apparatus 400 stored in the server storage 130.
- the server controller 110 may calculate a current location through the location providing device 400 and the calculated current. Controls all processes for transmitting and outputting the map in which the location is displayed to the terminal device 200.
- the terminal apparatus 200 receives voice information or image information of the plurality of buildings or facilities through the terminal device 200, and the plurality of buildings or facilities from the voice information or the image information using the location providing device 400.
- Identification information such as a name, a form, and a brand name, is extracted and its location information is obtained.
- the location information may be represented by an address such as a number of addresses, latitude or longitude.
- the entire process of calculating and mapping the current location of the user on the map DB and displaying it on the map is controlled, and the map in which the current location is displayed is transmitted to the terminal device 200.
- the server 100 receives the image information from the terminal device 200, since the direction information in which the image is taken is further considered when calculating the current position, the user compared to the position calculated by receiving the voice information You will also know the direction you are standing, so you have a higher degree of accuracy with respect to your current location.
- the specification and drawings describe exemplary device configurations, the functional operations and subject matter implementations described herein may be embodied in other types of digital electronic circuitry, or modified from the structures and structural equivalents disclosed herein. It may be implemented in computer software, firmware or hardware, including, or a combination of one or more of them. Implementations of the subject matter described herein relate to one or more computer program products, ie computer program instructions encoded on a program storage medium of tangible type for controlling or by the operation of an apparatus according to the invention. It may be implemented as the above module.
- the computer readable medium may be a machine readable storage device, a machine readable storage substrate, a memory device, a composition of materials affecting a machine readable propagated signal, or a combination of one or more thereof.
- FIG. 4 is a diagram illustrating a configuration of a terminal device for providing a location using voice information or image information according to an exemplary embodiment of the present invention.
- the terminal device 200 includes a control unit 210, a communication unit 220, an input unit 230, a photographing unit 240, a sensor unit 250, a display unit 260, and a storage unit. 270.
- the control unit 210 may be a process device that drives an operating system (OS) and each component.
- OS operating system
- the location providing device 400 is installed in the server 100, and in another embodiment of the present invention, the location providing device 400 is already installed in the terminal device 200 or the server 100 is provided. Since the location providing apparatus 400 is stored in the reference numeral, the function of the controller 210 may be different.
- control unit 210 transmits the voice information of the plurality of buildings or facilities input through the input unit 230 or the image information photographed through the photographing unit 240 to the communication unit 220. Through the transmission to the server 100, and receiving a map indicating the current location from the server 100 can be controlled to display on the display unit 260.
- the control unit 210 downloads the location providing apparatus 400 from the server 100 and stores the location providing apparatus 400 in the storage unit 270, and the terminal device 200 via the location providing apparatus 400 is configured to store the location providing apparatus 400.
- the whole process can be controlled to calculate the current position directly.
- the communication unit 220 communicates with the server 100 through the communication network 300 and performs a function for transmitting and receiving data for calculating and providing a current location.
- the communication unit 220 may include at least one of a wireless communication module (not shown) and a wired communication module (not shown).
- the wireless communication module is configured to transmit and receive data according to a wireless communication method, and when the terminal device 200 performs wireless communication, any one of a wireless network communication module, a wireless LAN communication module, and a wireless fan communication module may be used. To transmit and receive data to and from the server 100.
- the wired communication module is for transmitting and receiving data by wire.
- the wired communication module may be connected to the communication network 300 through a wired line to transmit and receive data to and from the server 100.
- the input unit 230 receives various information such as numeric and text information, and transmits a signal input in connection with various function settings and function control of the terminal device 200 to the controller 210 or the server 100.
- the input unit 230 may include at least one of a keypad and a touch pad generating an input signal according to a user's touch or manipulation.
- the input unit 230 may be configured in the form of a single touch panel (or touch screen) together with the display unit 260 to simultaneously perform input and display functions.
- the input unit 230 may be any type of input means that may be developed in the future, in addition to an input device such as a keyboard, a keypad, a mouse, a joystick, and the like.
- the input unit 230 since the input unit 230 according to the present embodiment includes a function for inputting voice information, the user may input information about a plurality of buildings or facilities by using the input unit 230. .
- a user may enter a brand name by voice using the name 'Escalator' for the escalator, which is a facility that is within the field of view at the location where the user is currently located, 'xxx coffee shop' for the store, and 'yyy women's clothing'. Can be.
- the photographing unit 240 photographs a plurality of buildings or facilities.
- the user of the terminal device 200 may capture a single image such that a plurality of buildings or facilities that enter the viewing range at the current location through the photographing unit 240 are included in one image, and the shooting direction angle is considered. You can also shoot multiple images.
- Escalators, coffee shops, and women's clothing stores can be shot in one image to be included in one image, or three photos can be taken for each facility and store at the current location.
- the sensor unit 250 may detect a direction angle of the terminal device 200, and is used to detect an angle with respect to a shooting direction of an image to be photographed in an embodiment of the present disclosure.
- the sensor unit 250 may further consider the shooting direction angle, such as how many degrees the escalator is located from the current position of the user, it is more accurate than calculating the current position using voice information. It can increase.
- the photographing direction information detected by the sensor unit 250 is considered together when calculating the position using the image information.
- the display unit 260 displays information about a series of operation states and operation results that occur during the functioning of the terminal device 200.
- the display unit 260 may display a menu of the terminal device 200 and user data input by the user.
- the display unit 260 may include a liquid crystal display (LCD), an ultra-thin liquid crystal display (TFT-LCD), a light emitting diode (LED), and an organic light emitting diode (OLED, Organic). LED), an active organic light emitting diode (AMOLED, Active Matrix OLED), a Retina display, a flexible display, and a three-dimensional display.
- LCD liquid crystal display
- TFT-LCD ultra-thin liquid crystal display
- LED light emitting diode
- OLED organic light emitting diode
- LED an active organic light emitting diode
- AMOLED Active Matrix OLED
- Retina display a display
- the display unit 260 may perform some or all of the functions of the input unit 230.
- the display unit 260 is provided with a location providing apparatus 400 under the control of the map or the controller 210 displaying the current location of the user received from the server 100 under the control of the controller 210. ), You can display a map showing the user's current location, calculated using.
- the user can easily check his current location on the map.
- the storage unit 270 is a device for storing data, and includes a main memory device and an auxiliary memory device, and stores an application program required for a functional operation of the terminal device 200.
- the storage unit 270 may largely include a program area and a data area.
- the storage unit 270 stores the location providing device 400 for providing the current location of the user using the voice information or image information implemented in the operating system, software or hardware form for booting the terminal device 200. Can be.
- FIG. 5 is a flowchart illustrating a location providing method using voice information in a location providing apparatus according to an exemplary embodiment of the present invention.
- the location providing apparatus 400 receives voice information about a plurality of buildings or facilities from the terminal device 200. That is, it receives a voice of the name 'escalator' for the facilities, 'xxx coffee shop' and 'yyy women's clothing' for the building or store (s 500).
- the identification information of a plurality of buildings or facilities is extracted through various types of voice analysis technologies (s 502), and through this, identification information such as 'escalator', which is the name of the facility, or 'xxx', 'yyy', which is the brand name. Is extracted.
- the location information of the plurality of buildings or facilities is obtained using the identification information (S504).
- the location information may be an address such as a number of addresses or may be expressed in latitude or longitude.
- the location providing apparatus 400 finds a location where a plurality of voice-input buildings or facilities are commonly overlapped in consideration of the identification information, location information, and the location relationship between the user, and calculates the current location as a current location (s). 506).
- the part becomes the user's current location.
- the calculated current position is displayed on the map DB and output through the terminal device 200 (s508).
- a process of calculating the current location of the user through the voice information using the location providing apparatus 400 may be performed by the server 100 or the terminal device 200.
- FIG. 6 is a flowchart illustrating a location providing method using image information in a location providing apparatus according to another exemplary embodiment of the present invention.
- the location providing device 400 obtains photographed images of a plurality of buildings or facilities through the terminal device 200 (S600).
- an image taken in the form of 'Escalator' which is a facility seen at the place where the user is currently located, and a sign that includes a brand name or a logo for 'xxx Coffee Shop' and 'yyy Women's Clothing' Acquire.
- the image may be one image photographed to include all three facilities in one image, or may be three images photographed in consideration of the photographing direction.
- the location providing apparatus 400 extracts the form of a facility or a logo image, a character included in a signboard, and the like from the images received through similar image analysis and text analysis using various types of image processing techniques, or the plurality of buildings or Extract identification information about the facility (s602).
- the escalator extracts that the shape of the photographed facility is an escalator through image analysis from the photographed image, and extracts the brand names 'xxx' and 'yyy' through character analysis on the characters included in the photographed signboard. .
- location information of the plurality of buildings or facilities is obtained (s604), and the location information may be an address such as a number of addresses or a latitude or longitude.
- the location providing apparatus 400 calculates the current location of the user by further considering the photographing direction information of the image in addition to the identification information, the location information, and the positional relationship with the user (S606).
- the part where the extracted plurality of buildings or facilities are commonly overlapped on the map DB is used as the current location, but the image capturing angle is further considered when the image is captured through the sensor unit 250 of the terminal device 200. If you are looking at which side of the escalator you are at, and in what direction in the 'xxx coffee shop', in which direction, you can simply find where the facilities are in common. Instead, the user can know where he is standing.
- the accuracy of the current location of the user can be improved more than the embodiment of calculating the current location of the user using only voice information.
- the current location of the user calculated as described above is displayed on the map DB (s608), and the map on which the current location is displayed is output through the terminal device 200 so that the user can easily check.
- FIG. 7 is a flowchart illustrating a method of providing a location using voice information or image information in a server in which a location providing apparatus according to an embodiment of the present invention is installed in a server.
- the location providing device 400 since the location providing device 400 is installed in the server 100, the current location of the user of the terminal device 200 is calculated through interworking between the server 100 and the terminal device 200.
- information about a plurality of buildings or facilities that enter the field of view at the current location of the user through the terminal device 200 is input by voice or photographed as an image (s 700).
- the voice information or the image information input or photographed through the terminal device 200 is transmitted to the server 100 to calculate the position (s702).
- the transmitted information is image information
- the information may be transmitted including the direction information in which the image is photographed.
- the server 100 calculates the current location of the user by analyzing the voice information or the image information using the location providing apparatus 400 installed in the server.
- voice information or image information is analyzed through various voice analysis techniques and image processing techniques (s 704), and identification information about the plurality of buildings or facilities is extracted from the analyzed information (s 706).
- the identification information means a name of a facility, etc. falling within a user's field of view, a name or a logo included in a sign of a store or a building.
- location information of the plurality of facilities is obtained (s708).
- the location information may be the address of a building or a facility, or information expressed by latitude, longitude, and the like.
- the extracted or obtained information is used to find a portion where the plurality of buildings or facilities overlap each other on the map DB and calculate the calculated portion as the current location of the user (s710).
- the calculated current location of the user is mapped and displayed on the map DB (s 712), and the map in which the current location is displayed is transmitted to the terminal device 200 (s 714).
- the terminal device 200 outputs the map through the display unit 260 (s 716), and thus the user can easily check his / her location using the terminal device 200.
- FIG. 8 is a flowchart illustrating a method of providing a location using voice information or image information in a terminal device by installing the location providing device according to another embodiment of the present invention.
- the location providing device 400 may be implemented by being installed in the terminal device 200 in software or hardware form, or by downloading the location providing device 400 implemented in software from the server 100. Can be stored at 200. Therefore, the terminal device 200 controls all the processes of the position calculation.
- identification information such as names, brand names, logos, etc. of the plurality of buildings or facilities are extracted by analyzing the voice information or the image information using various voice analysis techniques or image processing techniques (s802).
- location information of the plurality of buildings or facilities is obtained using the extracted identification information.
- a location where a plurality of buildings or facilities are commonly overlapped on the map DB is found and calculated as the current location of the user (s808).
- the terminal device 200 detects a photographing direction when the image is captured, and thus the accuracy of the current position may be further increased as compared with the case of using the voice information.
- the calculated current location is mapped and displayed on a map DB (s 810), and the terminal device 200 outputs it to the user via the display unit 260 (s 812).
- FIG. 9 is an exemplary view of displaying a current location of a user calculated on a map DB and providing the same through a terminal device according to an embodiment of the present invention.
- the user of the terminal device 200 may confirm that the user is located in the circle indicated by the dotted line through the terminal device 200.
- the user inputs the information of a plurality of buildings or facilities that enter the field of view from the location where the user stands, in this case, voice information on the terminal device 200 for 'o cosmetics' and 'o alcohol' or a signboard of the shop.
- the image is taken using the terminal device 200 to be seen.
- the input voice information or the captured image information is analyzed by the location providing apparatus 400 of the server 100 or the terminal device 200 and extracts the identification information under the names 'o cosmetics' and 'o liquor'. By using this, location information is obtained.
- a portion where the information is commonly overlapped on the map DB is calculated as the current location of the user.
- the part containing ' ⁇ cosmetics' and ' ⁇ liquor' is commonly found on the map DB, and the corresponding part is calculated as the current location of the user, and is mapped and displayed on the map.
- the map in which the current location is displayed is output to the user through the display unit 260 of the terminal device 200.
- the accuracy of the current user's position is higher than that in the case of using the voice information.
- FIG. 10 is a diagram illustrating an operating environment of an apparatus for a location providing method according to an exemplary embodiment of the present invention.
- program modules include routines, programs, objects, components, data structures, etc. that perform particular tasks or implement particular abstract data types.
- Computer-executable instructions, associated data structures, and program modules represent examples of program code means for carrying out the operations of the invention disclosed herein.
- an exemplary computing system implementing the present invention connects various system components including processing unit 11, system memory 12, and system memory 12 to the processing unit 11. And a computing device in the form of a system bus 10 that includes a system bus 10.
- Processing unit 11 may execute computer-executable instructions designed to implement features of the present invention.
- System bus 10 may be any of several types of bus structures, including a local bus, a peripheral bus, and a memory bus or memory controller using any of a variety of bus architectures.
- the system memory 12 includes a read only memory (ROM) 12a and a random access memory (RAM) 12b.
- ROM read only memory
- RAM random access memory
- BIOS basic input / output system
- ROM 12a which includes basic routines that help transfer information between components within the computing system, such as during startup, can generally be stored in ROM 12a.
- the computing system may comprise storage means, for example, a hard disk drive 15 that reads information from or writes information to a hard disk, information in or reads from a magnetic disk.
- the hard disk drive 15, the magnetic disk drive 16, and the optical disk drive 17 are each configured by a hard disk drive interface 18, a magnetic disk drive-interface 19, and an optical drive interface 20. It is connected to the bus 10.
- the computing system may further include an external memory 21 as a storage means.
- the external memory 21 may be connected to the system bus 10 through the input / output interface 24.
- the drive described above and associated computer readable medium read and written by the drive provide for nonvolatile storage of computer executable instructions, data structures, program modules, and other data.
- the exemplary environment described herein illustrates a hard disk 15, a magnetic disk 16, and an optical disk 17, but in addition to magnetic cassettes, flash memory cards, DVDs, Bernoulli cartridges, RAM Other types of computer readable media may be used to store data, including, ROM, and the like.
- One or more program modules including an operating system 13b, one or more application programs 13c, other program modules 13d, and program data 13c, which are loaded and executed by the processing unit 11.
- the program code means may be stored in the hard disk 15, the magnetic disk 16, the optical disk 17, the ROM 12a or the RAM 12b.
- the icon-based article transaction processing method according to the present invention is implemented as a program module in at least one of the hard disk 15, the magnetic disk 16, the optical disk 17, the ROM 12a or the RAM 12b. After being stored, it can be loaded and executed by the processing unit 11.
- the computing system may receive commands and information from the user through other input devices 22 such as keyboards, pointing devices, microphones, joy sticks, game pads, scanners, and the like.
- the input devices 22 may be connected to the processing unit 11 via an input / output interface 24 connected to the system bus 10.
- the input / output interface 24 may be, for example, a high-end device such as a serial port interface, a PS / 2 interface, a parallel port interface, a USB interface, an Institute of Electrical and Electronics Engineers (IEEE) 1394 interface (ie, a FireWire interface). Any of a variety of different interfaces can be represented logically, or even a combination of different interfaces.
- the computing system to which the present invention is applied may further include a display device 26 such as a monitor or LCD or an audio device 27 such as a speaker or a microphone, which may be connected via a video / audio interface 25. It is connected to the system bus 10.
- the video / audio interface unit 25 may include a high definition multimedia interface (HDMI), a graphics device interface (GDI), or the like.
- computing systems implementing the present invention may be connected to networks such as, for example, office-wide or enterprise-wide computer networks, home networks, intranets, and / or the Internet.
- the computer system may exchange data with such external sources as, for example, a remote computer system, a remote application, and / or a remote database.
- a computing system to which the present invention is applied comprises a network interface 27 for receiving data from and / or transmitting data from an external source.
- such a computing system can transmit and receive information to and from devices located remotely through the network interface 27.
- the computing system refers to the server 100
- information may be exchanged with the terminal device 200 through the network interface 27.
- the computing system refers to the terminal device 200, it may transmit and receive information with the server 100 through the network interface (27).
- Network interface 27 may be represented by a logical combination of one or more software and / or hardware modules, such as, for example, a network interface card and a corresponding Network Driver Interface Specification (“NDIS”) stack.
- NDIS Network Driver Interface Specification
- the computer system receives data from or transmits data to an external source via input / output interface 24.
- the input / output interface 24 may be connected to a modem 23 (eg, a standard modem, cable modem, or digital subscriber line (“DSL”) modem), through which the external source may be connected.
- a modem 23 eg, a standard modem, cable modem, or digital subscriber line (“DSL”) modem
- DSL digital subscriber line
- FIG. 10 The environment shown in FIG. 10 is merely exemplary and does not represent a small portion of the wide variety of environments in which the principles of the present invention may be implemented.
- program and various information generated when the program is executed may be stored and accessed in any computer readable medium related to the computing system of FIG. 10.
- program modules and some of the associated program data may be stored in system memory 12 for operating system 13b, application program 13c, program module 13d, and / or program data. It may be included in (13e).
- program modules or portions thereof related to the present invention may be connected to a remote computer system, for example, the server 100 and the terminal device 200, connected via a modem 23 or a network interface 25 of the input / output interface 24. May be stored in a remote memory storage device such as system memory and / or mass storage associated with the computing system. Execution of such modules may be performed in a distributed environment as described above.
- Method steps may be performed by one or more programmable processors executing a computer program to perform functions by operating on input data and generating output.
- the method steps may also be performed by special purpose logic circuit organization, eg, field programmable gate away (FPGA) or application-specific integrated circuits (ASICs), and the apparatus may be implemented as these.
- FPGA field programmable gate away
- ASICs application-specific integrated circuits
- Processors suitable for the processing of a computer program include, by way of example, both general purpose and special purpose microprocessors, and any one or more processors of any kind of digital computer.
- a processor will receive instructions and data from a read only memory or a random access memory or both.
- Elements of a computer may include at least one processor that executes instructions and one or more memory devices that store instructions and data.
- a computer may include one or more mass storage devices, such as magnetic-optical disks, or optical disks, which store data, or receive data from, transmit data to, or both. Can be combined as much as possible.
- mass storage devices such as magnetic-optical disks, or optical disks, which store data, or receive data from, transmit data to, or both. Can be combined as much as possible.
- Suitable information carriers for embodying computer program instructions and data include, for example, semiconductor memory devices, such as magnetic media such as hard disks, floppy disks, and magnetic tape, compact disk read only memory (CD_ROM), Optical Media such as DVD (Digital Video Disk), Magnetic-Optical Media such as Floppy Disk, Read Only Memory (ROM), RAM, Random Access Memory), Flash Memory, Erasable Programmable ROM (EPROM), Electrically Erasable Programmable ROM (EEPROM), and the like.
- semiconductor memory devices such as magnetic media such as hard disks, floppy disks, and magnetic tape, compact disk read only memory (CD_ROM), Optical Media such as DVD (Digital Video Disk), Magnetic-Optical Media such as Floppy Disk, Read Only Memory (ROM), RAM, Random Access Memory), Flash Memory, Erasable Programmable ROM (EPROM), Electrically Erasable Programmable ROM (EEPROM), and the like.
- the processor and memory may be supplemented by or included by special purpose logic circuitry.
- the present invention relates to a method for providing a location using voice information or image information and an apparatus therefor, wherein the current location of a user is calculated based on voice information or image information using a location providing device installed in a server or a terminal device.
- the calculated current location is displayed on the map and provided to the terminal device, and the user's location can be easily determined using only the user's terminal device regardless of a separate infrastructure or GPS shadow area.
- the present invention has industrial applicability because the present invention is not only sufficiently commercially available or commercially viable, but also practically clearly implemented.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Remote Sensing (AREA)
- Navigation (AREA)
Abstract
본 발명은 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법 및 이를 위한 장치에 관한 것으로서, 단말 장치를 통해 입력되는 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 서버 또는 단말 장치 내에 설치된 위치 제공 장치를 이용해 분석하여, 사용자의 현재 위치를 제공하는 것으로, 현재 위치는 지도 상에 표시되어 단말 장치를 통해 제공되므로, 별도의 기반 시설 없이 단말 장치를 이용하여 편리하게 본인의 현재 위치를 확인할 수 있는 효과가 있다.
Description
본 발명은 위치 제공 서비스에 관한 것으로서, 서버 또는 단말 장치에 설치된 위치 제공 장치를 통해 음성 정보 또는 이미지 정보를 분석하여 단말 장치 사용자의 현재 위치를 산출하고, 이를 지도 DB 상에 표시하여 제공하기 위한 위치 제공 방법 및 이를 위한 장치에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 실시 예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
정보통신 기술의 비약적인 발전으로 인해 이동통신 단말, 개인용 컴퓨터 등과 같은 다양한 종류의 단말 장치들은 다양한 기능을 수행할 수 있도록 구현되고 있다.
이동통신 단말 장치를 예로 들어 설명하면, 기본적인 음성 통신 기능에서 더 나아가 최근에는 데이터 통신, 카메라를 이용한 사진이나 동영상 촬영, 음악 또는 동영상 파일 재생, 게임, 방송 시청 등 다양한 기능들을 이용할 수 있도록 구현되고 있다.
이러한 단말 장치에서 실행될 수 있는 기능의 증대를 위한 기술 개발은 지속적으로 이뤄지고 있으며, 하드웨어 개량 기술은 물론 소프트웨어 개량 기술을 중심으로 지속적으로 이뤄지고 있다.
이에 따라서 단말 장치를 이용하여 다양한 서비스가 제공되고 있으며, 대표적인 예로서, 개인용 컴퓨터 및 전자 폰 등을 이용한 위치 측위 서비스가 있다.
또한, 입력 수단의 다양화로 단말 장치에 정보를 입력하는 경우에 있어서, 키 패드를 이용한 입력뿐만 아니라, 음성을 이용한 입력이나 사진 촬영을 이용한 입력을 하고, 다양한 분석 기술을 통해 음성 또는 촬영된 사진을 분석할 수 있다.
여기서, 위치 측위란 서비스 요청 단말 장치의 정확한 위치를 파악하는 기술로, GPS위성에서 보내는 신호를 수신해 사용자의 현재 위치를 계산하는 위성항법 시스템이나, 셀ID를 기반으로 하는 방식 등이 있다.
한편, 실내에서 위치 측위를 하는 경우에는 비콘과 같은 별도 장치를 설치하여 위치를 파악할 수도 있다.
최근에는 복합 쇼핑 센터나 놀이 공원과 같은 복잡한 구조물이 많이 생겨나고 있는데, 이러한 복잡한 장소에서 단말 장치 사용자는 원하는 목적지를 찾기 위해 현재 자신의 위치가 어디인지 알 필요가 있다.
이 경우 비콘과 같은 별도의 기반 시설이 필요하다면 설치 비용 등의 제약으로 위치 제공 서비스의 활성화가 용이하지 않으며, GPS를 이용하는 경우, 사용자가 실내 또는 지하와 같은 음영 지역에 있다면 정확한 위치 측위가 불가능하다.
따라서, 별도의 기반 시설을 필요로 하지 않으며, GPS 음영 지역에 관계 없이 오직 사용자가 휴대하고 있는 단말 장치를 이용하여 현재 위치를 파악할 수 있는 서비스의 제공이 필요하다.
이에, 본 발명은 단말 장치의 사용자가 시야 범위에 존재하는 주변의 건물 또는 시설물의 명칭 등에 대한 음성을 입력하거나 또는 시설물의 형태나 간판, 로고가 포함된 이미지를 촬영함으로써, 음성 정보 또는 이미지 정보 분석을 통해 단말 장치 사용자의 현재 위치를 산출하는 위치 제공 방법 및 이를 위한 장치를 제공하고자 한다.
더하여, 본 발명은 GPS나 비콘 등을 이용하지 않고, 오로지 단말 장치를 통한 음성 정보 또는 이미지 정보만을 이용하며, 사용자와 건물 또는 시설물의 위치 관계를 이용하여 산출된 사용자의 현재 위치를 지도 DB 상에 표시해 단말 장치로 제공함으로써, 사용자가 용이하게 자신의 위치를 파악할 수 있는 위치 제공 방법 및 이를 위한 장치를 제공하고자 한다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 위치 제공 장치는 사용자의 현재 위치를 기준으로 사용자의 시야 범위에 존재하는 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 획득하여, 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 정보 처리 모듈; 상기 식별 정보를 기준으로 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 위치 정보를 획득하고, 상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여, 상기 위치 정보로부터 사용자의 현재 위치를 산출하는 위치 산출 모듈; 및 상기 복수의 건물 또는 시설물의 식별 정보 및 위치 정보를 포함하는 지도 DB를 저장하는 저장 모듈을 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 장치에 있어서, 상기 정보 처리 모듈은 상기 음성 정보를 문자로 변환하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출하거나 상기 이미지 정보에 포함된 문자를 분석하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 장치에 있어서, 상기 위치 산출 모듈은 산출된 상기 현재 위치를 상기 기 저장된 지도 DB 상에 매핑하여 표시할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 장치에 있어서, 상기 위치 산출 모듈은 이미지 정보를 이용하여 위치를 산출하는 경우, 상기 정보 처리 모듈을 통해서 상기 이미지 정보와 관련된 촬영 방향 정보를 더 획득하고, 상기 획득한 촬영 방향 정보를 더 고려하여 상기 현재 위치를 산출할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 위치 제공 방법은 위치 제공 장치가, 사용자의 현재 위치를 기준으로 사용자의 시야 범위에 존재하는 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 획득하는 단계; 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 단계; 상기 식별 정보를 기준으로 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 위치 정보를 획득하는 단계; 및 상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여, 상기 위치 정보로부터 사용자의 현재 위치를 산출하는 단계를 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 방법에 있어서, 상기 식별 정보를 추출하는 단계는 상기 음성 정보를 문자로 변환하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 방법에 있어서, 상기 식별 정보를 추출하는 단계는 상기 이미지 정보에 포함된 문자를 분석하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 방법에 있어서, 상기 이미지 정보를 획득하는 단계는, 상기 이미지 정보와 관련된 촬영 방향 정보를 더 획득하고, 상기 현재 위치를 산출하는 단계는, 상기 촬영 방향 정보를 더 고려하여 상기 현재 위치를 산출할 수 있다.
본 발명의 바람직한 실시 예에 따른 위치 제공 방법에 있어서, 산출된 상기 현재 위치를 기 저장된 지도 DB 상에 매핑하여 표시하는 단계를 더 포함할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 컴퓨터에서 판독 가능한 기록 매체는 위치 제공 방법을 실행시키기 위한 컴퓨터 프로그램이 기록되어 있다.
본 발명은 사용자의 현재 위치 측위를 위해 별도의 기반 시설을 필요로 하지 않으며, GPS 음영 지역에 관계 없이 오직 사용자가 휴대하고 있는 단말 장치를 이용하여 현재 위치를 파악할 수 있다는 효과가 있다.
아울러, 단말 장치를 통해 제공 받은 음성 정보 또는 이미지 정보의 분석과 사용자와 건물 등의 위치 관계를 이용하여 산출된 현재 위치를 지도 DB 상에 표시하여 사용자 단말 장치에 제공함으로써, 사용자가 자신의 현재 위치를 용이하게 확인할 수 있다는 효과가 있다.
도 1은 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 시스템의 구성도이다.
도 2는 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보 기반의 위치 제공 장치의 구성을 도시한 도면이다.
도 3은 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 서버의 구성을 도시한 도면이다.
도 4는 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 단말 장치의 구성을 도시한 도면이다.
도 5는 본 발명의 일 실시 예에 따른 위치 제공 장치에서의 음성 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 6은 본 발명의 다른 실시 예에 따른 위치 제공 장치에서의 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 7은 본 발명의 일 실시 예에 따른 위치 제공 장치가 서버에 설치되어 서버에서의 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 8은 본 발명의 다른 실시 예에 따른 위치 제공 장치가 단말 장치에 설치되어 단말 장치에서의 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 9는 본 발명의 실시 예에 따라 산출된 사용자의 현재 위치를 지도 DB 상에 표시하여 단말 장치를 통해 제공하는 예시도이다.
도 10은 본 발명의 실시 예에 따른 위치 제공 방법을 위한 장치의 오퍼레이팅 환경을 도시한 도면이다.
본 발명의 과제 해결 수단의 특징 및 이점을 보다 명확히 하기 위하여, 첨부된 도면에 도시된 본 발명의 특정 실시 예를 참조하여 본 발명을 더 상세하게 설명한다.
다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.
따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원 시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
또한, 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하기 위해 사용하는 것으로, 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용될 뿐, 상기 구성요소들을 한정하기 위해 사용되지 않는다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제2 구성요소는 제1 구성요소로 명명될 수 있고, 유사하게 제1 구성요소도 제2 구성요소로 명명될 수 있다.
더하여, 어떤 구성요소가 다른 구성요소에 “연결되어” 있다거나 “접속되어” 있다고 언급할 경우, 이는 논리적 또는 물리적으로 연결되거나, 접속될 수 있음을 의미한다. 다시 말해, 구성요소가 다른 구성요소에 직접적으로 연결되거나 접속되어 있을 수 있지만, 중간에 다른 구성요소가 존재할 수도 있으며, 간접적으로 연결되거나 접속될 수도 있다고 이해되어야 할 것이다.
또한, 본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
또한, 본 명세서에서 기술되는 “포함 한다” 또는 “가지다”등의 용어는 명세서상에서 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
또한, 명세서에 기재된 “부”, “기”, “모듈” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
또한, “일(a 또는 an)”, “하나(one)”, “그(the)” 및 유사어는 본 발명을 기술하는 문맥에 있어서(특히, 이하의 청구항의 문맥에서) 본 명세서에 달리 지시되거나 문맥에 의해 분명하게 반박되지 않는 한, 단수 및 복수 모두를 포함하는 의미로 사용될 수 있다.
이제, 본 발명의 실시 예에 따른 전자 티켓을 이용한 도착 시간 알림 방법 및 이를 위한 장치에 대하여 도면을 참조하여 상세하게 설명하도록 한다.
도 1은 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 시스템의 구성도이다.
도 1을 참조하면, 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 시스템은 통신망(300)을 통해 연결되는 서버(100) 및 단말 장치(200)를 포함하여 구성할 수 있다.
상기에서 서버(100)는 본 발명에 따른 음성 정보 또는 이미지 정보를 이용하여 사용자의 현재 위치를 제공하는 서비스 제공자 측의 장치이고, 단말 장치(200)는 본 발명에 따른 사용자의 현재 위치가 반영된 지도가 표시되는 사용자 측의 장치다.
구체적으로, 본 발명의 실시 예에 따른 단말 장치(200)는 통신망(300)을 통해 서버(100)와 연동하여 사용자의 현재 위치를 제공하기 위한 데이터를 송수신하는 동작을 수행한다.
본 발명에 따른 서버(100)와 단말 장치(200)는 하나 이상의 프로세서를 탑재하여, 본 발명에 따른 방법을 실행하기 위한 프로그램 명령을 처리함으로써 이하에서 설명하는 본 발명에 따른 기능들을 수행할 수 있다. 일 구현 예에서, 이 프로세서는 싱글 쓰레드(Single-threaded)프로세서일 수 있으며, 다른 구현 예에서 본 프로세서는 멀티 쓰레드(Multi-threaded)프로세서일 수 있다. 나아가 본 프로세서는 메모리 혹은 저장 장치 상에 저장된 명령을 처리하는 것이 가능하다.
통신망(300)은 서버(100)와 단말 장치(200) 사이의 데이터 전송 및 정보 교환을 위한 일련의 데이터 송수신 동작을 수행한다.
특히 통신망(300)은 다양한 형태의 통신망이 이용될 수 있으며, 예컨대, 무선랜(WLAN, Wireless LAN), 와이파이(Wi-Fi), 와이브로(Wibro), 와이맥스(Wimax), 고속하향패킷접속(HSDPA, High Speed Downlink Packet Access) 등의 무선 통신방식 또는 이더넷(Ethernet), xDSL(ADSL, VDSL), HFC(Hybrid Fiber Coax), FTTC(Fiber to The Curb), FTTH(Fiber To The Home) 등의 유선 통신 방식이 이용될 수 있다.
한편, 통신망(300)은 상기에 제시된 통신 방식에 한정되는 것은 아니며, 상술한 통신 방식 이외에도 기타 널리 공지되었거나 향후 개발될 모든 형태의 통신 방식을 포함할 수 있다.
본 발명에서 이용되는 단말 장치(100)는 사용자의 키 조작에 따라 통신망(300)을 경유하여 각종 데이터를 송수신할 수 있는 단말 장치를 말하는 것이며, 주로 스마트폰(Smart Phone)이 될 것이나, 이에 한정되는 것은 아니고, 음성 입력 기능, 통신 기능 및 촬영 기능을 포함하는 휴대 장치라면 어떠한 것이라도 가능하다.
예를 들면, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인휴대용 정보단말기(PDA: Personal Digital Assistant), 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다. 이외에도 현재 개발되어 상용화되었거나 향후 개발될 통신 및 촬영이 가능한 모든 장치를 포함하는 개념으로 해석되어야 한다.
또한, 단말 장치(200)는 통신망(300)을 이용하여 음성 또는 데이터 통신을 수행하는 단말기이며, 통신망(300)을 경유하여 서버(100)와 통신하기 위한 브라우저, 프로그램 및 프로토콜을 저장하는 메모리, 각종 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 단말 장치를 의미한다.
서버(100)와 단말 장치(200)의 구체적인 동작은 도 2의 위치 제공 장치와 함께 설명하기로 한다.
도 2는 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보 기반의 위치 제공 장치의 구성을 도시한 도면이다.
도 2를 참조하면, 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보 기반의 위치 제공 장치(400)는 정보 처리 모듈(410), 위치 산출 모듈(420) 및 저장 모듈(430)을 포함하여 구성할 수 있다.
위치 제공 장치(400)는 사용자로부터 음성 정보 또는 이미지 정보를 수신하여 상기 정보의 분석을 통해 사용자에게 현재 위치를 알려주는 장치로, 소프트웨어 또는 하드웨어로 구현되어 서버(100) 또는 단말 장치(200) 내부에 설치된다.
본 발명의 일 실시 예에 따라 위치 제공 장치(400)가 서버(100)에 설치되는 경우에는 서버(100)가 위치 산출의 과정을 모두 제어하며, 사용자의 산출된 현재 위치는 서버(100)와 단말 장치(200)간의 연동을 통해 단말 장치(200)로 제공될 수 있다.
본 발명의 다른 실시 예에 따라 단말 장치(200)가 위치 산출의 과정을 제어하는 경우는, 위치 제공 장치(400)가 단말 장치(200)내에 이미 설치되어 있거나 또는 서버(100)에 저장된 위치 제공 장치(400)를 단말 장치(200)로 다운로드 하는 것에 의해 단말 장치(200)에 설치 및 저장하여, 단말 장치(200)의 단독 동작으로 위치 산출의 과정을 수행할 수 있다.
위치 제공 장치(400)를 통해 단말 장치(200) 사용자의 현재 위치를 산출하기 위해서는 먼저, 정보 처리 모듈(410)은 단말 장치(200)로부터 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 수신한다.
복수의 건물 또는 시설물은 예를 들면, 실외의 건물이거나, 실내의 상점, 분수대나 에스컬레이터 등과 같은 시설물이 될 수 있다.
본 발명의 일 실시 예에 따른 음성 정보는 단말 장치(200)를 통해 사용자로부터 음성으로 입력되는 복수의 건물 또는 시설물에 대한 정보로서, 시설물에 대한 명칭이나 상점의 브랜드 명칭에 대해 사용자의 음성을 이용해 입력된 정보이다.
본 발명의 다른 실시 예에 따른 이미지 정보는 단말 장치(200)를 이용하여 촬영되는 복수의 건물 또는 시설물에 대한 정보로서, 시설물의 형태, 브랜드 명칭이나 로고, 마크 등이 포함된 간판 등을 촬영한 사진 이미지를 의미한다.
상기 이미지 정보는 복수의 건물 또는 시설물이 하나의 사진에 포함되도록 하여 촬영된 하나의 이미지 정보일 수 있고, 또는 사용자가 한 장소에서 시야 범위에 들어오는 복수의 건물 또는 시설물들을 각각 촬영한 복수의 이미지 정보일 수도 있다.
이 때, 상기 이미지 정보는 음성 정보와는 달리 이미지가 촬영된 방향에 대한 정보가 더 포함되어 정보 처리 모듈(410)로 전송될 수 있다.
본 발명의 실시 예에서는 복합 쇼핑 센터와 같은 실내 장소에 대해 예를 들어 설명하지만, 실내에만 한정되는 것은 아니다.
사용자는 현재 위치하고 있는 장소에서 사용자 본인의 시야 범위에 있는 복수의 건물 또는 시설물에 대한 정보를 음성 또는 이미지로 단말 장치(200)를 통해 입력하며, 이는 위치 제공 장치(400)의 정보 처리 모듈(410)에 전송된다.
예를 들어, 사용자의 현재 위치에서 시야 범위에 ‘에스컬레이터’, ‘xxx 커피숍’, ‘yyy 여성복’이 있다면, 본 발명의 일 실시 예에 따른 정보는, 커피숍과 여성복의 브랜드 명칭과 시설물의 이름인 에스컬레이터를 육성으로 단말 장치(200)에 입력하는 음성이다.
본 발명의 다른 실시 예에 따른 정보는 사용자의 현재 위치에서 단말 장치(200)를 이용하여 커피숍과 여성복의 브랜드 명칭이나 로고가 보이도록 찍힌 간판 및 시설물인 에스컬레이터의 형태가 찍힌 사진 이미지이다.
상기와 같이 단말 장치(200)를 통해 입력된 음성 정보 또는 단말 장치(200)를 통해 촬영한 이미지 정보가 정보 처리 모듈(410)로 전송되면, 정보 처리 모듈(410)은 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 식별 정보를 추출한다.
즉, 상기의 예에서, 본 발명의 일 실시 예에 따른 정보 처리 모듈(410)은 음성 정보로부터 음성 신호 분석을 통해 시설물의 명칭인 ‘에스컬레이터’와 커피숍과 여성복의 브랜드 명칭인 ‘xxx’와 ‘yyy’를 추출한다.
상기 음성 정보는 ‘에스컬레이터’, ‘xxx’, ‘yyy’의 문자로 변환되는 것이며, 이는 다양한 음성 인식 기술 및 변환 기술을 통해 수행될 수 있다.
본 발명의 다른 실시 예에 따라, 정보 처리 모듈(410)이 이미지 정보를 수신한 경우라면, 정보 처리 모듈(410)은 브랜드 로고나 시설물의 형태에 대한 유사 이미지 분석 및 간판의 브랜드 명칭에 대한 문자 분석을 통해 상기와 같은 식별 정보를 추출한다. 이러한 이미지 정보를 이용한 식별 정보의 추출은 기존에 알려진 영상 처리 기법을 통해 이루어질 수 있다.
또한, 정보 처리 모듈(410)이 이미지 정보를 수신하는 경우라면, 촬영된 이미지에 더하여, 이미지가 촬영된 방향 정보가 함께 수신될 수 있다.
다음으로, 본 발명의 실시 예에 따른 위치 산출 모듈(420)은 위치 제공 장치(400)의 전반적인 제어를 수행하며, 특히 상기 음성 정보 또는 이미지 정보로부터 추출된 상기 식별 정보를 이용하여 지도 DB 상에서 사용자의 현재 위치를 산출하고, 상기 현재 위치를 기 저장된 지도 상에 매핑하여 표시하는 것에 관련된 동작을 제어할 수 있다.
본 발명의 실시 예에 따른 위치 산출 모듈(420)은 상기 식별 정보를 기준으로 상기 복수의 건물 또는 시설물의 위치 정보를 획득하고, 상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여, 상기 위치 정보로부터 사용자의 현재 위치를 산출한다.
획득한 상기 복수의 건물 또는 시설물의 위치 정보는 상기 건물 또는 시설물이 위치한 번지 수와 같은 주소 정보 또는 위도나 경도 등으로 표현될 수 있다.
상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려한다는 것의 의미는, 사용자가 현재 위치하고 있는 지점에서 시야 범위에 존재하는 복수의 건물 또는 시설물이 공통적으로 겹쳐지는 위치를 고려하는 것을 말한다.
위치 산출 모듈(420)은 저장 모듈(430)내의 지도 DB에서 상기 식별 정보, 위치 정보 및 상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여 공통적으로 겹치는 위치를 현재 위치로서 산출한다.
본 발명의 일 실시 예에 따라 위치 제공 장치(400)로 음성 정보가 수신된 경우라면, 위치 산출 모듈(420)은 음성 정보로부터 추출된 식별 정보, 위치 정보 및 사용자와의 위치 관계를 고려하여 사용자의 현재 위치를 산출한다.
상기의 예에서, ‘에스컬레이터’, ‘xxx 커피숍’, ‘yyy 여성복’에 대한 식별 정보로부터 주소나 위도, 경도 등의 위치 정보를 획득하여 상기 장소들의 위치를 지도 DB 상에서 찾고, 사용자와의 위치 관계를 고려하여, 지도 DB 상에서 ‘에스컬레이터’와 ‘xxx 커피숍’과 ‘yyy 여성복’이 시야 범위에 한번에 들어올 수 있는 특정 위치를 지도 DB 상에서 찾아서 이를 사용자의 현재 위치로 산출한다.
본 발명의 다른 실시 예에 따라 위치 제공 장치(400)로 이미지 정보가 수신된 경우라면, 위치 산출 모듈(420)은 이미지 정보로부터 추출된 식별 정보, 위치 정보, 사용자와의 위치 관계에 더하여, 이미지가 촬영된 촬영 방향 정보를 더 고려하여 사용자의 현재 위치를 산출한다.
상기의 예에서, 촬영 방향 정보를 더 고려한다면, 사용자와의 위치 관계를 고려할 때, ‘xxx 커피숍’이 사용자가 현재 서 있는 위치에서 동쪽 또는 서쪽으로부터 15도와 같은 방향이 더 고려되는 것이므로, 일 실시 예에 따라 음성 정보를 이용하여 사용자의 위치를 산출하는 것보다 정확도를 높일 수 있다.
위치 산출 모듈(420)은 산출한 상기 현재 위치를 지도 상에 매핑하여 표시하며, 이를 단말 장치(200)로 출력하도록 한다.
다음으로, 저장 모듈(430)은 데이터를 저장하기 위한 장치로, 주 기억 장치 및 보조 기억 장치를 포함하고, 위치 제공 장치(400)의 기능 동작에 필요한 응용 프로그램을 저장한다. 이러한 저장 모듈(430)은 크게 프로그램 영역과 데이터 영역을 포함할 수 있다. 특히 본 발명에 따른 저장 모듈(430)은 복수의 건물 또는 시설물의 식별 정보 및 위치 정보를 포함하는 지도 DB를 포함한다.
이러한 위치 제공 장치(400)는 상술한 바와 같이 소프트웨어 또는 하드웨어 형태로 구현되어 서버(100) 또는 단말 장치(200)에 설치되는데, 서버(100)에 설치되는 경우라면, 서버(100)와 단말 장치(200) 간 통신망(300)을 통한 연동에 의해 위치 제공 서비스가 실시되고, 단말 장치(200)에 설치되는 경우라면, 단말 장치(200)에 의해 모든 과정이 직접 실시될 수 있다.
즉, 본 발명의 일 실시 예에서 위치 제공 장치(400)가 서버(100)에 설치되는 경우라면, 단말 장치(200)를 통해 입력된 복수의 건물 또는 시설물에 대한 음성 정보 또는 이를 촬영한 이미지 정보가 서버(100)로 전송되어, 서버(100)에서 위치 제공 장치(400)를 통해 상기 정보의 분석 및 식별 정보의 추출과 이를 통한 사용자의 현재 위치가 산출되는 것 등 모든 과정이 서버(100)에서 수행되고, 지도 상에 사용자의 현재 위치를 매핑하여 표시한 것을 단말 장치(200)에 전송하여 단말 장치(200)가 이를 출력하는 것을 제어한다.
본 발명의 다른 실시 예에서, 위치 제공 장치(400)가 단말 장치(200)에 설치되는 경우라면, 이미 단말 장치(200) 내에 위치 제공 장치(400)가 설치되어 있거나, 서버(100)로부터 위치 제공 장치(400)를 다운로드 받아 단말 장치(200)에 저장하고, 사용자가 단말 장치(200)를 이용하여 복수의 건물 또는 시설물에 대한 정보를 음성으로 입력하거나 이미지로 촬영하면, 단말 장치(200)에서 상기의 과정들이 모두 수행되고, 지도 상에 사용자의 현재 위치를 표시하여 출력하게 된다.
이상에서 설명한 바와 같이, 위치 제공 장치(400)가 설치된 서버(100)와 단말 장치(200)의 연동을 통해 또는 위치 제공 장치(400)가 설치된 단말 장치(200)를 통해 본 발명은 사용자가 현재 위치가 표시된 지도를 제공 받아 자신의 현재 위치를 간편하게 확인할 수 있다.
상술한 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 서버(100) 및 단말 장치(200)의 구성을 도 3 및 도 4를 참조하여 보다 구체적으로 설명하도록 한다.
도 3은 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 서버의 구성을 도시한 도면이다.
도 3을 참조하면, 본 발명에 따른 서버(100)는 서버 제어부(110), 서버 통신부(120) 및 서버 저장부(130)를 포함한다.
서버 통신부(120)는 통신망(300)을 통해 단말 장치(200)와 통신하여 사용자의 현재 위치를 제공하기 위한 데이터를 송수신한다.
서버 저장부(130)는 사용자의 현재 위치를 제공하기 위한 모든 프로그램을 저장하며, 특히 소프트웨어 또는 하드웨어 형태로 구현된 상기 위치 제공 장치(400)가 저장될 수 있다.
서버 제어부(110)는 서버 저장부(130)에 저장된 위치 제공 장치(400)의 실행을 제어한다.
본 발명의 일 실시 예에 따르면, 위치 제공 장치(400)가 서버(100)에 설치되므로, 서버 제어부(110)는 위치 제공 장치(400)를 통해 현재 위치를 산출하기 위한 과정 및 상기 산출된 현재 위치가 표시된 지도를 단말 장치로(200)로 전송하여 출력하기 위한 모든 과정을 제어한다.
즉, 단말 장치(200)를 통해 복수의 건물 또는 시설물에 대한 음성 정보 또는 이를 촬영한 이미지 정보를 수신하고, 위치 제공 장치(400)를 이용하여 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물에 대한 명칭이나 형태, 브랜드 명칭과 같은 식별 정보를 추출하고, 이의 위치 정보를 획득한다. 상기 위치 정보는 번지 수와 같은 주소나 위도 또는 경도 등으로 표현될 수 있다.
상기 정보들과 사용자의 위치 관계를 고려하여 지도 DB상에서 사용자의 현재 위치를 산출하여 지도 상에 매핑하여 표시하는 전 과정을 제어하고, 이렇게 현재 위치가 표시된 지도를 단말 장치(200)로 전송한다.
이 때, 서버(100)가 단말 장치(200)로부터 이미지 정보를 수신하는 경우라면, 현재 위치 산출 시, 이미지가 촬영된 방향 정보가 더 고려되므로, 음성 정보를 수신하여 산출한 위치에 비하여 사용자가 서 있는 방향에 대해서도 알 수 있게 되므로, 사용자의 현재 위치에 대한 정확도가 더 높다.
비록 본 명세서와 도면에서는 예시적인 장치 구성을 기술하고 있지만, 본 명세서에서 설명하는 기능적인 동작과 주제의 구현물들은 다른 유형의 디지털 전자 회로로 구현되거나, 본 명세서에서 개시하는 구조 및 그 구조적인 등가물들을 포함하는 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나, 이들 중 하나 이상의 결합으로 구현 가능하다. 본 명세서에서 설명하는 주제의 구현물들은 하나 이상의 컴퓨터 프로그램 제품, 다시 말해 본 발명에 따른 장치의 동작을 제어하기 위하여 혹은 이것에 의한 실행을 위하여 유형의 프로그램 저장매체 상에 인코딩된 컴퓨터 프로그램 명령에 관한 하나 이상의 모듈로서 구현될 수 있다. 컴퓨터로 판독 가능한 매체는 기계로 판독 가능한 저장 장치, 기계로 판독 가능한 저장 기판, 메모리 장치, 기계로 판독 가능한 전파형 신호에 영향을 미치는 물질의 조성물 혹은 이들 중 하나 이상의 조합일 수 있다.
도 4는 본 발명의 실시 예에 따른 음성 정보 또는 이미지 정보를 이용하여 위치를 제공하기 위한 단말 장치의 구성을 도시한 도면이다.
도 4를 참조하면, 본 발명에 따른 단말 장치(200)는 제어부(210), 통신부(220), 입력부(230), 촬영부(240), 센서부(250), 표시부(260), 저장부(270)를 포함한다.
제어부(210)는 운영 체제(OS, Operation System) 및 각 구성을 구동시키는 프로세스 장치가 될 수 있다.
본 발명의 일 실시 예에서는 위치 제공 장치(400)가 서버(100)에 설치되고, 본 발명의 다른 실시 예에서는 위치 제공 장치(400)가 단말 장치(200) 내에 이미 설치되어 있거나, 서버(100)에 저장된 위치 제공 장치(400)를 다운로드 받는 것이므로, 이에 따라 제어부(210)의 기능은 상이할 수 있다.
즉, 본 발명의 일 실시 예에 따른 제어부(210)는 입력부(230)를 통해 입력된 복수의 건물 또는 시설물에 대한 음성 정보 또는 촬영부(240)를 통해 촬영된 이미지 정보를 통신부(220)를 통해 서버(100)로 전송하고, 서버(100)로부터 현재 위치가 표시된 지도를 수신하여 표시부(260)에 표시하는 것을 제어할 수 있다.
본 발명의 다른 실시 예에 따른 제어부(210)는 서버(100)로부터 위치 제공 장치(400)를 다운로드하여 저장부(270)에 저장하고, 위치 제공 장치(400)를 통해 단말 장치(200)가 직접 현재 위치를 산출할 수 있도록 전 과정을 제어할 수 있다.
통신부(220)는 서버(100)와 통신망(300)을 통해 통신하여 현재 위치를 산출하여 제공하기 위한 데이터를 송수신하기 위한 기능을 수행한다.
여기서, 통신부(220)는 무선통신 모듈(미도시) 및 유선통신 모듈(미도시) 중 적어도 하나를 포함할 수 있다.
그리고, 무선통신 모듈은 무선통신 방법에 따라 데이터를 송수신하기 위한 구성이며, 단말 장치(200)가 무선통신을 하는 경우, 무선망 통신 모듈, 무선랜 통신 모듈 및 무선팬 통신 모듈 중 어느 하나를 이용하여 데이터를 서버(100)로 송수신할 수 있다.
또한, 유선통신 모듈은 유선으로 데이터를 송수신하기 위한 것이다. 유선통신 모듈은 유선을 통해 통신망(300)에 접속하여, 서버(100)에 데이터를 송수신할 수 있다.
입력부(230)는 숫자 및 문자 정보 등의 다양한 정보를 입력 받고, 각종 기능 설정 및 단말 장치(200)의 기능 제어와 관련하여 입력되는 신호를 제어부(210) 또는 서버(100)로 전달한다.
또한 입력부(230)는 사용자의 터치 또는 조작에 따른 입력 신호를 발생하는 키패드와 터치패드 중 적어도 하나를 포함하여 구성될 수 있다. 이때, 입력부(230)는 표시부(260)와 함께 하나의 터치패널(또는 터치스크린(touch screen))의 형태로 구성되어 입력과 표시 기능을 동시에 수행할 수 있다.
또한 입력부(230)는 키보드, 키패드, 마우스, 조이스틱 등과 같은 입력 장치 외에도 향후 개발될 수 있는 모든 형태의 입력 수단이 사용될 수 있다.
특히, 본 발명이 실시 예에 따른 입력부(230)는 음성 정보를 입력할 수 있는 기능을 포함하므로, 사용자는 입력부(230)를 이용하여 복수의 건물 또는 시설물에 대한 정보를 육성으로 입력할 수 있다.
예를 들어, 사용자가 현재 위치하고 있는 장소에서 시야 범위에 들어오는 시설물인 에스컬레이터에 대해 그 명칭인 ‘에스컬레이터’, 상점에 대해서는 ‘xxx 커피숍’, ‘yyy 여성복’이라고 브랜드 명칭을 사용자의 음성으로 입력할 수 있다.
촬영부(240)는 복수의 건물 또는 시설물에 대한 사진 촬영을 수행한다. 단말 장치(200)의 사용자는 촬영부(240)를 통해 현재의 위치에서 시야 범위에 들어오는 복수의 건물 또는 시설물이 모두 하나의 이미지에 포함되도록 하나의 이미지로 촬영할 수도 있고, 촬영 방향 각도가 고려된 이미지로 복수 개 촬영할 수도 있다.
상기의 예에서처럼, 사용자의 현재 위치에서 시야 범위에 들어오는 에스컬레이터, ‘xxx 커피숍’, ‘yyy 여성복’에 대해, 시설물인 에스컬레이터의 형태, 커피숍과 여성복은 브랜드 명칭이나 로고가 포함된 간판이 확인될 수 있도록 사진을 촬영한다.
에스컬레이터와 커피숍, 여성복 매장은 하나의 이미지에 포함되도록 한 장의 이미지로 촬영할 수도 있고, 현재의 위치에서 각각의 시설물 및 매장에 대해 3장의 사진을 촬영할 수도 있다.
센서부(250)는 단말 장치(200)의 방향각을 감지할 수 있는 것으로, 본 발명의 실시 예에서 촬영되는 이미지의 촬영 방향에 대한 각도를 감지하기 위해 사용된다.
센서부(250)를 통해 에스컬레이터가 사용자의 현재 위치에서 어느 방향으로 몇 도에 위치해 있는 지와 같은 촬영 방향 각도가 더 고려될 수 있으므로, 음성 정보를 이용하여 현재 위치를 산출하는 것보다 더 정확도를 높일 수 있다.
센서부(250)를 통해 감지된 촬영 방향 정보는 이미지 정보를 이용한 위치 산출 시 함께 고려된다.
표시부(260)는 단말 장치(200)의 기능 수행 중에 발생하는 일련의 동작 상태 및 동작 결과 등에 대한 정보를 표시한다.
또한 표시부(260)는 단말 장치(200)의 메뉴 및 사용자가 입력한 사용자 데이터 등을 표시할 수 있다.
여기서, 표시부(260)는 액정표시장치(LCD, Liquid Crystal Display), 초박막 액정표시장치(TFT-LCD, Thin Film Transistor LCD), 발광다이오드(LED, Light Emitting Diode), 유기 발광다이오드(OLED, Organic LED), 능동형 유기발광다이오드(AMOLED, Active Matrix OLED), 레티나 디스플레이(Retina Display), 플렉시블 디스플레이(Flexible display) 및 3차원(3 Dimension) 디스플레이 등으로 구성될 수 있다. 이때, 표시부(260)가 터치스크린(Touch screen) 형태로 구성된 경우, 표시부(260)는 입력부(230)의 기능 중 일부 또는 전부를 수행할 수 있다.
구체적으로, 본 발명의 실시 예에서 표시부(260)는 제어부(210)의 제어에 따라서 서버(100)로부터 수신한 사용자의 현재 위치가 표시된 지도 또는 제어부(210)의 제어에 따라서 위치 제공 장치(400)를 통해 산출한 사용자의 현재 위치가 표시된 지도를 표시할 수 있다.
이러한 표시부(260)를 통해 사용자는 본인의 현재 위치를 지도 상에서 간편하게 확인할 수 있다.
저장부(270)는 데이터를 저장하기 위한 장치로, 주 기억 장치 및 보조 기억 장치를 포함하고, 단말 장치(200)의 기능 동작에 필요한 응용 프로그램을 저장한다.
이러한 저장부(270)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
특히 본 발명에 따른 저장부(270)는 단말 장치(200)를 부팅시키는 운영체제, 소프트웨어 또는 하드웨어 형태로 구현된 음성 정보 또는 이미지 정보를 이용한 사용자의 현재 위치를 제공하는 위치 제공 장치(400)를 저장할 수 있다.
도 5는 본 발명의 일 실시 예에 따른 위치 제공 장치에서의 음성 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 5를 참조하면, 위치 제공 장치(400)는 단말 장치(200)로부터 복수의 건물 또는 시설물에 대한 음성 정보를 수신한다. 즉, 시설물에 대한 명칭인 ‘에스컬레이터’, 건물이나 상점 등에 대한 브랜드 명칭인 ‘xxx 커피숍’, ‘yyy 여성복’을 음성으로 수신한다(s 500).
다양한 형태의 음성 분석 기술을 통해 복수의 건물 또는 시설물에 대한 식별 정보를 추출하며(s 502), 이를 통해 시설물에 대한 명칭인 ‘에스컬레이터’나 브랜드 명칭인 ‘xxx’, ‘yyy’와 같은 식별 정보가 추출된다.
상기 식별 정보를 이용하여 상기 복수의 건물 또는 시설물의 위치 정보를 획득한다(s 504). 상기 위치 정보는 번지 수와 같은 주소이거나 위도 또는 경도로 표현될 수 있다.
위치 제공 장치(400)는 지도 DB 상에서, 상기 식별 정보와 위치 정보 및 사용자와의 위치 관계를 고려하여 음성 입력한 복수의 건물 또는 시설물이 공통으로 겹쳐지는 장소를 찾아 이를 현재 위치로서 산출한다(s 506).
즉, 현재의 지도 DB에서 음성으로 획득한 ‘에스컬레이터’, ‘xxx 커피숍’, ‘yyy 여성복’이 공통적으로 모두 포함되는 부분을 찾으면 해당 부분이 사용자의 현재 위치가 된다.
이렇게 산출된 현재 위치는 지도 DB 상에 표시되어 단말 장치(200)를 통해 출력된다(s 508).
상술한 바와 같이, 위치 제공 장치(400)를 이용하여 음성 정보를 통해 사용자의 현재 위치를 산출하는 과정은 서버(100) 또는 단말 장치(200)에서 이루어질 수 있다.
도 6은 본 발명의 다른 실시 예에 따른 위치 제공 장치에서의 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 6을 참조하면, 위치 제공 장치(400)는 단말 장치(200)를 통해 복수의 건물 또는 시설물에 대한 촬영된 이미지를 획득한다(s 600).
예를 들어, 사용자가 현재 위치하고 있는 장소에서 보이는 시설물인 ‘에스컬레이터’의 형태와 ‘xxx 커피숍’, ‘yyy 여성복’에 대해 브랜드 명칭이나 로고가 포함된 간판을 확인할 수 있는 형태로 촬영된 이미지를 획득한다.
이미지는 상기의 3가지의 시설이 모두 하나의 이미지에 포함되도록 촬영된 한 장의 이미지일 수도 있고, 촬영 방향을 고려하여 각각 촬영된 3장의 이미지일 수도 있다.
위치 제공 장치(400)는 다양한 형태의 영상 처리 기법을 이용하여, 유사 이미지 분석 및 문자 분석을 통해 수신한 이미지 상에서 시설물이나 로고 이미지의 형태, 간판에 포함된 문자 등을 추출하여 상기 복수의 건물 또는 시설물에 대한 식별 정보를 추출한다(s 602).
즉, 에스컬레이터가 촬영된 이미지로부터 이미지 분석을 통해 상기 촬영된 시설물의 형태가 에스컬레이터임을 추출하며, 촬영된 간판에 포함된 문자에 대해 문자 분석을 통해 브랜드 명칭인‘xxx’와 ‘yyy’를 추출한다.
상기 추출된 식별 정보를 이용하여 상기 복수의 건물 또는 시설물에 대한 위치 정보를 획득하며(s 604), 상기 위치 정보는 번지 수와 같은 주소이거나 위도 또는 경도일 수 있다.
위치 제공 장치(400)는 상기 식별 정보, 위치 정보 및 사용자와의 위치 관계에 더하여 이미지의 촬영 방향 정보를 더 고려하여 사용자의 현재 위치를 산출한다(s 606).
즉, 지도 DB 상에서 상기 추출된 복수의 건물 또는 시설물들이 공통적으로 겹쳐지는 부분을 현재 위치로서 찾되, 단말 장치(200)의 센서부(250)를 통해 이미지가 촬영될 때 촬영 방향각을 더 고려하게 되면, 사용자가 에스컬레이터의 어느 쪽에 있는 지, ‘xxx 커피숍’에서 어느 방향으로 얼마만큼의 각도의 위치에 서 있는 지 등이 함께 고려되므로, 단순히 시설물들이 공통으로 존재하는 위치를 찾을 수 있는 것뿐 아니라 사용자가 서 있는 방향까지 알 수 있게 된다.
따라서 음성 정보만을 이용하여 사용자의 현재 위치를 산출하는 실시 예보다 사용자의 현재 위치에 대한 정확도를 더 높일 수 있게 된다.
상기와 같이 산출된 사용자의 현재 위치는 지도 DB 상에 표시되며(s 608), 현재 위치가 표시된 지도는 단말 장치(200)를 통해 출력되어 사용자가 간편하게 확인할 수 있다.
도 7은 본 발명의 일 실시 예에 따른 위치 제공 장치가 서버에 설치되어 서버에서의 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 7을 참조하면, 위치 제공 장치(400)가 서버(100)에 설치되므로, 서버(100)와 단말 장치(200) 간의 연동을 통해 단말 장치(200) 사용자의 현재 위치를 산출한다.
먼저, 단말 장치(200)를 통해 사용자의 현재 위치에서 시야 범위에 들어오는 복수의 건물 또는 시설물에 대한 정보를 음성으로 입력하거나 이미지로 촬영한다(s 700).
단말 장치(200)를 통해 입력 또는 촬영된 상기 음성 정보 또는 이미지 정보는 위치 산출을 위해 서버(100)로 전송된다(s 702).
이 때, 전송되는 정보가 이미지 정보인 경우에는 상기 이미지가 촬영된 방향 정보를 포함하여 전송할 수 있다.
서버(100)에서는 서버에 설치된 위치 제공 장치(400)를 이용하여 상기 음성 정보 또는 이미지 정보를 분석하여 사용자의 현재 위치를 산출한다.
구체적으로, 다양한 음성 분석 기술 및 영상 처리 기술을 통해 음성 정보 또는 이미지 정보를 분석하고(s 704), 상기 분석된 정보로부터 상기 복수의 건물 또는 시설물에 대한 식별 정보를 추출한다(s 706). 식별 정보란 사용자의 시야 범위에 들어오는 시설물 등에 대한 명칭, 상점이나 건물의 간판에 포함된 명칭이나 로고 등을 의미한다.
상기 식별 정보를 이용하여 상기 복수의 시설물에 대한 위치 정보를 획득한다(s 708). 위치 정보는 건물 또는 시설물에 대한 번지 수이거나 위도, 경도 등으로 표현된 정보일 수 있다.
이렇게 추출 또는 획득된 정보를 이용하여 지도 DB 상에서 상기 복수의 건물 또는 시설물이 공통으로 겹쳐지는 부분을 찾아 이를 사용자의 현재 위치로서 산출한다(s 710).
이 때, 이미지 정보의 경우에는 이미지가 촬영된 방향에 대한 정보가 더 고려되므로, 공통으로 겹쳐지는 위치에서 사용자의 서 있는 방향까지 더 확인이 가능하여, 음성 정보를 이용하는 경우보다 사용자의 현재 위치에 대한 정확도를 높일 수 있다.
산출된 사용자의 현재 위치는 지도 DB 상에 매핑되어 표시되며(s 712), 이렇게 현재 위치가 표시된 지도는 단말 장치로(200) 전송된다(s 714).
단말 장치(200)는 표시부(260)를 통해 상기 지도를 출력하며(s 716), 따라서 사용자는 단말 장치(200)를 이용해 간편하게 자신의 위치를 확인할 수 있다.
도 8은 본 발명의 다른 실시 예에 따른 위치 제공 장치가 단말 장치에 설치되어 단말 장치에서의 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법을 구체적으로 도시한 흐름도이다.
도 8을 참조하면, 위치 제공 장치(400)는 단말 장치(200)에 소프트웨어 또는 하드웨어 형태로 구현되어 설치되거나, 또는 소프트웨어로 구현된 위치 제공 장치(400)를 서버(100)로부터 다운로드 받아 단말 장치(200)에 저장할 수 있다. 따라서 단말 장치(200)가 위치 산출의 모든 과정을 제어한다.
단말 장치(200) 사용자로부터 입력부(230)를 통해 복수의 건물 또는 시설물에 대한 명칭을 음성으로 입력 받거나 또는 촬영부(240)를 통해 복수의 건물 또는 시설물에 대한 형태나 간판 등을 촬영한 음성 정보 또는 이미지 정보를 획득한다(s 800).
상술한 바와 같이 다양한 음성 분석 기술 또는 영상 처리 기술을 이용하여 상기 음성 정보 또는 이미지 정보의 분석을 통해 상기 복수의 건물 또는 시설물에 대한 명칭, 브랜드 명칭, 로고 등과 같은 식별 정보를 추출하며(s 802, 804), 이렇게 추출된 식별 정보를 이용하여 상기 복수의 건물 또는 시설물에 대한 위치 정보를 획득한다(s 806).
상기 식별 정보 및 위치 정보를 이용하여 지도 DB 상에서 복수의 건물 또는 시설물이 공통적으로 겹쳐지는 위치를 찾아 이를 사용자의 현재 위치로 산출한다(s 808). 현재 위치 산출 시, 이미지 정보를 이용하는 경우에는 단말 장치(200)에서 상기 이미지가 촬영될 때 촬영 방향을 감지하므로, 음성 정보를 이용하는 경우에 비해 현재 위치에 대한 정확도를 더 높일 수 있다.
상기 산출된 현재 위치를 지도 DB 상에 매핑하여 표시하고(s 810), 단말 장치(200)는 이를 표시부(260)를 통해 출력하여 사용자에게 제공한다(s 812).
도 9는 본 발명의 실시 예에 따라 산출된 사용자의 현재 위치를 지도 DB 상에 표시하여 단말 장치를 통해 제공하는 예시도이다.
도 9를 참조하면, 단말 장치(200)의 사용자는 상기 점선으로 표시된 원 안에 위치하는 것임을 단말 장치(200)를 통해 확인할 수 있다.
예를 들어, 사용자가 현재 위치에서 ‘ㅇㅇ푸드’로 가고자 한다면, 우선 현재의 위치를 알 필요가 있다.
이 때 사용자는 본인이 서 있는 위치에서 시야 범위에 들어오는 복수의 건물 또는 시설물의 정보, 여기에서는 ‘ㅇㅇ화장품’과 ‘ㅇㅇ주류’에 대해 단말 장치(200)에 음성으로 입력하거나 상기 상점의 간판이 보이도록 단말 장치(200)를 이용하여 촬영한다.
이렇게 입력된 음성 정보 또는 촬영된 이미지 정보는 서버(100) 또는 단말 장치(200)의 위치 제공 장치(400)에서 분석되어 ‘ㅇㅇ화장품’과 ‘ㅇㅇ주류’라는 명칭으로 그 식별 정보를 추출할 것이며, 이를 이용하여 위치 정보를 획득한다.
식별 정보, 위치 정보 및 사용자와의 위치 관계를 고려하여 지도 DB 상에서 상기 정보들이 공통으로 겹쳐지는 부분을 사용자의 현재 위치로서 산출한다.
상기의 예에서, ‘ㅇㅇ화장품’과 ‘ㅇㅇ주류’가 공통으로 포함되는 부분을 지도 DB 상에서 찾아 해당 부분을 사용자의 현재 위치로서 산출하며, 이를 지도 상에 매핑하여 표시한다.
이렇게 현재 위치가 표시된 지도는 단말 장치(200)의 표시부(260)를 통해 출력되어 사용자에게 제공된다.
이 때, 이미지 정보를 이용하는 경우라면, 단말 장치(200)에 의해 이미지가 촬영될 때, 이미지가 촬영된 방향 정보까지 고려되므로 음성 정보를 이용하는 경우보다 현재 사용자의 위치에 대한 정확도가 더 높을 것이다.
도 10은 본 발명의 실시 예에 따른 위치 제공 방법을 위한 장치의 오퍼레이팅 환경을 도시한 도면이다.
도 10 및 이하의 설명은 본 발명이 구현될 수 있는 적절한 컴퓨팅 환경의 간단하고, 일반적인 설명을 제공하고자 한다. 요구사항은 아니지만, 본 발명은 컴퓨터 시스템에 의해 실행되고 있는 프로그램 모듈과 같은 컴퓨터 실행가능 명령어와 관련하여 기술될 수 있다.
일반적으로, 프로그램 모듈은 특정 태스크를 수행하거나 특정 추상 데이터 유형을 구현하는 루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포함한다. 컴퓨터 실행가능 명령어, 관련 데이터 구조, 및 프로그램 모듈은 본 명세서에 개시된 발명의 행위를 실행하는 프로그램 코드 수단의 예를 나타낸다.
도 10을 참조하면, 본 발명을 구현하는 예시적인 컴퓨팅 시스템은 프로세싱 유닛(11), 시스템 메모리(12), 및 상기 시스템 메모리(12)를 포함하는 다양한 시스템 컴포넌트를 상기 프로세싱 유닛(11)에 연결시키는 시스템 버스(10)를 포함하는 형태로된 컴퓨팅 장치를 포함한다.
프로세싱 유닛(11)은 본 발명의 특징을 구현하도록 설계된 컴퓨터-실행가능 명령어를 실행시킬 수 있다.
시스템 버스(10)는 다양한 버스 아키텍처 중의 임의의 것을 사용하는 로컬 버스, 주변 버스, 및 메모리 버스 또는 메모리 컨트롤러를 포함하는 몇 가지 유형의 버스 구조 중의 임의의 것일 수 있다.
시스템 메모리(12)는 ROM(Read Only Memory)(12a) 및 RAM(Random Access Memory)(12b)을 포함한다. 시동중과 같은 때에 컴퓨팅 시스템 내의 구성요소들 간에 정보를 전송하는 것을 돕는 기본 루틴을 포함하는 기본 입출력 시스템(BIOS)(13a)은 일반적으로 ROM(12a)에 저장될 수 있다.
컴퓨팅 시스템은 저장 수단을 포함할 수 있는데, 예를 들어, 하드 하드 디스크로부터 정보를 판독하거나 그 하드 디스크에 정보를 기록하는 하드 디스크 드라이브(15), 자기 디스크로부터 정보를 판독하거나 그 자기 디스크에 정보를 기록하는 자기 디스크 드라이브(16), 및 예를 들면, CD-ROM 또는 기타 광 매체 등의 광 디스크로부터 정보를 판독하거나 그 광 디스크에 정보를 기록하는 광 디스크 드라이브(17)를 포함할 수 있다.
하드 디스크 드라이브(15), 자기 디스크 드라이브(16), 및 광 디스크 드라이브(17)는 각각 하드 디스크 드라이브 인터페이스(18), 자기 디스크 드라이브-인터페이스(19), 및 광 드라이브 인터페이스(20)에 의해 시스템 버스(10)에 접속된다.
또한, 컴퓨팅 시스템은, 저장 수단으로서 외장 메모리(21)를 더 구비할 수 있다. 상기 외장 메모리(21)는 입출력 인터페이스(24)를 통해서 시스템 버스(10)에 접속될 수 있다.
상술한 드라이브 및 그 드라이브에 의해 판독 및 기록되는 관련 컴퓨터 판독가능 매체는 컴퓨터 실행가능 명령어, 데이터 구조, 프로그램 모듈 및 기타 데이터의 비휘발성 저장을 제공한다.
본 명세서에서 기술된 예시적인 환경은 하드 디스크(15), 자기 디스크(16) 및 광 디스크(17)를 예시하고 있으나, 이외에 자기 카세트, 플래쉬 메모리 카드, DVD, 베루누이 카트리지(Bernoulli cartridge), RAM, ROM, 등을 포함하는, 데이터를 저장하는 다른 유형의 컴퓨터 판독가능 매체가 이용될 수 있다.
상기 프로세싱 유닛(11)에 의해 로딩되어 실행되는, 오퍼레이팅 시스템(13b), 하나 이상의 애플리케이션 프로그램(13c), 기타 프로그램 모듈(13d), 및 프로그램 데이터(13c)를 포함하는 하나 이상의 프로그램 모듈을 포함하는 프로그램 코드 수단은 하드 디스크(15), 자기 디스크(16), 광 디스크(17), ROM(12a) 또는 RAM(12b)에 저장될 수 있다. 본 발명에 따른 아이콘 기반의 물품 거래 처리 방법은, 프로그램 모듈로 구현되어 상기 하드 디스크(15), 자기 디스크(16), 광 디스크(17), ROM(12a) 또는 RAM(12b) 중 적어도 하나에 저장된 후, 프로세싱 유닛(11)에 의해 로딩되어 실행될 수 있다.
아울러, 상기 컴퓨팅 시스템은, 키보드, 포인팅 장치, 마이크로폰, 조이 스틱, 게임 패드, 스캐너, 등과 같은 기타 입력 장치(22)를 통해 사용자로부터 명령 및 정보를 입력받을 수 있다.
이들 입력 장치(22)는 시스템 버스(10)에 연결된 입출력 인터페이스(24)를 통해 프로세싱 유닛(11)에 접속될 수 있다. 입출력 인터페이스(24)는 예를 들면, 직렬 포트 인터페이스, PS/2 인터페이스, 병렬 포트 인터페이스, USB 인터페이스, IEEE(Institute of Electrical and Electronics Engineers) 1394 인터페이스(즉, 파이어와이어(FireWire) 인터페이스)와 같은 매우 다양한 서로 다른 인터페이스 중 임의의 것을 논리적으로 나타내거나, 다른 인터페이스의 조합까지도 논리적으로 나타낼 수 있다.
더하여, 본 발명이 적용되는 컴퓨팅 시스템은, 모니터 혹은 LCD와 같은 디스플레이 장치(26) 또는 스피커나 마이크로폰과 같은 오디오 장치(27)를 더 포함할 수 있으며, 이들은, 비디오/오디오 인터페이스(25)를 통해서 시스템 버스(10)에 접속된다. 상기 비디오/오디오 인터페이스부(25)는 HDMI(High Definition Multimedia Interface), GDI(Graphics Device Interface) 등을 포함할 수 있다.
또한, 본 발명을 실행하는 컴퓨팅 시스템은, 예를 들면, 사무실-광역 또는 기업-광역 컴퓨터 네트워크, 홈 네트워크, 인트라넷, 및/또는 인터넷과 같은 네트워크에 접속 가능하다. 컴퓨터 시스템은 이러한 네트워크를 통해, 예를 들면, 원격 컴퓨터 시스템, 원격 애플리케이션, 및/또는 원격 데이터베이스와 같은 외부 소스들과의 데이터를 교환할 수 있다.
이를 위해 본 발명이 적용되는 컴퓨팅 시스템은 외부 소스로부터 데이터를 수신하고/거나 외부 소스로 데이터를 전송하는 네트워크 인터페이스(27)를 포함한다.
본 발명에 있어서, 이러한 컴퓨팅 시스템은, 네트워크 인터페이스(27)를 통해서 원격지에 위치한 장치와 정보를 송수신할 수 있다.
예컨대, 컴퓨팅 시스템이 서버(100)를 의미하는 경우, 네트워크 인터페이스(27)를 통해 단말 장치(200)와 정보를 송수신할 수 있다. 반면, 컴퓨팅 시스템이 단말 장치(200)를 의미하는 경우, 네트워크 인터페이스(27)를 통해 서버(100)와 정보를 송수신할 수 있다.
네트워크 인터페이스(27)는, 예를 들면, 네트워크 인터페이스 카드 및 대응하는 네트워크 드라이버 인터페이스 사양(Network Driver Interface Specification: "NDIS") 스택과 같은 하나 이상의 소프트웨어 및/또는 하드웨어 모듈의 논리적 조합으로 나타낼 수 있다.
마찬가지로, 컴퓨터 시스템은 입출력 인터페이스(24)를 통해 외부 소스로부터 데이터를 수신하거나 외부 소스로 데이터를 전송한다. 입출력 인터페이스(24)는 모뎀(23)(예를 들면, 표준 모뎀, 케이블 모뎀, 또는 디지털 가입자선(digital subscriber line: “DSL”) 모뎀)에 연결될 수 있으며, 이러한 모뎀(23)을 통해 외부 소스로부터 데이터를 수신하고/거나 외부 소스로 데이터를 전송할 수 있다.
도 10은 본 발명에 적절한 오퍼레이팅 환경을 나타내지만, 본 발명의 원리는, 필요하다면 적절한 수정으로, 본 발명의 원리를 구현할 수 있는 임의의 시스템에 채용될 수 있다.
도 10에 도시된 환경은 단지 예시적이며 본 발명의 원리가 구현될 수 있는 매우 다양한 환경의 작은 일부도 나타내지 못한다.
아울러, 본 발명의 프로그램 및 프로그램 실행 시 발생되는 다양한 정보는 도 10과 같은 컴퓨팅 시스템에 관련된 임의의 컴퓨터 판독 가능 매체에 저장되고 액세스될 수 있다. 예를 들면, 이러한 프로그램 모듈들의 일부 및 관련 프로그램 데이터의 일부는, 시스템 메모리(12)에 저장하기 위해, 오퍼레이팅 시스템(13b), 애플리케이션 프로그램(13c), 프로그램 모듈(13d), 및/또는 프로그램 데이터(13e)에 포함될 수 있다.
또한, 하드 디스크와 같은 대용량(mass) 저장 장치가 컴퓨팅 시스템에 연결되면, 이러한 프로그램 모듈 및 관련 프로그램 데이터는 대용량 저장 장치에 저장될 수 있다.
네트워크 환경에서, 본 발명과 관련된 프로그램 모듈 또는 그 일부는 입출력 인터페이스(24)의 모뎀(23) 또는 네트워크 인터페이스(25)를 통해 연결된 원격 컴퓨터 시스템, 예를 들어, 서버(100) 및 단말 장치(200)의 컴퓨팅 시스템에 관련된 시스템 메모리 및/또는 대용량 저장 장치와 같은 원격 메모리 저장 장치에 저장될 수 있다. 이러한 모듈의 실행은 전술한 바와 같이 분산형 환경에서 수행될 수 있다.
방법 단계들은 온 입력(on input) 데이터를 동작 시키고 출력을 발생시킴으로써 기능들을 수행하기 위해 컴퓨터 프로그램을 실행하는 하나 이상의 프로그램 가능 프로세서들에 의해 수행될 수 있다. 방법 단계들은 또한 특수 목적 논리 회로 조직, 예를 들어 FPGA(field programmable gate away) 또는 ASIC(application-specific integrated circuit)에 의해 수행될 수 있고, 장치는 이들로서 구현될 수 있다.
컴퓨터 프로그램의 처리에 적절한 프로세서들은 예로서, 범용 및 특수 목적 마이크로프로세서들 둘 다, 및 임의의 종류의 디지털 컴퓨터의 임의의 하나 이상의 프로세서들을 포함한다.
일반적으로, 프로세서는 판독 전용 메모리 또는 랜덤 액세스 메모리 또는 둘 다로부터 명령어들 및 데이터를 수신할 것이다. 컴퓨터의 요소들은 명령어들을 실행하는 적어도 하나의 프로세서 및 명령어들 및 데이터를 저장하는 하나 이상의 메모리 장치들을 포함할 수 있다.
일반적으로, 컴퓨터는 데이터를 저장하는 하나 이상의 대량 저장 장치들, 예를 들어, 자기-광 디스크들, 또는 광 디스크들을 포함할 수 있거나, 이것들로부터 데이터를 수신하거나 이것들에 데이터를 송신하거나 또는 양쪽으로 되도록 결합될 수 있다.
컴퓨터 프로그램 명령어들 및 데이터를 구체화하는데 적절한 정보 캐리어들은 예로서 반도체 메모리 장치들, 예를 들어, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD_ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광 기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 롬(ROM, Read Only Memory), 램(RAM, Random Access Memory), 플래시 메모리, EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 등을 포함한다.
프로세서 및 메모리는 특수 목적 논리 회로 조직에 의해 보충되거나, 이에 포함될 수 있다.
본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시 형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다.
개별적인 실시 형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시 형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시 형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시 형태에서 구현 가능하다.
나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.
마찬가지로, 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안된다.
특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시 형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징될 수 있다는 점을 이해하여야 한다.
본 명세서에서 설명한 주제의 특정한 실시 형태를 설명하였다. 기타의 실시 형태들은 이하의 청구항의 범위 내에 속한다.
예컨대, 청구항에서 인용된 동작들은 상이한 순서로 수행되면서도 여전히 바람직한 결과를 성취할 수 있다. 일 예로서, 첨부도면에 도시한 프로세스는 바람직한 결과를 얻기 위하여 반드시 그 특정한 도시된 순서나 순차적인 순서를 요구하지 않는다.
본 기술한 설명은 본 발명의 최상의 모드를 제시하고 있으며, 본 발명을 설명하기 위하여, 그리고 당업자가 본 발명을 제작 및 이용할 수 있도록 하기 위한 예를 제공하고 있다. 이렇게 작성된 본 명세서와 도면에 개시된 본 발명의 실시 예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.
본 발명은 음성 정보 또는 이미지 정보를 이용한 위치 제공 방법 및 이를 위한 장치에 관한 것으로서, 서버 또는 단말 장치에 설치된 위치 제공 장치를 이용하여 음성 정보 또는 이미지 정보를 기반으로 사용자의 현재 위치를 산출한다.
산출된 현재 위치는 지도 상에 표시되어 단말 장치로 제공되며, 별도의 기반 시설이나 GPS 음영지역에 관계 없이 사용자의 단말 장치만으로 간편하게 사용자의 위치를 파악할 수 있다.
아울러, 본 발명은 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있다.
Claims (10)
- 사용자의 현재 위치를 기준으로 사용자의 시야 범위에 존재하는 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 획득하여, 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 정보 처리 모듈;상기 식별 정보를 기준으로 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 위치 정보를 획득하고, 상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여, 상기 위치 정보로부터 사용자의 현재 위치를 산출하는 위치 산출 모듈; 및상기 복수의 건물 또는 시설물의 식별 정보 및 위치 정보를 포함하는 지도 DB를 저장하는 저장 모듈;을 포함하는 것을 특징으로 하는 위치 제공 장치.
- 제1항에 있어서, 상기 정보 처리 모듈은,상기 음성 정보를 문자로 변환하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출하거나 상기 이미지 정보에 포함된 문자를 분석하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 것을 특징으로 하는 위치 제공 장치.
- 제1항에 있어서, 상기 위치 산출 모듈은,산출된 상기 현재 위치를 상기 기 저장된 지도 DB상에 매핑하여 표시하는 것을 특징으로 하는 위치 제공 장치.
- 제1항에 있어서,상기 위치 산출 모듈은, 이미지 정보를 이용하여 위치를 산출하는 경우, 상기 정보 처리 모듈을 통해서, 상기 이미지 정보와 관련된 촬영 방향 정보를 더 획득하고, 상기 획득한 촬영 방향 정보를 더 고려하여 상기 현재 위치를 산출하는 것을 특징으로 하는 위치 제공 장치.
- 위치 제공 장치가,사용자의 현재 위치를 기준으로 사용자의 시야 범위에 존재하는 복수의 건물 또는 시설물에 대한 음성 정보 또는 이미지 정보를 획득하는 단계;상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 단계;상기 식별 정보를 기준으로 상기 음성 정보 또는 이미지 정보로부터 상기 복수의 건물 또는 시설물의 위치 정보를 획득하는 단계; 및상기 복수의 건물 또는 시설물과 사용자의 위치 관계를 고려하여, 상기 위치 정보로부터 사용자의 현재 위치를 산출하는 단계;를 포함하는 것을 특징으로 하는 위치 제공 방법.
- 제5항에 있어서, 상기 식별 정보를 추출하는 단계는,상기 음성 정보를 문자로 변환하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 것을 특징으로 하는 위치 제공 방법.
- 제5항에 있어서, 상기 식별 정보를 추출하는 단계는,상기 이미지 정보에 포함된 문자를 분석하여 상기 복수의 건물 또는 시설물의 식별 정보를 추출하는 것을 특징으로 하는 위치 제공 방법.
- 제5항에 있어서,상기 이미지 정보를 획득하는 단계는,상기 이미지 정보와 관련된 촬영 방향 정보를 더 획득하고,상기 현재 위치를 산출하는 단계는,상기 촬영 방향 정보를 더 고려하여 상기 현재 위치를 산출하는 것을 특징으로 하는 위치 제공 방법.
- 제5항에 있어서, 산출된 상기 현재 위치를 기 저장된 지도 DB 상에 매핑하여 표시하는 단계를 더 포함하는 것을 특징으로 하는 위치 제공 방법.
- 제5항에 기재된 위치 제공 방법을 실행시키는 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US16/193,519 US10560809B2 (en) | 2016-09-02 | 2018-11-16 | Position providing method and apparatus therefor |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160112936A KR20180026049A (ko) | 2016-09-02 | 2016-09-02 | 위치 제공 방법 및 이를 위한 장치 |
| KR10-2016-0112936 | 2016-09-02 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| US16/193,519 Continuation US10560809B2 (en) | 2016-09-02 | 2018-11-16 | Position providing method and apparatus therefor |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2018043848A1 true WO2018043848A1 (ko) | 2018-03-08 |
Family
ID=61301323
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/KR2017/001463 Ceased WO2018043848A1 (ko) | 2016-09-02 | 2017-02-10 | 위치 제공 방법 및 이를 위한 장치 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US10560809B2 (ko) |
| KR (1) | KR20180026049A (ko) |
| WO (1) | WO2018043848A1 (ko) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6573936B2 (ja) * | 2017-06-02 | 2019-09-11 | チームラボ株式会社 | 位置測定用の端末装置,コンピュータプログラム,及びシステム |
| US12473174B2 (en) | 2020-10-21 | 2025-11-18 | Here Global B.V. | Determining floor name based on audio and/or visual samples |
| KR102320628B1 (ko) * | 2021-01-08 | 2021-11-02 | 강승훈 | 머신러닝 기반 정밀 위치 정보 제공 시스템 및 그 제공 방법 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110199185A1 (en) * | 2010-02-12 | 2011-08-18 | Jeyhan Karaoguz | Building a location based service reference database based on encountered rfid tags |
| KR20120116478A (ko) * | 2010-01-12 | 2012-10-22 | 퀄컴 인코포레이티드 | 궤적 기반 위치 결정을 이용한 이미지 식별 |
| US20130141565A1 (en) * | 2011-12-01 | 2013-06-06 | Curtis Ling | Method and System for Location Determination and Navigation using Structural Visual Information |
| KR20140058861A (ko) * | 2012-11-07 | 2014-05-15 | 한국과학기술연구원 | 영상기반 실내 위치 검출방법 및 이를 이용한 휴대용 단말기 |
| KR20140107736A (ko) * | 2013-02-26 | 2014-09-05 | 에스케이플래닛 주식회사 | 음성 메시지 제공 방법, 이를 위한 장치 및 시스템 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013110569A (ja) * | 2011-11-21 | 2013-06-06 | Sony Corp | 画像処理装置、位置情報付加方法およびプログラム |
| US9253607B2 (en) * | 2011-12-16 | 2016-02-02 | Maxlinear, Inc. | Method and system for location determination and navigation using textual information |
-
2016
- 2016-09-02 KR KR1020160112936A patent/KR20180026049A/ko not_active Ceased
-
2017
- 2017-02-10 WO PCT/KR2017/001463 patent/WO2018043848A1/ko not_active Ceased
-
2018
- 2018-11-16 US US16/193,519 patent/US10560809B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120116478A (ko) * | 2010-01-12 | 2012-10-22 | 퀄컴 인코포레이티드 | 궤적 기반 위치 결정을 이용한 이미지 식별 |
| US20110199185A1 (en) * | 2010-02-12 | 2011-08-18 | Jeyhan Karaoguz | Building a location based service reference database based on encountered rfid tags |
| US20130141565A1 (en) * | 2011-12-01 | 2013-06-06 | Curtis Ling | Method and System for Location Determination and Navigation using Structural Visual Information |
| KR20140058861A (ko) * | 2012-11-07 | 2014-05-15 | 한국과학기술연구원 | 영상기반 실내 위치 검출방법 및 이를 이용한 휴대용 단말기 |
| KR20140107736A (ko) * | 2013-02-26 | 2014-09-05 | 에스케이플래닛 주식회사 | 음성 메시지 제공 방법, 이를 위한 장치 및 시스템 |
Also Published As
| Publication number | Publication date |
|---|---|
| US10560809B2 (en) | 2020-02-11 |
| US20190090095A1 (en) | 2019-03-21 |
| KR20180026049A (ko) | 2018-03-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020226294A1 (en) | Foldable device and method for controlling image capturing by using plurality of cameras | |
| WO2017116054A1 (en) | Method for controlling content and electronic device thereof | |
| WO2017086652A1 (en) | Electronic device having rollable display and method of controlling the same | |
| WO2021015505A1 (en) | Foldable electronic device and photographing method using multiple cameras in foldable electronic device | |
| WO2013066092A1 (en) | Apparatus and method for controlling controllable device in portable terminal | |
| WO2016114609A1 (en) | Electronic device and method of processing information in electronic device | |
| WO2017039341A1 (en) | Display apparatus and control method thereof | |
| WO2014073847A1 (en) | User terminal, external apparatus, data transceiving system, and data transceiving method | |
| WO2016064132A1 (en) | Wearable device and method of transmitting content | |
| WO2012020863A1 (ko) | 이동단말기, 디스플레이 장치 및 그 제어 방법 | |
| WO2012020864A1 (ko) | 이동단말기, 디스플레이 장치 및 그 제어 방법 | |
| WO2016093543A1 (en) | Method for controlling and electronic device thereof | |
| WO2014021654A1 (en) | System for and method of transmitting communication information | |
| WO2016072721A1 (en) | Method of transmitting and receiving data of electronic device and electronic device using the method | |
| WO2016208992A1 (en) | Electronic device and method for controlling display of panorama image | |
| WO2015057013A1 (ko) | 휴대용 장치가 웨어러블 장치를 통하여 정보를 표시하는 방법 및 그 장치 | |
| WO2020116845A1 (ko) | 원격 제어 장치, 디스플레이 장치 및 이를 포함하는 원격 제어 시스템 | |
| WO2016159654A1 (ko) | 위젯 제공 시스템 및 방법 | |
| WO2020171333A1 (ko) | 이미지 내의 오브젝트 선택에 대응하는 서비스를 제공하기 위한 전자 장치 및 방법 | |
| WO2016006726A1 (ko) | 응용프로그램을 공유하기 위한 방법 및 그 전자 장치 | |
| WO2016114475A1 (en) | Method of providing preset service by bending mobile device according to user input of bending mobile device and mobile device performing the same | |
| WO2018043848A1 (ko) | 위치 제공 방법 및 이를 위한 장치 | |
| WO2018074768A1 (ko) | 영상 표시 방법 및 그 전자장치 | |
| WO2016039509A1 (ko) | 단말기 및 그 동작 방법 | |
| WO2018124842A1 (ko) | 컨텐트에 관한 정보를 제공하는 방법 및 디바이스 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17846773 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 17846773 Country of ref document: EP Kind code of ref document: A1 |