WO2012093744A1 - Rfid 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법 - Google Patents

Rfid 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법 Download PDF

Info

Publication number
WO2012093744A1
WO2012093744A1 PCT/KR2011/000469 KR2011000469W WO2012093744A1 WO 2012093744 A1 WO2012093744 A1 WO 2012093744A1 KR 2011000469 W KR2011000469 W KR 2011000469W WO 2012093744 A1 WO2012093744 A1 WO 2012093744A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
rfid
moving
copper wire
moving object
Prior art date
Application number
PCT/KR2011/000469
Other languages
English (en)
French (fr)
Inventor
안재명
Original Assignee
주식회사 리테일테크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 리테일테크 filed Critical 주식회사 리테일테크
Publication of WO2012093744A1 publication Critical patent/WO2012093744A1/ko

Links

Images

Classifications

    • E—FIXED CONSTRUCTIONS
    • E03—WATER SUPPLY; SEWERAGE
    • E03F—SEWERS; CESSPOOLS
    • E03F3/00—Sewer pipe-line systems
    • E03F3/04—Pipes or fittings specially adapted to sewers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0294—Trajectory determination or predictive filtering, e.g. target tracking or Kalman filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16L—PIPES; JOINTS OR FITTINGS FOR PIPES; SUPPORTS FOR PIPES, CABLES OR PROTECTIVE TUBING; MEANS FOR THERMAL INSULATION IN GENERAL
    • F16L21/00—Joints with sleeve or socket
    • F16L21/02—Joints with sleeve or socket with elastic sealing rings between pipe and sleeve or between pipe and socket, e.g. with rolling or other prefabricated profiled rings
    • F16L21/035—Joints with sleeve or socket with elastic sealing rings between pipe and sleeve or between pipe and socket, e.g. with rolling or other prefabricated profiled rings placed around the spigot end before connection

Definitions

  • Embodiments of the present invention relate to a copper wire analysis system and method incorporating RFID technology and video technology, and more specifically, to integrate the RFID technology and video technology in the store movement path to generate the actual copper wire information of the customer
  • the present invention relates to a system for analyzing real moving line information and a method thereof.
  • Distributors used ubiquitous networking to analyze customer shopping patterns, provide products according to the analysis results, and operate stores as a way to realize future stores.
  • an RFID (Radio Frequency Identification) system was built in the store to analyze customer shopping patterns.
  • a customer drags a shopping cart attached to an RFID tag and moves in a store, a plurality of RFID readers installed in the store recognize the RFID tag to analyze the shopping pattern of the customer.
  • a plurality of RFID readers have different RFID recognition areas, and neighboring RFID readers have an error in the RFID recognition area.
  • RFID recognition regions of neighboring RFID readers are separated from each other, or RFID recognition regions overlap.
  • the plurality of RFID readers cannot recognize the RFID tag at the point where the RFID recognition area is apart, and an error due to the overlapping recognition occurs at the point where the RFID recognition area is overlapped. Therefore, when using the RFID system, it is necessary to infer the point where the RFID tag is not recognized or to correct an error due to the duplicate recognition.
  • the exact position of the moving object is not known even at the RFID recognition point, and the position tracking technology for tracking the coordinates also has a problem that an error of 2 to 3m occurs.
  • the present invention is to solve the above-described problems, an object of the present invention, to generate the actual moving information of the customer through the RFID technology and the image technology in the store moving path, and to use the actual moving information of the shopping pattern of the customer
  • An object of the present invention is to provide a copper wire analyzing system and a method thereof.
  • a copper wire analysis system incorporating RFID technology and video technology is installed in a moving path of a store and is included in a plurality of RFID tags attached to a shopping cart.
  • a plurality of RFID readers that receive tag information from the accessed RFID tag and generate RFID identification information including the tag information when at least one RFID tag approaches an RFID recognition area, the RFID from the plurality of RFID readers
  • the RFID analysis apparatus for analyzing the RFID identification information to generate first copper line information for the plurality of RFID tags, and a preset store area is photographed by a plurality of cameras installed in the store moving path.
  • At least one moving object is detected from the generated image data and the An image analyzing apparatus for generating second copper line information on the detected moving object, and first copper line information and second copper line including time information and position information corresponding to each other among the first copper line information and the second copper line information.
  • a central management server for searching for information and integrating the retrieved first copper wire information and the second copper wire information to analyze a movement pattern on the moving object.
  • At least one of the plurality of RFID readers may have the same RFID recognition area as the area of the predetermined specific location photographed by any one of the plurality of cameras.
  • the RFID analyzer is a first communication unit for receiving the RFID identification information from the plurality of RFID reader, the RFID identification information in the unit of the plurality of RFID tag, and classifies the time information from the classified RFID identification information And an information generating unit for extracting location information and generating the first copper wire information by aligning location information of the plurality of RFID readers and radio wave strengths transmitted from the plurality of RFID tags based on the time information. And a second communication unit configured to transmit the first copper wire information to the central management apparatus.
  • the image analysis device is a receiver for receiving the image data from the plurality of cameras, an image preprocessor for pre-processing the image data, a moving object detection unit for detecting the moving object by the background modeling of the pre-processed image data Collecting image data including the detected moving object, extracting time information, location information, and coordinate information of the moving object from the image data, and location information of the image data based on the time information. And a first information generator configured to align the coordinate information of the moving object to generate the second copper wire information, and a transmitter to transmit the second copper wire information to the central management apparatus.
  • the image analysis apparatus calculates a direction vector for the moving object by using the second moving line information, when a predetermined number or more of the moving object is detected in a predetermined coordinate region in the pre-processed image data
  • the apparatus may further include a second information generator configured to generate congestion information according to the number of direction vectors.
  • the second information generating unit generates a database by matching the number of the calculated direction vector and the number of the moving object detected in the predetermined coordinate region, the predetermined coordinate region, and the database
  • a congestion determination threshold may be set on the basis, and when the number of direction vectors is greater than or equal to the congestion determination threshold, congestion information corresponding to "congestion" may be generated.
  • the central management server is a first communication unit for receiving the first copper wire information from the RFID analysis device, a second communication unit for receiving the second copper wire information from the image analysis device, the first copper wire information and An information retrieval unit for searching the first copper line information and the second copper line information having high similarity to each other by comparing the second copper line informations, time information unrecognized by the retrieved first copper line information and the second copper line information, and If there is position information, a movement pattern for analyzing the movement pattern for the moving object by integrating the unrecognized time information and the position information correction unit and the first copper line information and the second copper line information It may include an analysis unit.
  • the copper line analysis system to settle the customer card reader for recognizing the customer information from the card possessed by the mobile object, a barcode reader for recognizing barcode information from the barcode attached to the shopping cart and the goods selected by the mobile object And a point of sales terminal device for generating settlement information including the customer information and the barcode information, wherein the central management server includes tag information matching the barcode information and recognizes the barcode information.
  • the mobile terminal may search for a movement pattern including time information corresponding to the received time, and generate the shopping pattern for the movement object by reflecting the settlement information on the searched movement pattern.
  • the central management server calculates and manages the total shopping time, shopping time at each point, shopping goods, shopping stores, shopping order and shopping amount for each of the moving objects using the generated shopping pattern. Can be.
  • a copper line analysis method incorporating an RFID technology and an image technology may be implemented when at least one RFID tag of a plurality of RFID tags attached to a shopping cart approaches an RFID recognition area.
  • the first copper line information and the second copper line information including time information and position information corresponding to each other among the second copper line information are searched, and the retrieved first copper line information and the second copper line information are integrated to the moving object. Analyzing the movement pattern for the image.
  • At least one of the plurality of RFID readers may be the same as the area of the predetermined specific location photographed by any one of the plurality of cameras.
  • generating the first copper wire information for the plurality of RFID tags the step of classifying the RFID identification information by the plurality of RFID tag units, extracting the time information and location information from the classified RFID identification information And generating the first copper wire information by aligning position information of the plurality of RFID readers and the intensity of radio waves transmitted from the plurality of RFID tags based on the time information.
  • generating the second moving line information for the moving objects pre-processing the image data generated by the plurality of cameras, detecting the moving object by the background modeling of the pre-processed image data Collecting image data including the detected moving object, extracting time information, location information, and coordinate information of the moving object from the image data, and extracting the image data based on the time information. And generating location information and coordinate information of the moving object to generate the second moving line information.
  • the method may further include setting a congestion determination threshold based on the base, and generating congestion information corresponding to “congestion” when the number of direction vectors is greater than or equal to the congestion determination threshold.
  • the step of analyzing the movement pattern for the moving object by integrating the first copper line information and the second copper line information by comparing the first copper line information and the second copper line information, high mutual similarity Retrieving the first copper line information and the second copper line information, and if the unrecognized time information and location information exist in the searched first copper line information and the second copper line information, the unrecognized time information and the Compensating the position information and analyzing the movement pattern for the moving object by integrating the first copper line information and the second copper line information.
  • the moving line analysis method recognizes the customer information from the card possessed by the mobile object Recognizing the barcode information from the barcode attached to the shopping cart, the product selected by the mobile object to settle the customer information And generating settlement information including the barcode information, retrieving a movement pattern including tag information matching the barcode information and including time information corresponding to a time at which the barcode information is recognized and the settlement information.
  • the method may further include generating a shopping pattern for the moving object by reflecting the searched movement pattern.
  • the step of generating the shopping pattern may be managed by calculating the total sales statistics for the store and sales statistics for each product by reflecting the settlement information in the searched movement pattern.
  • the step of generating the shopping pattern reflects the settlement information to the searched movement pattern, the total shopping time for each of the moving objects, shopping time at each point, shopping goods, shopping stores, shopping order and shopping The amount can be calculated and managed.
  • the moving line analysis system and the method may analyze the moving pattern corresponding to the actual moving line information of the customer by integrating the RFID technology and the image technology in the store moving path.
  • the copper line analysis system and the method may be corrected to generate the customer's copper line information closer to reality.
  • the copper line analysis system and method can provide a customized service by analyzing a shopping pattern of a customer using a moving pattern of a customer generated through RFID technology and image technology, and more useful store operation is possible. Do.
  • FIG. 1 is a view showing a copper line analysis system according to an embodiment of the present invention.
  • FIG. 2 is a view showing a copper line analysis system according to another embodiment of the present invention.
  • FIG. 3 is a block diagram showing the configuration of an RFID analysis apparatus according to an embodiment of the present invention.
  • FIG. 4 is a block diagram illustrating a configuration of an image analyzing apparatus according to an exemplary embodiment.
  • FIG. 5 is a block diagram showing the configuration of a central management server according to an embodiment of the present invention.
  • FIG. 6 is a diagram illustrating first copper line information according to an embodiment of the present invention.
  • FIG. 7 is a diagram illustrating second copper wire information according to an embodiment of the present invention.
  • FIG. 8 is a diagram illustrating copper line information using first copper line information and second copper line information according to an embodiment of the present invention.
  • FIG. 9 is a flowchart illustrating a method for analyzing a moving line according to an embodiment of the present invention.
  • 1 is a view showing a copper line analysis system according to an embodiment of the present invention.
  • 1 is a system incorporating Radio Frequency Identification (RFID) technology and imaging technology, and includes a plurality of RFID readers 101, 102, 103, 104, and a plurality of cameras 201, 202, 203, and 204. ), An RFID analyzing apparatus 300, an image analyzing apparatus 400, and a central management server 500.
  • RFID Radio Frequency Identification
  • the store moving path may include not only the inside of the store building but also an area provided to move the moving object in the outside of the store building and the parking lot.
  • the shopping cart 1 may attach a bar code having barcode information matched with the first RFID tag 100 in addition to the first RFID tag 100.
  • the tag information of the first RFID tag 100 is "100”
  • the barcode information of the barcode attached to the same shopping cart 1 may also be "100”.
  • the tag information of the first RFID tag 100 attached to the same shopping cart 1 and the barcode information of the barcode may be matched one-to-one, and the matching information on the shopping cart 1 may be matched with the central management server. It may be stored at 500.
  • the plurality of RFID readers 101, 102, 103, and 104 may include a wired / wireless communication device (not shown) for transmitting tag information received from the first RFID tag 100 to the RFID analyzing apparatus 300.
  • the plurality of RFID readers 101, 102, 103, and 104 make a predetermined area an RFID recognition area (A, B, C, D) at a position installed on a store moving path.
  • the RFID recognition area RFID recognition area (A, B, C, D) as shown in Figure 1, each of the plurality of RFID reader (101, 102, 103, 104) can all have the same shape and area. Or may have different shapes and areas.
  • the tag information is unique information of the first RFID tag 100 attached to any one shopping cart 1 and may be a tag ID.
  • the tag information may be a number or a letter, or may be a mixed form of numbers and letters.
  • barcode information may also be numbers or letters.
  • the first RFID reader 101 May receive tag information from the first RFID tag 100.
  • the first RFID reader 101 may generate RFID identification information including tag information of the first RFID tag 100.
  • the RFID identification information includes tag information of the first RFID tag 100, time information when the tag information of the first RFID tag 100 is received, location information of a point where the first RFID reader 101 is installed, and first RFID. It may include reader information of the first RFID reader 101 that receives the tag information of the tag 100. In this case, the location information may be store information of a point where the first RFID reader 101 is installed, or may be information on the recognition area of the first RFID reader 101. In addition, the RFID identification information may further include a radio wave intensity transmitted from the first RFID tag 100 when the first RFID reader 101 receives the tag information from the first RFID tag 100.
  • the RFID analyzing apparatus 300 analyzes the RFID identification information and generates first copper wire information for the plurality of RFID tags. Specifically, the RFID analyzing apparatus 300 classifies each RFID identification information into RFID tag units, extracts time information and location information from the classified RFID identification information, and applies the RFID information to a plurality of RFID readers based on the extracted time information.
  • the first copper wire information is generated by aligning the position information about the position information and the radio wave intensity transmitted from the corresponding RFID tag.
  • the RFID analyzing apparatus 300 checks tag information included in RFID identification information received from the plurality of RFID readers 101, 102, 103, and 104, and thus, the first RFID tag 100 to nth.
  • RFID identification information is classified in units of RFID tags. If four pieces of RFID identification information classified by the first RFID tag 100 are included, time information and location information are extracted from the four RFID identification information. Then, the extracted time information may be arranged in order, and the first copper line information may be generated by aligning the position information of the RFID reader and the radio wave intensity transmitted from the RFID tag so as to correspond thereto.
  • the first copper line information may further include reader information of the RFID reader arranged to correspond to the time information.
  • the RFID analyzing apparatus 300 selects an RFID reader that recognizes the RFID tag by using the radio wave strength included in the RFID identification information.
  • RFID identification information having the same time information and different reader information may exist. That is, when two RFID readers in adjacent locations recognize the first RFID tag 100 at the same time, one RFID identification information may be selected using the radio wave strength.
  • the radio wave strength is transmitted by the first RFID tag 100, and the first RFID tag 100 may transmit a weak radio wave strength to a nearby RFID reader, and may transmit a stronger radio wave strength to a far-away RFID reader. Therefore, the RFID analyzing apparatus 300 selects RFID identification information having weak (or low) propagation strength among two or more RFID identification information having the same time information and having different reader information, thereby generating an error due to duplicate recognition. You can prevent it.
  • the plurality of cameras 201, 202, 203, and 204 are installed on a store moving path. Each of the plurality of cameras 201, 202, 203, and 204 may have a store area for photographing.
  • the burial area photographed by any one of the plurality of cameras 201, 202, 203, and 204 may be the same as at least one RFID recognition area of the plurality of RFID readers. That is, the RFID recognition area "A" of the first RFID reader 101 may be a preset burial area photographed by the first camera 201.
  • the first camera 201 photographs the RFID recognition area “A”
  • a blind spot may occur according to the installation angle of the first camera 201.
  • the first camera group including two or more cameras may be installed in the RFID recognition area “A” to capture the RFID recognition area “A”.
  • a plurality of RFID readers may be installed in a burial area photographed by the first camera 210 to include a plurality of RFID recognition areas.
  • Each image data generated by the plurality of cameras 201, 202, 203, and 204 includes time information at the time point at which image data is captured, location information at which a camera photographing image data is installed, and coordinate information of a moving object in the image data. It may include.
  • the location information may be store information of a point where the camera is installed, or may be preset store area information photographed by the camera.
  • the image analyzing apparatus 400 may move objects from the plurality of generated image data. Detect and generate second copper wire information about the moving object.
  • the image analyzing apparatus 400 collects image data from which one moving object is detected, and extracts time information, location information, and coordinate information of the moving object from the collected image data.
  • the second moving line information is generated by aligning the position information of the image data and the coordinate information of the moving object based on the extracted time information.
  • the image analyzing apparatus 400 extracts time information and position information from four image data when four moving image data are detected by any one moving object.
  • the second moving line information may be generated by aligning the extracted time information in order and aligning position information of the image data and coordinate information of the moving object so as to correspond thereto.
  • the image analyzing apparatus 400 may calculate a direction vector for the moving object by using the position information included in the second moving line information when a predetermined number or more moving objects are detected in the preset coordinate area in the image data. .
  • the image analysis apparatus 400 may generate a database by matching the preset coordinate region, the number of moving objects detected in the preset coordinate region, and the calculated number of direction vectors.
  • a congestion determination threshold may be set based on a database. The congestion determination threshold may be calculated by comparing the number of moving objects and the number of direction vectors according to a preset coordinate area size.
  • the image analysis apparatus 400 may set a congestion determination threshold based on a database, and generate congestion information corresponding to “congestion” when the number of direction vectors is greater than or equal to the congestion determination threshold.
  • the central management server 500 compares the time information and the location information included in the first copper line informations with the time information and the position information included in the second copper line information, so that the first copper line information and the first similar to each other having the highest similarity. 2 Search for copper line information.
  • the central management server 500 checks the searched first copper line information and the second copper line information, and checks whether there is unrecognized time information and location information in the first copper line information and the second copper line information. If unrecognized time information and location information exist in the first copper wire information and the second copper wire information, the central management server 500 corrects the unrecognized time information and location information, and retrieves the retrieved first copper wire information and the first information. 2 Integrate traffic information to analyze shopping patterns for moving objects.
  • Unrecognized time information and location information may exist in the first copper line information.
  • the moving object is not photographed by the plurality of cameras 201, 202, 203, and 204 in one region, or when the moving object is not detected in any one image data, time information that is not recognized in the second copper line information And location information.
  • the central management server 500 extracts information corresponding to the unrecognized time information and location information from the second copper line information, and then extracts the first copper line information. It can be applied to the information to correct the unrecognized time information and location information.
  • the central management server 500 extracts information corresponding to the unrecognized time information and location information from the first copper line information, and extracts the information. 2 can be applied to copper line information to compensate for unrecognized time information and location information.
  • the central management server 500 analyzes the shopping time by checking time information from the searched first copper wire information and the second copper wire information, and analyzes shopping goods and shopping stores by checking the location information, and provides location information according to the time information. By confirming and analyzing the shopping order, the movement pattern for the moving object can be analyzed to be closer to reality.
  • the central management server 500 may integrate and manage the congestion information received from the image analyzing apparatus 400 with the movement pattern.
  • the copper line analysis system illustrated in FIG. 1 integrates RFID technology and image technology to analyze a moving pattern, and may track a customer's actual copper line by synchronizing the first copper line information and the second copper line information. Therefore, the customer's line analysis is easier and more accurate.
  • FIG. 1 illustrates that the second copper wire information is generated by the image analyzing apparatus 400 and transmitted to the central management server 500, the image data generated by the plurality of cameras 201, 202, 203, and 204. They may be transmitted directly to the central management server 500 without passing through the image analysis apparatus 400.
  • the central management server 500 may receive first copper wire information on the moving object from the RFID analyzing apparatus 300 and generate second copper wire information by using the first copper wire information.
  • the central management server 500 confirms time information and location information included in the first moving line information of the moving object and collects image data having the identified time information and location information.
  • the second moving line information of the moving object may be generated by identifying time information, location information, and coordinate information of each moving object from the respective image data.
  • the central management server 500 may analyze the movement pattern for the moving object by using the retrieved first copper line information and the second copper line information.
  • FIG. 2 is a view showing a copper line analysis system according to another embodiment of the present invention.
  • the copper line analysis system shown in FIG. 1 includes a plurality of RFID readers 101, 102, 103, 104, a plurality of cameras 201, 202, 203, 204, an RFID analyzing apparatus 300, an image analyzing apparatus 400, and
  • a customer card reader 31, a barcode reader 32, and a point of sales (POS) terminal device 33 may be further included.
  • the customer card reader 31 recognizes customer information from the card possessed by the moving object.
  • the customer card reader 31 may be a magnetic strip reader (MSR) device.
  • the customer information recognized by the customer card reader 31 may include identification information of the reader that recognizes the customer information and time information when the customer information is recognized.
  • the barcode reader 32 recognizes barcode information from the barcode attached to the shopping cart 1. That is, the barcode information may be information about the shopping cart 1, and may include identification information of the reader that recognizes the barcode information and time information when the barcode information is recognized.
  • the POS terminal 33 may be set up in each of the checkout counters and generate settlement information corresponding to the goods selected by the cashier by the cashier.
  • the settlement information may include POS terminal device information, settlement product information, price information on the settlement product, settlement start time, settlement end time, receipt output time, and the like.
  • the POS terminal 33 may recognize the customer information from the credit card when the amount of the goods is paid by the credit card held by the mobile object.
  • the POS terminal 33 may be connected to the customer card reader 31 and the barcode reader 32 to receive customer information and barcode information.
  • the POS terminal 33 may include customer information and barcode information in the settlement information.
  • the POS terminal 23 transmits the generated settlement information to the central management server 500, respectively.
  • the central management server 500 may receive the settlement information from the POS terminal 33 and reflect the settlement information in the movement pattern to generate a shopping pattern for the moving object.
  • the central management server 500 searches for a movement pattern including tag information matching the barcode information included in the settlement information and including time information corresponding to the time when the barcode information is recognized.
  • barcode information attached to the shopping card 1 may be recognized by the barcode reader 32 while the moving object is pulling the shopping cart 1 and paying at the cash register.
  • tag information of the first RFID tag 100 attached to the shopping cart 1 may be received by RFID readers located near the checkout counter. Can be.
  • the central management server 500 first searches for movement patterns including tag information of an RFID tag that is matched one-to-one with barcode information included in the settlement information. In addition, among the searched movement patterns, a movement pattern having time information corresponding to a time when barcode information is recognized may be searched.
  • the central management server 500 generates shopping patterns for moving objects by applying the settlement information to the searched movement patterns, and calculates and manages the total sales statistics for the stores and the sales statistics for each product by using the shopping patterns. Can be.
  • the central management server 500 may calculate and manage the total shopping time for each moving object, the shopping time at each branch, the shopping product, the shopping store, the shopping order, and the shopping amount by using the shopping pattern.
  • the manager who manages the store can provide customer-specific shopping information using a shopping pattern, and can optimally manage the store by changing store arrangement and product display using statistical information.
  • FIG. 3 is a block diagram showing the configuration of an RFID analysis apparatus according to an embodiment of the present invention.
  • the RFID analyzing apparatus 300 illustrated in FIG. 3 shows a detailed configuration of the RFID analyzing apparatus illustrated in FIG. 1.
  • the RFID analysis apparatus 300 may include a first communication unit 310, an information generation unit 320, and a second communication unit 330.
  • the first communication unit 310 receives RFID identification information from the plurality of RFID readers 101, 102, 103, and 104. For example, in FIG. 1, if the moving object drags the shopping cart 1 to which the first RFID tag 100 is attached and moves from the RFID recognition area “A” to “D”, the first to fourth RFID readers 101 may be used. , 102, 103, and 104 may receive RFID identification information.
  • the information generator 320 generates first copper line information using the RFID identification information received through the first communication unit 310. Specifically, when the RFID generation information is received from the plurality of RFID readers 101, 102, 103, and 104, the information generation unit 320 classifies the RFID identification information in units of RFID tags, and time from the classified RFID identification information. Extract information and location information. In addition, the first copper line information may be generated by aligning the position information on the RFID reader and the radio wave intensity transmitted from the RFID tag based on the extracted time information.
  • the second communication unit 330 transmits the first copper wire information generated by the information generation unit 320 to the central management server 500.
  • FIG. 4 is a block diagram illustrating a configuration of an image analyzing apparatus according to an exemplary embodiment.
  • the image analyzing apparatus 400 illustrated in FIG. 4 represents a detailed configuration of the image analyzing apparatus illustrated in FIG. 1.
  • the image analyzing apparatus 400 may include a receiver 410, an image preprocessor 420, a moving object detector 430, a first information generator 440, a second information generator 450, and the like. It may include a transmitter 460.
  • the receiver 410 receives image data by wired / wireless communication with the plurality of cameras 201, 202, 203, and 204.
  • the image preprocessor 420 preprocesses the image data.
  • the moving object detector 430 detects the moving object by modeling the image data preprocessed by the image preprocessor 420.
  • the first information generator 440 collects image data including the moving object detected by the moving object detector 430.
  • the first information generator 440 extracts time information, location information, and coordinate information of the moving object from the collected image data.
  • the first information generator 440 generates the second moving line information by arranging the position information of the image data and the coordinate information of the moving object based on the extracted time information.
  • the second information generator 450 may detect the direction vector of the moving object by using the second moving line information when a predetermined number of moving objects are detected in the preset coordinate area in the image data preprocessed by the image preprocessor 420. Calculate
  • the second information generating unit 450 extracts time information, location information, and coordinate information in the image data from any one image data, and generates a plurality of items generated by the first information generating unit 440.
  • the second moving line information on the moving objects detected in the preset coordinate area among the moving line information is extracted.
  • the second information generator 450 may calculate the direction vectors of the detected moving objects using the extracted second copper line information, and generate congestion information according to the number of direction vectors.
  • the second information generating unit 450 generates a database by matching the number of moving objects detected in the preset coordinate region, the preset coordinate region and the calculated direction vector.
  • a congestion determination threshold is set based on this database, and when the number of direction vectors is equal to or larger than the congestion determination threshold, congestion information corresponding to "congestion" is generated.
  • Such congestion information may be generated by matching time information and location information of the image data used to determine the congestion degree.
  • the transmitter 460 transmits the second copper wire information generated by the first information generator 440 and the congestion degree information generated by the second information generator 450 to the central management server 500.
  • the central management server 500 may include a first communication unit 510, a second communication unit 520, an information search unit 530, an information correction unit 540, a movement pattern analyzer 550, and a display. A portion 560 is included.
  • the first communication unit 510 receives first copper wire information from the RFID analysis device 300.
  • the second communication unit 520 receives second copper wire information and congestion information from the image analysis device 400.
  • the information retrieval unit 530 compares the plurality of first copper wire information and the plurality of second copper wire information and searches for the first copper wire information and the second copper wire information having high similarity to each other.
  • the information retrieval unit 530 compares time information and location information included in each of the plurality of first copper wire information and the plurality of second copper wire information, and searches for a moving object including time information and location information corresponding to each other. Detect. In this case, the similarity between the time information and the location information can be determined and detected.
  • the first moving object drags the shopping cart "A" and moves a plurality of points included in the store moving path
  • the first moving object information is generated based on the RFID tag included in the shopping cart "A".
  • the second copper wire information generated based on the image data of the first moving object may correspond to each other in time and position information. In other words, the mutual similarity may be high. Accordingly, the information retrieval unit 530 retrieves the first copper line information and the second copper line information having the highest similarity between the time information and the location information.
  • the information corrector 540 checks the retrieved first copper wire information and the second copper wire information, and confirms whether unrecognized time information and location information exist in the first copper wire information and the second copper wire information. If unrecognized time information and location information exist in the first copper wire information and the second copper wire information, the central management server 500 may correct the unrecognized time information and location information.
  • the movement pattern analyzer 550 is a type of processor module.
  • the movement pattern analyzer 550 analyzes a movement pattern of a moving object by using the searched or corrected first copper line information and the second copper line information. That is, the movement pattern analyzer 550 may analyze the movement pattern including at least one of the total shopping time of the moving object, the shopping time in each shopping store, and the shopping order in the store movement path.
  • the movement pattern analyzer 550 may calculate the total shopping time for the customer information using the first time information on which the tag information on the moving object is first received and the second time information received last.
  • the movement pattern analyzer 550 searches for a movement pattern corresponding to the settlement information, and reflects the settlement information on the searched movement pattern to perform shopping. You can create a pattern.
  • the display unit 560 may display a shopping pattern.
  • the shopping pattern may be classified and displayed in a moving object unit (customer information unit), a store unit, a product unit, and a time unit.
  • the display unit 560 may display the congestion information received by the second communication unit 520.
  • the congestion information may be classified and displayed in units of time and location.
  • the manager who manages the store may check the shopping pattern information and the congestion degree information displayed through the display unit 560 to manage store arrangement, product display, and the like, and provide a customized service to the moving object.
  • FIG. 6 is a diagram illustrating first copper line information according to an embodiment of the present invention.
  • the first copper wire information 600 illustrated in FIG. 6 includes tag information 610, time information 620, location information 630, and reader information 64.
  • the first copper line information 600 may be copper line information for the first RFID tag having the tag information 610.
  • the time information 620 may be displayed in units of hours / minutes / seconds as time information of the time point when the tag information 610 of the “1” is received by the RFID reader and may be arranged in order.
  • the location information 630 may be store information of a point where the RFID reader receiving the tag information 610 of the “1” is installed.
  • the reader information 640 may be an RFID reader ID that receives the tag information 610 of "1".
  • the first RFID tag having the tag information 610 of "1" is "12:12:25” to "12:12:27". You can see that he stayed at the "snack” store and moved to the "beer / beverage” store at "12:12:28".
  • the first copper line information 600 may be a movement pattern for the moving object that turns off the shopping cart to which the first RFID tag is attached.
  • the radio wave intensity transmitted from the first RFID tag may be further included.
  • any one RFID identification information may be selected using the radio wave strength. That is, it is possible to prevent the occurrence of an error due to duplicate recognition by selecting the RFID identification information according to the radio wave strength.
  • FIG. 7 is a diagram illustrating second copper line information according to an embodiment of the present invention.
  • the second moving line information 700 illustrated in FIG. 7 includes moving object information 710, time information 720, location information 730, and coordinate information 740.
  • the second copper line information 700 may be copper line information for the moving object information 710 of "11".
  • the time information 720 is time information of the time point at which the image data including the moving object information 710 of the "11" is photographed.
  • the location information 730 may be store information of the point where the image data including the moving object information 710 of the "11" is photographed, and the coordinate information 740 is the moving object "11" in the image data.
  • the information 710 may be coordinate information of a detected point.
  • "11" moving object information 710 may be information that is arbitrarily assigned to one moving object among a plurality of moving objects entering and leaving the store. For example, "11" moving object information may be assigned to the eleventh moving object among the moving objects that enter and exit the store for one day.
  • the moving object that has received the moving object information 710 of the “11” is “12:12:25” to “12:12:27”. You can see that he stayed at the "snack” store and moved to the "beer / beverage” store at "12:12:28”.
  • FIG 8 is a diagram illustrating integrated copper line information using first copper line information and second copper line information according to an embodiment of the present invention.
  • the integrated copper line information 800 illustrated in FIG. 8 is a combination of the first copper line information 100 and the second copper line information 200 illustrated in FIGS. 6 and 7, and the central management server 500 illustrated in FIG. 1. It may be generated by), and may be a kind of moving pattern analysis information.
  • the central management server 500 receives a plurality of first copper wire information from the RFID analyzing apparatus 300, and receives a plurality of second copper wire information from the image analyzing apparatus 400.
  • the central management server 500 compares each piece of time information and location information included in the plurality of first copper wire information and the plurality of second copper wire information, and searches for the first copper wire information and the second copper wire information having high similarity to each other. do.
  • the first copper wire information 600 shown in FIG. 6 is included, and the second copper line information 700 shown in FIG. 7 of the plurality of second copper wire information is included. If it is included, the time information and the location information between the first copper line information 600 and the second copper line information 700 correspond to each other, the mutual similarity is "1" means that the two information is substantially the same. This can be
  • the central management server 500 generates the integrated copper line information 800 by using the first copper line information 600 and the second copper line information 700.
  • the integrated copper wire information 800 moves while the moving object to which the moving object, which has been assigned the moving object information 710 of the " 11 ", is attached to the shopping cart with the first RFID tag having the tag information 610 of " 1 " It can be a pattern.
  • the integrated copper wire information 800 may include tag information 810, moving object information 820, time information 830, location information 840, leader information 850, and coordinate information 860.
  • the tag information 810 of "1” and the moving object information 820 of "11" are "12:12:25” to "12:12:27”. It was found that he stayed at the "Snacks” store and moved to the "Beer / Beverage” store at "12:12:28".
  • FIG. 6 and 7 illustrate an embodiment in which both the first copper line information 600 and the second copper line information 700 include continuous time information and location information.
  • time information and location information included in the second copper line information 700 may be discontinuous.
  • the integrated copper line information 800 illustrated in FIG. 8 may be generated by synchronizing the second copper line information 700 based on the first copper line information 600 including continuous time information and location information.
  • the mutual similarity between the first copper line information 600 and the second copper line information 700 may still be high. Therefore, after retrieving the first copper wire information 600 and the second copper wire information 700 having high mutual similarity, unrecognized time information is confirmed in the second copper wire information 700.
  • the first copper line information 600 includes "snacks" as positional information corresponding to "12:12:27". Such time information and location information may be included in the third column 750 of the second copper line information 700 to synchronize the second copper line information 700.
  • the coordinate information 740 included in the third column 750 may calculate and synchronize the midpoint coordinates of the coordinate information 740 included in the second column and the fourth column.
  • the buried area photographed by one camera and the RFID recognition area recognized by one RFID reader may be the same, but are not limited thereto.
  • an RFID recognition area recognized by two RFID readers having “1” and “2” RFID reader IDs may be included in a store area photographed by one camera.
  • the location information of the buried area photographed by one camera and the two RFID recognition areas may be matched with each other.
  • the two RFID recognition areas may have the same shape and area.
  • two RFID recognition areas within a store area may have the same area in the form of a circle, a triangle, a rectangle, or more polygons.
  • the two RFID recognition areas may have different shapes and areas within the store area photographed by one camera.
  • two RFID recognition areas within a store area may have different shapes among circular, triangular, square or more polygons, and their areas may also be different.
  • Matching information about the store area photographed by one camera, the RFID recognition area included in the store area, and the form and area information about the RFID recognition area are stored in the central management server 500, and the integration shown in FIG.
  • the copper line information 800 it can be used.
  • the central management server 500 may distinguish at least one RFID recognition area consisting of a circle, a triangle, a rectangle, or more polygons from a store area photographed by a camera, and at least one of image data photographing the store area using the same.
  • the above RFID recognition area can be distinguished.
  • the central management server 500 may display a circle, a triangle, a quadrangle, or more polygons in the image data photographing the store area by using an image data management program, and correspond to each figure area.
  • the recognition region may be matched and stored. Through this, it is possible to synchronize events (recognition time, shooting time, location information, etc.) occurring in the image data captured by the camera and the RFID reader that recognizes the RFID tag.
  • FIG. 9 is a flowchart illustrating a method for analyzing a moving line according to an embodiment of the present invention.
  • the copper line analysis method illustrated in FIG. 9 may be performed by the copper line analysis system (hereinafter, referred to as a “system”) illustrated in FIG. 1.
  • system the copper line analysis system
  • the system receives tag information from the accessed RFID tag (step 910).
  • the plurality of RFID readers may obtain tag information from the accessed RFID tag. Can be received.
  • the system generates RFID identification information including tag information (step 920).
  • the RFID identification information may further include time information at the time of receiving the tag information and location information of a point where the RFID reader receiving the tag information is installed and reader information of the RFID reader.
  • the system analyzes the RFID identification information to generate first copper wire information for the plurality of RFID tags (step 930).
  • the system may classify the plurality of RFID identification information in units of RFID tags, and generate the first copper line information by sorting the location information based on the classified RFID identification information based on time information.
  • the system generates image data by capturing a preset store area using a plurality of cameras (step 940).
  • the RFID recognition area of each RFID reader and the preset burial area photographed by the plurality of cameras may be the same on the store movement path.
  • the system detects a moving object from the image data and generates second moving line information for the moving objects (step 950).
  • the system may collect image data detected by the moving object, and extract time information, location information, and coordinate information of the moving object from the collected image data.
  • the second moving line information may be generated by aligning the position information of the image data and the coordinate information of the moving object based on the extracted time information.
  • the system searches for first copper line information and second copper line information including time information and location information corresponding to each other among the plurality of first copper line information and the plurality of second copper line information (step 960). That is, by comparing the first copper wire information and the second copper wire information, it is possible to search for the first copper wire information and the second copper wire information having high similarity to each other.
  • the system corrects the unrecognized time information and location information (step 980).
  • step 970 if there is no unrecognized time information and position information in the first copper line information and the second copper line information (step 970), or if the unrecognized time information and position information are corrected (step 980),
  • the movement pattern for the moving object is analyzed by integrating the moving line information and the second moving line information (step 990).
  • the system it is possible to grasp the actual moving line information of the moving object by analyzing the moving pattern of the moving object by integrating the first moving line information and the second moving line information.
  • the system may generate the shopping pattern for the moving object by reflecting the settlement information for the object selected by the moving object in the moving pattern. You can use this shopping pattern to manage your store and provide customized services.
  • Embodiments according to the present invention can be implemented in the form of program instructions that can be executed by various computer means can be recorded on a computer readable medium.
  • Such computer-readable media may include, alone or in combination with the program instructions, data files, data structures, and the like.
  • the program instructions recorded on the recording medium may be those specially designed and constructed for the present invention, or may be known and available to those skilled in computer software.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks such as floppy disks.
  • Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.
  • the hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Hydrology & Water Resources (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

RFID 기술 및 영상 기술을 통합한 동선 분석 시스템이 개시된다. 본 발명의 실시예에 따른 동선 분석 시스템은 쇼핑 카트에 부착된 복수의 RFID(Radio Frequency Identification) 태그 중 적어도 하나의 RFID 태그가 RFID 인식 영역 내에 접근하는 RFID 태그로부터 태그 정보를 수신하고 태그 정보를 포함하는 RFID 식별 정보를 생성하는 복수의 RFID 리더, RFID 식별 정보를 분석하여 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 RFID 분석 장치, 복수의 카메라에 의해 기 설정된 매장 영역이 촬영되어 생성된 영상 데이터에서 적어도 하나 이상의 이동 객체를 검출하고 이동 객체에 대한 제2 동선 정보를 생성하는 영상 분석 장치 및, 제1 동선 정보들 및 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색하고, 통합하여 이동 객체에 이동 패턴을 분석하는 중앙 관리 서버를 포함한다.

Description

RFID 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법
본 발명의 실시예들은 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법에 관한 것으로, 보다 상세하게는, 매장 이동 경로 내에서 RFID 기술과 영상 기술을 통합하여 고객의 실제 동선 정보를 생성하고, 실제 동선 정보를 분석하는 시스템 및 그 방법에 관한 것이다.
유통산업을 의미하는 도매 및 소매업은 국내 산업 분류 중 제조업과 금융업 다음으로 제일 많은 GDP 비중을 보이고 있다. 슈퍼마켓을 포함한 대형할인마트의 점포수가 빠르게 증가하고 있으며, 편의점은 이미 그 점포수가 수 만개에 이를 정도로 유통산업은 다양한 형태로 발전하고 있다. 또한, 슈퍼마켓, 대형할인마트 및 편의점 등의 각 매장에 진열되는 상품 종류 및 수가 증가하고 있다. 따라서, 유통업체들은 고객의 쇼핑 패턴에 맞추어 서비스를 제공하고 매장을 운영하는 미래형 매장(Future Store)을 실현하고 있다.
유통업체들은 미래형 매장을 실현하기 위한 방안으로 유비쿼터스 네트워킹을 이용하여 고객의 쇼핑 패턴을 분석하고, 분석 결과에 따라 상품을 제공하고 매장을 운영하였다.
예를 들어, 매장 내에 RFID(Radio Frequency Identification) 시스템을 구축하여 고객의 쇼핑 패턴을 분석하였다. 구체적으로, 고객이 RFID 태그가 부착된 쇼핑 카트를 끌고 매장 내에서 이동하는 경우, 매장 내에 설치된 다수의 RFID 리더가 RFID 태그를 인식하는 형태로 동선 정보를 수집하여 고객의 쇼핑 패턴을 분석하였다.
이 과정에서 다수의 RFID 리더는 서로 다른 RFID 인식 영역을 갖는데, 서로 이웃하는 RFID 리더들은 RFID 인식 영역에 오차가 발생한다. 예를 들어, 서로 이웃하는 RFID 리더들의 RFID 인식 영역이 떨어져 있거나, RFID 인식 영역이 중복된다. 이로 인해, 다수의 RFID 리더는 RFID 인식 영역이 떨어져 있는 지점에서는 RFID 태그를 인식할 수 없고, RFID 인식 영역이 중복되는 지점에서는 중복 인식으로 인한 오류가 발생한다. 따라서, RFID 시스템을 이용하는 경우, RFID 태그가 미인식된 지점을 추론하거나, 중복 인식에 따른 오류를 정정해야 한다.
또한, RFID 인식 지점에서도 이동 객체의 정확한 위치를 알 수 없으며, 좌표를 추적할 수 있는 위치 추적 기술도 2~3m의 오차가 발생하는 문제점이 있었다.
뿐만 아니라, 추론 및 정정 등의 방법을 이용하더라도, 고객의 실제 동선과 비교할 때 실제와 같은 정밀한 동선 정보를 얻는 것이 어려웠다.
본 발명은 상술한 문제점을 해결하기 위한 것으로, 본 발명의 목적은, 매장 이동 경로 내에서 RFID 기술과 영상 기술을 통해 고객의 실제 동선 정보를 생성하고, 실제 동선 정보를 이용하여 고객의 쇼핑 패턴을 분석할 수 있는 동선 분석 시스템 및 그 방법을 제공하기 위한 것이다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시예에 따른 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템은 매장 이동 경로에 설치되고, 쇼핑 카트에 부착된 복수의 RFID(Radio Frequency Identification) 태그 중 적어도 하나의 RFID 태그가 RFID 인식 영역 내에 접근하는 경우, 상기 접근된 RFID 태그로부터 태그 정보를 수신하고 상기 태그 정보를 포함하는 RFID 식별 정보를 생성하는 복수의 RFID 리더, 상기 복수의 RFID 리더로부터 상기 RFID 식별 정보가 수신된 경우, 상기 RFID 식별 정보를 분석하여 상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 RFID 분석 장치, 상기 매장 이동 경로에 설치된 복수의 카메라에 의해 기 설정된 매장 영역이 촬영되어 영상 데이터가 생성된 경우, 상기 생성된 영상 데이터에서 적어도 하나 이상의 이동 객체를 검출하고 상기 검출된 이동 객체에 대한 제2 동선 정보를 생성하는 영상 분석 장치 및 상기 제1 동선 정보들 및 상기 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색하고, 검색된 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 이동 패턴을 분석하는 중앙 관리 서버를 포함한다.
일측에 따르면, 상기 복수의 RFID 리더 중 적어도 하나는 상기 복수의 카메라 중 어느 하나에 의해 촬영되는 상기 기 설정된 특정 장소의 영역과 동일한 RFID 인식 영역을 가질 수 있다.
일측에 따르면, 상기 RFID 분석 장치는 상기 복수의 RFID 리더로부터 상기 RFID 식별 정보를 수신하는 제1 통신부, 상기 복수의 RFID 태그 단위로 상기 RFID 식별 정보를 분류하고, 상기 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출하며, 상기 시간 정보를 기준으로 상기 복수의 RFID 리더에 대한 위치 정보 및 상기 복수의 RFID 태그로부터 송출된 전파 세기를 정렬하여 상기 제1 동선 정보를 생성하는 정보 생성부 및 상기 제1 동선 정보를 상기 중앙 관리 장치에 송신하는 제2 통신부를 포함할 수 있다.
일측에 따르면, 상기 영상 분석 장치는 상기 복수의 카메라로부터 상기 영상 데이터를 수신하는 수신부, 상기 영상 데이터를 전처리하는 영상 전처리부, 상기 전처리된 영상 데이터를 배경 모델링하여 상기 이동 객체를 검출하는 이동 객체 검출부, 상기 검출된 이동 객체를 포함하는 영상 데이터들을 수집하고, 상기 영상 데이터들로부터 시간 정보, 위치 정보 및 상기 이동 객체의 좌표 정보를 추출하며, 상기 시간 정보를 기준으로 상기 영상 데이터들에 대한 위치 정보 및 상기 이동 객체의 좌표 정보를 정렬하여 상기 제2 동선 정보를 생성하는 제1 정보 생성부 및 상기 제2 동선 정보를 상기 중앙 관리 장치에 송신하는 송신부를 포함할 수 있다.
일측에 따르면, 상기 영상 분석 장치는 상기 전처리된 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 상기 이동 객체가 검출된 경우, 상기 제2 동선 정보를 이용하여 상기 이동 객체에 대한 방향 벡터를 산출하고, 방향 벡터의 수에 따라 혼잡도 정보를 생성하는 제2 정보 생성부를 더 포함할 수 있다.
일측에 따르면, 상기 제2 정보 생성부는 상기 기 설정된 좌표 영역, 상기 기 설정된 좌표 영역에서 검출된 상기 이동 객체의 수 및 상기 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성하고, 상기 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 상기 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성할 수 있다.
일측에 따르면, 상기 중앙 관리 서버는 상기 RFID 분석 장치로부터 상기 제1 동선 정보들을 수신하는 제1 통신부, 상기 영상 분석 장치로부터 상기 제2 동선 정보들을 수신하는 제2 통신부, 상기 제1 동선 정보들 및 상기 제2 동선 정보들을 비교하여, 상호 유사도가 높은 상기 제1 동선 정보와 상기 제2 동선 정보들을 검색하는 정보 검색부, 상기 검색된 제1 동선 정보 및 상기 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 상기 미인식된 시간 정보 및 상기 위치 정보를 보정하는 정보 보정부 및 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 이동 패턴 분석부를 포함할 수 있다.
일측에 따르면, 상기 동선 분석 시스템은 상기 이동 객체가 소지한 카드로부터 고객 정보를 인식하는 고객 카드 리더기, 상기 쇼핑 카트에 부착된 바코드로부터 바코드 정보를 인식하는 바코드 리더기 및 상기 이동 객체가 선택한 상품을 정산하여 상기 고객 정보 및 상기 바코드 정보를 포함하는 정산 정보를 생성하는 POS(Point of Sales) 단말 장치를 더 포함하고, 상기 중앙 관리 서버는 상기 바코드 정보와 매칭되는 태그 정보를 포함하고 상기 바코드 정보가 인식된 시간에 대응하는 시간 정보를 포함하는 이동 패턴을 검색하고, 상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체에 대한 쇼핑 패턴을 생성할 수 있다.
일측에 따르면, 상기 생성된 쇼핑 패턴을 이용하여 상기 매장에 대한 전체 매출 통계 및 각 상품에 따른 매출 통계를 산출하여 관리할 수 있다.
일측에 따르면, 상기 중앙 관리 서버는 상기 생성된 쇼핑 패턴을 이용하여 상기 이동 객체 각각에 대한 전체 쇼핑 시간, 각 지점에서의 쇼핑 시간, 쇼핑 상품, 쇼핑 매장, 쇼핑 순서 및 쇼핑 금액을 산출하여 관리할 수 있다.
한편, 본 발명의 일 실시예에 따른 RFID 기술 및 영상 기술을 통합한 동선 분석 방법은 쇼핑 카트에 부착된 복수의 RFID(Radio Frequency Identification) 태그 중 적어도 하나의 RFID 태그가 RFID 인식 영역 내에 접근하는 경우, 매장 이동 경로에 설치된 복수의 RFID 리더가 상기 접근된 RFID 태그로부터 태그 정보를 수신하고 상기 태그 정보를 포함하는 RFID 식별 정보를 생성하는 단계, 상기 복수의 RFID 리더에서 생성된 상기 RFID 식별 정보를 분석하여 상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 단계, 상기 매장 이동 경로에 설치된 복수의 카메라에 의해 기 설정된 매장 영역이 촬영되어 영상 데이터가 생성된 경우, 상기 생성된 영상 데이터에서 복수의 이동 객체를 검출하고 상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계 및 상기 제1 동선 정보들 및 상기 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색하고, 검색된 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계를 포함한다.
일측에 따르면, 상기 복수의 RFID 리더 중 적어도 하나는 상기 복수의 카메라 중 어느 하나에 의해 촬영되는 상기 기 설정된 특정 장소의 영역과 동일할 수 있다.
일측에 따르면, 상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 단계는 상기 복수의 RFID 태그 단위로 상기 RFID 식별 정보를 분류하는 단계, 상기 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출하는 단계 및 상기 시간 정보를 기준으로 상기 복수의 RFID 리더에 대한 위치 정보 및 상기 복수의 RFID 태그로부터 송출된 전파 세기를 정렬하여 상기 제1 동선 정보를 생성하는 단계를 포함할 수 있다.
일측에 따르면, 상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계는 상기 복수의 카메라에서 생성된 상기 영상 데이터를 전처리하는 단계, 상기 전처리된 영상 데이터를 배경 모델링하여 상기 이동 객체를 검출하는 단계, 상기 검출된 이동 객체를 포함하는 영상 데이터들을 수집하는 단계, 상기 영상 데이터들로부터 시간 정보, 위치 정보 및 상기 이동 객체의 좌표 정보를 추출하는 단계 및 상기 시간 정보를 기준으로 상기 영상 데이터들에 대한 위치 정보 및 상기 이동 객체의 좌표 정보를 정렬하여 상기 제2 동선 정보를 생성하는 단계를 포함할 수 있다.
일측에 따르면, 상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계는 상기 전처리된 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 상기 이동 객체가 검출된 경우, 상기 제2 동선 정보를 이용하여 상기 이동 객체에 대한 방향 벡터를 산출하는 단계, 상기 기 설정된 좌표 영역, 상기 기 설정된 좌표 영역에서 검출된 상기 이동 객체의 수 및 상기 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성하는 단계 및 상기 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 상기 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성하는 단계를 더 포함할 수 있다.
일측에 따르면, 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계는 상기 제1 동선 정보들 및 상기 제2 동선 정보들을 비교하여, 상호 유사도가 높은 상기 제1 동선 정보와 상기 제2 동선 정보들을 검색하는 단계, 상기 검색된 제1 동선 정보 및 상기 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 상기 미인식된 시간 정보 및 상기 위치 정보를 보정하는 단계 및 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계를 포함할 수 있다.
일측에 따르면, 상기 동선 분석 방법은 상기 이동 객체가 소지한 카드로부터 고객 정보를 인식하는 단계 상기 쇼핑 카트에 부착된 바코드로부터 바코드 정보를 인식하는 단계, 상기 이동 객체가 선택한 상품을 정산하여 상기 고객 정보 및 상기 바코드 정보를 포함하는 정산 정보를 생성하는 단계, 상기 바코드 정보와 매칭되는 태그 정보를 포함하고 상기 바코드 정보가 인식된 시간에 대응하는 시간 정보를 포함하는 이동 패턴을 검색하는 단계 및 상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체에 대한 쇼핑 패턴을 생성하는 단계를 더 포함할 수 있다.
일측에 따르면, 상기 쇼핑 패턴을 생성하는 단계는 상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 매장에 대한 전체 매출 통계 및 각 상품에 따른 매출 통계를 산출하여 관리할 수 있다.
일측에 따르면, 상기 쇼핑 패턴을 생성하는 단계는 상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체 각각에 대한 전체 쇼핑 시간, 각 지점에서의 쇼핑 시간, 쇼핑 상품, 쇼핑 매장, 쇼핑 순서 및 쇼핑 금액을 산출하여 관리할 수 있다.
본 발명에 따르면, 동선 분석 시스템 및 그 방법은 매장 이동 경로 내에서 RFID 기술과 영상 기술을 통합하여 고객의 실제 동선 정보에 대응하는 이동 패턴을 분석할 수 있다.
또한, 상기 동선 분석 시스템 및 그 방법은 RFID 기술 및 영상 기술 중 어느 하나를 통해 생성된 동선 정보에 미인식 정보가 존재하더라도, 이를 보정하여 고객의 동선 정보를 실제에 가깝게 생성할 수 있다.
또한, 상기 동선 분석 시스템 및 그 방법은 RFID 기술과 영상 기술을 통해 생성된 고객에 대한 이동 패턴을 이용하여 고객의 쇼핑 패턴을 분석함으로써, 고객 맞춤형 서비스를 제공할 수 있으며, 보다 유용한 매장 운용이 가능하다.
도 1은 본 발명의 일 실시예에 따른 동선 분석 시스템을 나타내는 도면이다.
도 2는 본 발명의 다른 실시예에 따른 동선 분석 시스템을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 RFID 분석 장치의 구성을 나타내는 블록도이다.
도 4는 본 발명의 일 실시예에 따른 영상 분석 장치의 구성을 나타내는 블록도이다.
도 5는 본 발명의 일 실시예에 따른 중앙 관리 서버의 구성을 나타내는 블록도이다.
도 6은 본 발명의 일 실시예에 따른 제1 동선 정보를 나타내는 도면이다.
도 7은 본 발명의 일 실시예에 따른 제2 동선 정보를 나타내는 도면이다.
도 8은 본 발명의 일 실시예에 따른 제1 동선 정보 및 제2 동선 정보를 이용한 동선 정보를 나타내는 도면이다.
도 9는 본 발명의 일 실시예에 따른 동선 분석 방법을 설명하기 위한 흐름도이다.
이하 첨부된 도면을 참조하여 본 발명의 실시 예들을 상세히 설명한다. 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시 예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 각 도면에 제시된 동일한 참조 부호는 동일한 구성을 나타낸다.
도 1은 본 발명의 일 실시예에 따른 동선 분석 시스템을 나타내는 도면이다. 도 1에 도시된 동선 분석 시스템은 RFID(Radio Frequency Identification) 기술 및 영상 기술을 통합한 시스템으로, 복수의 RFID 리더(101, 102, 103, 104), 복수의 카메라(201, 202, 203, 204), RFID 분석 장치(300), 영상 분석 장치(400) 및 중앙 관리 서버(500)를 포함할 수 있다.
제1 RFID 태그(100)는 매장 내/외부에 구비된 쇼핑 카트(또는 장바구니)(1)에 부착되어 고객(이하, '이동 객체'라 함)이 쇼핑 카트(1)를 끌고 이동하는 경우, 매장 이동 경로 상에 설치된 복수의 RFID 리더(101, 102, 103, 104)에 자신의 태그 정보를 제공할 수 있다. 여기서 매장 이동 경로란, 매장 건물 내부뿐만 아니라, 매장 건물 외부, 주차장 등에서 이동 객체가 이동하도록 구비된 영역을 포함할 수 있다.
도 1에 도시되어 있지 않으나, 쇼핑 카트(1)는 제1 RFID 태그(100) 외에 제1 RFID 태그(100)와 매칭된 바코드 정보를 갖는 바코드를 부착하고 있을 수 있다. 예를 들어, 제1 RFID 태그(100)의 태그 정보가 "100"인 경우, 동일한 쇼핑 카트(1)에 부착된 바코드의 바코드 정보 역시 "100"이 될 수 있다. 이 같이 동일한 쇼핑 카트(1)에 부착된 제1 RFID 태그(100)의 태그 정보와, 바코드의 바코드 정보는 일대일로 매칭될 수 있으며, 이 같은 쇼핑 카트(1)에 대한 매칭 정보는 중앙 관리 서버(500)에 저장되어 있을 수 있다.
복수의 RFID 리더(101, 102, 103, 104)는 제1 RFID 태그(100)로부터 수신한 태그 정보를 RFID 분석 장치(300)로 송신하기 위한 유무선 통신 장치(미도시)를 포함할 수 있다.
복수의 RFID 리더(101, 102, 103, 104)는 매장 이동 경로 상에 설치된 위치에서 일정 영역을 RFID 인식 영역(A, B, C, D)으로 한다. 이 경우, RFID 인식 영역 RFID 인식 영역(A, B, C, D)은 도 1에 도시된 바와 같이, 복수의 RFID 리더(101, 102, 103, 104) 각각이 모두 동일한 형태 및 면적을 가질 수 있으며, 또는 서로 다른 형태 및 면적을 가질 수도 있다.
태그 정보란, 어느 하나의 쇼핑 카트(1)에 부착된 제1 RFID 태그(100)의 고유 정보로, 태그 아이디가 될 수 있다. 태그 정보는 숫자 또는 문자가 될 수 있으며, 숫자와 문자가 혼용된 형태가 될 수도 있다. 또한, 바코드 정보 역시 숫자 또는 문자가 될 수 있다.
예를 들어, 이동 객체가 제1 RFID 태그(100)가 부착된 쇼핑 카트(1)를 끌고 제1 RFID 리더(101)의 RFID 인식 영역 "A"에 접근하는 경우, 제1 RFID 리더(101)는 제1 RFID 태그(100)로부터 태그 정보를 수신할 수 있다. 제1 RFID 리더(101)는 제1 RFID 태그(100)의 태그 정보를 포함하는 RFID 식별 정보를 생성할 수 있다.
RFID 식별 정보는 제1 RFID 태그(100)의 태그 정보, 제1 RFID 태그(100)의 태그 정보를 수신한 시점의 시간 정보, 제1 RFID 리더(101)가 설치된 지점의 위치 정보 및 제1 RFID 태그(100)의 태그 정보를 수신한 제1 RFID 리더(101)의 리더 정보를 포함할 수 있다. 이 경우, 위치 정보는 제1 RFID 리더(101)가 설치된 지점의 매장 정보가 될 수도 있으며, 제1 RFID 리더(101)의 인식 영역 정보가 될 수도 있다. 또한, RFID 식별 정보는 제1 RFID 리더(101)가 제1 RFID 태그(100)로부터 태그 정보를 수신할 때, 제1 RFID 태그(100)로부터 송출된 전파 세기를 더 포함할 수 있다.
RFID 분석 장치(300)는 복수의 RFID 리더(101, 102, 103, 104)로부터 RFID 식별 정보가 수신된 경우, RFID 식별 정보를 분석하여 복수의 RFID 태그에 대한 제1 동선 정보를 생성한다. 구체적으로, RFID 분석 장치(300)는 각각의 RFID 식별 정보를 RFID 태그 단위로 분류하고, 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출하며, 추출된 시간 정보를 기준으로 복수의 RFID 리더에 대한 위치 정보 및 해당 RFID 태그로부터 송출된 전파 세기를 정렬하여 제1 동선 정보를 생성한다.
예를 들어, RFID 분석 장치(300)는 복수의 RFID 리더(101, 102, 103, 104)로부터 수신된 RFID 식별 정보들에 포함된 태그 정보를 확인하여, 제1 RFID 태그(100) 내지 제n RFID 태그 단위로 RFID 식별 정보를 분류한다. 만약, 제1 RFID 태그(100) 단위로 분류된 RFID 식별 정보가 4개인 경우, 4개의 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출한다. 그리고, 추출된 시간 정보를 순서대로 정렬하고, 그에 대응하도록 RFID 리더에 대한 위치 정보 및 RFID 태그로부터 송출된 전파 세기를 정렬하여 제1 동선 정보를 생성할 수 있다. 제1 동선 정보는 시간 정보에 대응하도록 정렬된 RFID 리더의 리더 정보를 더 포함할 수 있다.
또한, RFID 분석 장치(300)는 RFID 식별 정보에 포함된 전파 세기를 이용하여 RFID 태그를 중복 인식한 RFID 리더를 선택한다.
예를 들어, 제1 RFID 태그(100) 단위로 분류된 4개의 RFID 식별 정보를 시간 정보 순서대로 정렬한 경우, 동일한 시간 정보를 가지면서 서로 다른 리더 정보를 갖는 RFID 식별 정보가 존재할 수 있다. 즉, 인접한 위치에 있는 두 개의 RFID 리더가 동일한 시간에 제1 RFID 태그(100)를 인식한 경우, 전파 세기를 이용하여 하나의 RFID 식별 정보를 선택할 수 있다. 전파 세기는 제1 RFID 태그(100)가 송출한 것으로, 제1 RFID 태그(100)는 가까이 위치한 RFID 리더에 약한 전파 세기를 송출하고, 멀리 위치한 RFID에 보다 강한 전파 세기를 송출할 수 있다. 따라서, RFID 분석 장치(300)는 동일한 시간 정보를 가지면서 서로 다른 리더 정보를 갖는 두 개 이상의 RFID 식별 정보 중 약한(또는 낮은) 전파 세기를 갖는 RFID 식별 정보를 선택하여 중복 인식에 따른 오류 발생을 방지할 수 있다.
복수의 카메라(201, 202, 203, 204)는 매장 이동 경로 상에 설치된다. 복수의 카메라(201, 202, 203, 204) 각각은 촬영을 위한 매장 영역이 기 설정되어 있을 수 있다. 복수의 카메라(201, 202, 203, 204) 중 어느 하나에 의해 촬영되는 매장 영역은 복수의 RFID 리더 중 적어도 하나의 RFID 인식 영역과 동일할 수 있다. 즉, 제1 RFID 리더(101)의 RFID 인식 영역 "A"는 제1 카메라(201)에 의해 촬영되는 기 설정된 매장 영역이 될 수 있다.
한편, 제1 카메라(201)가 RFID 인식 영역 "A"를 촬영하는 경우, 제1 카메라(201)의 설치 각도에 따라 사각 지대가 발생할 수 있다. 따라서, RFID 인식 영역 "A" 내에 두 개 이상의 카메라를 포함하는 제1 카메라 그룹을 설치하여 RFID 인식 영역 "A"를 촬영할 수 있다.
또는, 제1 카메라(210)에 의해 촬영되는 매장 영역 내에 복수의 RFID 리더를 설치하여 복수의 RFID 인식 영역이 포함될 수 있도록 할 수도 있다.
복수의 카메라(201, 202, 203, 204)에 의해 생성된 각 영상 데이터는 영상 데이터가 촬영된 시점의 시간 정보, 영상 데이터를 촬영한 카메라가 설치된 위치 정보, 영상 데이터 내에서 이동 객체의 좌표 정보를 포함할 수 있다. 이 경우, 위치 정보는 카메라가 설치된 지점의 매장 정보가 될 수도 있으며, 카메라에 의해 촬영되는 기 설정된 매장 영역 정보가 될 수도 있다.
영상 분석 장치(400)는 매장 이동 경로 상에 설치된 복수의 카메라(201, 202, 203, 204)에 의해 기 설정된 매장 영역이 촬영되어 영상 데이터가 생성된 경우, 생성된 복수의 영상 데이터에서 이동 객체를 검출하고 이동 객체에 대한 제2 동선 정보를 생성한다.
영상 분석 장치(400)는 어느 하나의 이동 객체가 검출된 영상 데이터들을 수집하고, 수집된 영상 데이터들로부터 시간 정보, 위치 정보 및 이동 객체의 좌표 정보를 추출한다. 그리고, 추출된 시간 정보를 기준으로 영상 데이터들에 대한 위치 정보 및 이동 객체의 좌표 정보를 정렬하여 제2 동선 정보를 생성한다.
예를 들어, 영상 분석 장치(400)는 어느 하나의 이동 객체가 검출된 영상 데이터가 4개인 경우, 4개의 영상 데이터들로부터 시간 정보 및 위치 정보를 추출한다. 그리고, 추출된 시간 정보를 순서대로 정렬하고, 그에 대응하도록 영상 데이터에 대한 위치 정보 및 이동 객체의 좌표 정보를 정렬하여 제2 동선 정보를 생성할 수 있다.
한편, 영상 분석 장치(400)는 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 이동 객체가 검출된 경우, 제2 동선 정보에 포함된 위치 정보를 이용하여 이동 객체에 대한 방향 벡터를 산출할 수 있다.
영상 분석 장치(400)는 기 설정된 좌표 영역, 기 설정된 좌표 영역에서 검출된 이동 객체의 수 및 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성할 수 있다. 또한, 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정할 수 있다. 혼잡도 판단 임계값은 기 설정된 좌표 영역의 크기에 따라 이동 객체의 수와 방향 벡터의 수를 대비하여 산출할 수 있다.
영상 분석 장치(400)는 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성할 수 있다.
중앙 관리 서버(500)는 제1 동선 정보들에 포함된 시간 정보 및 위치 정보와, 제2 동선 정보들에 포함된 시간 정보 및 위치 정보를 비교하여, 상호 유사도가 가장 높은 제1 동선 정보 및 제2 동선 정보를 검색한다.
중앙 관리 서버(500)는 검색된 제1 동선 정보 및 제2 동선 정보를 확인하고, 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는지를 확인한다. 만약, 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 중앙 관리 서버(500)는 미인식된 시간 정보 및 위치 정보를 보정하고 검색된 제1 동선 정보 및 제2 동선 정보를 통합하여 이동 객체에 대한 쇼핑 패턴을 분석할 수 있다.
예를 들어, 이동 객체가 쇼핑 카트(1)를 끌고 매장 이동 경로 내에서 이동하는 동안, 일 위치에서 일정 시간 동안 쇼핑 카트(1)에 부착된 제1 RFID 태그(1)가 인식되지 않은 경우, 제1 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재할 수 있다. 또는, 이동 객체가 일 영역에서 복수의 카메라(201, 202, 203, 204)에 의해 촬영되지 않거나, 어느 하나의 영상 데이터에서 이동 객체가 검출되지 않은 경우, 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재할 수 있다.
중앙 관리 서버(500)는 제1 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 미인식된 시간 정보 및 위치 정보에 대응하는 정보를 제2 동선 정보로부터 추출하고, 이를 제1 동선 정보에 적용하여 미인식된 시간 정보 및 위치 정보를 보정할 수 있다.
또는, 중앙 관리 서버(500)는 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 미인식된 시간 정보 및 위치 정보에 대응하는 정보를 제1 동선 정보로부터 추출하고, 이를 제2 동선 정보에 적용하여 미인식된 시간 정보 및 위치 정보를 보상할 수 있다.
중앙 관리 서버(500)는 검색된 제1 동선 정보 및 제2 동선 정보로부터 시간 정보를 확인하여 쇼핑 시간을 분석하고, 위치 정보를 확인하여 쇼핑 상품 및 쇼핑 매장을 분석하고, 시간 정보에 따른 위치 정보를 확인하여 쇼핑 순서를 분석함으로써, 이동 객체에 대한 이동 패턴을 실제에 가깝게 분석할 수 있다.
또한, 중앙 관리 서버(500)는 영상 분석 장치(400)로부터 수신된 혼잡도 정보를 이동 패턴과 통합하여 관리할 수도 있다.
도 1에 도시된 동선 분석 시스템은 RFID 기술과 영상 기술을 통합하여 이동 패턴을 분석하는 것으로, 제1 동선 정보와 제2 동선 정보를 동기화시킴으로써 고객의 실제 동선을 추적할 수 있다. 따라서, 고객의 동선 분석이 보다 용이하고 정확하다.
한편, 도 1에서는 제2 동선 정보를 영상 분석 장치(400)에서 생성하여 중앙 관리 서버(500)로 전송하는 것으로 설명하였으나, 복수의 카메라(201, 202, 203, 204)에 의해 생성된 영상 데이터들을 영상 분석 장치(400)를 거치지 않고 직접 중앙 관리 서버(500)로 전송할 수도 있다.
중앙 관리 서버(500)는 RFID 분석 장치(300)로부터 이동 객체에 대한 제1 동선 정보를 수신하고, 이 제1 동선 정보를 이용하여 제2 동선 정보를 생성할 수도 있다. 구체적으로, 중앙 관리 서버(500)는 이동 객체의 제1 동선 정보에 포함된 시간 정보 및 위치 정보를 확인하고, 확인된 시간 정보 및 위치 정보를 갖는 영상 데이터들을 수집한다. 각 영상 데이터들로부터 시간 정보, 위치 정보 및 각 이동 객체의 좌표 정보를 확인하여 이동 객체의 제2 동선 정보를 생성할 수 있다. 이 경우, 중앙 관리 서버(500)는 검색된 제1 동선 정보 및 상기 제2 동선 정보를 이용하여 이동 객체에 대한 이동 패턴을 분석할 수 있다.
도 2는 본 발명의 다른 실시예에 따른 동선 분석 시스템을 나타내는 도면이다. 도 1에 도시된 동선 분석 시스템은 복수의 RFID 리더(101, 102, 103, 104), 복수의 카메라(201, 202, 203, 204), RFID 분석 장치(300), 영상 분석 장치(400) 및 중앙 관리 서버(500) 외에, 고객 카드 리더기(31), 바코드 리더기(32) 및 POS(Point of Sales) 단말 장치(33)를 더 포함할 수 있다.
고객 카드 리더기(31)는 이동 객체가 소지한 카드로부터 고객 정보를 인식한다. 고객 카드 리더기(31)는 MSR(Magnetic Strip Reader) 장치가 될 수 있다. 고객 카드 리더기(31)에 의해 인식된 고객 정보는 고객 정보를 인식한 리더기의 식별 정보 및 고객 정보가 인식된 시점의 시간 정보를 포함할 수 있다.
바코드 리더기(32)는 쇼핑 카트(1)에 부착된 바코드로부터 바코드 정보를 인식한다. 즉, 바코드 정보란 쇼핑 카트(1)에 대한 정보가 될 수 있으며, 바코드 정보를 인식한 리더기의 식별 정보와 바코드 정보가 인식된 시점의 시간 정보를 포함할 수 있다.
POS 단말 장치(33)는 계산대 각각에 설치되어 계산원에 의해 이동 객체가 선택한 상품이 정산되는 경우, 그에 대응하는 정산 정보를 생성할 수 있다. 정산 정보는 POS 단말 장치 정보, 정산 상품 정보, 정산 상품에 대한 가격 정보, 정산 시작 시간, 정산 종료 시간, 영수증 출력 시간 등을 포함할 수 있다.
POS 단말 장치(33)는 상품에 대한 금액이 이동 객체가 소지한 신용 카드로 결재되는 경우, 신용 카드로부터 고객 정보를 인식할 수도 있다.
또한, POS 단말 장치(33)는 고객 카드 리더기(31) 및 바코드 리더기(32)와 연결되어 고객 정보 및 바코드 정보를 수신할 수도 있다. 이 경우, POS 단말 장치(33)는 정산 정보에 고객 정보 및 바코드 정보를 포함할 수 있다.
POS 단말 장치(23)은 각각 생성한 정산 정보를 중앙 관리 서버(500)로 전송한다.
중앙 관리 서버(500)는 POS 단말 장치(33)로부터 정산 정보를 수신하고, 이 정산 정보를 이동 패턴에 반영하여 이동 객체에 대한 쇼핑 패턴을 생성할 수 있다.
중앙 관리 서버(500)는 정산 정보가 수신되면, 이 정산 정보에 포함된 바코드 정보와 매칭되는 태그 정보를 포함하고, 바코드 정보가 인식된 시간에 대응하는 시간 정보를 포함하는 이동 패턴을 검색한다.
예를 들어, 이동 객체가 쇼핑 카트(1)를 끌고 계산대에서 정산하고 있는 동안 바코드 리더기(32)에 의해 쇼핑 카드(1)에 부착된 바코드 정보가 인식될 수 있다. 또한, 이동 객체가 쇼핑 카트(1)를 끌고 계산대에서 정산하고 있는 동안, 해당 계산대 주변에 위치한 RFID 리더들에 의해 쇼핑 카트(1)에 부착된 제1 RFID 태그(100)의 태그 정보가 수신될 수 있다.
앞서 설명한 바와 같이, 동일한 쇼핑 카트(1)에 부착된 제1 RFID 태그(100)의 태그 정보와, 바코드의 바코드 정보는 일대일로 매칭되어 있다. 따라서, 중앙 관리 서버(500)는 우선, 정산 정보에 포함된 바코드 정보와 일대일로 매칭된 RFID 태그의 태그 정보를 포함하는 이동 패턴들을 검색한다. 그리고, 검색된 이동 패턴들 중 바코드 정보가 인식된 시간에 대응하는 시간 정보를 갖는 이동 패턴을 검색할 수 있다.
중앙 관리 서버(500)는 정산 정보를 검색된 이동 패턴에 반영하여 이동 객체에 대한 쇼핑 패턴을 생성하고, 이 쇼핑 패턴을 이용하여 매장에 대한 전체 매출 통계 및 각 상품에 따른 매출 통계를 산출하여 관리할 수 있다.
또한, 중앙 관리 서버(500)는 쇼핑 패턴을 이용하여, 이동 객체 각각에 대한 전체 쇼핑 시간, 각 지점에서의 쇼핑 시간, 쇼핑 상품, 쇼핑 매장, 쇼핑 순서 및 쇼핑 금액을 산출하여 관리할 수 있다.
매장을 관리하는 관리자는 쇼핑 패턴을 이용하여 고객 맞춤형 쇼핑 정보를 제공할 수 있으며, 통계 정보를 이용하여 매장 배치 및 상품 진열 등을 변경함으로써, 매장을 최적으로 관리할 수 있다.
도 3은 본 발명의 일 실시예에 따른 RFID 분석 장치의 구성을 나타내는 블록도이다. 도 3에 도시된 RFID 분석 장치(300)는 도 1에 도시된 RFID 분석 장치에 대한 구체적인 구성을 나타낸다.
도 3을 참조하면, RFID 분석 장치(300)는 제1 통신부(310), 정보 생성부(320) 및 제2 통신부(330)를 포함할 수 있다.
제1 통신부(310)는 복수의 RFID 리더(101, 102, 103, 104)로부터 RFID 식별 정보를 수신한다. 예를 들어, 도 1에서 이동 객체가 제1 RFID 태그(100)가 부착된 쇼핑 카트(1)를 끌고 RFID 인식 영역 "A"에서 "D"까지 이동했다면, 제1 내지 제 4 RFID 리더(101, 102, 103, 104)로부터 RFID 식별 정보를 수신할 수 있다.
정보 생성부(320)는 제1 통신부(310)를 통해 수신된 RFID 식별 정보를 이용하여 제1 동선 정보를 생성한다. 구체적으로, 정보 생성부(320)는 복수의 RFID 리더(101, 102, 103, 104)로부터 RFID 식별 정보가 수신된 경우, RFID 태그 단위로 RFID 식별 정보를 분류하고, 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출한다. 또한, 추출된 시간 정보를 기준으로 RFID 리더에 대한 위치 정보 및 RFID 태그로부터 송출된 전파 세기를 정렬하여 제1 동선 정보를 생성할 수 있다.
제2 통신부(330)는 정보 생성부(320)에서 생성된 제1 동선 정보를 중앙 관리 서버(500)에 송신한다.
도 4는 본 발명의 일 실시예에 따른 영상 분석 장치의 구성을 나타내는 블록도이다. 도 4에 도시된 영상 분석 장치(400)는 도 1에 도시된 영상 분석 장치에 대한 구체적인 구성을 나타낸다.
도 4를 참조하면, 영상 분석 장치(400)는 수신부(410), 영상 전처리부(420), 이동 객체 검출부(430), 제1 정보 생성부(440), 제2 정보 생성부(450) 및 송신부(460)를 포함할 수 있다.
수신부(410)는 복수의 카메라(201, 202, 203, 204)와 유/무선 통신하여 영상 데이터를 수신한다.
영상 전처리부(420)는 영상 데이터를 전처리한다.
이동 객체 검출부(430)는 영상 전처리부(420)에 의해 전처리된 영상 데이터를 배경 모델링하여 이동 객체를 검출한다.
제1 정보 생성부(440)는 이동 객체 검출부(430)에 의해 검출된 이동 객체를 포함하는 영상 데이터들을 수집한다.
또한, 제1 정보 생성부(440)는 수집된 영상 데이터들로부터 시간 정보, 위치 정보 및 영상 데이터 내에서 이동 객체의 좌표 정보를 추출한다.
제1 정보 생성부(440)는 추출된 시간 정보를 기준으로 영상 데이터들에 대한 위치 정보 및 이동 객체의 좌표 정보를 정렬하여 제2 동선 정보를 생성한다.
제2 정보 생성부(450)는 영상 전처리부(420)에 의해 전처리된 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 이동 객체가 검출된 경우, 제2 동선 정보를 이용하여 이동 객체에 대한 방향 벡터를 산출한다.
구체적으로, 제2 정보 생성부(450)는 어느 하나의 영상 데이터로부터 시간 정보, 위치 정보 및 영상 데이터 내에서의 좌표 정보를 추출하고, 제1 정보 생성부(440)에 의해 생성된 복수의 제2 동선 정보들 중 기 설정된 좌표 영역 내에서 검출된 이동 객체들에 대한 제2 동선 정보를 추출한다.
또한, 제2 정보 생성부(450)는 추출된 제2 동선 정보를 이용하여 상기 검출된 이동 객체들의 방향 벡터를 산출하고, 방향 벡터의 수에 따라 혼잡도 정보를 생성할 수 있다.
한편, 제2 정보 생성부(450)는 기 설정된 좌표 영역, 기 설정된 좌표 영역에서 검출된 이동 객체의 수 및 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성한다. 이 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성한다. 이 같은 혼잡도 정보는 혼잡도를 판단하는데 이용된 영상 데이터에 대한 시간 정보 및 위치 정보와 매칭되어 생성될 수 있다.
송신부(460)는 제1 정보 생성부(440)에 의해 생성된 제2 동선 정보 및 제2 정보 생성부(450)에 의해 생성된 혼잡도 정보를 중앙 관리 서버(500)에 전송한다.
도 5는 본 발명의 일 실시예에 따른 중앙 관리 서버의 구성을 나타내는 블록도이다. 도 5를 참조하면, 중앙 관리 서버(500)는 제1 통신부(510), 제2 통신부(520), 정보 검색부(530), 정보 보정부(540), 이동 패턴 분석부(550) 및 디스플레이부(560)를 포함한다.
제1 통신부(510)는 RFID 분석 장치(300)로부터 제1 동선 정보들을 수신한다.
제2 통신부(520)는 영상 분석 장치(400)로부터 제2 동선 정보들 및 혼잡도 정보를 수신한다.
정보 검색부(530)는 복수의 제1 동선 정보들 및 복수의 제2 동선 정보들을 비교하여, 상호 유사도가 높은 제1 동선 정보와 제2 동선 정보들을 검색한다. 구체적으로, 정보 검색부(530)는 복수의 제1 동선 정보 및 복수의 제2 동선 정보 각각에 포함된 시간 정보 및 위치 정보를 비교하여, 서로 대응하는 시간 정보 및 위치 정보를 포함하는 이동 객체를 검출한다. 이 경우, 시간 정보와 위치 정보 간의 상호 유사도를 판단하여 검출할 수 있다.
예를 들어, 제1 이동 객체가 쇼핑 카트 "A"를 끌고 매장 이동 경로 내에 포함된 다수의 지점들을 이동하는 경우, 쇼핑 카트 "A"에 포함된 RFID 태그를 기초로 생성된 제1 동선 정보와, 제1 이동 객체를 촬영한 영상 데이터를 기초로 생성된 제2 동선 정보는 서로 시간 정보와 위치 정보들은 서로 대응할 수 있다. 즉, 상호 유사도가 높을 수 있다. 따라서, 정보 검색부(530)는 시간 정보 및 위치 정보들의 상호 유사도가 가장 높은 제1 동선 정보와 제2 동선 정보를 검색한다.
정보 보정부(540)는 검색된 제1 동선 정보 및 제2 동선 정보를 확인하고, 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는지를 확인한다. 만약, 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 중앙 관리 서버(500)는 미인식된 시간 정보 및 위치 정보를 보정할 수 있다.
이동 패턴 분석부(550)는 프로세서 모듈의 일종으로, 검색 또는 보정된 제1 동선 정보 및 상기 제2 동선 정보를 이용하여 이동 객체에 대한 이동 패턴을 분석한다. 즉, 이동 패턴 분석부(550)는 매장 이동 경로 내에서 이동 객체의 전체 쇼핑 시간, 각 쇼핑 매장에서의 쇼핑 시간 및 쇼핑 순서 중 적어도 하나를 포함하는 이동 패턴을 분석할 수 있다.
이동 패턴 분석부(550)는 이동 객체에 대한 태그 정보가 처음 수신된 제1 시간 정보와 마지막으로 수신된 제2 시간 정보를 이용하여 고객 정보에 대한 전체 쇼핑 시간을 산출할 수 있다.
또한, 이동 패턴 분석부(550)는 POS 단말 장치를 통해 복수의 고객 정보에 대한 정산 정보가 수신된 경우, 이 정산 정보에 대응하는 이동 패턴을 검색하고, 정산 정보를 검색된 이동 패턴에 반영하여 쇼핑 패턴을 생성할 수 있다.
디스플레이부(560)는 쇼핑 패턴을 디스플레이할 수 있다. 쇼핑 패턴은, 이동 객체 단위(고객 정보 단위), 매장 단위, 상품 단위, 시간 단위로 분류되어 디스플레이 될 수 있다.
또한, 디스플레이부(560)는 제2 통신부(520)에 수신된 혼잡도 정보를 디스플레이 할 수 있다. 혼잡도 정보는 시간 단위 및 위치 단위로 분류되어 디스플레이 될 수 있다.
매장을 관리하는 관리자는 디스플레이부(560)를 통해 디스플레이된 쇼핑 패턴 정보 및 혼잡도 정보를 확인하여 매장 배치, 상품 진열 등을 관리할 수 있으며, 이동 객체에게 고객 맞춤 서비스를 제공할 수 있다.
도 6은 본 발명의 일 실시예에 따른 제1 동선 정보를 나타내는 도면이다.
도 6에 도시된 제1 동선 정보(600)는 태그 정보(610), 시간 정보(620), 위치 정보(630) 및 리더 정보(64)를 포함한다.
제1 동선 정보(600)는 "1"번 태그 정보(610)를 갖는 제1 RFID 태그에 대한 동선 정보가 될 수 있다. 시간 정보(620)는 "1"번 태그 정보(610)가 RFID 리더에 수신된 시점의 시간 정보로 시/분/초 단위로 표시되고 순서대로 정렬될 수 있다.
또한, 위치 정보(630)는 "1"번 태그 정보(610)를 수신한 RFID 리더가 설치된 지점의 매장 정보가 될 수 있다. 리더 정보(640)는 "1"번 태그 정보(610)를 수신한 RFID 리더 아이디가 될 수 있다.
도 6에 도시된 제1 동선 정보(600)를 참고하면, "1"번 태그 정보(610)를 갖는 제1 RFID 태그가 "12시 12분 25초"에서 "12시 12분 27초"까지 "스넥류" 매장에 머물러 있었고, "12시 12분 28초"에 "맥주/음료" 매장으로 이동한 것을 알 수 있다. 이 같은 제1 동선 정보(600)는 제1 RFID 태그가 부착된 쇼핑 카트를 끄는 이동 객체에 대한 이동 패턴이 될 수 있다.
또한, 도 6에는 도시되어 있지 않으나, 제1 동선 정보(600) 포함되어 있지 않으나, 제1 RFID 태그로부터 송출된 전파 세기를 더 포함할 수 있다. 적어도 두 개 이상의 RFID 리더가 동일한 시간에 제1 RFID 태그를 중복 인식한 경우, 이 전파 세기를 이용하여 어느 하나의 RFID 식별 정보를 선택할 수 있다. 즉, 전파 세기에 따라 RFID 식별 정보를 선택하여 중복 인식에 따른 오류 발생을 방지할 수 있다.
도 7은 본 발명의 일 실시예에 따른 제2 동선 정보를 나타내는 도면이다.
도 7에 도시된 제2 동선 정보(700)는 이동 객체 정보(710), 시간 정보(720), 위치 정보(730) 및 좌표 정보(740)를 포함한다.
제2 동선 정보(700)는 "11"번 이동 객체 정보(710)에 대한 동선 정보가 될 수 있다. 시간 정보(720)는 "11"번 이동 객체 정보(710)를 포함하는 영상 데이터가 촬영된 시점의 시간 정보로, 시/분/초 단위로 표시되고 순서대로 정렬될 수 있다.
또한, 위치 정보(730)는 "11"번 이동 객체 정보(710)를 포함하는 영상 데이터가 촬영된 지점의 매장 정보가 될 수 있고, 좌표 정보(740)는 영상 데이터에서 "11"번 이동 객체 정보(710)가 검출된 지점의 좌표 정보가 될 수 있다.
"11"번 이동 객체 정보(710)는 매장에 출입하는 다수의 이동 객체 중 하나의 이동 객체에 임의로 부여하는 정보가 될 수 있다. 예를 들어, 1일 동안 매장에 출입한 이동 객체 중 11번째 이동 객체에 대하여 "11"번의 이동 객체 정보를 부여할 수 있다.
도 7에 도시된 제2 동선 정보(700)를 참고하면, "11"번 이동 객체 정보(710)를 부여받은 이동 객체가 "12시 12분 25초"에서 "12시 12분 27초"까지 "스넥류" 매장에 머물러 있었고, "12시 12분 28초"에 "맥주/음료" 매장으로 이동한 것을 알 수 있다.
도 8은 본 발명의 일 실시예에 따른 제1 동선 정보 및 제2 동선 정보를 이용한 통합 동선 정보를 나타내는 도면이다.
도 8에 도시된 통합 동선 정보(800)는 도 6 및 도 7에 도시된 제1 동선 정보(100) 및 제2 동선 정보(200)를 통합한 것으로, 도 1에 도시된 중앙 관리 서버(500)에 의해 생성될 수 있으며, 일종의 이동 패턴 분석 정보가 될 수 있다.
중앙 관리 서버(500)는 RFID 분석 장치(300)로부터 복수의 제1 동선 정보들을 수신하고, 영상 분석 장치(400)로부터 복수의 제2 동선 정보들을 수신한다.
중앙 관리 서버(500)는 복수의 제1 동선 정보들 및 복수의 제2 동선 정보들에 포함된 각 시간 정보 및 위치 정보를 비교하여, 상호 유사도가 높은 제1 동선 정보와 제2 동선 정보를 검색한다.
예를 들어, 복수의 제1 동선 정보들 중 도 6에 도시된 제1 동선 정보(600)가 포함되어 있고, 복수의 제2 동선 정보들 중 도 7에 도시된 제2 동선 정보(700)가 포함되어 있다고 가정할 경우, 제1 동선 정보(600)와 제2 동선 정보(700) 간의 시간 정보 및 위치 정보는 서로 대응하는 것으로, 상호 유사도는 두 정보가 실질적으로 동일함을 의미하는 "1"이 될 수 있다.
중앙 관리 서버(500)는 제1 동선 정보(600)와 제2 동선 정보(700)를 이용하여 통합 동선 정보(800)를 생성한다.
통합 동선 정보(800)는 "1"번 태그 정보(610)를 갖는 제1 RFID 태그가 부착된 쇼핑 카트를 "11"번 이동 객체 정보(710)를 부여받은 이동 객체가 끌고 이동하는 동안의 이동 패턴이 될 수 있다.
통합 동선 정보(800)는 태그 정보(810), 이동 객체 정보(820), 시간 정보(830), 위치 정보(840), 리더 정보(850) 및 좌표 정보(860)를 포함할 수 있다.
통합 동선 정보(800)를 참조하면, "1"번 태그 정보(810)와 "11"번 이동 객체 정보(820)는 "12시 12분 25초"에서 "12시 12분 27초"까지 "스넥류" 매장에 머물러 있었고, "12시 12분 28초"에 "맥주/음료" 매장으로 이동한 것을 알 수 있다.
한편, 도 6 및 도 7에서는 제1 동선 정보(600) 및 제2 동선 정보(700)가 모두 연속적인 시간 정보 및 위치 정보를 포함하고 있는 실시예를 도시 및 설명하였다. 그러나, 도 7에 도시된 제2 동선 정보(700)에서 3번째 열(750)의 정보가 존재하지 않는 경우, 제2 동선 정보(700)에 포함된 시간 정보 및 위치 정보가 비연속적일 수 있다. 이 경우에는 연속적인 시간 정보 및 위치 정보를 포함하는 제1 동선 정보(600)를 기준으로 제2 동선 정보(700)를 동기화하여 도 8에 도시된 통합 동선 정보(800)를 생성할 수 있다.
예를 들어, 제2 동선 정보(700)에 미인식된 시간 정보 및 위치 정보가 존재할 지라도, 제1 동선 정보(600)와 제2 동선 정보(700)의 상호 유사도는 여전히 높을 수 있다. 따라서, 상호 유사도가 높은 제1 동선 정보(600)와 제2 동선 정보(700)를 검색한 후, 제2 동선 정보(700)에서 미인식된 시간 정보를 확인한다.
도 7에서와 같이, "12시 12분 26초"와 "12시 12분 28초"는 비연속적인 것으로, 제2 동선 정보(700)에서 "12시 12분 27초"에 대한 시간 정보가 미인식된 것을 확인할 수 있다. 이렇게 확인된 시간 정보를 이용하여 제1 동선 정보(600)에서 "12시 12분 27초"에 대응하는 위치 정보를 추출한다.
제1 동선 정보(600)는 "12시 12분 27초"에 대응하는 위치 정보로 "스넥류"를 포함하고 있다. 이 같은 시간 정보 및 위치 정보를 제2 동선 정보(700)의 3번째 열(750)에 포함시켜 제2 동선 정보(700)를 동기화시킬 수 있다. 또한, 3번째 열(750)에 포함될 좌표 정보(740)는 2번째 열과 4번째 열에 포함된 좌표 정보(740)의 중간 지점 좌표를 계산하여 동기화시킬 수 있다.
한편, 도 6 내지 도 8에서 하나의 카메라에 의해 촬영되는 매장 영역과 하나의 RFID 리더에 의해 인식되는 RFID 인식 영역은 동일할 수 있으나, 이에 한정되지 않는다.
예를 들어, 도 6에서 "1"번 및 "2"번 RFID 리더 아이디를 갖는 두 개의 RFID 리더들에 의해 인식되는 RFID 인식 영역은 하나의 카메라에 의해 촬영되는 매장 영역 내에 포함될 수도 있다. 이 경우, 하나의 카메라에 의해 촬영되는 매장 영역과, 두 개의 RFID 인식 영역은 위치 정보가 서로 매칭될 수 있다.
하나의 카메라의 의해 촬영되는 매장 영역 내에서, 두 개의 RFID 인식 영역은 동일한 형태 및 면적을 가질 수도 있다. 예를 들어, 매장 영역 내에서 두 개의 RFID 인식 영역은 원형, 삼각형, 사각형 또는 그 이상의 다각형 형태로 동일한 면적을 가질 수 있다.
또는, 하나의 카메라에 의해 촬영되는 매장 영역 내에서, 두 개의 RFID 인식 영역은 서로 다른 형태 및 면적을 가질 수도 있다. 예를 들어, 매장 영역 내에서 두 개의 RFID 인식 영역은 원형, 삼각형, 사각형 또는 그 이상의 다각형 중 서로 다른 형태를 가질 수 있으며, 그 면적 또한 다를 수 있다.
하나의 카메라에 의해 촬영되는 매장 영역과 그 매장 영역에 포함된 RFID 인식 영역에 대한 매칭 정보 및 RFID 인식 영역에 대한 형태 및 면적 정보는 중앙 관리 서버(500)에 저장되며, 도 8에 도시된 통합 동선 정보(800)를 생성시, 이용될 수 있다.
중앙 관리 서버(500)는 카메라에 의해 촬영되는 매장 영역에서 원형, 삼각형, 사각형 또는 그 이상의 다각형으로 구성된 적어도 하나 이상의 RFID 인식 영역을 구분할 수 있으며, 이를 이용하여 매장 영역을 촬영한 영상 데이터에서 적어도 하나 이상의 RFID 인식 영역을 구분할 수 있다.
구체적으로, 중앙 관리 서버(500)는 영상 데이터 관리 프로그램을 이용하여 매장 영역을 촬영한 영상 데이터 내에서 원형, 삼각형, 사각형 또는 그 이상의 다각형 등을 표시할 수 있으며, 각 도형 영역들에 대응하는 RFID 인식 영역을 매칭시켜 저장할 수 있다. 이를 통해 RFID 태그를 인식하는 RFID 리더와 카메라를 통해 촬영되는 영상 데이터에서 발생하는 이벤트(인식 시간, 촬영 시간, 위치 정보 등)를 동기화시킬 수 있다.
도 9는 본 발명의 일 실시예에 따른 동선 분석 방법을 설명하기 위한 흐름도이다. 도 9에 도시된 동선 분석 방법은 도 1에 도시된 동선 분석 시스템(이하, '시스템' 이라 함)에 의해 수행될 수 있다.
시스템은 적어도 하나의 RFID 리더의 RFID 인식 영역 내에 RFID 태그가 접근한 경우(910 단계), 접근된 RFID 태그부터 태그 정보를 수신한다(910 단계). 구체적으로, 쇼핑 카트에 부착된 복수의 RFID 태그 중 적어도 하나의 RFID 태그가 매장 이동 경로에 설치된 복수의 RFID 리더의 RFID 인식 영역 내에 접근하는 경우, 복수의 RFID 리더는 접근된 RFID 태그로부터 태그 정보를 수신할 수 있다.
시스템은 태그 정보를 포함하는 RFID 식별 정보를 생성한다(920 단계). RFID 식별 정보는 태그 정보 외에 태그 정보를 수신한 시점의 시간 정보 및 태그 정보를 수신한 RFID 리더가 설치된 지점의 위치 정보 및 RFID 리더의 리더 정보를 더 포함할 수 있다.
시스템은 RFID 식별 정보를 분석하여 복수의 RFID 태그에 대한 제1 동선 정보를 생성한다(930 단계). 구체적으로, 시스템은 복수의 RFID 식별 정보들을 RFID 태그 단위로 분류하고, 분류된 RFID 식별 정보를 시간 정보를 기준으로 위치 정보를 정렬하여 제1 동선 정보를 생성할 수 있다.
시스템은 복수의 카메라를 이용하여 기 설정된 매장 영역을 촬영하여 영상 데이터를 생성한다(940 단계). 이 경우, 매장 이동 경로 상에서, RFID 리더 각각의 RFID 인식 영역과 복수의 카메라에 의해 촬영되는 기 설정된 매장 영역은 동일할 수 있다.
시스템은 영상 데이터에서 이동 객체를 검출하고, 이동 객체들에 대한 제2 동선 정보를 생성한다(950 단계). 시스템은 이동 객체가 검출된 영상 데이터들을 수집하고, 수집된 영상 데이터들로부터 시간 정보, 위치 정보 및 이동 객체의 좌표 정보를 추출할 수 있다. 그리고, 추출된 시간 정보를 기준으로 영상 데이터들에 대한 위치 정보 및 이동 객체의 좌표 정보를 정렬하여 제2 동선 정보를 생성할 수 있다.
시스템은 복수의 제1 동선 정보들과 복수의 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색한다(960 단계). 즉, 제1 동선 정보들 및 상기 제2 동선 정보들을 비교하여, 상호 유사도가 높은 상기 제1 동선 정보와 상기 제2 동선 정보들을 검색할 수 있다.
시스템은 검색된 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우(970 단계), 미인식된 시간 정보 및 위치 정보를 보정한다(980 단계).
반면, 시스템은 제1 동선 정보 및 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하지 않거나(970 단계), 미인식된 시간 정보 및 위치 정보가 보정된 경우(980 단계), 제1 동선 정보 및 제2 동선 정보를 통합하여 이동 객체에 대한 이동 패턴을 분석한다(990 단계).
시스템에 따르면, 제1 동선 정보 및 제2 동선 정보를 통합하여 이동 객체에 대한 이동 패턴을 분석함으로써, 이동 객체의 실제 동선 정보를 파악할 수 있다.
또한, 도면에 도시되어 있지 않으나, 시스템은 이동 객체가 선택한 물건에 대한 정산 정보를 이동 패턴에 반영하여 이동 객체에 대한 쇼핑 패턴을 생성할 수 있다. 이 쇼핑 패턴을 이용하여 매장을 관리하고, 고객 맞춤형 서비스를 제공할 수 있다.
본 발명에 따른 실시예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이러한 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 기록 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(Floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시 예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

Claims (19)

  1. 매장 이동 경로에 설치되고, 쇼핑 카트에 부착된 복수의 RFID(Radio Frequency Identification) 태그 중 적어도 하나의 RFID 태그가 RFID 인식 영역 내에 접근하는 경우, 상기 접근된 RFID 태그로부터 태그 정보를 수신하고 상기 태그 정보를 포함하는 RFID 식별 정보를 생성하는 복수의 RFID 리더;
    상기 복수의 RFID 리더로부터 상기 RFID 식별 정보가 수신된 경우, 상기 RFID 식별 정보를 분석하여 상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 RFID 분석 장치;
    상기 매장 이동 경로에 설치된 복수의 카메라에 의해 기 설정된 매장 영역이 촬영되어 영상 데이터가 생성된 경우, 상기 생성된 영상 데이터에서 적어도 하나 이상의 이동 객체를 검출하고 상기 검출된 이동 객체에 대한 제2 동선 정보를 생성하는 영상 분석 장치; 및
    상기 제1 동선 정보들 및 상기 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색하고, 검색된 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 이동 패턴을 분석하는 중앙 관리 서버
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  2. 제1항에 있어서,
    상기 복수의 RFID 리더 중 적어도 하나는,
    상기 복수의 카메라 중 어느 하나에 의해 촬영되는 상기 기 설정된 특정 장소의 영역과 동일한 RFID 인식 영역을 갖는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  3. 제1항에 있어서,
    상기 RFID 분석 장치는,
    상기 복수의 RFID 리더로부터 상기 RFID 식별 정보를 수신하는 제1 통신부;
    상기 복수의 RFID 태그 단위로 상기 RFID 식별 정보를 분류하고, 상기 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출하며, 상기 시간 정보를 기준으로 상기 복수의 RFID 리더에 대한 위치 정보 및 상기 복수의 RFID 태그로부터 송출된 전파 세기를 정렬하여 상기 제1 동선 정보를 생성하는 정보 생성부; 및
    상기 제1 동선 정보를 상기 중앙 관리 장치에 송신하는 제2 통신부
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  4. 제1항에 있어서,
    상기 영상 분석 장치는,
    상기 복수의 카메라로부터 상기 영상 데이터를 수신하는 수신부;
    상기 영상 데이터를 전처리하는 영상 전처리부;
    상기 전처리된 영상 데이터를 배경 모델링하여 상기 이동 객체를 검출하는 이동 객체 검출부;
    상기 검출된 이동 객체를 포함하는 영상 데이터들을 수집하고, 상기 영상 데이터들로부터 시간 정보, 위치 정보 및 상기 이동 객체의 좌표 정보를 추출하며, 상기 시간 정보를 기준으로 상기 영상 데이터들에 대한 위치 정보 및 상기 이동 객체의 좌표 정보를 정렬하여 상기 제2 동선 정보를 생성하는 제1 정보 생성부; 및
    상기 제2 동선 정보를 상기 중앙 관리 장치에 송신하는 송신부
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  5. 제4항에 있어서,
    상기 영상 분석 장치는
    상기 전처리된 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 상기 이동 객체가 검출된 경우, 상기 제2 동선 정보를 이용하여 상기 이동 객체에 대한 방향 벡터를 산출하고, 방향 벡터의 수에 따라 혼잡도 정보를 생성하는 제2 정보 생성부
    를 더 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  6. 제5항에 있어서,
    상기 제2 정보 생성부는,
    상기 기 설정된 좌표 영역, 상기 기 설정된 좌표 영역에서 검출된 상기 이동 객체의 수 및 상기 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성하고, 상기 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 상기 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  7. 제1항에 있어서,
    상기 중앙 관리 서버는,
    상기 RFID 분석 장치로부터 상기 제1 동선 정보들을 수신하는 제1 통신부;
    상기 영상 분석 장치로부터 상기 제2 동선 정보들을 수신하는 제2 통신부;
    상기 제1 동선 정보들 및 상기 제2 동선 정보들을 비교하여, 상호 유사도가 높은 상기 제1 동선 정보와 상기 제2 동선 정보들을 검색하는 정보 검색부;
    상기 검색된 제1 동선 정보 및 상기 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 상기 미인식된 시간 정보 및 상기 위치 정보를 보정하는 정보 보정부; 및
    상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 이동 패턴 분석부
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  8. 제1항에 있어서,
    상기 이동 객체가 소지한 카드로부터 고객 정보를 인식하는 고객 카드 리더기;
    상기 쇼핑 카트에 부착된 바코드로부터 바코드 정보를 인식하는 바코드 리더기; 및
    상기 이동 객체가 선택한 상품을 정산하여 상기 고객 정보 및 상기 바코드 정보를 포함하는 정산 정보를 생성하는 POS(Point of Sales) 단말 장치
    를 더 포함하고,
    상기 중앙 관리 서버는,
    상기 바코드 정보와 매칭되는 태그 정보를 포함하고 상기 바코드 정보가 인식된 시간에 대응하는 시간 정보를 포함하는 이동 패턴을 검색하고, 상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체에 대한 쇼핑 패턴을 생성하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  9. 제8항에 있어서,
    상기 중앙 관리 서버는,
    상기 생성된 쇼핑 패턴을 이용하여 상기 매장에 대한 전체 매출 통계 및 각 상품에 따른 매출 통계를 산출하여 관리하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  10. 제8항에 있어서,
    상기 중앙 관리 서버는,
    상기 생성된 쇼핑 패턴을 이용하여 상기 이동 객체 각각에 대한 전체 쇼핑 시간, 각 지점에서의 쇼핑 시간, 쇼핑 상품, 쇼핑 매장, 쇼핑 순서 및 쇼핑 금액을 산출하여 관리하는 RFID 기술 및 영상 기술을 통합한 동선 분석 시스템.
  11. 쇼핑 카트에 부착된 복수의 RFID(Radio Frequency Identification) 태그 중 적어도 하나의 RFID 태그가 RFID 인식 영역 내에 접근하는 경우, 매장 이동 경로에 설치된 복수의 RFID 리더가 상기 접근된 RFID 태그로부터 태그 정보를 수신하고 상기 태그 정보를 포함하는 RFID 식별 정보를 생성하는 단계;
    상기 복수의 RFID 리더에서 생성된 상기 RFID 식별 정보를 분석하여 상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 단계;
    상기 매장 이동 경로에 설치된 복수의 카메라에 의해 기 설정된 매장 영역이 촬영되어 영상 데이터가 생성된 경우, 상기 생성된 영상 데이터에서 복수의 이동 객체를 검출하고 상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계; 및
    상기 제1 동선 정보들 및 상기 제2 동선 정보들 중에서 서로 대응하는 시간 정보 및 위치 정보를 포함하는 제1 동선 정보 및 제2 동선 정보를 검색하고, 검색된 상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  12. 제11항에 있어서,
    상기 복수의 RFID 리더 중 적어도 하나는,
    상기 복수의 카메라 중 어느 하나에 의해 촬영되는 상기 기 설정된 특정 장소의 영역과 동일한 RFID 인식 영역을 갖는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  13. 제11항에 있어서,
    상기 복수의 RFID 태그에 대한 제1 동선 정보를 생성하는 단계는,
    상기 복수의 RFID 태그 단위로 상기 RFID 식별 정보를 분류하는 단계;
    상기 분류된 RFID 식별 정보로부터 시간 정보 및 위치 정보를 추출하는 단계; 및
    상기 시간 정보를 기준으로 상기 복수의 RFID 리더에 대한 위치 정보 및 상기 복수의 RFID 태그로부터 송출된 전파 세기를 정렬하여 상기 제1 동선 정보를 생성하는 단계
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  14. 제11항에 있어서,
    상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계는,
    상기 복수의 카메라에서 생성된 상기 영상 데이터를 전처리하는 단계;
    상기 전처리된 영상 데이터를 배경 모델링하여 상기 이동 객체를 검출하는 단계;
    상기 검출된 이동 객체를 포함하는 영상 데이터들을 수집하는 단계;
    상기 영상 데이터들로부터 시간 정보, 위치 정보 및 상기 이동 객체의 좌표 정보를 추출하는 단계; 및
    상기 시간 정보를 기준으로 상기 영상 데이터들에 대한 위치 정보 및 상기 이동 객체의 좌표 정보를 정렬하여 상기 제2 동선 정보를 생성하는 단계
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  15. 제14항에 있어서,
    상기 이동 객체들에 대한 제2 동선 정보를 생성하는 단계는,
    상기 전처리된 영상 데이터에서 기 설정된 좌표 영역 내에 일정 수 이상의 상기 이동 객체가 검출된 경우, 상기 제2 동선 정보를 이용하여 상기 이동 객체에 대한 방향 벡터를 산출하는 단계;
    상기 기 설정된 좌표 영역, 상기 기 설정된 좌표 영역에서 검출된 상기 이동 객체의 수 및 상기 산출된 방향 벡터의 수를 매칭시켜 데이터 베이스를 생성하는 단계; 및
    상기 데이터 베이스를 기초로 혼잡도 판단 임계값을 설정하고, 방향 벡터의 수가 상기 혼잡도 판단 임계값 이상인 경우, "혼잡"에 대응하는 혼잡도 정보를 생성하는 단계
    를 더 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  16. 제11항에 있어서,
    상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계는,
    상기 제1 동선 정보들 및 상기 제2 동선 정보들을 비교하여, 상호 유사도가 높은 상기 제1 동선 정보와 상기 제2 동선 정보들을 검색하는 단계;
    상기 검색된 제1 동선 정보 및 상기 제2 동선 정보에 미인식된 시간 정보 및 위치 정보가 존재하는 경우, 상기 미인식된 시간 정보 및 상기 위치 정보를 보정하는 단계; 및
    상기 제1 동선 정보 및 상기 제2 동선 정보를 통합하여 상기 이동 객체에 대한 이동 패턴을 분석하는 단계
    를 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  17. 제16항에 있어서,
    상기 이동 객체가 소지한 카드로부터 고객 정보를 인식하는 단계;
    상기 쇼핑 카트에 부착된 바코드로부터 바코드 정보를 인식하는 단계;
    상기 이동 객체가 선택한 상품을 정산하여 상기 고객 정보 및 상기 바코드 정보를 포함하는 정산 정보를 생성하는 단계;
    상기 바코드 정보와 매칭되는 태그 정보를 포함하고 상기 바코드 정보가 인식된 시간에 대응하는 시간 정보를 포함하는 이동 패턴을 검색하는 단계; 및
    상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체에 대한 쇼핑 패턴을 생성하는 단계
    를 더 포함하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  18. 제17항에 있어서,
    상기 쇼핑 패턴을 생성하는 단계는,
    상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 매장에 대한 전체 매출 통계 및 각 상품에 따른 매출 통계를 산출하여 관리하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
  19. 제17항에 있어서,
    상기 쇼핑 패턴을 생성하는 단계는,
    상기 정산 정보를 상기 검색된 이동 패턴에 반영하여 상기 이동 객체 각각에 대한 전체 쇼핑 시간, 각 지점에서의 쇼핑 시간, 쇼핑 상품, 쇼핑 매장, 쇼핑 순서 및 쇼핑 금액을 산출하여 관리하는 RFID 기술 및 영상 기술을 통합한 동선 분석 방법.
PCT/KR2011/000469 2011-01-07 2011-01-24 Rfid 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법 WO2012093744A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110001898A KR101178687B1 (ko) 2011-01-07 2011-01-07 Ｒｆｉｄ 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법
KR10-2011-0001898 2011-01-07

Publications (1)

Publication Number Publication Date
WO2012093744A1 true WO2012093744A1 (ko) 2012-07-12

Family

ID=46457591

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/000469 WO2012093744A1 (ko) 2011-01-07 2011-01-24 Rfid 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법

Country Status (2)

Country Link
KR (1) KR101178687B1 (ko)
WO (1) WO2012093744A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2567732A (en) * 2017-09-15 2019-04-24 Symbol Technologies Llc Systems and methods for point-of-sale detection with image sensors for identifying new radio frequency identification (RFID) tag events within a vicinity of a
CN112668681A (zh) * 2020-12-24 2021-04-16 杭州海康机器人技术有限公司 一种包裹信息的确定方法、系统、装置及相机
US11213773B2 (en) 2017-03-06 2022-01-04 Cummins Filtration Ip, Inc. Genuine filter recognition with filter monitoring system

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101766673B1 (ko) 2015-08-19 2017-08-09 주식회사 포스코 주조장치 및 편류 제어방법
KR101701915B1 (ko) * 2015-10-02 2017-02-03 주식회사 이글루시큐리티 3d 출입동선 트래킹 시스템 및 방법
US9779302B1 (en) 2016-03-31 2017-10-03 Intel Corporation System for optimizing storage location arrangement
KR101870376B1 (ko) * 2016-12-29 2018-06-22 단국대학교 산학협력단 객체 위치 기반 조명 제어 장치 및 방법
KR20190007681A (ko) * 2017-07-13 2019-01-23 삼성에스디에스 주식회사 매장 분석 장치 및 방법
KR101888922B1 (ko) * 2017-12-18 2018-08-16 주식회사 디너의여왕 매장용 고객 관리 및 고객 행동 분석 시스템
KR102030373B1 (ko) * 2018-07-19 2019-10-10 한국철도기술연구원 실내 상시 공간 관리 기반 운영 시스템
KR102125377B1 (ko) * 2018-11-20 2020-06-23 동국대학교 산학협력단 실시간 위치인식 시스템 및 방법
KR20200114906A (ko) 2019-03-29 2020-10-07 주식회사 지엔피링크 행사장 동선을 이용한 모델링 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080011758A (ko) * 2006-07-31 2008-02-11 (주)씽크게이트테크놀러지 이동체 움직임 추적 시스템 및 그 제어방법
JP2008511066A (ja) * 2004-08-23 2008-04-10 リテイル テク カンパニー リミテッド Ｒｆｉｄ基盤のショッピングパターン分析システム及び方法
KR100982398B1 (ko) * 2010-02-23 2010-09-14 대신네트웍스 주식회사 ＺｉｇＢｅｅ와 ＣＣＴＶ를 이용한 상황관제 시스템과 어린이보호 시스템
KR100989081B1 (ko) * 2008-08-11 2010-10-25 한국전자통신연구원 네트워크 카메라를 이용한 이벤트 감시 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008511066A (ja) * 2004-08-23 2008-04-10 リテイル テク カンパニー リミテッド Ｒｆｉｄ基盤のショッピングパターン分析システム及び方法
KR20080011758A (ko) * 2006-07-31 2008-02-11 (주)씽크게이트테크놀러지 이동체 움직임 추적 시스템 및 그 제어방법
KR100989081B1 (ko) * 2008-08-11 2010-10-25 한국전자통신연구원 네트워크 카메라를 이용한 이벤트 감시 시스템 및 방법
KR100982398B1 (ko) * 2010-02-23 2010-09-14 대신네트웍스 주식회사 ＺｉｇＢｅｅ와 ＣＣＴＶ를 이용한 상황관제 시스템과 어린이보호 시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11213773B2 (en) 2017-03-06 2022-01-04 Cummins Filtration Ip, Inc. Genuine filter recognition with filter monitoring system
GB2567732A (en) * 2017-09-15 2019-04-24 Symbol Technologies Llc Systems and methods for point-of-sale detection with image sensors for identifying new radio frequency identification (RFID) tag events within a vicinity of a
GB2567732B (en) * 2017-09-15 2020-08-12 Symbol Technologies Llc Systems and methods for point-of-sale detection with image sensors for identifying new RFID tag events within a vicinity of an RFID reader
CN112668681A (zh) * 2020-12-24 2021-04-16 杭州海康机器人技术有限公司 一种包裹信息的确定方法、系统、装置及相机
CN112668681B (zh) * 2020-12-24 2022-07-01 杭州海康机器人技术有限公司 一种包裹信息的确定方法、系统、装置及相机

Also Published As

Publication number Publication date
KR101178687B1 (ko) 2012-08-30
KR20120080436A (ko) 2012-07-17

Similar Documents

Publication Publication Date Title
WO2012093744A1 (ko) Rfid 기술 및 영상 기술을 통합한 동선 분석 시스템 및 그 방법
US11100333B2 (en) Method and apparatus for detecting suspicious activity using video analysis
US10977483B2 (en) Face recognition system, face recognition method, and storage medium
US10410048B2 (en) System and method for detecting, tracking and counting human objects of interest using a counting system and a data capture device
US8320624B2 (en) Customer behavior collection method and customer behavior collection apparatus
EP1872307A2 (en) Method and apparatus for detecting suspicious activity using video analysis
GB2476869A (en) System and method for tracking and counting objects near an entrance
CA2851950A1 (en) System for managing locations of items
CA2849016C (en) System and method for detecting, tracking and counting human objects of interest using a counting system and a data capture device
WO2018182092A1 (ko) 영상 기반의 거래 방법 및 이러한 방법을 수행하는 장치
US20230274579A1 (en) Techniques for automatically identifying secondary objects in a stereo-optical counting system
KR20190124114A (ko) 유동인구 데이터와 pos데이터를 활용한 상권분석 빅데이터 시스템
WO2022035141A1 (ko) 바코드 스캔 여부 검증 방법 및 시스템
JP2005086626A (ja) 広域監視装置
WO2021242081A1 (ko) 지능형 통합 보안 시스템 및 방법
JP6245626B1 (ja) デジタルレジスタセキュリティシステム、方法及びプログラム
WO2021025237A1 (ko) 쇼핑 카트 및 그의 상품 인식 방법, 이를 이용한 쇼핑 서비스 제공 시스템 및 방법
KR101194177B1 (ko) 비동기적으로 동작하는 이기종 센서들을 포함하는 지능형 감시 시스템
WO2024063552A1 (ko) 분실물 관리 운용 관리 시스템 및 그 제어 방법
WO2018190505A1 (ko) 태그정보를 이용한 물품 관리시스템
CN117455353A (zh) 目标对象出库识别方法、系统及装置
CN116363354A (zh) 物品追踪方法及装置、计算机可读存储介质
EP2843609A1 (en) System for managing locations of items

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11855070

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC

122 Ep: pct application non-entry in european phase

Ref document number: 11855070

Country of ref document: EP

Kind code of ref document: A1