KR20220123100A - 정보 처리 방법, 장치, 전자 기기 및 저장 매체 - Google Patents

정보 처리 방법, 장치, 전자 기기 및 저장 매체 Download PDF

Info

Publication number
KR20220123100A
KR20220123100A KR1020227026607A KR20227026607A KR20220123100A KR 20220123100 A KR20220123100 A KR 20220123100A KR 1020227026607 A KR1020227026607 A KR 1020227026607A KR 20227026607 A KR20227026607 A KR 20227026607A KR 20220123100 A KR20220123100 A KR 20220123100A
Authority
KR
South Korea
Prior art keywords
target
article display
display area
location
passerby
Prior art date
Application number
KR1020227026607A
Other languages
English (en)
Inventor
창 판
Original Assignee
베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드 filed Critical 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드
Publication of KR20220123100A publication Critical patent/KR20220123100A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G06K9/6215—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53—Recognition of crowd images, e.g. recognition of crowd congestion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30241—Trajectory

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 출원은 정보 처리 방법, 장치, 전자 기기 및 저장 매체를 제공하고, 여기서, 상기 정보 처리 방법은, 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계; 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 상기 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하는 단계; 및 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계를 포함하며; 이로써, 온라인으로 타깃 장소에 대해 수집한 비디오 스트림을 통해, 타깃 장소 중 각 물품 진열 영역의 인파양을 분석함으로써, 제때에 인원 유통에 지장을 주는 물품 진열 영역을 조정하여, 타깃 장소 중 각 물품 진열 영역의 배치 합리성을 향상시킨다.

Description

정보 처리 방법, 장치, 전자 기기 및 저장 매체
관련 출원에 대한 상호 참조
본 특허 출원은 출원 번호가 202110110576.3이고, 출원일이 2021년 01월 27일이며, 출원인이 베이징 센스타임 테크놀로지 디벨롭먼트 컴퍼니 리미티드이며, 출원 명칭이 “정보 처리 방법, 장치, 전자 기기 및 저장 매체”인 중국 특허 출원의 우선권을 주장하는 바, 상기 출원의 모든 내용은 참조로서 본 출원에 인용된다.
본 출원은 컴퓨터 시각 기술 분야에 관한 것으로서, 특히 정보 처리 방법, 장치, 전자 기기 및 저장 매체에 관한 것이다.
대형 쇼핑 몰과 같은 일부 타깃 장소인 경우, 복수 개의 상이한 가게와 같은 복수 개의 상이한 물품 진열 영역을 포함하고, 각 가게는 일반적으로 신제품 또는 판매량이 비교적 높은 상품을 가게 문 앞에 세팅하는 것과 같은 고유의 물품 진열 방식을 사용하여 고객을 유치한다. 관련 기술에서 주로 사람이 개입하는 방식을 통해 물품 진열 영역을 조정함으로써, 시간이 걸리고 힘이 들며, 처리 방식이 번거로우며, 데이터 출처의 정확성이 비교적 낮다.
본 출원의 실시예는 정보 처리 방안을 적어도 제공한다.
본 출원의 실시예는 전자 기기에 의해 실행되는 정보 처리 방법을 제공하고, 상기 정보 처리 방법은,
타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계;
상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 상기 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하는 단계; 및
행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계를 포함한다.
본 출원의 실시예에서, 상기 기술적 수단을 사용하여 수집된 타깃 장소의 비디오 스트림과 결합하여 상이한 물품 진열 영역의 행인 통계 데이터를 결정할 수 있고, 더 나아가 행인 통계 데이터에 기반하여 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정할 수 있다.
이로써, 온라인으로 타깃 장소에 대해 수집한 비디오 스트림을 통해, 타깃 장소 중 각 물품 진열 영역의 인파양을 분석할 수 있음으로써, 제때에 인원 유통에 지장을 주는 물품 진열 영역에 대한 조정을 수행할 수 있어, 타깃 장소 중 각 물품 진열 영역의 배치 합리성을 향상시킨다.
한 가지 가능한 실시형태에서, 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안을 생성하는 단계; 및
상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 포함한다.
타깃 장소의 경우, 타깃 장소가 공공 장소 또는 비 공공 장소에 속하든, 안전을 고려하여, 일반적으로 웹캠 등과 같은 비디오 수집 부재를 배치한다. 즉, 상기 기술방안을 구현하는 데이터 출처가 일반적으로 기존 자원에 속하므로, 비디오 스트림을 추가로 수집할 필요가 없음을 의미한다. 이로써, 본 출원의 실시예에서 제공한 기술방안은, 타깃 장소에 적용되는 배치 제안을 획득하기 위해, 기존 자원을 합리적으로 사용하여, 기존 자원의 충분한 이용을 구현할 수 있다. 또한 획득된 물품 진열 영역의 조정 방안은, 타깃 장소의 실제 수요에 더욱 적용될 수 있다.
한 가지 가능한 실시형태에서, 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터 및 상기 타깃 장소에서의 궤적 데이터에 기반하여, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는지 여부를 결정하는 단계; 및
제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정할 경우, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함한다.
본 출원의 실시예에서, 상이한 물품 진열 영역의 행인 통계 데이터 및 타깃 장소에서의 궤적 데이터를 통해, 인파 혼잡 상황이 존재하는지 여부를 분석할 수 있으며, 예컨대 제1 물품 진열 영역의 행인 수가 비교적 많고, 비디오 스트림에 기반하여 행인의 궤적이 제1 물품 진열 영역에 도달한 후 궤적이 리턴되는 것이 검출되는 경우가 존재하면, 제1 물품 진열 영역에 인파 혼잡이 발생한 것으로 결정할 수 있으며, 이때 상기 제1 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하여, 제1 타깃 물품 진열 영역의 혼잡 상황을 저하시킬 수 있다.
한 가지 가능한 실시형태에서, 상기 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
상기 비디오 스트림으로부터 상기 제1 타깃 물품 진열 영역에 연관된 비디오 프레임을 추출하는 단계;
추출된 상기 비디오 프레임에서의 행인이 상기 제1 타깃 물품 진열 영역에서의 포즈 데이터를 결정하는 단계; 및
상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함한다.
본 출원의 실시예에서, 제1 타깃 물품 진열 영역에 연관된 비디오 프레임에 따라, 비디오 프레임에서의 행인이 상기 영역에서의 포즈 데이터를 결정하고, 상기 포즈 데이터를 통해 제1 타깃 물품 진열 영역에 혼잡이 발생하는 일부 원인을 검출할 수 있는 방안을 제안하였으며, 이에 기반하여, 제1 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 제안하는 단계 및 합리적으로 제1 타깃 물품 진열 영역에 대해 합리적인 배치를 수행하는 단계 중 적어도 하나를 실행하여, 제1 타깃 물품 진열 영역으로 인한 인파 혼잡을 개선할 수 있다.
한 가지 가능한 실시형태에서, 상기 제1 타깃 물품 진열 영역은 적어도 하나의 물품 진열 진열대를 포함하고, 각 물품 진열 진열대는 복수 개의 층을 포함하며, 상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
상기 포즈 데이터에 기반하여, 상기 비디오 프레임에 제1 기설정된 포즈에 부합되는 설정 개수를 초과한 행인의 포즈가 존재하는 것으로 결정한 경우, 상기 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 제1 타깃층을 획득하는 단계; 및
상기 제1 타깃층에 기반하여, 상기 제1 타깃층에 진열된 물품을 상기 제1 타깃 물품 진열 진열대의 제2 타깃층으로 조정하여 진열하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃층에 진열된 물품을 상기 제2 타깃층으로 조정하는 단계 - 지면으로부터 상기 제2 타깃층의 높이는 지면으로부터 상기 제1 타깃층의 높이보다 높음 - 중 적어도 하나를 실행하는 단계를 포함한다.
본 출원의 실시예에서, 포즈 데이터를 통해 제1 타깃 물품 진열 영역에 인파 혼잡이 발생하는 원인이 상기 제1 타깃 물품 진열 영역에서의 물품 진열 진열대에서의 물품의 세팅이 불합리한 것으로 검출할 수 있으며, 예컨대 대량의 고객이 주목하는 물품이 진열대의 밑층에 세팅되면, 대량의 고객은 허리를 굽혀 상품을 선택해야 하므로, 인파 혼잡이 초래됨으로써, 제1 타깃 물품 진열 영역에 대한 합리적인 배치를 제안할 수 있으며, 예컨대 고객이 주목하는 밑층 진열대의 물품을 높은 층으로 조정하여, 고객이 서서 상품을 선택하는데 편의함으로써, 혼잡 상황을 개선할 수 있다.
한 가지 가능한 실시형태에서, 상기 물품 진열 진열대는 복수 개를 포함하고, 상기 정보 처리 방법은,
추출된 상기 비디오 프레임에서의 행인이 상기 제1 타깃 물품 진열 영역에서의 궤적 데이터에 기반하여, 지나간 행인 수가 제1 설정 개수보다 작은 제2 타깃 물품 진열 진열대를 결정하는 단계; 및
상기 제2 타깃 물품 진열 진열대에 기반하여, 상기 제1 타깃층에 진열된 일부 물품을 상기 제2 타깃 물품 진열 진열대로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열대로 조정하는 단계 중 적어도 하나를 실행하는 단계를 더 포함한다.
본 출원의 실시예에서, 제1 타깃 물품 진열 영역 중 인파 혼잡을 초래하는 제1 타깃 물품 진열 진열대의 물품을 인파수가 비교적 적은 제2 타깃 물품 진열 진열대로 조정할 수 있는 방안을 제안하여, 행인이 무조건 제1 타깃 물품 진열 진열대에서 물품을 선택해야 함으로 인한 혼잡 상황을 효과적으로 개선한다.
한 가지 가능한 실시형태에서, 상기 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
상기 포즈 데이터에 기반하여, 상기 비디오 프레임에 제2 기설정된 포즈에 부합되는 설정 개수를 초과하는 행인의 포즈가 존재하는 것으로 결정한 경우, 상기 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 현재 위치 및 상기 인파 혼잡이 발생한 위치 영역을 획득하는 단계; 및
상기 현재 위치 및 상기 인파 혼잡이 발생한 위치 영역에 기반하여, 상기 제1 타깃 물품 진열 진열대가 이동하는 것에 대한 배치 제안을 생성하는 단계 및 상기 현재 위치와 상기 인파 혼잡이 발생한 위치 영역에 따라 상기 제1 타깃 물품 진열 진열대를 조정하는 단계 중 적어도 하나를 실행하는 단계를 더 포함한다.
본 출원의 실시예에서, 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 포즈 데이터에 따라 설정 개수를 초과한 행인이 서 있는 포즈인 것으로 검출된 경우, 상기 제1 타깃 물품 진열 진열대의 위치를 조정할 수 있어, 제1 타깃 물품 진열 진열대에 행인이 비교적 많음으로 인해 다른 고객을 가로 막는 경우를 효과적으로 개선할 수 있다.
한 가지 가능한 실시형태에서, 상기 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 행인 수가 제2 설정 개수보다 작은 제2 타깃 물품 진열 영역을 결정하는 단계; 및
상기 제2 타깃 물품 진열 영역에 기반하여, 상기 제1 타깃 물품 진열 영역에 진열된 일부 물품을 제2 타깃 물품 진열 영역으로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 일부 물품을 상기 제2 타깃 물품 진열 영역으로 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함한다.
본 출원의 실시예에서, 인파 혼잡이 발생한 제1 타깃 물품 진열 영역에 진열된 일부 물품을 행인 수가 비교적 적은 제2 타깃 물품 진열 영역으로 조정하여 진열하는 방안을 제안하여, 제1 타깃 물품 진열 영역의 혼잡 상황을 효과적으로 개선할 수 있다.
한 가지 가능한 실시형태에서, 상기 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계는,
상기 비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행하여, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 획득하는 단계; 및
상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계를 포함한다.
본 출원의 실시예에서, 행인 검출 기술을 사용하여, 비디오 프레임 중 행인 위치를 지시하기 위한 위치 지시 정보를 빠르게 결정할 수 있으며, 이에 기반하여 동일한 행인이 타깃 장소에서의 궤적 데이터를 빠르게 결정할 수 있다.
한 가지 가능한 실시형태에서, 상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보는 상기 동일한 행인이 연관된 비디오 프레임 중 기설정된 특징 포인트와의 상대적인 위치 정보를 포함하고; 상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계는,
상기 동일한 행인에 연관된 비디오 프레임에서의 기설정된 특징 포인트를 추출하는 단계; 및
상기 기설정된 특징 포인트가 상기 타깃 장소에서의 기설정된 위치 정보 및 상기 동일한 행인이 상기 기설정된 특징 포인트와의 상대적인 위치 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계를 포함한다.
본 출원의 실시예에서, 비디오 프레임 중 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보를 미리 결정함으로써, 기설정된 특징 포인트 및 행인이 비디오 프레임에서의 상대적인 위치 정보에 기반하여, 행인이 타깃 장소에서의 궤적 데이터를 빠르게 결정할 수 있다.
한 가지 가능한 실시형태에서, 상기 비디오 스트림에서의 비디오 프레임에 대해 머리 및 어깨 검출을 수행하여, 상기 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득하는 것;
상이한 비디오 프레임에 각각 포함된 행인의 머리 및 어깨 특징 정보에 기반하여, 상기 상이한 비디오 프레임에 포함된 행인 사이의 특징 유사도를 결정하는 것; 및
상기 특징 유사도가 기설정된 유사도 임계값보다 높은 비디오 프레임을, 상기 동일한 행인에 연관된 비디오 프레임으로 사용하는 것에 따라 상기 동일한 행인에 연관된 비디오 프레임을 결정한다.
본 출원의 실시예에서, 머리 및 어깨 검출 기술을 통해 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득하고, 머리 및 어깨 검출 기술을 통해 행인 특징을 식별하는 정보를 비교적 정확하고 전면적으로 추출할 수 있는 방안을 제안함으로써, 멀티 프레임의 비디오 프레임에서의 동일한 행인 및 동일한 행인에 연관된 비디오 프레임을 빠르게 획득하여, 행인의 궤적 데이터를 결정하기 위한 향후 행인에 대한 추적에 편의를 제공할 수 있다.
한 가지 가능한 실시형태에서, 상기 정보 처리 방법은,
상기 상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터 및 기설정된 상이한 행인 통계 데이터에 대응되는 랜더링 방식에 기반하여, 상기 타깃 장소가 기설정된 시간 내에서의 행인 히트맵을 생성하고 출력하는 단계를 더 포함한다.
본 출원의 실시예에서, 타깃 장소 내의 물품 진열 영역에 배치 제안을 제공하기 위해, 상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터에 기반하여, 타깃 장소 내의 각 물품 진열 영역의 인파양 변화를 직관적인 형태로 반영 가능한 인파 히트맵을 생성할 수 있다.
한 가지 가능한 실시형태에서, 상기 정보 처리 방법은,
상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는지 여부를 결정하는 단계; 및
조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는 것으로 결정한 경우, 제1 조기 경보 프롬프트 정보를 생성하는 단계를 더 포함한다.
본 출원의 실시예에서, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 잠재적인 위험이 존재하는지 여부를 검출하고, 잠재적인 위험이 존재하는 것으로 결정한 경우, 조기 경보 프롬프트를 생성함으로써, 타깃 장소 내의 안전성을 효과적으로 향상시킬 수 있다.
한 가지 가능한 실시형태에서, 상기 조기 경보 조건은 물품 진열 영역의 행인 수가 제1 기설정된 임계값보다 크거나 같은 것을 포함한다.
한 가지 가능한 실시형태에서, 상기 조기 경보 조건은,
물품 진열 영역의 행인 수와 다른 어느 하나의 물품 진열 영역의 행인 수 사이의 차이가 제2 기설정된 임계값보다 큰 것;
물품 진열 영역과 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작은 것; 및
물품 진열 영역이 상기 타깃 장소에서의 기설정된 교통 허브 영역에 위치한 것 중 적어도 하나를 더 포함한다.
본 출원의 실시예에서, 타깃 장소의 잠재적인 위험에 대해 전면적인 예측을 수행하기 위해, 상이한 조기 경보 조건을 설립하여, 타깃 장소의 안전성을 향상시킨다.
한 가지 가능한 실시형태에서, 상기 정보 처리 방법은,
제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 인파 혼잡이 발생한 지속 시간을 획득하는 단계; 및
상기 지속 시간이 기설정된 시간 임계값에 도달한 경우, 제2 조기 경보 프롬프트 정보를 생성하는 단계를 더 포함한다.
본 출원의 실시예에서, 혼잡 이벤트의 지속 시간을 검출할 수 있고, 혼잡 이벤트의 지속 시간이 비교적 긴 것으로 검출된 경우, 조기 경보 프롬프트를 수행할 수 있는 방안을 제안하여, 타깃 장소의 안전성을 향상시킨다.
한 가지 가능한 실시형태에서, 상기 정보 처리 방법은,
인파 혼잡이 발생되지 않은 제3 타깃 물품 진열 영역에 대해, 상기 제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수를 획득하는 단계; 및
상기 제3 타깃 물품 진열 영역이 상기 복수 개의 시간 구간에서 각각 대응되는 행인 수가 제3 기설정된 임계값보다 모두 작은 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계를 더 포함한다.
본 출원의 실시예에서, 제3 타깃 물품 진열 영역에 혼잡 이벤트가 존재하지 않는 경우, 상기 제3 타깃 물품 진열 영역의 행인 수가 여전히 작은 것으로 검출되면, 상기 제3 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 생성하여, 제3 타깃 물품 진열 영역의 행인 수를 향상시킬 수 있다.
한 가지 가능한 실시형태에서, 상기 정보 처리 방법은,
상기 제3 타깃 물품 진열 영역이 적어도 하나의 시간 구간에서 대응되는 행인 수가 상기 제3 기설정된 임계값보다 큰 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역 중 각 서브 영역에 대응되는 궤적 데이터에 기반하여, 상기 제3 타깃 물품 진열 영역에 상기 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 적어도 하나의 서브 영역이 존재하는지 여부를 결정하는 단계; 및
적어도 하나의 서브 영역이 상기 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계를 더 포함한다.
본 출원의 실시예에서, 제3 타깃 물품 진열 영역에 행인 수가 비교적 많은 하나의 시간 구간이 존재하지만, 행인 수가 계속 비교적 적은 적어도 하나의 서브 영역이 존재할 경우, 마찬가지로 상기 제3 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 생성하는 방안을 제안하여, 제3 타깃 물품 진열 영역 중 각 서브 영역의 행인 수를 균일하게 할 수 있다.
본 출원의 실시예는 정보 처리 장치를 제공하고, 상기 정보 처리 장치는,
타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하도록 구성된 제1 결정 모듈;
상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 상기 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하도록 구성된 제2 결정 모듈; 및
상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하도록 구성된 처리 모듈을 포함한다.
한 가지 가능한 실시형태에서, 상기 프로세서 모듈은 또한, 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안을 생성하도록 구성되고;
상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하도록 구성된다.
본 출원의 실시예는 전자 기기를 제공하고, 상기 전자 기기는, 프로세서, 메모리 및 버스를 포함하고, 상기 메모리에는 상기 프로세서가 실행 가능한 기계 판독 가능한 명령어가 저장되어 있으며, 전자 기기가 작동될 경우, 상기 프로세서와 상기 메모리 사이는 버스를 통해 통신하고, 상기 기계 판독 가능한 명령어가 상기 프로세서에 의해 실행될 경우 제1 측면에 따른 정보 처리 방법의 단계를 실행한다.
본 출원의 실시예는 컴퓨터 판독 가능한 저장 매체를 제공하고, 상기 컴퓨터 판독 가능한 저장 매체에는 컴퓨터 프로그램이 저장되어 있고, 상기 컴퓨터 프로그램이 프로세서에 의해 작동될 경우 제1 측면에 따른 정보 처리 방법의 단계를 실행한다.
본 발명의 실시예는 컴퓨터 프로그램을 제공하고, 상기 컴퓨터 프로그램은 컴퓨터 판독 가능한 코드를 포함하고, 상기 컴퓨터 판독 가능한 코드가 전자 기기에서 작동되어, 상기 전자 기기에서의 프로세서에 의해 실행될 경우, 상기 정보 처리 방법을 구현한다.
본 출원의 실시예의 상기 목적, 특징 및 장점이 더욱 선명해지고 이해하기 쉬워지도록 하기 위해, 아래에 비교적 바람직한 실시예를 예를 들고, 첨부 도면과 배합하여, 상세하게 설명하고자 한다.
본 발명의 실시예의 기술방안을 더욱 명확하게 설명하기 위해, 아래에 실시예에서 사용되어야 하는 도면을 간단하게 설명하고, 이 곳의 도면은 명세서에 병합되어 본 명세서에서의 일부를 구성하며, 이러한 도면은 본 발명에 부합되는 실시예를 도시하며, 명세서와 함께 본 발명의 기술방안을 설명하기 위한 것이다. 이해해야 할 것은, 아래의 도면은 본 발명의 일부 실시예만 도시할 뿐이므로, 범위에 대한 한정으로 간주되어서는 안되며, 본 분야의 통상의 기술자는 창조성 노동을 부여하지 않는 전제 하에서도, 이러한 도면에 따라 다른 연관된 도면을 획득할 수 있다.
도 1a는 본 출원의 실시예에서 제공한 정보 처리 방법의 흐름도를 도시한다.
도 1b는 본 출원의 실시예에서 제공한 정보 처리 방법의 시스템 아키텍처 예시도를 도시한다.
도 2는 본 출원의 실시예에서 제공한 행인의 궤적 데이터를 결정하는 방법의 흐름도를 도시한다.
도 3은 본 출원의 실시예에서 제공한 동일한 행인에 연관된 비디오 프레임을 결정하는 방법의 흐름도를 도시한다.
도 4는 본 출원의 실시예에서 제공한 타깃 장소 내의 적어도 일부 물품 진열 영역을 조정하는 첫 번째 방법의 흐름도를 도시한다.
도 5는 본 출원의 실시예에서 제공한 타깃 장소 내의 적어도 일부 물품 진열 영역을 조정하는 두 번째 방법의 흐름도를 도시한다.
도 6은 본 출원의 실시예에서 제공한 타깃 장소 내의 적어도 일부 물품 진열 영역을 조정하는 세 번째 방법의 흐름도를 도시한다.
도 7은 본 출원의 실시예에서 제공한 행인 히트맵의 예시도를 도시한다.
도 8은 본 출원의 실시예에서 제공한 조기 경보 프롬프트 방법의 흐름도를 도시한다.
도 9는 본 출원의 실시예에서 제공한 타깃 장소 내의 적어도 일부 물품 진열 영역을 조정하는 네 번째 방법의 흐름도를 도시한다.
도 10은 본 출원의 실시예에서 제공한 타깃 장소 내의 적어도 일부 물품 진열 영역을 조정하는 다섯 번째 방법의 흐름도를 도시한다.
도 11은 본 출원의 실시예에서 제공한 정보 처리 장치의 구조 예시도를 도시한다.
도 12는 본 출원의 실시예에서 제공한 전자 기기의 예시도를 도시한다.
본 발명의 실시예의 목적, 기술방안 및 장점을 더욱 명확하게 하기 위해, 아래에 본 발명의 실시예에서의 도면과 결합하여, 본 발명의 실시예에서의 기술방안에 대해 명확하고 완전하게 설명하며, 설명된 실시예는 다만 본 발명의 전부 실시예가 아닌 일부 실시예일 뿐임은 자명한 것이다. 일반적으로 이곳의 도면에서 설명되고 도시된 본 발명의 실시예의 컴포넌트는 여러 가지 상이한 구성으로 배치되고 설계될 수 있다. 따라서, 아래 도면에서 제공한 본 발명의 실시예의 상세한 설명은 본 발명의 보호 범위를 한정하려는 것이 아닌 본 발명의 선택된 실시예를 나타내기 위한 것이다. 본 발명의 실시예에 기반하여, 본 분야의 통상의 기술자가 창조성 노동 없이 얻은 다른 실시예는 전부 본 발명의 보호 범위에 속해야 한다.
유의해야 할 것은, 유사한 부호 및 문자는 아래의 도면에서 유사한 항목을 표시하므로, 특정된 항목이 하나의 도면에서 정의되면, 후속 도면에서 추가로 정의 및 해석할 필요가 없다.
본 문에서 용어 “및/또는”은 다만 관련 관계를 설명하기 위한 것이고, 세 가지의 관계가 존재함을 나타내며, 예컨대, A 및/또는 B는, A가 단독적으로 존재하거나, A 및 B가 동시에 존재하거나, B가 단독적으로 존재하는 세 가지 상황을 나타낸다. 또한, 본 문에서 용어 "적어도 하나"는 복수 개에서의 어느 하나 또는 복수 개에서의 적어도 두 개의 임의의 조합을 의미하고, 예컨대, A, B, C 중 적어도 하나를 포함하는 것은, A, B 및 C로 구성된 조합에서 선택된 임의의 하나 또는 복수 개의 요소를 포함하는 것을 나타낼 수 있다.
본 발명의 실시예에서의 복수 개 또는 여러 가지는 적어도 두 개 또는 적어도 두 가지를 가리킨다.
고유의 물품 진열 방식은 불균일한 인파 분포를 초래할 수 있고, 예컨대 인파가 판매량이 비교적 높은 영역에 분포될 확률이 크므로, 교통이 혼잡되어, 쇼핑몰의 인원 유통에 불리함으로써, 판매액에 영향을 미친다. 따라서, 고유의 진열 물품 진열 방식으로 초래된 불균일한 인파 분포로 인한 과제를 개선하기 위해, 쇼핑몰 내의 상이한 물품 진열 영역에 대한 조정 정보 생성 방안이 급히 필요하다.
상기 연구에 기반하여, 본 출원의 실시예는 정보 처리 방법을 제공하여, 수집된 타깃 장소의 비디오 스트림과 결합하여 상이한 물품 진열 영역의 행인 통계 데이터를 결정할 수 있고, 더 나아가 행인 통계 데이터에 기반하여 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정할 수 있다.
이로써, 온라인으로 타깃 장소에 대해 수집한 비디오 스트림을 통해, 타깃 장소 중 각 물품 진열 영역의 인파양을 분석함으로써, 제때에 인원 유통에 지장을 주는 물품 진열 영역에 대한 조정을 수행할 수 있어, 타깃 장소 중 각 물품 진열 영역의 배치 합리성을 향상시킨다.
또한, 타깃 장소의 경우, 타깃 장소가 공공 장소 또는 비 공공 장소에 속하든, 안전을 고려하여, 일반적으로 웹캠 등과 같은 비디오 수집 부품을 배치한다. 즉, 상기 기술방안을 구현하는 데이터 출처가 일반적으로 기존 자원에 속하므로, 비디오 스트림을 추가로 수집할 필요가 없음을 의미한다. 이로써, 본 출원의 실시예에서 제공한 기술방안은, 타깃 장소에 적용되는 배치 제안을 획득하기 위해, 기존 자원을 합리적으로 사용하여, 기존 자원의 충분한 이용을 구현할 수 있다. 또한 획득된 물품 진열 영역의 조정 방안은, 타깃 장소의 실제 수요에 더욱 적용될 수 있다.
본 발명의 실시예의 이해의 용이함을 위해, 먼저 본 출원의 실시예에서 공개한 정보 처리 방법에 대해 상세히 소개하고, 본 출원의 실시예에서 제공한 정보 처리 방법의 실행 주체는 일반적으로 일정한 계산 능력을 구비한 컴퓨터 기기이며, 상기 컴퓨터 기기는 예컨대 단말 또는 서버 또는 다른 처리 기기를 포함한다. 일부 가능한 구현 방식에 있어서, 상기 정보 처리 방법은 프로세서가 메모리에 저장된 컴퓨터 판독 가능한 명령어를 호출하는 방식을 통해 구현될 수 있다.
도 1a에 도시된 바를 참조하면, 도 1a는 본 출원의 실시예에서 제공한 정보 처리 방법의 흐름도이고, 상기 정보 처리 방법은 아래의 단계 S101내지 단계 S103을 포함한다.
단계 S101에 있어서, 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정한다.
예시적으로, 타깃 장소는 행인 분포 통계가 필요한 장소를 포함한 장소일 수 있고, 예컨대 복수 개의 전시관을 포함한 전시장일 수 있으며, 통계하여 획득된 상이한 전시장이 기설정된 시간내에서의 인파양에 기반하여, 각 전시장에 진열된 물품 타입을 조정할 수 있고, 또한 복수 개의 가게를 포함한 쇼핑몰일 수 있으며, 통계하여 획득된 상이한 가게가 기설정 시간 구간 내에서의 행인 수에 기반하여, 각 가게에 진열된 배치를 조정할 수 있다.
예시적으로, 타깃 장소에 포함된 복수 개의 영역에 비디오 스트림을 수집하기 위한 비디오 수집 부재를 배치할 수 있고, 비디오 수집 부품은 웹캠을 포함할 수 있으며, 웹캠은 삼원색(Red Green Blue, RGB) 웹캠, 또는 삼원색 깊이(Red Green Blue Depth, RGBD) 웹캠일 수 있으며, 여기서 한정하지 않으며, 예컨대 타깃 장소의 복수 개의 물품 진열 영역에 상응한 물품 진열 영역에 대해 비디오 수집을 수행하기 위한 웹캠을 각각 설정할 수 있고, 이로써 복수 개의 물리적 진열 영역에 설치된 웹캠이 수집한 비디오 스트림을 스티칭한 후, 전체 타깃 장소의 비디오 스트림을 획득할 수 있다.
예시적으로, 타깃 장소에 대한 비디오 스트림을 획득한 후, 비디오 스트림에 대해 프레이밍 처리를 수행하여, 비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행할 수 있도록 함으로써, 비디오 스트림 중 행인이 비디오 프레임에서의 위치 변화를 결정할 수 있으며, 더 나아가 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정할 수 있으며, 예컨대 동일한 행인(A)으로 예를 들 경우, 상기 행인(A)의 궤적 데이터는 상기 행인(A)이 복수 개의 시간 포인트 또는 복수 개의 시간 구간에 위치한 위치를 포함할 수 있다.
단계 S102에 있어서, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터 및 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정한다.
예시적으로, 타깃 장소 내에 포함된 상이한 물품 진열 영역의 위치 범위는 미리 결정된 것일 수 있고, 예컨대 타깃 장소에 대한 세계 좌표계를 구축할 수 있음으로써, 타깃 장소 내의 상이한 물품 진열 영역이 세계 좌표계에서의 위치 범위를 미리 결정하고 저장할 수 있다.
예시적으로, 물품 진열 영역에 대응되는 행인 통계 데이터는 물품 진열 영역이 기설정된 시각에서 포함한 행인 수를 가리킬 수 있고, 예컨대 9:00일 때 상이한 물품 진열 영역 각각에 포함된 행인 수를 결정할 수 있으며, 예컨대 비디오 스트림에서 결정한 행인이 상기 기설정된 시각에서의 궤적 데이터(즉 행인이 기설정된 시각에서의 위치임) 및 상이한 물품 진열 영역의 위치 범위에 기반하여 결정할 수 있으며; 또는 물품 진열 영역에 대응되는 행인 통계 데이터는 물품 진열 영역이 설정 시간 구간 내에서의 인파수를 가리킬 수 있고, 비디오 스트림이 결정한 행인이 상기 설정 시간 구간 내에서의 궤적 포인트 및 상이한 물품 진열 영역의 위치 범위에 기반하여 결정할 수 있으며, 구현 방식은 아래에서 상세히 설명하기로 한다.
단계 S103에 있어서, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정한다.
예시적으로, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치는, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안 및 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 포함하고; 여기서, 배치 제안은, 진열 물품의 안착 위치에 대한 조정 제안 및 물품을 진열하기 위한 진열 진열대에 대한 조정 제안 중 적어도 하나를 포함할 수 있으며; 대응되게, 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하는 것은, 진열 물품에 대한 조정 및 물품을 진열하기 위한 진열 진열대에 대한 조정 중 적어도 하나를 포함할 수 있다.
수집된 타깃 장소의 비디오 스트림과 결합하여 상이한 물품 진열 영역의 행인 통계 데이터를 결정할 수 있고, 더 나아가 행인 통계 데이터에 기반하여 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정할 수 있다.
이로부터, 온라인으로 타깃 장소에 대해 수집한 비디오 스트림을 통해, 타깃 장소 중 각 물품 진열 영역의 인파양을 분석할 수 있음으로써, 제때에 인원 유통에 지장을 주는 물품 진열 영역에 대한 조정을 수행할 수 있어, 타깃 장소 중 각 물품 진열 영역의 배치 합리성을 향상시킨다.
또한, 타깃 장소의 경우, 타깃 장소가 공공 장소 또는 비 공공 장소에 속하든, 안전을 고려하여, 일반적으로 웹캠 등과 같은 비디오 수집 부재를 배치한다. 즉, 상기 기술방안을 구현하는 데이터 출처가 일반적으로 기존 자원에 속하므로, 비디오 스트림을 추가로 수집할 필요가 없음을 의미한다. 이로써, 본 출원의 실시예에서 제공한 기술방안은, 타깃 장소에 적용되는 배치 제안을 획득하기 위해, 기존 자원을 합리적으로 사용하여, 기존 자원의 충분한 이용을 구현할 수 있다. 또한 획득된 물품 진열 영역의 조정 방안은, 타깃 장소의 실제 수요에 더욱 적용될 수 있다.
도 1b는 본 출원의 실시예를 적용 가능한 정보 처리 방법의 시스템 아키텍처 예시도이고; 도 1b에 도시된 바와 같이, 상기 시스템 아키텍처는, 비디오 수집 기기(2001), 네트워크(2002) 및 이미지 획득 단말(2003)을 포함한다. 하나의 예시적 응용을 지원하는 것을 구현하기 위해, 비디오 수집 기기(2001) 및 이미지 획득 단말(2003)은 네트워크(2002)를 통해 통신 연결을 구축할 수 있고, 비디오 수집 기기(2001)는 네트워크(2002)를 통해 이미지 획득 단말(2003)에 수집된 비디오 스트림을 전송하며, 이미지 획득 단말(2003)은 비디오 스트림을 수신하고, 비디오 스트림을 분석함으로써, 비디오 스트림 중 타깃 장소 내의 일부 물품 진열 영역에 대한 배치를 결정한다.
예로서, 현재 시나리오 비디오 수집 기기(2001)는 웹캠 등 이미지 수집 기기를 포함할 수 있고, 웹캠은 예컨대 RGB 웹캠, 또는 RGBD 웹캠일 수 있다. 이미지 획득 단말(2003)은 일정한 계산 능력을 구비한 컴퓨터 기기를 포함할 수 있고, 상기 컴퓨터 기기는 예컨대 단말 기기 또는 서버 또는 다른 처리 기기를 포함한다. 네트워크(2002)는 유선 연결 또는 무선 연결 방식을 사용할 수 있다. 여기서, 비디오 수집 기기(2001)가 이미지 수집 기기이고, 이미지 획득 단말(2003)이 서버일 경우, 비디오 수집 기기는 유선 연결의 방식을 통해 이미지 획득 단말과 통신 연결할 수 있고, 예컨대 버스를 통해 데이터 통신을 수행할 수 있으며; 비디오 수집 기기(2001)가 이미지 수집 기기이고, 이미지 획득 단말(2003)이 단말 기기일 경우, 비디오 수집 기기는 무선 연결의 방식을 통해 이미지 획득 단말과 통신 연결을 수행할 수 있음으로써, 데이터 통신을 수행할 수 있다.
또는, 일부 시나리오에서, 이미지 획득 단말(2003)은 비디오 수집 모듈을 구비한 시각 처리 기기일 수 있고, 웹캠을 구비한 호스트일 수 있다. 이때, 본 출원의 실시예의 정보 처리 방법은 이미지 획득 단말(2003)에 의해 실행될 수 있고, 상기 시스템 아키텍처는 네트워크(2002) 및 비디오 수집 기기(2001)를 포함하지 않을 수 있다.
아래에서 일부 실시예와 결합하여 상기 단계 S101 내지 단계 S103를 상세히 설명한다.
단계 S101인 경우, 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정할 경우, 도 2에 도시된 바와 같이, 단계 S201내지 단계 S202를 포함할 수 있다.
단계 S201에 있어서, 비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행하여, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 획득한다.
예시적으로, 비디오 프레임에서의 행인이 차폐된 경우가 존재할 수 있어, 비디오 프레임으로부터 사람의 전체 신체를 촬영할 수 없는 것을 고려하여, 비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행할 경우, 머리 및 어깨 검출 알고리즘을 사용하여, 비디오 프레임 중 행인에 대한 검출을 완료하는 것을 고려할 수 있다.
예시적으로, 위치 지시 정보는 행인이 비디오 프레임에서의 위치를 지시하기 위한 정보를 포함할 수 있고, 예컨대 행인 검출 기술에 기반하여 결정된, 행인이 비디오 프레임에서의 위치 정보를 표시하기 위한 검출 박스를 포함할 수 있고, 또한 비디오 프레임에서 행인과 기설정된 특징 포인트 사이의 상대적인 위치 정보를 포함할 수 있으며, 기설정된 특징 포인트가 타깃 장소에서의 위치 정보가 기지인 경우, 기설정된 특징 포인트와 행인 사이의 상대적인 위치 정보와 결합하여 행인이 타깃 장소에서의 궤적 데이터를 결정할 수 있다.
비디오 스트림에 복수의 행인이 포함될 수 있는 것을 고려하여, 행인을 추적하여 행인의 궤적 데이터를 결정할 경우, 상이한 프레임에 포함된 동일한 행인을 인식하여, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 결정해야 하며, 예컨대 연속적인 n 프레임의 비디오 프레임이 모두 동일한 행인을 포함하면, n 프레임의 비디오 프레임을 동일한 행인에 연관된 비디오 프레임으로 사용할 수 있고, 상기 n 프레임의 비디오 프레임 중 상기 동일한 행인의 위치 지시 정보를 결정할 수 있다.
단계 S202에 있어서, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정한다.
예시적으로, 위치 지시 정보는 행인이 비디오 프레임에서의 위치를 지시하기 위한 검출 박스를 포함할 수 있고, 예컨대 검출 박스 밑변의 중심점이 비디오 프레임에서의 위치 정보를 행인이 비디오 프레임에서의 위치 정보로 사용할 수 있고, 다음 이미지 좌표계와 카메라 좌표계 사이의 전환 관계 및 카메라 좌표계와 세계 좌표계 사이의 전환 관계에 기반하여, 행인이 타깃 장소에서의 위치를 결정한다.
예시적으로, 위치 지시 정보는 또한 비디오 프레임에서 행인과 기설정된 특징 포인트 사이의 상대적인 위치 정보를 포함할 수 있고, 기설정된 특징 포인트가 타깃 장소에서의 위치 정보를 먼저 결정할 수 있으며, 다음 기설정된 특징 포인트와 행인 사이의 상대적인 위치 정보에 따라, 행인이 타깃 장소에서의 위치를 결정할 수 있고, 예컨대 기설정된 특징 포인트와 행인의 발이 비디오 프레임에서 중합되면, 기설정된 특징 포인트가 타깃 장소에서의 위치를 행인의 발이 타깃 장소에서의 위치로 사용할 수 있다.
예시적으로, 동일한 행인을 추적할 경우, 동일한 행인이 타깃 장소에서의 복수 개의 위치를 획득할 수 있으며, 예컨대 동일한 행인이 타깃 장소에서의 위치는 위치 A, 위치 B 및 위치 C를 포함하고, 이러한 위치는 시계열에 따라 순차적으로 서로 연결된 후 상기 동일한 행인이 타깃 장소에서의 궤적 데이터를 표시할 수 있다.
본 출원의 실시예에서, 행인 검출 기술을 사용하여, 비디오 프레임 중 행인 위치를 지시하기 위한 위치 지시 정보를 빠르게 결정할 수 있고, 이에 기반하여 동일한 행인의 궤적 데이터를 빠르게 결정할 수 있다.
상기 제안한 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보는 동일한 행인이 연관된 비디오 프레임에서 기설정된 특징 포인트와의 상대적인 위치 정보를 포함하고; 상기 단계 S202의 경우, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정할 경우, 아래의 단계 S2021 및 단계 S2022를 포함할 수 있다.
단계 S2021에 있어서, 동일한 행인에 연관된 비디오 프레임에서의 기설정된 특징 포인트를 추출한다.
단계 S2022에 있어서, 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보 및 동일한 행인이 기설정된 특징 포인트와의 상대적인 위치 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정한다.
예시적으로, 타깃 장소에 대응되는 컴퓨터 보조 설계(Computer Aided Design, CAD)도를 미리 제작할 수 있고, CAD도에서 타깃 장소에 포함된 복수 개의 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보를 표기할 수 있으며, 복수 개의 기설정된 특징 포인트는 지면, 테이블, 전등, 벽 등과 같은 미리 선택된 일정한 시간 동안 정지된 물체에 포함된 특징 포인트일 수 있고, 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보는 미리 구축된 타깃 장소에 대응되는 세계 좌표계에 따라 결정될 수 있다.
예시적으로, 행인에 연관된 하나의 프레임의 비디오 프레임을 예를 들어 설명하면, 행인이 비디오 프레임에서의 위치 정보에 따라, 행인의 위치 정보에 연관된 기설정된 특징 포인트를 추출할 수 있으며, 예컨대 비디오 프레임 중 행인 발 위치에 중합된 기설정된 특징 포인트를 추출할 수 있어, 직접 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보에 기반하여, 행인이 타깃 장소에서의 위치를 결정할 수 있으며, 이러한 방식에 따라, 동일한 행인에 연관된 비디오 프레임에 멀티 프레임이 포함될 경우, 상기 동일한 행인이 타깃 장소에서의 복수 개의 위치를 결정할 수 있고, 이로부터 상기 동일한 행인이 타깃 장소에서의 위치 변화를 결정하여, 상기 동일한 행인을 추적할 수 있다.
본 출원의 실시예에서, 비디오 프레임 중 기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보를 미리 결정하여, 기설정된 특징 포인트 및 행인이 비디오 프레임에서의 상대적인 위치 정보에 기반하여, 행인이 타깃 장소에서의 궤적 데이터를 빠르게 결정할 수 있다.
상기 제안한 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 결정하는 과정은, 아래의 방식에 따라 동일한 행인에 연관된 비디오 프레임을 결정할 수 있으며, 도 3에 도시된 바와 같이, 단계 S301내지 단계 S303를 포함한다.
단계 S301에 있어서, 비디오 스트림에서의 비디오 프레임에 대해 머리 및 어깨 검출을 수행하여, 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득한다.
예시적으로, 비디오 스트림에 대해 프레이밍 처리를 수행한 후, 각 프레임의 비디오 프레임의 경우, 상기 프레임의 비디오 프레임에 포함된 행인의 머리 및 어깨 정보를 결정한 후, 행인의 머리 및 어깨를 설명하기 위한 특징 정보를 추출할 수 있으며, 예컨대 행인의 머리 및 어깨의 윤곽 특징, 형태 특징, 색상 특징, 텍스처 특징 및 동작 특징 등을 추출할 수 있고, 또한 행인의 얼굴 특징을 포함할 수 있으며, 여러 가지 특징을 결합하여 판단하여, 상이한 비디오 프레임에서의 행인이 동일한 행인인지 여부를 향후에 판단하기 위한 기술적 지원을 제공할 수 있다.
단계 S302에 있어서, 상이한 비디오 프레임에 각각 포함된 행인의 머리 및 어깨 특징 정보에 기반하여, 상이한 비디오 프레임에 포함된 행인 사이의 특징 유사도를 결정한다.
예시적으로, 상이한 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보에 따라 상이한 비디오 프레임에 포함된 행인에 각각 대응되는 특징 벡터를 생성하고, 다음 코사인 공식을 통해, 상이한 비디오 프레임에 포함된 행인 사이의 특징 유사도를 결정할 수 있다.
단계 S303에 있어서, 특징 유사도가 기설정된 유사도 임계값보다 높은 비디오 프레임을, 동일한 행인에 연관된 비디오 프레임으로 사용한다.
예시적으로, 동일한 행인이 비디오 스트림의 상이한 비디오 프레임에서 대응되는 행인 특징 정보 사이의 유사도가 비교적 높은 것을 고려하여, 미리 설정된 기설정된 유사도 임계값에 기반하여, 동일한 행인에 연관된 비디오 프레임을 선별할 수 있으며, 예컨대 제1 프레임, 제2 프레임 및 제3 프레임에 포함된 행인 사이의 특징 유사도가 기설정된 유사도 임계값보다 클 경우, 제1 프레임, 제2 프레임 및 제3 프레임을 상기 행인에 연관된 비디오 프레임으로 사용할 수 있다.
예시적으로, 비디오 프레임에 대해 머리 및 어깨 검출을 수행하는 과정에서, 또한 검출된 행인에 대해 ID 코딩을 수행할 수 있으며, 예컨대 동일한 ID를 통해 상이한 비디오 프레임 중 동일한 행인을 코딩할 수 있으며, 이로써 행인을 추적하는 과정에서, 동일한 ID를 통해 동일한 행인의 궤적 포인트 정보를 추적할 수 있다.
본 출원의 실시예에서, 머리 및 어깨 검출 기술을 통해 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득할 수 있고, 머리 및 어깨 검출 기술을 통해 행인 특징을 식별하는 정보를 비교적 정확하고 전면적으로 추출할 수 있는 방안을 제안함으로써, 멀티 프레임의 비디오 프레임에서의 동일한 행인 및 동일한 행인에 연관된 비디오 프레임을 빠르게 결정할 수 있어, 행인의 궤적 데이터를 결정하기 위한 향후 행인에 대한 추적에 편의를 제공한다.
한 가지 가능한 실시형태에서, 상기 단계 S103의 경우, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정할 경우, 도 4에 도시된 바와 같이, 아래의 단계 S401 및 단계 S402를 포함할 수 있다.
단계 S401에 있어서, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터 및 타깃 장소에서의 궤적 데이터에 기반하여, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는지 여부를 결정한다.
예시적으로, 상이한 물품 진열 영역이 기설정된 시간 구간 내에서 각각 대응되는 행인 통계 데이터에 따라, 각 물품 진열 영역이 상기 기설정된 시간 구간 내에서의 행인 수가 혼잡에 대응되는 조건에 도달하는 행인 수를 초과하는지 여부를 결정할 수 있으며, 예컨대 사전에 면적이 n 제곱미터로 설정된 물품 진열 영역에 대응되는 행인 수가 m을 초과하는 경우, 상기 물품 진열 영역에 인파 혼잡이 발생할 수 있으며, 더 나아가 타깃 장소의 궤적 데이터와 결합하여, 행인이 행인 수가 비교적 많은 물품 진열 영역에 도착한 후 원래의 길로 다시 돌아가거나 길을 에돌아가는 경우가 존재하는지 여부를 검출할 수 있고, 존재할 경우, 상기 제1 타깃 물품 진열 영역에 인파 혼잡이 발생할 확률이 비교적 큰 것으로 결정할 수 있다.
단계 S402에 있어서, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행한다.
예시적으로, 인파 혼잡이 존재하는 것으로 결정된 제1 타깃 물품 진열 영역에 대하여, 더 나아가 상기 제1 타깃 물품 진열 영역에 인파 혼잡이 초래된 원인을 판단한 다음, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행할 수 있다.
본 출원의 실시예에서, 상이한 물품 진열 영역의 행인 통계 데이터 및 타깃 장소에서의 궤적 데이터를 통해, 인파 혼잡 상황이 존재하는지 여부를 분석할 수 있으며, 예컨대, 제1 물품 진열 영역의 행인 수가 비교적 많고, 비디오 스트림에 기반하여 행인의 궤적이 제1 물품 진열 영역에 도착한 후 궤적이 리턴되는 것이 검출되는 경우가 존재하면, 제1 물품 진열 영역에 인파 혼잡이 발생한 것으로 결정할 수 있으며, 이때 상기 제1 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하여, 제1 타깃 물품 진열 영역의 혼잡 상황을 저하시킬 수 있다.
한 가지 가능한 실시형태에서, 상기 단계 S402의 경우, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행할 경우, 도 5에 도시된 바와 같이, 아래의 단계 S501내지 단계 S503를 포함할 수 있다.
단계 S501에 있어서, 비디오 스트림으로부터 제1 타깃 물품 진열 영역에 연관된 비디오 프레임을 추출한다.
예시적으로, 타깃 장소에 복수 개의 웹캠을 설치할 수 있고, 각 웹캠은 상이한 영역에 대응되는 비디오 스트림을 수집할 수 있으며, 제1 타깃 물품 진열 영역에 인파 혼잡이 발생하는 원인을 빨리 결정하기 위해, 여기서 제1 타깃 물품 진열 영역에 연관된 웹캠에 의해 수집된 비디오 스트림을 추출한 다음, 더 나아가 상기 비디오 스트림에 대해 프레이밍 처리를 수행하여, 제1 타깃 물품 진열 영역에 연관된 비디오 프레임을 획득할 수 있다.
단계 S502에 있어서, 추출된 비디오 프레임에서의 행인이 제1 타깃 물품 진열 영역에서의 포즈 데이터를 결정한다.
예시적으로, 미리 훈련된 포즈 인식 네트워크에 기반하여 비디오 프레임에서의 행인이 제1 타깃 물품 진열 영역에서의 포즈 데이터를 인식할 수 있고, 예컨대, 포즈 데이터는 허리를 굽히는 포즈 및 서 있는 포즈를 포함할 수 있다.
단계 S503에 있어서, 포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행한다.
예시적으로, 슈퍼마켓 쇼핑 시나리오와 같은 쇼핑 시나리오의 경우, 대부분 고객이 주목하는 상품이 쇼핑 선반의 밑층에 배치될 경우에, 고객이 이러한 타입의 상품을 선택하려면 허리를 굽혀 선택해야 하므로, 쇼핑 선반 전방의 도로에 혼잡을 일으키기 쉬우며, 이에 대해, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행한다.
본 출원의 실시예에서, 제1 타깃 물품 진열 영역에 연관된 비디오 프레임에 따라, 비디오 프레임에서의 행인이 상기 영역에서의 포즈 데이터를 결정할 수 있고, 상기 포즈 데이터를 통해 제1 타깃 물품 진열 영역에 혼잡이 발생하는 일부 원인을 검출할 수 있는 방안을 제안하였으며, 이에 기반하여, 제1 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 제공하는 단계 및 합리적으로 제1 타깃 물품 진열 영역에 대해 합리적인 배치를 수행하는 단계 중 적어도 하나를 실행하여, 제1 타깃 물품 진열 영역에 인한 인파 혼잡을 개선할 수 있다.
한 가지 가능한 실시형태에서, 제1 타깃 물품 진열 영역은 적어도 하나의 물품 진열 진열대를 포함하고, 각 물품 진열 진열대는 복수 개의 층을 포함하며, 상기 단계 S503의 경우, 포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행할 경우, 아래의 단계 S5031 및 단계 S5032를 포함할 수 있다.
단계 S5031에 있어서, 포즈 데이터에 기반하여, 비디오 프레임에 제1 기설정된 포즈에 부합되는 설정 개수를 초과한 행인의 포즈가 존재하는 것으로 결정한 경우, 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 제1 타깃층을 획득한다.
예시적으로, 제1 타깃 물품 진열 영역이 타깃 장소에서의 가게인 것으로 예를 들면, 상기 가게는 복수 개의 물품 진열 진열대를 포함할 수 있고, 인접한 두 개의 물품 진열 진열대 사이는 고객이 통행할 수 있는 통로를 구성하며, 각 물품 진열 진열대는 위로부터 아래로 복수 개의 층을 포함할 수 있다.
예시적으로, 제1 기설정된 포즈는 허리를 굽히는 포즈일 수 있고, 설정 개수를 초과한 고객의 포즈가 허리를 굽히는 포즈인 것으로 검출한 경우, 이러한 고객의 주시 방향 검출하여 설정 개수를 초과한 고객이 주목하는 제1 타깃 물품 진열 진열대의 제1 타깃층을 결정하여, 설정 개수를 초과한 고객이 허리를 굽혀 제1 타깃 물품 진열 진열대의 밑층의 화물을 선택한 것이 인파 혼잡을 초래하는 원인인 것으로 결정할 수 있다.
단계 S5032에 있어서, 제1 타깃층에 기반하여, 제1 타깃층에 진열된 물품을 제1 타깃 물품 진열 진열대의 제2 타깃층으로 조정하여 진열하도록 지시하는 배치 제안을 생성하는 단계 및 제1 타깃층에 진열된 물품을 제2 타깃층으로 조정하는 단계 중 적어도 하나를 실행하고, 지면으로부터 제2 타깃층의 높이는 지면으로부터 제1 타깃층의 높이보다 높다.
예시적으로, 설정 개수를 초과한 고객이 허리를 굽혀 제1 타깃 물품 진열 진열대의 밑층의 화물을 선택함으로 인해 제1 타깃 물품 진열 영역이 제1 타깃 물품 진열 진열대에서 인파 혼잡이 발생하는 것을 고려하여, 밑층에 진열된 물품을 높은 층에 조정하여 진열하도록 지시하는 배치 제안을 생성하는 단계 및 밑층에 진열된 물품을 높은 층에 조정하는 단계 중 적어도 하나를 실행하여, 고객이 주목하는 화물을 선택할 경우 서서 선택할 수 있음으로써, 대부분 고객이 허리를 굽혀 화물을 선택함으로 인한 인파 혼잡 상황을 완화한다.
본 출원의 실시예에서, 포즈 데이터를 통해 제1 타깃 물품 진열 영역에 인파 혼잡이 발생하는 원인이 상기 제1 타깃 물품 진열 영역에서의 물품 진열 진열대에서의 물품의 세팅이 불합리한 것으로 검출할 수 있으며, 예컨대 대량의 고객이 주목하는 물품이 진열대의 밑층에 세팅되면, 대량의 고객은 허리를 굽혀 상품을 선택해야 하므로, 인파 혼잡이 초래됨으로써, 제1 타깃 물품 진열 영역에 대한 합리적인 배치를 제안할 수 있으며, 예컨대 고객이 주목하는 밑층 진열대의 물품을 높은 층으로 조정하여, 고객이 서서 상품을 선택하는데 편의함으로써, 혼잡 상황을 개선할 수 있다.
한 가지 가능한 실시형태에서, 물품 진열 진열대는 복수 개를 포함하고, 본 출원의 실시예에서 제공한 정보 처리 방법은 아래의 단계 S5033 및 단계 S5034를 더 포함한다.
단계 S5033에 있어서, 추출된 비디오 프레임에서의 행인이 제1 타깃 물품 진열 영역에서의 궤적 데이터에 기반하여, 지나간 행인 수가 제1 설정 개수보다 작은 제2 타깃 물품 진열 진열대를 결정한다.
단계 S5034에 있어서, 상기 제2 타깃 물품 진열 진열대에 기반하여, 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열 진열대로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열대로 조정하는 단계 중 적어도 하나를 실행한다.
예시적으로, 제1 설정 개수는 물품 진열 영역에 포함된 상이한 물품 진열 진열대 사이에 수용 가능한 최대 행인 수에 따라 결정될 수 있으며, 예컨대 상이한 물품 진열 진열대 사이에 수용 가능한 최대 행인 수가 N일 경우, 상기 제1 설정 개수는 N의 k 배로 설정될 수 있고, 여기서 k는 0보다 크고 1보다 작으며, 상기 제1 설정 개수는 행인 수가 비교적 적은 것을 표시하고, 이는 최대 행인 수보다 훨씬 작다.
예시적으로, 마찬가지로 제1 타깃 물품 진열 영역이 타깃 장소에서의 가게인 것으로 예로 들면, 상기 제안한 설정 개수를 초과한 고객이 허리를 굽혀 제1 타깃 물품 진열 진열대의 밑층의 화물을 선택한 것이 인파 혼잡을 초래하는 원인인 경우, 상기 제1 타깃 물품 진열 영역에서 고객이 비교적 적은 제2 타깃 물품 진열 진열대를 선택할 수 있으며, 이로써 제1 타깃 물품 진열대 중 제1 타깃층에 진열된 화물을 제2 타깃 물품 진열 진열대에 조정할 수 있어, 인기 있는 화물을 상이한 물품 진열 진열대에 안착하여, 인파 혼잡의 확률을 저하시킨다.
본 출원의 실시예에서, 제1 타깃 물품 진열 영역 중 인파 혼잡을 초래하는 제1 타깃 물품 진열 진열대의 물품을 인파수가 비교적 적은 제2 타깃 물품 진열 진열대로 조정할 수 있는 방안을 제안하여, 행인이 무조건 제1 타깃 물품 진열 진열대에서 물품을 선택해야 함으로 인해 초래된 혼잡 상황을 효과적으로 개선한다.
다른 하나의 실시형태에서, 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 상기 단계 S503의 경우, 포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행할 경우, 아래의 단계 S5035 및 단계 S5036를 더 포함한다.
단계 S5035에 있어서, 포즈 데이터에 기반하여, 비디오 프레임에 제2 기설정된 포즈에 부합되는 설정 개수를 초과하는 행인의 포즈가 존재하는 것으로 결정한 경우, 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 현재 위치 및 인파 혼잡이 발생한 위치 영역을 획득한다.
단계 S5036에 있어서, 현재 위치 및 인파 혼잡이 발생한 위치 영역에 기반하여, 제1 타깃 물품 진열 진열대가 이동하는 것에 대한 배치 제안을 생성하는 단계, 현재 위치 및 인파 혼잡이 발생한 위치 영역에 따라 제1 타깃 물품 진열 진열대를 조정하는 단계 중 적어도 하나를 실행한다.
예시적으로, 마찬가지로 제1 타깃 물품 진열 영역이 타깃 장소에서의 가게인것으로 예를 들면, 상기 가게에 포함된 복수 개의 물품 진열 진열대는 이동 가능한 진열대이고, 제1 타깃 물품 진열 진열대가 위치한 영역에 인파 혼잡이 발생한 경우, 제1 타깃 물품 진열 진열대의 위치를 조정하여, 혼잡 상황을 개선할 수 있다.
예시적으로, 제2 기설정된 포즈는 서 있는 포즈일 수 있고, 설정 개수를 초과한 고객의 포즈가 서 있는 포즈인 것으로 검출한 경우, 이러한 고객의 주시 방향을 검출하여 설정 개수를 초과한 고객이 주목하는 제1 타깃 물품 진열 진열대를 결정하여, 설정 개수를 초과한 고객이 제1 타깃 물품 진열 진열대 주위에 서서 화물을 선택한 것이 인파 혼잡을 초래한 원인인 것으로 결정할 수 있고, 이때 비디오 프레임에 따라 제1 타깃 물품 진열 진열대의 현재 위치 및 인파 혼잡이 발생한 위치 영역을 인식할 수 있으며, 더 나아가 제1 타깃 물품 진열 진열대를 이동하는 배치 제안을 생성하는 단계 및 현재 위치와 인파 혼잡이 발생한 위치 영역에 따라 제1 타깃 물품 진열 진열대를 조정하는 단계 중 적어도 하나를 실행할 수 있다.
예시적으로, 현재 위치 및 인파 혼잡이 발생한 위치 영역에 따라 제1 타깃 물품 진열 진열대를 조정할 경우, 제1 타깃 물품 진열 진열대를 평행 이동하는 단계 및 제1 타깃 물품 진열 진열대를 회전하는 단계 중 적어도 하나를 실행할 수 있고, 여기서, 평행 이동의 거리는 제1 타깃 물품 진열 진열대의 현재 위치로부터 인파 혼잡에서 멀어지는 방향으로 이동하여, 인파 혼잡이 위치한 위치 영역의 범위에 따라 평행 이동하도록 결정한 거리이며, 회전하는 것은 제1 타깃 물품 진열 진열대의 각도를 회전하는 것일 수 있고, 진열 진열대의 회전을 통해 고객이 상품을 고를 때 위치한 위치를 조정할 수 있으며, 또한, 인파가 일반적으로 진열대의 방향을 따라 이동하기 때문에, 이런 식으로 조정하면 또한 인파의 이동 방향을 효과적으로 조정할 수 있으며, 따라서, 제1 타깃 물품 진열 진열대를 회전할 경우, 인파 혼잡에서 멀어지는 방향으로 회전할 수 있으며, 인파 혼잡이 위치한 위치 영역의 범위에 따라 회전하는 각도를 결정할 수 있다.
본 출원의 실시예에서, 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 포즈 데이터에 따라 설정 개수를 초과한 행인이 서 있는 포즈인 것으로 검출된 경우, 상기 제1 타깃 물품 진열 진열대의 위치를 조정할 수 있어, 제1 타깃 물품 진열 진열대에 행인이 비교적 많음으로 인해 다른 고객을 가로 막는 상황을 효과적으로 개선할 수 있다.
다른 한 가지 가능한 실시형태에서, 상기 단계 S402의 경우, 제 1타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정할 경우, 도 6에 도시된 바와 같이, 아래의 단계 S601 및 단계 S602를 포함할 수 있다.
단계 S601에 있어서, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 행인 수가 제2 설정 개수보다 작은 제2 타깃 물품 진열 영역을 결정한다.
단계 S602에 있어서, 제2 타깃 물품 진열 영역에 기반하여, 제1 타깃 물품 진열 영역에 진열된 일부 물품을 제2 타깃 물품 진열 영역으로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 제1 타깃 물품 진열 영역의 일부 물품을 제2 타깃 물품 진열 영역으로 조정하는 단계 중 적어도 하나를 실행한다.
예시적으로, 제2 설정 개수는 물품 진열 영역이 수용 가능한 최대 행인 수에 따라 결정될 수 있으며, 예컨대 상이한 물품 진열 영역이 수용 가능한 최대 행인 수가 P일 경우, 상기 제2 설정 개수를 P의 f 배로 설정할 수 있고, 여기서 f는 0보다 크고 1보다 작으며, 상기 제2 설정 개수는 행인 수가 비교적 적은 것을 표시하고, 이는 물품 진열 영역이 수용 가능한 최대 행인 수보다 훨씬 작다.
본 출원의 실시예에서, 인파 혼잡이 발생한 제1 타깃 물품 진열 영역에 진열된 일부 물품을 행인 수가 비교적 적은 제2 타깃 물품 진열 영역으로 조정하여 진열할 수 있는 방안을 제안하여, 제1 타깃 물품 진열 영역의 혼잡 상황을 효과적으로 개선한다.
하나의 실시형태에서, 본 출원의 실시예에서 제공한 정보 처리 방법은,
상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터 및 기설정된 상이한 행인 통계 데이터에 대응되는 랜더링 방식에 기반하여, 타깃 장소가 기설정된 시간 내에서의 행인 히트맵을 생성하고 출력하는 단계를 더 포함한다.
예시적으로, 기설정된 시간은 복수 개의 시간 구간을 포함하고, 예컨대 하나의 시간 구간이 1 시간일 경우, 타깃 장소의 12 시간 동안의 행인 히트맵을 생성하고 출력할 수 있다.
예시적으로, 상이한 물품 진열 영역이 기설정된 시간 내에서 대응되는 행인 수의 변화를 더욱 형상적으로 파악하기 위해, 미리 설정된 상이한 행인 통계 데이터에 대응되는 랜더링 방식에 따라, 행인 히트맵을 생성할 수 있으며, 예컨대 하나의 시간 구간 내에서 대응되는 행인 통계 데이터가 M보다 큰 영역을 빨간 색으로 표기할 수 있고, 상기 시간 구간 내에서 대응되는 행인 통계 데이터가 N보다 크고, M보다 작거나 같은 물품 진열 영역을 황색으로 표기할 수 있으며, 상기 시간 구간 내에서 대응되는 행인 통계 데이터가 0보다 크고, N보다 작거나 같은 물품 진열 영역을 녹색으로 표기할 수 있고, 상기 시간 구간 내의 행인 통계 데이터가 0인 물품 진열 영역을 하얀 색으로 표기할 수 있어, 타깃 장소가 기설정된 시간 내의 상이한 시간 구간에 대응되는 행인 히트맵의 변화 상황을 획득할 수 있다.
도 7에 도시된 바와 같이, 도 7은 타깃 장소가 하나의 시간 구간 내에서 대응되는 행인 히트맵이고, 이로부터 알다시피, 상기 시간 구간 내에서 물품 진열 영역 A에 포함된 행인 수는 가장 많고, 상기 시간 구간 내에서 물품 진열 영역 C에 포함된 행인 수는 가장 적다.
본 출원의 실시예에서, 타깃 장소 내의 물품 진열 영역에 배치 제안을 제공하기 위해, 상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터에 기반하여, 타깃 장소 내의 각 물품 진열 영역의 인파양 변화를 직관 형태로 반영 가능한 인파 히트맵을 생성한다.
하나의 실시형태에서, 도 8에 도시된 바와 같이, 본 출원의 실시예에서 제공한 정보 처리 방법은 아래의 단계 S701 및 단계 S702를 더 포함한다.
단계 S701에 있어서, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는지 여부를 결정한다.
단계 S702에 있어서, 조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는 것으로 결정한 경우, 제1 조기 경보 프롬프트 정보를 생성한다.
한 가지 가능한 실시형태에서, 조기 경보 조건은 물품 진열 영역의 행인 수가 제1 기설정된 임계값보다 크거나 같은 것을 포함한다.
예시적으로, 제1 기설정된 임계값은 실제 수요에 따라 설정될 수 있으며, 예컨대 타깃 장소의 타입, 물품 진열 영역이 타깃 장소에서의 위치 및 통계 시간 구간 등에 따라 설정될 수 있다.
다른 한 가지 가능한 실시형태에서, 조기 경보 조건은 아래의 조건 중 적어도 하나를 더 포함한다.
(1) 물품 진열 영역의 행인 수와 다른 어느 하나의 물품 진열 영역의 행인 수 사이의 차이가 제2 기설정된 임계값보다 크다.
(2) 물품 진열 영역과 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작다.
(3) 물품 진열 영역은 타깃 장소에서의 기설정된 교통 허브 영역에 위치한다.
제(1) 조건의 경우, 제2 기설정된 임계값은 타깃 장소 중 임의의 두 개의 물품 진열 영역에 포함된 행인 수 사이의 최대 차이를 가늠하기 위한 것이고, 예컨대 타깃 장소가 동일한 가게인 경우, 상기 가게는 복수 개의 물품 진열 영역을 포함하고, 다른 어느 하나의 물품 진열 영역 사이의 행인 수 차이가 너무 큰 하나의 물품 진열 영역이 존재할 경우, 제1 조기 경보 프롬프트 정보를 생성하여, 상기 물품 진열 영역에 존재하는 문제를 제때에 검사할 수 있도록 한다.
제(2) 조건의 경우, 고객 유동량이 비교적 큰 시간 구간에 인파 혼잡이 쉽게 초래하는 것을 고려하므로, 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작으면 안되는 것과 같은 일정한 조건을 만족해야 하므로, 물품 진열 영역과 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작은 것으로 검출한 경우, 제때에 조정하기 위해 제1 조기 경보 프롬프트 정보를 생성할 수 있다.
제(3) 조건의 경우, 타깃 장소의 복수 개의 교통 도로를 미리 계획할 수 있고, 일부 영역이 복수 개의 교통 도로의 교차 영역, 즉 기설정된 교통 허브 영역이 존재하며, 물품 진열 영역이 기설정된 교통 허브 영역에 위치할 경우, 제1 조기 경보 프롬프트 정보를 생성할 수 있어, 상기 물품 진열 영역의 위치를 제때에 조정하도록 하여, 교통 체증의 발생을 감소시킬 수 있다.
한 가지 가능한 실시형태에서, 혼잡 이벤트의 지속 시간을 검출하여, 제2 경고 정보를 제때에 출력할 수 있고, 즉 먼저, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 인파 혼잡이 발생한 지속 시간을 획득하고; 다음, 지속 시간이 기설정된 시간 임계값에 도달한 경우, 제2 조기 경보 프롬프트 정보를 생성한다. 이로써, 혼잡 이벤트의 지속 시간을 검출하고, 혼잡 이벤트의 지속 시간이 비교적 긴 것으로 검출한 경우, 조기 경보를 프롬프트하여, 타깃 장소의 안전성을 향상시킬 수 있다.
본 출원의 실시예에서, 타깃 장소의 잠재적인 위험에 대한 전면적인 예측을 수행하기 위해, 상이한 조기 경보 조건을 설립하여, 타깃 장소의 안전성을 향상시킨다.
예시적으로, 상기 생성된 제1 조기 경보 프롬프트 정보는 문자, 음성, 비디오 등 포맷의 정보일 수 있고, 예컨대, 생성된 제1 조기 경보 프롬프트 정보는 행인을 프롬프트하기 위한 것일 수 있으며, 예컨대 “주의하십시오, 당신이 현재 위치한 영역에 행인 수가 비교적 많으므로, 안전에 주의하시기 바랍니다”일 수 있다.
본 출원의 실시예에서, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 잠재적인 위험이 존재하는지 여부를 검출할 수 있고, 잠재적인 위험이 존재하는 것으로 결정한 경우, 조기 경보 프롬프트를 생성할 수 있는 방안을 제안함으로써, 타깃 장소 내의 안전성을 효과적으로 향상시킬 수 있다.
하나의 실시형태에서, 도 9에 도시된 바와 같이, 본 출원의 실시예에서 제공한 정보 처리 방법은 아래의 단계 S801 및 단계 S802를 더 포함한다.
단계 S801에 있어서, 인파 혼잡이 발생되지 않은 제3 타깃 물품 진열 영역에 대해, 상기 제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수를 획득한다.
단계 S802에 있어서, 제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수가 제3 기설정된 임계값보다 모두 작은 것으로 결정한 경우, 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성한다.
예시적으로, 제3 기설정된 임계값은 물품 진열 영역에 포함된 행인 수가 비교적 적은 상황을 표시하기 위한 것일 수 있고, 제3 타깃 물품 진열 영역에 인파 혼잡이 발생되지 않은 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역에 오랜 시간 동안 포함된 행인 수가 비교적 적을 경우, 상기 제3 타깃 물품 진열 영역이 타깃 장소에서의 위치가 멀거나, 진열된 물품의 흡인력이 비교적 낮은 것을 설명하므로, 인기 있는 화물을 스토어 프론트 영역에 세팅하여 고객을 가게에 끌어들이는 것과 같은 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것을 고려할 수 있다.
본 출원의 실시예에서, 제3 타깃 물품 진열 영역에 혼잡 이벤트가 존재하지 않는 경우, 상기 제3 타깃 물품 진열 영역의 행인 수가 여전히 적은 것으로 검출된 경우, 상기 제3 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 생성하여, 제3 타깃 물품 진열 영역의 행인 수를 향상시킬 수 있다.
하나의 실시형태에서, 도 10에 도시된 바와 같이, 본 출원의 실시예에서 제공한 정보 처리 방법은 아래의 단계 S803 및 단계 S804를 더 포함한다.
단계 S803에 있어서, 제3 타깃 물품 진열 영역이 적어도 하나의 시간 구간에서 대응되는 행인 수가 제3 기설정된 임계값보다 큰 것으로 결정한 경우, 제3 타깃 물품 진열 영역 중 각 서브 영역에 대응되는 궤적 데이터에 기반하여, 제3 타깃 물품 진열 영역에 상기 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 적어도 하나의 서브 영역이 존재하는지 여부를 결정한다.
단계 S804에 있어서, 적어도 하나의 서브 영역이 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 것으로 결정한 경우, 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성한다.
예시적으로, 제4 기설정된 임계값은 제3 기설정된 임계값보다 작고, 제3 타깃 물품 진열 영역은 복수 개의 서브 영역을 포함할 수 있으며, 상기 제3 타깃 물품 진열 영역에, 포함된 행인 수가 제3 기설정된 임계값보다 큰 상황이 존재하면, 상기 제3 타깃 물품 진열 영역이 고객을 끌어들일 수 있는 것을 설명하지만, 긴 시간 구간 동안 포함한 행인 수가 비교적 적은 적어도 하나의 서브 영역이 존재할 경우, 상기 서브 영역이 제3 타깃 물품 진열 영역에서의 위치가 멀거나, 상기 서브 영역에 진열된 물품의 흡인력이 비교적 낮은 것을 설명하므로, 상기 서브 영역에 진열된 물품에 대한 조정 배치 제안을 생성하는 것을 고려할 수 있다.
본 출원의 실시예에서, 제3 타깃 물품 진열 영역에 행인 수가 비교적 많은 하나의 시간 구간이 존재하지만, 행인 수가 계속 비교적 적은 적어도 하나의 서브 영역이 존재할 경우, 마찬가지로 상기 제3 타깃 물품 진열 영역에 대한 합리적인 배치 제안을 생성하는 방안을 제안하여, 제3 타깃 물품 진열 영역 중 각 서브 영역의 행인 수를 균일하게 할 수 있다.
본 분야의 기술자는 구체적인 실시형태의 상기 방법에서, 각 단계의 작성 순서는 엄격한 실행 순서를 의미하여 실시 과정에 대한 임의의 한정을 구성하는 것이 아니며, 각 단계의 실행 순서는 그 기능 및 가능한 내부 논리에 의해 결정되어야 한다.
동일한 기술적 사상에 기반하여, 본 출원의 실시예는 정보 처리 방법에 대응되는 정보 처리 장치를 더 제공하고, 본 출원의 실시예에서의 장치가 과제를 해결하는 원리가 본 출원의 실시예에 따른 정보 처리 방법과 유사하므로, 장치의 실시는 방법의 실시를 참조할 수 있고, 중복되는 부분은 더이상 반복하여 설명하지 않는다.
도 11에 도시된 바를 참조하면, 도 11은 본 출원의 실시예에 제공한 정보 처리 장치(900)의 예시도이고, 상기 정보 처리 장치는,
타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정하도록 구성된 제1 결정 모듈(901);
비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터 및 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하도록 구성된 제2 결정 모듈(902); 및
행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하도록 구성된 처리 모듈(903)을 포함한다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안을 생성하도록 구성되고;
행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하도록 구성된다.
한 가지 가능한 실시형태에서, 처리 모듈(903)이 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하도록 구성될 경우,
상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터 및 타깃 장소에서의 궤적 데이터에 기반하여, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는지 여부를 결정하는 것; 및
제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하는 것을 포함한다.
한 가지 가능한 실시형태에서, 처리 모듈(903)이 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하도록 구성될 경우,
비디오 스트림으로부터 제1 타깃 물품 진열 영역에 연관된 비디오 프레임을 추출하는 것;
추출된 비디오 프레임에서의 행인이 제1 타깃 물품 진열 영역에서의 포즈 데이터를 결정하는 것; 및
포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하는 것을 포함한다.
한 가지 가능한 실시형태에서, 제1 타깃 물품 진열 영역은 적어도 하나의 물품 진열 진열대를 포함하고, 각 물품 진열 진열대는 복수 개의 층을 포함하며, 처리 모듈(903)이 포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하도록 구성될 경우,
포즈 데이터에 기반하여, 비디오 프레임에 제1 기설정된 포즈에 부합되는 설정 개수를 초과한 행인의 포즈가 존재하는 것으로 결정한 경우, 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 제1 타깃층을 획득하는 것;
제1 타깃층에 기반하여, 제1 타깃층에 진열된 물품을 제1 타깃 물품 진열 진열대의 제2 타깃층으로 조정하여 진열하도록 지시하는 배치 제안을 생성하는 것 및 제1 타깃층에 진열된 물품을 제2 타깃층으로 조정하는 것 중 적어도 하나를 실행하는 것을 포함하고, 지면으로부터 제2 타깃층의 높이는 지면으로부터 제1 타깃층의 높이보다 높다.
한 가지 가능한 실시형태에서, 물품 진열 진열대는 복수 개를 포함하고, 처리 모듈(903)은 또한,
추출된 비디오 프레임에서의 행인이 제1 타깃 물품 진열 영역에서의 궤적 데이터에 기반하여, 지나간 행인 수가 제1 설정 개수보다 작은 제2 타깃 물품 진열 진열대를 결정하고;
제2 타깃 물품 진열 진열대에 기반하여, 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열 진열대로 조정하도록 지시하는 배치 제안을 생성하는 것 및 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열대로 조정하는 것 중 적어도 하나를 실행하도록 구성된다.
한 가지 가능한 실시형태에서, 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 처리 모듈(903)이 포즈 데이터에 기반하여, 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하도록 구성될 경우,
포즈 데이터에 기반하여, 비디오 프레임에 제2 기설정된 포즈에 부합되는 설정 개수를 초과하는 행인의 포즈가 존재하는 것으로 결정한 경우, 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 현재 위치 및 인파 혼잡이 발생한 위치 영역을 획득하는 것; 및
현재 위치 및 인파 혼잡이 발생한 위치 영역에 기반하여, 제1 타깃 물품 진열 진열대가 이동하는 것에 대한 배치 제안을 생성하는 것 및 현재 위치와 인파 혼잡이 발생한 위치 영역에 따라 제1 타깃 물품 진열 진열대를 조정하는 것 중 적어도 하나를 실행하는 것을 포함한다.
한 가지 가능한 실시형태에서, 처리 모듈(903)이 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하도록 구성될 경우,
상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 행인 수가 제2 설정 개수보다 작은 제2 타깃 물품 진열 영역을 결정하는 것; 및
제2 타깃 물품 진열 영역에 기반하여, 제1 타깃 물품 진열 영역에 진열된 일부 물품을 제2 타깃 물품 진열 영역으로 조정하도록 지시하는 배치 제안을 생성하는 것 및 제1 타깃 물품 진열 영역의 일부 물품을 제2 타깃 물품 진열 영역으로 조정하는 것 중 적어도 하나를 실행하는 것을 포함한다.
한 가지 가능한 실시형태에서, 제1 결정 모듈(901)이 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정하도록 구성될 경우,
비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행하여, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 획득하는 것; 및
동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정하는 것을 포함한다.
한 가지 가능한 실시형태에서, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보는 동일한 행인이 연관된 비디오 프레임 중 기설정된 특징 포인트와의 상대적인 위치 정보를 포함하고; 제1 결정 모듈(901)이 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정하도록 구성될 경우,
동일한 행인에 연관된 비디오 프레임에서의 기설정된 특징 포인트를 추출하는 것; 및
기설정된 특징 포인트가 타깃 장소에서의 기설정된 위치 정보 및 동일한 행인이 기설정된 특징 포인트와의 상대적인 위치 정보에 기반하여, 동일한 행인이 타깃 장소에서의 궤적 데이터를 결정하는 것을 포함한다.
한 가지 가능한 실시형태에서, 제1 결정 모듈(901)은,
비디오 스트림에서의 비디오 프레임에 대해 머리 및 어깨 검출을 수행하여, 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득하는 것;
상이한 비디오 프레임에 각각 포함된 행인의 머리 및 어깨 특징 정보에 기반하여, 상이한 비디오 프레임에 포함된 행인 사이의 특징 유사도를 결정하는 것; 및
특징 유사도가 기설정된 유사도 임계값보다 높은 비디오 프레임을, 동일한 행인에 연관된 비디오 프레임으로 사용하는 것에 따라 동일한 행인에 연관된 비디오 프레임을 결정하도록 구성된다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한,
상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터 및 기설정된 상이한 행인 통계 데이터에 대응되는 랜더링 방식에 기반하여, 타깃 장소가 기설정된 시간 내에서의 행인 히트맵을 생성하고 출력하도록 구성된다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한,
상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는지 여부를 결정하고;
조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는 것으로 결정한 경우, 제1 조기 경보 프롬프트 정보를 생성하도록 구성된다.
한 가지 가능한 실시형태에서, 조기 경보 조건은 물품 진열 영역의 행인 수가 제1 기설정된 임계값보다 크거나 같은 것을 포함한다.
한 가지 가능한 실시형태에서, 조기 경보 조건은,
물품 진열 영역의 행인 수와 다른 어느 하나의 물품 진열 영역의 행인 수 사이의 차이가 제2 기설정된 임계값보다 큰 것;
물품 진열 영역과 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작은 것; 및
물품 진열 영역이 타깃 장소에서의 기설정된 교통 허브 영역에 위치한 것 중 적어도 하나를 더 포함한다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한,
제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 제1 타깃 물품 진열 영역에 인파 혼잡이 발생한 지속 시간을 획득하고;
지속 시간이 기설정된 시간 임계값에 도달한 경우, 제2 조기 경보 프롬프트 정보를 생성하도록 구성된다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한,
인파 혼잡이 발생되지 않은 제3 타깃 물품 진열 영역에 대해, 제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수를 획득하고;
제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수가 제3 기설정된 임계값보다 모두 작은 것으로 결정한 경우, 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하도록 구성된다.
한 가지 가능한 실시형태에서, 처리 모듈(903)은 또한,
제3 타깃 물품 진열 영역이 적어도 하나의 시간 구간에서 대응되는 행인 수가 제3 기설정된 임계값보다 큰 것으로 결정한 경우, 제3 타깃 물품 진열 영역 중 각 서브 영역에 대응되는 궤적 데이터에 기반하여, 제3 타깃 물품 진열 영역에 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 적어도 하나의 서브 영역이 존재하는지 여부를 결정하고;
적어도 하나의 서브 영역이 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 것으로 결정한 경우, 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하도록 구성된다.
장치에서의 각 모듈의 처리 플로우 및 각 모듈 사이의 인터랙션 플로우의 설명은 상기 방법 실시예에서의 관련 설명을 참조할 수 있고, 여기서 더이상 상세하게 설명하지 않는다.
도 1에서의 정보 처리 방법에 대응되게, 본 출원의 실시예는 전자 기기(1000)를 더 제공하고, 도 12에 도시된 바와 같이, 도 12는 본 출원의 실시예에서 제공한 전자 기기(1000) 구조 예시도이고, 상기 전자 기기(1000)는,
프로세서(101), 메모리(102) 및 버스(103)를 포함하고; 메모리(102)는 실행 명령어를 저장하도록 구성되고, 내부 저장소(1021) 및 외부 메모리(1022)를 포함하며; 여기서 내부 저장소(1021)는 내부 메모리로도 지칭되고, 프로세서(101)에서의 연산 데이터 및 하드웨어 외부 메모리(1022)와 교환되는 데이터를 잠시 저장하도록 구성되며, 프로세서(101)는 내부 저장소(1021)를 통해 외부 메모리(1022)와 데이터를 교환하며, 전자 기기(1000)가 작동되는 경우, 프로세서(101)와 메모리(102) 사이는 버스(103)를 통해 통신하여, 프로세서(101)로 하여금, 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터를 결정하고; 비디오 스트림에서의 행인이 타깃 장소에서의 궤적 데이터 및 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하며; 행인 통계 데이터에 기반하여, 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안을 생성하는 것 및 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하는 것 중 적어도 하나를 실행하는 명령어를 실행하도록 한다.
본 출원의 실시예는 컴퓨터 판독 가능한 저장 매체를 더 제공하고, 상기 컴퓨터 판독 가능한 저장 매체에는 컴퓨터 프로그램이 저장되어 있으며, 상기 컴퓨터 프로그램이 프로세서에 의해 작동될 경우 상기 방법 실시에서의 정보 처리 방법의 단계를 실행한다. 여기서, 상기 저장 매체는 휘발성 컴퓨터 판독 가능한 저장 매체 또는 비휘발성 컴퓨터 판독 가능한 저장 매체일 수 있다.
본 출원의 실시예는 컴퓨터 프로그램 제품 제품을 더 제공하고, 상기 컴퓨터 프로그램 제품은 프로그램 코드를 캐리하고 있으며, 상기 프로그램 코드에 포함된 명령어는 상기 방법 실시예에 따른 정보 처리 방법의 단계를 실행하도록 구성될 수 있으며, 상기 방법 실시예를 참조할 수 있다.
여기서, 상기 컴퓨터 프로그램 제품은 예컨대 하드웨어, 소프트웨어 또는 이들의 조합을 통해 구현될 수 있다. 하나의 선택적인 실시예에서, 상기 컴퓨터 프로그램 제품은 예컨대 컴퓨터 저장 매체로 반영되며, 다른 하나의 선택적인 실시예에서, 컴퓨터 프로그램 제품은 소프트웨어 개발 키트(Software Development Kit, SDK) 등과 같은 소프트웨어 제품으로 반영된다.
본 기술분야의 통상의 기술자는 설명의 편의 및 간결함을 위해, 상기 설명된 시스템 및 장치의 동작 과정이, 전술된 방법 실시예에서의 대응되는 과정을 참조할 수 있음을 명확하게 이해할 수 있으며, 여기서 더이상 반복하여 설명하지 않는다. 본 출원에서 제공된 몇 개의 실시예에서, 개시된 시스템, 장치 및 방법은 다른 방식을 통해 구현될 수 있음을 이해해야 한다. 위에서 설명된 장치 실시예는 다만 예시적이며, 예컨대, 상기 유닛의 분할은 다만 논리적 기능 분할이고, 실제로 구현될 경우 다른 분할 방식이 존재할 수 있으며, 또 예컨대, 복수 개의 유닛 또는 컴포넌트는 다른 하나의 시스템에 결합되거나 집적될 수 있거나, 일부 특징을 무시하거나 실행하지 않을 수 있다. 또한, 나타내거나 논의된 상호 간의 결합 또는 직접 결합 또는 통신 연결은, 일부 통신 인터페이스를 통해 구현되며, 장치 또는 유닛의 간접 결합 또는 통신 연결은, 전기, 기계 또는 다른 형태일 수 있다.
상기 분리 부재로서 설명된 유닛은, 물리적으로 분리된 것이거나 아닐 수 있고, 유닛으로서 나타낸 부재는 물리적 유닛이거나 아닐 수 있으며, 즉 한 곳에 위치할 수 있거나, 복수 개의 네트워크 유닛에 분포될 수도 있다. 실제 수요에 따라 그 일부 또는 전부 유닛을 선택하여 본 실시예 방안의 목적을 구현할 수 있다.
또한, 본 출원의 각 실시예에서의 각 기능 유닛은 하나의 처리 유닛에 집적될 수 있고, 각 유닛이 독립적인 물리적 존재일 수도 있고, 두 개 또는 두 개 이상의 유닛이 한 유닛에 집적될 수도 있다.
상기 기능이 소프트웨어 기능 유닛의 형태로 구현되고 독립적인 제품으로 판매되거나 사용될 경우, 하나의 프로세서가 실행 가능한 비휘발성 컴퓨터 판독 가능한 저장 매체에 저장될 수 있다. 이러한 이해에 기반하여, 본 출원의 실시예의 기술방안은 실질적으로 또는 종래 기술에 기여하는 부분 또는 상기 기술방안의 일부는 소프트웨어 제품의 형태로 구현될 수 있고, 상기 컴퓨터 소프트웨어 제품은 하나의 저장 매체에 저장되며, 하나의 컴퓨터 기기(개인용 컴퓨터, 서버 또는 네트워크 기기 등일 수 있음)로 하여금 본 출원의 각 실시예의 상기 방법의 전부 또는 일부 단계를 실행하는데 사용되는 복수 개의 명령어를 포함한다. 전술한 저장 매체는 U 디스크, 모바일 디스크, 판독 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크 또는 광 디스크 등 프로그램 코드를 저장할 수 있는 여러 가지 매체를 포함한다.
마지막으로 설명해야 할 것은, 위에서의 상기 실시예는, 본 출원의 실시예를 한정하려는 것이 아니라, 다만 본 출원의 실시예의 기술방안을 설명하기 위한 본 출원의 실시예의 실시형태일 뿐이며, 본 출원의 실시예의 보호 범위는 이에 한정되지 않으며, 비록 전술한 실시예를 참조하여 본 출원의 실시예에 대해 상세하게 설명하였지만, 본 분야의 통상의 기술자라면, 임의의 본 기술분야의 통상의 기술자가 본 출원의 실시예에서 개시된 기술 범위 내에서, 여전히 전술한 실시예에서 기재된 기술방안을 수정하거나 용이하게 변화를 생각해낼 수 있으며, 또는 그의 일부 기술 특징을 동등하게 대체할 수 있고; 이러한 수정, 변화 또는 교체는 상응한 기술방안의 본질이 본 출원의 실시예의 기술방안의 사상 및 범위를 벗어나지 않도록 하며, 모두 본 출원의 실시예의 보호 범위 내에 속해야 함을 이해해야 한다. 따라서 본 발출의 실시예의 보호범위는 청구범위의 보호범위를 기준으로 해야 한다.
본 출원의 실시예는 정보 처리 방법, 장치, 전자 기기 및 저장 매체를 제공하고, 여기서, 정보 처리 방법은 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계; 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하는 단계; 및 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계를 포함한다.

Claims (22)

  1. 정보 처리 방법으로서,
    상기 방법은 전자 기기에 의해 실행되고, 상기 정보 처리 방법은,
    타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계;
    상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 상기 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하는 단계; 및
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  2. 제1항에 있어서,
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치 제안을 생성하는 단계; 및
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 포함하는 것을 특징으로 하는 정보 처리 방법.
  3. 제2항에 있어서,
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
    상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터 및 상기 타깃 장소에서의 궤적 데이터에 기반하여, 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는지 여부를 결정하는 단계; 및
    제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  4. 제3항에 있어서,
    상기 제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
    상기 비디오 스트림으로부터 상기 제1 타깃 물품 진열 영역에 연관된 비디오 프레임을 추출하는 단계;
    추출된 상기 비디오 프레임에서의 행인이 상기 제1 타깃 물품 진열 영역에서의 포즈 데이터를 결정하는 단계; 및
    상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  5. 제4항에 있어서,
    상기 제1 타깃 물품 진열 영역은 적어도 하나의 물품 진열 진열대를 포함하고, 각 물품 진열 진열대는 복수 개의 층을 포함하며, 상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
    상기 포즈 데이터에 기반하여, 상기 비디오 프레임에 제1 기설정된 포즈에 부합되는 설정 개수를 초과한 행인의 포즈가 존재하는 것으로 결정한 경우, 상기 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 제1 타깃층을 획득하는 단계; 및
    상기 제1 타깃층에 기반하여, 상기 제1 타깃층에 진열된 물품을 상기 제1 타깃 물품 진열 진열대의 제2 타깃층으로 조정하여 진열하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃층에 진열된 물품을 상기 제2 타깃층으로 조정하는 단계 - 지면으로부터 상기 제2 타깃층의 높이는 지면으로부터 상기 제1 타깃층의 높이보다 높음 - 중 적어도 하나를 실행하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  6. 제5항에 있어서,
    상기 물품 진열 진열대는 복수 개를 포함하고, 상기 정보 처리 방법은,
    추출된 상기 비디오 프레임에서의 행인이 상기 제1 타깃 물품 진열 영역에서의 궤적 데이터에 기반하여, 지나간 행인 수가 제1 설정 개수보다 작은 제2 타깃 물품 진열 진열대를 결정하는 단계; 및
    상기 제2 타깃 물품 진열 진열대에 기반하여, 상기 제1 타깃층에 진열된 일부 물품을 상기 제2 타깃 물품 진열 진열대로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃층에 진열된 일부 물품을 제2 타깃 물품 진열대로 조정하는 단계 중 적어도 하나를 실행하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  7. 제5항 또는 제6항에 있어서,
    상기 제1 타깃 물품 진열 진열대는 이동 가능한 진열대이고, 상기 포즈 데이터에 기반하여, 상기 제1 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 배치를 조정하는 단계 중 적어도 하나를 실행하는 단계는,
    상기 포즈 데이터에 기반하여, 상기 비디오 프레임에 제2 기설정된 포즈에 부합되는 설정 개수를 초과하는 행인의 포즈가 존재하는 것으로 결정한 경우, 상기 설정 개수를 초과한 행인의 주시 방향에 매칭되는 제1 타깃 물품 진열 진열대의 현재 위치 및 상기 인파 혼잡이 발생한 위치 영역을 획득하는 단계; 및
    상기 현재 위치 및 상기 인파 혼잡이 발생한 위치 영역에 기반하여, 상기 제1 타깃 물품 진열 진열대가 이동하는 것에 대한 배치 제안을 생성하는 단계 및 상기 현재 위치와 상기 인파 혼잡이 발생한 위치 영역에 따라 상기 제1 타깃 물품 진열 진열대를 조정하는 단계 중 적어도 하나를 실행하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  8. 제3항에 있어서,
    상기 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하는 단계는,
    상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 행인 수가 제2 설정 개수보다 작은 제2 타깃 물품 진열 영역을 결정하는 단계; 및
    상기 제2 타깃 물품 진열 영역에 기반하여, 상기 제1 타깃 물품 진열 영역에 진열된 일부 물품을 제2 타깃 물품 진열 영역으로 조정하도록 지시하는 배치 제안을 생성하는 단계 및 상기 제1 타깃 물품 진열 영역의 일부 물품을 상기 제2 타깃 물품 진열 영역으로 조정하는 단계 중 적어도 하나를 실행하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  9. 제1항 내지 제8항 중 어느 한 항에 있어서,
    상기 타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계는,
    상기 비디오 스트림에서의 비디오 프레임에 대해 행인 검출을 수행하여, 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보를 획득하는 단계; 및
    상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  10. 제9항에 있어서,
    상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보는 상기 동일한 행인이 연관된 비디오 프레임 중 기설정된 특징 포인트와의 상대적인 위치 정보를 포함하고; 상기 동일한 행인이 연관된 비디오 프레임에서의 위치 지시 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계는,
    상기 동일한 행인에 연관된 비디오 프레임에서의 기설정된 특징 포인트를 추출하는 단계; 및
    상기 기설정된 특징 포인트가 상기 타깃 장소에서의 기설정된 위치 정보 및 상기 동일한 행인이 상기 기설정된 특징 포인트와의 상대적인 위치 정보에 기반하여, 상기 동일한 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하는 단계를 포함하는 것을 특징으로 하는 정보 처리 방법.
  11. 제9항 또는 제10항에 있어서,
    상기 비디오 스트림에서의 비디오 프레임에 대해 머리 및 어깨 검출을 수행하여, 상기 비디오 프레임에 포함된 행인의 머리 및 어깨 특징 정보를 획득하는 것;
    상이한 비디오 프레임에 각각 포함된 행인의 머리 및 어깨 특징 정보에 기반하여, 상기 상이한 비디오 프레임에 포함된 행인 사이의 특징 유사도를 결정하는 것; 및
    상기 특징 유사도가 기설정된 유사도 임계값보다 높은 비디오 프레임을, 상기 동일한 행인에 연관된 비디오 프레임으로 사용하는 것에 따라 상기 동일한 행인에 연관된 비디오 프레임을 결정하는 것을 특징으로 하는 정보 처리 방법.
  12. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 정보 처리 방법은,
    상기 상이한 물품 진열 영역이 적어도 하나의 시간 구간에서 각각 대응되는 행인 통계 데이터 및 기설정된 상이한 행인 통계 데이터에 대응되는 랜더링 방식에 기반하여, 상기 타깃 장소가 기설정된 시간 내에서의 행인 히트맵을 생성하고 출력하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  13. 제1항 내지 제12항 중 어느 한 항에 있어서,
    상기 정보 처리 방법은,
    상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터에 기반하여, 조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는지 여부를 결정하는 단계; 및
    조기 경보 조건에 도달한 적어도 하나의 물품 진열 영역이 존재하는 것으로 결정한 경우, 제1 조기 경보 프롬프트 정보를 생성하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  14. 제13항에 있어서,
    상기 조기 경보 조건은 물품 진열 영역의 행인 수가 제1 기설정된 임계값보다 크거나 같은 것을 포함하는 것을 특징으로 하는 정보 처리 방법.
  15. 제14항에 있어서,
    상기 조기 경보 조건은,
    물품 진열 영역의 행인 수와 다른 어느 하나의 물품 진열 영역의 행인 수 사이의 차이가 제2 기설정된 임계값보다 큰 것;
    물품 진열 영역과 인접한 물품 진열 영역 사이의 거리가 기설정된 거리 임계값보다 작은 것; 및
    물품 진열 영역이 상기 타깃 장소에서의 기설정된 교통 허브 영역에 위치한 것 중 적어도 하나를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  16. 제2항 내지 제15항 중 어느 한 항에 있어서,
    상기 정보 처리 방법은,
    제1 타깃 물품 진열 영역에 인파 혼잡 발생이 존재하는 것으로 결정한 경우, 상기 제1 타깃 물품 진열 영역에 인파 혼잡이 발생한 지속 시간을 획득하는 단계; 및
    상기 지속 시간이 기설정된 시간 임계값에 도달한 경우, 제2 조기 경보 프롬프트 정보를 생성하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  17. 제2항 내지 제16항 중 어느 한 항에 있어서,
    상기 정보 처리 방법은,
    인파 혼잡이 발생되지 않은 제3 타깃 물품 진열 영역에 대해, 상기 제3 타깃 물품 진열 영역이 복수 개의 시간 구간에서 각각 대응되는 행인 수를 획득하는 단계; 및
    상기 제3 타깃 물품 진열 영역이 상기 복수 개의 시간 구간에서 각각 대응되는 행인 수가 제3 기설정된 임계값보다 모두 작은 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  18. 제17항에 있어서,
    상기 정보 처리 방법은,
    상기 제3 타깃 물품 진열 영역이 적어도 하나의 시간 구간에서 대응되는 행인 수가 상기 제3 기설정된 임계값보다 큰 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역 중 각 서브 영역에 대응되는 궤적 데이터에 기반하여, 상기 제3 타깃 물품 진열 영역에 상기 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 적어도 하나의 서브 영역이 존재하는지 여부를 결정하는 단계; 및
    적어도 하나의 서브 영역이 상기 복수 개의 시간 구간에서 대응되는 행인 수가 모두 제4 기설정된 임계값보다 작은 것으로 결정한 경우, 상기 제3 타깃 물품 진열 영역에 대한 배치 제안을 생성하는 단계를 더 포함하는 것을 특징으로 하는 정보 처리 방법.
  19. 정보 처리 장치로서,
    타깃 장소에 대해 수집한 비디오 스트림에 기반하여, 상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터를 결정하도록 구성된 제1 결정 모듈;
    상기 비디오 스트림에서의 행인이 상기 타깃 장소에서의 궤적 데이터 및 상기 타깃 장소 내의 상이한 물품 진열 영역의 위치 범위에 기반하여, 상기 상이한 물품 진열 영역에 각각 대응되는 행인 통계 데이터를 결정하도록 구성된 제2 결정 모듈; 및
    상기 행인 통계 데이터에 기반하여, 상기 타깃 장소 내의 적어도 일부 물품 진열 영역에 대한 배치를 결정하도록 구성된 처리 모듈을 포함하는 것을 특징으로 하는 정보 처리 장치.
  20. 전자 기기로서,
    프로세서, 메모리 및 버스를 포함하고, 상기 메모리에는 상기 프로세서가 실행 가능한 기계 판독 가능한 명령어가 저장되고, 전자 기기가 작동될 경우, 상기 프로세서와 상기 메모리 사이는 버스를 통해 통신하고, 상기 기계 판독 가능한 명령어가 상기 프로세서에 의해 실행될 경우 제1항 내지 제18항 중 어느 한 항에 따른 정보 처리 방법의 단계를 실행하는 것을 특징으로 하는 전자 기기.
  21. 컴퓨터 판독 가능한 저장 매체로서,
    상기 컴퓨터 판독 가능한 저장 매체에는 컴퓨터 프로그램이 저장되고, 상기 컴퓨터 프로그램이 프로세서에 의해 작동될 경우 제1항 내지 제18항 중 어느 한 항에 따른 정보 처리 방법의 단계를 실행하는 것을 특징으로 하는 컴퓨터 판독 가능한 저장 매체.
  22. 컴퓨터 프로그램으로서,
    컴퓨터 판독 가능한 코드를 포함하고, 상기 컴퓨터 판독 가능한 코드가 전자 기기에서 작동되어, 상기 전자 기기에서의 프로세서에 의해 실행될 경우, 제1항 내지 제18항 중 어느 한 항에 따른 정보 처리 방법의 단계를 구현하는 것을 특징으로 하는 컴퓨터 프로그램.
KR1020227026607A 2021-01-27 2021-06-30 정보 처리 방법, 장치, 전자 기기 및 저장 매체 KR20220123100A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202110110576.3 2021-01-27
CN202110110576.3A CN112950254B (zh) 2021-01-27 2021-01-27 一种信息处理方法、装置、电子设备及存储介质
PCT/CN2021/103592 WO2022160592A1 (zh) 2021-01-27 2021-06-30 一种信息处理方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
KR20220123100A true KR20220123100A (ko) 2022-09-05

Family

ID=76237741

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020227026607A KR20220123100A (ko) 2021-01-27 2021-06-30 정보 처리 방법, 장치, 전자 기기 및 저장 매체

Country Status (5)

Country Link
JP (1) JP2023514764A (ko)
KR (1) KR20220123100A (ko)
CN (1) CN112950254B (ko)
TW (1) TW202230343A (ko)
WO (1) WO2022160592A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108665305B (zh) * 2018-05-04 2022-07-05 水贝文化传媒（深圳）股份有限公司 用于门店信息智能分析的方法及系统
CN112950254B (zh) * 2021-01-27 2023-04-25 北京市商汤科技开发有限公司 一种信息处理方法、装置、电子设备及存储介质
WO2024105984A1 (ja) * 2022-11-15 2024-05-23 パナソニックＩｐマネジメント株式会社 情報処理装置、情報処理システム及び情報処理方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9977970B2 (en) * 2016-06-29 2018-05-22 Conduent Business Services, Llc Method and system for detecting the occurrence of an interaction event via trajectory-based analysis
CN109754106A (zh) * 2017-11-07 2019-05-14 营利度富信息系统（上海）有限公司 一种购物中心店铺分布规划的预测方法
CN108022540A (zh) * 2017-12-14 2018-05-11 成都信息工程大学 一种智慧景区网格化信息管理系统
JP7062985B2 (ja) * 2018-02-06 2022-05-09 コニカミノルタ株式会社 顧客行動分析システムおよび顧客行動分析方法
CN108537189B (zh) * 2018-04-16 2020-11-17 上海小蚁科技有限公司 生成顾客轨迹图的方法及装置、存储介质、终端
CN108985218A (zh) * 2018-07-10 2018-12-11 上海小蚁科技有限公司 人流量统计方法及装置、存储介质、计算设备
CN111782881B (zh) * 2020-06-30 2023-06-16 北京市商汤科技开发有限公司 数据处理方法、装置、设备以及存储介质
CN112132119B (zh) * 2020-11-24 2021-05-28 科大讯飞(苏州)科技有限公司 客流统计方法、装置、电子设备和存储介质
CN112950254B (zh) * 2021-01-27 2023-04-25 北京市商汤科技开发有限公司 一种信息处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN112950254A (zh) 2021-06-11
WO2022160592A1 (zh) 2022-08-04
TW202230343A (zh) 2022-08-01
JP2023514764A (ja) 2023-04-10
CN112950254B (zh) 2023-04-25

Similar Documents

Publication Publication Date Title
KR20220123100A (ko) 정보 처리 방법, 장치, 전자 기기 및 저장 매체
JP6562077B2 (ja) 展示装置、表示制御装置および展示システム
US9805266B2 (en) System and method for video content analysis using depth sensing
JP4876687B2 (ja) 注目度計測装置及び注目度計測システム
US8712099B2 (en) Image surveillance system and method of detecting whether object is left behind or taken away
US9852345B2 (en) Activity map creating device, activity map creating system, and activity map creating method
CN109906166A (zh) 直观被遮挡对象指示器
US7590261B1 (en) Method and system for event detection by analysis of linear feature occlusion
JP6549400B2 (ja) 車両の列ならびに歩行者の列におけるドライブでの立ち去りおよび歩行での立ち去りについてビデオベースで検出するためのシステムおよび方法
JP5574685B2 (ja) エリア情報制御装置
US20230412775A1 (en) Video monitoring apparatus, control method thereof, and computer readable medium
US9898749B2 (en) Method and system for determining consumer positions in retailers using location markers
JP6615800B2 (ja) 情報処理装置、情報処理方法およびプログラム
US11448508B2 (en) Systems and methods for autonomous generation of maps
EP3537311A1 (en) On-demand visual analysis focalized on salient events
Liu et al. What are customers looking at?
US9019373B2 (en) Monitoring device, method thereof
US20240193748A1 (en) Evaluation apparatus, evaluation method, and non-transitory storage medium
JP5720843B1 (ja) 位置変換プログラム及び情報処理装置
JP2006085366A (ja) 速度分布分析装置
JP5769860B1 (ja) 人流分析システム、人流分析方法、プログラム及びコンピュータ記憶媒体
KR101801062B1 (ko) 보행자 상호작용 기반의 화면 투사 시스템 및 이의 제어 방법
US20230401725A1 (en) System and method of processing images associated with objects in a camera view
Djeraba et al. Flow Estimation
KR20160094083A (ko) 색상분석을 이용한 능동적인 쇼윈도 디스플레이 장치, 이의 실행 방법 및 시스템

Legal Events

Date Code Title Description
A201 Request for examination