KR20190086781A - 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들 - Google Patents

비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들 Download PDF

Info

Publication number
KR20190086781A
KR20190086781A KR1020197020201A KR20197020201A KR20190086781A KR 20190086781 A KR20190086781 A KR 20190086781A KR 1020197020201 A KR1020197020201 A KR 1020197020201A KR 20197020201 A KR20197020201 A KR 20197020201A KR 20190086781 A KR20190086781 A KR 20190086781A
Authority
KR
South Korea
Prior art keywords
fingerprint
video content
selected frame
content item
encoded portion
Prior art date
Application number
KR1020197020201A
Other languages
English (en)
Other versions
KR102030322B1 (ko
Inventor
발레리 자마라이에브
필립 파베틱
Original Assignee
구글 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구글 엘엘씨 filed Critical 구글 엘엘씨
Publication of KR20190086781A publication Critical patent/KR20190086781A/ko
Application granted granted Critical
Publication of KR102030322B1 publication Critical patent/KR102030322B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2541—Rights Management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10—Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
    • G06K9/00744—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2223—Secondary servers, e.g. proxy server, cable television Head-end being a public access point, e.g. for downloading to or uploading from clients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23109—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion by placing content in organized collections, e.g. EPG data repository
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4627—Rights management associated to the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Technology Law (AREA)
  • Computer Hardware Design (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들이 제공된다. 방법은: 사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 단계; 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 단계; 선택된 프레임에 대응하는 제1 지문, 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 단계; 제1 지문, 제2 지문, 및 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 단계; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 단계; 및 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여, 매치의 표시가 사용자 디바이스 상에 제시되게 하는 단계를 포함한다.

Description

비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들
개시된 요지는, 입체 비디오들에서의 콘텐츠를 식별하기 위한, 예를 들어, 콘텐츠가 비인가된 배포 또는 손상된 디지털 권리 관리의 대상이었을 수도 있는 곳을 검출하기 위한 방법들, 시스템들, 및 매체들에 관한 것이다.
비디오 콘텐츠 제공자들은 업로드된 비디오 콘텐츠를 수신하고, 업로드된 비디오 콘텐츠를 저장한 후에, 예를 들어, 비디오 콘텐츠를 다수의 사용자 디바이스들에게 스트리밍함으로써, 업로드된 비디오 콘텐츠를 많은 사용자들에게 제공할 수 있다. 이들 비디오 콘텐츠 제공자들은 업로드된 비디오 콘텐츠가, 예를 들어, 저작권을 가진 콘텐츠(copyrighted content)의 기준 데이터베이스에서의 비디오 콘텐츠와 매치되는지 여부를 결정할 수도 있다. 실감형(immersive) 또는 360도 구형(360-degree spherical) 비디오 콘텐츠의 출현으로, 이들 비디오 콘텐츠 제공자들은 3차원 비디오 콘텐츠를 포함하는 업로드된 비디오 콘텐츠를 수신하기 시작하였다. 그러나, 그러한 3차원 비디오 콘텐츠가 기준 데이터베이스에서의 비디오 콘텐츠와 매치되는지 여부를 결정하는 것은 어려울 수 있다.
이에 따라, 입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 "악의적인(abusive)" 입체 비디오들(예를 들어, 콘텐츠가 비인가된 배포 또는 손상된 디지털 권리 관리의 대상이었을 수도 있는 곳)을 검출하기 위한 방법들, 시스템들, 및 매체들을 제공하는 것이 바람직하다.
입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들이 제공된다.
개시된 요지의 일부 실시예들에 따르면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 컴퓨터에 의해 구현된 방법이 제공되고, 이 방법은: 사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 단계; 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 단계; 선택된 프레임에 대응하는 제1 지문, 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 단계; 제1 지문, 제2 지문, 및 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 단계; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 단계; 및 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여, 매치의 표시가 사용자 디바이스 상에 제시되게 하는 단계를 포함한다.
일부 실시예들에서, 이 방법은, 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여 비디오 콘텐츠 아이템의 저장이 차단되게 하는 단계를 더 포함한다.
일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분 및 선택된 프레임의 제2 인코딩된 부분은, 비디오 콘텐츠 아이템이 입체적으로 제시될 때 뷰어의 좌측 눈에 제시될 제1 이미지 및 뷰어의 우측 눈에 제시될 제2 이미지에 대응한다.
일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분은 선택된 프레임의 좌측 절반이고, 선택된 프레임의 제2 인코딩된 부분은 선택된 프레임의 우측 절반이다.
일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분은 선택된 프레임의 상부 절반이고, 선택된 프레임의 제2 인코딩된 부분은 선택된 프레임의 하부 절반이다.
일부 실시예들에서, 이 방법은, 사용자 디바이스로부터, 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 단계를 더 포함하고, 여기서 제1 지문 및 제2 지문은 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 것에 응답하여 생성된다.
개시된 요지의 일부 실시예들에 따르면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 시스템이 제공되고, 이 시스템은 하드웨어 프로세서를 포함하고, 하드웨어 프로세서는: 사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하고; 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하고; 선택된 프레임에 대응하는 제1 지문, 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하고; 제1 지문, 제2 지문, 및 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하고; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하고; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여, 매치의 표시가 사용자 디바이스 상에 제시되게 하도록 구성된다.
개시된 요지의 일부 실시예들에 따르면, 컴퓨터 실행가능 명령어들을 포함하는 비일시적 컴퓨터 판독가능 매체가 제공되고, 컴퓨터 실행가능 명령어들은 프로세서에 의해 실행될 때, 프로세서로 하여금, 입체 비디오들에서의 콘텐츠를 식별하기 위한 방법을 수행하게 하고, 이 방법은: 사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 단계; 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 단계; 선택된 프레임에 대응하는 제1 지문, 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 단계; 제1 지문, 제2 지문, 및 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 단계; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 단계; 및 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여, 매치의 표시가 사용자 디바이스 상에 제시되게 하는 단계를 포함한다.
개시된 요지의 일부 실시예들에 따르면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 시스템이 제공되고, 이 시스템은: 사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 수단; 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 수단; 선택된 프레임에 대응하는 제1 지문, 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 수단; 제1 지문, 제2 지문, 및 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 수단; 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 수단; 및 제1 지문, 제2 지문, 및 제3 지문 중 적어도 하나가 기준 지문과 매치된다는 결정에 응답하여, 매치의 표시가 사용자 디바이스 상에 제시되게 하는 수단을 포함한다.
개시된 요지의 다양한 목적들, 피처들, 및 이점들은, 동일한 참조 번호들이 동일한 요소들을 식별하는 다음의 도면들과 관련하여 고려될 때 개시된 요지의 다음의 상세한 설명을 참조하여 더 충분히 이해될 수 있다.
도 1은 개시된 요지의 일부 실시예들에 따른, 콘텐츠 생성자로부터 비디오 콘텐츠 업로드를 수신하기 위한 사용자 인터페이스의 예시적인 예를 도시한다.
도 2a 및 도 2b는 개시된 요지의 일부 실시예들에 따른, 비디오 콘텐츠 아이템의 전체 프레임 및 프레임의 2개의 인코딩된 부분들과 연관된 지문들을 생성하기 위한 개략도들의 예시적인 예들을 도시한다.
도 3은 개시된 요지의 일부 실시예들에 따른, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 본 명세서에서 설명되는 메커니즘들의 구현에 적합한 예시적인 시스템의 개략도를 도시한다.
도 4는 개시된 요지의 일부 실시예들에 따른, 도 3의 서버 및/또는 사용자 디바이스에서 사용될 수 있는 하드웨어의 상세한 예를 도시한다.
도 5는 개시된 요지의 일부 실시예들에 따른, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 프로세스의 예시적인 예를 도시한다.
다양한 실시예들에 따르면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 메커니즘들(방법들, 시스템들, 및 매체들을 포함할 수 있음)이 제공된다.
일부 실시예들에서, 본 명세서에서 설명되는 메커니즘들은 업로드된 비디오 콘텐츠 아이템에서 특정 타입들의 비디오 콘텐츠를 검출하는 데 사용될 수 있다. 예를 들어, 일부 실시예들에서, 메커니즘들은 잠재적으로 저작권을 가진 비디오 콘텐츠 또는 잠재적으로 저작권을 가진 오디오 콘텐츠를 업로드된 비디오 콘텐츠 아이템 내에서 검출하는 데 사용될 수 있다. 예를 들어, 콘텐츠 아이템의 일부분을 기준 콘텐츠 아이템들의 데이터베이스에서의 기준 콘텐츠 아이템과 매치시킴으로써, 저작권을 가진 콘텐츠를 식별하기 위해 다양한 지문인식 기법들이 사용되었다는 것에 주목해야 한다. 그러나, 이들 지문인식 기법들은 업로드된 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠일 때 저작권을 가진 비디오 콘텐츠를 식별하는 것이 때때로 불가능하다. 예를 들어, 업로드된 비디오 콘텐츠 아이템이 (예를 들어, 프레임의 좌측 및 우측 절반으로서 인코딩되거나, 그리고/또는 임의의 다른 적합한 방식으로 인코딩되는 사용자의 좌측 및 우측 눈으로 전달될 비디오 콘텐츠를 갖는) 입체 비디오 콘텐츠로서 인코딩되는 3차원 콘텐츠를 포함하는 경우들에서, 지문인식 기법들은 기준 데이터베이스에서의 비디오 콘텐츠와의 매치를 검출하는 것이 불가능할 수도 있다. 특히, 지문인식 기법들이 (예를 들어, 비디오 콘텐츠 아이템을 업로드하는 사용자가 업로드된 콘텐츠가 입체 비디오 콘텐츠를 포함함을 표시하지 않는 것에 기초하여, 그리고/또는 임의의 다른 적합한 정보에 기초하여) 업로드된 비디오 콘텐츠 아이템이 입체 비디오 콘텐츠를 포함한다는 것을 인식하지 못하는 경우들에서, 지문인식 기법들은 비디오 콘텐츠 아이템의 전체 프레임을 지문인식할 수도 있고, 그에 따라 기준 비디오 콘텐츠 아이템들과의 매치를 검출하지 못할 수도 있다. 반대로, 업로드된 비디오 콘텐츠 아이템이 2차원 비디오 콘텐츠를 포함하지만 (예를 들어, 비디오 콘텐츠 아이템을 업로드하는 사용자에 의해, 그리고/또는 임의의 다른 적합한 방식으로) 3차원 비디오 콘텐츠인 것으로서 태깅 또는 그렇지 않으면 표시되는 경우들에서, 지문인식 기법들은 비디오 콘텐츠 아이템의 프레임의 절반을 기준 비디오 콘텐츠 아이템들과 매치시키려고 시도할 수도 있고, 그에 따라 기준 데이터베이스에서 매치되는 비디오 콘텐츠를 검출하지 못할 수도 있다.
일부 실시예들에서, 본 명세서에서 설명되는 메커니즘들은 업로드된 비디오 콘텐츠 아이템의 전체 프레임, 업로드된 비디오 콘텐츠 아이템에 대한 프레임의 제1 인코딩된 부분, 및 업로드된 비디오 콘텐츠 아이템에 대한 프레임의 제2 인코딩된 부분에 대한 지문들을 생성할 수 있다. 예를 들어, 일부 실시예들에서, 프레임의 제1 인코딩된 부분은 비디오가 입체적으로 인코딩된 3차원 비디오 콘텐츠 아이템으로서 전달되는 경우 뷰어의 좌측 눈으로 전달될 프레임의 제1 절반에 대응할 수 있고, 프레임의 제2 인코딩된 부분은 비디오가 입체적으로 인코딩된 3차원 비디오 콘텐츠 아이템으로서 전달되는 경우 뷰어의 우측 눈으로 전달될 프레임의 제2 절반에 대응할 수 있다. 더 구체적인 예로서, 일부 실시예들에서, 프레임의 제1 절반 및 프레임의 제2 절반은 프레임의 좌측 절반 및 프레임의 우측 절반에 각각 대응할 수 있다. 부가적으로 또는 대안적으로, 일부 실시예들에서, 프레임의 제1 절반 및 프레임의 제2 절반은, 프레임의 상부 절반 및 하부 절반과 같은, 입체 비디오 콘텐츠의 임의의 적합한 배열, (예를 들어, 체커보드 패턴의) 프레임의 교번하는 픽셀들, 비디오 콘텐츠 아이템의 교번하는 프레임들, 및/또는 임의의 다른 적합한 배열일 수 있다.
일부 실시예들에서, 메커니즘들은 그 후에, 전체 프레임으로부터 생성된 지문들 및 프레임의 각각의 인코딩된 부분으로부터 생성된 지문들을, 기준 데이터베이스에 저장된 비디오 콘텐츠 아이템들의 지문들과 비교할 수 있고, 생성된 지문들 중 어느 것이 기준 지문들과 매치되는지 여부를 검출할 수 있다. 일부 실시예들에서, 메커니즘들은 그에 따라 업로드된 비디오 콘텐츠 아이템이 2차원 비디오 콘텐츠 또는 3차원 비디오 콘텐츠를 포함하는지 여부에 관계없이 업로드된 비디오 콘텐츠 아이템이 기준 비디오 콘텐츠와 매치되는지 여부를 검출할 수 있다는 것에 주목해야 한다. 또한, 일부 실시예들에서, 메커니즘들은 그에 따라 사용자에 의해 업로드되었던 업로드된 비디오 콘텐츠 아이템이 2차원 비디오 콘텐츠 아이템 또는 3차원 비디오 콘텐츠 아이템인 것으로서 비디오 콘텐츠 아이템을 올바르게 표시 또는 지정하였는지에 관계없이 업로드된 비디오 콘텐츠 아이템이 기준 비디오 콘텐츠와 매치되는지 여부를 검출할 수 있다는 것에 주목해야 한다.
일부 실시예들에서, 본 명세서에서 설명되는 메커니즘들이 업로드된 비디오 콘텐츠 아이템과 기준 비디오 콘텐츠 아이템 사이의 매치(예를 들어, 업로드된 비디오 콘텐츠 아이템이 잠재적으로 저작권을 가진 비디오 콘텐츠임을 표시함)를 검출하는 경우, 메커니즘들은 매치의 표시가 비디오 콘텐츠 아이템을 송신 및/또는 업로드한 사용자 디바이스 상에 제시되게 할 수 있다. 예를 들어, 일부 실시예들에서, 업로드된 콘텐츠가 기준 비디오 콘텐츠와 매치됨을 표시하는 메시지가 사용자 디바이스 상에 제시될 수 있다. 부가적으로 또는 대안적으로, 일부 실시예들에서, 메커니즘들은 기준 비디오 콘텐츠 아이템과의 매치를 검출하는 것에 응답하여 업로드된 비디오 콘텐츠 아이템의 저장을 차단할 수 있다. 게다가, 일부 실시예들에서, 메커니즘들은 기준 비디오 콘텐츠와 매치된 업로드된 비디오 콘텐츠 아이템이 수동 검토를 위해 플래깅되게 할 수 있다.
일부 실시예들에서, 업로드된 비디오 콘텐츠 아이템은, 비디오들, 영화들, 텔레비전 프로그램들, 라이브-스트리밍된 콘텐츠, 및/또는 임의의 다른 적합한 비디오 콘텐츠를 포함하는 임의의 적합한 타입의 비디오 콘텐츠일 수 있다는 것에 주목한다. 예를 들어, 업로드된 비디오 콘텐츠 아이템이 라이브-스트리밍된 비디오 콘텐츠인 경우에서, 사용자 디바이스는 라이브 비디오 콘텐츠를 서버에 송신할 수 있는데, 이 서버는 수신된 비디오 콘텐츠를 호스팅하고, 예를 들어, 비디오 콘텐츠를 뷰잉하라는 요청에 응답하여, 비디오 콘텐츠가 다른 사용자 디바이스들로 스트리밍되게 할 수 있다. 업로드된 비디오 콘텐츠 아이템이 라이브-스트리밍된 비디오 콘텐츠인 경우들에서, 본 명세서에서 설명되는 메커니즘들은 라이브-스트리밍된 콘텐츠가 수신될 때 그 라이브-스트리밍된 콘텐츠의 부분들에 대한 지문들을 생성할 수 있다. 예를 들어, 일부 실시예들에서, 라이브-스트리밍된 비디오 콘텐츠 아이템이 사용자 디바이스로부터 비디오 콘텐츠를 호스팅하고 있는 서버로 송신되고 있는 경우, 메커니즘들은, 임의의 적합한 지속기간(예를 들어, 1초, 2초, 5초, 1분, 및/또는 임의의 다른 적합한 지속기간)의 수신된 비디오 콘텐츠의 부분들에 대한 지문들을, 이들이 서버에 의해 수신될 때 생성할 수 있다. 기준 데이터베이스에서의 기준 비디오 콘텐츠와의 라이브-스트리밍된 콘텐츠의 매치가 있는 경우들에서, 본 명세서에서 설명되는 메커니즘들은, 기준 데이터베이스에서의 기준 비디오 콘텐츠와의 라이브-스트리밍된 콘텐츠의 매치가 있다는 표시를, 라이브-스트리밍된 콘텐츠를 서버에 송신하는 사용자 디바이스 상에 제시할 수 있다. 예를 들어, 일부 실시예들에서, 메커니즘들은 라이브-스트리밍된 콘텐츠가 기준 데이터베이스에서의 특정 비디오 콘텐츠 아이템과 매치되는 것으로 결정되었음을 표시하는 메시지가 사용자 디바이스 상에 제시되게 할 수 있고, 일부 실시예들에서, 기준 데이터베이스에서의 특정 비디오 콘텐츠 아이템의 명칭을 식별할 수 있다. 부가적으로 또는 대안적으로, 일부 실시예들에서, 메커니즘들은 기준 비디오 콘텐츠와의 매치를 검출하는 것에 응답하여 라이브-스트리밍된 비디오 콘텐츠의 추가의 스트리밍을 차단할 수 있다.
도 1을 참조하면, 콘텐츠 제공자에게 업로드될 업로드된 비디오 콘텐츠 아이템 및 그 비디오 콘텐츠 아이템에 관한 정보를 수신하기 위한 사용자 인터페이스의 예(100)가 개시된 요지의 일부 실시예들에 따라 도시된다. 예시된 바와 같이, 사용자 인터페이스(100)는 콘텐츠 아이템 선택 인터페이스(102) 및 콘텐츠 아이템 정보 인터페이스(104)를 포함할 수 있다.
일부 실시예들에서, 콘텐츠 아이템 선택 인터페이스(102)는 사용자 인터페이스(100)의 사용자가 업로드를 위한 콘텐츠 아이템을 선택하는 것을 가능하게 하기 위한 임의의 적합한 사용자 인터페이스 컨트롤들을 포함할 수 있다. 예를 들어, 도 1에 도시된 바와 같이, 일부 실시예들에서, 콘텐츠 아이템 선택 인터페이스(102)는, 선택될 때, 사용자 인터페이스(100)와 연관된 사용자 디바이스의 디렉토리 리스팅이 제시되게 할 수 있는 푸시 버튼을 포함할 수 있다. 일부 실시예들에서, 선택된 콘텐츠 아이템이 그 후에 텍스트 박스에 표시될 수 있다. 일부 실시예들에서, 콘텐츠 아이템 선택 인터페이스(102)는 생략될 수 있다.
일부 실시예들에서, 콘텐츠 아이템 정보 인터페이스(104)는 특정 비디오 콘텐츠 아이템을 업로드하는 콘텐츠 생성자가 비디오 콘텐츠 아이템에 관한 임의의 적합한 정보를 표시하는 것을 가능하게 하는 데 사용될 수 있다. 예를 들어, 도 1에 도시된 바와 같이, 일부 실시예들에서, 콘텐츠 아이템 정보 인터페이스(104)는, 콘텐츠 생성자가 업로드된 비디오 콘텐츠 아이템이 입체 비디오 콘텐츠 아이템인지 아닌지의 여부를 표시하는 것을 가능하게 하기 위한 사용자 인터페이스 컨트롤들을 포함할 수 있다. 일부 실시예들에서, 임의의 다른 적합한 정보가 콘텐츠 아이템 정보 인터페이스(104)를 통해 표시될 수 있다. 예를 들어, 일부 실시예들에서, 정보는 비디오 콘텐츠 아이템의 명칭, 비디오 콘텐츠 아이템의 생성자의 명칭, 비디오 콘텐츠 아이템과 연관된 신용 정보 또는 협력 정보, 비디오 콘텐츠 아이템과 연관된 키워드들, 비디오 콘텐츠 아이템과 연관된 액세스 제어 또는 프라이버시 설정들, 및/또는 임의의 다른 적합한 정보를 포함할 수 있다.
도 3을 참조하면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 본 명세서에서 설명되는 메커니즘들의 구현에 적합한 예시적인 시스템(300)의 예가 개시된 요지의 일부 실시예들에 따라 도시된다. 예시된 바와 같이, 하드웨어(300)는 하나 이상의 서버들, 예컨대 서버(302), 통신 네트워크(304), 및/또는 하나 이상의 사용자 디바이스들(306), 예컨대 사용자 디바이스들(308 및 310)을 포함할 수 있다.
일부 실시예들에서, 서버(들)(302)는, 비디오 콘텐츠 아이템의 업로드를 수신하는 것, 업로드된 비디오 콘텐츠 아이템이 기준 비디오 콘텐츠 아이템과 매치되는지 여부를 결정하는 것, 그리고/또는 임의의 다른 적합한 기능들을 수행하는 것을 위한 임의의 적합한 서버(들)일 수 있다. 예를 들어, 도 5와 관련하여 아래에 설명되는 바와 같이, 서버(들)(302)는 업로드된 비디오 콘텐츠 아이템이 기준 데이터베이스에서의 비디오 콘텐츠 아이템과 매치되는지 여부를 결정하기 위해 임의의 적합한 지문인식 기법(들)을 수행할 수 있다. 더 구체적인 예로서, 일부 실시예들에서, 서버(들)(302)는 업로드된 비디오 콘텐츠 아이템이 입체 비디오 콘텐츠 아이템인지 여부에 관계없이, 비디오 콘텐츠 아이템이 기준 비디오 콘텐츠 아이템과 매치되는지 여부를 결정하기 위해 비디오 콘텐츠 아이템의 전체 프레임뿐만 아니라 프레임의 제1 절반 및 제2 절반의 지문들을 생성할 수 있다. 일부 실시예들에서, 서버(들)(302)는 생략될 수 있다.
통신 네트워크(304)는 일부 실시예들에서 하나 이상의 유선 및/또는 무선 네트워크들의 임의의 적합한 조합일 수 있다. 예를 들어, 통신 네트워크(306)는 인터넷, 인트라넷, 광역 네트워크(WAN), 근거리 네트워크(LAN), 무선 네트워크, 디지털 가입자 라인(DSL) 네트워크, 프레임 릴레이 네트워크, 비동기 송신 모드(ATM) 네트워크, 가상 사설 네트워크(VPN), 및/또는 임의의 다른 적합한 통신 네트워크 중 임의의 하나 이상을 포함할 수 있다. 사용자 디바이스들(306)은 하나 이상의 통신 링크들(예를 들어, 통신 링크(316))을 통해 서버(들)(302)에 링크될 수 있는 통신 네트워크(304)에 하나 이상의 통신 링크들(312 및/또는 314)에 의해 연결될 수 있다. 통신 링크들(312, 314, 및/또는 316)은, 네트워크 링크들, 다이얼-업 링크들, 무선 링크들, 하드-와이어드 링크들, 임의의 다른 적합한 통신 링크들, 또는 그러한 링크들의 임의의 적합한 조합과 같은, 사용자 디바이스들(306) 및 서버(들)(302) 간에서 데이터를 통신하기에 적합한 임의의 통신 링크들일 수 있다.
일부 실시예들에서, 사용자 디바이스들(306)은, 비디오 콘텐츠 아이템을 서버(들)(302)에 송신하는 것, 비디오 콘텐츠 아이템에 관련된 정보를 서버(들)(302)에 송신하는 것, 그리고/또는 임의의 다른 적합한 기능들에 적합한 하나 이상의 컴퓨팅 디바이스들을 포함할 수 있다. 예를 들어, 일부 실시예들에서, 사용자 디바이스들(306)은 스마트폰, 모바일 폰, 태블릿 컴퓨터, 랩톱 컴퓨터, 차량(예를 들어, 자동차, 보트, 비행기, 또는 임의의 다른 적합한 차량) 엔터테인먼트 시스템, 휴대용 미디어 플레이어, 및/또는 임의의 다른 적합한 모바일 디바이스와 같은 모바일 디바이스로서 구현될 수 있다. 다른 예로서, 일부 실시예들에서, 사용자 디바이스들(306)은 데스크톱 컴퓨터, 셋톱 박스, 텔레비전, 스트리밍 미디어 플레이어, 게임 콘솔, 및/또는 임의의 다른 적합한 비-모바일 디바이스와 같은 비-모바일 디바이스로서 구현될 수 있다.
서버(302)가 단일 디바이스로서 예시되어 있지만, 서버(302)에 의해 수행되는 기능들은 일부 실시예들에서 임의의 적합한 개수의 디바이스들을 사용하여 수행될 수 있다. 예를 들어, 일부 실시예들에서, 서버(302)에 의해 수행되는 기능들을 구현하기 위해 다수의 디바이스들이 사용될 수 있다.
2개의 사용자 디바이스들(308 및 310)이 도 3에 도시되어 있지만, 임의의 적합한 개수의 사용자 디바이스들, 및/또는 임의의 적합한 타입들의 사용자 디바이스들이 일부 실시예들에서 사용될 수 있다.
서버(들)(302) 및 사용자 디바이스들(306)은 일부 실시예들에서 임의의 적합한 하드웨어를 사용하여 구현될 수 있다. 예를 들어, 일부 실시예들에서, 디바이스들(302 및 306)은 임의의 적합한 범용 컴퓨터 또는 특수 목적 컴퓨터를 사용하여 구현될 수 있다. 예를 들어, 서버는 특수 목적 컴퓨터를 사용하여 구현될 수도 있다. 임의의 그러한 범용 컴퓨터 또는 특수 목적 컴퓨터는 임의의 적합한 하드웨어를 포함할 수 있다. 예를 들어, 도 4의 예시적인 하드웨어(400)에 예시된 바와 같이, 그러한 하드웨어는 하드웨어 프로세서(402), 메모리 및/또는 스토리지(404), 입력 디바이스 제어기(406), 입력 디바이스(408), 디스플레이/오디오 드라이버들(410), 디스플레이 및 오디오 출력 회로부(412), 메시지 인터페이스(들)(414), 안테나(416), 및 버스(418)를 포함할 수 있다.
하드웨어 프로세서(402)는 일부 실시예들에서 마이크로프로세서, 마이크로-제어기, 디지털 신호 프로세서(들), 전용 로직, 및/또는 범용 컴퓨터 또는 특수 목적 컴퓨터의 기능을 제어하기 위한 임의의 다른 적합한 회로부와 같은 임의의 적합한 하드웨어 프로세서를 포함할 수 있다. 일부 실시예들에서, 하드웨어 프로세서(402)는 (예를 들어, 서버(302)와 같은) 서버의 메모리 및/또는 스토리지(404)에 저장되는 서버 프로그램에 의해 제어될 수 있다. 예를 들어, 서버 프로그램은 하드웨어 프로세서(402)로 하여금 업로드된 비디오 콘텐츠 아이템의 하나 이상의 프레임들을 지문인식하게 하거나, 지문(들)이 기준 데이터베이스에서의 비디오 콘텐츠 아이템과 매치되는지 여부를 결정하게 하거나, 비디오 콘텐츠 아이템이 기준 데이터베이스에서의 비디오 콘텐츠 아이템과 매치된다는 결정에 응답하여 업로드된 비디오 콘텐츠 아이템을 차단하게 하거나, 그리고/또는 임의의 다른 적합한 액션들을 수행하게 할 수 있다. 일부 실시예들에서, 하드웨어 프로세서(402)는 사용자 디바이스(306)의 메모리 및/또는 스토리지(404)에 저장되는 컴퓨터 프로그램에 의해 제어될 수 있다. 예를 들어, 컴퓨터 프로그램은 하드웨어 프로세서(402)로 하여금 비디오 콘텐츠 아이템을 서버(들)(302)에 송신하게 하거나, 그리고/또는 임의의 다른 적합한 액션들을 수행하게 할 수 있다.
메모리 및/또는 스토리지(404)는 일부 실시예들에서 프로그램들, 데이터, 미디어 콘텐츠, 광고들, 및/또는 임의의 다른 적합한 정보를 저장하기 위한 임의의 적합한 메모리 및/또는 스토리지일 수 있다. 예를 들어, 메모리 및/또는 스토리지(404)는 랜덤 액세스 메모리, 판독 전용 메모리, 플래시 메모리, 하드 디스크 스토리지, 광학 매체들, 및/또는 임의의 다른 적합한 메모리를 포함할 수 있다.
입력 디바이스 제어기(406)는 일부 실시예들에서 하나 이상의 입력 디바이스들(408)로부터의 입력을 제어 및 수신하기 위한 임의의 적합한 회로부일 수 있다. 예를 들어, 입력 디바이스 제어기(406)는 터치스크린으로부터, 키보드로부터, 마우스로부터, 하나 이상의 버튼들로부터, 음성 인식 회로로부터, 마이크로폰으로부터, 카메라로부터, 광학 센서로부터, 가속도계로부터, 온도 센서로부터, 근접장 센서로부터, 그리고/또는 임의의 다른 타입의 입력 디바이스로부터 입력을 수신하기 위한 회로부일 수 있다. 다른 예에서, 입력 디바이스 제어기(406)는 (예를 들어, 가상 현실 콘텐츠 또는 증강 현실 콘텐츠를 제시하기 위한) 머리-장착가능 디바이스로부터 입력을 수신하기 위한 회로부일 수 있다.
디스플레이/오디오 드라이버들(410)은 일부 실시예들에서 하나 이상의 디스플레이/오디오 출력 디바이스들(412)로의 출력을 제어 및 구동하기 위한 임의의 적합한 회로부일 수 있다. 예를 들어, 디스플레이/오디오 드라이버들(410)은 터치스크린, 플랫-패널 디스플레이, 음극선관 디스플레이, 프로젝터, 스피커 또는 스피커들, 및/또는 임의의 다른 적합한 디스플레이 및/또는 프레젠테이션 디바이스들을 구동하기 위한 회로부일 수 있다.
통신 인터페이스(들)(414)는 도 3에 도시된 바와 같은 네트워크(304)와 같은 하나 이상의 통신 네트워크들과 인터페이싱하기 위한 임의의 적합한 회로부일 수 있다. 예를 들어, 인터페이스(들)(414)는 네트워크 인터페이스 카드 회로부, 무선 통신 회로부, 및/또는 임의의 다른 적합한 타입의 통신 네트워크 회로부를 포함할 수 있다.
안테나(416)는 일부 실시예들에서 통신 네트워크(예컨대, 통신 네트워크(304))와 무선 통신하기 위한 임의의 적합한 하나 이상의 안테나들일 수 있다. 일부 실시예들에서, 안테나(416)는 생략될 수 있다.
버스(418)는 일부 실시예들에서 2개 이상의 컴포넌트들(402, 404, 406, 410, 및 414) 사이에서 통신하기 위한 임의의 적합한 메커니즘일 수 있다.
임의의 다른 적합한 컴포넌트들이 일부 실시예들에 따라 하드웨어(400)에 포함될 수 있다.
도 5를 참조하면, 입체 비디오들에서의 콘텐츠를 식별하기 위한 그리고, 더 구체적으로는, 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 악의적인 입체 비디오들을 검출하기 위한 프로세스의 예(500)가 개시된 요지의 일부 실시예들에 따라 도시된다. 일부 실시예들에서, 프로세스(500)의 블록들은 서버(들)(302) 상에서 실행될 수 있다.
프로세스(500)는 502에서 업로드된 비디오 콘텐츠 아이템을 수신하는 것으로 시작될 수 있다. 일부 실시예들에서, 비디오 콘텐츠 아이템은 임의의 적합한 엔티티에 의해 업로드될 수 있다. 예를 들어, 일부 실시예들에서, 비디오 콘텐츠 아이템은 비디오 콘텐츠 아이템의 생성자, 및/또는 임의의 다른 적합한 엔티티에 의해 업로드될 수 있다. 다른 예에서, 일부 실시예들에서, 다수의 비디오 콘텐츠 아이템들이 (예를 들어, 애플리케이션 프로그램 인터페이스를 사용하여) 엔티티에 의해 콘텐츠 제공자에게 업로드될 수 있다. 일부 실시예들에서, 비디오 콘텐츠 아이템은 텔레비전 프로그램, 영화, 라이브-스트리밍된 콘텐츠(예를 들어, 업로드된 비디오 콘텐츠 아이템이 라이브-스트리밍된 콘텐츠의 비디오 식별자인 경우), 비디오 광고, 및/또는 임의의 다른 적합한 타입의 비디오 콘텐츠와 같은 임의의 적합한 타입의 비디오 콘텐츠일 수 있다. 부가적으로, 일부 실시예들에서, 비디오 콘텐츠 아이템은, 임의의 적합한 방식으로 인코딩될 수 있는 3차원 비디오 콘텐츠를 포함할 수 있다. 예를 들어, 일부 실시예들에서, 3차원 비디오 콘텐츠는 임의의 적합한 포맷으로 인코딩되는 좌측 및 우측 이미지들을 갖는 입체 비디오 콘텐츠로서 인코딩될 수 있다. 더 구체적인 예로서, 일부 실시예들에서, 좌측 및 우측 이미지들은 비디오 콘텐츠 아이템의 각각의 프레임 내에서 나란히, 비디오 콘텐츠 아이템의 각각의 프레임의 상부 절반 및 하부 절반에서, (예를 들어, 체커보드 패턴의) 비디오 콘텐츠 아이템의 각각의 프레임 내의 인터리빙된 픽셀들을 통해, 비디오 콘텐츠 아이템의 순차적인 프레임들로서, 그리고/또는 임의의 다른 적합한 포맷으로 인코딩될 수 있다.
일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템에 관한 임의의 적합한 정보를 부가적으로 수신할 수 있다. 예를 들어, 도 1에 도시되고 도 1과 관련하여 상술된 바와 같이, 프로세스(500)는 비디오 콘텐츠 아이템이 입체적으로 인코딩되는 3차원 콘텐츠를 포함하는지 여부를 표시하는 정보를 비디오 콘텐츠 아이템을 업로드하는 사용자로부터 수신할 수 있다. 일부 실시예들에서, 프로세스(500)는 비디오 콘텐츠 아이템의 명칭, 비디오 콘텐츠 아이템의 생성자의 명칭, 비디오 콘텐츠 아이템과 연관된 신용 정보 또는 협력 정보, 비디오 콘텐츠 아이템과 연관된 키워드들, 비디오 콘텐츠 아이템과 연관된 액세스 제어 또는 프라이버시 설정들, 및/또는 임의의 다른 적합한 정보와 같은 임의의 다른 적합한 정보를 부가적으로 또는 대안적으로 수신할 수 있다.
일부 실시예들에서, 프로세스(500)는 임의의 적합한 기법 또는 기법들의 조합을 사용하여 업로드된 비디오 콘텐츠 아이템이 입체적으로 인코딩되는 3차원 비디오 콘텐츠를 포함하는지 여부를 결정할 수 있다는 것에 주목한다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 프레임이 뷰어의 좌측 및 우측 눈들에 전달될 이미지 콘텐츠를 포함하는지 여부를 결정하기 위해 프레임의 좌측 절반에 있는 픽셀에서의 이미지 콘텐츠가 프레임의 우측 절반에 있는 대응하는 픽셀에서의 이미지 콘텐츠에 대응하는지 여부를 결정할 수 있다. 다른 예로서, 일부 실시예들에서, 프로세스(500)는 프레임이 뷰어의 좌측 및 우측 눈들에 전달될 이미지 콘텐츠를 포함하는지 여부를 결정하기 위해 프레임의 상부 절반에 있는 픽셀에서의 이미지 콘텐츠가 프레임의 하부 절반에 있는 대응하는 픽셀에서의 이미지 콘텐츠에 대응하는지 여부를 결정할 수 있다. 부가적으로 또는 대안적으로, 프로세스(500)가 업로드된 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함하는지 여부의 명시적 표시를 사용자로부터 (예를 들어, 사용자 인터페이스(100)를 통해, 그리고/또는 임의의 다른 적합한 방식으로) 수신하는 경우들에서, 프로세스(500)는 임의의 적합한 기법 또는 기법들의 조합을 사용하여 명시적 사용자 입력을 검증할 수 있다.
504에서, 일부 실시예들에서, 프로세스(500)는 지문인식될 업로드된 비디오 콘텐츠 아이템의 프레임을 선택할 수 있다. 일부 실시예들에서, 프레임은 임의의 적합한 방식으로 선택될 수 있다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 비디오 콘텐츠 아이템에서 키 프레임인 것으로 결정되는 프레임을 선택할 수 있다. 더 구체적인 예로서, 일부 실시예들에서, 선택된 키 프레임은, 비디오 콘텐츠 아이템의 모션 분석에 기초하여 식별되고 모션 중인 콘텐츠를 갖는 시점을 포함하는 것일 수 있다. 다른 더 구체적인 예로서, 일부 실시예들에서, 선택된 키 프레임은, 비디오 콘텐츠 아이템에서의 2개의 상이한 장면들 사이의 경계인 것일 수 있다. 다른 예로서, 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템의 프레임을 랜덤하게 선택할 수 있다. 또 다른 예로서, 일부 실시예들에서, 프로세스(500)는 기준 데이터베이스에서의 비디오 콘텐츠 아이템과의 매치가 발견되거나 또는 업로드된 비디오 콘텐츠 아이템의 모든 프레임들이 분석될 때까지 업로드된 비디오 콘텐츠 아이템의 프레임들의 시리즈(예를 들어, 매 프레임마다, 매 다른 프레임마다, 매 10번째 프레임마다, 그리고/또는 임의의 다른 시리즈)에 대응하는 지문들을 생성할 수 있다.
일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템으로부터 프레임을 선택하기 위한 복수의 접근법들을 채용할 수 있다. 예를 들어, 프로세스(500)는 복수의 접근법들(예를 들어, 모션 분석, 경계 분석, 랜덤 선택 등) 중 어느 것이 가장 적은 개수의 선택된 프레임들로 기준 비디오 콘텐츠 아이템의 지문과 매치되는 지문을 생성하게 하였는지를 결정하고, 이에 응답하여, 업로드된 비디오 콘텐츠 아이템으로부터 프레임을 선택하기 위해 그 접근법을 사용하도록 프로세스(500)를 할당할 수 있다. 다른 예에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템으로부터 프레임을 선택하기 위한 다수의 접근법들을 선택할 수 있고, 여기서 모션 분석에 기초하여 선택된 프레임에 대해 하나 이상의 지문들이 생성되고, 경계 분석에 기초하여 선택된 프레임에 대해 하나 이상의 지문들이 생성된다.
일부 실시예들에서, 프로세스(500)는 506에서 전체 선택된 프레임의 하나 이상의 지문들을 생성할 수 있다. 도 2a를 참조하면, 프레임(200)의 예가 개시된 요지의 일부 실시예들에 따라 도시된다. 예시된 바와 같이, 프레임(200)은, 임의의 적합한 방식으로 배열될 수 있는 (픽셀(202)과 같은) 임의의 적합한 개수의 픽셀들을 포함할 수 있다. 일부 실시예들에서, 프로세스(500)는 프레임(200)의 이미지 콘텐츠를 나타내는 하나 이상의 서명(signature)들을 생성함으로써 프레임(200)의 하나 이상의 지문들을 생성할 수 있다. 예를 들어, 일부 실시예들에서, 하나 이상의 서명들은 프레임(200)의 컬러, 채도, 또는 색상(hue) 정보의 히스토그램을 포함할 수 있다. 일부 실시예들에서, 하나 이상의 서명들은 프레임(200)에 관한 임의의 다른 적합한 정보에 기초할 수 있다. 일부 실시예들에서, 프로세스(500)는 프레임(200)을 2개 이상의 공간 블록들로 분할할 수 있고 공간 블록들 각각에 대한 하나 이상의 서명들을 계산할 수 있다. 일부 실시예들에서, 전체 선택된 프레임에 대응하는 프로세스(500)에 의해 생성된 제1 지문은 생성된 서명들 또는 서명들의 임의의 조합 중 임의의 것에 기초할 수 있다.
일부 실시예들에서, 프로세스(500)는 508에서 선택된 프레임의 제1 인코딩된 부분 및 선택된 프레임의 제2 인코딩된 부분의 하나 이상의 지문들을 생성할 수 있다. 일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분은 뷰어의 한쪽 눈으로 전달될 제1 입체 이미지일 수 있고, 선택된 프레임의 제2 인코딩된 부분은 뷰어의 다른 한쪽 눈으로 전달될 제2 입체 이미지일 수 있다. 일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분 및 제2 인코딩된 부분은 임의의 적합한 포맷으로 인코딩될 수 있다. 예를 들어, 도 2b에 도시된 바와 같이, 프레임(250)은, 프레임(250)의 제1 인코딩된 부분에 대응할 수 있는 좌측 절반 프레임(252), 및 프레임(250)의 제2 인코딩된 부분에 대응할 수 있는 우측 절반 프레임(254)을 가질 수 있다. 일부 실시예들에서, 선택된 프레임의 제1 인코딩된 부분 및 선택된 프레임의 제2 인코딩된 부분은 (도 2b에 도시된 바와 같은) 좌측 및 우측 절반들, 상부 및 하부 절반들과 같은 임의의 적합한 배열로 되어 있거나, (예를 들어, 체커보드 패턴의) 픽셀 단위로 인터리빙되거나, 프레임 단위로 인터리빙되거나, 그리고/또는 임의의 다른 적합한 방식으로 배열될 수 있다는 것에 주목한다. 부가적으로, 일부 실시예들에서, 프로세스(500)는 프레임(250)이 입체 콘텐츠를 포함하는지 아닌지의 여부에 관계없이 선택된 프레임의 제1 인코딩된 부분 및 선택된 프레임의 제2 인코딩된 부분의 하나 이상의 지문들을 생성할 수 있다는 것에 주목한다.
프로세스(500)는 선택된 프레임의 제1 인코딩된 부분 및 선택된 프레임의 제2 인코딩된 부분의 하나 이상의 지문들을 생성하기 위해 임의의 적합한 기법 또는 기법들의 조합을 사용할 수 있다는 것에 주목해야 한다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 선택된 프레임의 제1 인코딩된 부분을 나타내는 제1 지문 및 선택된 프레임의 제2 인코딩된 부분을 나타내는 제2 지문을 생성하기 위해 블록 506과 관련하여 상술된 기법들을 사용할 수 있다. 블록 506과 관련하여 상기에 논의된 바와 같이, 일부 실시예들에서, 제1 지문 및 제2 지문은, 컬러, 채도, 또는 색상의 히스토그램들, 및/또는 임의의 다른 적합한 정보와 같은, 선택된 프레임의 각각의 인코딩된 부분에 대한 임의의 적합한 정보 또는 서명들에 기초할 수 있다.
일부 실시예들에서, 프로세스(500)는 510에서 블록들 506 및 508에서 생성된 지문들 중 적어도 하나가 기준 데이터베이스에 저장된 기준 비디오 콘텐츠 아이템의 지문과 매치되는지 여부를 결정할 수 있다. 프로세스(500)는 임의의 적합한 기법 또는 기법들의 조합을 사용하여 매치가 있는지 여부를 결정할 수 있다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템과 연관된 생성된 지문들 중 임의의 것의 패턴과 기준 비디오 콘텐츠 아이템에 대한 지문들의 패턴 사이의 거리(예를 들어, 유클리드 거리, 및/또는 임의의 다른 적합한 거리 메트릭)가 미리 결정된 임계치보다 더 작은지 여부를 결정할 수 있다. 다른 예로서, 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템과 연관된 생성된 지문들 중 임의의 것과 기준 비디오 콘텐츠 아이템의 지문 사이의 상관도(correlation)가 미리 결정된 임계치를 초과하는지 여부를 결정할 수 있다. 일부 실시예들에서, 프로세스(500)는 블록들 506 및 508에서 생성된 지문들 중 적어도 하나가 기준 데이터베이스에서의 비디오 콘텐츠 아이템의 지문과 매치될 확률을 부가적으로 또는 대안적으로 계산할 수 있다는 것에 주목한다. 일부 그러한 실시예들에서, 프로세스(500)는 임의의 적합한 기법 또는 기법들의 조합을 사용하여 매치의 확률을 계산할 수 있다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 지문들 사이의 거리 메트릭, 지문들 사이의 상관도, 및/또는 임의의 다른 적합한 인자 또는 인자들의 조합(예를 들어, 결과적인 확률 스코어가 0 내지 1인 경우)에 기초하여 매치의 확률을 계산할 수 있다.
일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템의 다수의 프레임들로부터 생성된 지문들에 기초하여 생성된 지문들 중 어느 것이 기준 데이터베이스에서의 비디오 콘텐츠 아이템의 지문과 매치되는지 여부를 결정할 수 있다는 것에 주목한다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템의 다수의 프레임들에 대한 지문들을 생성할 수 있고, 기준 비디오 콘텐츠 아이템의 지문들에 대한 생성된 지문들 각각의 밀접도를 표시하는 임의의 적합한 메트릭들(예를 들어, 거리 메트릭, 상관도 메트릭, 및/또는 임의의 다른 적합한 메트릭)을 계산할 수 있다. 그 후에, 프로세스(500)는 각각의 프레임에 대한 메트릭들을 조합하여, 업로드된 비디오 콘텐츠 아이템이 기준 비디오 콘텐츠 아이템과 매치될 확률을 계산할 수 있다. 일부 실시예들에서, 프로세스(500)는 (예를 들어, 블록 506에서 생성된 바와 같은) 비디오 콘텐츠 아이템의 전체 프레임들, 및/또는 (예를 들어, 블록 508에서 생성된 바와 같은) 선택된 프레임의 하나 또는 양측 모두의 인코딩된 부분들을 사용하여 비디오 콘텐츠 아이템의 다수의 프레임들에 걸쳐 지문 정보를 조합할 수 있다.
일부 실시예들에서, 프로세스(500)는 (예를 들어, 블록들 506 및/또는 508에서) 하나 이상의 오디오 지문들을 부가적으로 또는 대안적으로 생성할 수 있다. 그 후에, 프로세스(500)는 상술된 바와 같은 임의의 적합한 메트릭들을 사용하여 생성된 오디오 지문(들)이 기준 데이터베이스에서의 기준 비디오의 기준 오디오 지문에 대응하는지 여부를 결정할 수 있다. 일부 그러한 실시예들에서, 프로세스(500)는 (예를 들어, 하나 이상의 지문들 각각이 기준 지문과 비교될 때 확률 스코어를 수신하는 경우 그리고 각각의 개별 확률 스코어를 통합한 조합된 확률 스코어가 생성될 수 있는 경우) 오디오 지문, 업로드된 비디오 콘텐츠 아이템의 전체 선택된 프레임에 대응하는 지문(들), 업로드된 비디오 콘텐츠 아이템의 제1 인코딩된 부분에 대응하는 지문, 및/또는 업로드된 비디오 콘텐츠 아이템의 제2 인코딩된 부분에 대응하는 지문 중 임의의 것에 기초하여 업로드된 비디오 콘텐츠 아이템이 기준 비디오와 매치될 확률을 결정할 수 있다.
510에서, 프로세스(500)가 지문들 중 하나 이상이 기준 비디오 콘텐츠 아이템의 지문들과 매치된다고 결정하는 경우(510에서 "예"), 프로세스(500)는 블록 512로 진행할 수 있고 업로드된 비디오 콘텐츠 아이템의 저장을 차단할 수 있다. 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템이 스토리지로부터 차단되었음을 표시하는 임의의 적합한 메시지가 비디오 콘텐츠 아이템을 송신한 사용자 디바이스 상에 제시되게 할 수 있다. 예를 들어, 일부 실시예들에서, 메시지는 업로드된 비디오 콘텐츠 아이템이 기준 데이터베이스에서의 비디오 콘텐츠 아이템(예를 들어, 저작권을 가진 비디오 콘텐츠, 및/또는 임의의 다른 적합한 비디오 콘텐츠)과 매치되는 것으로 결정되었기 때문에 업로드된 비디오 콘텐츠 아이템이 차단되었음을 표시할 수 있다. 일부 실시예들에서, 메시지는, 업로드된 비디오 콘텐츠 아이템과 매치된 기준 비디오의 명칭 또는 다른 식별자, 기준 비디오의 생성자의 명칭, 업로드된 비디오 콘텐츠 아이템이 기준 비디오와 매치된 하나 이상의 시점들, 및/또는 임의의 다른 적합한 정보와 같은 임의의 다른 적합한 정보를 포함할 수 있다. 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템이 저장되는 것을 가능하게 할 수 있지만, 추가의 수동 검토를 위해 업로드된 비디오 콘텐츠 아이템을 플래깅할 수 있다는 것에 주목한다. 대안적으로, 일부 실시예들에서, 프로세스(500)는 추가의 수동 검토가 완료될 때까지 업로드된 비디오 콘텐츠 아이템의 저장을 차단할 수 있다.
510에서, 프로세스(500)가 생성된 지문들 중 어느 것도 기준 비디오 콘텐츠 아이템의 지문들과 매치되지 않는다고 결정하는 경우(510에서 "아니오"), 프로세스(500)는 블록 514로 진행할 수 있고 업로드된 비디오 콘텐츠 아이템의 저장을 허용할 수 있다. 일부 실시예들에서, 업로드된 비디오 콘텐츠 아이템은 그 후에, 예를 들어, 업로드된 비디오 콘텐츠 아이템에 대한 요청을 수신하는 것에 응답하여 사용자 디바이스 상에 추후의 시간에 제시될 수 있다. 일부 실시예들에서, 업로드된 비디오 콘텐츠 아이템은 서버(들)(302) 상에 저장될 수 있다. 일부 실시예들에서, 업로드된 비디오 콘텐츠 아이템은 업로드된 비디오 콘텐츠 아이템의 생성자의 명칭, 비디오 콘텐츠 아이템이 서버(들)(302)에 업로드된 날짜, 업로드된 비디오 콘텐츠 아이템과 연관된 키워드들 및/또는 토픽들, 및/또는 임의의 다른 적합한 정보와 같은 임의의 적합한 정보와 관련하여 저장될 수 있다. 일부 실시예들에서, 저장된 정보는 업로드된 비디오 콘텐츠 아이템이 기준 데이터베이스에서의 임의의 비디오 콘텐츠와 매치되는 것으로 발견되지 않았음을 추가로 표시할 수 있고, 업로드된 비디오 콘텐츠 아이템이 기준 데이터베이스에서의 비디오 콘텐츠와 가장 최근에 비교된 시간 및/또는 날짜를 표시할 수 있다.
일부 실시예들에서, 프로세스(500)는 임의의 적합한 시간에 블록들 504 내지 510을 반복할 수 있다는 것에 주목한다. 예를 들어, 일부 실시예들에서, 프로세스(500)는 업로드된 비디오 콘텐츠 아이템이 블록 514에서 저장을 위해 승인된 이후에 업로드된 비디오 콘텐츠 아이템이 기준 데이터베이스에 부가된 비디오 콘텐츠와 매치되는지를 결정하기 위해 추가의 시간에(예를 들어, 업로드된 비디오 콘텐츠 아이템이 서버(들)(302) 상에 저장되는 것이 허용된 후에) 블록들 504 내지 510을 반복할 수 있다. 다른 예로서, 일부 실시예들에서, 프로세스(500)는 비디오 콘텐츠 아이템에 관한 정보가 변경된 비디오 콘텐츠 아이템을 업로드한 사용자로부터의 표시를 수신하는 것에 응답하여 블록들 504 내지 510을 반복할 수 있다. 더 구체적인 예로서, 업로드된 비디오 콘텐츠 아이템이 (예를 들어, 도 1a에 도시되고 도 1a와 관련하여 상술된 바와 같이) 입체 비디오 콘텐츠로서 인코딩되는 3차원 비디오 콘텐츠를 포함함을 사용자가 이전에 표시하였고, 그에 후속하여 업로드된 비디오 콘텐츠가 3차원 콘텐츠가 아님을 표시하는 경우에, 프로세스(500)는 비디오 콘텐츠 아이템의 전체 프레임들의 하나 이상의 지문들이 기준 데이터베이스에서의 기준 비디오 콘텐츠 아이템의 지문들과 매치되는지를 결정하기 위해 블록들 504 내지 510을 반복할 수 있다.
일부 실시예들에서, 도 5의 프로세스의 상술된 블록들 중 적어도 일부는 도면에 도시되고 도면과 관련하여 설명되는 순서 및 시퀀스에 제한되지 않는 임의의 순서 또는 시퀀스로 실행 또는 수행될 수 있다. 또한, 도 5의 상기 블록들 중 일부는 레이턴시 및 프로세싱 시간들을 감소시키기 위해 병렬로 또는 적절하다면 실질적으로 동시에 실행 또는 수행될 수 있다. 부가적으로 또는 대안적으로, 도 5의 프로세스의 상술된 블록들 중 일부는 생략될 수 있다.
일부 실시예들에서, 본 명세서의 기능들 및/또는 프로세스들을 수행하기 위한 명령어들을 저장하기 위해 임의의 적합한 컴퓨터 판독가능 매체들이 사용될 수 있다. 예를 들어, 일부 실시예들에서, 컴퓨터 판독가능 매체들은 일시적 또는 비일시적일 수 있다. 예를 들어, 비일시적 컴퓨터 판독가능 매체들은, 자기 매체들(예컨대, 하드 디스크들, 플로피 디스크들, 및/또는 임의의 다른 적합한 자기 매체들), 광학 매체들(예컨대, 콤팩트 디스크들, 디지털 비디오 디스크들, 블루레이 디스크들, 및/또는 임의의 다른 적합한 광학 매체들), 반도체 매체들(예컨대, 플래시 메모리, 전기적으로 프로그래밍가능한 판독 전용 메모리(EPROM), 전기적으로 소거가능한 프로그래밍가능 판독 전용 메모리(EEPROM), 및/또는 임의의 다른 적합한 반도체 매체들), 송신 동안 영속성과의 어떠한 유사성이 전혀 없지 않거나 또는 순간적이지 않은 임의의 적합한 매체들, 및/또는 임의의 적합한 유형 매체들과 같은 매체들을 포함할 수 있다. 다른 예로서, 일시적 컴퓨터 판독가능 매체들은, 네트워크들 상의, 배선들, 컨덕터들, 광섬유들, 회로들 내의 신호들, 송신 동안 영속성과의 어떠한 유사성이 전혀 없고 순간적인 임의의 적합한 매체들, 및/또는 임의의 적합한 무형 매체들을 포함할 수 있다.
본 명세서에서 설명되는 시스템들이 사용자들에 관한 개인 정보를 수집하거나, 또는 개인 정보를 사용하는 상황들에서, 사용자들에게는 프로그램들 또는 피처들이 사용자 정보(예를 들어, 사용자의 소셜 네트워크, 소셜 액션들 또는 활동들, 직업, 사용자의 선호도들, 또는 사용자의 현재 위치에 관한 정보)를 수집할지 여부를 제어하는 기회가 제공될 수도 있다. 부가적으로, 개인 정보가 제거되도록, 특정 데이터가 저장 또는 사용되기 전에 그 특정 데이터가 하나 이상의 방식들로 처리될 수도 있다. 예를 들어, 사용자에 대해 어떠한 개인 정보도 결정될 수 없도록 사용자의 아이덴티티가 처리될 수도 있거나, 또는 사용자의 특정 위치가 결정될 수 없도록 (예컨대, 도시, 우편 번호, 또는 주 레벨(state level)로) 위치 정보가 획득된 경우 사용자의 지리적 위치가 일반화될 수도 있다. 따라서, 사용자는 정보가 사용자에 관해 수집되고 콘텐츠 서버에 의해 사용되는 방법을 제어할 수도 있다.
이에 따라, 입체 비디오들에서의 콘텐츠를 식별하기 위한 방법들, 시스템들, 및 매체들이 제공된다.
본 발명은 전술한 예시적인 실시예들에서 설명 및 예시되었지만, 본 개시내용은 단지 예로서 이루어졌고, 본 발명의 구현의 세부사항들에서의 수많은 변경들이, 후속하는 청구범위에 의해서만 제한되는, 본 발명의 사상 및 범주로부터 벗어남이 없이 이루어질 수 있다는 것이 이해된다. 개시된 실시예들의 피처들은 다양한 방식들로 조합 및 재배열될 수 있다.

Claims (18)

  1. 입체 비디오들에서의 콘텐츠를 식별하기 위한 컴퓨터에 의해 구현된 방법으로서,
    사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 단계;
    상기 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 상기 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 단계;
    상기 선택된 프레임에 대응하는 제1 지문, 상기 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 상기 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 단계;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 단계;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 단계; 및
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여, 상기 매치의 표시가 상기 사용자 디바이스 상에 제시되게 하는 단계
    를 포함하는, 컴퓨터에 의해 구현된 방법.
  2. 제1항에 있어서,
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여 상기 비디오 콘텐츠 아이템의 저장이 차단되게 하는 단계를 더 포함하는, 컴퓨터에 의해 구현된 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분 및 상기 선택된 프레임의 제2 인코딩된 부분은, 상기 비디오 콘텐츠 아이템이 입체적으로 제시될 때 뷰어의 좌측 눈에 제시될 제1 이미지 및 상기 뷰어의 우측 눈에 제시될 제2 이미지에 대응하는, 컴퓨터에 의해 구현된 방법.
  4. 제3항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 좌측 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 우측 절반인, 컴퓨터에 의해 구현된 방법.
  5. 제3항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 상부 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 하부 절반인, 컴퓨터에 의해 구현된 방법.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 사용자 디바이스로부터, 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 단계를 더 포함하고,
    상기 제1 지문 및 상기 제2 지문은 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 것에 응답하여 생성되는, 컴퓨터에 의해 구현된 방법.
  7. 입체 비디오들에서의 콘텐츠를 식별하기 위한 시스템으로서,
    상기 시스템은:
    하드웨어 프로세서
    를 포함하고,
    상기 하드웨어 프로세서는:
    사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하고;
    상기 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 상기 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하고;
    상기 선택된 프레임에 대응하는 제1 지문, 상기 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 상기 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하고;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하고;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하고;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여, 상기 매치의 표시가 상기 사용자 디바이스 상에 제시되게 하도록
    구성되는, 시스템.
  8. 제7항에 있어서,
    상기 하드웨어 프로세서는 상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여 상기 비디오 콘텐츠 아이템의 저장이 차단되게 하도록 추가로 구성되는, 시스템.
  9. 제7항 또는 제8항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분 및 상기 선택된 프레임의 제2 인코딩된 부분은, 상기 비디오 콘텐츠 아이템이 입체적으로 제시될 때 뷰어의 좌측 눈에 제시될 제1 이미지 및 상기 뷰어의 우측 눈에 제시될 제2 이미지에 대응하는, 시스템.
  10. 제9항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 좌측 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 우측 절반인, 시스템.
  11. 제9항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 상부 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 하부 절반인, 시스템.
  12. 제7항 내지 제11항 중 어느 한 항에 있어서,
    상기 하드웨어 프로세서는, 상기 사용자 디바이스로부터, 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하도록 추가로 구성되고,
    상기 제1 지문 및 상기 제2 지문은 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 것에 응답하여 생성되는, 시스템.
  13. 컴퓨터 실행가능 명령어들을 포함하는 비일시적 컴퓨터 판독가능 매체로서, 상기 컴퓨터 실행가능 명령어들은 프로세서에 의해 실행될 때, 상기 프로세서로 하여금, 입체 비디오들에서의 콘텐츠를 식별하기 위한 방법을 수행하게 하고, 상기 방법은:
    사용자 디바이스로부터, 콘텐츠 제공자에게 업로드하기 위한 비디오 콘텐츠 아이템을 수신하는 단계;
    상기 비디오 콘텐츠 아이템에 대응하는 하나 이상의 지문들을 생성하기 위해 상기 비디오 콘텐츠 아이템의 복수의 프레임들로부터 한 프레임을 선택하는 단계;
    상기 선택된 프레임에 대응하는 제1 지문, 상기 선택된 프레임의 제1 인코딩된 부분에 대응하는 제2 지문, 및 상기 선택된 프레임의 제2 인코딩된 부분에 대응하는 제3 지문을 생성하는 단계;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 각각을 기준 비디오 콘텐츠 아이템들에 대응하는 복수의 기준 지문들과 비교하는 단계;
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 복수의 기준 지문들 중 한 기준 지문과 매치되는지 여부를 결정하는 단계; 및
    상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여, 상기 매치의 표시가 상기 사용자 디바이스 상에 제시되게 하는 단계
    를 포함하는, 비일시적 컴퓨터 판독가능 매체.
  14. 제13항에 있어서,
    상기 방법은, 상기 제1 지문, 상기 제2 지문, 및 상기 제3 지문 중 적어도 하나가 상기 기준 지문과 매치된다는 결정에 응답하여 상기 비디오 콘텐츠 아이템의 저장이 차단되게 하는 단계를 더 포함하는, 비일시적 컴퓨터 판독가능 매체.
  15. 제13항 또는 제14항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분 및 상기 선택된 프레임의 제2 인코딩된 부분은, 상기 비디오 콘텐츠 아이템이 입체적으로 제시될 때 뷰어의 좌측 눈에 제시될 제1 이미지 및 상기 뷰어의 우측 눈에 제시될 제2 이미지에 대응하는, 비일시적 컴퓨터 판독가능 매체.
  16. 제15항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 좌측 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 우측 절반인, 비일시적 컴퓨터 판독가능 매체.
  17. 제15항에 있어서,
    상기 선택된 프레임의 제1 인코딩된 부분은 상기 선택된 프레임의 상부 절반이고, 상기 선택된 프레임의 제2 인코딩된 부분은 상기 선택된 프레임의 하부 절반인, 비일시적 컴퓨터 판독가능 매체.
  18. 제13항 내지 제17항 중 어느 한 항에 있어서,
    상기 방법은, 상기 사용자 디바이스로부터, 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 단계를 더 포함하고,
    상기 제1 지문 및 상기 제2 지문은 상기 비디오 콘텐츠 아이템이 3차원 비디오 콘텐츠를 포함한다는 표시를 수신하는 것에 응답하여 생성되는, 비일시적 컴퓨터 판독가능 매체.
KR1020197020201A 2016-12-16 2017-09-28 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들 KR102030322B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/382,113 2016-12-16
US15/382,113 US9872056B1 (en) 2016-12-16 2016-12-16 Methods, systems, and media for detecting abusive stereoscopic videos by generating fingerprints for multiple portions of a video frame
PCT/US2017/054075 WO2018111379A1 (en) 2016-12-16 2017-09-28 Methods, systems, and media for detecting stereoscopic videos by generating fingerprints for multiple portions of a video frame

Publications (2)

Publication Number Publication Date
KR20190086781A true KR20190086781A (ko) 2019-07-23
KR102030322B1 KR102030322B1 (ko) 2019-10-08

Family

ID=60043388

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197020201A KR102030322B1 (ko) 2016-12-16 2017-09-28 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들

Country Status (6)

Country Link
US (2) US9872056B1 (ko)
EP (1) EP3513326B1 (ko)
JP (1) JP6619542B1 (ko)
KR (1) KR102030322B1 (ko)
CN (1) CN109923543B (ko)
WO (1) WO2018111379A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10509965B2 (en) 2016-12-15 2019-12-17 Google Llc Methods, systems, and media for detecting two-dimensional videos placed on a sphere in abusive spherical video content by tiling the sphere
EP3752956B1 (en) 2018-05-21 2023-12-13 Google LLC Methods, systems, and media for detecting two-dimensional videos placed on a sphere in abusive spherical video content
KR102494591B1 (ko) * 2018-09-18 2023-02-03 삼성전자주식회사 전자 장치, 그 제어 방법 및 전자 시스템
WO2020095112A1 (en) * 2018-11-09 2020-05-14 Spinview Global Limited Method for inserting advertising content and other media on to one or more surfaces in a moving 360-degree video
KR20200142787A (ko) 2019-06-13 2020-12-23 네이버 주식회사 멀티미디어 신호 인식을 위한 전자 장치 및 그의 동작 방법
US11049285B2 (en) * 2019-06-21 2021-06-29 Disney Enterprises, Inc. Media content validation using geometrically encoded metadata

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2437498A1 (en) * 2010-09-30 2012-04-04 British Telecommunications Public Limited Company Digital video fingerprinting

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080059991A1 (en) * 2006-08-31 2008-03-06 Nissim Romano System and a method for detecting duplications in digital content
US8094872B1 (en) * 2007-05-09 2012-01-10 Google Inc. Three-dimensional wavelet based video fingerprinting
US20090028517A1 (en) * 2007-07-27 2009-01-29 The University Of Queensland Real-time near duplicate video clip detection method
US9984369B2 (en) * 2007-12-19 2018-05-29 At&T Intellectual Property I, L.P. Systems and methods to identify target video content
US20100262488A1 (en) * 2009-04-08 2010-10-14 Google Inc. Policy-based media syndication and monetization
CN103053168B (zh) * 2011-02-01 2015-11-25 松下电器产业株式会社 立体图像拍摄装置和内窥镜
CN102298765B (zh) * 2011-09-20 2013-02-13 武汉大学 图像数字指纹追踪方法
US10134134B2 (en) * 2012-05-24 2018-11-20 Qatar Foundation Method and system for creating depth signatures
CN103312770B (zh) * 2013-04-19 2017-05-03 无锡成电科大科技发展有限公司 一种云平台资源审核的方法
GB2519516B (en) 2013-10-21 2017-05-10 Openwave Mobility Inc A method, apparatus and computer program for modifying messages in a communications network
US9465995B2 (en) * 2013-10-23 2016-10-11 Gracenote, Inc. Identifying video content via color-based fingerprint matching
US9456237B2 (en) * 2013-12-31 2016-09-27 Google Inc. Methods, systems, and media for presenting supplemental information corresponding to on-demand media content
JP6194483B2 (ja) * 2014-03-26 2017-09-13 パナソニックＩｐマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
CN105657576A (zh) * 2015-04-30 2016-06-08 宇龙计算机通信科技(深圳)有限公司 一种水印嵌入方法和装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2437498A1 (en) * 2010-09-30 2012-04-04 British Telecommunications Public Limited Company Digital video fingerprinting

Also Published As

Publication number Publication date
KR102030322B1 (ko) 2019-10-08
US9872056B1 (en) 2018-01-16
US20180176619A1 (en) 2018-06-21
EP3513326B1 (en) 2022-11-02
JP6619542B1 (ja) 2019-12-11
CN109923543B (zh) 2021-11-05
EP3513326A1 (en) 2019-07-24
US10499097B2 (en) 2019-12-03
WO2018111379A1 (en) 2018-06-21
CN109923543A (zh) 2019-06-21
JP2020513705A (ja) 2020-05-14

Similar Documents

Publication Publication Date Title
KR102030322B1 (ko) 비디오 프레임의 다수의 부분들에 대한 지문들을 생성함으로써 입체 비디오들을 검출하기 위한 방법들, 시스템들, 및 매체들
KR101773885B1 (ko) 이미지 인증을 이용한 증강현실 객체 제공 방법 및 제공 서버
CN108108012B (zh) 信息交互方法和装置
CN104618803B (zh) 信息推送方法、装置、终端及服务器
US10936877B2 (en) Methods, systems, and media for detecting two-dimensional videos placed on a sphere in abusive spherical video content by tiling the sphere
JP7231638B2 (ja) 映像に基づく情報取得方法及び装置
EP3616402A1 (en) Methods, systems, and media for generating and rendering immersive video content
US11064250B2 (en) Presence and authentication for media measurement
EP3528151A1 (en) Method and apparatus for user authentication
CN117459662A (zh) 一种视频播放方法、识别方法、装置、设备及存储介质
US10904586B2 (en) Methods, systems, and media for detecting and transforming rotated video content items
US20210099507A1 (en) Client-end enhanced view prediction for multi-view video streaming exploiting pre-fetched data and side information
WO2018000610A1 (zh) 一种基于图像类型判断的自动播放方法和电子设备
CN108875315B (zh) 变换指纹以检测未授权媒体内容项的方法、系统和介质
US9703267B2 (en) Method and apparatus for visually authenticating photos
US10909381B2 (en) Methods, systems, and media for detecting two-dimensional videos placed on a sphere in abusive spherical video content
CN116501907A (zh) 一种图像数据处理方法、装置、设备以及可读存储介质
JP2024512577A (ja) 動画コンテンツアイテムの知覚品質インジケータを決定するための方法、システム、および媒体

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant