JP2016537747A - リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体 - Google Patents

リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体 Download PDF

Info

Publication number
JP2016537747A
JP2016537747A JP2016543310A JP2016543310A JP2016537747A JP 2016537747 A JP2016537747 A JP 2016537747A JP 2016543310 A JP2016543310 A JP 2016543310A JP 2016543310 A JP2016543310 A JP 2016543310A JP 2016537747 A JP2016537747 A JP 2016537747A
Authority
JP
Japan
Prior art keywords
video
terminal device
summary information
video file
content summary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016543310A
Other languages
English (en)
Other versions
JP6117446B2 (ja
Inventor
▲潔▼ ▲劉▼
▲潔▼ ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Publication of JP2016537747A publication Critical patent/JP2016537747A/ja
Application granted granted Critical
Publication of JP6117446B2 publication Critical patent/JP6117446B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25841—Management of client data involving the geographical location of the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25875—Management of end-user data involving end-user authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8352—Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本発明はリアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体に関し、該方法は、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、前記ビデオファイルのコンテンツ要約情報を特定するステップと、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含む。該方案は所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上することができる。【選択図】図１

Description

相互参照
本願は、出願番号がＣＮ２０１４１０４１２５５９．５であって、出願日が２０１４年８月２０日である中国特許出願に基づいて優先権を主張し、当該中国特許出願のすべての内容を本願に援用する。
本発明はネットワーク技術分野に関し、特に、リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置およびサーバ、端末装置に関している。
通信技術の快速発展に従い、端末装置は知能化になりその使用も幅広くなっている。ユーザは、端末装置を用いて直ちに友達とリアルタイム・ビデオを共有して見ることによって様々な素晴らしいイベントに参与したくなり、今現在のネットワーク帯域及びサーバもビデオのリアルタイム的の伝送に有力な技術的支持を提供している。
従来技術において、リアルタイム・ビデオの提供方法は次のとおりである。第１の端末装置は先ずサーバを介して第２の端末装置と通信接続を作成し、そして、第１の端末装置はサーバを介して撮像されたビデオをリアルタイムで第２の端末装置に伝送することによって、第１の端末装置を用いる第１のユーザと端末装置を用いる第２のユーザとの間のリアルタイム・ビデオの共有を実現する。
しかしながら、上記の方法において、第２の端末装置が第１の端末装置と通信接続を構築する前に、ビデオの具体的なコンテンツを取得できない。第１の端末装置と通信接続を作成した後、ひいては、リアルタイム・ビデオを長時間受け付けた後でなければ、ビデオの具体的なコンテンツを取得できない。もし該リアルタイム・ビデオのコンテンツが第２のユーザの所望のものではないと、今回の通信接続をオフにする必要がある。これは、ネットワーク資源の無駄遣いを招くばかりでなく、ユーザ体験度に影響する恐れがある。他方では、第１の端末装置から提供されるリアルタイム・ビデオは、それと通信接続を構築している第２の端末装置にしか提供できず、実際に該リアルタイム・ビデオを見ようとするユーザはそれを見ることができないので、同様にユーザ体験度を影響する恐れがある。
従来技術における問題点を解消するために、本発明はリアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置およびサーバ、端末装置を提供する。
本発明の実施形態の第１の局面におけるリアルタイム・ビデオの提供方法は、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、
前記ビデオファイルのコンテンツ要約情報を特定するステップと、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含む。
第１の局面を組み合わせて、第１の局面の第１種の実現可能な方式において、前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップは、
前記第１のユーザアカウントに対応するビデオファイルを検索し、
前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、
前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するステップを、含む。
第１の局面を組み合わせて、第１の局面の第２種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップは、
前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するステップと、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るステップと、
前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面の第３種の実現可能な方式において、前記方法はさらに、
第１の設定個数のシーンを特定するステップと、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するステップと、
前記第１の設定枚数のイメージから第２の選定特徴を抽出するステップと、
前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面的第４種の実現可能な方式において、前記方法はさらに、
第２の設定個数のイベントを特定するステップと、
イベント毎に少なくとも、第４の設定数の邪魔ビデオを少なくとも含む第３の設定数のビデオを収集するステップと、
前記第３の設定個数のビデオから第３の選定特徴を抽出するステップと、
前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面の第５種の実現可能な方式において、前記方法はさらに、
第４の設定個数の人物を特定するステップと、
人物毎に少なくとも第３の設定枚数のイメージを収集するステップと、
前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するステップと、
前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るステップと、を含む。
第１の局面によれば、第１の局面の第６種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
前記第１の端末装置から送信された地理位置情報を受信するステップと、
前記コンテンツ要約情報に前記地理位置情報を付加するステップと、を含む。
第１の局面を組み合わせて、第１の局面の第７種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップは、
設定周期で前記ビデオファイルのコンテンツ要約情報を特定するステップを含んでおり、
前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する。
第１の局面を組み合わせて、第１の局面の第８種の実現可能な方式において、前記方法はさらに、
前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するステップと、
変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
本発明の実施例の第２の局面におけるリアルタイム・ビデオの提供方法は、
サーバからプッシュされたコンテンツ要約情報を受信するステップと、
前記コンテンツ要約情報を表示するステップと、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオファイルを受信するステップと、を含んでおり、
前記コンテンツ要約情報は、サーバが第１のユーザアカウントに対応するビデオファイルに基づいて特定され、前記ビデオファイルは前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られる。
第２の局面を組み合わせて、第２の局面の第１種の実現可能な方式において、前記方法はさらに、
第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するステップと、
前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバに前記ビデオファイルを変更後の端末装置に送信させると共に再生するビデオフレームのビデオ識別子を指定させる、又は、変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
本発明の実施例の第３の局面におけるリアルタイム・ビデオの提供装置は、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するための第１の受信手段と、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するための記憶手段と、
前記ビデオファイルのコンテンツ要約情報を特定するための第１の特定手段と、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するためのプッシュ手段と、
前記ビデオ取得請求を受信するための第２の受信手段と、
前記ビデオファイルを前記第２の端末装置に送信するための第１の送信手段と、を含む。
第３の局面を組み合わせて、第３の局面の第１種の実現可能な方式において、前記記憶手段は、
前記第１のユーザアカウントに対応するビデオファイルを検索するための検索サブ手段と、
前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するための記憶サブ手段と、を含む。
第３の局面を組み合わせて、第３の方面の第２種の実現可能な方式において、前記第１の特定手段は、
前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するための抽出サブ手段と、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るための認識サブ手段と、
前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るための組合せサブ手段と、を含む。
第３の局面を組み合わせた第２種の実現可能な方式において、第３の方面の第３種の実現可能な方式において、前記装置はさらに、
第１の設定個数のシーンを特定するための第２の特定手段と、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するための第１の収集手段と、
前記第１の設定枚数のイメージから第２の選定特徴を抽出するための第１の抽出手段と、
前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るための第１のトレーニング手段と、を含む。
第３の局面の第２種の実現可能な方式を組み合わせた、第３の局面の第４種の実現可能な方式において、前記装置はさらに、
第２の設定個数のイベントを特定するための第３の特定手段と、
イベント毎に少なくとも、第４の設定数の邪魔ビデオを少なくとも含む第３の設定数のビデオを収集するための第２の収集手段と、
前記第３の設定個数のビデオから第３の選定特徴を抽出するための第２の抽出手段と、
前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るための第２のトレーニング手段と、を含む。
第３の局面の第２種の実現可能な方式を組み合わせた、第３の局面の第５種の実現可能な方式において、前記装置はさらに、
第４の設定個数の人物を特定するための第４の特定手段と、
人物毎に少なくとも第３の設定枚数のイメージを収集するための第３の収集手段と、
前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するための第３の抽出手段と、
前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るための第３のトレーニング手段と、含む。
第３の局面を組み合わせて、第３の局面の第６種の実現可能な方式において、前記装置はさらに、
前記第１の端末装置から送信された地理位置情報を受信する第３の受信手段と、
前記コンテンツ要約情報に前記地理位置情報を付加するための付加手段と、を含む。
第３の局面を組み合わせて、第３の局面の第７種の実現可能な方式において、前記第１の特定手段は、
設定周期で前記ビデオファイルのコンテンツ要約情報を特定するための特定サブ手段を含み、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する。
第３の局面を組み合わせて、第３の局面の第８種の実現可能な方式において、前記装置はさらに、
前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するための第４の受信手段と、
変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含む。
本発明の実施例の第４の局面におけるリアルタイム・ビデオの提供装置は、
サーバからプッシュされたコンテンツ要約情報を受信するための第１の受信手段と、
前記コンテンツ要約情報を表示するための表示手段と、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するための第１の送信手段と、
前記ビデオファイルを受信するための第２の受信手段と、を含んでおり、
前記コンテンツ要約情報はサーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られる。
第４の局面を組み合わせて、第４の局面の第１種の実現可能な方式において、前記装置はさらに、
第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するための第３の受信手段と、
前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバに前記ビデオファイルを変更後の端末装置に送信させるとともに再生するビデオフレームのビデオ識別子を指定させる、又は、変更後の端末装置に前記ビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含む。
本発明の実施例の第５の局面におけるサーバは、
プロセッサと、
プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
前記プロセッサは、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶し、
前記ビデオファイルのコンテンツ要約情報を特定し、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信し、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信する。
本発明の実施例の第６の局面における端末装置は、
プロセッサと、
プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
前記プロセッサは、
サーバからプッシュされたコンテンツ要約情報を受信し、前記コンテンツ要約情報は、第１のユーザアカウントに対応するビデオファイルに基づいてサーバにより特定され、前記ビデオファイルは、第１の端末装置から前記サーバに送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに、前記フレーム識別子に基づいて前記ビデオフレームを記憶することによって、得られ、
前記コンテンツ要約情報を表示し、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信し、
前記ビデオファイルを受信する。
本発明の実施例に係る技術案は、以下の有益な効果を有する。第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームをサーバにおいてリアルタイムで受信し、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定する。第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする。第２の端末装置はコンテンツ要約情報を表示するとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザはコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択し、第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上することができる。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよい。このようにして、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを特定でき、第２のユーザが第２の端末装置と第１の端末装置と通信接続を構築しているとともに該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がなく、これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上できる。
以上の一般的な記述及び以下の詳細な記述は、例示のものに過ぎず、本開示を限定するものではないと理解すべきである。
ここでの図面は、本明細書の一部として、本発明に適切な実施例を示し、明細書と合わせて本発明の原理を解釈する。
例示的な実施例における実行本体がサーバであるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例におけるリアルタイム・ビデオの提供システムの構造図である。
例示的な実施例における実行本体が端末装置であるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例における図１に対応するリアルタイム・ビデオの提供装置を示すブロック図である。
例示的な実施例における図３に対応するリアルタイム・ビデオの提供装置を示すブロック図である。
例示的な実施例における端末装置を示すブロック図である。
例示的な実施例におけるサーバのブロック図である。
ここで、図面に示された例示的な実施例を詳細に説明する。以下の内容において、図面を言及するとき、特に説明しない限り、異なる図面における同じ数字が同一または同等の要素を示す。以下の例示的な実施例に記載の実施の形態は、本発明と一致するあらゆる実施の形態を代表するわけではない。逆に、それらは、添付された特許請求の範囲に詳細に記載される、本発明の一部の方面と一致する装置及び方法の例にすぎない。
図１は例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。該リアルタイム・ビデオの提供方法はリアルタイム・ビデオの提供システムに基づいて実現され得る。図２に示すように、リアルタイム・ビデオの提供システムの構成は、第１の端末装置２１、サーバ２２及び第２の端末装置２３を含み、サーバ２２には複数の第１の端末装置２１と第２の端末装置２３が接続され得る。図面は、１つの第１の端末装置２１と２つの第２の端末装置２３だけを示しており、サーバ２２が無線ネットワークを介して第１の端末装置２１、第２の端末装置２３と接続されている。ここに、無線ネットワークの接続を例として説明を行っているが、実際的な応用において、これらの装置同士間が有線接続されてもよく、本発明ではこれを限定しない。第１の端末装置２１はビデオをリアルタイムでアップロードでき、サーバ２２は受信したビデオを記憶するとともに、ビデオのコンテンツ要約情報を第２の端末装置２３にプッシュする。図１に示すように、該リアルタイム・ビデオの提供方法はサーバに応用され、サーバがそれぞれの第１の端末装置に対して該方法実行し得る。該方法は以下のステップを含む。
ステップＳ１１において、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信する。
第１のユーザは、予めサーバに第１のユーザアカウントを登録し得、第１のユーザが第１の端末装置を用いてビデオを撮像すると共に撮像されたビデオをリアルタイムで共有しようとする場合、サーバに第１のユーザアカウントを登録してから、第１の端末装置が撮像されたそれぞれのビデオフレームをリアルタイムで送信するとともに、ビデオフレームに第１のユーザアカウント及びフレーム識別子を載せることができる。
ここで、ビデオフレームのフレーム識別子は多種あり得、以下、２種を例として説明を行う。１種は第１の端末装置が撮像の際にビデオフレーム毎に与える番号であり、他種は第１の端末装置が撮像の際に記録した撮像時間である。
サーバは、第１の端末装置から送信されたビデオフレームをリアルタイムで受信できる。
ステップＳ１２において、フレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶する。
サーバは、複数の第１の端末装置から送信されたビデオフレームを同時に受信し、ビデオフレーム毎に該ビデオフレームに載せられた第１のユーザアカウントに対応するビデオファイルを検索してから、該ビデオフレームを、対応するビデオファイルに記憶することができる。
ステップＳ１３において、ビデオファイルのコンテンツ要約情報を特定する。
コンテンツ要約情報は、対応するビデオファイルのメインコンテンツを要約できる。
ステップＳ１４において、コンテンツ要約情報を、第１のユーザアカウントに関連付けた第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、第２の端末装置にコンテンツ要約情報を表示させると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。
一般的には、第１のユーザアカウントは複数の第２のユーザアカウントに関連付けられ、アプリケーションによっては関連付け方式も異なっている。例えば、ＱＱ（チャットアプリケーション）としては、第１のユーザアカウントは複数のフレンドを設定でき、これらのフレンドの何れも第１のユーザアカウントに関連付けた第２のユーザアカウントである。さらに、例えば、微信（ｗｅｃｈａｔ）としては、第１のユーザアカウントは仲間（仲良の範囲）を設定でき、仲間中のユーザアカウントが第１のユーザアカウントに関連付けた第２のユーザアカウントである。
サーバは、第１のユーザアカウントに関連付けられている第２のユーザアカウントを取得し、そして、特定されたコンテンツ要約情報を第２のユーザアカウントの登録した第２の端末装置にプッシュすることができ、該コンテンツ要約情報をリンクに付加したまま第２の端末装置にプッシュしてもよいし、該コンテンツ要約情報を第２の端末装置に直接的にプッシュしてもよい。第２の端末装置は、該コンテンツ要約情報を表示して第２のユーザに提供し、サーバプッシュ方式によっては第２の端末装置の表示方式も異なっている。例えば、リンク形式にて該コンテンツ要約情報を表示してもよいし、ボタン形式にて該コンテンツ要約情報を表示してもよい。
第２のユーザが該ビデオを見ようとしない場合、該コンテンツ要約情報を無視でき、第２のユーザが該ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置がマウス、キーボード等の外接装置に接続されている場合、第２のユーザは、外接装置を介して該コンテンツ要約情報を選択できる。第２の端末装置にはタッチパネルが設置されている場合、第２のユーザは指又はスタイラスペンで該コンテンツ要約情報を直接的に選択することができる。
第２の端末装置は、該コンテンツ要約情報が選択されたことが検出されると、第２のユーザが該ビデオを見ようとすることを確定すると共に、サーバにビデオ取得請求を送信することによって、サーバが該ビデオファイルを送信するよう請求する。
ステップＳ１５において、ビデオ取得請求を受けて、ビデオファイルを第２の端末装置に送信する。
該方案において、サーバは第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信する。フレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定し、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュし、第２の端末装置がコンテンツ要約情報を表示すると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザは、コンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよく、これにより、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを確保し、第２のユーザが第２の端末装置で第１の端末装置と通信接続を作成し該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。このようにして、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上できる。
選択的に、Ｓ１２におけるフレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するステップは、
第１のユーザアカウントに対応するビデオファイルを検索するステップと、
第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶するステップと、
第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、第１のユーザアカウントに対応するビデオファイルを作成して、作成されたビデオファイルにビデオフレームを記憶するステップと、を含む。
サーバは第１のユーザアカウントとフレーム識別子が付けたビデオフレームを受信した後、第１のユーザアカウントに対応するビデオファイルを検索し、該ビデオフレームが第１の端末装置により撮像された第１のビデオフレームである場合、サーバに第１のユーザアカウントに対応するビデオファイルがまだ作成されておらず、このとき、第１のユーザアカウントに対応するビデオファイルを検索できず、先ずビデオファイルを作成して、次いで、該ビデオフレームを作成されたビデオファイルに記憶しなければならない。該ビデオフレームが第１の端末装置により撮像された第１のビデオフレームではない場合、サーバに既に第１のユーザアカウントに対応するビデオファイルが作成されており、このとき、第１のユーザアカウントに対応するビデオファイルを検索して、ヒットされたビデオファイルに該ビデオフレームを直接的に記憶すればよい。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップは、
ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するステップと、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識することによって、それぞれのソーターに対応する認識結果及びその信頼度を得るステップと、
第１のユーザアカウントと信頼度が最高の認識結果を組合わせてビデオファイルのコンテンツ要約情報を得るステップと、を含む。
第１のユーザアカウントに対応するビデオファイルは、通常に、複数のビデオフレームを含み、先ず、ビデオフレームから抽出する必要がある第１の選定特徴を特定し、当該第１の選定特徴は、予め作成された複数のソーターが認識を行う際に必要な特徴である。次いで、ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出する。予め作成された複数のソーターを用いて抽出された第１の選定特徴を認識することによって、認識結果及び信頼度を得られる。
ここで、ソーターは、シーンソーター、イベントソーター、顔ソーター等を含み得る。仮に、シーンソーターに対して、抽出する必要のある特徴が色ヒストグラム特徴であり、イベントソーターに対して、抽出する必要のある特徴がＳＩＦＴ（Ｓｃａｌｅ−Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）特徴であり、顔ソーターに対して、抽出する必要のある特徴がＬＢＰ（Ｌｏｃａｌ Ｂｉｎａｒｙ Ｐａｔｔｅｒｎｓ）特徴であるとすれば、第１の選定特徴は色ヒストグラム特徴、ＳＩＦＴ特徴及びＬＢＰ特徴であり得る。
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識した後、それぞれのソーターの何れも認識結果及び該認識結果の信頼度を得られる。サーバは取得信頼度が最高の認識結果を取得してから、第１のユーザアカウント及び選択された信頼度が最高の認識結果を組み合わせて、ビデオファイルのコンテンツ要約情報を得て、また、信頼度が０〜１という範囲内の任意の数であり得るがこれに限られない。例えば、シーンソーターの認識結果はＡであり、信頼度が８０％であり、イベントソーターの認識結果がＢであり、信頼度が５０％であり、顔ソーターの認識結果が俳優Ｃであり、信頼度が９０％である場合、最終的に得られたコンテンツ要約情報は「第１のユーザアカウントが俳優Ｃと出会った」である。ここに、１つの組合せにてビデオファイルのコンテンツ要約情報を得る方式だけを説明しているが、他の多くの組合せ方式もあり、ここに一々詳しく説明しない。
以下、シーンソーター、イベントソーター、顔ソーターという３種のソーターの作成過程を説明する。
第１種に、シーンソーターについては、その作成過程は、
第１の設定個数のシーンを特定するステップと、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するステップと、
第１の設定枚数のイメージから第２の選定特徴を抽出するステップと、
第２の選定特徴に基づいてトレーニングしてシーンソーターを得るステップと、を含む。
予め第１の設定個数のシーン、例えば、バスケットボール試合としては出現可能なシーンがフロントコートバックボード、バックコートバックボード、アシスト、反則、カット等を特定でき、他のイベントにおいて、他のシーンがあり得、ここに、一々に列挙して説明しない。シーン毎に第１の設定枚数のイメージを収集しなければならず、収集されたイメージが多いほど、作成されるシーンソーターの正確度が高くなり、第１の設定枚数のイメージが第２の設定枚数の邪魔イメージを含まなければならない。第１の設定枚数のイメージから第２の選定特徴、例えば、色ヒストグラム特徴等を選択し、選択された特徴が多いほど作成されるシーンソーターの正確度が高くなる。第２の選定特徴に基づいてトレーニングしてシーンソーターを得られる。
第２種に、イベントソーターについて、その作成過程は、
第２の設定個数のイベントを特定するステップと、
イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するステップと、
第３の設定個数のビデオから第３の選定特徴を抽出するステップと、
第３の選定特徴に基づいてトレーニングしてイベントソーターを得るステップと、を含む。
予め第２の設定個数のイベント、例えば、バスケットボール試合、フットボール試合、映画を撮影すること等を特定できる。イベント毎に第３の設定個数のビデオを収集しなければならず、収集されたビデオが多いほど作成されるイベントソーターの正確度が高くなる。第３の設定個数のビデオはさらに第４の設定個数の邪魔ビデオを含まなければならない。第３の設定個数のビデオから第３の選定特徴、例えば、ＳＩＦＴ特徴等を選択し、選択された特徴が多いほど作成されるイベントソーターの正確度が高くなる。第３の選定特徴に基づいてトレーニングしてイベントソーターを得られる。
第３種に、顔ソーターについて、その作成過程は、
第４の設定個数の人物を特定するステップと、
人物毎に少なくとも第３の設定枚数のイメージを収集するステップと、
第３の設定枚数のイメージから顔領域を検出すると共に、第４の選定特徴を抽出するステップと、
第４の選定特徴に基づいてトレーニングして顔ソーターを得るステップと、を含む。
予め第４の設定個数の人物を特定し、人物毎に第３の設定枚数のイメージを収集し、収集されたイメージが多いほど作成される顔ソーターの正確度が高くなり、第３の設定枚数のイメージから第４の選定特徴、例えば、ＬＢＰ特徴等を選択し、選択された特徴が多いほど作成される顔ソーターの正確度が高くなり、第４の選定特徴に基づいてトレーニングして顔ソーターを得られる。
ここで、上記の第１の設定個数、第２の設定個数、第３の設定個数、第１の設定枚数、第２の設定枚数、第３の設定枚数、第１の選定特徴、第２の選定特徴、第３の選定特徴及び第４の選定特徴は実際的な必要に応じて選択され得る。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップの後、Ｓ１４において第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップの前に、前記方法はさらに、
第１の端末装置から送信された地理位置情報を受信するステップと、
コンテンツ要約情報に地理位置情報を付加するステップと、を含む。
第１の端末装置は地理位置情報、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ：グローバル・ポジショニング・システム）情報等を取得して該地理位置情報をサーバに送信することができ、サーバはコンテンツ要約情報に地理位置情報を付加し得る。
上記の例を引き続き、地理位置情報がＤであるとすれば、コンテンツ要約情報に該地理位置情報Ｄを加えて得られたコンテンツ要約情報は「第１のユーザアカウントがＤで俳優Ｃと出会った」であり、これにより、リアルタイム・ビデオの情報をより精確に記述することができる。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップは、
設定周期でビデオファイルのコンテンツ要約情報を特定するステップを含む。
ビデオファイルに１つのビデオフレームを加えた後、ビデオファイルのコンテンツ要約情報は変更しない可能性があるため、周期を設定することによって、ビデオファイルのコンテンツ要約情報を特定し得、設定周期が実際的な必要に応じて設定され得、例えば、５秒間、１０秒間、１５秒間等に設定され得る。
Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップの後、Ｓ１４において第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップの前に、前記方法はさらに、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定するステップと、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップを実行するステップと、を含む。
相応に、サーバは第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする前に、取りあえず今現在の設定周期で特定されたコンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、一致であると判定された場合、第２の端末装置に今現在の設定周期で特定されたコンテンツ要約情報をプッシュする必要はなく、不一致であると判定された場合、第２の端末装置に今現在の設定周期で特定されたコンテンツ要約情報をプッシュする。
該判定過程を加えた後、第２の端末装置に繰返し同一のコンテンツ要約情報をプッシュすることを回避することによって、ユーザ体験度を向上できる。
選択的に、前記方法はさらに、
第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するステップと、
変更後の端末装置にビデオファイルを送信すると共に、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
第２の端末装置を用いる第２のユーザは、時には端末装置を切り替える必要があり、例えば、通常に応接間にあるテレビでビデオを見るが、一旦寝室でビデオを見ようとすると、端末装置を切り替えなければならない。第２の端末装置はサーバに装置変更メッセージを送信し、サーバは該装置変更メッセージを受信した後、第２の端末装置へのビデオファイルの送信を停止し、変更後の端末装置にビデオファイルを送信するように変更するとともに、再生するビデオフレームのフレーム識別子を指定することによって、ユーザが引き続いてビデオを見ることを保証するでき、ユーザ体験度を向上できる。
図３は例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。図３に示すように、該方法は端末装置に応用され、該端末装置が図２に示すリアルタイム・ビデオの提供システムにおける第２の端末装置として、以下のステップを含む。
ステップＳ３１において、サーバプからプッシュされたコンテンツ要約情報を受信し、コンテンツ要約情報は、サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたのである。ビデオファイルは、サーバが第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに、フレーム識別子に基づいてビデオフレームを記憶して得られたのである。
ステップＳ３２において、コンテンツ要約情報を表示する。
ステップＳ３３において、コンテンツ要約情報が選択されたことを検出した場合、サーバにビデオファイルを取得するためのビデオ取得請求を送信する。
ステップＳ３４において、ビデオファイルを受信する。
該方案において、サーバは、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定し、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュし、第２の端末装置がコンテンツ要約情報を表示すると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信し、サーバがビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザはコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよく、これにより、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを保証し、第２のユーザが第２の端末装置と第１の端末装置とが通信接続を作成して該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上することができる。
選択的に、第２の端末装置を使用する第２のユーザは時には端末装置を切り替える必要があり、例えば、通常に応接間にあるテレビでビデオを見るが、一旦寝室でビデオを見ようとすると、この場合、端末装置を切り替えなければならない。切換方法は以下の２種を含み得る。
第１種の方式において、第２のユーザからの、変更後の端末装置を指定する装置変更指示を受信する。
サーバに変更後の端末装置を指定する装置変更メッセージを送信することによって、サーバからビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
第２の端末装置はリアルタイム・ビデオを再生する場合、装置変更機能を提供し得る。第２のユーザは該機能を選択した後、第２の端末装置は変更後の端末装置を指示する装置変更指示を受ける。第２の端末装置はサーバに変更後の端末装置を指定する装置変更メッセージを送信し、サーバは該装置変更メッセージを受けた後、ビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定することができる。このようにして、ユーザが引き続いてビデオを見ることを保証し、ユーザ体験度を向上することができる。
第２種の方式において、第２のユーザからの、変更後の端末装置を指定する装置変更指示を受ける。
変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
第２の端末装置はリアルタイム・ビデオを再生する場合、装置変更機能を提供できる。第２のユーザが該機能を選択した後、第２の端末装置は変更後の端末装置を指示する装置変更指示を受信し得、第２の端末装置が自身で保存しているビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定することができる。このようにして、ユーザが引き続いてビデオを見ることを保証し、ユーザ体験度を向上することができる。
図４は例示的な実施例における他のリアルタイム・ビデオの提供方法を示すフローチャートである。該方法は、図２に示すリアルタイム・ビデオの提供システムに用いられ、図４に示すように、前記方法は以下のステップを含む。
ステップＳ４１において、第１の端末装置はサーバに第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで送信する。
ステップＳ４２において、サーバは第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、第１のユーザアカウントに対応するビデオファイルを検索し、第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶し、第１のユーザアカウントに対応するビデオファイルがヒットされていない場合、第１のユーザアカウントに対応するビデオファイルを作成し、作成されたビデオファイルにビデオフレームを保存する。
ステップＳ４３において、サーバは設定周期でビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出し、予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、ソーター毎に対応する認識結果及びその信頼度を得て、第１のユーザアカウントと信頼度が最高の認識結果とを組み合わせて、ビデオファイルのコンテンツ要約情報を得る。
ステップＳ４４において、第１の端末装置はサーバに地理位置情報を送信する。
ステップＳ４５において、サーバは、第１の端末装置から送信された地理位置情報を受信し、コンテンツ要約情報に地理位置情報を付加する。
ステップＳ４６において、サーバは、コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定した場合、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする。
第２の端末装置は複数あり得る。以下、１つの第２の端末装置を例として説明を行う。
ステップＳ４７において、第２の端末装置はコンテンツ要約情報を表示するとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。
ステップＳ４８において、サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。
ステップＳ４９において、第２の端末装置はビデオファイルを再生する。
ステップＳ５０において、第２の端末装置は、第２のユーザからの装置変更指示を受けて、サーバに装置変更メッセージを送信し、装置変更指示と装置変更メッセージが変更後の端末装置を指定する。
ステップＳ５１において、サーバは、第２の端末装置から送信された装置変更メッセージを受信し、変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
ステップＳ５２において、変更後の端末装置はビデオファイルを受信するとともに、指定されたフレーム識別子対応するビデオフレームからビデオファイルを再生する。
該方案において、第２の端末装置がコンテンツ要約情報を表示でき、第２のユーザがコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的な内容を得られるため、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択して、第２の端末装置がコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよい。このようにして、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを保証し、第２のユーザは第２の端末装置と第１の端末装置とが通信接続を作成して該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上することができる。
図５は例示的な実施例における図１に示すリアルタイム・ビデオの提供方法に対応するリアルタイム・ビデオの提供装置を示すブロック図である。図５を参照して、該装置は、第１の受信手段５１、記憶手段５２、第１の特定手段５３、プッシュ手段５４、第２の受信手段５５、及び第１の送信手段５６を含む。
該第１の受信手段５１は、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するように構成されている。
該記憶手段５２は、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するように構成されている。
該第１の特定手段５３は、ビデオファイルのコンテンツ要約情報を特定するように構成されている。
該プッシュ手段５４は、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュすることによって、第２の端末装置にコンテンツ要約情報を表示させるとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信するように構成されている。
該第２の受信手段５５は、ビデオ取得請求を受信するように構成されている。
該第１の送信手段５６は、ビデオファイルを第２の端末装置に送信するように構成されている。
選択的に、記憶手段５２は検索サブ手段と記憶サブ手段を含む。
該検索サブ手段は、第１のユーザアカウントに対応するビデオファイルを検索するように構成されている。
該記憶サブ手段は、第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶する一方、第１のユーザアカウントに対応するビデオファイルがヒットされていない場合、第１のユーザアカウントに対応するビデオファイルを作成し、作成されたビデオファイルにビデオフレームを保存するように構成されている。
選択的に、第１の特定手段５３は抽出サブ手段、認識サブ手段、及び組合せサブ手段を含む。
該抽出サブ手段は、ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するように構成されている。
該認識サブ手段は、予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るように構成されている。
該組合せサブ手段は、第１のユーザアカウントと信頼度が最高の認識結果とを組み合わせて、ビデオファイルのコンテンツ要約情報を得るように構成されている。
選択的に、上記の装置はさらに第２の特定手段、第１の収集手段、第１の抽出手段、及び第１のトレーニング手段を含む。
該第２の特定手段は、第１の設定個数のシーンを特定するように構成されている。
該第１の収集手段は、シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するように構成されている。
該第１の抽出手段は、第１の設定枚数のイメージから第２の選定特徴を抽出するように構成されている。
該第１のトレーニング手段は、第２の選定特徴に基づいてトレーニングしてシーンソーターを得るように構成されている。
選択的に、上記の装置はさらに第３の特定手段、第２の収集手段、第２の抽出手段、及び第２のトレーニング手段を含む。
該第３の特定手段は、第２の設定個数のイベントを特定するように構成されている。
該第２の収集手段は、イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するように構成されている。
該第２の抽出手段は、第３の設定個数のビデオから第３の選定特徴を抽出するように構成されている。
該第２のトレーニング手段は、第３の選定特徴に基づいてトレーニングしてイベントソーターを得るように構成されている。
選択的に、上記の装置はさらに第４の特定手段、第３の収集手段、第３の抽出手段、及び第３のトレーニング手段を含む。
該第４の特定手段は、第４の設定個数の人物を特定するように構成されている。
該第３の収集手段は、人物毎に少なくとも第３の設定枚数のイメージを収集するように構成されている。
該第３の抽出手段は、第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するように構成されている。
該第３のトレーニング手段は、第４の選定特徴に基づいてトレーニングして顔ソーターを得るように構成されている。
選択的に、上記の装置はさらに第３の受信手段及び付加手段を含む。
該第３の受信手段は、第１の端末装置から送信された地理位置情報を受信するように構成されている。
該付加手段は、コンテンツ要約情報に地理位置情報を付加するように構成されている。
選択的に、第１の特定手段５３は特定サブ手段を含む。
該特定サブ手段は、設定周期でビデオファイルのコンテンツ要約情報を特定し、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、コンテンツ要約情報を、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する、ように構成されている。
選択的に、上記の装置はさらに第４の受信手段及び第２の送信手段を含む。
該第４の受信手段は、第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するように構成されている。
該第２の送信手段は、変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するように構成されている。
図６は例示的な実施例における図３に示すリアルタイム・ビデオの提供方法に対応するリアルタイム・ビデオの提供装置を示すブロック図である。図６を参照して、該装置は、第１の受信手段６１、表示手段６２、第１の送信手段６３、及び第２の受信手段６４を含む。
該第１の受信手段６１は、サーバからプッシュされたコンテンツ要約情報を受信するように構成されており、コンテンツ要約情報は、サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、ビデオファイルは、サーバが、第１の端末装置から送信された第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともにフレーム識別子に基づいてビデオフレーム記憶して得られたものである。
該表示手段６２は、コンテンツ要約情報を表示するように構成されている。
該第１の送信手段６３は、コンテンツ要約情報が選択されたことが検出されると、サーバに、ビデオファイルを取得するためのビデオ取得請求を送信することによって、サーバにビデオファイルを送信させるように構成されている。
該第２の受信手段６４は、ビデオファイルを受信するように構成されている。
選択的に、上記の装置は、さらに第３の受信手段及び第２の送信手段を含む。
該第３の受信手段は、第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するように構成されている。
該第２の送信手段は、サーバに変更後の端末装置を指定する装置変更メッセージを送信することによって、サーバがビデオファイルを変更後の端末装置に送信するとともに再生するビデオフレームのフレーム識別子を指定する、又は、変更後の端末装置にビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するように構成されている。
上記実施例に係る装置に関しては、その各モジュールが操作を実行する具体的な方式は既に該方法に係る実施例において詳細に記載されているので、ここに詳細に説明しない。
図７は例示的な実施例におけるリアルタイム・ビデオの提供に用いられる装置８００を示すブロック図である。例えば、装置８００は携帯電話、コンピュータ、デジタル放送端末、メッセージ受発信手段、ゲームコンソール、タブレットデバイス、医療機器、フィットネス機器、パーソナルデジタルアシスタント等であってもよい。
図７を参照して、装置８００は、プロセスアセンブリ８０２、メモリ８０４、電源アセンブリ８０６、マルチメディアアセンブリ８０８、オーディオアセンブリ８１０、入力／出力（Ｉ／Ｏ）インターフェイス８１２、センサアセンブリ８１４、及び通信アセンブリ８１６のような一つ以上のアセンブリを含んでよい。
プロセスアセンブリ８０２は、一般的には装置８００の全体の操作を制御するものであり、例えば、表示、電話呼び出し、データ通信、カメラ操作、及び記録操作と関連する操作を制御する。プロセスアセンブリ８０２は、一つ以上のプロセッサ８２０を含み、これらによって命令を実行することにより、上記の方法の全部、或は一部のステップを実現するようにしてもよい。なお、プロセスアセンブリ８０２は、一つ以上のモジュールを含み、これらによってプロセスアセンブリ８０２と他のアセンブリの間のインタラクションを容易にするようにしてもよい。例えば、プロセスアセンブリ８０２は、マルチメディアモジュールを含み、これらによってマルチメディアアセンブリ８０８とプロセスアセンブリ８０２の間のインタラクションを容易にするようにしてもよい。
メモリ８０４は、各種類のデータを記憶することにより装置８００の操作を支援するように構成される。これらのデータの例は、装置８００において操作されるいずれのアプリケーションプログラム又は方法の命令、連絡対象データ、電話帳データ、メッセージ、画像、ビデオ等を含む。メモリ８０４は、いずれの種類の揮発性メモリ、不揮発性メモリ記憶デバイスまたはそれらの組み合わせによって実現されてもよく、例えば、ＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｂｅｒ）、磁気メモリ、フラッシュメモリ、磁気ディスク、或いは光ディスクである。
電源アセンブリ８０６は、装置８００の多様なアセンブリに電力を供給する。電源アセンブリ８０６は、電源管理システム、一つ以上の電源、及び装置８００のための電力の生成、管理及び割り当てに関連する他のアセンブリを含んでもよい。
マルチメディアアセンブリ８０８は、前記装置８００とユーザの間に一つの出力インターフェイスを提供するスクリーンを含む。上記の実施例において、スクリーンは液晶モニター（ＬＣＤ）とタッチパネル（ＴＰ）を含んでもよい。スクリーンがタッチパネルを含むことにより、スクリーンはタッチスクリーンを実現することができ、ユーザからの入力信号を受信することができる。タッチパネルは一つ以上のタッチセンサを含んでおり、タッチ、スライド、及びタッチパネル上のジェスチャを検出することができる。前記タッチセンサは、タッチ、或はスライドの動作の境界だけでなく、前記のタッチ、或はスライド操作に係る継続時間及び圧力も検出できる。上記の実施例において、マルチメディアアセンブリ８０８は、一つのフロントカメラ、及び／又はリアーカメラを含む。装置８００が、例えば撮影モード、或はビデオモード等の操作モードにある場合、フロントカメラ、及び／又はリアーカメラは外部からマルチメディアデータを受信できる。フロントカメラとリアーカメラのそれぞれは、一つの固定型の光レンズ系、或は可変焦点距離と光学ズーム機能を有するものであってもよい。
オーディオアセンブリ８１０は、オーディオ信号をインターフェースするように構成されてもよい。例えば、オーディオアセンブリ８１０は、一つのマイク（ＭＩＣ）を含み、装置８００、例えば呼出しモード、記録モード、及び音声認識モード等の操作モードにある場合、マイクは外部のオーディオ信号を受信することができる。受信されたオーディオ信号は、さらにメモリ８０４に記憶されたり、通信アセンブリ８１６を介して送信されたりされる。上記の実施例において、オーディオアセンブリ８１０は、オーディオ信号を出力するための一つのスピーカーをさらに含む。
Ｉ／Ｏインターフェイス８１２は、プロセスアセンブリ８０２と周辺インターフェイスモジュールの間にインターフェイスを提供するものであり、上記周辺インターフェイスモジュールは、キーボード、クリックホイール、ボタン等であってもよい。これらのボタンは、ホームボタン、ボリュームボタン、起動ボタン、ロッキングボタンを含んでもよいが、これらに限定されない。
センサアセンブリ８１４は、装置８００に各方面の状態に対する評価を提供するための一つ以上のセンサを含む。例えば、センサアセンブリ８１４は、装置８００のＯＮ／ＯＦＦ状態、装置８００のディスプレイとキーパッドのようなアセンブリの相対的な位置決めを検出できる。また、例えば、センサアセンブリ８１４は、装置８００、或は装置８００の一つのアセンブリの位置変更、ユーザと装置８００とが接触しているか否か、装置８００の方位、又は加速／減速、装置８００の温度の変化を検出できる。センサアセンブリ８１４は、何れの物理的接触がない状態にて付近の物体の存在を検出するための近接センサを含んでもよい。センサアセンブリ８１４は、撮影アプリケーションに適用するため、ＣＭＯＳ、又はＣＣＤ図像センサのような光センサを含んでもよい。上記の実施例において、当該センサアセンブリ８１４は、加速度センサ、ジャイロスコープセンサ、磁気センサ、圧力センサ、及び温度センサをさらに含んでもよい。
通信アセンブリ８１６は、装置８００と他の機器の間に有線、又は无線形態の通信を提供する。装置８００は、例えばＷｉＦｉ、２Ｇ、３Ｇ、或はこれらの組み合わせのような、通信規格に基づいた无線ネットワークに接続されてもよい。一つの例示的な実施例において、通信アセンブリ８１６は、放送チャンネルを介して外部の放送管理システムからの放送信号、又は放送に関連する情報を受信する。一つの例示的な実施例において、前記通信アセンブリ８１６は、近距離無線通信（ＮＦＣ）モジュールをさらに含むことにより、近距離通信を推進するようにする。例えば、ＮＦＣモジュールは、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）技術、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）技術、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅ Ｂａｎｄ）技術、ＢＴ（Ｂｌｕｅｔｏｏｔｈ）技術、他の技術に基づいて実現できる。
例示的な実施例において、装置８００は、一つ以上のＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＤＳＰＤ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｄｅｖｉｃｅ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品によって実現されるものであり、上記方法を実行する。
例示的な実施例において、さらに、命令を含む不揮発的なコンピュータで読み取り可能な記憶媒体、例えば命令を含むメモリ８０４を提供しており、装置８００のプロセッサ８２０により上記命令を実行して上記方法を実現する。例えば、前記不揮発的なコンピュータで読み取り可能な記憶媒体は、ＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ−Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ ＲＯＭ）、磁気テープ、フロッピーディスク、光データ記憶デバイス等である。
不揮発的なコンピュータで読み取り可能な記憶媒体は、当該記録媒体のコマンドがモバイル端末のプロセッサによって実行される際に、モバイル端末に撮影制御方法を実行させることができる。前記方法は、
サーバからプッシュされたコンテンツ要約情報を受信するステップと、
前記コンテンツ要約情報を表示するステップと、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオファイルを受信するステップと、を含んでおり、
前記コンテンツ要約情報はサーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは、前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られたものである。
図８は例示的な実施例におけるリアルタイム・ビデオの提供のために用いられる装置１９００のブロック図である。例えば、装置１９００としてサーバは提供され得る。図８を参照して、装置１９００は１つ又は複数のプロセッサを含むプロセスアセンブリ１９２２と、メモリ１９３２が代表となり、例えばアプリケーションなどのプロセスアセンブリ１９２２により実行可能な各種コマンドを記憶する記憶媒体ソースと、を備える。メモリ１９３２内に記憶されたアプリケーションは、１つ又は１つ以上のモジュールを含み、当該１つ又は１つ以上のモジュールは、それぞれ１組のコマンドに対応する。また、プロセスアセンブリ１９２２は、コマンドを実行するように構成され、これにより、上記リアルタイム・ビデオの提供方法を実行する。前記方法は
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、
前記ビデオファイルのコンテンツ要約情報を特定するステップと、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含む。
サーバ１９００は、さらに、サーバ１９００の給電管理を行うための電源アセンブリ１９２６と、サーバ１９００とネットワークと接続するための有線又は無線のネットワークインターフェース１９５０と、入出力（Ｉ／Ｏ）インターフェース１９５８とを備える。サーバ１９００は、例えば、Ｗｉｎｄｏｗｓ ＳｅｒｖｅｒＴＭ，Ｍａｃ ＯＳ ＸＴＭ，ＵｎｉｘＴＭ，ＬｉｎｕｘＴＭ，ＦｒｅｅＢＳＤＴＭなどの、メモリ１９３２に記憶された操作システムにおいて操作を行うことができる。
当業者は、本明細書に開示された発明の詳細を考慮し、実施することにより、本発明の他の実施方案を容易に想定することができる。本出願は、本発明のいかなる変形、用途、又は適応的な変化を含むことを目的としており、いかなる変形、用途、又は適応的な変化は、本発明の一般原理に基づいて、且つ本開示において公開されていない本技術分野においての公知常識又は慣用技術手段を含む。明細書及び実施例は、例示的なものを開示しており、本発明の保護範囲と主旨は、特許請求の範囲に記述される。
本発明は、上記において開示された構成又は図面に示した構造に限定されるものではなく、本発明の範囲内であれば、様々な補正又は変更を行うことができる。本発明の範囲は、特許請求の範囲により制限される。
相互参照
本願は、出願番号がＣＮ２０１４１０４１２５５９．５であって、出願日が２０１４年８月２０日である中国特許出願に基づいて優先権を主張し、当該中国特許出願のすべての内容を本願に援用する。
本発明はネットワーク技術分野に関し、特に、リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体に関している。
通信技術の快速発展に従い、端末装置は知能化になりその使用も幅広くなっている。ユーザは、端末装置を用いて直ちに友達とリアルタイム・ビデオを共有して見ることによって様々な素晴らしいイベントに参与したくなり、今現在のネットワーク帯域及びサーバもビデオのリアルタイム的の伝送に有力な技術的支持を提供している。
従来技術において、リアルタイム・ビデオの提供方法は次のとおりである。第１の端末装置は先ずサーバを介して第２の端末装置と通信接続を作成し、そして、第１の端末装置はサーバを介して撮像されたビデオをリアルタイムで第２の端末装置に伝送することによって、第１の端末装置を用いる第１のユーザと端末装置を用いる第２のユーザとの間のリアルタイム・ビデオの共有を実現する。
しかしながら、上記の方法において、第２の端末装置が第１の端末装置と通信接続を構築する前に、ビデオの具体的なコンテンツを取得できない。第１の端末装置と通信接続を作成した後、ひいては、リアルタイム・ビデオを長時間受け付けた後でなければ、ビデオの具体的なコンテンツを取得できない。もし該リアルタイム・ビデオのコンテンツが第２のユーザの所望のものではないと、今回の通信接続をオフにする必要がある。これは、ネットワーク資源の無駄遣いを招くばかりでなく、ユーザ体験度に影響する恐れがある。他方では、第１の端末装置から提供されるリアルタイム・ビデオは、それと通信接続を構築している第２の端末装置にしか提供できず、実際に該リアルタイム・ビデオを見ようとするユーザはそれを見ることができないので、同様にユーザ体験度を影響する恐れがある。
従来技術における問題点を解消するために、本発明はリアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体を提供する。
本発明の実施形態の第１の局面におけるリアルタイム・ビデオの提供方法は、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、
前記ビデオファイルのコンテンツ要約情報を特定するステップと、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含む。
第１の局面を組み合わせて、第１の局面の第１種の実現可能な方式において、前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップは、
前記第１のユーザアカウントに対応するビデオファイルを検索し、
前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、
前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するステップを、含む。
第１の局面を組み合わせて、第１の局面の第２種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップは、
前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するステップと、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るステップと、
前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面の第３種の実現可能な方式において、前記方法はさらに、
第１の設定個数のシーンを特定するステップと、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するステップと、
前記第１の設定枚数のイメージから第２の選定特徴を抽出するステップと、
前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面的第４種の実現可能な方式において、前記方法はさらに、
第２の設定個数のイベントを特定するステップと、
イベント毎に少なくとも、第４の設定数の邪魔ビデオを少なくとも含む第３の設定数のビデオを収集するステップと、
前記第３の設定個数のビデオから第３の選定特徴を抽出するステップと、
前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るステップと、を含む。
第１の局面の第２種の実現可能な方式を組み合わせて、第１の局面の第５種の実現可能な方式において、前記方法はさらに、
第４の設定個数の人物を特定するステップと、
人物毎に少なくとも第３の設定枚数のイメージを収集するステップと、
前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するステップと、
前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るステップと、を含む。
第１の局面によれば、第１の局面の第６種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
前記第１の端末装置から送信された地理位置情報を受信するステップと、
前記コンテンツ要約情報に前記地理位置情報を付加するステップと、を含む。
第１の局面を組み合わせて、第１の局面の第７種の実現可能な方式において、前記ビデオファイルのコンテンツ要約情報を特定するステップは、
設定周期で前記ビデオファイルのコンテンツ要約情報を特定するステップを含んでおり、
前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する。
第１の局面を組み合わせて、第１の局面の第８種の実現可能な方式において、前記方法はさらに、
前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するステップと、
変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
本発明の実施例の第２の局面におけるリアルタイム・ビデオの提供方法は、
サーバからプッシュされたコンテンツ要約情報を受信するステップと、
前記コンテンツ要約情報を表示するステップと、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオファイルを受信するステップと、を含んでおり、
前記コンテンツ要約情報は、サーバが第１のユーザアカウントに対応するビデオファイルに基づいて特定され、前記ビデオファイルは前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られる。
第２の局面を組み合わせて、第２の局面の第１種の実現可能な方式において、前記方法はさらに、
第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するステップと、
前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバに前記ビデオファイルを変更後の端末装置に送信させると共に再生するビデオフレームのビデオ識別子を指定させる、又は、変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
本発明の実施例の第３の局面におけるリアルタイム・ビデオの提供装置は、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するための第１の受信手段と、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するための記憶手段と、
前記ビデオファイルのコンテンツ要約情報を特定するための第１の特定手段と、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するためのプッシュ手段と、
前記ビデオ取得請求を受信するための第２の受信手段と、
前記ビデオファイルを前記第２の端末装置に送信するための第１の送信手段と、を含む。
第３の局面を組み合わせて、第３の局面の第１種の実現可能な方式において、前記記憶手段は、
前記第１のユーザアカウントに対応するビデオファイルを検索するための検索サブ手段と、
前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するための記憶サブ手段と、を含む。
第３の局面を組み合わせて、第３の方面の第２種の実現可能な方式において、前記第１の特定手段は、
前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するための抽出サブ手段と、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るための認識サブ手段と、
前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るための組合せサブ手段と、を含む。
第３の局面を組み合わせた第２種の実現可能な方式において、第３の方面の第３種の実現可能な方式において、前記装置はさらに、
第１の設定個数のシーンを特定するための第２の特定手段と、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するための第１の収集手段と、
前記第１の設定枚数のイメージから第２の選定特徴を抽出するための第１の抽出手段と、
前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るための第１のトレーニング手段と、を含む。
第３の局面の第２種の実現可能な方式を組み合わせた、第３の局面の第４種の実現可能な方式において、前記装置はさらに、
第２の設定個数のイベントを特定するための第３の特定手段と、
イベント毎に少なくとも、第４の設定数の邪魔ビデオを少なくとも含む第３の設定数のビデオを収集するための第２の収集手段と、
前記第３の設定個数のビデオから第３の選定特徴を抽出するための第２の抽出手段と、
前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るための第２のトレーニング手段と、を含む。
第３の局面の第２種の実現可能な方式を組み合わせた、第３の局面の第５種の実現可能な方式において、前記装置はさらに、
第４の設定個数の人物を特定するための第４の特定手段と、
人物毎に少なくとも第３の設定枚数のイメージを収集するための第３の収集手段と、
前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するための第３の抽出手段と、
前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るための第３のトレーニング手段と、含む。
第３の局面を組み合わせて、第３の局面の第６種の実現可能な方式において、前記装置はさらに、
前記第１の端末装置から送信された地理位置情報を受信する第３の受信手段と、
前記コンテンツ要約情報に前記地理位置情報を付加するための付加手段と、を含む。
第３の局面を組み合わせて、第３の局面の第７種の実現可能な方式において、前記第１の特定手段は、
設定周期で前記ビデオファイルのコンテンツ要約情報を特定するための特定サブ手段を含み、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する。
第３の局面を組み合わせて、第３の局面の第８種の実現可能な方式において、前記装置はさらに、
前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するための第４の受信手段と、
変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含む。
本発明の実施例の第４の局面におけるリアルタイム・ビデオの提供装置は、
サーバからプッシュされたコンテンツ要約情報を受信するための第１の受信手段と、
前記コンテンツ要約情報を表示するための表示手段と、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するための第１の送信手段と、
前記ビデオファイルを受信するための第２の受信手段と、を含んでおり、
前記コンテンツ要約情報はサーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られる。
第４の局面を組み合わせて、第４の局面の第１種の実現可能な方式において、前記装置はさらに、
第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するための第３の受信手段と、
前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバに前記ビデオファイルを変更後の端末装置に送信させるとともに再生するビデオフレームのビデオ識別子を指定させる、又は、変更後の端末装置に前記ビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含む。
本発明の実施例の第５の局面におけるサーバは、
プロセッサと、
プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
前記プロセッサは、
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶し、
前記ビデオファイルのコンテンツ要約情報を特定し、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信し、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信する。
本発明の実施例の第６の局面における端末装置は、
プロセッサと、
プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
前記プロセッサは、
サーバからプッシュされたコンテンツ要約情報を受信し、前記コンテンツ要約情報は、第１のユーザアカウントに対応するビデオファイルに基づいてサーバにより特定され、前記ビデオファイルは、第１の端末装置から前記サーバに送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに、前記フレーム識別子に基づいて前記ビデオフレームを記憶することによって、得られ、
前記コンテンツ要約情報を表示し、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信し、
前記ビデオファイルを受信する。
本発明のその他の方面は、
プロセッサに実行されることにより、前記方法を実現することを特徴とするプログラムを提供する。
本発明のその他の方面は、
前記プログラムが記録された記録媒体を提供する。
本発明の実施例に係る技術案は、以下の有益な効果を有する。第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームをサーバにおいてリアルタイムで受信し、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定する。第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする。第２の端末装置はコンテンツ要約情報を表示するとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザはコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択し、第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上することができる。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよい。このようにして、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを特定でき、第２のユーザが第２の端末装置と第１の端末装置と通信接続を構築しているとともに該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がなく、これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上できる。
以上の一般的な記述及び以下の詳細な記述は、例示のものに過ぎず、本開示を限定するものではないと理解すべきである。
ここでの図面は、本明細書の一部として、本発明に適切な実施例を示し、明細書と合わせて本発明の原理を解釈する。
例示的な実施例における実行本体がサーバであるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例におけるリアルタイム・ビデオの提供システムの構造図である。
例示的な実施例における実行本体が端末装置であるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。
例示的な実施例における図１に対応するリアルタイム・ビデオの提供装置を示すブロック図である。
例示的な実施例における図３に対応するリアルタイム・ビデオの提供装置を示すブロック図である。
例示的な実施例における端末装置を示すブロック図である。
例示的な実施例におけるサーバのブロック図である。
ここで、図面に示された例示的な実施例を詳細に説明する。以下の内容において、図面を言及するとき、特に説明しない限り、異なる図面における同じ数字が同一または同等の要素を示す。以下の例示的な実施例に記載の実施の形態は、本発明と一致するあらゆる実施の形態を代表するわけではない。逆に、それらは、添付された特許請求の範囲に詳細に記載される、本発明の一部の方面と一致する装置及び方法の例にすぎない。
図１は例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。該リアルタイム・ビデオの提供方法はリアルタイム・ビデオの提供システムに基づいて実現され得る。図２に示すように、リアルタイム・ビデオの提供システムの構成は、第１の端末装置２１、サーバ２２及び第２の端末装置２３を含み、サーバ２２には複数の第１の端末装置２１と第２の端末装置２３が接続され得る。図面は、１つの第１の端末装置２１と２つの第２の端末装置２３だけを示しており、サーバ２２が無線ネットワークを介して第１の端末装置２１、第２の端末装置２３と接続されている。ここに、無線ネットワークの接続を例として説明を行っているが、実際的な応用において、これらの装置同士間が有線接続されてもよく、本発明ではこれを限定しない。第１の端末装置２１はビデオをリアルタイムでアップロードでき、サーバ２２は受信したビデオを記憶するとともに、ビデオのコンテンツ要約情報を第２の端末装置２３にプッシュする。図１に示すように、該リアルタイム・ビデオの提供方法はサーバに応用され、サーバがそれぞれの第１の端末装置に対して該方法実行し得る。該方法は以下のステップを含む。
ステップＳ１１において、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信する。
第１のユーザは、予めサーバに第１のユーザアカウントを登録し得、第１のユーザが第１の端末装置を用いてビデオを撮像すると共に撮像されたビデオをリアルタイムで共有しようとする場合、サーバに第１のユーザアカウントを登録してから、第１の端末装置が撮像されたそれぞれのビデオフレームをリアルタイムで送信するとともに、ビデオフレームに第１のユーザアカウント及びフレーム識別子を載せることができる。
ここで、ビデオフレームのフレーム識別子は多種あり得、以下、２種を例として説明を行う。１種は第１の端末装置が撮像の際にビデオフレーム毎に与える番号であり、他種は第１の端末装置が撮像の際に記録した撮像時間である。
サーバは、第１の端末装置から送信されたビデオフレームをリアルタイムで受信できる。
ステップＳ１２において、フレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶する。
サーバは、複数の第１の端末装置から送信されたビデオフレームを同時に受信し、ビデオフレーム毎に該ビデオフレームに載せられた第１のユーザアカウントに対応するビデオファイルを検索してから、該ビデオフレームを、対応するビデオファイルに記憶することができる。
ステップＳ１３において、ビデオファイルのコンテンツ要約情報を特定する。
コンテンツ要約情報は、対応するビデオファイルのメインコンテンツを要約できる。
ステップＳ１４において、コンテンツ要約情報を、第１のユーザアカウントに関連付けた第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、第２の端末装置にコンテンツ要約情報を表示させると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。
一般的には、第１のユーザアカウントは複数の第２のユーザアカウントに関連付けられ、アプリケーションによっては関連付け方式も異なっている。例えば、ＱＱ（チャットアプリケーション）としては、第１のユーザアカウントは複数のフレンドを設定でき、これらのフレンドの何れも第１のユーザアカウントに関連付けた第２のユーザアカウントである。さらに、例えば、微信（ｗｅｃｈａｔ）としては、第１のユーザアカウントは仲間（仲良の範囲）を設定でき、仲間中のユーザアカウントが第１のユーザアカウントに関連付けた第２のユーザアカウントである。
サーバは、第１のユーザアカウントに関連付けられている第２のユーザアカウントを取得し、そして、特定されたコンテンツ要約情報を第２のユーザアカウントの登録した第２の端末装置にプッシュすることができ、該コンテンツ要約情報をリンクに付加したまま第２の端末装置にプッシュしてもよいし、該コンテンツ要約情報を第２の端末装置に直接的にプッシュしてもよい。第２の端末装置は、該コンテンツ要約情報を表示して第２のユーザに提供し、サーバプッシュ方式によっては第２の端末装置の表示方式も異なっている。例えば、リンク形式にて該コンテンツ要約情報を表示してもよいし、ボタン形式にて該コンテンツ要約情報を表示してもよい。
第２のユーザが該ビデオを見ようとしない場合、該コンテンツ要約情報を無視でき、第２のユーザが該ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置がマウス、キーボード等の外接装置に接続されている場合、第２のユーザは、外接装置を介して該コンテンツ要約情報を選択できる。第２の端末装置にはタッチパネルが設置されている場合、第２のユーザは指又はスタイラスペンで該コンテンツ要約情報を直接的に選択することができる。
第２の端末装置は、該コンテンツ要約情報が選択されたことが検出されると、第２のユーザが該ビデオを見ようとすることを確定すると共に、サーバにビデオ取得請求を送信することによって、サーバが該ビデオファイルを送信するよう請求する。
ステップＳ１５において、ビデオ取得請求を受けて、ビデオファイルを第２の端末装置に送信する。
該方案において、サーバは第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信する。フレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定し、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュし、第２の端末装置がコンテンツ要約情報を表示すると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザは、コンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよく、これにより、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを確保し、第２のユーザが第２の端末装置で第１の端末装置と通信接続を作成し該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。このようにして、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上できる。
選択的に、Ｓ１２におけるフレーム識別子に基づき、ビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するステップは、
第１のユーザアカウントに対応するビデオファイルを検索するステップと、
第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶するステップと、
第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、第１のユーザアカウントに対応するビデオファイルを作成して、作成されたビデオファイルにビデオフレームを記憶するステップと、を含む。
サーバは第１のユーザアカウントとフレーム識別子が付けたビデオフレームを受信した後、第１のユーザアカウントに対応するビデオファイルを検索し、該ビデオフレームが第１の端末装置により撮像された第１のビデオフレームである場合、サーバに第１のユーザアカウントに対応するビデオファイルがまだ作成されておらず、このとき、第１のユーザアカウントに対応するビデオファイルを検索できず、先ずビデオファイルを作成して、次いで、該ビデオフレームを作成されたビデオファイルに記憶しなければならない。該ビデオフレームが第１の端末装置により撮像された第１のビデオフレームではない場合、サーバに既に第１のユーザアカウントに対応するビデオファイルが作成されており、このとき、第１のユーザアカウントに対応するビデオファイルを検索して、ヒットされたビデオファイルに該ビデオフレームを直接的に記憶すればよい。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップは、
ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するステップと、
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識することによって、それぞれのソーターに対応する認識結果及びその信頼度を得るステップと、
第１のユーザアカウントと信頼度が最高の認識結果を組合わせてビデオファイルのコンテンツ要約情報を得るステップと、を含む。
第１のユーザアカウントに対応するビデオファイルは、通常に、複数のビデオフレームを含み、先ず、ビデオフレームから抽出する必要がある第１の選定特徴を特定し、当該第１の選定特徴は、予め作成された複数のソーターが認識を行う際に必要な特徴である。次いで、ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出する。予め作成された複数のソーターを用いて抽出された第１の選定特徴を認識することによって、認識結果及び信頼度を得られる。
ここで、ソーターは、シーンソーター、イベントソーター、顔ソーター等を含み得る。仮に、シーンソーターに対して、抽出する必要のある特徴が色ヒストグラム特徴であり、イベントソーターに対して、抽出する必要のある特徴がＳＩＦＴ（Ｓｃａｌｅ−Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）特徴であり、顔ソーターに対して、抽出する必要のある特徴がＬＢＰ（Ｌｏｃａｌ Ｂｉｎａｒｙ Ｐａｔｔｅｒｎｓ）特徴であるとすれば、第１の選定特徴は色ヒストグラム特徴、ＳＩＦＴ特徴及びＬＢＰ特徴であり得る。
予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識した後、それぞれのソーターの何れも認識結果及び該認識結果の信頼度を得られる。サーバは取得信頼度が最高の認識結果を取得してから、第１のユーザアカウント及び選択された信頼度が最高の認識結果を組み合わせて、ビデオファイルのコンテンツ要約情報を得て、また、信頼度が０〜１という範囲内の任意の数であり得るがこれに限られない。例えば、シーンソーターの認識結果はＡであり、信頼度が８０％であり、イベントソーターの認識結果がＢであり、信頼度が５０％であり、顔ソーターの認識結果が俳優Ｃであり、信頼度が９０％である場合、最終的に得られたコンテンツ要約情報は「第１のユーザアカウントが俳優Ｃと出会った」である。ここに、１つの組合せにてビデオファイルのコンテンツ要約情報を得る方式だけを説明しているが、他の多くの組合せ方式もあり、ここに一々詳しく説明しない。
以下、シーンソーター、イベントソーター、顔ソーターという３種のソーターの作成過程を説明する。
第１種に、シーンソーターについては、その作成過程は、
第１の設定個数のシーンを特定するステップと、
シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するステップと、
第１の設定枚数のイメージから第２の選定特徴を抽出するステップと、
第２の選定特徴に基づいてトレーニングしてシーンソーターを得るステップと、を含む。
予め第１の設定個数のシーン、例えば、バスケットボール試合としては出現可能なシーンがフロントコートバックボード、バックコートバックボード、アシスト、反則、カット等を特定でき、他のイベントにおいて、他のシーンがあり得、ここに、一々に列挙して説明しない。シーン毎に第１の設定枚数のイメージを収集しなければならず、収集されたイメージが多いほど、作成されるシーンソーターの正確度が高くなり、第１の設定枚数のイメージが第２の設定枚数の邪魔イメージを含まなければならない。第１の設定枚数のイメージから第２の選定特徴、例えば、色ヒストグラム特徴等を選択し、選択された特徴が多いほど作成されるシーンソーターの正確度が高くなる。第２の選定特徴に基づいてトレーニングしてシーンソーターを得られる。
第２種に、イベントソーターについて、その作成過程は、
第２の設定個数のイベントを特定するステップと、
イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するステップと、
第３の設定個数のビデオから第３の選定特徴を抽出するステップと、
第３の選定特徴に基づいてトレーニングしてイベントソーターを得るステップと、を含む。
予め第２の設定個数のイベント、例えば、バスケットボール試合、フットボール試合、映画を撮影すること等を特定できる。イベント毎に第３の設定個数のビデオを収集しなければならず、収集されたビデオが多いほど作成されるイベントソーターの正確度が高くなる。第３の設定個数のビデオはさらに第４の設定個数の邪魔ビデオを含まなければならない。第３の設定個数のビデオから第３の選定特徴、例えば、ＳＩＦＴ特徴等を選択し、選択された特徴が多いほど作成されるイベントソーターの正確度が高くなる。第３の選定特徴に基づいてトレーニングしてイベントソーターを得られる。
第３種に、顔ソーターについて、その作成過程は、
第４の設定個数の人物を特定するステップと、
人物毎に少なくとも第３の設定枚数のイメージを収集するステップと、
第３の設定枚数のイメージから顔領域を検出すると共に、第４の選定特徴を抽出するステップと、
第４の選定特徴に基づいてトレーニングして顔ソーターを得るステップと、を含む。
予め第４の設定個数の人物を特定し、人物毎に第３の設定枚数のイメージを収集し、収集されたイメージが多いほど作成される顔ソーターの正確度が高くなり、第３の設定枚数のイメージから第４の選定特徴、例えば、ＬＢＰ特徴等を選択し、選択された特徴が多いほど作成される顔ソーターの正確度が高くなり、第４の選定特徴に基づいてトレーニングして顔ソーターを得られる。
ここで、上記の第１の設定個数、第２の設定個数、第３の設定個数、第１の設定枚数、第２の設定枚数、第３の設定枚数、第１の選定特徴、第２の選定特徴、第３の選定特徴及び第４の選定特徴は実際的な必要に応じて選択され得る。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップの後、Ｓ１４において第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップの前に、前記方法はさらに、
第１の端末装置から送信された地理位置情報を受信するステップと、
コンテンツ要約情報に地理位置情報を付加するステップと、を含む。
第１の端末装置は地理位置情報、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ：グローバル・ポジショニング・システム）情報等を取得して該地理位置情報をサーバに送信することができ、サーバはコンテンツ要約情報に地理位置情報を付加し得る。
上記の例を引き続き、地理位置情報がＤであるとすれば、コンテンツ要約情報に該地理位置情報Ｄを加えて得られたコンテンツ要約情報は「第１のユーザアカウントがＤで俳優Ｃと出会った」であり、これにより、リアルタイム・ビデオの情報をより精確に記述することができる。
選択的に、Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップは、
設定周期でビデオファイルのコンテンツ要約情報を特定するステップを含む。
ビデオファイルに１つのビデオフレームを加えた後、ビデオファイルのコンテンツ要約情報は変更しない可能性があるため、周期を設定することによって、ビデオファイルのコンテンツ要約情報を特定し得、設定周期が実際的な必要に応じて設定され得、例えば、５秒間、１０秒間、１５秒間等に設定され得る。
Ｓ１３におけるビデオファイルのコンテンツ要約情報を特定するステップの後、Ｓ１４において第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップの前に、前記方法はさらに、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定するステップと、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュするステップを実行するステップと、を含む。
相応に、サーバは第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする前に、取りあえず今現在の設定周期で特定されたコンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、一致であると判定された場合、第２の端末装置に今現在の設定周期で特定されたコンテンツ要約情報をプッシュする必要はなく、不一致であると判定された場合、第２の端末装置に今現在の設定周期で特定されたコンテンツ要約情報をプッシュする。
該判定過程を加えた後、第２の端末装置に繰返し同一のコンテンツ要約情報をプッシュすることを回避することによって、ユーザ体験度を向上できる。
選択的に、前記方法はさらに、
第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するステップと、
変更後の端末装置にビデオファイルを送信すると共に、再生するビデオフレームのフレーム識別子を指定するステップと、を含む。
第２の端末装置を用いる第２のユーザは、時には端末装置を切り替える必要があり、例えば、通常に応接間にあるテレビでビデオを見るが、一旦寝室でビデオを見ようとすると、端末装置を切り替えなければならない。第２の端末装置はサーバに装置変更メッセージを送信し、サーバは該装置変更メッセージを受信した後、第２の端末装置へのビデオファイルの送信を停止し、変更後の端末装置にビデオファイルを送信するように変更するとともに、再生するビデオフレームのフレーム識別子を指定することによって、ユーザが引き続いてビデオを見ることを保証するでき、ユーザ体験度を向上できる。
図３は例示的な実施例におけるリアルタイム・ビデオの提供方法を示すフローチャートである。図３に示すように、該方法は端末装置に応用され、該端末装置が図２に示すリアルタイム・ビデオの提供システムにおける第２の端末装置として、以下のステップを含む。
ステップＳ３１において、サーバプからプッシュされたコンテンツ要約情報を受信し、コンテンツ要約情報は、サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたのである。ビデオファイルは、サーバが第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに、フレーム識別子に基づいてビデオフレームを記憶して得られたのである。
ステップＳ３２において、コンテンツ要約情報を表示する。
ステップＳ３３において、コンテンツ要約情報が選択されたことを検出した場合、サーバにビデオファイルを取得するためのビデオ取得請求を送信する。
ステップＳ３４において、ビデオファイルを受信する。
該方案において、サーバは、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するとともに、ビデオファイルのコンテンツ要約情報を特定し、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュし、第２の端末装置がコンテンツ要約情報を表示すると共に、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信し、サーバがビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。第２の端末装置はコンテンツ要約情報を表示できるため、第２のユーザはコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的なコンテンツ取得し、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択できる。第２の端末装置はコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよく、これにより、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを保証し、第２のユーザが第２の端末装置と第１の端末装置とが通信接続を作成して該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上することができる。
選択的に、第２の端末装置を使用する第２のユーザは時には端末装置を切り替える必要があり、例えば、通常に応接間にあるテレビでビデオを見るが、一旦寝室でビデオを見ようとすると、この場合、端末装置を切り替えなければならない。切換方法は以下の２種を含み得る。
第１種の方式において、第２のユーザからの、変更後の端末装置を指定する装置変更指示を受信する。
サーバに変更後の端末装置を指定する装置変更メッセージを送信することによって、サーバからビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
第２の端末装置はリアルタイム・ビデオを再生する場合、装置変更機能を提供し得る。第２のユーザは該機能を選択した後、第２の端末装置は変更後の端末装置を指示する装置変更指示を受ける。第２の端末装置はサーバに変更後の端末装置を指定する装置変更メッセージを送信し、サーバは該装置変更メッセージを受けた後、ビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定することができる。このようにして、ユーザが引き続いてビデオを見ることを保証し、ユーザ体験度を向上することができる。
第２種の方式において、第２のユーザからの、変更後の端末装置を指定する装置変更指示を受ける。
変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
第２の端末装置はリアルタイム・ビデオを再生する場合、装置変更機能を提供できる。第２のユーザが該機能を選択した後、第２の端末装置は変更後の端末装置を指示する装置変更指示を受信し得、第２の端末装置が自身で保存しているビデオファイルを変更後の端末装置に送信するとともに、再生するビデオフレームのフレーム識別子を指定することができる。このようにして、ユーザが引き続いてビデオを見ることを保証し、ユーザ体験度を向上することができる。
図４は例示的な実施例における他のリアルタイム・ビデオの提供方法を示すフローチャートである。該方法は、図２に示すリアルタイム・ビデオの提供システムに用いられ、図４に示すように、前記方法は以下のステップを含む。
ステップＳ４１において、第１の端末装置はサーバに第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで送信する。
ステップＳ４２において、サーバは第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、第１のユーザアカウントに対応するビデオファイルを検索し、第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶し、第１のユーザアカウントに対応するビデオファイルがヒットされていない場合、第１のユーザアカウントに対応するビデオファイルを作成し、作成されたビデオファイルにビデオフレームを保存する。
ステップＳ４３において、サーバは設定周期でビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出し、予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、ソーター毎に対応する認識結果及びその信頼度を得て、第１のユーザアカウントと信頼度が最高の認識結果とを組み合わせて、ビデオファイルのコンテンツ要約情報を得る。
ステップＳ４４において、第１の端末装置はサーバに地理位置情報を送信する。
ステップＳ４５において、サーバは、第１の端末装置から送信された地理位置情報を受信し、コンテンツ要約情報に地理位置情報を付加する。
ステップＳ４６において、サーバは、コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定した場合、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュする。
第２の端末装置は複数あり得る。以下、１つの第２の端末装置を例として説明を行う。
ステップＳ４７において、第２の端末装置はコンテンツ要約情報を表示するとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信する。
ステップＳ４８において、サーバはビデオ取得請求を受けた後、ビデオファイルを第２の端末装置に送信する。
ステップＳ４９において、第２の端末装置はビデオファイルを再生する。
ステップＳ５０において、第２の端末装置は、第２のユーザからの装置変更指示を受けて、サーバに装置変更メッセージを送信し、装置変更指示と装置変更メッセージが変更後の端末装置を指定する。
ステップＳ５１において、サーバは、第２の端末装置から送信された装置変更メッセージを受信し、変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定する。
ステップＳ５２において、変更後の端末装置はビデオファイルを受信するとともに、指定されたフレーム識別子対応するビデオフレームからビデオファイルを再生する。
該方案において、第２の端末装置がコンテンツ要約情報を表示でき、第２のユーザがコンテンツ要約情報に基づいてリアルタイム・ビデオの具体的な内容を得られるため、該リアルタイム・ビデオを見ようとする場合、該コンテンツ要約情報を選択して、第２の端末装置がコンテンツ要約情報が選択されたことが検出されると、サーバにビデオ取得請求を送信して該リアルタイム・ビデオのビデオファイルを取得することによって、所望のあるユーザが該リアルタイム・ビデオを見られることを確保し、ユーザ体験度を向上する。第２のユーザが該リアルタイム・ビデオを見ようとしない場合、該コンテンツ要約情報を無視すればよい。このようにして、所望のないユーザがコンテンツ要約情報さえに基づけば見ないことを確定できることを保証し、第２のユーザは第２の端末装置と第１の端末装置とが通信接続を作成して該リアルタイム・ビデオを見た後に見ないことを確定するようにする必要がない。これにより、ネットワーク資源の無駄遣いを回避し、ユーザ体験度を向上することができる。
図５は例示的な実施例における図１に示すリアルタイム・ビデオの提供方法に対応するリアルタイム・ビデオの提供装置を示すブロック図である。図５を参照して、該装置は、第１の受信手段５１、記憶手段５２、第１の特定手段５３、プッシュ手段５４、第２の受信手段５５、及び第１の送信手段５６を含む。
該第１の受信手段５１は、第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するように構成されている。
該記憶手段５２は、フレーム識別子に基づいてビデオフレームを第１のユーザアカウントに対応するビデオファイルに記憶するように構成されている。
該第１の特定手段５３は、ビデオファイルのコンテンツ要約情報を特定するように構成されている。
該プッシュ手段５４は、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にコンテンツ要約情報をプッシュすることによって、第２の端末装置にコンテンツ要約情報を表示させるとともに、コンテンツ要約情報が選択されたことが検出されると、ビデオファイルを取得するためのビデオ取得請求を送信するように構成されている。
該第２の受信手段５５は、ビデオ取得請求を受信するように構成されている。
該第１の送信手段５６は、ビデオファイルを第２の端末装置に送信するように構成されている。
選択的に、記憶手段５２は検索サブ手段と記憶サブ手段を含む。
該検索サブ手段は、第１のユーザアカウントに対応するビデオファイルを検索するように構成されている。
該記憶サブ手段は、第１のユーザアカウントに対応するビデオファイルがヒットされた場合、フレーム識別子の大きさに基づいてビデオフレームをビデオファイルに記憶する一方、第１のユーザアカウントに対応するビデオファイルがヒットされていない場合、第１のユーザアカウントに対応するビデオファイルを作成し、作成されたビデオファイルにビデオフレームを保存するように構成されている。
選択的に、第１の特定手段５３は抽出サブ手段、認識サブ手段、及び組合せサブ手段を含む。
該抽出サブ手段は、ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するように構成されている。
該認識サブ手段は、予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るように構成されている。
該組合せサブ手段は、第１のユーザアカウントと信頼度が最高の認識結果とを組み合わせて、ビデオファイルのコンテンツ要約情報を得るように構成されている。
選択的に、上記の装置はさらに第２の特定手段、第１の収集手段、第１の抽出手段、及び第１のトレーニング手段を含む。
該第２の特定手段は、第１の設定個数のシーンを特定するように構成されている。
該第１の収集手段は、シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するように構成されている。
該第１の抽出手段は、第１の設定枚数のイメージから第２の選定特徴を抽出するように構成されている。
該第１のトレーニング手段は、第２の選定特徴に基づいてトレーニングしてシーンソーターを得るように構成されている。
選択的に、上記の装置はさらに第３の特定手段、第２の収集手段、第２の抽出手段、及び第２のトレーニング手段を含む。
該第３の特定手段は、第２の設定個数のイベントを特定するように構成されている。
該第２の収集手段は、イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するように構成されている。
該第２の抽出手段は、第３の設定個数のビデオから第３の選定特徴を抽出するように構成されている。
該第２のトレーニング手段は、第３の選定特徴に基づいてトレーニングしてイベントソーターを得るように構成されている。
選択的に、上記の装置はさらに第４の特定手段、第３の収集手段、第３の抽出手段、及び第３のトレーニング手段を含む。
該第４の特定手段は、第４の設定個数の人物を特定するように構成されている。
該第３の収集手段は、人物毎に少なくとも第３の設定枚数のイメージを収集するように構成されている。
該第３の抽出手段は、第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するように構成されている。
該第３のトレーニング手段は、第４の選定特徴に基づいてトレーニングして顔ソーターを得るように構成されている。
選択的に、上記の装置はさらに第３の受信手段及び付加手段を含む。
該第３の受信手段は、第１の端末装置から送信された地理位置情報を受信するように構成されている。
該付加手段は、コンテンツ要約情報に地理位置情報を付加するように構成されている。
選択的に、第１の特定手段５３は特定サブ手段を含む。
該特定サブ手段は、設定周期でビデオファイルのコンテンツ要約情報を特定し、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、コンテンツ要約情報を、第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する、ように構成されている。
選択的に、上記の装置はさらに第４の受信手段及び第２の送信手段を含む。
該第４の受信手段は、第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するように構成されている。
該第２の送信手段は、変更後の端末装置にビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するように構成されている。
図６は例示的な実施例における図３に示すリアルタイム・ビデオの提供方法に対応するリアルタイム・ビデオの提供装置を示すブロック図である。図６を参照して、該装置は、第１の受信手段６１、表示手段６２、第１の送信手段６３、及び第２の受信手段６４を含む。
該第１の受信手段６１は、サーバからプッシュされたコンテンツ要約情報を受信するように構成されており、コンテンツ要約情報は、サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、ビデオファイルは、サーバが、第１の端末装置から送信された第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともにフレーム識別子に基づいてビデオフレーム記憶して得られたものである。
該表示手段６２は、コンテンツ要約情報を表示するように構成されている。
該第１の送信手段６３は、コンテンツ要約情報が選択されたことが検出されると、サーバに、ビデオファイルを取得するためのビデオ取得請求を送信することによって、サーバにビデオファイルを送信させるように構成されている。
該第２の受信手段６４は、ビデオファイルを受信するように構成されている。
選択的に、上記の装置は、さらに第３の受信手段及び第２の送信手段を含む。
該第３の受信手段は、第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するように構成されている。
該第２の送信手段は、サーバに変更後の端末装置を指定する装置変更メッセージを送信することによって、サーバがビデオファイルを変更後の端末装置に送信するとともに再生するビデオフレームのフレーム識別子を指定する、又は、変更後の端末装置にビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するように構成されている。
上記実施例に係る装置に関しては、その各モジュールが操作を実行する具体的な方式は既に該方法に係る実施例において詳細に記載されているので、ここに詳細に説明しない。
図７は例示的な実施例におけるリアルタイム・ビデオの提供に用いられる装置８００を示すブロック図である。例えば、装置８００は携帯電話、コンピュータ、デジタル放送端末、メッセージ受発信手段、ゲームコンソール、タブレットデバイス、医療機器、フィットネス機器、パーソナルデジタルアシスタント等であってもよい。
図７を参照して、装置８００は、プロセスアセンブリ８０２、メモリ８０４、電源アセンブリ８０６、マルチメディアアセンブリ８０８、オーディオアセンブリ８１０、入力／出力（Ｉ／Ｏ）インターフェイス８１２、センサアセンブリ８１４、及び通信アセンブリ８１６のような一つ以上のアセンブリを含んでよい。
プロセスアセンブリ８０２は、一般的には装置８００の全体の操作を制御するものであり、例えば、表示、電話呼び出し、データ通信、カメラ操作、及び記録操作と関連する操作を制御する。プロセスアセンブリ８０２は、一つ以上のプロセッサ８２０を含み、これらによって命令を実行することにより、上記の方法の全部、或は一部のステップを実現するようにしてもよい。なお、プロセスアセンブリ８０２は、一つ以上のモジュールを含み、これらによってプロセスアセンブリ８０２と他のアセンブリの間のインタラクションを容易にするようにしてもよい。例えば、プロセスアセンブリ８０２は、マルチメディアモジュールを含み、これらによってマルチメディアアセンブリ８０８とプロセスアセンブリ８０２の間のインタラクションを容易にするようにしてもよい。
メモリ８０４は、各種類のデータを記憶することにより装置８００の操作を支援するように構成される。これらのデータの例は、装置８００において操作されるいずれのアプリケーションプログラム又は方法の命令、連絡対象データ、電話帳データ、メッセージ、画像、ビデオ等を含む。メモリ８０４は、いずれの種類の揮発性メモリ、不揮発性メモリ記憶デバイスまたはそれらの組み合わせによって実現されてもよく、例えば、ＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｂｅｒ）、磁気メモリ、フラッシュメモリ、磁気ディスク、或いは光ディスクである。
電源アセンブリ８０６は、装置８００の多様なアセンブリに電力を供給する。電源アセンブリ８０６は、電源管理システム、一つ以上の電源、及び装置８００のための電力の生成、管理及び割り当てに関連する他のアセンブリを含んでもよい。
マルチメディアアセンブリ８０８は、前記装置８００とユーザの間に一つの出力インターフェイスを提供するスクリーンを含む。上記の実施例において、スクリーンは液晶モニター（ＬＣＤ）とタッチパネル（ＴＰ）を含んでもよい。スクリーンがタッチパネルを含むことにより、スクリーンはタッチスクリーンを実現することができ、ユーザからの入力信号を受信することができる。タッチパネルは一つ以上のタッチセンサを含んでおり、タッチ、スライド、及びタッチパネル上のジェスチャを検出することができる。前記タッチセンサは、タッチ、或はスライドの動作の境界だけでなく、前記のタッチ、或はスライド操作に係る継続時間及び圧力も検出できる。上記の実施例において、マルチメディアアセンブリ８０８は、一つのフロントカメラ、及び／又はリアーカメラを含む。装置８００が、例えば撮影モード、或はビデオモード等の操作モードにある場合、フロントカメラ、及び／又はリアーカメラは外部からマルチメディアデータを受信できる。フロントカメラとリアーカメラのそれぞれは、一つの固定型の光レンズ系、或は可変焦点距離と光学ズーム機能を有するものであってもよい。
オーディオアセンブリ８１０は、オーディオ信号をインターフェースするように構成されてもよい。例えば、オーディオアセンブリ８１０は、一つのマイク（ＭＩＣ）を含み、装置８００、例えば呼出しモード、記録モード、及び音声認識モード等の操作モードにある場合、マイクは外部のオーディオ信号を受信することができる。受信されたオーディオ信号は、さらにメモリ８０４に記憶されたり、通信アセンブリ８１６を介して送信されたりされる。上記の実施例において、オーディオアセンブリ８１０は、オーディオ信号を出力するための一つのスピーカーをさらに含む。
Ｉ／Ｏインターフェイス８１２は、プロセスアセンブリ８０２と周辺インターフェイスモジュールの間にインターフェイスを提供するものであり、上記周辺インターフェイスモジュールは、キーボード、クリックホイール、ボタン等であってもよい。これらのボタンは、ホームボタン、ボリュームボタン、起動ボタン、ロッキングボタンを含んでもよいが、これらに限定されない。
センサアセンブリ８１４は、装置８００に各方面の状態に対する評価を提供するための一つ以上のセンサを含む。例えば、センサアセンブリ８１４は、装置８００のＯＮ／ＯＦＦ状態、装置８００のディスプレイとキーパッドのようなアセンブリの相対的な位置決めを検出できる。また、例えば、センサアセンブリ８１４は、装置８００、或は装置８００の一つのアセンブリの位置変更、ユーザと装置８００とが接触しているか否か、装置８００の方位、又は加速／減速、装置８００の温度の変化を検出できる。センサアセンブリ８１４は、何れの物理的接触がない状態にて付近の物体の存在を検出するための近接センサを含んでもよい。センサアセンブリ８１４は、撮影アプリケーションに適用するため、ＣＭＯＳ、又はＣＣＤ図像センサのような光センサを含んでもよい。上記の実施例において、当該センサアセンブリ８１４は、加速度センサ、ジャイロスコープセンサ、磁気センサ、圧力センサ、及び温度センサをさらに含んでもよい。
通信アセンブリ８１６は、装置８００と他の機器の間に有線、又は无線形態の通信を提供する。装置８００は、例えばＷｉＦｉ、２Ｇ、３Ｇ、或はこれらの組み合わせのような、通信規格に基づいた无線ネットワークに接続されてもよい。一つの例示的な実施例において、通信アセンブリ８１６は、放送チャンネルを介して外部の放送管理システムからの放送信号、又は放送に関連する情報を受信する。一つの例示的な実施例において、前記通信アセンブリ８１６は、近距離無線通信（ＮＦＣ）モジュールをさらに含むことにより、近距離通信を推進するようにする。例えば、ＮＦＣモジュールは、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）技術、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）技術、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅ Ｂａｎｄ）技術、ＢＴ（Ｂｌｕｅｔｏｏｔｈ）技術、他の技術に基づいて実現できる。
例示的な実施例において、装置８００は、一つ以上のＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＤＳＰＤ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｄｅｖｉｃｅ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品によって実現されるものであり、上記方法を実行する。
例示的な実施例において、さらに、命令を含む不揮発的なコンピュータで読み取り可能な記憶媒体、例えば命令を含むメモリ８０４を提供しており、装置８００のプロセッサ８２０により上記命令を実行して上記方法を実現する。例えば、前記不揮発的なコンピュータで読み取り可能な記憶媒体は、ＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ−Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ ＲＯＭ）、磁気テープ、フロッピーディスク、光データ記憶デバイス等である。
不揮発的なコンピュータで読み取り可能な記憶媒体は、当該記録媒体のコマンドがモバイル端末のプロセッサによって実行される際に、モバイル端末に撮影制御方法を実行させることができる。前記方法は、
サーバからプッシュされたコンテンツ要約情報を受信するステップと、
前記コンテンツ要約情報を表示するステップと、
前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオファイルを受信するステップと、を含んでおり、
前記コンテンツ要約情報はサーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは、前記サーバが第１の端末装置から送信された前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られたものである。
図８は例示的な実施例におけるリアルタイム・ビデオの提供のために用いられる装置１９００のブロック図である。例えば、装置１９００としてサーバは提供され得る。図８を参照して、装置１９００は１つ又は複数のプロセッサを含むプロセスアセンブリ１９２２と、メモリ１９３２が代表となり、例えばアプリケーションなどのプロセスアセンブリ１９２２により実行可能な各種コマンドを記憶する記憶媒体ソースと、を備える。メモリ１９３２内に記憶されたアプリケーションは、１つ又は１つ以上のモジュールを含み、当該１つ又は１つ以上のモジュールは、それぞれ１組のコマンドに対応する。また、プロセスアセンブリ１９２２は、コマンドを実行するように構成され、これにより、上記リアルタイム・ビデオの提供方法を実行する。前記方法は
第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、
前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、
前記ビデオファイルのコンテンツ要約情報を特定するステップと、
前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含む。
サーバ１９００は、さらに、サーバ１９００の給電管理を行うための電源アセンブリ１９２６と、サーバ１９００とネットワークと接続するための有線又は無線のネットワークインターフェース１９５０と、入出力（Ｉ／Ｏ）インターフェース１９５８とを備える。サーバ１９００は、例えば、Ｗｉｎｄｏｗｓ ＳｅｒｖｅｒＴＭ，Ｍａｃ ＯＳ ＸＴＭ，ＵｎｉｘＴＭ，ＬｉｎｕｘＴＭ，ＦｒｅｅＢＳＤＴＭなどの、メモリ１９３２に記憶された操作システムにおいて操作を行うことができる。
当業者は、本明細書に開示された発明の詳細を考慮し、実施することにより、本発明の他の実施方案を容易に想定することができる。本出願は、本発明のいかなる変形、用途、又は適応的な変化を含むことを目的としており、いかなる変形、用途、又は適応的な変化は、本発明の一般原理に基づいて、且つ本開示において公開されていない本技術分野においての公知常識又は慣用技術手段を含む。明細書及び実施例は、例示的なものを開示しており、本発明の保護範囲と主旨は、特許請求の範囲に記述される。
本発明は、上記において開示された構成又は図面に示した構造に限定されるものではなく、本発明の範囲内であれば、様々な補正又は変更を行うことができる。本発明の範囲は、特許請求の範囲により制限される。

Claims (24)

  1. 第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するステップと、
    前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップと、
    前記ビデオファイルのコンテンツ要約情報を特定するステップと、
    前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
    前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信するステップと、を含むことを特徴とするリアルタイム・ビデオの提供方法。
  2. 前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するステップは、
    前記第１のユーザアカウントに対応するビデオファイルを検索し、
    前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、
    前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するステップを、含むことを特徴とする請求項１に記載の方法。
  3. 前記ビデオファイルのコンテンツ要約情報を特定するステップは、
    前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するステップと、
    予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るステップと、
    前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るステップと、を含むことを特徴とする請求項１に記載の方法。
  4. 前記方法はさらに、
    第１の設定個数のシーンを特定するステップと、
    シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するステップと、
    前記第１の設定枚数のイメージから第２の選定特徴を抽出するステップと、
    前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るステップと、を含むことを特徴とする請求項３に記載の方法。
  5. 前記方法はさらに、
    第２の設定個数のイベントを特定するステップと、
    イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するステップと、
    前記第３の設定個数のビデオから第３の選定特徴を抽出するステップと、
    前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るステップと、を含むことを特徴とする請求項１に記載の方法。
  6. 前記方法はさらに、
    第４の設定個数の人物を特定するステップと、
    人物毎に少なくとも第３の設定枚数のイメージを収集するステップと、
    前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するステップと、
    前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るステップと、を含むことを特徴とする請求項１に記載の方法。
  7. 前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
    前記第１の端末装置から送信された地理位置情報を受信するステップと、
    前記コンテンツ要約情報に前記地理位置情報を付加するステップと、を含むことを特徴とする請求項１に記載の方法。
  8. 前記ビデオファイルのコンテンツ要約情報を特定するステップは、
    設定周期で前記ビデオファイルのコンテンツ要約情報を特定するステップを含んでおり、
    前記ビデオファイルのコンテンツ要約情報を特定するステップの後、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップの前に、前記方法はさらに、
    前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
    前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行することを特徴とする請求項１に記載の方法。
  9. 前記方法はさらに、
    前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するステップと、
    変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するステップと、を含むことを特徴とする請求項１に記載の方法。
  10. サーバからプッシュされたコンテンツ要約情報を受信するステップと、
    前記コンテンツ要約情報を表示するステップと、
    前記コンテンツ要約情報が選択されたことが検出されると、サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するステップと、
    前記ビデオファイルを受信するステップと、を含んでおり、
    前記コンテンツ要約情報は、前記サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは、前記サーバが、第１の端末装置から送信された、前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに、前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られたものであることを特徴とするリアルタイム・ビデオの提供方法。
  11. 前記方法はさらに、
    第２のユーザからの、変更後の端末装置を指示する装置変更指示を受信するステップと、
    前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバが前記ビデオファイルを変更後の端末装置に送信するとともに再生するビデオフレームのフレーム識別子を指定する、又は、変更後の端末装置に前記ビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するステップと、を含むことを特徴とする請求項１０に記載の方法。
  12. 第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信するための第１の受信手段と、
    前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶するための記憶手段と、
    前記ビデオファイルのコンテンツ要約情報を特定するための第１の特定手段と、
    前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信するためのプッシュ手段と、
    前記ビデオ取得請求を受信するための第２の受信手段と、
    前記ビデオファイルを前記第２の端末装置に送信するための第１の送信手段と、を含むことを特徴とするリアルタイム・ビデオの提供装置。
  13. 前記記憶手段は、
    前記第１のユーザアカウントに対応するビデオファイルを検索するための検索サブ手段と、
    前記第１のユーザアカウントに対応するビデオファイルがヒットされた場合、前記フレーム識別子の大きさに基づいて前記ビデオフレームを前記ビデオファイルに記憶し、前記第１のユーザアカウントに対応するビデオファイルがヒットされなかった場合、前記第１のユーザアカウントに対応するビデオファイルを作成し、前記作成されたビデオファイルにビデオフレームを記憶するための記憶サブ手段と、を含むことを特徴とする請求項１２に記載の装置。
  14. 前記第１の特定手段は、
    前記ビデオファイルのそれぞれのビデオフレームから第１の選定特徴を抽出するための抽出サブ手段と、
    予め作成された少なくとも１つのソーターを用いて、抽出された第１の選定特徴を認識して、それぞれのソーターに対応する認識結果及びその信頼度を得るための認識サブ手段と、
    前記第１のユーザアカウントと信頼度が最高の認識結果を組み合わせて、前記ビデオファイルのコンテンツ要約情報を得るための組合せサブ手段と、を含むことを特徴とする請求項１２に記載の装置。
  15. 前記装置はさらに、
    第１の設定個数のシーンを特定するための第２の特定手段と、
    シーン毎に少なくとも、第２の設定枚数の邪魔イメージを少なくとも含む第１の設定枚数のイメージを収集するための第１の収集手段と、
    前記第１の設定枚数のイメージから第２の選定特徴を抽出するための第１の抽出手段と、
    前記第２の選定特徴に基づいてトレーニングしてシーンソーターを得るための第１のトレーニング手段と、を含むことを特徴とする請求項１４に記載の装置。
  16. 前記装置はさらに、
    第２の設定個数のイベントを特定するための第３の特定手段と、
    イベント毎に少なくとも、第４の設定個数の邪魔ビデオを少なくとも含む第３の設定個数のビデオを収集するための第２の収集手段と、
    前記第３の設定個数のビデオから第３の選定特徴を抽出するための第２の抽出手段と、
    前記第３の選定特徴に基づいてトレーニングしてイベントソーターを得るための第２のトレーニング手段と、を含むことを特徴とする請求項１４に記載の装置。
  17. 前記装置はさらに、
    第４の設定個数の人物を特定するための第４の特定手段と、
    人物毎に少なくとも第３の設定枚数のイメージを収集するための第３の収集手段と、
    前記第３の設定枚数のイメージから顔領域を検出するとともに第４の選定特徴を抽出するための第３の抽出手段と、
    前記第４の選定特徴に基づいてトレーニングして顔ソーターを得るための第３のトレーニング手段と、含むことを特徴とする請求項１４に記載の装置。
  18. 前記装置はさらに、
    前記第１の端末装置から送信された地理位置情報を受信する第３の受信手段と、
    前記コンテンツ要約情報に前記地理位置情報を付加するための付加手段と、を含むことを特徴とする請求項１２に記載の装置。
  19. 前記第１の特定手段は、
    設定周期で前記ビデオファイルのコンテンツ要約情報を特定するための特定サブ手段を含み、
    前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と一致であるか否かを判定し、
    前記コンテンツ要約情報がこの前の設定周期で特定されたコンテンツ要約情報と不一致であると判定された場合、前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュするステップを実行する、ことを特徴とする請求項１２に記載の装置。
  20. 前記装置はさらに、
    前記第２の端末装置から送信された、変更後の端末装置を指定する装置変更メッセージを受信するための第４の受信手段と、
    変更後の端末装置に前記ビデオファイルを送信するとともに、再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含むことを特徴とする請求項１２に記載の装置。
  21. サーバからプッシュされたコンテンツ要約情報を受信するための第１の受信手段と、
    前記コンテンツ要約情報を表示するための表示手段と、
    前記コンテンツ要約情報が選択されたことが検出されると、サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信するための第１の送信手段と、
    前記ビデオファイルを受信するための第２の受信手段と、を含んでおり、
    前記コンテンツ要約情報は、前記サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは、前記サーバが、第１の端末装置から送信された、前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られたものである、ことを特徴とするリアルタイム・ビデオの提供装置。
  22. 前記装置はさらに、
    第２のユーザからの変更後の端末装置を指示する装置変更指示を受信するための第３の受信手段と、
    前記サーバに変更後の端末装置を指示する装置変更メッセージを送信することによって、前記サーバが前記ビデオファイルを変更後の端末装置に送信するとともに再生するビデオフレームのビデオ識別子を指定する、又は、変更後の端末装置に前記ビデオファイルを送信するとともに再生するビデオフレームのフレーム識別子を指定するための第２の送信手段と、を含むことを特徴とする請求項２１に記載の装置。
  23. プロセッサと、
    プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
    前記プロセッサは、
    第１の端末装置から送信された、第１のユーザアカウントとフレーム識別子が付けたビデオフレームを、リアルタイムで受信し、
    前記フレーム識別子に基づき、前記第１のユーザアカウントに対応するビデオファイルに前記ビデオフレームを記憶し、
    前記ビデオファイルのコンテンツ要約情報を特定し、
    前記コンテンツ要約情報を、前記第１のユーザアカウントに関連付けられている第２のユーザアカウントの登録した第２の端末装置にプッシュすることによって、前記第２の端末装置に前記コンテンツ要約情報を表示させるとともに、前記コンテンツ要約情報が選択されたことが検出されると、前記ビデオファイルを取得するためのビデオ取得請求を送信し、
    前記ビデオ取得請求を受信した後、前記ビデオファイルを前記第２の端末装置に送信することを特徴とするサーバ。
  24. プロセッサと、
    プロセッサにより実行可能な指令を記憶するためのメモリと、を含み、
    前記プロセッサは、
    サーバからプッシュされたコンテンツ要約情報を受信し、前記コンテンツ要約情報は、サーバにより第１のユーザアカウントに対応するビデオファイルに基づいて特定されたものであり、前記ビデオファイルは、前記サーバが、第１の端末装置から送信された、前記第１のユーザアカウントとフレーム識別子が付けたビデオフレームをリアルタイムで受信するとともに前記フレーム識別子に基づいて前記ビデオフレームを記憶して得られたものであり、
    前記コンテンツ要約情報を表示し、
    前記コンテンツ要約情報が選択されたことが検出されると、前記サーバに前記ビデオファイルを取得するためのビデオ取得請求を送信し、
    前記ビデオファイルを受信することを特徴とする端末装置。
JP2016543310A 2014-08-20 2015-01-22 リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体 Active JP6117446B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201410412559.5A CN104219785B (zh) 2014-08-20 2014-08-20 实时视频提供方法、装置及服务器、终端设备
CN201410412559.5 2014-08-20
PCT/CN2015/071274 WO2016026269A1 (zh) 2014-08-20 2015-01-22 实时视频提供方法、装置及服务器、终端设备

Publications (2)

Publication Number Publication Date
JP2016537747A true JP2016537747A (ja) 2016-12-01
JP6117446B2 JP6117446B2 (ja) 2017-04-19

Family

ID=52100818

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016543310A Active JP6117446B2 (ja) 2014-08-20 2015-01-22 リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体

Country Status (9)

Country Link
US (1) US9788065B2 (ja)
EP (1) EP2988513A1 (ja)
JP (1) JP6117446B2 (ja)
KR (1) KR101680714B1 (ja)
CN (1) CN104219785B (ja)
BR (1) BR112015007163A2 (ja)
MX (1) MX353220B (ja)
RU (1) RU2597232C1 (ja)
WO (1) WO2016026269A1 (ja)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
CN104219785B (zh) * 2014-08-20 2018-07-24 小米科技有限责任公司 实时视频提供方法、装置及服务器、终端设备
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
CN106534955A (zh) * 2015-09-10 2017-03-22 阿里巴巴集团控股有限公司 智能电视设备的切换控制方法和移动终端
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
KR102592904B1 (ko) * 2016-02-19 2023-10-23 삼성전자주식회사 영상 요약 장치 및 방법
US10586535B2 (en) * 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
CN106372620B (zh) * 2016-09-29 2021-06-29 北京小米移动软件有限公司 视频信息的共享方法及装置
CN108124167A (zh) * 2016-11-30 2018-06-05 阿里巴巴集团控股有限公司 一种播放处理方法、装置和设备
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10715883B2 (en) 2017-09-06 2020-07-14 Rovi Guides, Inc. Systems and methods for generating summaries of missed portions of media assets
US11330331B2 (en) 2017-12-12 2022-05-10 Google Llc Proactive detection of media item matching
US10182271B1 (en) * 2017-12-20 2019-01-15 Rovi Guides, Inc. Systems and methods for playback of summary media content
CN108391179B (zh) * 2018-04-26 2021-07-27 腾讯科技（深圳）有限公司 直播数据处理方法、装置、服务器、终端及存储介质
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
CN108632391B (zh) * 2018-05-21 2022-03-11 北京小米移动软件有限公司 信息共享方法及装置
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
CN109598188A (zh) * 2018-10-16 2019-04-09 深圳壹账通智能科技有限公司 信息推送方法、装置、计算机设备和存储介质
US11252483B2 (en) 2018-11-29 2022-02-15 Rovi Guides, Inc. Systems and methods for summarizing missed portions of storylines
US11089356B2 (en) 2019-03-26 2021-08-10 Rovi Guides, Inc. Systems and methods for media content hand-off based on type of buffered data
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
CN112333488A (zh) * 2020-07-23 2021-02-05 深圳Tcl新技术有限公司 视频信息同步方法、装置、系统、设备和存储介质
US11870830B1 (en) * 2020-12-10 2024-01-09 Twitch Interactive, Inc. Embedded streaming content management
CN114095773B (zh) * 2021-11-18 2024-09-20 北京达佳互联信息技术有限公司 视频展示方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157235A (ja) * 2004-11-26 2006-06-15 Canon Inc 撮像装置、画像転送システム及び撮像装置の制御方法
CN101360118A (zh) * 2007-08-02 2009-02-04 广东新支点技术服务有限公司 一种适合移动终端多媒体文件共享与搜索的方法和协议
CN101707686A (zh) * 2009-10-30 2010-05-12 中兴通讯股份有限公司 一种移动终端之间共享视频的方法及系统
US20120303834A1 (en) * 2010-10-07 2012-11-29 Stellatus, LLC Seamless digital streaming over different device types
JP2013101559A (ja) * 2011-11-09 2013-05-23 A1 Communication Corp 監視システム
JP2013229644A (ja) * 2012-04-24 2013-11-07 Alfredcore Inc 動画配信システム、動画配信方法および動画配信プログラム
CN103596017A (zh) * 2013-11-28 2014-02-19 小米科技有限责任公司 一种视频下载方法及系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7188122B2 (en) * 2002-03-11 2007-03-06 Microsoft Corporation Live image server and client
US20040252197A1 (en) 2003-05-05 2004-12-16 News Iq Inc. Mobile device management system
US8528028B2 (en) * 2007-10-25 2013-09-03 At&T Intellectual Property I, L.P. System and method of delivering personal video content
JP2009278481A (ja) * 2008-05-16 2009-11-26 Hitachi Ltd 映像コンテンツ受信装置、映像コンテンツ配信装置および映像コンテンツ配信方法
RU90230U1 (ru) * 2009-04-02 2009-12-27 Общество с ограниченной ответственностью "ДВИН" Система видеонаблюдения с общим сервером в сети интернет
US20100306671A1 (en) * 2009-05-29 2010-12-02 Microsoft Corporation Avatar Integrated Shared Media Selection
CN101626481B (zh) 2009-08-11 2014-08-13 中兴通讯股份有限公司 终端间共享文件的方法及其终端
KR20110047399A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 컨텐츠 업로드 서비스를 제공하는 서버, 단말기 및 컨텐츠 업로드 방법
US8838696B2 (en) 2010-09-15 2014-09-16 Syniverse Technologies, Llc Method and apparatus to provide an ecosystem for mobile video
US9100667B2 (en) * 2011-02-18 2015-08-04 Microsoft Technology Licensing, Llc Life streaming
CN102307295B (zh) 2011-03-15 2013-10-30 陈建国 基于pstn-ip双网协作的远程视频监控系统及方法
CN102207966B (zh) * 2011-06-01 2013-07-10 华南理工大学 基于对象标签的视频内容快速检索方法
EP2720457A4 (en) 2011-06-13 2015-03-25 Nec Corp VIDEO PROCESSING SYSTEM, VIDEO PROCESSING METHOD, VIDEO PROCESSING DATABASE CREATING METHOD, VIDEO PROCESSING DATA BASE, VIDEO PROCESSING APPARATUS, AND CONTROL METHOD AND CONTROL PROGRAM THEREOF
US8473550B2 (en) * 2011-09-21 2013-06-25 Color Labs, Inc. Content sharing using notification within a social networking environment
US8699852B2 (en) * 2011-10-10 2014-04-15 Intellectual Ventures Fund 83 Llc Video concept classification using video similarity scores
CN103209248B (zh) 2012-01-11 2014-12-10 三星电子（中国）研发中心 共享多媒体内容的手机终端和方法
CN102664943A (zh) * 2012-04-17 2012-09-12 中兴通讯股份有限公司 一种播放信息共享系统及方法
US9317751B2 (en) * 2012-04-18 2016-04-19 Vixs Systems, Inc. Video processing system with video to text description generation, search system and methods for use therewith
CN103259938A (zh) 2013-06-03 2013-08-21 贝壳网际（北京）安全技术有限公司 一种视频播放的处理方法及系统
CN104219785B (zh) * 2014-08-20 2018-07-24 小米科技有限责任公司 实时视频提供方法、装置及服务器、终端设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157235A (ja) * 2004-11-26 2006-06-15 Canon Inc 撮像装置、画像転送システム及び撮像装置の制御方法
CN101360118A (zh) * 2007-08-02 2009-02-04 广东新支点技术服务有限公司 一种适合移动终端多媒体文件共享与搜索的方法和协议
CN101707686A (zh) * 2009-10-30 2010-05-12 中兴通讯股份有限公司 一种移动终端之间共享视频的方法及系统
US20120303834A1 (en) * 2010-10-07 2012-11-29 Stellatus, LLC Seamless digital streaming over different device types
JP2013101559A (ja) * 2011-11-09 2013-05-23 A1 Communication Corp 監視システム
JP2013229644A (ja) * 2012-04-24 2013-11-07 Alfredcore Inc 動画配信システム、動画配信方法および動画配信プログラム
CN103596017A (zh) * 2013-11-28 2014-02-19 小米科技有限责任公司 一种视频下载方法及系统

Also Published As

Publication number Publication date
KR101680714B1 (ko) 2016-11-29
KR20160031992A (ko) 2016-03-23
CN104219785B (zh) 2018-07-24
BR112015007163A2 (pt) 2017-07-04
US9788065B2 (en) 2017-10-10
MX353220B (es) 2018-01-08
JP6117446B2 (ja) 2017-04-19
MX2015003603A (es) 2016-04-01
EP2988513A1 (en) 2016-02-24
RU2597232C1 (ru) 2016-09-10
CN104219785A (zh) 2014-12-17
US20160057475A1 (en) 2016-02-25
WO2016026269A1 (zh) 2016-02-25

Similar Documents

Publication Publication Date Title
JP6117446B2 (ja) リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体
CN106165430B (zh) 视频直播方法及装置
JP6389014B2 (ja) スマート機器の音声制御方法、装置、プログラム、記録媒体、制御機器およびスマート機器
CN104796781B (zh) 视频片段提取方法及装置
CN106231259B (zh) 监控画面的显示方法、视频播放器及服务器
JP7125834B2 (ja) 画像取得方法および装置
CN108037863B (zh) 一种显示图像的方法和装置
US20170178289A1 (en) Method, device and computer-readable storage medium for video display
CN105845124B (zh) 音频处理方法及装置
WO2017054358A1 (zh) 导航方法及装置
US20170311004A1 (en) Video processing method and device
CN109348239B (zh) 直播片段处理方法、装置、电子设备及存储介质
JP6211715B2 (ja) ビデオのブラウジング方法、その装置、プログラム及び記録媒体
WO2022037307A1 (zh) 信息推荐方法、装置及电子设备
JP6474393B2 (ja) 顔アルバムに基づく音楽再生方法、装置および端末デバイス
CN109245997B (zh) 语音消息播放方法及装置
WO2017045302A1 (zh) 信息收集方法和装置
RU2663709C2 (ru) Способ и устройство для обработки информации
JP2016534666A (ja) ビデオのバックアップ方法、装置、プログラム及び記録媒体
WO2018076358A1 (zh) 多媒体信息播放方法及系统、标准化服务器、直播终端
CN109618192B (zh) 播放视频的方法、装置、系统和存储介质
CN114009003A (zh) 图像采集方法、装置、设备及存储介质
US10950272B2 (en) Method and apparatus for obtaining audio-visual information, device, and storage medium
CN107872620B (zh) 视频录制方法及装置、计算机可读存储介质
CN112087653A (zh) 一种数据处理方法、装置和电子设备

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170310

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170322

R150 Certificate of patent or registration of utility model

Ref document number: 6117446

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250