JP2018519679A - ビデオ処理方法、装置、プログラム及び記録媒体 - Google Patents

ビデオ処理方法、装置、プログラム及び記録媒体 Download PDF

Info

Publication number
JP2018519679A
JP2018519679A JP2016560471A JP2016560471A JP2018519679A JP 2018519679 A JP2018519679 A JP 2018519679A JP 2016560471 A JP2016560471 A JP 2016560471A JP 2016560471 A JP2016560471 A JP 2016560471A JP 2018519679 A JP2018519679 A JP 2018519679A
Authority
JP
Japan
Prior art keywords
video image
target
video
multiplexed
target video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016560471A
Other languages
English (en)
Other versions
JP6543644B2 (ja
Inventor
志▲剛▼ 李
志▲剛▼ 李
恒 ▲孫▼
恒 ▲孫▼
洋 ▲張▼
洋 ▲張▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Publication of JP2018519679A publication Critical patent/JP2018519679A/ja
Application granted granted Critical
Publication of JP6543644B2 publication Critical patent/JP6543644B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42607Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383Accessing a communication channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本発明は、ビデオ処理方法装置、プログラム及び記録媒体に関するものであり、ここで、ビデオ処理方法は、複数の移動端末各々から送信される多重ビデオ画像を受信するステップと、多重ビデオ画像を表示するステップと、ユーザから入力されたターゲットビデオ画像の選択命令を獲得するステップと、他のクライアントにターゲットビデオ画像を送信するステップと、を含み、ここで、ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。本発明の実施例は、表示された多重ビデオ画像のうちのいずれかのビデオ画像を選択してライブ中継のためのターゲットビデオ画像にすることによって、ビデオライブ中継の内容を豊かにすることができ、ユーザの体験を大幅に向上させる。
【選択図】 図1

Description

相互参照
本願は、出願番号がCN201610258583.7であって、出願日が2016年4月22日である中国特許出願に基づき優先権を主張し、当該中国特許出願のすべての内容を本願に援用する。
本発明は、通信技術分野に関するものであって、特に、ビデオ処理方法、及び装置に関するものである。
ビデオライブ中継は、インターネット、及びストリーミングミディア技術を利用してライブ中継することであり、ビデオは、画像、文字、音などの豊かな要素が融合されているため、その音と形状が豊かであり、効果が非常によく、ますますインターネットの主流の表現方式になって来た。
一方、携帯電話のビデオライブ中継は、スマートフォンを利用してリアルタイムの撮影を実現し、所在地で発生した事件をいつでもどこでもスマートフォンを通じて複数の観衆に共有する。しかしながら、現在の携帯電話のビデオライブ中継は、その内容が比較的単一であり、ユーザ体験が悪い。
本発明は、関連技術に存在する問題を克服するために、ビデオ処理方法、及び装置を提供する。
本発明の実施例の第1の局面によると、ビデオ処理方法を提供し、当該方法は、
複数の移動端末各々から送信される多重ビデオ画像を受信するステップと、
前記多重ビデオ画像を表示するステップと、
ユーザから入力されたターゲットビデオ画像の選択命令を獲得するステップと、
他のクライアントに前記ターゲットビデオ画像を送信するステップと、
を含み、
ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。
1つの実施例において、前記多重ビデオ画像を表示するステップ以前に、
ローカルのビデオ画像を収集するステップをさらに含み、
前記多重ビデオ画像を表示するステップは、
前記ローカルのビデオ画像、及び前記多重ビデオ画像を表示するステップを含む。
1つの実施例において、ターゲットビデオ画像が多重ビデオ画像である場合、前記他のクライアントに前記ターゲットビデオ画像を送信するステップは、
ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、処理されたビデオ画像を他のクライアントに送信するステップを含む。
1つの実施例において、前記方法は、
ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信するステップをさらに含む。
1つの実施例において、前記ターゲットビデオ画像の選択命令、及び前記ターゲットビデオ画像の切り替え命令は、音声制御命令である。
1つの実施例において、前記方法は、
複数の移動端末各々から送信される複数のオーディオ情報を受信するステップと、
前記複数のオーディオ情報に対して平滑化処理を行ってターゲットオーディオ情報を得るステップと、
他のクライアントに前記ターゲットオーディオ情報を送信するステップと、
をさらに含む。
本発明の実施例の第2の局面によると、ビディオ処理装置を提供し、当該装置は、
複数の移動端末各々から送信される多重ビデオ画像を受信するように構成される第1の受信モジュールと、
前記第1の受信モジュールにより受信された前記多重ビデオ画像を表示するように構成される表示モジュールと、
ユーザから入力されたターゲットビデオ画像の選択命令を獲得するように構成される獲得モジュールと、
他のクライアントに前記ターゲットビデオ画像を送信するように構成される第1の送信モジュールと、
を含み、
ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、前記表示モジュールにより表示された多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。
1つの実施例において、前記装置は、
前記表示モジュールが前記多重ビデオ画像を表示する前に、ローカルのビデオ画像を収集するように構成される収集モジュールをさらに含み、
ここで、前記表示モジュールは、前記ローカルのビデオ画像、及び前記多重ビデオ画像を表示するように構成される。
1つの実施例において、ターゲットビデオ画像が多重ビデオ画像である場合、前記第1の送信モジュールは、
ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、他のクライアントに処理されたビデオ画像を送信するように構成される。
1つの実施例において、前記装置は、
ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信するように構成される獲得送信モジュールをさらに含む。
1つの実施例において、前記ターゲットビデオ画像の選択命令、及び前記ターゲットビデオ画像の切り替え命令は、音声制御命令である。
1つの実施例において、前記装置は、
複数の移動端末各々から送信される複数のオーディオ情報を受信するように構成される第2の受信モジュールと、
前記第2の受信モジュールにより受信された前記複数のオーディオ情報に対して平滑化処理を行って、ターゲットオーディオ情報を得るように構成される処理モジュールと、
前記処理モジュールにより得られた前記ターゲットオーディオ情報を他のクライアントに送信するように構成される第2の送信モジュールと、
をさらに含む。
本発明の実施例の第3の局面によると、ビディオ処理装置を提供し、当該装置は、
プロセッサと、
前記プロセッサにより実行可能な命令を記憶するためのメモリと、
を含み、
前記プロセッサは、
複数の移動端末各々から送信される多重ビデオ画像を受信し、
前記多重ビデオ画像を表示し、
ユーザから入力されたターゲットビデオ画像の選択命令を獲得し、
他のクライアントに前記ターゲットビデオ画像を送信するように構成され、
ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。
本発明の実施例に係る技術案は、下記の有益な効果を有する。
複数の移動端末から送信された多重ビデオ画像を表示し、ユーザから入力されたターゲットビデオ画像の選択命令を獲得した後、他のクライアントにターゲットビデオ画像を送信することができ、実現過程において、多重ビデオ画像からいずれかのビデオ画像を選択してライブ中継のためのターゲットビデオ画像にすることによって、ビデオライブ中継の内容を豊かにすることができ、ユーザの体験を大幅に向上させる。
複数の移動端末各々から送信される多重ビデオ画像を受信するときにローカルのビデオ画像を収集してもよく、ローカルのビデオ画像、及び多重ビデオ画像を表示して、ビデオのライブ中継時に、ローカルのビデオ画像、及び多重ビデオ画像からいずれかのビデオ画像を選択してターゲットビデオ画像にすることによって、ビデオライブ中継の内容を大幅に豊かにすることができ、ユーザの体験を向上させる。
ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行うことによって、ビデオライブ中継の内容量、鮮明度またはスタイルを向上させ、ライブ中継効果を向上させる。
ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得したとき、切り替えられたターゲットビデオ画像を他のクライアントに送信することによって、ビデオ画像の切り替えを実現し、ユーザの体験を大幅に向上させる。
ターゲットビデオ画像の選択命令、及び上記ターゲットビデオ画像の切り替え命令が音声制御命令であってもよいため、ユーザがターゲットビデオ画像を選択したり、ターゲットビデオ画像を切り替えたりするのに便利を提供する。
受信した複数のオーディオ情報に対して平滑化処理を行って、鮮明なターゲットビデオ情報が得られ、その後、他のクライアントに鮮明なターゲットオーディオ情報を送信することによって、ユーザのビデオライブ中継体験を向上させる。
以上の一般的な記述と、以下の詳細の記述は、ただ例示的なものであって、本発明を限定するものではないことを理解すべきである。
ここの図面は、明細書に組み入れて本明細書の一部分を構成し、本発明に合致する実施例を例示するとともに、明細書とともに本発明の原理を解釈するために用いられる。
1つの例示的な実施例に係るビデオ処理方法のフローチャートである。 1つの例示的な実施例に係るビデオ処理方法の場面図である。 1つの例示的な実施例に係る別のビデオ処理方法のフローチャートである。 1つの例示的な実施例に係る別のビデオ処理方法のフローチャートである。 1つの例示的な実施例に係る別のビデオ処理方法のフローチャートである。 1つの例示的な実施例に係るターゲットビデオ画像のうちの多重ビデオ画像を処理するフローチャートである。 1つの例示的な実施例に係る多重ビデオ画像に対してスティッチング処理を行う画面模式図である。 1つの例示的な実施例に係る多重ビデオ画像に対して重ね合わせ処理を行う画面模式図である。 1つの例示的な実施例に係るビデオ処理装置のブロック図である。 1つの例示的な実施例に係る別のビデオ処理装置のブロック図である。 1つの例示的な実施例に係る別のビデオ処理装置のブロック図である。 1つの例示的な実施例に係る別のビデオ処理装置のブロック図である。 1つの例示的な実施例に係るビデオ処理装置に適用されるブロック図である。
ここで、例示的な実施例について詳細に説明し、その例示は図面に示される。以下、図面に関連して説明する際に、特別な説明がない限り、異なる図面での同一符号は、同一または類似な要素を示す。以下の例示的な実施例で記載する実施例は、本発明に一致する全ての実施例を代表するわけではない。かえって、それらは、添付される特許請求の範囲で詳細に記載される本発明の一部の態様に一致する装置、及び方法の例に過ぎない。
図1は、1つの例示的な実施例に係るビデオ処理方法のフローチャートであり、図1に示されたように、当該ビデオ処理方法は、移動端末に適用され、当該移動端末は、携帯電話を含むがこれに限定されず、当該ビデオ処理方法は、下記のステップS101〜S104を含む。
ステップS101において、複数の移動端末各々から送信される多重ビデオ画像を受信する。
当該実施例において、複数の移動端末のうちの1つの移動端末をライブ中継移動端末にすることができ、当該ライブ中継移動端末は、近距離無線通信技術、例えばワイファイ(Wifi)共有を通じて残りの複数の移動端末からの多重ビデオ画像を受信することができる。
ここで、移動端末は、携帯電話であってもよく、複数の移動端末からの多重ビデオ画像は、同一の時間、異なる場面のビデオ画像、同一の時間、異なる角度のビデオ画像、及び同一の時間、異なる場面、異なる角度のビデオ画像のうちの少なくとも1つを含むがそれらに限定されない。
ステップS102において、多重ビデオ画像を表示する。
ライブ中継移動端末は、多重ビデオ画像を受信した後、多重ビデオ画像を表示することができる。
ステップS103において、ユーザから入力されたターゲットビデオ画像の選択命令を獲得する。
当該ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、ここで、ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。すなわち、アンカーは、多重ビデオ画像から少なくとも1つのパスのビデオ画像を選択してライブ中継することができる。
ステップS104において、他のクライアントにターゲットビデオ画像を送信する。
当該実施例において、ライブ中継移動端末は、ユーザから入力されたターゲットビデオ画像の選択命令を獲得した後、他のクライアントにターゲットビデオ画像を送信してビデオライブ中継を実現することができる。
下記に、図2と合わせて本発明に対して例示的な説明を行い、図2に示されたように、ライブ中継携帯電話21は、携帯電話22、携帯電話23、携帯電話24、及び携帯電話25からの4つのパスのビデオ画像を受信し、当該4つのパスのビデオ画像を表示し、アンカーが携帯電話22のビデオ画像をライブ中継しようとする場合、携帯電話21は、携帯電話22のビデオ画像の識別子を獲得した後、サーバを通じて他のクライアントに携帯電話22のビデオ画像を送信してビデオライブ中継を実現することができる。これから分かるように、当該実施例は、複数の移動端末からの多重ビデオ画像を受信することによって、豊かなビデオ内容を獲得することができ、そのうちのいずれかのビデオ内容を選択してライブ中継することができ、ユーザの体験を大幅に向上させる。
上記のビデオ処理方法の実施例においては、複数の移動端末から送信された多重ビデオ画像を表示し、ユーザから入力されたターゲットビデオ画像の選択命令を獲得した後、他のクライアントにターゲットビデオ画像を送信することができ、実現過程において、多重ビデオ画像からいずれかのビデオ画像を選択してライブ中継のためのターゲットビデオ画像にすることによって、ビデオライブ中継の内容を豊かにすることができ、ユーザの体験を大幅に向上させる。
図3は、1つの例示的な実施例に係る別のビデオ処理方法のフローチャートであり、図3に示されたように、当該方法は、下記のステップを含む。
ステップS301において、複数の移動端末各々から送信される多重ビデオ画像を受信する。
ステップS302において、ローカルのビデオ画像を収集する。
当該実施例において、複数の移動端末各々から送信される多重ビデオ画像を受信するときに、ローカルのビデオ画像を収集してもよい。
ステップS303において、ローカルのビデオ画像、及び多重ビデオ画像を表示する。
ステップS304において、ユーザから入力されたターゲットビデオ画像の選択命令を獲得する。
ここで、当該ターゲットビデオ画像の選択命令は、音声制御命令であってもよい。当該ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれてもよく、ここで、ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。すなわち、アンカーは、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像を選択してライブ中継することができる。
ステップS305において、他のクライアントにターゲットビデオ画像を送信する。
ターゲットビデオ画像が多重ビデオ画像である場合、ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、処理されたビデオ画像を他のクライアントに送信することができる。
上記のビデオ処理方法の実施例においては、複数の移動端末各々から送信される多重ビデオ画像を受信するときにローカルのビデオ画像を収集してもよく、ローカルのビデオ画像、及び多重ビデオ画像を表示して、ビデオのライブ中継時に、ローカルのビデオ画像、及び多重ビデオ画像からいずれかのビデオ画像を選択してターゲットビデオ画像にすることによって、ビデオライブ中継の内容を大幅に豊かにすることができ、ユーザの体験を向上させる。
図4は、1つの例示的な実施例に係る別のビデオ処理方法のフローチャートであり、図4に示されたように、ステップS104以降に当該方法は、下記のステップを含む。
ステップS105において、ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信する。
ここで、当該ターゲットビデオ画像の切り替え命令は、音声制御命令であってもよい。
図2に示された4つのビデオ画像を例として説明すると、前にライブ中継していたビデオ画像がビデオ画像1であるが、このときユーザがビデオ画像3をライブ中継しようとする場合、アンカーが「ビデオ画像3に切り替え」という音声切り替え命令を出した後、ライブ中継携帯電話21は、当該音声切り替え命令を獲得し、他のクライアントにビデオ画像3を送信してビデオ画像3をライブ中継することができる。
上記のビデオ処理方法の実施例においては、ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得したときに、切り替えられたターゲットビデオ画像を他のクライアントに送信することによって、ビデオ画像の切り替えを実現し、ユーザの体験を大幅に向上させる。
図5は、1つの例示的な実施例に係る別のビデオ処理方法のフローチャートであり、図5に示されたように、図4に示された実施例を基礎とした上で、当該方法は、下記のステップをさらに含んでもよい。
ステップS501において、複数の移動端末各々から送信される複数のオーディオ情報を受信する。
当該実施例において、複数の移動端末各々から送信される多重ビデオ画像を受信する以外に、複数の移動端末各々から送信される複数のオーディオ情報をさらに受信することができる。
ステップS502において、複数のオーディオ情報に対して平滑化処理を行って、ターゲットオーディオ情報を得る。
当該実施例において、複数のオーディオ情報に対して平滑化処理を行ってノイズを除去することによって、ターゲットオーディオ情報の鮮明度を向上させることができる。
ステップS503において、他のクライアントにターゲットオーディオ情報を送信する。
上記の実施例は、受信した複数のオーディオ情報に対して平滑化処理を行って、鮮明なターゲットビデオ情報を得、その後に他のクライアントに鮮明なターゲットオーディオ情報を送信することによって、ユーザのビデオライブ中継の体験を向上させる。
図6Aは、1つの例示的な実施例に係るターゲットビデオ画像のうちの多重ビデオ画像に対して処理を実行するフローチャートであり、図6Aに示されたように、当該過程は、下記のステップを含む。
ステップS601において、多重ビデオ画像の間に重合画像が存在するか否かを判断し、重合画像が存在する場合、ステップS602を実行し、そうではない場合、ステップS603を実行する。
当該実施例において、2台の携帯電話のビデオ収集角度が重合すると、収集された2つのパスのビデオ画像の間に重合画像が存在することになる。
ステップS602において、重合画像を除去する。
ステップS603において、多重ビデオ画像が属するモードを判断し、多重ビデオ画像がモニタリングモードに属する場合、ステップS604を実行し、多重ビデオ画像がPIP(Picture in Picture)モードに属する場合、ステップS605を実行する。
当該実施例において、機械学習アルゴリズムまたは神経網アルゴリズムを通じて、多重ビデオ画像の内容に基づいて多重ビデオ画像に対応する活動類型を識別し、その後、活動類型に基づいて、多重ビデオ画像が属するモードを特定することができる。
例えば、多重ビデオ画像の内容に基づいて、現在の活動が競技活動であるかそれともお祭り活動であるか識別することができ、競技活動の場合、多重ビデオ画像がPIP モードに属すると特定することができ、お祭り活動の場合、多重ビデオ画像がモニタリングモードに属すると特定することができる。
活動類型に基づいて多重ビデオ画像が属するモードを特定することによって、実現方式が簡単であり、正確率が高い。
ステップS604において、多重ビデオ画像に対してスティッチング処理を行い、操作を終了する。
当該実施例において、多重ビデオ画像がモニタリングモードに属すると特定した後、多重ビデオ画像に対してスティッチング処理を行うことができる。
例えば、現在の活動がお祭り活動である場合、同一の時間、異なる場面の多重ビデオ画像を一幅の画像にスティッチングすることができ、図6Bに示されたように、場面Aと場面Bの2つのパスのビデオ画像を一幅の画像にスティッチングすることによって、お祭り活動をライブ中継する目的を達成する。
ステップS605において、多重ビデオ画像に対して重ね合わせ処理を行い、操作を終了する。
当該実施例において、多重ビデオ画像がPIPモードに属すると特定した後、多重ビデオ画像に対して重ね合わせ処理を行うことができる。
例えば、現在の活動が競技活動である場合、1つのパスのビデオ画像を別の1つのパスのビデオ画像に重ね合わせてPIPの形式を形成し、図6Cに示されたように、ビデオ画像Cをビデオ画像Dに重ね合わせることによって、競技活動をライブ中継する目的を達成する。
上記のビデオ処理方法の実施例においては、多重ビデオ画像が属するモードに基づいて、多重ビデオ画像に対してスティッチング処理を行うかまたは重ね合わせ処理を行うかを決め、実現方式が柔軟であり、適切性が強く、ライブ中継効果がより良い。
上記のビデオ処理方法の実施例に対応して、本発明は、ビデオ処理装置の実施例をさらに提供する。
図7は、1つの例示的な実施例に係るビデオ処理装置のブロック図であり、図7に示されたように、ビデオ処理装置は、第1の受信モジュール71、表示モジュール72、獲得モジュール73、及び第1の送信モジュール74を含む。
第1の受信モジュール71は、複数の移動端末各々から送信される多重ビデオ画像を受信するように構成される。
当該実施例において、複数の移動端末のうちの1つの移動端末をライブ中継移動端末にすることができ、当該ライブ中継移動端末は、近距離無線通信技術、例えばワイファイ(Wifi)共有を通じて残りの複数の移動端末からの多重ビデオ画像を受信することができる。
ここで、複数の移動端末からの多重ビデオ画像は、同一の時間、異なる場面のビデオ画像、同一の時間、異なる角度のビデオ画像、及び同一の時間、異なる場面、異なる角度のビデオ画像のうちの少なくとも1つを含むがそれらに限定されない。
表示モジュール72は、第1の受信モジュール71により受信された多重ビデオ画像を表示するように構成される。
獲得モジュール73は、ユーザから入力されたターゲットビデオ画像の選択命令を獲得するように構成され、当該ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、ターゲットビデオ画像は、表示モジュール72により表示された多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。
第1の送信モジュール74は、他のクライアントにターゲットビデオ画像を送信するように構成される。
当該実施例において、ユーザから入力されたターゲットビデオ画像の選択命令を獲得した後、第1の送信モジュール74を通じて他のクライアントにターゲットビデオ画像を送信して、ビデオライブ中継を実現することができる。
1つの実施例において、ターゲットビデオ画像が多重ビデオ画像である場合、第1の送信モジュール74は、ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、処理されたビデオ画像を他のクライアントに送信するように構成されてもよい。
図7に示された装置は、上記の図1に示された方法のフローを実現するためのものであり、関連する内容の記述は同じであり、ここで余計な説明はしない。
上記のビデオ処理装置の実施例は、複数の移動端末から送信された多重ビデオ画像を表示し、ユーザから入力されたターゲットビデオ画像の選択命令を獲得した後、他のクライアントにターゲットビデオ画像を送信することができ、実現過程において、多重ビデオ画像からいずれかのビデオ画像を選択してライブ中継のためのターゲットビデオ画像にすることによって、ビデオライブ中継の内容を豊かにすることができ、ユーザの体験を大幅に向上させる。
図8は、1つの例示的な実施例に係る別のビデオ処理装置のブロック図であり、図8に示されたように、上記の図7に示された実施例を基礎とした上で、当該装置は、収集モジュール75をさらに含んでもよい。
収集モジュール75は、表示モジュール72が多重ビデオ画像を表示する以前に、ローカルのビデオ画像を収集するように構成される。
当該実施例において、複数の移動端末各々から送信される多重ビデオ画像を受信するときに、ローカルのビデオ画像を収集してもよい。
ここで、表示モジュール72は、ローカルのビデオ画像、及び多重ビデオ画像を表示するように構成される。
図8に示された装置は、上記の図3に示された方法のフローを実現するためのものであり、関連する内容の記述は同じであり、ここで余計な説明はしない。
上記のビデオ処理装置の実施例においては、複数の移動端末各々から送信される多重ビデオ画像を受信するときにローカルのビデオ画像を収集してもよく、ローカルのビデオ画像、及び多重ビデオ画像を表示して、ビデオのライブ中継時に、ローカルのビデオ画像、及び多重ビデオ画像からいずれかのビデオ画像を選択してターゲットビデオ画像にすることによって、ビデオライブ中継の内容を大幅に豊かにすることができ、ユーザの体験を向上させる。
図9は、1つの例示的な実施例に係る別のビデオ処理装置のブロック図であり、図9に示されたように、上記の図7に示された実施例を基礎とした上で、当該装置は、獲得送信モジュール76をさらに含んでもよい。
獲得送信モジュール76は、ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信するように構成される。
ここで、当該ターゲットビデオ画像の切り替え命令は、音声制御命令であってもよい。
図2に示された4つのビデオ画像を例として説明すると、前にライブ中継していたビデオ画像がビデオ画像1であるが、このときユーザがビデオ画像3をライブ中継しようとする場合、アンカーが「ビデオ画像3に切り替え」という音声切り替え命令を出した後、ライブ中継携帯電話21は、当該音声切り替え命令を獲得し、他のクライアントにビデオ画像3を送信してビデオ画像3をライブ中継することができる。
図9に示された装置は、上記の図4に示された方法のフローを実現するためのものであり、関連する内容の記述は同じであり、ここで余計な説明はしない。
上記のビデオ処理方法の実施例においては、ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得したときに、切り替えられたターゲットビデオ画像を他のクライアントに送信することによって、ビデオ画像の切り替えを実現し、ユーザの体験を大幅に向上させる。
図10は、1つの例示的な実施例に係る別のビデオ処理装置のブロック図であり、図9Cに示されたように、上記の図9に示された実施例を基礎とした上で、当該装置は、第2の受信モジュール77、処理モジュール78、及び第2の送信モジュール79をさらに含んでもよい。
第2の受信モジュール77は、複数の移動端末各々から送信される複数のオーディオ情報を受信するように構成される。
当該実施例において、複数の移動端末各々から送信される多重ビデオ画像を受信する以外に、複数の移動端末各々から送信される複数のオーディオ情報をさらに受信することができる。
処理モジュール78は、第2の受信モジュール78により受信された複数のオーディオ情報に対して平滑化処理を行って、ターゲットオーディオ情報を得るように構成される。
当該実施例において、複数のオーディオ情報に対して平滑化処理を行ってノイズを除去することによって、ターゲットオーディオ情報の鮮明度を向上させることができる。
第2の送信モジュール79は、処理モジュール78により得られたターゲットオーディオ情報を他のクライアントに送信するように構成される。
図10に示された装置は、上記の図5に示された方法のフローを実現するためのものであり、関連する内容の記述は同じであり、ここで余計な説明はしない。
上記の実施例は、受信した複数のオーディオ情報に対して平滑化処理を行って、鮮明なターゲットビデオ情報を得、その後に他のクライアントに鮮明なターゲットオーディオ情報を送信することによって、ユーザのビデオライブ中継体験を向上させる。
上記実施例の装置に関して、その各モジュール、サブモジュールが動作を実行する具体的な方式は、既に関連する当該方法実施例で詳細に説明したため、ここで詳細な説明は省略する。
図11は、1つの例示的な実施例に係るビデオ処理装置に適用されるブロック図である。例えば、装置1100は、携帯電話、コンピュータ、デジタル放送端末、メッセージ送受信装置、ゲームコンソール、タブレット装置、医療設備、フィットネス装置、PDAなどである。
図11を参照すると、装置1100は、プロセスアセンブリ1102、メモリ1104、電源アセンブリ1106、マルチメディアアセンブリ1108、オーディオアセンブリ1110、入出力(I/O)インタフェース1112、センサアセンブリ1114、及び通信アセンブリ1116のような1つ或いは複数のアセンブリを含んでもよい。
プロセスアセンブリ1102は、一般的には装置1100の全体の動作を制御するものであり、例えば、表示、電話呼び出し、データ通信、カメラ操作、及び記録操作と関連する操作を制御する。プロセスアセンブリ1102は、1つ以上のプロセッサ1120を含み、これらによって命令を実行することにより、上記の方法の全部、或は一部のステップを実現するようにしてもよい。なお、プロセスアセンブリ1102は、1つ以上のモジュールを含んでプロセスアセンブリ1102と他のアセンブリの間のインタラクションを容易にしてもよい。例えば、プロセスアセンブリ1102は、マルチメディアモジュールを含んでマルチメディアアセンブリ1108とプロセスアセンブリ1102の間のインタラクションを容易にしてもよい。
メモリ1104は、各種類のデータを記憶することにより装置1100の動作を支援するように構成される。これらのデータの例は、装置1100において操作されるいずれのアプリケーションプログラム又は方法の命令、連絡対象データ、電話帳データ、メッセージ、画像、ビデオ等を含む。メモリ1104は、いずれかの種類の揮発性メモリ、不揮発性メモリ記憶デバイスまたはそれらの組み合わせによって実現されてもよく、例えば、SRAM(Static Random Access Memory)、EEPROM(Electrically Erasable Programmable Read−Only Memory)、EPROM(Erasable Programmable Read Only Memory)、PROM(Programmable ROM)、ROM(Read Only Member)、磁気メモリ、フラッシュメモリ、磁気ディスク、或いは光ディスクである。
電源アセンブリ1106は、装置1100の各アセンブリに電力を供給する。電源アセンブリ1106は、電源管理システム、1つ或いは複数の電源、及び装置1100のための電力の生成、管理、及び割り当てに関連する他のアセンブリを含んでもよい。
マルチメディアアセンブリ1108は、上記装置1100とユーザの間に1つの出力インタフェースを提供するスクリーンを含む。部分実施例において、スクリーンは、液晶モニター(LCD)とタッチパネル(TP)を含んでもよい。スクリーンがタッチパネルを含むことにより、スクリーンはタッチスクリーンを実現することができ、ユーザからの入力信号を受信することができる。タッチパネルは、1つ以上のタッチセンサを含み、タッチ、スライド、及びタッチパネル上のジェスチャを検出することができる。上記タッチセンサは、タッチ、或はスライド動作の境界だけでなく、上記タッチ、或はスライド操作に係る継続時間、及び圧力も検出できる。部分実施例において、マルチメディアアセンブリ1108は、1つのフロントカメラ、及び/又はリアカメラを含む。装置1100が例えば撮影モード、或はビデオモード等の操作モードにある場合、フロントカメラ、及び/又はリアカメラは外部からマルチメディアデータを受信できる。フロントカメラとリアカメラのそれぞれは、1つの固定型の光レンズ系、或は可変焦点距離と光学ズーム機能を有するものであってもよい。
オーディオアセンブリ1110は、オーディオ信号を入出力するように構成される。例えば、オーディオアセンブリ1110は、1つのマイク(MIC)を含み、装置1100が例えば呼出しモード、記録モード、及び音声認識モード等の操作モードにある場合、マイクは外部のオーディオ信号を受信することができる。受信されたオーディオ信号は、さらにメモリ1104に記憶されたり、通信アセンブリ1116を介して送信されたりする。部分実施例において、オーディオアセンブリ1110は、オーディオ信号を出力するための1つのスピーカーをさらに含む。
I/Oインタフェース1112は、プロセスアセンブリ1102と周辺インタフェースモジュールの間にインタフェースを提供するものであり、上記周辺インタフェースモジュールは、キーボード、クリックホイール、ボタン等であってもよい。これらのボタンは、ホームボタン、ボリュームボタン、起動ボタン、ロッキングボタンを含んでもよいが、これらに限定されない。
センサアセンブリ1114は、装置1100に各方面の状態に対する評価を提供するための1つ以上のセンサを含む。例えば、センサアセンブリ1114は、装置1100のON/OFF状態、装置1100のディスプレイとキーパッドのようなアセンブリの相対的な位置決めを検出できる。また、センサアセンブリ1114は、装置1100、或いは装置1100の1つのアセンブリの位置変更、ユーザと装置1100とが接触しているか否か、装置1100の方位、又は加速/減速、装置1100の温度の変化を検出できる。センサアセンブリ1114は、何れの物理的接触がない状態にて付近の物体の存在を検出するための近接センサを含んでもよい。センサアセンブリ1114は、撮影アプリケーションに適用するため、CMOS、又はCCD画像センサのような光センサを含んでもよい。部分実施例において、当該センサアセンブリ1114は、加速度センサ、ジャイロスコープセンサ、磁気センサ、圧力センサ、及び温度センサをさらに含んでもよい。
通信アセンブリ1116は、装置1100と他の機器の間に有線、又は無線形態の通信を提供する。装置1100は、例えばWiFi、2G、3G、或はこれらの組み合わせのような、通信規格に基づいた無線ネットワークに接続されてもよい。1つの例示的な実施例において、通信アセンブリ1116は、放送チャンネルを介して外部の放送管理システムからの放送信号、又は放送に関連する情報を受信する。1つの例示的な実施例において、上記通信アセンブリ1116は、近距離無線通信(NFC)モジュールをさらに含むことにより、近距離通信をプッシュする。例えば、NFCモジュールは、RFID(Radio Frequency IDentification)技術、IrDA(Infrared Data Association)技術、UWB(Ultra Wide Band)技術、BT(Bluetooth)技術、及び他の技術に基づいて実現できる。
例示的な実施例において、装置1100は、1つ以上のASIC(Application Specific Integrated Circuit)、DSP(Digital Signal Processor)、DSPD(Digital Signal Processing Device)、PLD(Programmable Logic Device)、FPGA(Field−Programmable Gate Array)、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他の電子部品によって実現されるものであり、上記方法を実行する。
例示的な実施例において、命令を含むコンピュータ読取り可能な非一時的な記録媒体、例えば命令を含むメモリ1104をさらに提供し、装置1100のプロセッサ1120により上記命令を実行して上記方法を実現する。例えば、上記コンピュータ読取り可能な非一時的な記録媒体は、ROM、RAM、CD−ROM、磁気テープ、フロッピーディスク、光データ記憶デバイス等である。
当業者は、明細書に対する理解、及び明細書に記載された発明に対する実施を通じて、本発明の他の実施形態を容易に得ることができる。本発明は、本発明に対する任意の変形、用途、または適応的な変化を含み、このような変形、用途、または適応的な変化は、本発明の一般的な原理に従い、本発明では開示していない本技術分野の公知の知識、または通常の技術手段を含む。明細書と実施例は、ただ例示的なものであって、本発明の本当の範囲と主旨は、以下の特許請求の範囲によって示される。
本発明は、上記で記述し、図面で図示した特定の構成に限定されず、その範囲を離脱しない状況で、様様な修正と変更を実現できる。本発明の範囲は、添付される特許請求の範囲のみにより限定される。
本発明は、通信技術分野に関するものであって、特に、ビデオ処理方法装置、プログラム及び記録媒体に関するものである。
本発明は、関連技術に存在する問題を克服するために、ビデオ処理方法装置、プログラム及び記録媒体を提供する。
本発明の実施例の第3の局面によると、ビディオ処理装置を提供し、当該装置は、
プロセッサと、
前記プロセッサにより実行可能な命令を記憶するためのメモリと、
を含み、
前記プロセッサは、
複数の移動端末各々から送信される多重ビデオ画像を受信し、
前記多重ビデオ画像を表示し、
ユーザから入力されたターゲットビデオ画像の選択命令を獲得し、
他のクライアントに前記ターゲットビデオ画像を送信するように構成され、
ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像である。
本発明の実施例に係る第4の局面によると、プロセッサに実行されることにより、前記方法を実現する記録媒体に記録されたプログラムを提供する。
本発明の実施例に係る第5の局面によると、前記プログラムが記録された記録媒体を提供する。
図10は、1つの例示的な実施例に係る別のビデオ処理装置のブロック図であり、図10に示されたように、上記の図9に示された実施例を基礎とした上で、当該装置は、第2の受信モジュール77、処理モジュール78、及び第2の送信モジュール79をさらに含んでもよい。

Claims (13)

  1. 複数の移動端末各々から送信される多重ビデオ画像を受信するステップと、
    前記多重ビデオ画像を表示するステップと、
    ユーザから入力されたターゲットビデオ画像の選択命令を獲得するステップと、
    他のクライアントに前記ターゲットビデオ画像を送信するステップと、
    を含み、
    ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像であることを特徴とするビデオ処理方法。
  2. 前記多重ビデオ画像を表示するステップ以前に、
    ローカルのビデオ画像を収集するステップをさらに含み、
    前記多重ビデオ画像を表示するステップは、
    前記ローカルのビデオ画像、及び前記多重ビデオ画像を表示するステップを含むことを特徴とする請求項1に記載のビデオ処理方法。
  3. ターゲットビデオ画像が多重ビデオ画像である場合、前記他のクライアントに前記ターゲットビデオ画像を送信するステップは、
    ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、処理されたビデオ画像を他のクライアントに送信するステップを含むことを特徴とする請求項1に記載のビデオ処理方法。
  4. 前記方法は、
    ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信するステップをさらに含むことを特徴とする請求項1に記載のビデオ処理方法。
  5. 前記ターゲットビデオ画像の選択命令、及び前記ターゲットビデオ画像の切り替え命令は、音声制御命令であることを特徴とする請求項4に記載のビデオ処理方法。
  6. 前記方法は、
    複数の移動端末各々から送信される複数のオーディオ情報を受信するステップと、
    前記複数のオーディオ情報に対して平滑化処理を行ってターゲットオーディオ情報を得るステップと、
    他のクライアントに前記ターゲットオーディオ情報を送信するステップと、
    をさらに含むことを特徴とする請求項4に記載のビデオ処理方法。
  7. 複数の移動端末各々から送信される多重ビデオ画像を受信するように構成される第1の受信モジュールと、
    前記第1の受信モジュールにより受信された前記多重ビデオ画像を表示するように構成される表示モジュールと、
    ユーザから入力されたターゲットビデオ画像の選択命令を獲得するように構成される獲得モジュールと、
    他のクライアントに前記ターゲットビデオ画像を送信するように構成される第1の送信モジュールと、
    を含み、
    ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、前記表示モジュールにより表示された多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像であることを特徴とするビデオ処理装置。
  8. 前記装置は、
    前記表示モジュールが前記多重ビデオ画像を表示する前に、ローカルのビデオ画像を収集するように構成される収集モジュールをさらに含み、
    ここで、前記表示モジュールは、前記ローカルのビデオ画像、及び前記多重ビデオ画像を表示するように構成されることを特徴とする請求項7に記載のビデオ処理装置。
  9. ターゲットビデオ画像が多重ビデオ画像である場合、前記第1の送信モジュールは、
    ターゲットビデオ画像のうちの多重ビデオ画像に対して重ね合わせ処理またはスティッチング処理を行い、他のクライアントに処理されたビデオ画像を送信するように構成されることを特徴とする請求項7に記載のビデオ処理装置。
  10. 前記装置は、
    ユーザから入力されたターゲットビデオ画像の切り替え命令を獲得すると、切り替えられたターゲットビデオ画像を他のクライアントに送信するように構成される獲得送信モジュールをさらに含むことを特徴とする請求項7に記載のビデオ処理装置。
  11. 前記ターゲットビデオ画像の選択命令、及び前記ターゲットビデオ画像の切り替え命令は、音声制御命令であることを特徴とする請求項10に記載のビデオ処理装置。
  12. 前記装置は、
    複数の移動端末各々から送信される複数のオーディオ情報を受信するように構成される第2の受信モジュールと、
    前記第2の受信モジュールにより受信された前記複数のオーディオ情報に対して平滑化処理を行って、ターゲットオーディオ情報を得るように構成される処理モジュールと、
    前記処理モジュールにより得られた前記ターゲットオーディオ情報を他のクライアントに送信するように構成される第2の送信モジュールと、
    をさらに含むことを特徴とする請求項10に記載のビデオ処理装置。
  13. プロセッサと、
    前記プロセッサにより実行可能な命令を記憶するためのメモリと、
    を含み、
    前記プロセッサは、
    複数の移動端末各々から送信される多重ビデオ画像を受信し、
    前記多重ビデオ画像を表示し、
    ユーザから入力されたターゲットビデオ画像の選択命令を獲得し、
    他のクライアントに前記ターゲットビデオ画像を送信するように構成され、
    ここで、前記ビデオ画像の選択命令には、ターゲットビデオ画像の識別子が含まれており、前記ターゲットビデオ画像は、多重ビデオ画像のうちの少なくとも1つのパスのビデオ画像であることを特徴とするビデオ処理装置。




JP2016560471A 2016-04-22 2016-07-29 ビデオ処理方法、装置、プログラム及び記録媒体 Active JP6543644B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610258583.7 2016-04-22
CN201610258583.7A CN105828201B (zh) 2016-04-22 2016-04-22 视频处理方法及装置
PCT/CN2016/092175 WO2017181551A1 (zh) 2016-04-22 2016-07-29 视频处理方法及装置

Publications (2)

Publication Number Publication Date
JP2018519679A true JP2018519679A (ja) 2018-07-19
JP6543644B2 JP6543644B2 (ja) 2019-07-10

Family

ID=56526414

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016560471A Active JP6543644B2 (ja) 2016-04-22 2016-07-29 ビデオ処理方法、装置、プログラム及び記録媒体

Country Status (7)

Country Link
US (1) US20170311004A1 (ja)
EP (1) EP3236660A1 (ja)
JP (1) JP6543644B2 (ja)
KR (1) KR20170129592A (ja)
CN (1) CN105828201B (ja)
RU (1) RU2672173C2 (ja)
WO (1) WO2017181551A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112667936A (zh) * 2020-12-25 2021-04-16 北京达佳互联信息技术有限公司 视频处理方法、装置、终端、服务器及存储介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11284137B2 (en) 2012-04-24 2022-03-22 Skreens Entertainment Technologies, Inc. Video processing systems and methods for display, selection and navigation of a combination of heterogeneous sources
CN106385614A (zh) * 2016-09-22 2017-02-08 北京小米移动软件有限公司 画面合成方法及装置
WO2019191082A2 (en) * 2018-03-27 2019-10-03 Skreens Entertainment Technologies, Inc. Systems, methods, apparatus and machine learning for the combination and display of heterogeneous sources
CN106572397B (zh) * 2016-10-31 2019-07-05 北京小米移动软件有限公司 视频直播应用中的互动方法及装置
CN106534953B (zh) * 2016-12-09 2020-03-17 北京小米移动软件有限公司 直播应用中的视频转播方法及控制终端
CN106998328B (zh) * 2017-03-30 2019-12-13 北京奇艺世纪科技有限公司 一种视频传输方法及装置
CN109640191A (zh) * 2017-10-09 2019-04-16 武汉斗鱼网络科技有限公司 一种连麦直播的方法和装置
CN108229672B (zh) * 2018-02-13 2022-03-29 北京旷视科技有限公司 一种深度神经网络模型的处理方法、装置和设备
CN110493615A (zh) * 2018-05-15 2019-11-22 武汉斗鱼网络科技有限公司 一种直播视频监控方法及电子设备
CN109195000A (zh) * 2018-10-10 2019-01-11 深圳市创维群欣安防科技股份有限公司 一种局域网多屏拼接同步显示方法、系统及存储介质
CN111866409A (zh) * 2020-06-22 2020-10-30 北京都是科技有限公司 图像选择处理设备以及图像选择处理系统
CN113891019B (zh) * 2021-09-24 2024-08-20 深圳Tcl新技术有限公司 视频编码方法、装置、拍摄设备和存储介质
KR20230111006A (ko) * 2022-01-17 2023-07-25 삼성전자주식회사 디스플레이 장치의 동작 방법 및 이를 위한 장치
CN116471429B (zh) * 2023-06-20 2023-08-25 上海云梯信息科技有限公司 基于行为反馈的图像信息推送方法及实时视频传输系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001309483A (ja) * 2000-04-19 2001-11-02 Nippon Telegr & Teleph Corp <Ntt> 収音方法および収音装置
JP2013534791A (ja) * 2010-07-14 2013-09-05 アルカテル−ルーセント 複数のコンテンツアイテムから合成ビューを生成する方法、サーバ、および端末
WO2014024475A1 (ja) * 2012-08-10 2014-02-13 パナソニック株式会社 映像提供方法、送信装置および受信装置
WO2016061261A1 (en) * 2014-10-15 2016-04-21 Nowak Benjamin Multiple view-point content capture and composition

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8332889B2 (en) * 2006-02-10 2012-12-11 Cox Communications, Inc. Generating a personalized video mosaic in a cable services network
US8520072B1 (en) * 2009-10-02 2013-08-27 Alarm.Com Incorporated Video monitoring and alarm verification technology
CN101909160A (zh) * 2009-12-17 2010-12-08 新奥特(北京)视频技术有限公司 一种网络视频直播中的播控切换方法及装置
CN201623797U (zh) * 2010-04-30 2010-11-03 第一视频通信传媒有限公司 一种多画面网络直播系统
EP2670130B1 (en) * 2012-06-01 2019-03-27 Alcatel Lucent Method and apparatus for mixing a first video signal and a second video signal
US9078012B2 (en) * 2012-10-09 2015-07-07 Christoph Bieselt Viewing angle switching for live broadcasts and on demand video playback
US20140258405A1 (en) * 2013-03-05 2014-09-11 Sean Perkin Interactive Digital Content Sharing Among Users
KR102063075B1 (ko) * 2013-06-28 2020-01-07 엘지전자 주식회사 서비스 시스템, 디지털 기기 및 그 서비스 처리 방법
US20150026714A1 (en) * 2013-07-19 2015-01-22 Ebay Inc. Systems and methods of sharing video experiences
KR102141153B1 (ko) * 2013-09-27 2020-08-04 엘지전자 주식회사 Tv 및 그 동작 방법
US9860477B2 (en) * 2013-12-23 2018-01-02 Echostar Technologies L.L.C. Customized video mosaic
RU2583755C2 (ru) * 2014-04-16 2016-05-10 Общество с ограниченной ответственностью "Сетевизор" Способ съемки и отображения зрелищного мероприятия и пользовательский интерфейс для осуществления способа
CN105049912A (zh) * 2015-08-07 2015-11-11 虎扑(上海)文化传播股份有限公司 一种视频信号的处理方法及电子设备
CN105357542B (zh) * 2015-11-20 2018-09-18 广州华多网络科技有限公司 直播方法、装置及系统
CN105430424B (zh) * 2015-11-26 2018-12-04 广州华多网络科技有限公司 一种视频直播的方法、装置和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001309483A (ja) * 2000-04-19 2001-11-02 Nippon Telegr & Teleph Corp <Ntt> 収音方法および収音装置
JP2013534791A (ja) * 2010-07-14 2013-09-05 アルカテル−ルーセント 複数のコンテンツアイテムから合成ビューを生成する方法、サーバ、および端末
WO2014024475A1 (ja) * 2012-08-10 2014-02-13 パナソニック株式会社 映像提供方法、送信装置および受信装置
WO2016061261A1 (en) * 2014-10-15 2016-04-21 Nowak Benjamin Multiple view-point content capture and composition

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
橋本 浩二, 外1名: "複数ビデオソースの動的な構成を可能とするライブ中継用ミキサ", 情報処理学会論文誌, [ONLINE], vol. 第57巻, 第1号, JPN6018023837, 15 January 2016 (2016-01-15), JP, pages 157 - 171, ISSN: 0003921428 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112667936A (zh) * 2020-12-25 2021-04-16 北京达佳互联信息技术有限公司 视频处理方法、装置、终端、服务器及存储介质

Also Published As

Publication number Publication date
RU2672173C2 (ru) 2018-11-12
CN105828201B (zh) 2019-05-21
RU2016143122A3 (ja) 2018-05-03
RU2016143122A (ru) 2018-05-03
EP3236660A1 (en) 2017-10-25
KR20170129592A (ko) 2017-11-27
JP6543644B2 (ja) 2019-07-10
US20170311004A1 (en) 2017-10-26
CN105828201A (zh) 2016-08-03
WO2017181551A1 (zh) 2017-10-26

Similar Documents

Publication Publication Date Title
JP6543644B2 (ja) ビデオ処理方法、装置、プログラム及び記録媒体
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
JP6186090B2 (ja) 接続方法、装置、プログラム及び記録媒体
CN106231259B (zh) 监控画面的显示方法、视频播放器及服务器
JP6346711B2 (ja) 通信事業者ネットワーク接続方法及び装置、プログラム及び記録媒体
JP6117446B2 (ja) リアルタイム・ビデオの提供方法、リアルタイム・ビデオの提供装置、サーバ、端末装置、プログラム及び記録媒体
US20160210105A1 (en) Method, device and system for projection on screen
EP3276976A1 (en) Method, apparatus, host terminal, server and system for processing live broadcasting information
JP6285615B2 (ja) リモートアシスタンス方法、クライアント、プログラム及び記録媒体
CN106534953B (zh) 直播应用中的视频转播方法及控制终端
JP2017524316A (ja) ビデオ通信方法、装置、プログラム及び記録媒体
JP6385429B2 (ja) ストリーム・メディア・データを再生する方法および装置
CN107197320B (zh) 视频直播方法、装置和系统
JP2017531275A (ja) 情報収集方法およびその装置、プログラム及び記録媒体
CN103916691A (zh) 一种电视控制方法和移动终端
JP2017501598A5 (ja)
CN104954719A (zh) 一种视频信息处理方法及装置
CN105120301A (zh) 视频处理方法和装置、智能设备
CN106453032B (zh) 信息推送方法及装置、系统
CN111010721A (zh) 无线配网方法、无线配网装置及计算机可读存储介质
JP2016535527A (ja) 呼び出し転送方法、装置及び端末、プログラム及び記録媒体
CN106254402A (zh) 智能终端设置信息的同步方法及装置
CN105049899B (zh) 电视投影控制方法、装置和终端设备
CN113709907A (zh) 媒体数据传输方法及装置、设备、存储介质
CN111930334A (zh) 一种数据处理方法、装置和电子设备

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180626

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180925

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190319

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190611

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190617

R150 Certificate of patent or registration of utility model

Ref document number: 6543644

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250