JP2023095486A - 映像送信装置、プログラム、映像送信方法、及びシステム - Google Patents

映像送信装置、プログラム、映像送信方法、及びシステム Download PDF

Info

Publication number
JP2023095486A
JP2023095486A JP2021211409A JP2021211409A JP2023095486A JP 2023095486 A JP2023095486 A JP 2023095486A JP 2021211409 A JP2021211409 A JP 2021211409A JP 2021211409 A JP2021211409 A JP 2021211409A JP 2023095486 A JP2023095486 A JP 2023095486A
Authority
JP
Japan
Prior art keywords
video data
video
unit
transmission
transmission device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021211409A
Other languages
English (en)
Other versions
JP7295214B1 (ja
Inventor
直洋 秋山
Naohiro Akiyama
佳弘 遠藤
Yoshihiro Endo
和彦 佐山
Kazuhiko Sayama
淳一郎 間宮
Junichiro Mamiya
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SoftBank Corp
Original Assignee
SoftBank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SoftBank Corp filed Critical SoftBank Corp
Priority to JP2021211409A priority Critical patent/JP7295214B1/ja
Priority to KR1020237039280A priority patent/KR20230170764A/ko
Priority to PCT/JP2022/046956 priority patent/WO2023120539A1/ja
Application granted granted Critical
Publication of JP7295214B1 publication Critical patent/JP7295214B1/ja
Publication of JP2023095486A publication Critical patent/JP2023095486A/ja
Priority to US18/516,976 priority patent/US20240089525A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2223Secondary servers, e.g. proxy server, cable television Head-end being a public access point, e.g. for downloading to or uploading from clients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2408Monitoring of the upstream path of the transmission network, e.g. client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6156Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6181Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723Monitoring of network processes or resources, e.g. monitoring of network load
    • H04N21/64738Monitoring network characteristics, e.g. bandwidth, congestion level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9261Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

Figure 2023095486000001
【課題】使用する通信回線の伝送帯域確保が出来ない場合に、後から同じコンテンツを視聴するストリームデータ送信装置を提供する。
【解決手段】システム10において、映像送信装置100は、カメラ50から映像データを取得する映像データ取得部と、映像データ取得部が取得した映像データを記憶する映像データ記憶部と、映像データ取得部が取得した映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成部と、低減映像をストリーミングで送信先に送信するストリーミング送信部と、映像データ記憶部に記憶された映像データを、予め定められた条件が満たされたことに応じて、映像データの保存先に送信する映像データ送信部とを備える。
【選択図】図1

Description

本発明は、映像送信装置、プログラム、映像送信方法、及びシステムに関する。
特許文献1には、使用する通信回線の伝送帯域確保が出来ない場合に、後から同じコンテンツを高品位に視聴することが可能なストリームデータ送信装置を提供する技術について記載されている。
[先行技術文献]
[特許文献]
[特許文献1]特開2005-303925号公報
本発明の一実施態様によれば、映像送信装置が提供される。映像送信装置は、映像データを取得する映像データ取得部を備えてよい。映像送信装置は、映像データ取得部が取得した映像データを記憶する映像データ記憶部を備えてよい。映像送信装置は、映像データ取得部が取得した映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成部を備えてよい。映像送信装置は、低減映像をストリーミングで送信先に送信するストリーミング送信部を備えてよい。映像送信装置は、映像データ記憶部に記憶された映像データを、予め定められた条件が満たされたことに応じて、映像データの保存先に送信する映像データ送信部を備えてよい。
上記映像データ取得部は、カメラによって撮像された上記映像データをカメラから受信してよい。上記映像データ送信部は、上記映像データ記憶部に記憶され、圧縮された上記映像データを、上記送信先に送信してよい。上記低減映像生成部は、上記映像データの画質低減、上記映像データのフレームレートの低減、及び上記映像データのトリミングの少なくともいずれかを実行して上記映像データのデータ量を低減した上記低減映像を生成してよい。
上記映像データ送信部は、予め設定された時刻に上記保存先への上記映像データの送信を開始してよい。上記映像データ送信部は、予め設定された時間帯に上記保存先へ上記映像データを送信してよい。上記映像データ送信部は、上記予め設定された時間帯内に上記映像データの送信が完了しないと判定した場合に、予め定められた条件に従って上記映像データから抽出した上記映像データの一部を上記予め設定された時間帯に送信してよい。上記映像データ送信部は、上記映像データ記憶部に複数の上記映像データが記憶されており、上記予め設定された時間帯内に上記複数の映像データの送信が完了しないと判定した場合に、上記複数の映像データのそれぞれの優先度に応じて、上記複数の映像データの少なくともいずれかを送信してよい。上記映像データ送信部は、上記複数の映像データのうち、上記映像データ取得部が取得した取得時刻がより古い映像データを優先して送信してよい。
上記映像送信装置は、上記保存先との間の通信回線の回線速度を計測する回線速度計測部をさらに備えてよい。上記映像データ送信部は、上記回線速度計測部によって計測された上記回線速度が予め定められた送信閾値以上である場合に、上記保存先へ上記映像データを送信してよい。上記回線速度計測部は、上記送信先との間の通信回線の回線速度を計測してよく、上記映像データ送信部は、上記ストリーミング送信部が上記低減映像を上記送信先に送信するタイミングで上記回線速度計測部によって計測された上記送信先との間の通信回線の回線速度が、予め定められた送信閾値以上である場合に、上記ストリーミング送信部による上記送信先へのストリーミング送信に代えて、上記映像データを上記送信先に送信してよい。上記映像送信装置は、上記保存先との間の通信回線の回線速度を計測する回線速度計測部を備えてよい。上記映像送信装置は、上記回線速度計測部によって計測された上記回線速度と、計測を実行した日時とを含む履歴データを記憶する履歴データ記憶部を備えてよい。上記映像送信装置は、上記履歴データ記憶部に記憶されている複数の上記履歴データを用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する機械学習部を備えてよい。上記映像送信装置は、上記機械学習モデルを用いて、上記条件を設定する条件設定部を備えてよい。上記ストリーミング送信部は、移動体通信回線を介して、表示装置に、上記低減映像をストリーミングで送信してよい。上記映像データ送信部は、上記移動体通信回線を介して、クラウドに配置された上記保存先に上記映像データを送信してよい。
本発明の一実施態様によれば、コンピュータを、上記映像送信装置として機能させるためのプログラムが提供される。
本発明の一実施態様によれば、コンピュータによって実行される映像送信方法が提供される。映像送信方法は、映像データを取得する映像データ取得段階を備えてよい。映像送信方法は、映像データ取得段階において取得された映像データを映像データ記憶部に記憶する映像データ記憶段階を備えてよい。映像送信方法は、映像データ取得段階において取得された映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成段階を備えてよい。映像送信方法は、低減映像をストリーミングで送信先に送信するストリーミング送信段階を備えてよい。映像送信方法は、映像データ記憶部に記憶された映像データを、予め定められた条件が満たされたことに応じて、映像データの保存先に送信する映像データ送信段階を備えてよい。
本発明の一実施態様によれば、システムが提供される。システムは、映像送信装置と、保存サーバとを備えてよい。映像送信装置は、映像データを取得する映像データ取得部を有してよい。映像送信装置は、映像データ取得部が取得した映像データを記憶する映像データ記憶部を有してよい。映像送信装置は、映像データ取得部が取得した映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成部を有してよい。映像送信装置は、低減映像をストリーミングで送信するストリーミング送信部を有してよい。映像送信装置は、映像データ記憶部に記憶された映像データを、予め定められた条件が満たされたことに応じて、保存サーバに送信する映像データ送信部を有してよい。保存サーバは、映像送信装置から受信した映像データを記憶する映像データ記憶部を有してよい。
上記映像送信装置は、上記保存サーバとの間の通信回線の回線速度を計測する回線速度計測部を有してよい。上記映像送信装置は、上記回線速度計測部によって計測された上記回線速度と、計測を実行した日時とを含む履歴データを記憶する履歴データ記憶部を有してよい。上記映像送信装置は、上記履歴データを上記保存サーバに送信する履歴データ送信部を有してよい。上記保存サーバは、上記映像送信装置から受信した複数の上記履歴データを用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する機械学習部を有してよい。上記保存サーバは、上記機械学習モデルを用いて、上記条件を生成する条件生成部を有してよい。上記保存サーバは、上記条件生成部によって生成された上記条件を上記映像送信装置に通知する条件通知部を有してよい。
上記ストリーミング送信部は、移動体通信回線を介して、映像を閲覧するための表示装置に、上記低減映像をストリーミングで送信してよい。上記映像データ送信部は、上記移動体通信回線を介して、クラウドに配置された上記保存サーバに上記映像データを送信してよい。
上記保存サーバは、上記映像データ送信部から上記保存サーバへの上記映像データの送信を中継した無線基地局から、上記無線基地局に関連する基地局情報を受信する基地局情報受信部を有してよい。上記基地局情報受信部が受信した上記基地局情報に基づいて、上記条件を生成する条件生成部を有してよい。上記条件生成部によって生成された上記条件を上記映像送信装置に通知する条件通知部を有してよい。
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
システム10の一例を概略的に示す。 映像送信装置100による映像送信処理の流れの一例を概略的に示す。 映像送信装置100による映像送信処理の流れの他の一例を概略的に示す。 映像送信装置100による映像送信処理の流れの他の一例を概略的に示す。 映像送信装置100による映像送信処理の流れの他の一例を概略的に示す。 映像送信装置100の機能構成の一例を概略的に示す。 保存サーバ200の機能構成の一例を概略的に示す。 履歴データテーブル600の一例を概略的に示す。 システム10の一例を概略的に示す。 映像送信装置100、保存サーバ200、又は表示装置500として機能するコンピュータ1200のハードウェア構成の一例を概略的に示す。
例えば、通信モジュールを搭載した移動体通信対応のカメラで、撮像した映像データを、ネットワークを通じて送信させ、受信先で受信した映像を表示したり、記憶したりするような技術が知られている。映像データは、容量が大きいため、大量に送信したような場合には、ネットワークが逼迫してしまい、他のユーザの通信に悪影響を与えてしまうといった問題が生じうる。これに対して、本実施形態に係る映像送信装置は、例えば、撮像された映像データを一旦記憶し、大きく分けて3つの要素により、映像データの送信タイミングを変化させる。第一には、映像データの送信する時間を、ネットワークの帯域の空きが予想される時間に予め設定する。第二には、ネットワークのスピードテスト機能によりトラフィック状況を確認し、ネットワークの帯域が空いているタイミングに映像データを送信する。第三には、ネットワークトラフィック状況を、AI(Artificial intelligence)で自動判定し、ネットワークの帯域が空いていると判定された時間に、映像データを送信する。
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
図1は、システム10の一例を概略的に示す。システム10は、ネットワーク20を介して接続される映像送信装置100、及び保存サーバ200を備える。システム10は、表示装置500を備えてよい。
システム10は、映像送信装置100で取得され、一時記憶された映像データが、ネットワーク20を介して、保存先である保存サーバ200へ送信され、保存されるよう動作する。また、システム10は、映像送信装置100で取得され、容量の低減処理をされた映像データが、ネットワーク20を介して、送信先である表示装置500へ送信され、表示されるよう動作する。
ネットワーク20は、移動体通信ネットワークであってよい。移動体通信ネットワークは、3G(3rd Generation)通信方式、LTE(Long Term Evolution)通信方式、5G(5th Generation)通信方式、及び6G(6th Generation)通信方式以降の通信方式のいずれに準拠していてもよい。ネットワーク20は、LAN(Local Area Network)であってもよい。ネットワーク20は、インターネットであってもよい。ネットワーク20は、移動体通信ネットワーク、LAN、及びインターネットのうちの複数を含んでもよく、すべてを含んでもよい。
映像送信装置100は、例えば、映像送信装置100に接続されたカメラ50から映像データを取得する。映像送信装置100は、映像送信装置100に内蔵されたカメラによって映像データ105を取得してもよい。カメラ50は、監視カメラであってよく、また、その他の任意のカメラであってもよい。映像送信装置100は、任意のデバイスから映像データを取得してもよい。例えば、映像送信装置100は、映像データを生成可能なデバイスから、当該デバイスによって生成された映像データを取得する。
映像送信装置100は、目的・用途に合わせて、送信する映像データのデータ量をコントロールしてよい。例えば、映像送信装置100は、取得した映像データを一時記憶し、映像データに画像処理を施してデータ量を低減した低減映像をネットワーク20を介して表示装置500にストリーミングで送信し、予め定められた条件が満たされたことに応じて、映像データをネットワーク20を介して保存サーバ200に送信する。低減映像とは、例えば、データ量が低減された、送信性に優れたストリーミング用の映像等であってよい。
保存サーバ200は、例えば、クラウド上に配置された、映像データを保存するためのサーバであってよい。保存サーバ200は、MEC(Multi Access Edge Computing)に配置されてもよい。
表示装置500は、映像を表示する機能を有する任意の装置であってよい。表示装置500は、例えば、スマートフォン、タブレット端末、及びPC(Personal Computer)等であってよい。表示装置500は、例えば、映像送信装置100からストリーミングで受信する低減映像を表示する。表示装置500は、例えば、保存サーバ200から受信した映像データを表示する。
映像送信装置100が低減映像を生成する画像処理の例として、画質低減、フレームレート低減、及びトリミング等が挙げられる。映像送信装置100は、例えば、映像データの画質を低減することによって、低減映像を生成する。映像送信装置100は、映像データのフレームレートを低減することによって、低減映像を生成してもよい。映像送信装置100は、映像データのトリミングを行うことによって、低減映像を生成してもよい。映像送信装置100は、例えば、映像データのうちの指定エリアのみを切り取ることによって、映像データをトリミングする。映像送信装置100は、画質の低減、フレームレートの低減、及びトリミングを組み合わせて、映像データから低減映像を生成してもよい。低減映像は、例えば、表示装置500において、リアルタイムの映像の確認に使用される。
映像送信装置100は、予め定められた条件が満たされたことに応じて、映像データを、そのままのデータ量で保存サーバ200へ送信してよい。映像送信装置100は、高画質映像として圧縮して保存サーバ200へ送信してもよい。保存サーバ200は、受信した映像データを保存し、例えば、表示装置500からの要求に応じて、映像データを表示装置500に送信する。映像データは、例えば、表示装置500において、過去映像の確認に使用される。
映像送信装置100は、例えば、予め設定された時刻に、映像データを保存サーバ200へ送信する。当該時刻として、例えば、平日の深夜等の、ネットワーク20の帯域が比較的空いている時刻が設定され得る。また、映像送信装置100は、例えば、予め設定された時間帯に、映像データを保存サーバ200へ送信する。当該時間帯として、例えば、平日の深夜等の、ネットワーク20の帯域が比較的空いている時間帯が設定され得る。これにより、低減映像についてはリアルタイムに表示装置500に送信しつつ、映像データについてはネットワーク20が空いている可能性が高いときに保存サーバ200に送信することができ、ネットワーク負荷を適切に低減することができる。
映像送信装置100は、例えば、ネットワーク20の速度計測を実行する機能を有し、ネットワーク20の速度計測を定期的に又は不定期に行い、計測結果の回線速度が予め定められた通信閾値以上である場合に、映像データ105を保存サーバ200へ送信するようにしてもよい。映像送信装置100は、ネットワーク20を介した、保存サーバ200との間の通信回線の回線速度を計測してよい。また、例えば、ネットワーク20が移動体通信ネットワークである場合、映像送信装置100は、在圏している無線基地局との間の通信回線の回線速度を計測してもよい。これにより、低減映像についてはリアルタイムに表示装置500に送信しつつ、映像データについてはネットワーク20が空いているときに保存サーバ200に送信することができ、ネットワーク負荷を適切に低減することができる。
映像送信装置100は、表示装置500への送信のタイミングで、ネットワーク20の速度計測を実行し、計測結果の回線速度が予め定められた閾値以上である場合、低減映像に代えて、映像データを表示装置500へ送信してもよい。
映像送信装置100は、例えば、機械学習を用いることにより、ネットワーク20の帯域の空いているタイミングを推測し、推測したタイミングで、映像データを保存サーバ200に送信するようにしてもよい。映像送信装置100は、例えば、ネットワーク20の速度計測結果や、送信日時のデータを学習し、ネットワーク20のトラフィックを推測する。
機械学習の教師データとして、定期的なネットワーク20の速度計測により得られた回線速度と、速度計測の日時等とを用いてよい。
映像送信装置100は、保存サーバ200からの指示に従って、映像データを保存サーバ200に送信してもよい。映像送信装置100は、例えば、保存サーバ200から指定された時刻に、映像データの保存サーバ200への送信を開始する。映像送信装置100は、例えば、保存サーバ200から指定された時間帯に、映像データを保存サーバ200へ送信する。
保存サーバ200は、例えば、映像送信装置100によって計測された映像送信装置100と保存サーバ200との間の通信回線の回線速度と、計測を実行した日時とを含む履歴データを、映像送信装置100から受信し、複数の履歴データを用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する。そして、保存サーバ200は、機械学習モデルを用いて、保存サーバ200への指示内容を決定する。例えば、保存サーバ200は、機械学習モデルを用いて、ネットワーク20の帯域の空いている期間を特定し、期間内の時刻や、期間内の時間帯を、映像送信装置100に指示する。
図2は、映像送信装置100による映像送信処理の流れの一例を概略的に示す。ここでは、カメラ50による撮像が開始された状態を開始状態として説明する。
ステップ(ステップをSと省略して記載する場合がある。)302では、映像送信装置100が、カメラ50から映像データを取得する。S304では、映像送信装置100が、S302で取得した映像データを記憶する。映像送信装置100は、カメラ50から取得した映像データをそのままの容量で記憶してもよいし、高画質映像として圧縮して記憶してもよい。
S306では、映像送信装置100が、S302で取得した映像データに画像処理を施して、低減映像を生成する。S308では、映像送信装置100が、S306で生成した低減映像の、表示装置500へのネットワーク20を介したストリーミングによる送信を開始する。映像送信装置100は、低減映像の送信が完了するまで、ストリーミングによる送信を継続してよい。
S310では、映像送信装置100が、予め設定された時刻であるか否かを判定し、設定された時刻である場合、S312へ進み、設定された時刻でない場合、S310を繰り返す。設定された時刻である場合とは、予め設定された時刻がAM3:00である場合に、現在の時刻がAM3:00であるような場合である。
S312では、映像送信装置100が、S304で記憶した映像データを保存サーバ200へ送信する。映像送信装置100は、低減映像の表示装置500への送信と、映像データの保存サーバ200への送信が完了したことに応じて、映像送信処理を終了する。
図3は、映像送信装置100による映像送信処理の流れの他の一例を概略的に示す。S308の低減映像送信までは、図2の場合と同様であるため、S320以降を主に説明する。
S320では、映像送信装置100が、予め設定された時間帯であるか否かを判定し、設定された時間帯である場合、S322へ進み、設定された時間帯でない場合、S320を繰り返す。設定された時間帯である場合とは、予め設定された時間帯がAM3:00からAM4:00である場合に、現在の時刻がAM3:00からAM4:00の間であるような場合である。
S322では、映像送信装置100が、S304で記憶した映像データについて、予め設定された時間帯内で、保存サーバ200へ送信できるか否かを判定し、設定された時間帯内で送信できる場合、S312へ進み、設定された時間帯内で送信できない場合、S324へ進む。設定された時間帯内で送信できる場合とは、例えば、予め設定された時間帯がAM3:00からAM4:00である場合に、送信を予定している映像データのデータ量を、現在のネットワーク20の回線速度で割り、算出された送信に必要な時間が、設定された時間帯であるAM3:00からAM4:00までの間の1時間以内であることであってよい。
S324では、映像送信装置100が、S304で記憶した映像データの一部を抽出する。映像データの一部とは、例えば、映像データのうち、重要性が高い部分であってよい。重要性が高い部分とは、例えば、野球の中継において、終盤の攻防や、得点シーンであってよい。映像データのうちの重要性が高い部分は、人によって予め指定されてよい。また、映像送信装置100が、既存技術を用いて、映像データから重要性が高い部分を抽出してもよい。
S312では、映像送信装置100が、S304で記憶した映像データ又はS324で抽出した映像データの保存サーバ200への送信を開始する。映像送信装置100は、低減映像の表示装置500への送信と、映像データの保存サーバ200への送信が完了したことに応じて、映像送信処理を終了する。
図4は、映像送信装置100による映像送信処理の流れの他の一例を概略的に示す。S320までは、図3の場合と同様であるため、S322以降を主に説明する。なお、ここでは、映像送信装置100が、S302において複数の映像データを取得し、S304において複数の映像データを記憶している場合について説明する。
S322では、映像送信装置100が、S304において記憶した複数の映像データを予め設定された時間帯内で、保存サーバ200へ送信できるか否かを判定し、設定された時間帯内で送信できる場合、S312へ進み、設定された時間帯内で送信できない場合、S325へ進む。
S325では、映像送信装置100が、S304で記憶した複数の映像データの中から、設定された時間帯内で、送信可能なデータ量の映像データを選択する。映像送信装置100は、送信可能であれば、複数の映像データを選択してもよい。映像送信装置100は、複数の映像データのうち、優先度がより高い映像データを選択してよい。複数の映像データの優先度は、人によって予め指定されてよい。また、取得した時間がより古いほど、より優先度が割り当てられてもよい。また、映像送信装置100が、既存技術を用いて、複数の映像データの優先度を決定してもよい。
S312で、映像送信装置100が、S304で記憶した複数の映像データ又はS325で選択した映像データの保存サーバ200への送信を開始する。映像送信装置100は、低減映像の表示装置500への送信と、映像データの保存サーバ200への送信が完了したことに応じて、映像送信処理を終了する。
図5は、映像送信装置100による映像送信処理の流れの他の一例を概略に示す。S306までは、図2の場合と同様であるため、S330以降を主に説明する。
S330では、映像送信装置100が、ネットワーク20の回線速度を計測する。S332では、映像送信装置100が、S330で計測した回線速度が、予め設定された送信閾値以上であるか否かを判定し、予め設定された送信閾値以上である場合、S334へ進み、予め設定された送信閾値以上でない場合、S336へ進む。予め設定された送信閾値以上である場合とは、例えば、S330で計測された回線速度が、100Mbpsである場合に、予め設定された送信閾値が10Mbpsであるような場合であってよい。
S334では、映像送信装置100が、S304で記憶した映像データのネットワーク20を介した表示装置500及び保存サーバ200への送信を開始する。S336では、映像送信装置100が、S306で生成した低減映像の、ネットワーク20を介した表示装置500への送信を開始する。
S338では、映像送信装置100が、ネットワーク20の回線速度を計測する。S340では、映像送信装置100が、S336で計測した回線速度が、予め設定された送信閾値以上であるか否かを判定し、予め設定された送信閾値以上である場合、S342へ進み、予め設定された送信閾値以上でない場合、S338に戻る。S342では、映像送信装置100が、S304で記憶した映像データの、ネットワーク20を介した保存サーバ200への送信を開始する。映像送信装置100は、送信が完了したことに応じて、映像送信処理を終了する。
なお、映像送信装置100は、S334において、映像データを表示装置500のみに送信してもよい。
また、映像送信装置100は、S330以降について、まず、表示装置500との間の通信回線の回線速度を計測し、回線速度を閾値以上である場合に、映像データを表示装置500に送信し、閾値以上でない場合に、低減映像を表示装置500に送信してもよい。この場合、保存サーバ200への映像データの送信はしなくてもよい場合があるが、する場合、映像送信装置100は、保存サーバ200との間の通信回線の回線速度を計測し、回線速度が閾値以上となった場合に、映像データを保存サーバ200へ送信してよい。
図6は、映像送信装置100の機能構成の一例を概略的に示す。映像送信装置100は、映像データ取得部102、映像データ記憶部104、低減映像生成部106、ストリーミング送信部108、映像データ送信部110、回線速度計測部112、履歴データ送信部114、履歴データ記憶部116、機械学習部118、及び条件設定部120を備える。なお、映像送信装置100がこれらの全てを備えることは必須とは限らない。
映像データ取得部102は、映像データを取得する。映像データ取得部102は、カメラ50によって撮像された映像データをカメラ50から受信してよい。映像データ取得部102は、映像送信装置100に内蔵されたカメラによって撮像された映像データを取得してもよい。映像データ取得部102は、他のデバイスから映像データを受信してもよい。
映像データ記憶部104は、映像データ取得部102が取得した、映像データ105を記憶する。映像データ記憶部104は、映像データ取得部102が取得した映像データ105をそのまま記憶してよい。映像データ記憶部104は、映像データ取得部102が取得した映像データ105を、高画質映像に圧縮して記憶してもよい。
低減映像生成部106は、映像データ取得部102が取得した映像データ105に、画像処理を施してデータ量を低減した低減映像を生成する。低減映像生成部106は、映像データ105の画質低減、映像データ105のフレームレートの低減、及び映像データ105のトリミングの少なくともいずれかを実行して、映像データ105のデータ量を低減した低減映像を生成してよい。低減映像生成部106は、画質低減、フレームレート低減、及びトリミングのうち、予め設定された画像処理を実行してよい。低減映像生成部106は、画質低減、フレームレート低減、及びトリミングのうち、回線速度に応じて選択した画像処理を実行してもよい。低減映像生成部106は、画質低減、フレームレート低減、及びトリミングのうち、映像データの内容に応じて選択した画像処理を実行してもよい。
ストリーミング送信部108は、低減映像生成部106によって生成された低減映像をストリーミングで送信先に送信する。ストリーミング送信部108は、低減映像を、送信先でリアルタイムに表示することができれば、どのような送信方法で、送信してもよい。送信先は、例えば表示装置500であってよい。
映像データ送信部110は、映像データ記憶部104に記憶された映像データ105を、予め定められた条件が満たされたことに応じて、映像データ105の保存先に送信する。保存先は、例えば保存サーバ200であってよい。
映像データ送信部110は、予め設定された時刻に保存先への映像データ105の送信を開始してよい。
映像データ送信部110は、予め設定された時間帯に、保存先へ映像データ105を送信してよい。映像データ送信部110は、予め設定された時間帯内に映像データ105の送信が完了するか否かを判定し、すると判定した場合には映像データ105を保存先へ送信し、しないと判定した場合に、予め定められた条件に従って映像データ105から抽出した映像データ105の一部を、予め設定された時間帯に送信してもよい。映像データ送信部110は、例えば、映像データ105のうち、重要性がより高い部分を抽出する。映像データのうちの重要性が高い部分は、人によって予め指定されてよい。また、映像データ送信部110が、既存技術を用いて、映像データから重要性が高い部分を抽出してもよい。
映像データ送信部110は、映像データ記憶部104に複数の映像データ105が記憶されている場合において、予め設定された時間帯内に複数の映像データ105の送信が完了するか否かを判定し、すると判定した場合には複数の映像データ105を保存先に送信し、しないと判定した場合に、複数の映像データ105のそれぞれの優先度に応じて、複数の映像データ105の少なくともいずれかを送信してよい。映像データ送信部110は、例えば、複数の映像データ105のうち、映像データ取得部102が取得した取得時刻がより古い映像データを優先して送信する。映像データ送信部110は、複数の映像データ105のうち、優先度がより高い映像データ105を選択して送信してよい。複数の映像データ105の優先度は、人によって予め指定されてよい。また、映像データ送信部110が、既存技術を用いて、複数の映像データ105の優先度を決定してもよい。
回線速度計測部112は、ネットワーク20の回線速度を計測する。回線速度計測部112は、ネットワーク20を介した、保存先との間の通信回線の回線速度を計測してよい。回線速度計測部112は、ネットワーク20を介した、送信先との間の通信回線の回線速度を計測してよい。回線速度計測部112は、映像送信装置100が無線基地局に在圏している場合、無線基地局との間の通信回線の回線速度を計測してもよい。
映像データ送信部110は、回線速度計測部112によって計測された回線速度が予め定められた送信閾値以上である場合に、保存先へ映像データ105を送信してよい。映像データ送信部110は、ストリーミング送信部108が低減映像を送信先に送信するタイミングで回線速度計測部112によって計測された送信先との間の通信回線の回線速度が、予め定められた送信閾値以上である場合に、ストリーミング送信部108による送信先へのストリーミング送信に代えて、映像データ105を送信先に送信してもよい。映像データ送信部110は、回線速度計測部112によって計測された回線速度が、送信閾値よりも速い値を示す代替閾値以上である場合に、ストリーミング送信部108による送信先へのストリーミング送信に代えて、映像データ105を送信先に送信してもよい。これにより、回線に非常に余裕があるときには、表示装置500に対して低減映像を送信するのではなく映像データを送信することができ、表示装置500が表示する映像の品質を高めることができる。代替閾値は、送信閾値よりも速い値を示せば、どのような値であってもよいが、例えば、このような利用を想定した、回線に非常に余裕があることを示す値であってよい。
映像データ送信部110は、移動体通信回線を介して、クラウドに配置された記憶先に映像データ105を送信してよい。映像データ送信部110は、映像データ記憶部104に記憶された映像データ105を、予め定められた条件が満たされたことに応じて、保存サーバ200に送信する。
履歴データ記憶部116は、回線速度計測部112によって計測された回線速度と、計測を実行した日時とを含む履歴データ117を記憶する。履歴データ送信部114は、履歴データ記憶部116に記憶されている履歴データ117を保存先に送信する。
機械学習部118は、履歴データ記憶部116に記憶されている複数の履歴データ117を用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する。
条件設定部120は、機械学習モデルを用いて、映像データ105の送信を開始する条件を設定する。例えば、条件設定部120は、機械学習モデルを用いて、各日時の回線速度を推定し、推定した回線速度が予め定められた閾値以上である、時刻や時間帯を特定して、映像データ105の送信を開始する条件を設定する。映像データ送信部110は、条件設定部120によって設定された条件に従って、映像データ105を送信するタイミングを決定してよい。
図7は、保存サーバ200の機能構成の一例を概略的に示す。保存サーバ200は、映像データ受信部202、映像データ保存部204、映像データ送信部206、履歴データ受信部208、履歴データ記憶部210、機械学習部212、条件生成部214、条件通知部216、及び、基地局情報受信部218を備える。なお、保存サーバ200がこれらの全てを備えることは必須とは限らない。
映像データ受信部202は、映像送信装置100の映像データ送信部110から送信された映像データ105を受信する。映像データ保存部204は、映像データ受信部202が受信した映像データ105を保存する。
映像データ送信部206は、映像データ保存部204に保存されている映像データ105を送信する。映像データ送信部206は、例えば、表示装置500からの要求に応じて、映像データを表示装置500へ送信する。
履歴データ受信部208は、履歴データ送信部114から送信された履歴データ117を受信する。履歴データ記憶部210は、履歴データ受信部208が受信した履歴データ117を記憶する。
機械学習部212は、履歴データ記憶部210に記憶されている複数の履歴データ107を用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する。
条件生成部214は、機械学習部212によって生成された機械学習モデルを用いて、映像データ送信部110が映像データ105を送信する条件を生成する。条件生成部214は、例えば、機械学習モデルを用いて、各日時の回線速度を推定し、推定した回線速度が予め定められた閾値以上である時刻や時間帯を特定して、映像データ105の送信を開始する条件を設定する。
条件通知部216は、条件生成部214によって生成された条件を映像送信装置100に通知する。映像送信装置100の映像データ送信部110は、受信した条件に従って、映像データ105の送信を行ってもよい。
基地局情報受信部218は、映像送信装置100が無線基地局を介してネットワーク20に接続されている場合において、映像データ送信部110から保存サーバ200への映像データの送信を中継した当該無線基地局から、当該無線基地局に関連する基地局情報を受信する。基地局情報は、無線基地局における通信トラフィックを情報を含んでよい。
条件生成部214は、基地局情報受信部218が受信した基地局情報に基づいて、映像データ送信部110が映像データ105を送信する条件を生成してもよい。条件生成部214は、例えば、基地局情報に基づいて、無線基地局における通信トラフィックが比較的少なかったり、予め定められた閾値以下である時刻や時間帯を特定し、条件を生成する。
図8は、履歴データテーブル600の一例を概略的に示す。履歴データテーブル600には、複数の履歴データ117が登録される。履歴データテーブル600は、履歴番号602、日時604、及び回線速度610を有する。履歴データテーブル600は、履歴データ記憶部116に記憶され、機械学習部118における機械学習の教師データとして利用される。また、履歴データテーブル600は、履歴データ記憶部210に記憶され、機械学習部212における機械学習の教師データとして利用される。
履歴番号602は、履歴データテーブル600のデータ項目ごとに一意に付与される番号である。履歴番号602は、履歴データテーブル600のデータ項目ごとの読み出し時に、インデックスのように使用される。
日時604は、年月日606と、時間608とを含み、回線速度計測部112による回線速度の測定が行われた日時を表す。時間608は、例えば1時間ごとであってもよく、例えば、回線速度の測定が1時間おきに行われることを表す。回線速度610は、日時604において実行された回線速度の測定結果を含む。回線速度610の測定間隔は、1時間に限定されない。
具体的に履歴データテーブル600の履歴番号602が4のデータは、年月日606が、2021/11/11、時間608が6:00、及び実行された回線速度610が100Mbpsである。
例えば、機械学習部118又は機械学習部212は、図のような履歴データテーブル600を入力として、機械学習モデルが機械学習をした場合に、時間608が3:00である場合は、回線速度610が200Mbpsであり、他の時間帯より、回線速度が高い傾向があるという学習をしてよい。このような傾向が、例えば毎日続いているような場合に、機械学習部118は、条件設定部120に、映像データ105の送信時刻をAM3:00と判定して出力してよい。同様に、機械学習部212は、条件生成部214に、映像データ105の送信時間をAM3:00と判定して出力してよい。
図9は、システム10の一例を概略的に示す。図9においては、映像送信装置100が、無線基地局700を介してネットワーク20に接続されている。なお、ネットワーク20の図示を省略している。
映像送信装置100は、カメラ50で撮像された映像データ105に画像処理を施してデータ量を低減した低減映像を、無線基地局700を介して、表示装置500へ送信する。また、映像送信装置100は、映像データ105を、一時的に記憶し、予め設定された時刻等の条件のタイミングで、無線基地局700を介して、保存サーバ200へ送信する。保存サーバ200は、受信した映像データ105を保存する。保存サーバ200は、例えば、表示装置500からの要求に応じて、映像データ105を表示装置500に送信する。
映像送信装置100と無線基地局700との間は、無線基地局700と保存サーバ200との間、無線基地局700と表示装置500との間と比較して、輻輳が発生しやすい経路になる。したがって、映像送信装置100が、映像データ105について、予め定められた条件が満たされたことに応じて、無線基地局700を介して保存サーバ200に送信するように構成することによって、移動体通信回線が逼迫してしまう可能性を低減できる。これにより、既存の移動体通信利用者に影響が出てしまう可能性を低減することができる。
図10は、映像送信装置100、保存サーバ200、又は表示装置500として機能するコンピュータ1200のハードウェア構成の一例を概略的に示す。本実施形態によるコンピュータ1200は、CPU1212、RAM1214、及びグラフィックコントローラ1216を含み、それらはホストコントローラ1210によって相互に接続されている。コンピュータ1200はまた、通信インタフェース1222、記憶装置1224、DVDドライブ、及びICカードドライブのような入出力ユニットを含み、それらは入出力コントローラ1220を介してホストコントローラ1210に接続されている。DVDドライブは、DVD-ROMドライブ及びDVD-RAMドライブ等であってよい。記憶装置1224は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ1200はまた、ROM1230及びキーボードのようなレガシの入出力ユニットを含み、それらは入出力チップ1240を介して入出力コントローラ1220に接続されている。
CPU1212は、ROM1230及びRAM1214内に記憶されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ1216は、RAM1214内に提供されるフレームバッファ等又はそれ自体の中に、CPU1212によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス1218上に表示されるようにする。
通信インタフェース1222は、ネットワークを介して他の電子デバイスと通信する。記憶装置1224は、コンピュータ1200内のCPU1212によって使用されるプログラム及びデータを記憶する。DVDドライブは、プログラム又はデータをDVD-ROM等から読み取り、記憶装置1224に提供する。ICカードドライブは、プログラム及びデータをICカードから読み取り、及び/又はプログラム及びデータをICカードに書き込む。
ROM1230はその中に、アクティブ化時にコンピュータ1200によって実行されるブートプログラム等、及び/又はコンピュータ1200のハードウェアに依存するプログラムを記憶する。入出力チップ1240はまた、様々な入出力ユニットをUSBポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ1220に接続してよい。
プログラムは、DVD-ROM又はICカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置1224、RAM1214、又はROM1230にインストールされ、CPU1212によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ1200に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ1200の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。
例えば、通信がコンピュータ1200及び外部デバイス間で実行される場合、CPU1212は、RAM1214にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース1222に対し、通信処理を命令してよい。通信インタフェース1222は、CPU1212の制御の下、RAM1214、記憶装置1224、DVD-ROM、又はICカードのような記録媒体内に提供される送信バッファ領域に記憶された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。
また、CPU1212は、記憶装置1224、DVDドライブ(DVD-ROM)、ICカード等のような外部記録媒体に記憶されたファイル又はデータベースの全部又は必要な部分がRAM1214に読み取られるようにし、RAM1214上のデータに対し様々なタイプの処理を実行してよい。CPU1212は次に、処理されたデータを外部記録媒体にライトバックしてよい。
様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に記憶され、情報処理を受けてよい。CPU1212は、RAM1214から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索/置換等を含む、様々なタイプの処理を実行してよく、結果をRAM1214に対しライトバックする。また、CPU1212は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第2の属性の属性値に関連付けられた第1の属性の属性値を有する複数のエントリが記録媒体内に記憶される場合、CPU1212は、当該複数のエントリの中から、第1の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に記憶された第2の属性の属性値を読み取り、それにより予め定められた条件を満たす第1の属性に関連付けられた第2の属性の属性値を取得してよい。
上で説明したプログラム又はソフトウエアモジュールは、コンピュータ1200上又はコンピュータ1200近傍のコンピュータ可読記憶媒体に記憶されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はRAMのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ1200に提供する。
本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に記憶されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び/又はコンピュータ可読記憶媒体上に記憶されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び/又はアナログハードウェア回路を含んでよく、集積回路(IC)及び/又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ(FPGA)、及びプログラマブルロジックアレイ(PLA)等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。
コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を記憶可能な任意の有形なデバイスを含んでよく、その結果、そこに記憶される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピーディスク、ディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能プログラマブルリードオンリメモリ(EPROM又はフラッシュメモリ)、電気的消去可能プログラマブルリードオンリメモリ(EEPROM)、静的ランダムアクセスメモリ(SRAM)、コンパクトディスクリードオンリメモリ(CD-ROM)、デジタル多用途ディスク(DVD)、ブルーレイディスク、メモリスティック、集積回路カード等が含まれてよい。
コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ(ISA)命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はSmalltalk(登録商標)、JAVA(登録商標)、C++等のようなオブジェクト指向プログラミング言語、及び「C」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、1又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。
コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク(LAN)、インターネット等のようなワイドエリアネットワーク(WAN)を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
10 システム、20 ネットワーク、50 カメラ、100 映像送信装置、102 映像データ取得部、104 映像データ記憶部、105 映像データ、106 低減映像生成部、108 ストリーミング送信部、110 映像データ送信部、112 回線速度計測部、114 履歴データ送信部、116 履歴データ記憶部、117 履歴データ、118 機械学習部、120 条件設定部、200 保存サーバ、202 映像データ受信部、204 映像データ保存部、206 映像データ送信部、208 履歴データ受信部、210 履歴データ記憶部、212 機械学習部、214 条件生成部、216 条件通知部、218 基地局情報受信部、500 表示装置、600 履歴データテーブル、602 履歴番号、604 日時、606 年月日、608 時間、610 回線速度、700 無線基地局、1212 CPU、1214 RAM、1216 グラフィックコントローラ、1218 ディスプレイデバイス、1220 入出力コントローラ、1222 通信インタフェース、1224 記憶装置、1230 ROM、1240 入出力チップ

Claims (19)

  1. 映像データを取得する映像データ取得部と、
    前記映像データ取得部が取得した前記映像データを記憶する映像データ記憶部と、
    前記映像データ取得部が取得した前記映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成部と、
    前記低減映像をストリーミングで送信先に送信するストリーミング送信部と、
    前記映像データ記憶部に記憶された前記映像データを、予め定められた条件が満たされたことに応じて、前記映像データの保存先に送信する映像データ送信部と
    を備える映像送信装置。
  2. 前記映像データ取得部は、カメラによって撮像された前記映像データを前記カメラから受信する、請求項1に記載の映像送信装置。
  3. 前記映像データ送信部は、前記映像データ記憶部に記憶され、圧縮された前記映像データを、前記送信先に送信する、請求項1又は2に記載の映像送信装置。
  4. 前記低減映像生成部は、前記映像データの画質低減、前記映像データのフレームレートの低減、及び前記映像データのトリミングの少なくともいずれかを実行して前記映像データのデータ量を低減した前記低減映像を生成する、請求項1から3のいずれか一項に記載の映像送信装置。
  5. 前記映像データ送信部は、予め設定された時刻に前記保存先への前記映像データの送信を開始する、請求項1から4のいずれか一項に記載の映像送信装置。
  6. 前記映像データ送信部は、予め設定された時間帯に前記保存先へ前記映像データを送信する、請求項1から4のいずれか一項に記載の映像送信装置。
  7. 前記映像データ送信部は、前記予め設定された時間帯内に前記映像データの送信が完了しないと判定した場合に、予め定められた条件に従って前記映像データから抽出した前記映像データの一部を前記予め設定された時間帯に送信する、請求項6に記載の映像送信装置。
  8. 前記映像データ送信部は、前記映像データ記憶部に複数の前記映像データが記憶されており、前記予め設定された時間帯内に前記複数の映像データの送信が完了しないと判定した場合に、前記複数の映像データのそれぞれの優先度に応じて、前記複数の映像データの少なくともいずれかを送信する、請求項6に記載の映像送信装置。
  9. 前記映像データ送信部は、前記複数の映像データのうち、前記映像データ取得部が取得した取得時刻がより古い映像データを優先して送信する、請求項8に記載の映像送信装置。
  10. 前記保存先との間の通信回線の回線速度を計測する回線速度計測部
    をさらに備え、
    前記映像データ送信部は、前記回線速度計測部によって計測された前記回線速度が予め定められた送信閾値以上である場合に、前記保存先へ前記映像データを送信する、請求項1から9いずれか一項に記載の映像送信装置。
  11. 前記回線速度計測部は、前記送信先との間の通信回線の回線速度を計測し、
    前記映像データ送信部は、前記ストリーミング送信部が前記低減映像を前記送信先に送信するタイミングで前記回線速度計測部によって計測された前記送信先との間の通信回線の回線速度が、予め定められた送信閾値以上である場合に、前記ストリーミング送信部による前記送信先へのストリーミング送信に代えて、前記映像データを前記送信先に送信する、請求項10に記載の映像送信装置。
  12. 前記保存先との間の通信回線の回線速度を計測する回線速度計測部と、
    前記回線速度計測部によって計測された前記回線速度と、計測を実行した日時とを含む履歴データを記憶する履歴データ記憶部と、
    前記履歴データ記憶部に記憶されている複数の前記履歴データを用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する機械学習部と、
    前記機械学習モデルを用いて、前記条件を設定する条件設定部と
    を更に備える、請求項1から9のいずれか一項に記載の映像送信装置。
  13. 前記ストリーミング送信部は、移動体通信回線を介して、表示装置に、前記低減映像をストリーミングで送信し、
    前記映像データ送信部は、前記移動体通信回線を介して、クラウドに配置された前記保存先に前記映像データを送信する、請求項1から12のいずれか一項に記載の映像送信装置。
  14. コンピュータを、請求項1から13のいずれか一項に記載の映像送信装置として機能させるためのプログラム。
  15. コンピュータによって実行される映像送信方法であって、
    映像データを取得する映像データ取得段階と、
    前記映像データ取得段階において取得された前記映像データを映像データ記憶部に記憶する映像データ記憶段階と、
    前記映像データ取得段階において取得された前記映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成段階と、
    前記低減映像をストリーミングで送信先に送信するストリーミング送信段階と、
    前記映像データ記憶部に記憶された前記映像データを、予め定められた条件が満たされたことに応じて、前記映像データの保存先に送信する映像データ送信段階と
    を備える映像送信方法。
  16. 映像送信装置と、
    保存サーバと
    を備え、
    前記映像送信装置は、
    映像データを取得する映像データ取得部と、
    前記映像データ取得部が取得した前記映像データを記憶する映像データ記憶部と、
    前記映像データ取得部が取得した前記映像データに画像処理を施してデータ量を低減した低減映像を生成する低減映像生成部と、
    前記低減映像をストリーミングで送信するストリーミング送信部と、
    前記映像データ記憶部に記憶された前記映像データを、予め定められた条件が満たされたことに応じて、前記保存サーバに送信する映像データ送信部と
    を有し、
    前記保存サーバは、
    前記映像送信装置から受信した前記映像データを保存する映像データ保存部
    を有する、
    システム。
  17. 前記映像送信装置は、
    前記保存サーバとの間の通信回線の回線速度を計測する回線速度計測部と、
    前記回線速度計測部によって計測された前記回線速度と、計測を実行した日時とを含む履歴データを記憶する履歴データ記憶部と、
    前記履歴データを前記保存サーバに送信する履歴データ送信部と
    をさらに有し、
    前記保存サーバは、
    前記映像送信装置から受信した複数の前記履歴データを用いて、機械学習によって、日時を入力とし、回線速度を出力とする機械学習モデルを生成する機械学習部と、
    前記機械学習モデルを用いて、前記条件を生成する条件生成部と、
    前記条件生成部によって生成された前記条件を前記映像送信装置に通知する条件通知部と
    を更に有する、請求項16に記載のシステム。
  18. 前記ストリーミング送信部は、移動体通信回線を介して、映像を閲覧するための表示装置に、前記低減映像をストリーミングで送信し、
    前記映像データ送信部は、前記移動体通信回線を介して、クラウドに配置された前記保存サーバに前記映像データを送信する、請求項16に記載のシステム。
  19. 前記保存サーバは、
    前記映像データ送信部から前記保存サーバへの前記映像データの送信を中継した無線基地局から、前記無線基地局に関連する基地局情報を受信する基地局情報受信部と、
    前記基地局情報受信部が受信した前記基地局情報に基づいて、前記条件を生成する条件生成部と、
    前記条件生成部によって生成された前記条件を前記映像送信装置に通知する条件通知部と
    を更に有する、請求項18に記載のシステム。
JP2021211409A 2021-12-24 2021-12-24 映像送信装置、プログラム、映像送信方法、及びシステム Active JP7295214B1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021211409A JP7295214B1 (ja) 2021-12-24 2021-12-24 映像送信装置、プログラム、映像送信方法、及びシステム
KR1020237039280A KR20230170764A (ko) 2021-12-24 2022-12-20 영상 송신 장치, 프로그램, 영상 송신 방법, 및 시스템
PCT/JP2022/046956 WO2023120539A1 (ja) 2021-12-24 2022-12-20 映像送信装置、プログラム、映像送信方法、及びシステム
US18/516,976 US20240089525A1 (en) 2021-12-24 2023-11-22 Video transmission apparatus, computer-readable storage medium, video transmission method, and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021211409A JP7295214B1 (ja) 2021-12-24 2021-12-24 映像送信装置、プログラム、映像送信方法、及びシステム

Publications (2)

Publication Number Publication Date
JP7295214B1 JP7295214B1 (ja) 2023-06-20
JP2023095486A true JP2023095486A (ja) 2023-07-06

Family

ID=86772670

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021211409A Active JP7295214B1 (ja) 2021-12-24 2021-12-24 映像送信装置、プログラム、映像送信方法、及びシステム

Country Status (4)

Country Link
US (1) US20240089525A1 (ja)
JP (1) JP7295214B1 (ja)
KR (1) KR20230170764A (ja)
WO (1) WO2023120539A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110244A (ja) * 2003-09-27 2005-04-21 Lg Electronics Inc マルチメディアストリーミングサービスシステム及びその方法
JP2007013735A (ja) * 2005-06-30 2007-01-18 Toshiba Corp コンテンツサーバ装置
JP2012019407A (ja) * 2010-07-08 2012-01-26 Hitachi Kokusai Electric Inc 映像配信システム
JP2013211784A (ja) * 2012-03-30 2013-10-10 Sharp Corp コンテンツデータ記録装置およびコンテンツデータ記録方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4526294B2 (ja) 2004-04-15 2010-08-18 シャープ株式会社 ストリームデータ送信装置、受信装置、プログラムを記録した記録媒体、およびシステム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005110244A (ja) * 2003-09-27 2005-04-21 Lg Electronics Inc マルチメディアストリーミングサービスシステム及びその方法
JP2007013735A (ja) * 2005-06-30 2007-01-18 Toshiba Corp コンテンツサーバ装置
JP2012019407A (ja) * 2010-07-08 2012-01-26 Hitachi Kokusai Electric Inc 映像配信システム
JP2013211784A (ja) * 2012-03-30 2013-10-10 Sharp Corp コンテンツデータ記録装置およびコンテンツデータ記録方法

Also Published As

Publication number Publication date
KR20230170764A (ko) 2023-12-19
US20240089525A1 (en) 2024-03-14
WO2023120539A1 (ja) 2023-06-29
JP7295214B1 (ja) 2023-06-20

Similar Documents

Publication Publication Date Title
US10051142B1 (en) Adaptive display of image capacity for a camera
CN111447505B (zh) 视频剪辑方法、网络设备及计算机可读存储介质
US20160189752A1 (en) Constrained system real-time capture and editing of video
US20160379684A1 (en) Techniques to Save or Delete a Video Clip
KR20170097414A (ko) 전자 장치 및 그의 동작 방법
US20210160577A1 (en) Method for playing video, electronic device and storage medium
WO2023143134A1 (zh) 直播处理方法及装置
KR20190084278A (ko) 이미지들을 공유하기 위한 자동 제안들
KR102376700B1 (ko) 비디오 컨텐츠 생성 방법 및 그 장치
WO2021031733A1 (zh) 视频特效生成方法及终端
CN103716653A (zh) 控制装置及其控制方法、服务器、被控制装置和控制系统
CN106534562A (zh) 文件删除方法及装置
CN104657409A (zh) 通过显示备份信息来管理图像文件的设备和方法
CN112530205A (zh) 机场停机坪飞机状态检测方法及装置
US20190082002A1 (en) Media file sharing method, media file sharing device, and terminal
JP7295214B1 (ja) 映像送信装置、プログラム、映像送信方法、及びシステム
CN105808231A (zh) 录制与播放脚本的系统及方法
JP2021005768A (ja) コンピュータプログラム、情報処理方法および動画配信システム
CN113938551A (zh) 缓存方法、装置和电子设备
US20240013890A1 (en) Systems and methods for recommending physical activity associated with media content
CN113190516A (zh) 数据同步监控方法及装置
US10116878B2 (en) Method for producing media file and electronic device thereof
CN109753482A (zh) 文件管理方法及装置
WO2021218626A1 (zh) 数据存储方法、装置、设备及存储介质
CN114584709A (zh) 变焦特效的生成方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230501

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230608

R150 Certificate of patent or registration of utility model

Ref document number: 7295214

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150