JP2012004779A - 会話種別判定装置、マルチメディア品質推定装置、会話種別判定方法およびマルチメディア品質推定方法 - Google Patents
会話種別判定装置、マルチメディア品質推定装置、会話種別判定方法およびマルチメディア品質推定方法 Download PDFInfo
- Publication number
- JP2012004779A JP2012004779A JP2010137003A JP2010137003A JP2012004779A JP 2012004779 A JP2012004779 A JP 2012004779A JP 2010137003 A JP2010137003 A JP 2010137003A JP 2010137003 A JP2010137003 A JP 2010137003A JP 2012004779 A JP2012004779 A JP 2012004779A
- Authority
- JP
- Japan
- Prior art keywords
- quality
- conversation type
- video
- quality estimation
- conversation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【解決手段】マルチメディア品質推定装置2は、通信端末1間で送受信されるパケットを収集する通信パケット収集部21と、パケットから音声情報を抽出する音声情報収集部22と、パケットから映像情報を抽出する映像情報収集部23と、遅延品質を推定する遅延品質推定部24と、音声品質を推定する音声品質推定部25と、音声情報から通信端末1間の会話の特徴量を抽出し、会話種別を判定するタスク判断部26と、映像品質を推定する映像品質推定部27と、外部から通信端末1の利用環境条件を受け取る利用環境条件入力部28と、会話種別および利用環境条件を考慮してマルチメディア品質を推定するマルチメディア品質推定部29とを有する。
【選択図】 図1
Description
従来、映像品質評価は、ユーザがその映像を実際に観たときに感じる品質を測定する、いわゆる主観品質評価が基本である。しかしながら、主観品質評価は専用の設備と膨大な時間および労力を要する。そこで、映像品質評価をより効率的に行うために、映像から物理的に測定される特徴の量から主観品質を推定する技術(以下、客観品質評価技術という)の開発が望まれている。
また、従来、双方向の映像・音声通信サービスといえばテレビ会議サービスであり、マルチメディア品質の推定方法としては、1対1の双方向で同程度のやり取りが行われ、同程度の通信端末が利用されていることを想定していた。
また、本発明の目的は、会話種別および利用環境条件を考慮したマルチメディア品質を推定することができるマルチメディア品質推定装置およびマルチメディア品質推定方法を提供することにある。
また、本発明の会話種別判定装置の1構成例において、前記会話種別判定手段は、前記音声情報収集手段が抽出した音声情報から前記会話の特徴量として、通信端末間の会話のやり取りの頻度を算出するやり取り頻度算出手段と、算出されたやり取りの頻度を所定の判別閾値により分類することにより前記会話種別を判定する分類手段とを有することを特徴とするものである。
また、本発明の会話種別判定装置の1構成例において、前記やり取り頻度算出手段は、音声パケットの発生状況から前記やり取りの頻度を算出することを特徴とするものである。
また、本発明のマルチメディア品質推定装置は、会話種別判定装置と、前記通信パケット収集手段が収集した品質情報パケットから映像品質推定値、音声品質推定値および遅延品質推定値を取り出す品質情報抽出手段と、前記会話種別判定装置が判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定値と、前記音声品質推定値と、前記遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定手段とを備えることを特徴とするものである。
また、本発明の会話種別判定方法の1構成例において、前記会話種別判定ステップは、前記音声情報収集ステップで抽出した音声情報から前記会話の特徴量として、通信端末間の会話のやり取りの頻度を算出するやり取り頻度算出ステップと、算出したやり取りの頻度を所定の判別閾値により分類することにより前記会話種別を判定する分類ステップとからなることを特徴とするものである。
また、本発明の会話種別判定方法の1構成例において、前記やり取り頻度算出ステップは、音声パケットの発生状況から前記やり取りの頻度を算出することを特徴とするものである。
また、本発明のマルチメディア品質推定方法は、会話種別判定方法の各ステップと、前記通信パケット収集ステップで収集した品質情報パケットから映像品質推定値、音声品質推定値および遅延品質推定値を取り出す品質情報抽出ステップと、前記会話種別判定ステップで判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定値と、前記音声品質推定値と、前記遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定ステップとを備えることを特徴とするものである。
以下、本発明の実施の形態を図面に基づき詳細に説明する。図1は本発明の第1の実施の形態に係るマルチメディア品質推定装置を利用した映像・音声通信サービスシステムの一例を示すブロック図である。
映像・音声通信サービスシステムは、複数の通信端末1と、複数のマルチメディア品質推定装置2と、複数の通信端末1を相互に接続するネットワーク3と、映像・音声通信サービスシステムの品質管理を行う品質管理装置4とから構成されている。各マルチメディア品質推定装置2は、通信端末1とネットワーク3との間に設置されている。
音声情報収集部22は、通信パケット収集部21が収集した通信パケットから音声情報(音声パケット)を抽出する(図2ステップS2)。
映像情報収集部23は、通信パケット収集部21が収集した通信パケットから映像情報(映像パケット)を抽出する(図2ステップS3)。
やり取り回数算出部262は、有音区間の発生状況から、話者が切り替わる回数であるやり取り回数を算出する(ステップS262)。
そして、分類部264は、算出されたやり取りの頻度Rnを、上記のように所定の判別閾値a,b,cにより分類することにより、会話種別を判定する(ステップS264)。会話種別の判定が完了した時点でタスク判断部26の処理が終了する(ステップS265においてYES)。
マルチメディア品質推定部29は、係数テーブル291と、マルチメディア品質算出部292とを有する。
MOSt=α・MOSa+β・MOSv+γ・MOSd+δ・MOSa・MOSv
+ε・MOSa・MOSd+ψ・MOSv・MOSd
+φ・MOSa・MOSv・MOSd+μ ・・・(2)
以上で、マルチメディア品質推定装置2の処理が終了する。
第1の実施の形態では、マルチメディア品質推定装置2を通信端末1の直前に設置したが、これに限るものではなく、マルチメディア品質推定装置2とは別の通信パケット収集手段があれば、マルチメディア品質推定装置2をネットワーク3上の任意の箇所に配置して、マルチメディア品質推定を行ってもよい。
また、マルチメディア品質推定装置2による品質推定結果を通信端末1に通知するだけでなく、ネットワーク3を介して品質推定結果を品質管理装置4に通知して、品質管理装置4が実施する品質管理に役立てるようにしてもよい。
また、マルチメディア品質推定装置2を、図8に示すように通信端末1内に組み込んで利用してもよい。
第1の実施の形態では、通信端末1間で送受信される通信パケットそのものから音声情報および映像情報を収集したが、音声情報や映像情報の品質推定結果が搭載されているような品質情報パケットを収集してもよい。
Claims (12)
- ネットワークを介して映像と音声を伝送する映像・音声通信サービスにおいて通信端末間で行われる会話の形式を表す会話種別を判定する会話種別判定装置であって、
通信端末間で送受信されている通信パケットを収集する通信パケット収集手段と、
この通信パケット収集手段が収集した通信パケットから音声情報を抽出する音声情報収集手段と、
この音声情報収集手段が抽出した音声情報から通信端末間の会話の特徴量を抽出し、この特徴量から会話種別を判定する会話種別判定手段とを備えることを特徴とする会話種別判定装置。 - 請求項1記載の会話種別判定装置において、
前記会話種別判定手段は、
前記音声情報収集手段が抽出した音声情報から前記会話の特徴量として、通信端末間の会話のやり取りの頻度を算出するやり取り頻度算出手段と、
算出されたやり取りの頻度を所定の判別閾値により分類することにより前記会話種別を判定する分類手段とを有することを特徴とする会話種別判定装置。 - 請求項2記載の会話種別判定装置において、
前記やり取り頻度算出手段は、音声パケットの発生状況から前記やり取りの頻度を算出することを特徴とする会話種別判定装置。 - 請求項1乃至3のいずれか1項に記載の会話種別判定装置と、
前記通信パケット収集手段が収集した通信パケットから映像情報を抽出する映像情報収集手段と、
この映像情報収集手段が抽出した映像情報から映像品質を推定する映像品質推定手段と、
前記音声情報収集手段が抽出した音声情報から音声品質を推定する音声品質推定手段と、
前記抽出された音声情報と映像情報とから遅延品質を推定する遅延品質推定手段と、
前記会話種別判定装置が判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定手段が算出した映像品質推定値と、前記音声品質推定手段が算出した音声品質推定値と、前記遅延品質推定手段が算出した遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定手段とを備えることを特徴とするマルチメディア品質推定装置。 - 請求項1乃至3のいずれか1項に記載の会話種別判定装置と、
前記通信パケット収集手段が収集した品質情報パケットから映像品質推定値、音声品質推定値および遅延品質推定値を取り出す品質情報抽出手段と、
前記会話種別判定装置が判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定値と、前記音声品質推定値と、前記遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定手段とを備えることを特徴とするマルチメディア品質推定装置。 - 請求項4または5記載のマルチメディア品質推定装置において、
前記マルチメディア品質推定手段は、
会話種別と利用環境条件との交互作用を考慮して決定された係数を会話種別毎および利用環境条件毎に予め記憶する係数テーブルと、
前記会話種別判定装置が判定した会話種別と外部から入力された利用環境条件とに対応する係数を前記係数テーブルから取得し、取得した係数と前記映像品質推定値と前記音声品質推定値と前記遅延品質推定値とを所定の品質推定式に代入してマルチメディア品質推定値を算出するマルチメディア品質算出手段とを有することを特徴とするマルチメディア品質推定装置。 - ネットワークを介して映像と音声を伝送する映像・音声通信サービスにおいて通信端末間で行われる会話の形式を表す会話種別を判定する会話種別判定方法であって、
通信端末間で送受信されている通信パケットを収集する通信パケット収集ステップと、
この通信パケット収集ステップで収集した通信パケットから音声情報を抽出する音声情報収集ステップと、
この音声情報収集ステップで抽出した音声情報から通信端末間の会話の特徴量を抽出し、この特徴量から会話種別を判定する会話種別判定ステップとを備えることを特徴とする会話種別判定方法。 - 請求項7記載の会話種別判定方法において、
前記会話種別判定ステップは、
前記音声情報収集ステップで抽出した音声情報から前記会話の特徴量として、通信端末間の会話のやり取りの頻度を算出するやり取り頻度算出ステップと、
算出したやり取りの頻度を所定の判別閾値により分類することにより前記会話種別を判定する分類ステップとからなることを特徴とする会話種別判定方法。 - 請求項8記載の会話種別判定方法において、
前記やり取り頻度算出ステップは、音声パケットの発生状況から前記やり取りの頻度を算出することを特徴とする会話種別判定方法。 - 請求項7乃至9のいずれか1項に記載の各ステップと、
前記通信パケット収集ステップで収集した通信パケットから映像情報を抽出する映像情報収集ステップと、
この映像情報収集ステップで抽出した映像情報から映像品質を推定する映像品質推定ステップと、
前記音声情報収集ステップで抽出した音声情報から音声品質を推定する音声品質推定ステップと、
前記抽出した音声情報と映像情報とから遅延品質を推定する遅延品質推定ステップと、
前記会話種別判定ステップで判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定ステップで算出した映像品質推定値と、前記音声品質推定ステップで算出した音声品質推定値と、前記遅延品質推定ステップで算出した遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定ステップとを備えることを特徴とするマルチメディア品質推定方法。 - 請求項7乃至9のいずれか1項に記載の各ステップと、
前記通信パケット収集ステップで収集した品質情報パケットから映像品質推定値、音声品質推定値および遅延品質推定値を取り出す品質情報抽出ステップと、
前記会話種別判定ステップで判定した会話種別と、通信端末の能力を表す利用環境条件と、前記映像品質推定値と、前記音声品質推定値と、前記遅延品質推定値に基づいて、通信サービスの総合的な品質であるマルチメディア品質を推定するマルチメディア品質推定ステップとを備えることを特徴とするマルチメディア品質推定方法。 - 請求項10または11記載のマルチメディア品質推定方法において、
前記マルチメディア品質推定ステップは、
会話種別と利用環境条件との交互作用を考慮して決定された係数を会話種別毎および利用環境条件毎に予め記憶する係数テーブルを参照して、前記会話種別判定ステップで判定した会話種別と外部から入力された利用環境条件とに対応する係数を前記係数テーブルから取得し、取得した係数と前記映像品質推定値と前記音声品質推定値と前記遅延品質推定値とを所定の品質推定式に代入してマルチメディア品質推定値を算出するマルチメディア品質算出ステップを有することを特徴とするマルチメディア品質推定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010137003A JP5373704B2 (ja) | 2010-06-16 | 2010-06-16 | マルチメディア品質推定装置およびマルチメディア品質推定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010137003A JP5373704B2 (ja) | 2010-06-16 | 2010-06-16 | マルチメディア品質推定装置およびマルチメディア品質推定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012004779A true JP2012004779A (ja) | 2012-01-05 |
JP5373704B2 JP5373704B2 (ja) | 2013-12-18 |
Family
ID=45536278
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010137003A Expired - Fee Related JP5373704B2 (ja) | 2010-06-16 | 2010-06-16 | マルチメディア品質推定装置およびマルチメディア品質推定方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5373704B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104539943A (zh) * | 2012-08-22 | 2015-04-22 | 华为技术有限公司 | 多媒体质量的监控方法和设备 |
JP2015520548A (ja) * | 2012-04-23 | 2015-07-16 | 華為技術有限公司Huawei Technologies Co.,Ltd. | マルチメディア品質を評価する方法及び装置 |
US9402074B2 (en) | 2012-08-22 | 2016-07-26 | Huawei Technologies Co., Ltd. | Multimedia quality monitoring method, and device |
JP2022072257A (ja) * | 2020-10-29 | 2022-05-17 | 本田技研工業株式会社 | 情報処理装置、移動体、プログラム、及び情報処理方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005148225A (ja) * | 2003-11-12 | 2005-06-09 | Nippon Telegr & Teleph Corp <Ntt> | 通話品質推定装置、そのプログラム及びその記録媒体 |
JP2006324865A (ja) * | 2005-05-18 | 2006-11-30 | Nippon Telegr & Teleph Corp <Ntt> | ネットワークコミュニケーションサービス満足度推定装置、方法、およびプログラム |
WO2007029731A1 (ja) * | 2005-09-06 | 2007-03-15 | Nippon Telegraph And Telephone Corporation | 映像コミュニケーション品質推定装置、方法、およびプログラム |
JP2007067626A (ja) * | 2005-08-30 | 2007-03-15 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質推定装置、方法およびプログラム |
WO2008094092A1 (en) * | 2007-02-02 | 2008-08-07 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and arrangement for video telephony quality assessment |
-
2010
- 2010-06-16 JP JP2010137003A patent/JP5373704B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005148225A (ja) * | 2003-11-12 | 2005-06-09 | Nippon Telegr & Teleph Corp <Ntt> | 通話品質推定装置、そのプログラム及びその記録媒体 |
JP2006324865A (ja) * | 2005-05-18 | 2006-11-30 | Nippon Telegr & Teleph Corp <Ntt> | ネットワークコミュニケーションサービス満足度推定装置、方法、およびプログラム |
JP2007067626A (ja) * | 2005-08-30 | 2007-03-15 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質推定装置、方法およびプログラム |
WO2007029731A1 (ja) * | 2005-09-06 | 2007-03-15 | Nippon Telegraph And Telephone Corporation | 映像コミュニケーション品質推定装置、方法、およびプログラム |
WO2008094092A1 (en) * | 2007-02-02 | 2008-08-07 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and arrangement for video telephony quality assessment |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015520548A (ja) * | 2012-04-23 | 2015-07-16 | 華為技術有限公司Huawei Technologies Co.,Ltd. | マルチメディア品質を評価する方法及び装置 |
CN104539943A (zh) * | 2012-08-22 | 2015-04-22 | 华为技术有限公司 | 多媒体质量的监控方法和设备 |
US9402074B2 (en) | 2012-08-22 | 2016-07-26 | Huawei Technologies Co., Ltd. | Multimedia quality monitoring method, and device |
CN104539943B (zh) * | 2012-08-22 | 2017-01-04 | 华为技术有限公司 | 多媒体质量的监控方法和设备 |
US10116929B2 (en) | 2012-08-22 | 2018-10-30 | Huawei Technologies Co., Ltd. | Multimedia quality monitoring method, and device |
JP2022072257A (ja) * | 2020-10-29 | 2022-05-17 | 本田技研工業株式会社 | 情報処理装置、移動体、プログラム、及び情報処理方法 |
JP7410839B2 (ja) | 2020-10-29 | 2024-01-10 | 本田技研工業株式会社 | 情報処理装置、移動体、プログラム、及び情報処理方法 |
US11974157B2 (en) | 2020-10-29 | 2024-04-30 | Honda Motor Co., Ltd. | Information processing device, moving object, computer-readable storage medium, and information processing method |
Also Published As
Publication number | Publication date |
---|---|
JP5373704B2 (ja) | 2013-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4965659B2 (ja) | ビデオ画質の決定方法 | |
EP2761879B1 (en) | A method to measure quality of experience of a video service | |
JP4486130B2 (ja) | 映像コミュニケーション品質推定装置、方法、およびプログラム | |
US8472349B1 (en) | Determining mean opinion scores (MOS) for variable bit rate audio streams | |
Calyam et al. | A “GAP-model” based framework for online VVoIP QoE measurement | |
JPWO2017104416A1 (ja) | オーディオビジュアル品質推定装置、オーディオビジュアル品質推定方法、及びプログラム | |
JP5373704B2 (ja) | マルチメディア品質推定装置およびマルチメディア品質推定方法 | |
JP4914400B2 (ja) | 品質推定方法、品質推定システム、ユーザ端末、品質管理端末およびプログラム | |
KR101846449B1 (ko) | 사용자 단말 디바이스, 서버 디바이스, 매체 데이터의 품질을 평가하기 위한 시스템 및 방법 | |
JP4745721B2 (ja) | ネットワークコミュニケーションサービス満足度推定装置、方法、およびプログラム | |
JP4460523B2 (ja) | ユーザ体感品質推定装置、方法、およびプログラム | |
JP5335867B2 (ja) | 基本GoP長を用いた映像品質推定装置及び方法及びプログラム | |
JP5379078B2 (ja) | ユーザ体感品質監視装置、方法および情報通信システム | |
JP2008172365A (ja) | 受聴品質評価方法および装置 | |
CN113411672A (zh) | 通信质量评估方法、装置、可读存储介质及电子设备 | |
JP6511003B2 (ja) | 音声品質推定装置、音声品質推定方法、及びプログラム | |
JP4733071B2 (ja) | 映像品質推定方法および装置 | |
JP7501662B2 (ja) | 客観評価装置、客観評価方法、及び客観評価プログラム | |
JP4460548B2 (ja) | ユーザ体感品質推定装置、方法、およびプログラム | |
JP2006203844A (ja) | 通信品質推定方法、装置、およびプログラム | |
JP2012039530A (ja) | 映像品質推定システム及び映像配信サーバ及びユーザの受信・再生端末 | |
JP2007329777A (ja) | コンテンツ特性解析装置、方法、およびプログラム | |
CN113766214A (zh) | 一种串流数据的质量检测方法、质量检测系统及相关装置 | |
Wilk et al. | Scalable mobile quality assessment for User-generated Video | |
JP5491150B2 (ja) | オーディオ品質要因指標算出方法、装置、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20111025 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20111025 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120830 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130417 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130430 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130917 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130919 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5373704 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |