JP7420857B2 - スマートバックミラー用の遅延推定方法、装置および電子機器 - Google Patents

スマートバックミラー用の遅延推定方法、装置および電子機器 Download PDF

Info

Publication number
JP7420857B2
JP7420857B2 JP2022062493A JP2022062493A JP7420857B2 JP 7420857 B2 JP7420857 B2 JP 7420857B2 JP 2022062493 A JP2022062493 A JP 2022062493A JP 2022062493 A JP2022062493 A JP 2022062493A JP 7420857 B2 JP7420857 B2 JP 7420857B2
Authority
JP
Japan
Prior art keywords
upper limit
peripheral device
delay estimation
limit value
profile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022062493A
Other languages
English (en)
Other versions
JP2022091949A (ja
Inventor
ロン リュウ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Original Assignee
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apollo Intelligent Connectivity Beijing Technology Co Ltd filed Critical Apollo Intelligent Connectivity Beijing Technology Co Ltd
Publication of JP2022091949A publication Critical patent/JP2022091949A/ja
Application granted granted Critical
Publication of JP7420857B2 publication Critical patent/JP7420857B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L15/222—Barge in, i.e. overridable guidance for interrupting prompts
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/06—Rear-view mirror arrangements mounted on vehicle exterior
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852—Delays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mechanical Engineering (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本願は、人工知能技術分野に関し、具体的には、コネクテッドカー分野および自動運転分野などに関し、特に、スマートバックミラー用の遅延推定方法、装置および電子機器に関する。
スマートバックミラーは、ミラーリング技術によって音声を周辺機器に伝送して再生することができるが、データ通信量が膨大であるため、オーディオの再生には一定の遅延が存在することが多い。現在の信号処理技術は、ハードウェアのノイズ低減チップの制限により、非通常（＞４０ｍｓ）遅延では進行できず、音声信号の処理に大きなマイナスの影響を与えている。
このため、スマートバックミラーに遅延推定アルゴリズムが取り込まれ、遅延を計算することによりオーディオ再生遅延の問題を解決する。全体的な体験に影響を与えないために、遅延推定アルゴリズムは、一般的に、計算結果の上限値を比較的小さい範囲（例えば、１０００ｍｓ）に限定する。これは、上限値が小さいほど、アルゴリズムの収束時間が短く、真の遅延値が該範囲内であれば、最終的な信号処理効果もよくなるからである。以上から分かるように、遅延推定アルゴリズムの計算結果を限定するための遅延推定の上限値の大きさは、遅延推定アルゴリズムの計算結果および最終的な信号処理効果に直接影響する。
本願は、スマートバックミラー用の遅延推定方法、装置、機器および記憶媒体を提供する。
本願の第１の態様によれば、スマートバックミラー用の遅延推定方法を提供し、前記方法は、
前記スマートバックミラーと周辺機器とのスクリーン接続時に、前記周辺機器の識別情報を取得するステップと、
前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するステップと、
前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延推定の上限値に基づいて遅延推定を行うステップと、
遅延推定結果に基づいて前記音声信号に対して遅延処理を行うステップと、を含む。
本願の第２の態様によれば、スマートバックミラー用の遅延推定装置を提供し、前記装置は、
前記スマートバックミラーと周辺機器とのスクリーン接続時に、前記周辺機器の識別情報を取得するように構成される第１の取得モジュールと、
前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するように構成される決定モジュールと、
前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延推定の上限値に基づいて遅延推定を行うように構成される推定モジュールと、
遅延推定結果に基づいて前記音声信号に対して遅延処理を行うように構成される処理モジュールと、を含む。
本願の第３の態様によれば、電子機器を提供し、前記電子機器は、
少なくとも１つのプロセッサと、
前記少なくとも１つのプロセッサに通信可能に接続されるメモリと、を含み、
前記メモリには、前記少なくとも１つのプロセッサによって実行可能な指令が記憶されており、前記指令は、前記少なくとも１つのプロセッサによって実行される場合、前記少なくとも１つのプロセッサが前述した第１の態様に記載の遅延推定方法を実行できる。
本願の第４の態様によれば、コンピュータ指令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体を提供して、前記コンピュータ指令は、前記コンピュータに前述第１の態様に記載の遅延推定方法を実行させる。
本願の第５の態様によれば、コンピュータプログラムを提供し、前記コンピュータプログラムがプロセッサによって実行される場合、前述した第１の態様に記載の遅延方法が実現される。
本願の技術案によれば、１つのデフォルト値を一括使用するのではなく、スマートバックミラーに接続されている周辺機器の識別情報に基づいて、遅延推定アルゴリズムにおける遅延推定の上限値を柔軟に配置することができ、従来技術の固定遅延推定アルゴリズムにおける遅延推定の上限値が周辺機器の性能にマッチングしないという問題を解決し、上限値を一括設定したら、性能が良好な周辺機器に対して、遅延推定アルゴリズムの収束が遅すぎ、ノイズ低減の発効が遅くなり、機器接続後の音声インタラクション体験を悪化させることが回避され、性能の悪い周辺機器に対して、遅延推定範囲が小さすぎ、遅延推定アルゴリズムが該範囲内で適切な遅延値を得ることができず、複数の遅延値の間を繰り返しジャンプすることがあり、ノイズ低減アルゴリズムの計算に深刻な影響を与え、音声インタラクション過程を妨害することを回避することもできる。本願により提出される技術案は、異なる周辺機器に適切なターゲット遅延上限値をマッチングさせ、周辺機器にマッチングするターゲット遅延上限値に基づいて遅延推定を行い、遅延推定アルゴリズムにより得られる遅延推定結果がより正確であり、周辺機器のオーディオ再生効果を改善することを実現している。
なお、本部分に記載された内容は、本願の実施例の肝心または重要な特徴を識別することを意図するものではなく、本願の範囲を限定するものでもない。本願の他の特徴は、以下の明細書によって理解しやすくなる。
図面は、本技術案をよりよく理解するために使用され、本願を限定するものではない。
本願の一実施例に係るスマートバックミラー用の遅延推定方法のフローチャートである。 本願の一実施例に係る周辺機器に対応するターゲット遅延推定の上限値を決定するフローチャートである。 本願の他の実施例に係る周辺機器に対応するターゲット遅延推定の上限値を決定するフローチャートである。 本願の他の実施例に係るスマートバックミラー用の遅延推定方法のフローチャートである。 本願の一実施例に係るスマートバックミラー用の遅延推定装置の構成ブロック図である。 本願の他の実施例に係るスマートバックミラー用の遅延推定装置の構成ブロック図である。 本願の別の実施例に係るスマートバックミラー用の遅延推定装置の構成ブロック図である。 本願の実施例に係るスマートバックミラー用の遅延推定方法を実現するための電子機器のブロック図である。
以下、図面を組み合わせて本願の例示的な実施例を説明し、理解を容易にするために、は本願の実施例の様々な詳細事項が含まれ、それらは単なる例示的なものと見なされるべきである。したがって、当業者は、本願の範囲および精神から逸脱することなく、ここで説明される実施例に対して様々な変更と修正を行うことができる。同様に、わかりやすくかつ簡潔にするために、以下の説明では、周知の機能および構造の説明を省略する。
関連技術において、主に固定遅延推定アルゴリズムによってスマートバックミラーがオーディオを周辺機器に伝送する過程で発生するオーディオ遅延の問題を解決する。固定遅延推定アルゴリズムの計算結果の上限値を小さい範囲内に限定し、該範囲内で遅延値を計算し、音声信号に対して遅延処理を行う。
しかしながら、各ミラーリング機能に対応する周辺機器の性能が一致しないため、実際の伝送遅延の変動が大きく、上限値を一括設定することで周辺機器の性能に基づいてリアルタイムに配置することができない。上限値を一括大きくすると、性能が良好な周辺機器に対して、遅延推定範囲が大きすぎ、アルゴリズムの収束が遅すぎ、ノイズ低減の発効が遅くなり、機器接続後の音声インタラクション体験を悪化させ、上限値を一括小さくすると、性能の悪い周辺機器に対して、遅延推定範囲が小さすぎ、アルゴリズムが該範囲内で適切な遅延値を得ることができず、複数の遅延値の間を繰り返しジャンプすることがあり、ノイズ低減アルゴリズムの計算に深刻な影響を与え、音声インタラクション過程を妨害する。
このため、本願は、周辺機器に基づいてリアルタイムに配置できるスマートバックミラー用の遅延推定方法、装置および電子機器を提供する。具体的には、以下に、図面を参照して本願の実施例のスマートバックミラー用の遅延推定方法、装置および電子機器を説明する。
なお、先ず本願の実施例における周辺機器は、スマートバックミラーから投射されたコンテンツを受け入れるためのエンティティ機器であってもよい。例えば、周辺機器は、スマートフォン、タブレット、拡張現実（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ、ＡＲと略す）機能を有する機器、または仮想現実（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ、ＶＲと略す）機能を有する機器などのモバイル端末であってもよい。また、周辺機器は、車両に搭載された車載システムであってもよく、車載システムとは、車両の内部に搭載された車載情報・娯楽システムの略称であり、車載システムは、機能的に人と車、車と外界（車と車）の情報通信を実現することができる。本願の実施形態に係るスマートバックミラーは、周辺機器にスクリーン接続することができる。本願の実施例は、周辺機器に採用される具体的な技術および具体的な機器の形態を限定しない。
図１は、本願の実施例に係るスマートバックミラー用の遅延推定方法のフローチャートである。なお、本願の実施例に係るスマートバックミラー用の遅延推定方法は、本願の実施例のスマートバックミラー用の遅延推定装置に適用することができ、当該遅延推定装置は、電子機器に配置されてもよい。一例として、当該電子機器は、車両に取り付けられるスマートバックミラーであってもよい。
図１に示すように、当該スマートバックミラー用の遅延推定方法は、以下のステップを含むことができる。
ステップ１０１において、スマートバックミラーと周辺機器とのスクリーン接続時に、周辺機器の識別情報を取得する。
なお、本願の実施例の識別情報は、周辺機器のチャンネル番号であってもよく、当該機器を一意に識別することができる他の識別子であってもよく、本願ではこれを具体的に限定しない。
なお、本願の実施例において、周辺機器は、車載システムであってもよい。
例えば、スマートバックミラーは、周辺機器にスクリーン接続する時に、当該周辺機器に要求することにより、周辺機器のチャンネル番号を取得することができ、当該チャンネルは、当該周辺機器を一意に識別することができる。
ステップ１０２において、識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値を決定する。
なお、いくつかの実施例において、上記の周辺機器に対応するターゲット遅延推定の上限値は、識別情報に基づいて上限値プロフィルを検索する方式によって決定することができる。
選択的に、スマートバックミラーは、周辺機器の識別情報が取得された後、識別情報に基づいて上限値プロフィルを検索し、当該上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断することができる。上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、当該識別情報に対応する遅延推定の上限値をターゲット遅延推定の上限値として決定し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として決定する。
ステップ１０３において、スマートバックミラーが周辺機器に音声信号を送信する際に、ターゲット遅延推定の上限値に基づいて遅延推定を行う。
選択的に、スマートバックミラーが周辺機器にスクリーン接続し、スマートバックミラーの音声データを当該周辺機器に送信する場合、スマートバックミラーは、周辺機器のオーディオ再生効果に影響を与えるように、伝送された音声データに対して遅延処理を行う必要がある。オーディオ再生遅延の問題を解決するために、スマートバックミラーに遅延推定アルゴリズムが取り込まれており、周辺機器に音声信号を送信することが検出された場合、識別情報に基づいて決定された当該周辺機器に適するターゲット遅延推定の上限値に基づいて遅延推定計算を行い、得られた遅延推定結果が当該周辺機器の性能により適応することができる。
ステップ１０４において、遅延推定結果に基づいて音声信号に対して遅延処理を行う。
選択的に、ターゲット遅延上限値に基づいて遅延推定を行い、遅延推定結果が得られた後、遅延推定結果に基づいてスマートバックミラーが周辺機器に伝送した音声信号に対して遅延処理を行う。本願の実施例に係るスマートバックミラー用の遅延推定方法によれば、遅延処理された音声信号をより正確かつ迅速にすることができる。
本願の実施例のスマートバックミラー用の遅延推定方法は、スマートバックミラーと周辺機器とのスクリーン接続時に、周辺機器の識別情報を取得し、当該識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値を決定し、スマートバックミラーが周辺機器に音声信号を送信する際に当該ターゲット遅延推定の上限値に基づいて遅延推定を行い、遅延推定結果に基づいてスマートバックミラーが周辺機器に送信した音声信号を処理し、異なる周辺機器に適切なターゲット遅延上限値をマッチングさせ、周辺機器にマッチングするターゲット遅延上限値に基づいて遅延推定を行い、遅延推定アルゴリズムにより得られる遅延推定結果がより正確であり、周辺機器のオーディオ再生効果を改善することを実現している。
なお、周辺機器の識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値をより迅速かつ正確に決定し、遅延推定結果がより正確であるために、本願のいくつかの実施例において、図２に示すように、識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値を決定する前記具体的な実現過程は、以下のステップを含むことができる。
ステップ２０１において、識別情報に基づいて、上限値プロフィルを検索する。
ここで、本願の実施例において、当該上限値プロフィルは、複数の識別情報と複数の遅延推定の上限値との対応関係を含む。
ステップ２０２において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断する。上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、ステップ２０３を実行し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、ステップ２０４を実行する。
ステップ２０３において、周辺機器の識別情報に対応する遅延推定の上限値をターゲット遅延推定の上限値として決定する。
本実施例において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、上限値プロフィルに当該周辺機器の遅延推定の上限値情報が存在することを示し、当該遅延推定の上限値は、当該周辺機器に適用し、遅延推定結果をより正確にし、予め設定された遅延推定の上限値を使用する必要がない。
ステップ２０４において、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として決定する。
本実施例において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、上限値プロフィルに当該周辺機器の遅延推定の上限値情報が存在しないことを示し、そのため、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として使用する。
なお、本願のいくつかの実施例において、識別情報に基づいて上限値プロフィルを検索する前に、上限値プロフィルを取得する必要があり、図３に示すように、識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値を決定する前記具体的な実現過程は、以下のステップを含むことができる。
ステップ３０１において、上限値プロフィルを取得する。
なお、当該上限値プロフィルは、複数の方法によって取得することができる。本願の一実施例において、スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、サーバがネットワーク要求に基づいて送信した上限値プロフィルを受信する。
ここで、サーバに上限値プロフィルを要求することは複数の実現形態がある。１つの実現形態は、スマートバックミラーが要求するたびに、サーバに最新の上限値プロフィルのダウンロードを要求することであり、他の実現形態は、当該ネットワーク要求にバージョン番号が含まれ、サーバが、当該ネットワーク要求を受信すると、当該ネットワーク要求内のバージョン番号をサーバ自身に記憶されている上限値プロフィルの最新のバージョン番号（または最高のバージョン番号、最大のバージョン番号）にマッチングさせ、スマートバックミラーに記憶されている上限値プロフィルが最新のバージョンであるか否かを判断し、当該ネットワーク要求内のバージョン番号がサーバ自身に記憶されている上限値プロフィルの最新のバージョン番号（または最高のバージョン番号、最大のバージョン番号）と一致しない場合、スマートバックミラーに記憶されているのが最新のバージョンではないと考えられ、この時、サーバから最新のバージョンを取得する必要があり、そうでなければ、サーバからダウンロードする必要がなく、スマートバックミラーに記憶されている最大のプロフィルを直接使用すればよい。
以上の実施例の他に、上限値プロフィルは、他の実施例によって実現することもできる。本願の他の実施例において、スマートバックミラーのローカル記憶モジュールから上限値プロフィルを取得し、ここで、上限値プロフィルは、スマートバックミラーが前回サーバに要求した上限値プロフィルである。ここで、上記の前回要求した上限値プロフィルは、前回スマートバックミラーと周辺機器とのスクリーン接続時に、サーバに上限値プロフィルの発行を要求するものであってもよく、または、上記の前回要求した上限値プロフィルは、スマートバックミラーが定期的にサーバに上限値プロフィルの発行を要求した時に、サーバによって返されたプロフィルであってもよい。
ステップ３０２において、識別情報に基づいて、上限値プロフィルを検索する。
本願の実施例において、ステップ３０２は、それぞれ本願の各実施例におけるいずれかの形態によって実現することができ、本願の実施例ではこれを限定しなく、詳しく説明しない。
ステップ３０３において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断する。上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、ステップ３０４を実行し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、ステップ３０５を実行する。
ステップ３０４において、周辺機器の識別情報に対応する遅延推定の上限値をターゲット遅延推定の上限値として決定する。
本願の実施例において、ステップ３０４は、それぞれ本願の各実施例におけるいずれかの形態によって実現することができ、本願の実施例ではこれを限定しなく、詳しく説明しない。
ステップ３０５において、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として決定する。
本願の実施例において、ステップ３０５は、それぞれ本願の各実施例におけるいずれかの形態によって実現することができ、本願の実施例ではこれを限定しなく、詳しく説明しない。
ユーザのミラーリングの使用体験をさらに向上させるために、いくつかの性能の悪い周辺機器に対して、本願のスマートバックミラー用の遅延推定方法を利用する場合、音声中断機能をオフにし、ＴＴＳ（Ｔｅｘｔ Ｔｏ Ｓｐｅｅｃｈ、テキストツースピーチ）放送中に、スマートバックミラーが周辺機器にミラーリングしたオーディオの複雑なシーンを再生することによる遅延値がアルゴリズム上限（例えば２５００ｍｓ）を超えたり、ジッタが激しくて収束できないことを回避することができる。選択的に、本願のいくつかの実施例において、図４に示すように、当該スマートバックミラー用の遅延推定方法は、以下のステップを含むことができる。
ステップ４０１において、スマートバックミラーと周辺機器とのスクリーン接続時に、周辺機器の識別情報を取得する。
本願の実施例において、ステップ４０１は、それぞれ本願の各実施例におけるいずれかの形態によって実現することができ、本願の実施例ではこれを限定しなく、詳しく説明しない。
ステップ４０２において、上限値プロフィルを取得する。
本願の実施例において、ステップ４０２は、それぞれ本願の各実施例におけるいずれかの形態によって実現することができ、本願の実施例ではこれを限定しなく、詳しく説明しない。
ステップ４０３において、識別情報に基づいて、上限値プロフィルを検索する。
ここで、本願の実施例において、当該上限値プロフィルは、複数の識別情報と複数の遅延推定の上限値との対応関係を含む。
ステップ４０４において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断する。上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、ステップ４０５を実行し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、ステップ４０６を実行する。
ステップ４０５において、周辺機器の識別情報に対応する遅延推定の上限値をターゲット遅延推定の上限値として決定する。
本実施例において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、上限値プロフィルに当該周辺機器の遅延推定の上限値情報が存在することを示し、当該遅延推定の上限値は、当該周辺機器に適用し、遅延推定結果をより正確にし、予め設定された遅延推定の上限値を使用する必要がない。
ステップ４０６において、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として決定する。
本実施例において、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、上限値プロフィルに当該周辺機器の遅延推定の上限値情報が存在しないことを示し、そのため、予め設定された遅延推定の上限値を周辺機器に対応するターゲット遅延推定の上限値として使用する。
ステップ４０７において、複数の識別情報と音声中断機能配置情報との対応関係を含む中断プロフィルを取得する。
なお、当該中断プロフィルは、複数の方法によって取得することができる。本願の一実施例において、スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、サーバがネットワーク要求に基づいて送信した中断プロフィルを受信する。
ここで、サーバに中断プロフィルを要求することは複数の実現形態がある。１つの実現形態は、スマートバックミラーが要求するたびに、サーバに最新の中断プロフィルのダウンロードを要求することであり、他の実現形態は、当該ネットワーク要求にバージョン番号が含まれ、サーバは、当該ネットワーク要求を受信したら、当該ネットワーク要求中のバージョン番号をサーバ自身に記憶されている中断プロフィルの最新のバージョン番号（または最高のバージョン番号、最大のバージョン番号）にマッチングさせ、スマートバックミラーに記憶されている中断プロフィルが最新のバージョンであるか否かを判断し、当該ネットワーク要求におけるバージョン番号がサーバ自身に記憶されている中断プロフィルの最新のバージョン番号（または最高のバージョン番号、最大のバージョン番号）と一致しない場合、スマートバックミラーに記憶されているのが最新のバージョンではないと考えられ、この時にサーバから最新のバージョンを取得する必要があり、そうでなければ、サーバからダウンロードする必要がなく、スマートバックミラーに記憶されている最大のプロフィルを直接使用すればよい。
以上の実施例の他に、中断プロフィルは、他の実施例によって実現することもできる。本願の他の実施例において、スマートバックミラーのローカル記憶モジュールから中断プロフィルを取得し、ここで、中断プロフィルは、スマートバックミラーが前回サーバに要求した中断プロフィルである。ここで、上記の前回要求した中断プロフィルは、前回スマートバックミラーと周辺機器とのスクリーン接続時に、サーバに中断プロフィルの発行を要求することであってもよく、または、上記の前回要求した中断プロフィルは、スマートバックミラーが定期的にサーバに中断プロフィルの発行を要求した時に、サーバによって返されたプロフィルであってもよい。
ステップ４０８において、識別情報および中断プロフィルに基づいて、周辺機器の音声中断機能をオフにする必要があるか否かを判断する。中断プロフィルに当該識別情報に対応する周辺機器が音声中断機能をオフにする必要があることが設けられている場合、ステップ４０９を実行し、中断プロフィルに当該識別情報に対応する周辺機器が音声中断機能をオフにする必要がないことが設けられている場合、ステップ４１０を実行する。
ステップ４０９において、周辺機器に制御情報を送信し、ここで、制御情報が、音声中断機能をオフにするように周辺機器に指示する。
本実施例において、中断プロフィルに当該識別情報に対応する周辺機器が音声中断機能をオフにする必要があることが設けられている場合、音声中断機能がスマートバックミラーによる遅延推定計算に影響を与え、遅延値がアルゴリズム上限（例えば２５００ｍｓ）を超えたり、ジッタが激しくて遅延推定アルゴリズムが収束できず、適切な遅延値を計算できないことを示している。そのため、当該周辺機器に制御情報を送信するには、当該周辺機器の中断機能をオフにし、遅延推定アルゴリズムの遅延推定結果をより正確にし、周辺機器の最終的なオーディオ再生効果を改善する。
ステップ４１０において、スマートバックミラーが周辺機器に音声信号を送信する際に、ターゲット遅延推定の上限値に基づいて遅延推定を行う。
本願の実施例において、音声中断機能をオフにする必要がある周辺機器が既に音声中断機能をオフにした後、スマートバックミラーが周辺機器に音声信号を送信する際に、ターゲット遅延推定の上限値に基づいて遅延推定を行うことができ、最終的な遅延推定結果に影響を与えず、当該周辺機器が音声中断機能を必要としない場合、音声中断機能が最終的な遅延推定結果に影響を与えないことを表明するため、スマートバックミラーが周辺機器に音声信号を送信する際に、ターゲット遅延推定の上限値に基づいて遅延推定を直接行うことができる。
ステップ４１１において、遅延推定結果に基づいて音声信号に対して遅延処理を行う。
選択的に、ターゲット遅延上限値に基づいて遅延推定を行い、遅延推定結果が得られた後、遅延推定結果に基づいてスマートバックミラーが周辺機器に伝送した音声信号を遅延する。本願の実施例に係るスマートバックミラー用の遅延推定方法によれば、遅延処理された音声信号をより正確かつ迅速にすることができる。
なお、本願の実施例における上限値プロフィルおよび中断プロフィルにおける配置情報は、経験に基づいて得られたものであってもよい。例えば、より多くの機器がアクセスし、より豊富な経験を持つようになると、経験に基づいてより合理的な異なる機器に対応するターゲット遅延推定の上限値を得ることができ、つまり、異なる周辺機器の性能に対応するターゲット遅延推定の上限値を柔軟に配置することにより、周辺機器の性能に影響を与えることなく、音声信号の処理効果を確保することができる。
本願の実施例のスマートバックミラー用の遅延推定方法は、スマートバックミラーと周辺機器とのスクリーン接続時に、周辺機器の識別情報を取得し、当該識別情報に基づいて周辺機器に対応するターゲット遅延推定の上限値を決定し、上限値プロフィルを取得し、識別情報に基づいて上限値プロフィルを検索し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、周辺機器の識別情報に対応する遅延推定の上限値をターゲット遅延推定の上限値として決定し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、予め設定された遅延推定の上限値をターゲット遅延推定の上限値として決定して、更に、中断プロフィルを取得し、中断プロフィルに当該識別情報に対応する周辺機器が音声中断機能をオフにする必要があることが表示された場合、当該周辺機器の音声中断機能をオフにし、スマートバックミラーが周辺機器に音声信号を送信する際に当該ターゲット遅延推定の上限値に基づいて遅延推定を行い、遅延推定結果に基づいてスマートバックミラーによって周辺機器に送信された音声信号を処理し、中断プロフィルに当該識別情報に対応する周辺機器が音声中断機能をオフにする必要がないことが表示された場合、スマートバックミラーが周辺機器に音声信号を送信する際に当該ターゲット遅延推定の上限値に基づいて遅延推定を行い、遅延推定結果に基づいてスマートバックミラーによって周辺機器に送信された音声信号を処理する。本願の実施例のスマートバックミラー用の遅延推定方法は、異なる周辺機器に適切な遅延推定の上限値をマッチングさせ、異なる周辺機器が音声中断機能をオフにする必要があるか否かを判断することが実現されており、これにより、性能の悪い周辺機器に対して、ＴＴＳ放送中に、スマートバックミラーが周辺機器にミラーリングしたオーディオの複雑なシーンを再生することによる遅延値がアルゴリズム上限（例えば２５００ｍｓ）を超えたり、ジッタが激しくて収束できないことを回避することができる。
図５は、本願の実施例によって提供されるスマートバックミラー用の遅延推定装置の構成ブロック図である。図５に示すように、当該スマートバックミラーの遅延推定装置は、第１の取得モジュール５０１、決定モジュール５０２、推定モジュール５０３および処理モジュール５０４を含むことができる。
具体的には、第１の取得モジュール５０１は、前記スマートバックミラーと周辺機器とのスクリーン接続時に、前記周辺機器の識別情報を取得するように構成される。
なお、本願の実施例の識別情報は、周辺機器のチャンネル番号であってもよく、当該機器を一意に識別することができる他の識別子であってもよい。
なお、本願の実施例において、周辺機器は、車載システムである。
決定モジュール５０２は、前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するように構成される。
本願のいくつかの実施例において、決定モジュール５０２は、具体的には、前記識別情報に基づいて、複数の識別情報と複数の遅延推定の上限値との対応関係を含む上限値プロフィルを検索し、前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在する場合、前記周辺機器の識別情報に対応する遅延推定の上限値を前記ターゲット遅延推定の上限値として決定し、上限値プロフィルに周辺機器の識別情報に対応する遅延推定の上限値が存在しない場合、予め設定された遅延推定の上限値を前記周辺機器に対応するターゲット遅延推定の上限値として決定するように構成される。
推定モジュール５０３は、前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延推定の上限値に基づいて遅延推定を行うように構成される。
処理モジュール５０４は、遅延推定結果に基づいて前記音声信号に対して遅延処理を行うように構成される。
選択的に、本願のいくつかの実施例において、図６に示すように、当該スマートバックミラー用の遅延推定装置は、第２の取得モジュール６０５をさらに含むことができる。ここで、第２の取得モジュール６０５は、具体的に、前記スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、前記サーバが前記ネットワーク要求に基づいて送信した前記中断プロフィルを受信し、あるいは、前記スマートバックミラーのローカル記憶モジュールから前記中断プロフィルを取得するように構成される。ここで、図６における６０１～６０４と図５における５０１～５０４は同じ機能および構造を有する。
選択的に、本願のいくつかの実施例において、図７に示すように、当該スマートバックミラー用の遅延推定装置は、第３の取得モジュール７０６、判断モジュール７０７および送信モジュール７０８を含むこともできる。ここで、第３の取得モジュール７０６は、具体的には、複数の識別情報と音声中断機能配置情報との対応関係を含む中断プロフィルを取得するように構成される。
判断モジュール７０７は、具体的には、前記識別情報と前記中断プロフィルとに基づいて、前記周辺機器の音声中断機能をオフにする必要があるか否かを判断するように構成される。
送信モジュール７０８は、具体的には、前記周辺機器の音声中断機能をオフにする必要があることに応答し、前記周辺機器に制御情報を送信するように構成され、ここで、前記制御情報が、音声中断機能をオフにするように前記周辺機器に指示する。ここで、図７における７０１～７０５と図６における６０１～６０５は同じ機能および構造を有する。
上記実施例における装置について、各モジュールが操作を実行する具体的な方式は、当該方法に係わる実施例において詳しく説明したが、ここでは詳しく説明しない。
本願の実施例のスマートバックミラー用の遅延推定装置によれば、前記スマートバックミラーと周辺機器とのスクリーン接続時に、第１の取得モジュールによって前記周辺機器の識別情報を取得し、決定モジュールは、前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定し、推定モジュールは、前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延上限値に基づいて遅延推定を行い、処理モジュールは、遅延推定結果に基づいて前記音声信号に対して遅延処理を行う。本願の実施例は、異なる周辺機器に適切なターゲット遅延上限値をマッチングさせ、周辺機器にマッチングするターゲット遅延上限値に基づいて遅延推定を行い、遅延推定アルゴリズムにより得られる遅延推定結果がより正確であり、周辺機器のオーディオ再生効果を改善することを実現している。
本願の実施例によれば、本願は、電子機器、読み取り可能な記憶媒体およびコンピュータプログラムをさらに提供する。
図８に示すように、本願の実施例に係るスマートバックミラーの遅延推定方法を実現するための電子機器のブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピュータ、および他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことを目的とする。電子機器は、パーソナルデジタルプロセッサ、携帯電話、スマートフォン、ウェアラブルデバイス、他の同様のコンピューティングデバイスなどの様々な形態のモバイルデバイスを表すこともできる。本明細書に示されるコンポーネント、それらの接続と関係、およびそれらの機能は単なる例であり、本明細書の説明および／または要求される本出願の実現を制限するものではない。
図８に示すように、当該電子機器は、１つまたは複数のプロセッサ８０１と、メモリ８０２と、高速インタフェースおよび低速インタフェースを含む各コンポーネントを接続するためのインタフェースとを含む。各部品は、異なるバスによって互いに接続され、共通のマザーボードに取り付けられたり、必要に応じて他の方式で取り付けられたりすることができる。プロセッサは、メモリ内またはメモリ上に記憶されて外部入力／出力装置（例えば、インタフェースに結合された表示装置）にＧＵＩのグラフィック情報を表示する指令を含む、電子機器内で実行される指令を処理することができる。他の実施形態において、必要に応じて、複数のプロセッサおよび／または複数のバスを複数のメモリとともに使用することができる。同様に、複数の電子機器を接続することができ、各機器は、必要な操作の一部（例えば、サーバアレイ、ブレードサーバのセット、マルチプロセッサシステムなど）を提供する。図８では１つのプロセッサ８０１を例とする。
メモリ８０２は、本願によって提供される非一時的なコンピュータ読み取り可能な記憶媒体である。ここで、前記メモリには、少なくとも１つのプロセッサによって実行可能な指令が記憶され、前記少なくとも１つのプロセッサに本願によって提供されるスマートバックミラー用の遅延推定方法を実行させる。本願の非一時的なコンピュータ読み取り可能な記憶媒体にコンピュータ指令が記憶され、当該コンピュータ指令は、コンピュータに本願によって提供されるスマートバックミラー用の遅延推定方法を実行させる。
メモリ８０２は、非一時的なコンピュータ読み取り可能な記憶媒体として、非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能なプログラムおよびモジュール、例えば、本願の実施例におけるスマートバックミラー用の遅延推定方法に対応するプログラム指令／モジュール（例えば、図７に示す第１の取得モジュール７０１、決定モジュール７０２、推定モジュール７０３、処理モジュール７０４、第２の取得モジュール７０５、第３の取得モジュール７０６、判断モジュール７０７および送信モジュール７０８）を記憶するために使用することができる。プロセッサ８０１は、メモリ８０２に記憶されている非一時的なソフトウェアプログラム、指令およびモジュールを実行することにより、サーバの様々な機能アプリケーションおよびデータ処理を実行し、すなわち、上記の方法の実施例におけるスマートバックミラー用の遅延推定方法を実現する。
メモリ８０２は、記憶プログラム領域および記憶データ領域を含むことができ、ここで、記憶プログラム領域は、オペレーティングシステム、少なくとも１つの機能に必要なアプリケーションプログラムを記憶することができ、記憶データ領域は、スマートバックミラー用の遅延推定電子機器の使用に基づいて作成されるデータなどを記憶することができる。また、メモリ８０２は、高速ランダムアクセスメモリを含むことができ、少なくとも１つの磁気ディスク記憶装置、フラッシュ記憶装置、または他の非一時的な固体記憶装置などの非一時的なメモリをさらに含むことができる。いくつかの実施例において、メモリ８０２は、選択的に、プロセッサ８０１に対して遠隔的に設定されるメモリを含むことができ、これらの遠隔メモリは、ネットワークを介してスマートバックミラー用の遅延推定電子機器に接続されてもよい。上記ネットワークの実施例は、インターネット、企業イントラネット、ローカルエリアネットワーク、移動通信ネットワークおよびそれらの組み合わせを含むが、これらに限定されない。
スマートバックミラーの遅延推定方法のための電子機器は、入力装置８０３および出力装置８０４をさらに含むことができる。プロセッサ８０１、メモリ８０２、入力装置８０３および出力装置８０４は、バスまたは他の方式によって接続されてもよいが、図８ではバスによって接続されることを例とする。
入力装置８０３は、入力された数字または文字情報を受信し、およびタッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、指示レバー、１つまたは複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置のような、スマートバックミラー用の遅延推定電子機器のユーザ設定および機能制御に関するキー信号入力を生成することができる。出力装置８０４は、表示装置、補助照明装置（例えば、ＬＥＤ）および触覚フィードバック装置（例えば、振動モータ）などを含むことができる。当該表示装置は、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイおよびプラズマディスプレイを含むことができるが、これらに限定されない。いくつかの実施形態において、表示装置は、タッチスクリーンであってもよい。
本明細書に記載されたシステムおよび技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、特定用途向けＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、および／またはそれらの組み合わせにおいて実現することができる。これらの様々な実施形態は、１つまたは複数のコンピュータプログラムに実施されることを含むことができ、すなわち、本願は、コンピュータプログラムをさらに提出し、当該コンピュータプログラムがプロセッサによって実行される場合、上記の実施例に説明されるスマートバックミラー用の遅延推定方法が実現され、当該１つまたは複数のコンピュータプログラムは、少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステムにおいて実行および／または解釈することができ、当該プログラマブルプロセッサは、専用または汎用のプログラマブルプロセッサであってもよく、記憶システム、少なくとも１つの入力装置、少なくとも１つの出力装置からデータおよび指令を受信し、データおよび指令を当該記憶システム、当該少なくとも１つの入力装置、および当該少なくとも１つの出力装置に伝送することができる。
これらのコンピューティングプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、またはコードとも呼ばれる）は、プログラマブルプロセッサの機械指令を含み、高度なプロセスおよび／またはオブジェクト指向プログラミング言語、および／またはアセンブリ／機械言語によってこれらのコンピューティングプログラムを実現することができる。本明細書で使用されるように、用語「機械読み取り可能な媒体」および「コンピュータ読み取り可能な媒体」とは、機械指令および／またはデータをプログラマブルプロセッサに提供するための任意のコンピュータプログラム製品、機器および／または装置（例えば、磁気ディスク、光ディスク、メモリ、プログラマブル論理装置（ＰＬＤ））であり、機械読み取り可能な信号である機械指令を受信する機械読み取り可能な媒体を含む。用語「機械読み取り可能な信号」とは、機械指令および／またはデータをプログラマブルプロセッサに提供するための任意の信号である。
ユーザとのインタラクションを提供するために、コンピュータ上で本明細書に記載されているシステムおよび技術を実施することができ、当該コンピュータは、ユーザに情報を表示するためのディスプレイ装置（例えば、ＣＲＴ（陰極線管）またはＬＣＤ（液晶ディスプレイ）モニタ）と、キーボードおよびポインティングデバイス（例えば、マウスまたはトラックボール）とを有し、ユーザは、当該キーボードおよび当該ポインティングデバイスによって入力をコンピュータに提供することができる。他の種類の装置も、ユーザとのインタラクションを提供することができ、例えば、ユーザに提供されるフィードバックは、任意の形式のセンシングフィードバック（例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック）であってもよく、任意の形式（音響入力と、音声入力と、触覚入力とを含む）でユーザからの入力を受信することができる。
本明細書に記載されているシステムおよび技術は、バックエンドユニットを含むコンピューティングシステム（例えば、データサーバとする）、またはミドルウェアユニットを含むコンピューティングシステム（例えば、アプリケーションサーバ）、またはフロントエンドユニットを含むコンピューティングシステム（例えば、グラフィカルユーザインタフェースまたはウェブブラウザを有するユーザコンピュータであり、ユーザは、当該グラフィカルユーザインタフェースまたは当該ウェブブラウザによって本明細書に記載されているシステムおよび技術の実施方式とインタラクションする）、またはこのようなバックエンドユニットと、ミドルウェアユニットと、フロントエンドユニットの任意の組み合わせを含むコンピューティングシステムで実施することができる。任意の形式または媒体のデジタルデータ通信（例えば、通信ネットワーク）によってシステムのコンポーネントを相互に接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）と、ワイドエリアネットワーク（ＷＡＮ）と、インターネットと、ブロックチェーンネットワークとを含む。
コンピュータシステムは、クライアントとサーバとを含むことができる。クライアントとサーバは、一般に、互いに離れており、通常に通信ネットワークを介してインタラクションする。対応するコンピュータ上で実行され、且つ互いにクライアント－サーバ関係を有するコンピュータプログラムによって、クライアントとサーバとの関係が生成される。サーバは、クラウドコンピューティングサーバまたはクラウドホストとも呼ばれるクラウドサーバであってもよく、従来の物理ホストおよびＶＰＳサービス（「Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｓｅｒｖｅｒ」、または「ＶＰＳ」と略称する）における、管理難度が大きく、ビジネスの拡張性が低いという欠点を解決するクラウドコンピューティングサービスシステムのホスト製品の１つである。サーバは、分散システムのサーバ、またはブロックチェーンを組み合わせたサーバであってもよい。
なお、以上に示す様々な形式のフローを使用して、ステップを並べ替え、追加、または削除することができる。例えば、本開示に記載されている各ステップは、並列に実行されてもよいし、順次的に実行されてもよいし、異なる順序で実行されてもよいが、本開示で開示されている技術案が所望の結果を実現することができれば、本明細書では限定しない。
上記の具体的な実施形態は、本開示の保護範囲を制限するものではない。当業者は、設計要件と他の要因に応じて、様々な修正、組み合わせ、サブコンビネーション、および代替を行うことができる。本開示の精神と原則内で行われる任意の修正、同等の置換、および改善などは、いずれも本開示の保護範囲内に含まれるべきである。

Claims (15)

  1. スマートバックミラー用の遅延推定方法であって、
    前記スマートバックミラーと周辺機器とのスクリーン接続時に、前記周辺機器の識別情報を取得するステップと、
    前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するステップであって、前記ターゲット遅延推定の上限値は、前記識別情報に基づいて上限値プロフィルを検索する方式によって決定されるステップと、
    前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延推定の上限値に基づいて遅延推定を行うステップと、
    遅延推定結果に基づいて前記音声信号に対して遅延処理を行うステップと、を含む、
    ことを特徴とするスマートバックミラー用の遅延推定方法。
  2. 前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するステップは、
    前記識別情報に基づいて、上限値プロフィルを検索するステップであって、前記上限値プロフィルには、複数の識別情報と複数の遅延推定の上限値との対応関係が含まれているステップと、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断するステップと、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在することに応答し、前記周辺機器の識別情報に対応する遅延推定の上限値を前記ターゲット遅延推定の上限値として決定するステップと、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在しないことに応答し、予め設定された遅延推定の上限値を前記周辺機器に対応するターゲット遅延推定の上限値として決定するステップと、を含む、
    ことを特徴とする請求項１に記載の方法。
  3. 前記識別情報に基づいて、上限値プロフィルを検索するステップの前に、前記方法は、
    前記スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、前記サーバが前記ネットワーク要求に基づいて送信した前記上限値プロフィルを受信するステップ、あるいは、
    前記スマートバックミラーのローカル記憶モジュールから前記上限値プロフィルを取得するステップであって、前記上限値プロフィルは、前記スマートバックミラーが前回前記サーバに要求した上限値プロフィルであるステップをさらに含む、
    ことを特徴とする請求項２に記載の方法。
  4. 複数の識別情報と音声中断機能配置情報との対応関係を含む中断プロフィルを取得するステップと、
    前記識別情報と前記中断プロフィルとに基づいて、前記周辺機器の音声中断機能をオフにする必要があるか否かを判断するステップと、
    前記周辺機器の音声中断機能をオフにする必要があることに応答し、前記周辺機器に制御情報を送信するステップであって、前記制御情報が、音声中断機能をオフにするように前記周辺機器に指示するステップと、をさらに含む、
    ことを特徴とする請求項１に記載の方法。
  5. 中断プロフィルを取得するステップは、
    前記スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、前記サーバが前記ネットワーク要求に基づいて送信した前記中断プロフィルを受信するステップ、あるいは、
    前記スマートバックミラーのローカル記憶モジュールから前記中断プロフィルを取得するステップを含む、
    ことを特徴とする請求項４に記載の方法。
  6. 前記周辺機器は、車載システムである、
    ことを特徴とする請求項１～５のいずれかに記載の方法。
  7. スマートバックミラー用の遅延推定装置であって、
    前記スマートバックミラーと周辺機器とのスクリーン接続時に、前記周辺機器の識別情報を取得するように構成される第１の取得モジュールと、
    前記識別情報に基づいて前記周辺機器に対応するターゲット遅延推定の上限値を決定するように構成される決定モジュールであって、前記ターゲット遅延推定の上限値は、前記識別情報に基づいて上限値プロフィルを検索する方式によって決定される決定モジュールと、
    前記スマートバックミラーが前記周辺機器に音声信号を送信する際に、前記ターゲット遅延推定の上限値に基づいて遅延推定を行うように構成される推定モジュールと、
    遅延推定結果に基づいて前記音声信号に対して遅延処理を行うように構成される処理モジュールと、を含む、
    ことを特徴とするスマートバックミラー用の遅延推定装置。
  8. 前記決定モジュールは、具体的に、
    前記識別情報に基づいて、上限値プロフィルを検索し、ここで、前記上限値プロフィルには、複数の識別情報と複数の遅延推定の上限値との対応関係が含まれており、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在するか否かを判断し、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在することに応答し、前記周辺機器の識別情報に対応する遅延推定の上限値を前記ターゲット遅延推定の上限値として決定し、
    前記上限値プロフィルに前記周辺機器の識別情報に対応する遅延推定の上限値が存在しないことに応答し、予め設定された遅延推定の上限値を前記周辺機器に対応するターゲット遅延推定の上限値として決定するように構成される、
    ことを特徴とする請求項７に記載の装置。
  9. 前記スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、前記サーバが前記ネットワーク要求に基づいて送信した前記上限値プロフィルを受信し、あるいは、前記スマートバックミラーのローカル記憶モジュールから前記上限値プロフィルを取得するように構成される第２の取得モジュールであって、前記上限値プロフィルは、前記スマートバックミラーが前回前記サーバに要求した上限値プロフィルである第２の取得モジュールをさらに含む、
    ことを特徴とする請求項８に記載の装置。
  10. 複数の識別情報と音声中断機能配置情報との対応関係を含む中断プロフィルを取得するように構成される第３の取得モジュールと、
    前記識別情報と前記中断プロフィルとに基づいて、前記周辺機器の音声中断機能をオフにする必要があるか否かを判断するように構成される判断モジュールと、
    前記周辺機器の音声中断機能をオフにする必要があることに応答し、前記周辺機器に制御情報を送信するように構成される送信モジュールであって、前記制御情報が、音声中断機能をオフにするように前記周辺機器に指示する送信モジュールと、をさらに含む、
    ことを特徴とする請求項７に記載の装置。
  11. 前記第３の取得モジュールは、具体的には、
    前記スマートバックミラーと周辺機器とのスクリーン接続時に、サーバにネットワーク要求を送信し、前記サーバが前記ネットワーク要求に基づいて送信した前記中断プロフィルを受信し、あるいは、
    前記スマートバックミラーのローカル記憶モジュールから前記中断プロフィルを取得するように構成される、
    ことを特徴とする請求項１０に記載の装置。
  12. 前記周辺機器は、車載システムである、
    ことを特徴とする請求項７～１１のいずれかに記載の装置。
  13. 電子機器であって、
    少なくとも１つのプロセッサと、
    前記少なくとも１つのプロセッサに通信可能に接続されるメモリと、を含み、
    前記メモリには、前記少なくとも１つのプロセッサによって実行可能な指令が記憶されており、前記指令は、前記少なくとも１つのプロセッサによって実行される場合、前記少なくとも１つのプロセッサが請求項１～５のいずれかに記載の方法を実行できる、
    ことを特徴とする電子機器。
  14. コンピュータ指令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、前記コンピュータ指令は、前記コンピュータに請求項１～５のいずれかに記載の方法を実行させる、
    ことを特徴とする非一時的なコンピュータ読み取り可能な記憶媒体。
  15. コンピュータプログラムであって、
    前記コンピュータプログラムがプロセッサによって実行される場合、請求項１～５のいずれかに記載の方法が実現される、
    ことを特徴とするコンピュータプログラム。
JP2022062493A 2021-05-26 2022-04-04 スマートバックミラー用の遅延推定方法、装置および電子機器 Active JP7420857B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110580241.8A CN113364840B (zh) 2021-05-26 2021-05-26 用于智能后视镜的时延估计方法、装置和电子设备
CN202110580241.8 2021-05-26

Publications (2)

Publication Number Publication Date
JP2022091949A JP2022091949A (ja) 2022-06-21
JP7420857B2 true JP7420857B2 (ja) 2024-01-23

Family

ID=77527762

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022062493A Active JP7420857B2 (ja) 2021-05-26 2022-04-04 スマートバックミラー用の遅延推定方法、装置および電子機器

Country Status (5)

Country Link
US (1) US20220284902A1 (ja)
EP (1) EP4056424B1 (ja)
JP (1) JP7420857B2 (ja)
KR (1) KR20220078537A (ja)
CN (2) CN115941728A (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180222391A1 (en) 2017-02-03 2018-08-09 Da Xiang CHEN Multi-function, Network Linked Smart Rearview Mirror
CN111541919A (zh) 2020-05-13 2020-08-14 北京百度网讯科技有限公司 视频帧传输方法、装置、电子设备及可读存储介质
JP2021149086A (ja) 2020-03-17 2021-09-27 北京百度網訊科技有限公司 音声認識方法、音声認識装置、電子機器、コンピュータ可読記憶媒体及びプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06237443A (ja) * 1991-10-11 1994-08-23 Fujitsu Ltd 音声・動画像通信システム
JPH11308271A (ja) * 1998-04-21 1999-11-05 Canon Inc データ通信装置及び受信装置及び制御方法及び記憶媒体及びデータ通信システム
US10171333B2 (en) * 2015-02-10 2019-01-01 International Business Machines Corporation Determining connection feasibility and selection between different connection types
US10645164B1 (en) * 2015-10-27 2020-05-05 Pavilion Data Systems, Inc. Consistent latency for solid state drives
CN106933495B (zh) * 2015-12-30 2019-07-23 华为技术有限公司 一种数据读取方法、raid控制器及存储设备
CN107734378B (zh) * 2017-10-31 2019-11-01 维沃移动通信有限公司 一种音视频同步方法、装置及移动终端
CN111645521B (zh) * 2020-05-29 2022-01-18 阿波罗智联(北京)科技有限公司 用于智能后视镜的控制方法、装置、电子设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180222391A1 (en) 2017-02-03 2018-08-09 Da Xiang CHEN Multi-function, Network Linked Smart Rearview Mirror
JP2021149086A (ja) 2020-03-17 2021-09-27 北京百度網訊科技有限公司 音声認識方法、音声認識装置、電子機器、コンピュータ可読記憶媒体及びプログラム
CN111541919A (zh) 2020-05-13 2020-08-14 北京百度网讯科技有限公司 视频帧传输方法、装置、电子设备及可读存储介质
JP2021083092A (ja) 2020-05-13 2021-05-27 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッドＢｅｉｊｉｎｇ Ｂａｉｄｕ Ｎｅｔｃｏｍ Ｓｃｉｅｎｃｅ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ． 映像フレームの伝送方法、装置、電子機器及び可読記憶媒体

Also Published As

Publication number Publication date
JP2022091949A (ja) 2022-06-21
CN113364840B (zh) 2022-12-23
US20220284902A1 (en) 2022-09-08
EP4056424A1 (en) 2022-09-14
EP4056424B1 (en) 2023-08-16
CN115941728A (zh) 2023-04-07
KR20220078537A (ko) 2022-06-10
CN113364840A (zh) 2021-09-07

Similar Documents

Publication Publication Date Title
JP7266635B2 (ja) 画面切り替え表示方法、装置、スマートバックミラー及び読み取り可能な記憶媒体
KR102378380B1 (ko) 차량의 시간 동기화 방법, 장치, 기기 및 저장매체
KR20210040307A (ko) 이미지 검색 방법, 장치, 기기 및 매체
US10887210B2 (en) Online techniques for parameter mean and variance estimation in dynamic regression models
KR102489170B1 (ko) 음성 방송 방법, 장치, 전자 기기 및 저장매체
CN111541919B (zh) 视频帧传输方法、装置、电子设备及可读存储介质
CN110489440B (zh) 数据查询方法和装置
JP2022516593A (ja) セッション推奨方法、装置及び電子機器
JP7381518B2 (ja) アプリケーションプログラムの操作ガイダンス方法、装置、機器及び読み取り可能な記憶媒体
US11831735B2 (en) Method and device for processing mini program data
CN111259060A (zh) 数据查询的方法及装置
KR20210038278A (ko) 음성 제어 방법, 장치, 전자 기기 및 판독 가능 저장 매체
JP7420857B2 (ja) スマートバックミラー用の遅延推定方法、装置および電子機器
US10171622B2 (en) Dynamic content reordering for delivery to mobile devices
KR102436302B1 (ko) 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체
JP7162040B2 (ja) エコー遅延検出方法、装置、プログラム及び非一時的コンピュータ読み取り可能な記憶媒体
JP7372377B2 (ja) 道路情報確定方法及び装置、電子機器、記憶媒体並びにコンピュータプログラム
CN114071111B (zh) 视频播放方法和装置
CN112925482B (zh) 数据处理方法、装置、系统、电子设备和计算机存储介质
CN114742226A (zh) 基于smac算法的调参方法和装置
CN117597953A (zh) 支持多协议栈的蓝牙通信方法、装置、电子设备及介质
CN111629227A (zh) 视频转换方法、装置、系统、电子设备及存储介质
KR20210038277A (ko) 음성 제어 방법, 장치, 전자 기기 및 판독 가능 저장 매체

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220404

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230927

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240111

R150 Certificate of patent or registration of utility model

Ref document number: 7420857

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150