JP2021110924A - 電子機器およびオンスクリーンディスプレイインターフェースの表示方法 - Google Patents

電子機器およびオンスクリーンディスプレイインターフェースの表示方法 Download PDF

Info

Publication number
JP2021110924A
JP2021110924A JP2020176121A JP2020176121A JP2021110924A JP 2021110924 A JP2021110924 A JP 2021110924A JP 2020176121 A JP2020176121 A JP 2020176121A JP 2020176121 A JP2020176121 A JP 2020176121A JP 2021110924 A JP2021110924 A JP 2021110924A
Authority
JP
Japan
Prior art keywords
display
host
osd
image
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020176121A
Other languages
English (en)
Inventor
佳恩 劉
Chia-En Liu
佳恩 劉
成龍 林
Cheng-Lung Lin
成龍 林
世濱 張
Shih-Pin Chang
世濱 張
芝成 黄
Chih-Cheng Huang
芝成 黄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Giga Byte Technology Co Ltd
Original Assignee
Giga Byte Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Giga Byte Technology Co Ltd filed Critical Giga Byte Technology Co Ltd
Publication of JP2021110924A publication Critical patent/JP2021110924A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/72Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for transmitting results of analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】オンスクリーンディスプレイ(OSD)インターフェースの電子機器および表示方法を提供する。【解決手段】表示モジュール、表示モジュールの表示を制御するように構成された表示コントローラ、および表示コントローラに電気的に接続されたホストを含み、ホストは、アプリケーションを実行して表示画像をレンダリングし、ホストと表示コントローラ間の画像伝送チャネルを介して表示画像を表示コントローラに送信し、ホストは、ホストで実行されているアプリケーションによって生成された音声信号を収集し、音声信号を解析して、音声信号に対応する音声情報を取得し、ホストは、音声情報を表示コントローラに送信し、表示コントローラは、音声情報に対応するオンスクリーンディスプレイ(OSD)パターンを生成し、表示画像の特定の位置にOSDパターンを上書きして出力画像を生成し、出力画像を表示モジュールに送信して表示する電子機器。【選択図】図1

Description

本出願は、2019年12月31日に出願された台湾特許出願番号第108148483号についての優先権を主張するものであり、これらの全ては引用によって本願に援用される。
本発明は、表示装置に関するものであり、特に、電子機器およびオンスクリーンディスプレイ(OSD)インターフェースの表示方法に関するものである。
現在市場に出ている表示装置(例えば、テレビやコンピュータのモニター)は、ほとんどがオンスクリーンディスプレイ(OSD)機能を備えている。このようなOSD機能は、例えば、表示装置上に画質を調整するためのOSDオプションを表示することができ、且つ表示されたOSDオプションを他の画面上に重ねて、ユーザーがOSDオプションを即座に調整できるようにする。従来の表示装置では、ユーザーは、物理的なボタンを介してOSDオプションの画面を呼び出すことができ、OSDオプションは、輝度、コントラスト、色、色温度などを含むことができる。しかしながら、従来の表示装置がホストに接続されているとき、表示装置は通常、ホストから画像信号を受信して、それらを表示することしかできない。即ち、ホストによって実行されるアプリケーションは、表示装置のOSD機能を制御することも、OSD機能と対話することもできない。
電子機器およびオンスクリーンディスプレイ(OSD)インターフェースの表示方法を提供する。
詳細な説明は、添付の図面と併せて以下の実施形態に説明される。
例示的な実施形態では、電子機器が提供される。電子機器は、表示モジュール、表示コントローラ、およびホストを含む。表示コントローラは、表示モジュールの表示を制御するように構成される。ホストは表示コントローラに電気的に接続される。ホストは、アプリケーションを実行して表示画像をレンダリングし、ホストと表示コントローラ間の画像伝送チャネルを介して表示画像を表示コントローラに送信する。ホストは、ホストで実行されているアプリケーションによって生成された音声信号を収集し、音声信号を解析して、音声信号に対応する音声情報を取得する。ホストは、音声情報を表示コントローラに送信する。表示画像の特定の位置にOSDパターンを上書きすることにより、表示装置のOSDインターフェースを用いて、ホストからの音声信号の方位、距離、および強度を表示する。表示コントローラは、音声情報に対応するオンスクリーンディスプレイ(OSD)パターンを生成し、表示画像の特定の位置にOSDパターンを上書きして出力画像を生成し、出力画像を表示モジュールに送信して表示する。いくつかの実施形態では、音声情報は、音声信号の方位、距離、および強度を含む。
いくつかの実施形態では、OSDパターンは、表示モジュールのOSDインターフェースのレーダーインターフェース内に配置される。いくつかの他の実施形態では、OSDパターンは、表示モジュールの内縁の周りに配置される。
いくつかの実施形態では、ホストによって実行されるオペレーティングシステムは、ホストによって実行されるアプリケーションによって生成された音声信号を収集するとともに、音声信号を解析して、音声信号に対応する音声情報を取得するように構成されたダイナミックリンクライブラリを含む。
いくつかの実施形態では、ホストは、収音プログラムと報知プログラムを実行し、収音プログラムは、ホストによって実行されるアプリケーションによって生成された音声信号を収集するとともに、音声信号を解析して、音声信号に対応する音声情報を取得するように構成され、報知プログラムは、ホストと表示コントローラ間のデータ伝送チャネルを介して、収音プログラムによって生成された音声情報を表示コントローラに送信する。
いくつかの実施形態では、表示コントローラは、音声信号の方位、距離、および強度を、レーダーインターフェース内の音声定位点の対応する座標および大きさに変換し、電子機器の記憶ユニットに記憶されたファームウェアから音声定位点のOSDパターンを読み取り、表示画像のレーダーインターフェースの対応する座標の位置にOSDパターンを上書きする。
もう1つの例示的な実施形態では、電子機器用のオンスクリーンディスプレイ(OSD)インターフェースの表示方法が提供される。電子機器は、表示モジュール、表示コントローラ、およびホストを含む。表示方法は以下の、ホストを用いてアプリケーションを実行して表示画像をレンダリングし、ホストと表示コントローラ間の画像伝送チャネルを介して表示画像を表示コントローラに送信するステップ、ホストを用いて、ホストで実行されているアプリケーションによって生成された音声信号を収集し、音声信号を解析して、音声信号に対応する音声情報を取得するステップ、ホストを用いて、音声情報を表示コントローラに送信するステップ、および表示コントローラを用いて、音声情報に対応するオンスクリーンディスプレイ(OSD)パターンを生成し、表示画像の特定の位置にOSDパターンを上書きして出力画像を生成し、出力画像を表示モジュールに送信して表示するステップを含む。
本発明は、添付の図面を参照しながら以下の詳細な説明及び例を読むことで、より完全に理解することができる。
図1は、本発明の実施形態による電子機器のブロック図である。 図2Aは、本発明の実施形態による、電子機器のホストと表示装置間の接続図である。 図2Bは、本発明の実施形態による、電子機器のホストと表示装置間の接続図である。 図3Aは、本発明の実施形態によるOSDインターフェースの図である。 図3Bは、本発明のもう1つの実施形態によるOSDインターフェースの図である。 図4は、本発明の実施形態によるOSDインターフェースの表示方法のフローチャートである。
上述の説明では、本発明を実施するベストモードを開示している。この説明は、本発明の一般原理を例示する目的のものであり、本発明を限定するものではない。本発明の範囲は、添付の特許請求の範囲を参考にして決定される。
図1は、本発明の実施形態による電子機器のブロック図である。電子機器10は、例えば、表示装置を備えたパーソナルコンピュータ、ラップトップ、またはサーバであることができる。図1に示されるように、電子機器10は、ホスト100および表示装置200を含み、ホスト100は、表示装置200と信号接続している。例えば、ホスト100は、処理ユニット110、グラフィック処理ユニット(GPU)120、メモリユニット130、記憶装置140、1つ以上の伝送インターフェース150、および1つ以上の周辺機器160を含むことができる。処理ユニット110、グラフィック処理ユニット120、メモリユニット130、記憶装置140、伝送インターフェース150、および周辺機器160は、システムバス111を介して互いに結合されることができる。処理ユニット110は、例えば、中央処理装置(CPU)、汎用プロセッサなどであることができるが、本発明はこれに限定されない。グラフィック処理ユニット120は、例えば、ビデオアダプタ上のグラフィック処理ユニットであり、または処理ユニット110に統合されることができる。グラフィック処理ユニット120は、処理ユニット110によって実行されるアプリケーションのグラフィック処理を実行して、1つ以上の画像を含む画像信号を生成することができ、伝送インターフェース150のうちの1つ(例えば、HDMIインターフェースまたはDisplayPortインターフェース)を介して画像信号を表示装置200に送信する。
メモリユニット130は、スタティックランダムアクセスメモリ(SRAM)またはダイナミックランダムアクセスメモリ(DRAM)などのランダムアクセスメモリであることができるが、本発明はそれらに限定されない。記憶装置140は、ハードディスクドライブ、ソリッドステートディスク(SSD)、フラッシュメモリ、または読み取り専用メモリ(ROM)などの不揮発性メモリであることができるが、本発明はそれらに限定されない。
伝送インターフェース150は、有線伝送インターフェースおよび/または無線伝送インターフェースを含むことができる。有線伝送インターフェースは、高解像度マルチメディアインターフェース(HDMI)、DisplayPort(DP)インターフェース、埋め込みDisplayPort(eDP)インターフェース、ユニバーサルシリアルバス(USB)インターフェース、USB Type−Cインターフェース、Thunderboltインターフェース、デジタルビデオインターフェース(DVI)、ビデオグラフィックスアレイ(VGA)インターフェース、汎用入出力(GPIO)インターフェース、ユニバーサル非同期レシーバー/トランスミッター(UART)インターフェース、シリアル周辺インターフェース(SPI)、内部統合回路(I2C)インターフェース、またはそれらの組み合わせを含むことができる。無線伝送インターフェースは、ブルートゥース(登録商標)、WiFi(登録商標)、近距離無線通信(NFC)インターフェースなどを含むことができるが、本発明はそれらに限定されない。周辺機器160は、例えば、キーボード、マウス、タッチパッドなどの入力装置を含むことができるが、これらに限定されない。
例えば、記憶装置140は、1つ以上のアプリケーション141、オペレーティングシステム142(例えば、Windows、Linux(登録商標)、MacOSなど)、および報知(reporting)プログラム143を記憶することができる。処理ユニット110は、アプリケーション141のうちの1つ、オペレーティングシステム142、および報知プログラム143をメモリユニット130にロードし、実行することができる。オペレーティングシステム142は、収音および解析の機能を有するダイナミックリンクライブラリ(DLL)1421を含むことができ、DLL1421は、オペレーティングシステム層で処理ユニット110によって実行されるアプリケーションまたはコンピュータゲームによって生成された音声信号を収集し、音声信号の音声情報を解析するように構成される。音声情報は、例えば、音声信号の方位および強度を含み、解析から得られた音声情報をアプリケーション層にある報知プログラム143に送信することができる。いくつかの実施形態では、DLL1421の機能は、第三者プログラムであってもよい収音プログラム144によって置き換えられることができる。
報知プログラム143は、常駐プログラムであることができ、ホスト100と表示装置200との間のデータ伝送チャネルを介して音声情報を表示コントローラ210に送信することができ、これにより、表示コントローラ210は、音声情報に対応するOSDメニューの特定の操作を行うことができる。
表示装置200は、例えば、フラットパネルディスプレイ、テレビ、プロジェクタ、またはコンピュータモニタであることができるが、本発明はこれらに限定されない。表示装置200は、表示コントローラ210、表示モジュール220、記憶ユニット230、画像バッファ240、1つ以上の伝送インターフェース250、および入力インターフェース260を含む。伝送インターフェース250は、有線伝送インターフェースおよび/または無線伝送インターフェースを含むことができる。有線伝送インターフェースは、高解像度マルチメディアインターフェース(HDMI(登録商標))、DisplayPort(DP)インターフェース、埋め込みDisplayPort(eDP)インターフェース、低電圧差動信号(LVDS)インターフェース、ユニバーサルシリアルバス(USB)インターフェース、USB Type−Cインターフェース、Thunderboltインターフェース、デジタルビデオインターフェース(DVI)、ビデオグラフィックスアレイ(VGA)インターフェース、汎用入出力(GPIO)インターフェース、ユニバーサル非同期レシーバー/トランスミッター(UART)インターフェース、シリアル周辺インターフェース(SPI)、内部統合回路(I2C)インターフェース、またはそれらの組み合わせを含むことができる。無線伝送インターフェースは、ブルートゥース、WiFi、近距離無線通信(NFC)インターフェースなどを含むことができるが、本発明はそれらに限定されない。
表示コントローラ210は、例えば、特定用途向け集積回路(ASIC)、システムオンチップ(SoC)、プロセッサ、またはマイクロコントローラによって実装されることができるが、本発明はそれらに限定されない。
表示モジュール220は、例えば、液晶表示パネル、発光ダイオード(LED)表示パネル、有機発光ダイオード(OLED)表示パネル、陰極線管(CRT)ディスプレイ、E−Inkディスプレイモジュール、エレクトロルミネセントディスプレイモジュール、プラズマディスプレイモジュール、プロジェクションディスプレイモジュール、または量子ドットディスプレイモジュールであることができるが、本発明はこれらに限定されない。
記憶ユニット230は、例えば、読み取り専用メモリ(ROM)、消去可能プログラム可能読み取り専用メモリ(EPROM)、電気的消去可能プログラム可能読み取り専用メモリ(EEPROM)などの不揮発性メモリであることができるが、本発明はこれらに限定されない。記憶ユニット230は、表示装置200に関連するファームウェア231を記憶するように構成される。記憶ユニット230は、表示コントローラ210の外部に配置されてもよく、あるいは、表示コントローラ210内に統合されてもよい。
ファームウェア231は、例えば、表示装置200の拡張ディスプレイ識別データ(EDID)および表示設定、ならびに1つ以上のオンスクリーンディスプレイ(OSD)インターフェース233を含むことができる。EDIDは、例えば、表示装置200の製造業者、製品名、解像度、フレーム毎秒(FPS)などの情報を含むことができる。表示装置200の表示設定は、表示装置200の輝度、コントラスト、シャープネス、色温度を含むことができる。ファームウェア232は、表示装置200のOSDインターフェース233を制御するのに用いられる。
一実施形態では、表示コントローラ210は、バス(例えば、I2Cバス)を介して記憶ユニット230に記憶されたファームウェア231、232、およびOSDインターフェース233のプログラムコードを読み取り、対応する表示パラメータを構成することができる。さらに、表示コントローラ210は、表示装置200のEDIDを、伝送インターフェース250の1つ(例えば、画像伝送チャネルまたはデータ伝送チャネルであってもよい)を介してホスト100に送信することができ、これにより、ホスト100の処理ユニット110およびグラフィック処理ユニット120は、EDIDに基づいて、出力画像信号の解像度および対応する同期信号を構成することができる。OSDインターフェース233は、例えば、OSDメニューおよび対応するオプション、情報ダッシュボード、タイマー、カウンター、クロスヘア、特定のシンボル、特定のカラー、特定のテキスト、またはそれらの組み合わせを含むことができるが、本発明は、それらに限定されない。
画像バッファ240は、例えば、揮発性メモリ(例えば、DRAM)または不揮発性メモリ(例えば、フラッシュメモリ)であることができ、これは、表示モジュール220に表示される出力画像を記憶するように構成されており、表示コントローラ210は、ホスト100から受信した音声情報に従って、画像バッファ240に記憶された画像信号の1つ以上の特定の領域に1つ以上のOSDインターフェース233を上書きし、出力画像を生成する。
入力インターフェース260は、表示装置200のOSDメニューを制御するように構成される。入力インターフェース260は、1つ以上の物理ボタン261または5方向ジョイスティック262によって実施されて、上、下、左、右、および確認などの指示を実施することができる。
一実施形態では、ユーザーが5方向ジョイスティック262のうちの1つの方向に操作を行ったとき(または物理ボタン261のうちの1つを押したとき)、表示コントローラ210は、記憶ユニット230からファームウェア232と、OSDインターフェース233のOSDメニュー及び対応するオプションのプログラムコードまたはファームウェアとを読み取り、OSDメニューおよび対応するオプションを表示モジュール220に表示することができる。一実施形態では、ユーザーは、入力インターフェース260に操作を行い、表示装置200のOSDメニューを制御して、表示モジュール220の輝度、コントラスト、シャープネス、色温度を調整するか、またはOSDインターフェース233内の他のインターフェースをアクティブ化または非アクティブ化することができる。もう1つの実施形態では、例えば、OSDインターフェース233およびOSDインターフェース233上に表示されるコンテンツのアクティブ化および非アクティブ化は、ホスト100の周辺機器160によって制御されることができ、詳細は後述する。例えば、ファームウェア231は、表示装置200のデフォルトのファームウェアとみなすことができ、ユーザーは、5方向ジョイスティック262(または物理ボタン261)を介して表示装置200に表示されるOSDインターフェース233の設定を制御することができる。
一実施形態では、表示コントローラ210は、画像スカラー211およびタイミングコントローラ212を含むことができる。表示コントローラ210は、伝送インターフェース250のうちの1つを介して、ホスト100からの画像信号および/または他のホストからの別の信号を受信することができ、画像スカラー211は、受信した画像信号について画像スケーリングプロセスおよび/または画像オーバーレイプロセスを行い、表示モジュール220の解像度に適合させ、画像スケーリングプロセスによって生成された画像(例えば、出力画像)を画像バッファ240に記憶することができる。タイミングコントローラ212は、表示モジュール220を制御して、画像バッファ240から出力画像を読み取り、表示するようにさせることができる。
もう1つの実施形態では、表示コントローラ210は、タイミングコントローラ212を含むことができ、ホスト100からの画像信号の解像度は、表示モジュール220の解像度に適合することができる。従って、表示コントローラ210は、画像スケーリングプロセスを行うことなく、ホスト100から受信した画像信号を画像バッファ240に直接記憶することができる。タイミングコントローラ212は、画像バッファ240に記憶された出力画像を読み取り、表示モジュール220を制御して出力画像を表示させることができる。
図2Aおよび図2Bは、本発明の実施形態による、電子機器のホストと表示装置間の接続図である。
一実施形態では、図2Aに示すように、ホスト100のグラフィック処理ユニット120によって生成された画像信号は、ホスト100の伝送インターフェース150A(例えば、HDMIインターフェース)および表示装置200の伝送インターフェース250A(例えば、HDMIインターフェース)を介して、表示装置200の表示コントローラ210に送信されることができる。例えば、伝送インターフェース150Aと250A間の伝送チャネルは、画像伝送チャネルとみなすことができる。インターフェース150Bと250B間の伝送チャネルは、データ伝送チャネルまたは制御信号伝送チャネルとみなすことができる。いくつかの実施形態では、電子機器10がラップトップコンピュータである場合、伝送インターフェース150Aおよび250Aは、eDPインターフェースまたはLVDSインターフェースであることができ、伝送インターフェース150Bおよび250Bは、内部バスインターフェース、I2Cインターフェース、またはSPIインターフェースであることができるが、本発明はそれに限定されない。
いくつかの他の実施形態では、図2Bに描かれているように、ホスト100のグラフィック処理ユニット120によって生成された画像信号は、ホスト100の伝送インターフェース150C(例えば、USB Type−Cインターフェース)と、表示装置200の対応する伝送インターフェース250C(例えば、USB Type−Cインターフェース)とを介して、表示装置200の表示コントローラ210に送信されることができる。
USB Type−Cプロトコルは、画像/ビデオ伝送(例えば、DisplayPortまたはHDMI規格をサポートする)に加えて、Hi−SpeedおよびSuperSpeedデータ送信をサポートすることができることに留意されたい。即ち、画像伝送チャネルとデータ伝送チャネルは、USB Type−Cインターフェースに統合されることができる。したがって、ホスト100は、ホスト100の伝送インターフェース150C(例えば、USB Type−Cインターフェース)と、表示装置200の対応する伝送インターフェース250C(例えば、USB TypeCインターフェース)とを介して、音声情報を表示装置200に送信することができる。さらに、ホスト100の処理ユニット110は、ホスト100上の特定のイベントを検出し、検出された特定のイベントに応答してOSD制御信号を生成することができる。例えば、特定のイベントは、キーボードから入力された特定のボタンまたはボタンの組み合わせなど、ホスト100の周辺機器160のうちの1つによって受信された特定の入力信号であることができ、異なるタイプのOSDインターフェース233のそれぞれは、各々の特定のボタンまたはボタンの組み合わせに対応することができる。
説明を簡単にするために、以下の実施形態は図2Aに示されたハードウェア構成で説明されるが、図2Bに示されるハードウェア構成でも同様に実施されることができる。一実施形態では、ユーザーは、キーボード上の特定の組み合わせのボタン(例えば、これに限定されないが、CTRL+ALT+4またはCTRL+ALT+5)を押して、表示装置200のOSDインターフェース233のレーダーインターフェースまたは音響方位(acoustic−orientation)インターフェースをアクティブ化することができる。
例えば、表示コントローラ210がホスト100から特定のキーの組み合わせを表すOSD制御信号を受信した後、表示コントローラ210は、記憶装置230からOSDインターフェース233(例えば、レーダーインターフェースまたは音響方位インターフェース)を読み取ることができ、バッファ240に記憶された画像信号の特定の領域にOSDインターフェース233を上書きする。OSDインターフェースは、表示装置200の画像層(例えば、異なるホストからの画像信号)のうちの最上層に表示され、表示コントローラ210によって表示モジュール220上に表示された画像は、画像バッファ240に記憶されたコンテンツである。したがって、ユーザーが特定のキーの組み合わせを用いて、OSDインターフェース233のレーダーインターフェースまたは音響方位インターフェースをアクティブ化したとき、ホスト100がどのアプリケーションを実行し、それがどのような画像を再生するかに関係なく、ユーザーは、表示装置200上のレーダーインターフェースまたは音響方位インターフェースを見ることができる。
図3Aは、本発明の実施形態によるOSDインターフェースの図である。
一実施形態では、ユーザーは、図3Aに示されているように、表示装置200のOSDインターフェース233のレーダーインターフェース310をアクティブ化または非アクティブ化するために、特定のキーの組み合わせ(例えば、これに限定されないが、CTRL+ALT+4)を押すことができる。例えば、表示コントローラ210がホスト100から特定のキーの組み合わせを表すOSD制御信号を受信した後、表示コントローラ210は、OSDインターフェース233のレーダーインターフェース310を記憶ユニット230から読み取ることができ、画像バッファ240に記憶された画像信号の特定の領域にレーダーインターフェース310を上書きし、レーダーインターフェース310の中心点320は、レーダーインターフェース310におけるプレーヤーの現在の位置を表すことができる。したがって、ユーザーは、表示装置200により表示された表示画像でレーダーインターフェース310を見ることができる。
また、表示コントローラ210がホスト100から音声情報を受信した後、表示コントローラ210は、ホスト100によって現在実行されているアプリケーションまたはコンピュータゲームによって生成された音声信号の方位、距離、および強度を得ることができる。表示コントローラ210は、音声信号の方位、距離、および強度を、レーダーインターフェース310内の音声定位点(sound−positioning point)315の対応する座標および大きさに変換することができ、記憶ユニット230のファームウェア232から対応する音声定位点315のパターンを読み取り、画像バッファ240に記憶された画像信号の対応する座標の位置(例えば、レーダーインターフェース310の相対位置)に音声定位点315のパターンを上書きする。例えば、音声信号の強度が大きい場合、音声定位点315のパターンは大きくまたは色濃くなる。音声信号の強度が小さい場合、音声定位点315のパターンは、小さくまたは色薄くなる。また、音声定位点315のパターンは、図3に示された星形に限定されず、他の適切なパターンを代わりに用いることができる。
図3Bは、本発明の別の実施形態によるOSDインターフェースの図である。
もう1つの実施形態では、ユーザーは、特定のキーの組み合わせ(例えば、限定されないが、CTRL+ALT+5)を押して、表示装置200のOSDインターフェース233の音響方位インターフェースをアクティブ化または非アクティブ化することができる。例えば、表示コントローラ210がホスト100から特定のキーの組み合わせを表すOSD制御信号を受信した後、表示コントローラ210は、OSDインターフェース233の音響方位インターフェースの方位記号、例えば、図3に示された方位記号360および361を記憶ユニット230から読み取ることができ、方位記号360および361は、OSDパターンと見なすことができる。
具体的には、表示コントローラ210がホスト100から音声情報を受信した後、表示コントローラ210は、ホスト100によって現在実行されているアプリケーションまたはコンピュータゲームによって生成された音声信号の方位、距離、および強度を得ることができる。表示コントローラ210は、音声信号の方位、距離、および強度を、表示モジュール220に表示される対応する方位および方位記号の大きさに変換することができる。表示コントローラ210は、記憶ユニット230のファームウェア232から方位記号360および361のパターンを読み取り、画像バッファ240に記憶された方位に対応する画像信号のエッジ位置(例えば、表示モジュール220の内縁の周り)に、方位記号360および361のパターンを上書きする。実線部分の方位記号360は、例えば、北西約25度の角度など、決定された音声信号の方位を示すことができ、点線部分の方位記号361は、予め設定されているが使用されていない方位記号を示すことができる。一実施形態では、方位記号360および361は、他の特定の記号、特定の色、または特定のテキストで置き換えることができる。また、音声信号の強度が大きい場合、方位記号360のパターンは大きくまたは色濃くなる。音声信号の強度が小さい場合、方位記号360のパターンは小さくまたは色薄くなる。
図4は、本発明の実施形態によるOSDインターフェースの表示方法のフローチャートである。
ステップS410では、ホスト100は、アプリケーションを実行して表示画像をレンダリングし、ホスト100と表示コントローラ210間の画像伝送チャネルを介して表示画像を表示コントローラ210に送信する。例えば、ホスト100は、画像伝送チャネルを介して表示画像の画像信号を表示装置200に送信することができ、データ伝送チャネルおよび画像伝送チャネルの接続は、図2Aおよび図2Bの実施形態を参照することができる。
ステップS420では、ホスト100は、ホスト100によって実行されるアプリケーションによって生成された音声信号を収集し、音声信号を解析して、音声信号に対応する音声情報を取得する。例えば、音声情報は、音声信号の方位、距離、および強度を含むことができる。
ステップS430では、ホスト100は、音声情報を表示コントローラ210に送信する。例えば、ホスト100は、ホスト100と表示装置200間のデータ伝送チャネルを介して音声情報を表示装置200に送信することができ、データ伝送チャネルおよび画像伝送チャネルの接続は、図2Aおよび図2Bの実施形態を参照することができる。
ステップS440では、表示コントローラ210は、受信した音声情報に従って、音声情報に対応するOSDパターンを生成し、表示画像の特定の位置にOSDパターンを上書きして出力画像を生成し、出力画像を表示モジュール220に送信して表示する。例えば、OSDパターンは、図3Aの実施形態の音声定位点315、または図3Bの実施形態の方位記号360または361であることができるが、本発明はこれに限定されない。また、特定の位置は、レーダーインターフェース310における音声信号の相対位置、または表示モジュール220における音声信号の相対位置であることができる。
上記に鑑みて、電子機器およびOSDインターフェースの表示方法が提供される。電子機器および表示方法は、ホストによって実行されるダイナミックリンクライブラリまたは集音アプリケーションを用いて、ホストで実行されているアプリケーションによって生成された音声信号を収集し、音声信号の音声情報を解析し、データ伝送チャネルを介して音声情報を表示コントローラに送信することができる。表示コントローラは、音声情報に対応するOSDパターンを取得し、表示画像の特定の位置にOSDパターンを上書きすることにより、表示装置のOSDインターフェースを用いて、ホストからの音声信号の方位、距離、および強度を表示する。したがって、ユーザーは、オペレーティングシステムおよびホストによって実行されるアプリケーション/コンピュータゲームに制限されることなく、表示装置から音声信号の情報を取得して音声信号の音声情報を決定することができ、それによりユーザー体験を向上させることができる。
請求項における「第1」、「第2」、および「第3」などの用語の使用は、請求項における要素を変更するために使用され、優先順位があること、先行関係があること、または別の要素より先行する要素があること、または方法のステップを実行するときの時系列順があることを示すために用いられるものではなく、同じ名前の要素を区別するためにのみ用いられるものである。
本開示は、実施例の方法を用いて、且つ実施形態の観点から記述されてきたが、本開示は開示された実施形態に限定するものではないということを理解されたい。逆に、当業者には明らかであるように種々の変更及び同様の配置を含むように意図される。よって、添付の特許請求の範囲は、全てのそのような変更および類似の配置を包含するように、最も広義な解釈が与えられるべきである。
10 電子機器
100 ホスト
200 表示装置
110 処理ユニット
120 グラフィック処理ユニット(GPU)
130 メモリユニット
140 記憶装置
141 アプリケーション
142 オペレーティングシステム
143 報知プログラム
144 収音プログラム
1421 ダイナミックリンクライブラリ(DLL)
150、150A〜150C 伝送インターフェース
160 周辺機器
210 表示コントローラ
211 画像スカラー
212 タイミングコントローラ
220 表示モジュール
230 記憶ユニット
231、232 ファームウェア
233 オンスクリーンディスプレイ(OSD)インターフェース
240 画像バッファ
250、250A〜250C 伝送インターフェース
260 入力インターフェース
261 物理ボタン
262 5方向ジョイスティック
310 レーダーインターフェース
315 音声定位点
320 中心点
360、361 方位記号
S410〜S440 ステップ

Claims (14)

  1. 表示モジュール、
    前記表示モジュールの表示を制御するように構成された表示コントローラ、および
    前記表示コントローラに電気的に接続されたホストを含み、
    前記ホストは、アプリケーションを実行して表示画像をレンダリングし、前記ホストと前記表示コントローラ間の画像伝送チャネルを介して前記表示画像を前記表示コントローラに送信し、
    前記ホストは、前記ホストで実行されている前記アプリケーションによって生成された音声信号を収集し、前記音声信号を解析して、前記音声信号に対応する音声情報を取得し、
    前記ホストは、前記音声情報を前記表示コントローラに送信し、前記表示コントローラは、前記音声情報に対応するオンスクリーンディスプレイ(OSD)パターンを生成し、前記表示画像の特定の位置に前記OSDパターンを上書きして出力画像を生成し、前記出力画像を前記表示モジュールに送信して表示する電子機器。
  2. 前記音声情報は、前記音声信号の方位、距離、および強度を含む請求項1に記載の電子機器。
  3. 前記OSDパターンは、前記表示モジュールのOSDインターフェースのレーダーインターフェース内に配置される請求項2に記載の電子機器。
  4. 前記OSDパターンは、前記表示モジュールの内縁の周りに配置される請求項2に記載の電子機器。
  5. 前記ホストによって実行されるオペレーティングシステムは、前記ホストによって実行される前記アプリケーションによって生成された前記音声信号を収集するとともに、前記音声信号を解析して、前記音声信号に対応する音声情報を取得するように構成されたダイナミックリンクライブラリを含む請求項1に記載の電子機器。
  6. 前記ホストは、収音プログラムと報知プログラムを実行し、前記収音プログラムは、前記ホストによって実行される前記アプリケーションによって生成された前記音声信号を収集するとともに、前記音声信号を解析して、前記音声信号に対応する前記音声情報を取得するように構成され、
    前記報知プログラムは、前記ホストと前記表示コントローラ間のデータ伝送チャネルを介して、前記収音プログラムによって生成された前記音声情報を前記表示コントローラに送信する請求項1に記載の電子機器。
  7. 前記表示コントローラは、前記音声信号の方位、距離、および強度を、前記レーダーインターフェース内の音声定位点の対応する座標および大きさに変換し、前記電子機器の記憶ユニットに記憶されたファームウェアから前記音声定位点のOSDパターンを読み取り、前記表示画像の前記レーダーインターフェースの対応する座標の位置に前記OSDパターンを上書きする請求項3に記載の電子機器。
  8. 電子機器用のオンスクリーンディスプレイ(OSD)インターフェースの表示方法であって、
    電子機器は、表示モジュール、表示コントローラ、およびホストを含み、前記表示方法は、
    前記ホストを用いてアプリケーションを実行して表示画像をレンダリングし、前記ホストと前記表示コントローラ間の画像伝送チャネルを介して前記表示画像を前記表示コントローラに送信するステップ、
    前記ホストを用いて、前記ホストで実行されている前記アプリケーションによって生成された音声信号を収集し、前記音声信号を解析して、前記音声信号に対応する音声情報を取得するステップ、
    前記ホストを用いて、前記音声情報を前記表示コントローラに送信するステップ、および
    前記表示コントローラを用いて、前記音声情報に対応するオンスクリーンディスプレイ(OSD)パターンを生成し、前記表示画像の特定の位置に前記OSDパターンを上書きして出力画像を生成し、前記出力画像を前記表示モジュールに送信して表示するステップを含む表示方法。
  9. 前記音声情報は、前記音声信号の方位、距離、および強度を含む請求項8に記載の表示方法。
  10. 前記OSDパターンは、前記表示モジュールのOSDインターフェースのレーダーインターフェース内に配置される請求項9に記載の表示方法。
  11. 前記OSDパターンは、前記表示モジュールの内縁の周りに配置される請求項9に記載の表示方法。
  12. 前記ホストによって実行されるオペレーティングシステムは、前記ホストによって実行される前記アプリケーションによって生成された前記音声信号を収集するとともに、前記音声信号を解析して、前記音声信号に対応する音声情報を取得するように構成されたダイナミックリンクライブラリを含む請求項8に記載の表示方法。
  13. 前記ホストを用いて、収音プログラムと報知プログラムを実行するステップをさらに含み、
    前記収音プログラムは、前記ホストによって実行される前記アプリケーションによって生成された前記音声信号を収集するとともに、前記音声信号を解析して、前記音声信号に対応する前記音声情報を取得するように構成され、
    前記報知プログラムは、前記ホストと前記表示コントローラ間のデータ伝送チャネルを介して、前記収音プログラムによって生成された前記音声情報を前記表示コントローラに送信する請求項8に記載の表示方法。
  14. 前記表示コントローラを用いて、前記音声信号の方位、距離、および強度を、前記レーダーインターフェース内の音声定位点の対応する座標および大きさに変換し、前記電子機器の記憶ユニットに記憶されたファームウェアから前記音声定位点のOSDパターンを読み取り、前記表示画像の前記レーダーインターフェースの対応する座標の位置に前記OSDパターンを上書きする請求項10に記載の表示方法。
JP2020176121A 2019-12-31 2020-10-20 電子機器およびオンスクリーンディスプレイインターフェースの表示方法 Pending JP2021110924A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW108148483 2019-12-31
TW108148483A TWI724722B (zh) 2019-12-31 2019-12-31 電子裝置及螢幕上顯示介面的顯示方法

Publications (1)

Publication Number Publication Date
JP2021110924A true JP2021110924A (ja) 2021-08-02

Family

ID=72234639

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020176121A Pending JP2021110924A (ja) 2019-12-31 2020-10-20 電子機器およびオンスクリーンディスプレイインターフェースの表示方法

Country Status (5)

Country Link
US (1) US20210201844A1 (ja)
EP (1) EP3846485A1 (ja)
JP (1) JP2021110924A (ja)
CN (1) CN113126860B (ja)
TW (1) TWI724722B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114968157A (zh) * 2022-05-23 2022-08-30 上海闻泰信息技术有限公司 显示器模组及计算机设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002344840A (ja) * 2001-05-15 2002-11-29 Funai Electric Co Ltd 放送言語表示機能を有する放送受信装置
JP2006190027A (ja) * 2005-01-05 2006-07-20 Sharp Corp 情報処理装置
JP2006275755A (ja) * 2005-03-29 2006-10-12 Furuno Electric Co Ltd 超音波送受信装置
JP2018537750A (ja) * 2015-09-17 2018-12-20 成都雅致奢品網絡科技有限公司Chengdu Yazhishepin Network Technology Co.,Ltd. 音声とパターンとをパーソナライズに関連付けする方法及びシステム
TWI673645B (zh) * 2018-11-27 2019-10-01 技嘉科技股份有限公司 電腦系統、顯示裝置、及螢幕上顯示介面的顯示方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW349724U (en) * 1996-06-21 1999-01-01 Mitac Int Corp Multiple frequency display dynamic sound volume apparatus for computer monitor
JP2002049363A (ja) * 2000-05-24 2002-02-15 Sharp Corp 画像表示システム
TWI253298B (en) * 2004-02-09 2006-04-11 Delta Electronics Inc Video device with voice-assisted system
CN100369076C (zh) * 2004-02-23 2008-02-13 宏碁股份有限公司 控制芯片模块及其控制方法
CN100397370C (zh) * 2004-11-22 2008-06-25 威盛电子股份有限公司 动态介面协定支援装置与方法
JP4558753B2 (ja) * 2007-03-01 2010-10-06 株式会社デンソー 表示装置
CN101639766A (zh) * 2008-07-29 2010-02-03 宏碁股份有限公司 调整显示屏幕设定的方法及应用该方法的计算机系统
US20130033644A1 (en) * 2011-08-05 2013-02-07 Samsung Electronics Co., Ltd. Electronic apparatus and method for controlling thereof
TWI439923B (zh) * 2011-12-20 2014-06-01 Top Victory Invest Ltd 以週邊裝置操作螢幕顯示選單的方法
EP2894629B1 (en) * 2012-11-30 2019-03-06 Maxell, Ltd. Picture display device, and setting modification method and setting modification program therefor
CN107890673A (zh) * 2017-09-30 2018-04-10 网易(杭州)网络有限公司 补偿声音信息的视觉显示方法及装置、存储介质、设备
CN107992281A (zh) * 2017-10-27 2018-05-04 网易(杭州)网络有限公司 补偿声音信息的视觉显示方法及装置、存储介质、设备
CN108014495A (zh) * 2017-11-23 2018-05-11 网易(杭州)网络有限公司 视觉补偿声音信息的方法、存储介质及电子设备
CN108744516B (zh) * 2018-05-29 2020-09-29 腾讯科技(深圳)有限公司 获取定位信息的方法和装置、存储介质及电子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002344840A (ja) * 2001-05-15 2002-11-29 Funai Electric Co Ltd 放送言語表示機能を有する放送受信装置
JP2006190027A (ja) * 2005-01-05 2006-07-20 Sharp Corp 情報処理装置
JP2006275755A (ja) * 2005-03-29 2006-10-12 Furuno Electric Co Ltd 超音波送受信装置
JP2018537750A (ja) * 2015-09-17 2018-12-20 成都雅致奢品網絡科技有限公司Chengdu Yazhishepin Network Technology Co.,Ltd. 音声とパターンとをパーソナライズに関連付けする方法及びシステム
TWI673645B (zh) * 2018-11-27 2019-10-01 技嘉科技股份有限公司 電腦系統、顯示裝置、及螢幕上顯示介面的顯示方法

Also Published As

Publication number Publication date
US20210201844A1 (en) 2021-07-01
CN113126860B (zh) 2023-04-18
TW202127221A (zh) 2021-07-16
CN113126860A (zh) 2021-07-16
TWI724722B (zh) 2021-04-11
EP3846485A1 (en) 2021-07-07

Similar Documents

Publication Publication Date Title
TWI673645B (zh) 電腦系統、顯示裝置、及螢幕上顯示介面的顯示方法
KR101644086B1 (ko) 해상도 변경방법, 그리고, 이를 이용한 디스플레이 장치 및 시스템
US11269424B2 (en) Electronic device and trigger method of macro key using external input signal
JP2021110924A (ja) 電子機器およびオンスクリーンディスプレイインターフェースの表示方法
CN111782169A (zh) 电脑系统、显示装置及屏幕上显示界面的操作方法
KR102519683B1 (ko) 디스플레이 이미지를 이용하여 단축키를 자동으로 트리거하는 방법 및 전자 장치
CN112506384B (zh) 基于激光信号的交互方法、装置、设备及可读存储介质
TW202038080A (zh) 電腦系統、顯示裝置及螢幕上顯示介面的操作方法
KR102563999B1 (ko) 전자 장치 및 전자 장치의 번인 방지 방법
TWI766509B (zh) 顯示裝置及投影式螢幕上顯示介面的控制方法
TWI766518B (zh) 顯示裝置及滑鼠靈敏度同步方法
CN114697622A (zh) 显示装置及投影式屏幕上显示界面的控制方法
CN114690917A (zh) 显示装置及鼠标灵敏度同步方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201020

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211012

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220419