JP6892549B2 - カメラを備えた端末および撮影方法 - Google Patents

カメラを備えた端末および撮影方法 Download PDF

Info

Publication number
JP6892549B2
JP6892549B2 JP2020500177A JP2020500177A JP6892549B2 JP 6892549 B2 JP6892549 B2 JP 6892549B2 JP 2020500177 A JP2020500177 A JP 2020500177A JP 2020500177 A JP2020500177 A JP 2020500177A JP 6892549 B2 JP6892549 B2 JP 6892549B2
Authority
JP
Japan
Prior art keywords
region
area
pixel
photograph
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020500177A
Other languages
English (en)
Other versions
JP2020526972A (ja
Inventor
▲剛▼ 徐
▲剛▼ 徐
拓 ▲孫▼
拓 ▲孫▼
宏原 ▲趙▼
宏原 ▲趙▼
家▲慶▼ 朱
家▲慶▼ 朱
康仲 ▲劉▼
康仲 ▲劉▼
▲シエン▼▲チャン▼ 侯
▲シエン▼▲チャン▼ 侯
▲シン▼ 李
▲しん▼ 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2020526972A publication Critical patent/JP2020526972A/ja
Application granted granted Critical
Publication of JP6892549B2 publication Critical patent/JP6892549B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0266Details of the structure or mounting of specific components for a display module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K5/00Casings, cabinets or drawers for electric apparatus
    • H05K5/0017Casings, cabinets or drawers for electric apparatus with operator interface units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10KORGANIC ELECTRIC SOLID-STATE DEVICES
    • H10K59/00Integrated devices, or assemblies of multiple devices, comprising at least one organic light-emitting element covered by group H10K50/00
    • H10K59/10OLED displays
    • H10K59/12Active-matrix OLED [AMOLED] displays
    • H10K59/121Active-matrix OLED [AMOLED] displays characterised by the geometry or disposition of pixel elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Description

本出願は、端末技術の分野に関し、特に、カメラを備えた端末および撮影方法に関する。
市場が、携帯電話のより高い画面対本体比をますます要求しているため、主要な製造業者はすべて、全画面コンセプトの端末デバイス、例えばXiaomiのMIXおよびSharpのAquos Crystalを発売している。現在、端末デバイス開発の目標は、画面が全体に及ぶフロントパネルを有する端末を提供することである。
現在、例えば指紋/復帰機能のHomeボタンを画面に移すまたは組み込む解決策がすでに利用可能である。しかしながら、前面カメラに関して、カメラを画面の表示領域に組み込む望ましい解決策は存在しない。考えられる1つの方法は、画面の一部を切除するために画面の変則的な切断を行い、カメラなどの構成要素を組み込むために、画面の切断によって作られたスペースを使用することである。
しかしながら、前面カメラが、このようにして画面と一体化される場合、切除された部分は何かを表示することができなくなる。画面が点灯されたとき、暗い隅または溝が現れる。これは、非理想的な工業設計(industrial design、ID)効果であり、画面の全体表示に影響を及ぼし、表示パネルのコストを増加させる。
本出願の実施形態は、工業設計効果および画面の全体表示に影響を及ぼすことなく前面カメラを表示領域に組み込むために、カメラを備えた端末および撮影方法を提供する。
本出願の実施形態の第1の態様は、カメラを備えた端末であって、プロセッサ、メモリ、表示パネル、および少なくとも1つのカメラを含み、少なくとも1つのカメラが、表示パネルの後ろに配置され、表示パネルの、少なくとも1つのカメラの位置に対応する領域が、第1の領域であり、表示パネルの、第1の領域以外の領域が、第2の領域であり、第1の領域の各画素ユニットが、透明部分および不透明部分を含み、第2の領域の各画素ユニットが、透明部分および不透明部分を含み、第1の領域における透明部分の割合が、第2の領域における透明部分の割合よりも大きい、端末を提供する。
可能な設計において、本出願の実施形態の第1の態様の第1の実施態様では、透明部分は、透明ガラスまたは透明プラスチックフィルムであり、不透明部分は、画素ユニット内に配置され、かつ薄膜トランジスタ素子および金属配線を備えた部分を含む。この実施態様では、透明部分および不透明部分の構成が詳述されている。このようにして、本出願の実施形態はより機能可能になる。
可能な設計において、本出願の実施形態の第1の態様の第2の実施態様では、端末は、マイクロモータをさらに含み、マイクロモータは、ハウジングを含む。
可能な設計において、端末は、マイクロモータをさらに含み、少なくとも1つのカメラが存在し、
マイクロモータは、カメラに物理的に接続され、移動させるために少なくとも1つのカメラを駆動するように構成される。
可能な設計において、本出願の実施形態の第1の態様の第3の実施態様では、第1の領域の、1インチ当たりの画素数PPIは、第2の領域のPPIの1/Mであり、Mは、1よりも大きい。この実施態様では、第1の領域のPPIは、第2の領域のPPIの1/Mであり、Mは、1よりも大きい。このようにして、第1の領域の透明率は、第2の領域の透明率よりも大きく、これは本出願の実施形態の実施態様に追加される。
可能な設計において、本出願の実施形態の第1の態様の第4の実施態様では、第1の領域では内部補償のない画素回路が使用され、第2の領域では内部補償のある画素回路が使用される。この実施態様では、透明率を高める、内部補償のない画素回路の使用が、詳述されており、これは本出願の実施形態の実施態様に追加される。
本出願の実施形態の第2の態様は、カメラを備えた端末に適用可能な撮影方法を提供する。端末は、表示パネルおよび少なくとも1つのカメラを含み、少なくとも1つのカメラは、表示パネルの後ろに配置され、表示パネルの、少なくとも1つのカメラの位置に対応する領域は、第1の領域であり、表示パネルの、第1の領域以外の領域は、第2の領域であり、第1の領域の各画素ユニットは、透明部分および不透明部分を含み、第2の領域の各画素ユニットは、透明部分および不透明部分を含み、第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。撮影方法は、表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得するステップであって、N枚の写真のそれぞれには、第1の領域の不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、ステップと、遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理するステップとを含む。
可能な設計において、本出願の実施形態の第2の態様の第1の実施態様では、端末は、マイクロモータをさらに含み、マイクロモータは、移動させるために少なくとも1つのカメラを駆動するためにカメラに物理的に接続される。表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得するステップは、マイクロモータによって、撮影中に移動させるために少なくとも1つのカメラを駆動するステップと、少なくとも1つのカメラの移動中に、表示パネルに対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラを制御するステップとを含む。画像合成方法を使用してN枚の写真を処理するステップは、少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいてN枚の写真を処理するステップを含む。この実施態様では、端末の少なくとも1つのカメラを移動させることによって、複数の写真が処理のために撮影され得る。このようにして、本出願の実施形態の詳述されている動作モードが提供される。
可能な設計において、本出願の実施形態の第2の態様の第2の実施態様では、少なくとも2つのカメラが存在する。画像合成方法を使用してN枚の写真を処理するステップは、少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによってN枚の写真を処理するステップを含む。この実施態様では、端末が少なくとも2つのカメラを備える場合、N枚の写真は、カメラによって撮影された写真を補完することによって処理される。このようにして、本出願の実施形態はより機能可能になる。
可能な設計において、本出願の実施形態の第2の態様の第3の実施態様では、遮蔽領域が部分的に復元された写真が取得される場合、本方法は、遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップをさらに含む。この実施態様では、遮蔽領域は、画像処理アルゴリズムを使用して復元され得、これは本出願の実施形態の実施態様に追加される。
可能な設計において、本出願の実施形態の第2の態様の第4の実施態様では、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップは、遮蔽領域が部分的に復元された写真内の遮蔽画素に対して補間動作を、遮蔽画素の隣接画素の情報を使用して実行するステップを含む。この実施態様では、補間動作は、遮蔽領域を復元するために、隣接画素の情報を使用して実行される。このようにして、本出願の実施形態はより細かく、より機能可能になる。
可能な設計において、本出願の実施形態の第2の態様の第5の実施態様では、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップは、遮蔽領域が部分的に復元された写真内の遮蔽画素の物理情報を認識するステップと、認識された物理情報の内容に基づいて、遮蔽領域が部分的に復元された写真内の遮蔽画素の情報を復元するステップとを含む。この実施態様では、遮蔽領域は、物理情報に基づいて復元され、これは本出願の実施形態の実施態様に追加される。
可能な設計において、本出願の実施形態の第2の態様の第6の実施態様では、第1の領域のPPIは、第2の領域のPPIの1/Mであり、Mは、1よりも大きく、本方法は、第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに含む。この実施態様では、PPIが低減された結果、表示効果を保証するために、第1の領域の表示データが圧縮される。
可能な設計において、本出願の実施形態の第2の態様の第7の実施態様では、本方法は、第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域の全体の輝度を増加させるステップをさらに含む。この実施態様では、PPIが低減されると、発光画素領域の割合が小さくなる。したがって、表示効果を保証するために、輝度が高められる必要がある。
可能な設計において、本出願の実施形態の第2の態様の第8の実施態様では、第1の領域では内部補償のない画素回路が使用され、本方法は、第1の領域の画素ユニットに対して外部補償を実行するステップをさらに含む。この実施態様では、内部補償のない画素回路が第1の領域で使用される場合、色収差を除去するために外部補償が実行される必要がある。
可能な設計において、本出願の実施形態の第2の態様の第9の実施態様では、本方法は、撮影中に黒フレームを表示パネルに挿入するステップをさらに含む。この実施態様では、カメラの前の表示パネルによって発せられる光の干渉を回避するために、黒フレームが、表示パネルに挿入される。
可能な設計において、本出願の実施形態の第2の態様の第10の実施態様では、撮影中に黒フレームを表示パネルに挿入するステップは、撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、黒フレーム挿入動作が完了したと判断されたときに撮影を開始するステップと、撮影完了命令が受信されたときに画面を復元するステップとを含む。この実施態様では、黒フレームを追加するタイミングが詳述されている。このようにして、本出願の実施形態はより機能可能になる。
可能な設計において、本出願の実施形態の第2の態様の第11の実施態様では、黒フレームは、全画面黒フレーム、または第1の領域を黒画面に変える黒フレームである。この実施態様では、黒フレームが、全画面であり得るか、または第1の領域でのみ使用され得ることが詳述されており、これは本出願の実施形態の実施態様に追加される。
本出願の実施形態の第3の態様は、命令を含むコンピュータ可読記憶媒体であって、コンピュータ可読記憶媒体がコンピュータ上で動作されるとき、コンピュータが、前述の態様による方法を実行することが可能である、コンピュータ可読記憶媒体を提供する。
本出願の実施形態の第4の態様は、命令を含むコンピュータプログラム製品であって、コンピュータプログラム製品がコンピュータ上で動作されるとき、コンピュータが、前述の態様による方法を実行することが可能である、コンピュータプログラム製品を提供する。
本出願の実施形態によって提供される技術的解決策では、本出願の実施形態は、カメラを画面の画素領域の後ろに配置することを含み、カメラの前の領域は、表示画面の画素領域の第1の領域である。本出願の実施形態では、カメラは、画面の完全性および正常な表示を保証するように画面の画素領域の後ろに配置され、カメラの前の第1の領域は、カメラによる正常な撮影を保証するように透明部分を有する。このようにして、工業設計効果および画面の全体表示に影響を及ぼすことなく、表示領域への前面カメラの組み込みが実施される。
本出願の一実施形態による、カメラを備えた端末の部分構造のブロック図である。 本出願の一実施形態による、端末における表示パネルとカメラとの間の位置関係の概略図である。 本出願の一実施形態による、画素領域における画素ユニットの配置の概略図である。 本出願の一実施形態による元の写真撮影の結果の概略図である。 本出願の一実施形態による写真合成処理の概略図である。 本出願の一実施形態による、1つのカメラによる写真撮影の概略図である。 本出願の一実施形態による、1つのカメラによる写真撮影の別の概略図である。 本出願の一実施形態による、マイクロモータとカメラとを接続する調整装置の概略図である。 本出願の一実施形態による、2つのカメラによる写真撮影の概略図である。 本出願の一実施形態による画像処理の概略図である。 本出願の一実施形態による画像処理の別の概略図である。 本出願の一実施形態による、1インチ当たりの画素数の低減に関する概略図である。 本出願の一実施形態による、表示データの圧縮に関する概略図である。 本出願の一実施形態による7T1C回路の概略構造図である。 本出願の一実施形態による2T1C回路の概略構造図である。 本出願の一実施形態による撮影方法の概略フローチャートである。 本出願の一実施形態による撮影方法の別の概略フローチャートである。
以下では、本出願の実施形態の添付図面を参照して本出願の実施形態の技術的解決策を明確かつ完全に説明する。明らかに、説明されている実施形態は、本出願の実施形態の一部でしかなく、本出願の実施形態の全部ではない。創造的な努力なしに本出願の実施形態に基づいて当業者によって得られる他のすべての実施形態は、本出願の保護範囲内に含まれるものとする。
従来技術では、カメラは、全画面効果を達成するために表示領域に組み込まれ得る。しかしながら、この効果は、カメラモジュール用のスペースを設けるために画面の一部を切除することによって達成される。その結果、カメラモジュールが配置される領域は、何かを表示することができず、画面が点灯されたとき、暗い隅が現れる。これは、非理想的な工業設計効果であり、画面の全体表示に影響を及ぼす。
本出願の技術的解決策では、端末は、表示パネルおよび前面カメラを備えたユーザ機器である。この端末は、主に前面カメラが表示パネルの後ろに配置される点で、従来の端末とは異なる。
図1は、本出願の一実施形態による端末の部分構造のブロック図である。
端末は、表示パネル101および少なくとも1つのカメラ102を含む。
端末は、プロセッサ180、メモリ120、ワイヤレスフィデリティ(wireless fidelity、Wi−Fi)モジュール170、無線周波数(radio frequency、RF)回路110、入力ユニット130、表示ユニット140、音声回路160、およびセンサ150などをさらに含み得る。当業者は、図1に示されている端末構造が端末に対する制限を構成しないことを理解し得る。端末は、図1に示されている構成要素よりも多くのもしくは少ない構成要素、一部の構成要素の組み合わせ、または異なる構成要素配置を含み得る。
表示ユニット140は、画像を表示するように構成され得る。表示ユニット140は、表示パネル101を含む。さらに、タッチパネル131が、表示パネル101を覆い得る。タッチパネル131上またはその近くでのタッチ操作を検出した後、タッチパネル131は、タッチイベントタイプを判定するためにタッチ操作をプロセッサ180に送信し、次に、プロセッサ180は、タッチイベントタイプに基づいて、対応する視覚出力を表示パネル101に提供する。図1のタッチパネル131および表示パネル101は、端末の入力および出力機能を実施する2つの別個の構成要素として示されているが、一部の実施形態では、タッチパネル131は、端末の入力および出力機能を実施するために表示パネル101と一体化され得る。
入力ユニット130は、設定インタフェース上でユーザが例えばターゲットアプリケーションを選択し、プロンプト情報に従ってフィードバックを行うように構成され得る。具体的には、入力ユニット130は、タッチパネル131および別の入力デバイス132を含み得る。タッチ画面とも呼ばれるタッチパネル131は、タッチパネル131上またはその近くでユーザによって行われたタッチ操作を収集し得る。任意選択で、タッチパネル131は、2つの構成要素、すなわちタッチ検出装置およびタッチコントローラを含み得る。タッチ検出装置は、ユーザのタッチ位置を検出し、タッチ操作によってもたらされる信号を検出し、この信号をタッチコントローラに送信する。タッチコントローラは、タッチ検出装置からタッチ情報を受信し、このタッチ情報をタッチ点の座標に変換し、この座標をプロセッサ180に送信し、プロセッサ180によって送信されるコマンドを受信し実行し得る。加えて、タッチパネル131は、抵抗タイプ、コンデンサタイプ、赤外線タイプ、および弾性表面波タイプなどの複数のタイプで実施され得る。入力ユニット130は、タッチパネル131に加えて、別の入力デバイス132をさらに含み得る。具体的には、別の入力デバイス132は、物理キーボード、機能ボタン(音量調節ボタンまたは電源ボタンなど)、トラックボール、マウス、およびジョイスティックのうちの1つ以上を含み得るが、これらに限定されない。
Wi−Fiは、短距離無線送信技術である。端末は、例えば、電子メールを送信/受信し、ウェブページをブラウジングし、またストリーミングメディアにアクセスするためにWi−Fiモジュール170を使用し得、これにより、ワイヤレスブロードバンドインターネットアクセスが提供される。
RF回路110は、バスによってプロセッサ180に接続される。RF回路110は、インターネットへのデータの送信またはインターネットからのデータの受信を担当し、また、通話中に情報を受信/送信するまたは信号を受信/送信するように構成され得る。特に、基地局のダウンリンク情報を受信した後、RF回路110は、ダウンリンク情報を処理のためにプロセッサ180に送信する。加えて、RF回路110は、アップリンク送信に関連するデータを基地局に送信する。一般に、RF回路110は、アンテナ、少なくとも1つの増幅器、トランシーバ、カプラ、低雑音増幅器(low noise amplifier、LNA)、およびデュプレクサを含むが、これらに限定されない。加えて、RF回路110は、ワイヤレス通信によってネットワークおよび別のデバイスとも通信し得る。ワイヤレス通信は、グローバル・システム・フォー・モバイル・コミュニケーションズ(global system of mobile communication、GSM(登録商標))、汎用パケット無線サービス(general packet radio service、GPRS)、符号分割多元接続(code division multiple access、CDMA)、広帯域符号分割多元接続(wideband code division multiple access、WCDMA(登録商標))、ロングタームエボリューション(long term evolution、LTE)、電子メール、およびショートメッセージングサービス(short messaging service、SMS)を含むが、これらに限定されない通信規格またはプロトコルを使用し得る。
メモリ120は、ソフトウェアプログラムおよびモジュールを記憶するように構成され得る。プロセッサ180は、端末の機能アプリケーションおよびデータ処理を実行するために、メモリ120に記憶されているソフトウェアプログラムおよびモジュールを実行する。メモリ120は、プログラム記憶領域およびデータ記憶領域を主に含み得る。プログラム記憶領域は、オペレーティングシステム、ならびに少なくとも1つの機能のアプリケーションプログラム(例えば、音声再生機能および画像再生機能)などを記憶し得る。データ記憶領域は、モバイル端末の使用に応じて作成されるデータ(例えば、音声データおよび電話帳)などを記憶し得る。加えて、メモリ120は、高速ランダムアクセスメモリを含み得、また、不揮発性メモリ、例えば少なくとも1つの磁気ディスク記憶デバイス、フラッシュメモリデバイス、または別の揮発性固体メモリデバイスをさらに含み得る。
本出願の実施形態では、カメラ102は、表示パネル101の後ろに配置される。これを理解するために、図2に示されている、表示パネルとカメラとの間の位置関係を参照されたい。
表示パネルは、ガラスカバープレート201、被包ガラス202、シーラント203、画素領域204、および薄膜トランジスタガラス205を含み得る。
画素ユニットは、画像表示のために画素領域204に配置される。
薄膜トランジスタは、画素領域204内の画素ユニットを駆動するために薄膜トランジスタガラス205に組み込まれる。
カメラの前の領域は、表示パネルの画素領域204の第1の領域206であり、第1の領域206の各画素ユニットは、透明部分および不透明部分を含む。第1の領域206以外の領域は、第2の領域であり、第2の領域の各画素ユニットも、透明部分および不透明部分を含む。第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。これを理解するために、図3に示されている画素領域204における画素ユニットの配置を参照されたい。
図3は、画素領域204における画素ユニットの配置の概略図である。均等に配置されているものはすべて、画素ユニット301であり、各画素ユニット301は、透明部分302および不透明部分303を含む。透明部分302は、透明ガラスまたは透明プラスチックフィルムであり、不透明部分303は、画素ユニット301内に配置され、かつ薄膜トランジスタ素子および金属配線を備えた部分を含む。カメラ102は、これらの透明部分を通して外部の光景の写真を撮影し得る。
図3は、画素領域204における画素ユニットの配置の概略図に過ぎず、画素領域204における画素ユニットの配置の特定の方式または各画素ユニットのサイズおよび形状を限定しないことに留意されたい。画素ユニットは、普通のRGB配置方式、RGBB配置方式、PenTile配置方式、または別の配置方式で配置され得る。これはここでは限定されない。
表示パネルは、前述の透明部分を有することのみを必要とすることが理解され得る。任意選択で、表示パネル101は、有機発光ダイオード(organic light−emitting diode、OLED)技術、マイクロ発光ダイオード(micro light−emitting diode、MICRO LED)技術、またはアクティブマトリクス有機発光ダイオード(active−matrix organic light emitting diode、AMOLED)技術などを使用して構成され得る。これはここでは限定されない。
本出願のこの実施形態では、カメラ102は、画面の完全性および正常な表示を保証するために表示パネル101の後ろに配置される。カメラ102の前の領域は、表示パネル101の画素領域204の第1の領域である。第1の領域は、透明部分を有し、これにより、カメラ102の正常な撮影が保証され、工業設計効果および画面の全体表示に影響を及ぼすことなく表示領域へのカメラの組み込みが実施される。
表示パネルの表面には偏光子が取り付けられ、表示パネルの表面の偏光子は、偏光子によって反射される光を制限する機能を有することが理解され得る。不透明部分は、カメラを遮るためにルーバのように機能する。カメラの外形は、表示パネルを通しては不可視である。さらに、カメラは端末の内部に配置され、それは端末の内部ではかなり暗い。カメラはユーザから隠されるため、工業設計効果は影響を受けない。
さらに、カメラ102の前の第1の領域は、透明部分だけでなく不透明部分も有し、この不透明部分は、カメラ102の撮影を遮る。したがって、撮影された元の写真は、交互に離間された遮蔽領域を含む、図4に示されているもののようになり得る。このとき、端末は、復元された写真を取得するために、撮影された元の写真を処理し得る。複数の特定の処理方法が使用され得、これらのうちのいくつかが、以下の説明のために選択される。
第1の処理方法は、写真合成である。
任意選択で、プロセッサ180は、以下の動作、すなわち、
撮影のためにカメラ102を呼び出すとき、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令する動作であって、各写真には、不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、動作と、
遮蔽領域が復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
遮蔽領域は、撮影された複数の写真で同じではないことが理解され得る。例えば、領域Aは、第1の写真では遮蔽されるが、第2の写真では遮蔽されない。したがって、複数の写真を合成することは、遮蔽領域が復元された写真を出力し得る。これを理解するために、図5を参照されたい。
図5に示されているように、撮影された両方の写真は、遮蔽領域を有するが、これらの写真の遮蔽領域は異なる。遮蔽領域が復元された完全な写真は、2つの写真が合成された後に取得される。
具体的には、異なる遮蔽領域を有する複数の写真を取得する複数の方法が存在する。
方法1:端末は、マイクロモータをさらに含み得、少なくとも1つのカメラ102が存在する。
任意選択で、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
移動させるために少なくとも1つのカメラを駆動するようにマイクロモータに命令するステップと、
少なくとも1つのカメラの移動中に、画面に対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラに命令するステップとを実行し得る。
画像合成方法を使用してN枚の写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいてN枚の写真を処理するステップを実行し得る。
撮影中、プロセッサ180は、移動中に異なる角度で写真を撮影するために、マイクロモータを使用して、移動させるためにカメラ102を駆動することが理解され得る。撮影が完了した後、プロセッサ180は、遮蔽領域が復元された写真を取得するために、カメラ102が移動したときの、表示パネル101に対するカメラ102の複数の位置に基づいて写真を合成し得る。これを理解するために、図6aおよび図6bを参照されたい。
図6aおよび図6bは、移動中の1つのカメラによる写真撮影の概略図である。図6aでは、カメラによって撮影される元の写真の対象の一部は、不透明部分による遮蔽のために遮蔽され、遮蔽部分が、遮蔽領域である。カメラは、マイクロモータの駆動下で移動する。画素ユニットが横切られるとき、カメラによって撮影される元の写真で対象が遮蔽される領域は、実際のパネルに対するカメラの位置が異なり、撮影角度が異なるため、前に撮影された写真の遮蔽領域とは異なる。したがって、異なる遮蔽領域を有する複数の写真が取得される。
このようにして、1つのカメラしか存在しない場合でも、撮影された複数の写真を処理することによって、遮蔽領域が復元された写真が取得され得る。
カメラを遮蔽する画素ユニットの構造サイズは、数十マイクロメートルであり、したがって、微小距離を移動させるように単にカメラを押し動かすことによって、半分の画素に相当する距離が横切られ得、これにより、異なる遮蔽領域を有する複数の写真が取得されることに留意されたい。
移動させるためにカメラを駆動するマイクロモータは、レンズ駆動モータであり、複数の可能な形態を有することに留意されたい。マイクロモータは、さまざまな方向に移動させる目的で少なくとも1つのカメラを駆動するためにカメラに物理的に接続される。図7は、マイクロモータとカメラとを物理的に接続する調整装置の例を示す。調整装置は、ハウジング10、カメラに接続される垂直スライダ30、垂直調整アセンブリ40、カメラに接続される水平スライダ50、および水平調整アセンブリ60を含む。水平スライダ50および垂直スライダ30は、ハウジング10の底面から順に中空ハウジング10内に配置され、垂直調整アセンブリ40は、垂直スライダ30に接続され、水平調整アセンブリ60は、水平スライダ50に接続される。2つのマイクロモータ80は、垂直調整アセンブリ40および水平調整アセンブリ60をそれぞれ制御する。加えて、カバープレート20が、ハウジング10を密閉し、カバープレート20の隅には、帯状の制限孔24が作られ、カバープレート20の中央には、カメラ102に適合されたレンズ取付孔26が設けられる。
方法2:代わりに、少なくとも2つのカメラ102が存在してもよい。図8は、2つのカメラによる写真撮影の概略図である。ディスプレイの後ろの2つのカメラの位置が異なり、このため、撮影角度が異なる。したがって、2つのカメラによって撮影される写真の遮蔽領域も異なる。
任意選択で、画像合成方法を使用してN枚の写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによってN枚の写真を処理するステップを実行し得る。
このようにして、カメラが移動されることなく、異なる遮蔽領域を有する複数の写真が同様に取得され得、遮蔽領域が復元された写真が、処理によって取得され得る。
第2の処理方法は、写真データ処理である。
任意選択で、プロセッサ180は、以下の動作、すなわち、
写真を撮影する動作であって、写真には、不透明部分による遮蔽に起因する遮蔽領域が存在する、動作と、
遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
画像処理アルゴリズムを使用して写真を処理する複数の特定の方法が存在する。
方法1:任意選択で、画像処理アルゴリズムを使用して写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
写真内の隣接画素の情報を使用して写真内の遮蔽画素に対して補間動作を実行するステップを実行し得る。
例えば、写真内のある画素が遮蔽されており、この画素の左側の画素が赤であり、右側の画素が青である。このとき、補間動作が実行され得る。画素の左側および右側の画素情報を合成することによって取得される画素情報が、遮蔽画素の情報として使用される。代わりに、補間動作は、他の隣接画素の情報を合成することによって実行されてもよいことが理解され得る。これはここでは限定されない。
方法2:任意選択で、画像処理アルゴリズムを使用して写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
写真内の遮蔽画素の物理情報を認識するステップと、
認識された物理情報の内容に基づいて写真内の遮蔽画素の情報を復元するステップとを実行し得る。
これを理解するために、図9aおよび図9bを参照されたい。図9aは、遮蔽領域を有する撮影された写真を示す。端末は、人間の顔の目の一部および顔の一部である、写真内の遮蔽画素の物理情報を認識し得る。したがって、遮蔽画素の情報は、目および顔の一般的な構成に基づいて復元され得、最終的に図9bに示されている写真が取得される。
第3の処理方法は、写真合成とそれに続く写真データ処理である。
任意選択で、プロセッサ180は、以下の動作、すなわち、
撮影のためにカメラ102を呼び出すとき、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令する動作であって、各写真には、不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、動作と、
遮蔽領域が部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する動作と、
写真を取得する動作であって、写真には、不透明部分による遮蔽に起因する遮蔽領域が存在する、動作と、
遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
異なる遮蔽領域を有する複数の写真を取得する特定の方法および画像処理アルゴリズムを使用して写真を処理する特定の方法は、第1の処理方法および第2の処理方法のものと同様であり、ここではさらに説明されない。
遮蔽領域が復元された写真を取得するために、写真が合成される前に、写真に対してデータ処理が実行されてもよいし、または前述の処理方法は、他の方法で組み合わされてもよいことが理解され得る。これはここでは限定されない。
前述の実施形態では、撮影された写真内の、不透明部分による遮蔽に起因する遮蔽領域は、さまざまな方法で復元され得る。さらに、画素構造または画素設計を変更することによって、第1の領域206における透明部分の割合は、第2の領域における透明部分の割合よりも大きくされる。このようにして、撮影された写真内の遮蔽領域の数またはサイズが低減される。
第1の領域206における透明部分の割合を増加させる2つの方法が以下で説明される。
方法1:1インチ当たりの画素数(pixels per inch、PPI)を低減する。
任意選択で、第1の領域206のPPIが第2の領域のPPIの1/Mとなるように、画素設計が変更され、ただし、Mは、1よりも大きい。
これを理解するために、図10を参照されたい。図10に示されているように、第1の領域のPPIは、第2の領域のPPIの1/2に低減されている、すなわち、第1の領域206の画素ユニットは半分に低減されている。したがって、第1の領域における画素ユニット間の透明部分は大幅に増大されている。図10は、PPI低減の概略図に過ぎないことに留意されたい。実際の適用では、一般に、画像の正常な表示を保証するために3つの隣接するRGB画素が削除される。
任意選択で、第1の領域206のPPIが低減されると、これに対応して、データを表示し得る、第1の領域内の画素ユニットは、第2の領域に対して低減される。画像の表示効果を保証するために、プロセッサ180は、以下のステップ、すなわち、
第1の領域206内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに実行し得る。
表示データの圧縮率は、PPI低減率に応じて変更されることが理解され得る。図11に示されているように、例えば、第1の領域206のPPIは、別の領域のPPIの1/2である。したがって、表示される画像の6つの画素の表示データは、第1の領域206の3つの対応する画素ユニットに圧縮される必要があり、表示される画像の6つの画素のうちのR色の表示データは、R1およびR2であり、G色の表示データは、G1およびG2であり、B色の表示データは、B1およびB2である。この場合、第1の領域206の3つの対応する画素ユニットの表示データR3、G3、およびB3は、R3=(R1+R2)/2、G3=(G1+G2)/2、およびB3=(B1+B2)/2という計算によって取得され得る。
任意選択で、第1の領域206のPPIが低減されると、第1の領域206全体は、第2の領域に比べて暗くなる。画像の表示効果を高めるために、プロセッサ180は、以下のステップ、すなわち、
第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域206の全体の輝度を増加させるステップをさらに実行し得る。
具体的には、プロセッサ180は、画素領域204における第1の領域206の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、同じVdataの下で画素の出力電流を増加させ、第1の領域の全体の輝度を比例的に増加させるために、第1の領域206の画素のDTFTの幅対長さ比を適切に調整する(Ipixel−Vdata曲線を制御する)ように表示パネル101に命令し得る。
代わりに、第1の領域206の全体の輝度は、他の方法で、例えば、より正確な調整を実行するために外部補償を使用して、または表示データが圧縮されるときに表示データの色の輝度を増加させる補正を行うことで増加され得ることが理解され得る。これはここでは限定されない。
方法2:回路構造を変更する。
任意選択で、第2の領域のものとは異なる画素回路が、第1の領域206で使用される。第1の領域206で使用される画素回路の構成要素は、第2の領域で使用される画素回路の構成要素よりも少ないことが理解され得る。画素回路が簡略化されるため、デバイスおよび接続線の数が低減される。したがって、カメラのためにより多くの透明部分が得られる。
画素回路を簡略化する複数の特定の方法が存在し、そのうちの1つが、例として以下で説明される。第1の領域では、内部補償のない画素回路が使用される。
通常、内部補償のある画素回路、例えば、7T1C回路またはより多くの薄膜トランジスタを有する回路が、表示パネル101の画素領域204で使用されることに留意されたい。7T1C回路の特定の回路構造が、図12に示されている。すなわち、7つの薄膜トランジスタ(Thin Film Transistor、TFT)および1つのコンデンサが、1つの画素ユニットを駆動し、T1からT7は、回路内の7つのTFTである。
一方、内部補償のない画素回路は通常、2T1C回路である。特定の回路構造が、図13に示されている。すなわち、2つの薄膜トランジスタおよび1つのコンデンサが、1つの画素ユニットを駆動し、スイッチングTFTおよび駆動TFTは、回路内の2つのTFTである。
第1の領域で内部補償のない画素回路を使用することにより、例えば、2T1C回路を使用することにより、画素回路の構造が簡略化され、デバイスおよび接続線の数が低減され、これにより、第1の領域206における透明部分の割合が増加される。
任意選択で、内部補償のない画素回路が第1の領域206で使用されるため、第2の領域の表示と比較して色収差があり得る。したがって、プロセッサ180は、以下のステップ、すなわち、
第1の領域206の画素ユニットに対して外部補償を実行するステップを実行するようにさらに構成され得る。
具体的には、外部補償の主な動作ステップは以下の通りである、すなわち、
1.表示パネルの各グレースケールおよび色状態における2T1C領域の表示輝度および色を取得し、
2.各小領域または各点によって表示される輝度の、理想値からの偏差を計算し、
3.偏差に基づいて、この表示状態における2T1C領域内の各画素のデータ電圧に必要な補正を計算し、
4.補正をルックアップテーブルとして集積回路(integrated circuit、IC)に書き込み、実際の表示では、ICが、さまざまな条件に基づいて補正量を選択し、補正量を出力Gamma電圧に重ね合わせる。
第1の領域と第2の領域との間の色収差は、第1の領域206の画素ユニットを外部的に補償することによって補正される。このようにして、簡略化された画素回路でも比較的良好な表示効果が得られ得る。
前述の実施形態では、第1の領域206における透明部分の割合は、さまざまな方法で増加される。さらに、カメラが撮影を実行するとき、カメラの前の表示パネルによって発せられる光が、撮影品質に干渉し得る。この干渉を回避するために、撮影中に黒フレームが挿入され得る。
任意選択で、プロセッサ180は、以下のステップ、すなわち、
カメラが撮影のために呼び出されたときに表示パネルに黒フレームを挿入するステップを実行するようにさらに構成される。
さらに、黒フレームを挿入する正しいタイミングを保証するために、カメラが撮影のために呼び出されたときに黒フレームを表示パネルに挿入するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、
黒フレーム挿入動作が完了したと判断されたときに、撮影を開始するようにカメラに命令するステップと、
撮影完了命令が受信されたときに画面を復元するステップとを実行し得る。
黒フレームは、全画面黒フレーム、または第1の領域206を黒画面に変える黒フレームであり得ることが理解され得る。これはここでは限定されない。
表示パネルの応答時間は非常に短く、マイクロ秒単位であり、現在のカメラの典型的な露出時間は、1フレームの時間よりも短いことに留意されたい。したがって、画面表示を保証し、撮影への影響を回避するためには、カメラ画像の取得と黒フレームのリフレッシュの同期のみが必要とされる。
本出願の実施形態における、カメラを備えた端末が上で説明されている。本出願の実施形態における撮影方法が以下で説明される。本出願の実施形態では、撮影方法は、カメラを備えた前述の端末に基づくことが理解され得る。端末は、表示パネル101および少なくとも1つのカメラ102を含む。少なくとも1つのカメラ102は、表示パネル101の後ろに配置され、表示パネル101の、少なくとも1つのカメラ102の位置に対応する領域は、第1の領域206であり、表示パネル101の、第1の領域206以外の領域は、第2の領域である。第1の領域206の各画素ユニット301は、透明部分302および不透明部分303を含み、第2の領域の各画素ユニットは、透明部分および不透明部分を含み、第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくする2つの特定の方法が存在することが理解され得る。1つは、第1の領域のPPIを低減することであり、もう1つは、第1の領域の画素構造設計を簡略化することである。以下では、これら2つの場合の撮影方法について説明する。
1.第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくするために第1の領域のPPIを低減する。
図14は、本出願の実施形態における撮影方法の一実施形態を示す。
1401:表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得する。
N枚の写真のそれぞれには、第1の領域の不透明部分による遮蔽に起因する遮蔽領域が存在し、Nは、1よりも大きい正の整数であることに留意されたい。
N枚の写真を取得するさまざまな方法が存在することが理解され得る。例えば、端末は、マイクロモータを含み得、マイクロモータは、撮影中に移動させるために少なくとも1つのカメラを駆動し、少なくとも1つのカメラの移動中、端末は、表示パネルに対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラを制御し得る。代わりに、端末は、異なる位置に少なくとも2つのカメラを備え、この場合、少なくとも2つのカメラが撮影を実行するときにN枚の写真が取得され得る。
1402:遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する。
N枚の写真に対して画像合成処理を実行する特定の方法は、N枚の写真を取得する方法に応じて異なり得ることが理解され得る。マイクロモータによって駆動される少なくとも1つのカメラの移動中にN枚の写真が撮影される場合、N枚の写真は、少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいて処理され得、N枚の写真が、異なる位置の少なくとも2つのカメラによって撮影される場合、N枚の写真は、少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによって処理され得る。
図5に示されているように、取得されたN枚の写真を画像合成方法を使用して処理することによって、遮蔽領域が完全に復元された写真が取得され得ることに留意されたい。処理された写真が依然としていくつかの遮蔽領域を含む可能性もある。すなわち、遮蔽領域が部分的に復元された写真が取得される。
1403:遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する。
遮蔽領域が部分的に復元された取得写真については、画像処理アルゴリズムが、遮蔽領域が完全に復元された写真を取得する目的で写真を処理するために使用され得る。
画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する複数の方法が存在する。
遮蔽画素の隣接画素の情報を使用して、遮蔽領域が部分的に復元された写真内の遮蔽画素に対して補間動作が実行され得る。例えば、写真内のある画素が遮蔽されており、この画素の左側の画素が赤であり、右側の画素が青である。このとき、補間動作が実行され得る。画素の左側および右側の画素情報を合成することによって取得される画素情報が、遮蔽画素の情報として使用される。代わりに、補間動作は、他の隣接画素の情報を合成することによって実行されてもよいことが理解され得る。これはここでは限定されない。
代わりに、遮蔽領域が部分的に復元された写真内の遮蔽画素の物理情報が認識され得、遮蔽領域が部分的に復元された写真内の遮蔽画素の情報は、認識された物理情報の内容に基づいて復元される。例えば、図9aは、遮蔽領域を有する写真である。端末は、人間の顔の目の一部および顔の一部である、遮蔽画素の物理情報を認識し得る。したがって、遮蔽画素の情報は、目および顔の一般的な構成に基づいて復元され得、最終的に図9bに示されている写真が取得される。
端末が撮影を実行するときに、ステップ1401から1403が実行され得ることが理解され得る。ステップ1403は、ステップ1402で取得された写真が、遮蔽領域が部分的に復元された写真である場合にのみ実行され、そうでなければ、それは実行されなくてもよい。
1404:第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮する。
第1の領域のPPIが低減されると、第1の領域の画素ユニットが低減されることに留意されたい。第1の領域のPPIが第2の領域のPPIの1/Mに低減される場合、第1の領域の画素ユニットも、第2の領域のそれらの1/Mに低減される。これを理解するために、図10を参照されたい。図10に示されているように、第1の領域のPPIは、第2の領域のPPIの1/2に低減されている、すなわち、第1の領域206の画素ユニットは半分に低減されている。したがって、第1の領域における画素ユニット間の透明部分は大幅に増大されている。図10は、PPI低減の概略図に過ぎないことに留意されたい。実際の適用では、一般に、画像の正常な表示を保証するために3つの隣接するRGB画素が削除される。
したがって、PPIが低減されると、PPI低減率に応じて表示データの圧縮率が変更される。図11に示されているように、例えば、第1の領域206のPPIは、別の領域のPPIの1/2である。したがって、表示される画像の6つの画素の表示データは、第1の領域206の3つの対応する画素ユニットに圧縮される必要があり、表示される画像の6つの画素のうちのR色の表示データは、R1およびR2であり、G色の表示データは、G1およびG2であり、B色の表示データは、B1およびB2である。この場合、第1の領域206の3つの対応する画素ユニットの表示データR3、G3、およびB3は、R3=(R1+R2)/2、G3=(G1+G2)/2、およびB3=(B1+B2)/2という計算によって取得され得る。
1405:第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域の全体の輝度を増加させる。
第1の領域206のPPIが低減されると、発光画素ユニットが低減されるため、第1の領域206全体は第2の領域に比べて暗くなることに留意されたい。したがって、ステップ1405は、画像の表示効果を高めるために実行され得る。
第1の領域の全体の輝度を高める複数の特定の方法が存在する。例えば、1つの可能な方法は、画素領域204における第1の領域206の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、同じVdataの下で画素の出力電流を増加させ、第1の領域の全体の輝度を比例的に増加させるために、第1の領域206の画素のDTFTの幅対長さ比を適切に調整する(Ipixel−Vdata曲線を制御する)ことである。代わりに、外部補償を使用してより正確な調整が実行されてもよいし、または表示データが圧縮されるときに表示データの色の輝度を増加させる補正が行われてもよい。これはここでは限定されない。
ステップ1404および1405は、端末の電源がオンされているときに実行されてもよいし、またはシステムのハードウェアに組み込まれてもよいことが理解され得る。これはここでは限定されない。
1406:撮影中に黒フレームを表示パネルに挿入する。
カメラは、表示パネルの後ろに配置され、感光撮影のために表示パネルの透明部分を通して外光が採られるため、カメラの前に配置された表示パネルの第1の領域によって発せられる光が、カメラの外光の採光に影響を及ぼすことが理解され得る。したがって、より良好な撮影効果を得るために、黒フレームが、撮影中に表示パネルに挿入され得る。
黒フレーム挿入と撮影の一貫したタイミングを保証するために、撮影と黒フレーム挿入は時間同期されるように制御され得る。例えば、以下のステップ、すなわち、撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、黒フレーム挿入動作が完了したと判断されたときに撮影を開始するステップと、撮影完了命令が受信されたときに画面を復元するステップとが実行され得る。
このステップは、撮影中に第1の領域によって発せられる光による、外光の採光への影響を回避するためのものであることが理解され得る。したがって、黒フレームは、第1の領域を黒画面に変える単なる黒フレームであってもよいし、または全画面黒フレームであってもよい。これはここでは限定されない。
本出願のこの実施形態では、第1の領域における透明部分の割合が、第2の領域における透明部分の割合よりも大きくなるように、第1の領域のPPIが低減され、これにより、工業設計効果および画面の全体表示に影響を及ぼすことなく、カメラの正常な撮影が保証され、表示領域への前面カメラの組み込みが実施される。取得されたN枚の写真を処理するために画像合成方法を使用することにより、撮影された写真の完全性が保証される。合成写真が、遮蔽領域が部分的に復元された写真である場合、写真は、遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用してさらに処理され得、これにより、写真効果がさらに保証される。さらに、第1の領域内のM個の隣接画素の表示データは、表示のために1画素の表示データに圧縮され、第1の領域の全体の輝度が増加される。このようにして、撮影された写真の効果が保証され、表示パネルは、影響を受けることなく画像を表示することが可能であり、このため、比較的良好な表示効果が得られる。撮影中、黒フレームが、第1の領域によって発せられる光による、撮影効果への影響を回避するために表示パネルに挿入され、これにより、撮影品質が改善される。
2.第1の領域の透明部分の割合を第2の領域の透明部分の割合よりも大きくするために画素構造を簡略化する。
画素構造は、2T1C回路などの、内部補償のない画素回路を第1の領域で使用し、7T1C回路などの、内部補償のある画素回路を第2の領域で使用することによって簡略化され得ることが理解され得る。
図15は、本出願の実施形態における撮影方法の別の実施形態を示す。
1501:表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得する。
1502:遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する。
1503:遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する。
ステップ1501から1503は、ステップ1401から1403と同様であり、ここではさらに説明されない。
1504:撮影中に黒フレームを表示パネルに挿入する。
ステップ1504は、ステップ1406と同様であり、ここではさらに説明されない。
1505:第1の領域の画素ユニットに対して外部補償を実行する。
内部補償のない画素回路が第1の領域で使用されると、異なる画素回路構造に起因して、第1の領域と第2の領域との間に色収差が生じ得ることが理解され得る。したがって、第1の領域の画素ユニットは、外部的に補償され得る。具体的には、外部補償動作の主なステップは以下の通りである、すなわち、
1.表示パネルの各グレースケールおよび色状態における2T1C領域の表示輝度および色を取得し、
2.各小領域または各点によって表示される輝度の、理想値からの偏差を計算し、
3.偏差に基づいて、この表示状態における2T1C領域内の各画素のデータ電圧に必要な補正を計算し、
4.補正をルックアップテーブルとして集積回路(integrated circuit、IC)に書き込み、実際の表示では、ICが、さまざまな条件に基づいて補正量を選択し、補正量を出力Gamma電圧に重ね合わせる。
第1の領域と第2の領域との間の色収差は、第1の領域206の画素ユニットを外部的に補償することによって補正される。このようにして、簡略化された画素回路でも比較的良好な表示効果が得られ得る。
本出願のこの実施形態では、第1の領域における透明部分の割合が第2の領域における透明部分の割合よりも大きくなるように、第1の領域の画素ユニットの構造が簡略化される。これにより、カメラの正常な撮影が保証され、工業設計効果および画面の全体表示に影響を及ぼすことなく表示領域への前面カメラの組み込みが実施される。
第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくする前述の2つの方法が単なる例に過ぎないことが理解され得る。実際の適用では、他の方法、例えば、前述の2つの方法の組み合わせが、第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくするために使用され得る。これはここでは限定されない。
本出願の明細書、特許請求の範囲、および添付図面において、用語「第1」、「第2」、「第3」、および「第4」など(もしあれば)は、同様の対象を区別することを意図されており、必ずしも特定の順序または順番を示すものではない。このような方法で呼ばれる所与は、適切な状況で交換可能であり、したがって、ここで説明されている実施形態が、図示されている順序またはここで説明されている順序とは異なる他の順序で実施され得ることを理解されたい。さらに、用語「備える」、「備えた」、およびこれらの任意の他の異形は、非排他的包含に該当するものである。例えば、ステップまたはユニットのリストを含むプロセス、方法、システム、製品、またはデバイスは、必ずしもこれらのステップまたはユニットに限定されず、明示的にリストされていないまたはそのようなプロセス、方法、システム、製品、もしくはデバイスに固有である他のステップまたはユニットを含み得る。
10 ハウジング
20 カバープレート
24 制限孔
26 レンズ取付孔
30 垂直スライダ
40 垂直調整アセンブリ
50 水平スライダ
60 水平調整アセンブリ
80 マイクロモータ
101 表示パネル
102 カメラ
110 RF回路
120 メモリ
130 入力ユニット
131 タッチパネル
132 入力デバイス
140 表示ユニット
150 センサ
160 音声回路
170 Wi−Fiモジュール
180 プロセッサ
190 電源
201 ガラスカバープレート
202 被包ガラス
203 シーラント
204 画素領域
205 薄膜トランジスタガラス
206 第1の領域
301 画素ユニット
302 透明部分
303 不透明部分

Claims (18)

  1. 端末であって、
    表示パネル、プロセッサ、および少なくとも2つのフロントカメラを備え、
    前記少なくとも2つのフロントカメラが、前記表示パネルの後ろに配置され、前記表示パネルの、前記少なくとも2つのカメラの位置に対応する領域が、第1の領域であり、前記表示パネルの、前記第1の領域以外の領域が、第2の領域であり、前記第1の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第2の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第1の領域における前記透明部分の割合が、前記第2の領域における前記透明部分の割合よりも大きく、
    前記プロセッサが、
    前記少なくとも2つのカメラによって撮影されたN枚の写真を取得し、前記N枚の写真のそれぞれには、前記第1の領域の前記不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数であり、
    前記遮蔽領域が完全または部分的に復元された写真を取得するために、前記少なくとも2つのカメラによって撮影された写真に基づいて前記遮蔽領域を補完することによって前記N枚の写真を処理するように構成されている、端末。
  2. 前記第1の領域の前記透明部分または前記第2の領域の前記透明部分が、透明ガラスまたは透明プラスチックフィルムであり、前記第1の領域の前記不透明部分または前記第2の領域の前記不透明部分が、各画素ユニットに薄膜トランジスタおよび金属配線を備える、請求項1に記載の端末。
  3. 前記第1の領域の、1インチ当たりの画素数PPIが、前記第2の領域のPPIの1/Mであり、Mが、1よりも大きい、請求項1または2に記載の端末。
  4. 前記第1の領域では内部補償のない画素回路が使用されており、前記第2の領域では内部補償のある画素回路が使用されている、請求項1から3のいずれか一項に記載の端末。
  5. 前記プロセッサが、
    前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素に対して補間動作を、前記遮蔽画素の隣接画素の情報を使用して実行するようにさらに構成されている、請求項1から4のいずれか一項に記載の端末。
  6. 前記プロセッサが、
    前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素の物理情報を認識し、
    前記認識された物理情報の内容に基づいて、前記遮蔽領域が部分的に復元された前記写真内の前記遮蔽画素の情報を復元するようにさらに構成されている、請求項1から5のいずれか一項に記載の端末。
  7. 前記プロセッサが、
    前記第1の領域の輝度曲線と前記第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、前記第1の領域の全体の輝度を増加させるようにさらに構成されている、請求項1から6のいずれか一項に記載の端末。
  8. 前記プロセッサが、
    撮影中に黒フレームを前記表示パネルに挿入するようにさらに構成されている、請求項1から7のいずれか一項に記載の端末。
  9. 端末に適用可能な撮影方法であって、前記端末が、表示パネルおよび少なくとも2つのカメラを備え、前記少なくとも2つのカメラが、前記表示パネルの後ろに配置され、前記表示パネルの、前記少なくとも2つのカメラの位置に対応する領域が、第1の領域であり、前記表示パネルの、前記第1の領域以外の領域が、第2の領域であり、前記第1の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第2の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第1の領域における前記透明部分の割合が、前記第2の領域における前記透明部分の割合よりも大きく、前記方法が、
    前記少なくとも2つのカメラによって撮影されたN枚の写真を取得するステップであって、前記N枚の写真のそれぞれには、前記第1の領域の前記不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、ステップと、
    前記遮蔽領域が完全または部分的に復元された写真を取得するために、前記少なくとも2つのカメラによって撮影された写真に基づいて前記遮蔽領域を補完することによって前記N枚の写真を処理するステップとを含む、方法。
  10. 前記遮蔽領域が部分的に復元された前記写真が取得される場合、前記方法が、
    前記遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理するステップをさらに含む、請求項9に記載の方法。
  11. 画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理する前記ステップが、
    前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素に対して補間動作を、前記遮蔽画素の隣接画素の情報を使用して実行するステップを含む、請求項10に記載の方法。
  12. 画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理する前記ステップが、
    前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素の物理情報を認識するステップと、
    前記認識された物理情報の内容に基づいて、前記遮蔽領域が部分的に復元された前記写真内の前記遮蔽画素の情報を復元するステップとを含む、請求項10に記載の方法。
  13. 前記第1の領域のPPIが、前記第2の領域のPPIの1/Mであり、Mが、1よりも大きく、前記方法が、
    前記第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに含む、請求項9から12のいずれか一項に記載の方法。
  14. 前記方法が、
    前記第1の領域の輝度曲線と前記第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、前記第1の領域の全体の輝度を増加させるステップをさらに含む、請求項13に記載の方法。
  15. 前記第1の領域では内部補償のない画素回路が使用され、前記方法が、
    前記第1の領域の前記画素ユニットに対して外部補償を実行するステップをさらに含む、請求項9から14のいずれか一項に記載の方法。
  16. 前記方法が、
    撮影中に黒フレームを前記表示パネルに挿入するステップをさらに含む、請求項9から15のいずれか一項に記載の方法。
  17. 命令を含むコンピュータ可読記憶媒体であって、前記コンピュータ可読記憶媒体がコンピュータ上で動作されるとき、前記コンピュータが、請求項9から16のいずれか一項に記載の方法を実行することが可能である、コンピュータ可読記憶媒体。
  18. 命令を含むコンピュータプログラムであって、前記コンピュータプログラムがコンピュータ上で動作されるとき、前記コンピュータが、請求項9から16のいずれか一項に記載の方法を実行することが可能である、コンピュータプログラム。
JP2020500177A 2017-07-07 2017-07-07 カメラを備えた端末および撮影方法 Active JP6892549B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/092250 WO2019006749A1 (zh) 2017-07-07 2017-07-07 一种具有摄像头的终端和拍摄方法

Publications (2)

Publication Number Publication Date
JP2020526972A JP2020526972A (ja) 2020-08-31
JP6892549B2 true JP6892549B2 (ja) 2021-06-23

Family

ID=64950530

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020500177A Active JP6892549B2 (ja) 2017-07-07 2017-07-07 カメラを備えた端末および撮影方法

Country Status (6)

Country Link
US (1) US11082547B2 (ja)
EP (1) EP3624434B1 (ja)
JP (1) JP6892549B2 (ja)
KR (1) KR102192809B1 (ja)
CN (1) CN110024366B (ja)
WO (1) WO2019006749A1 (ja)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3002752A1 (en) 2015-10-26 2017-05-04 Oti Lumionics Inc. Method for patterning a coating on a surface and device including a patterned coating
CN110785867B (zh) 2017-04-26 2023-05-02 Oti照明公司 用于图案化表面上覆层的方法和包括图案化覆层的装置
US11043636B2 (en) 2017-05-17 2021-06-22 Oti Lumionics Inc. Method for selectively depositing a conductive coating over a patterning coating and device including a conductive coating
CN207264695U (zh) * 2017-09-30 2018-04-20 云谷(固安)科技有限公司 终端及显示屏
US11751415B2 (en) 2018-02-02 2023-09-05 Oti Lumionics Inc. Materials for forming a nucleation-inhibiting coating and devices incorporating same
CN108810201B (zh) * 2018-06-04 2020-07-17 Oppo广东移动通信有限公司 电子装置及利用电子装置拍摄照片的方法
CN111182197B (zh) * 2018-11-13 2022-03-22 荷兰移动驱动器公司 相片拍摄方法、计算机程序、可读存储介质及电子装置
WO2020180304A1 (en) * 2019-03-05 2020-09-10 Hewlett-Packard Development Company, L.P. Image capture by image-capture device positioned behind display device
US11730012B2 (en) 2019-03-07 2023-08-15 Oti Lumionics Inc. Materials for forming a nucleation-inhibiting coating and devices incorporating same
CN111756914A (zh) * 2019-03-28 2020-10-09 比亚迪股份有限公司 显示屏的控制方法、装置、终端及可读存储介质
US11516374B2 (en) 2019-06-05 2022-11-29 Synaptics Incorporated Under-display image sensor
US11832473B2 (en) 2019-06-26 2023-11-28 Oti Lumionics Inc. Optoelectronic device including light transmissive regions, with light diffraction characteristics
CN117500334A (zh) 2019-06-26 2024-02-02 Oti照明公司 包括具有光衍射特征的光透射区域的光电设备
US11056081B2 (en) * 2019-08-09 2021-07-06 Wuhan China Star Optoelectronics Semiconductor Display Technology Co., Ltd. Display panel and display device
US20220278299A1 (en) 2019-08-09 2022-09-01 Oti Lumionics Inc. Opto-electronic device including an auxiliary electrode and a partition
US11153513B2 (en) 2019-08-19 2021-10-19 Synaptics Incorporated Light source for camera
CN110430300A (zh) * 2019-09-16 2019-11-08 北京小米移动软件有限公司 终端屏幕及终端
CN110661972B (zh) * 2019-09-27 2021-02-23 维沃移动通信有限公司 图像处理方法、装置、电子设备和介质
CN110769155B (zh) * 2019-10-31 2021-11-23 维沃移动通信(杭州)有限公司 一种摄像头控制方法及电子设备
CN111078170B (zh) 2019-11-29 2023-11-28 北京小米移动软件有限公司 显示控制方法、显示控制装置及计算机可读存储介质
US11076080B2 (en) * 2019-12-05 2021-07-27 Synaptics Incorporated Under-display image sensor for eye tracking
KR102284124B1 (ko) * 2019-12-27 2021-07-30 삼성전기주식회사 이미지 획득 장치, 카메라 모듈을 포함하는 전자기기 및 전자기기내 카메라 모듈 제어 방법
KR20210085902A (ko) * 2019-12-31 2021-07-08 엘지디스플레이 주식회사 표시장치
KR20210099822A (ko) * 2020-02-05 2021-08-13 삼성전자주식회사 이미지 센서를 포함하는 전자 장치
CN111711748B (zh) * 2020-05-27 2023-01-24 维沃移动通信(杭州)有限公司 屏幕刷新率的控制方法、装置、电子设备及可读存储介质
KR20210150903A (ko) * 2020-06-04 2021-12-13 삼성전자주식회사 디스플레이를 포함하는 전자 장치
CN111773683B (zh) * 2020-07-03 2024-06-04 珠海金山数字网络科技有限公司 一种基于移动终端的文字显示方法及装置
CN111951192A (zh) * 2020-08-18 2020-11-17 义乌清越光电科技有限公司 一种拍摄图像的处理方法及拍摄设备
KR20220042843A (ko) 2020-09-28 2022-04-05 엘지디스플레이 주식회사 표시패널과 이를 이용한 표시장치
KR20220069200A (ko) 2020-11-19 2022-05-27 삼성디스플레이 주식회사 표시 장치
KR102406921B1 (ko) * 2020-12-04 2022-06-10 (주)딥인사이트 모놀리식 아키텍처를 가지는 광학 장치 및 그 제조 방법
KR20220141139A (ko) * 2021-04-12 2022-10-19 삼성전자주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법
KR20220142180A (ko) * 2021-04-14 2022-10-21 삼성전자주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법
KR20220143406A (ko) * 2021-04-16 2022-10-25 삼성전자주식회사 전자 장치 및 전자 장치의 이미지 촬영 방법
KR20220169757A (ko) * 2021-06-21 2022-12-28 삼성전자주식회사 하나의 카메라를 통해 다방향으로 촬영을 수행하는 방법 및 그 전자 장치
US12003866B2 (en) 2021-10-20 2024-06-04 Samsung Electronics Co., Ltd. Method for providing image and electronic device supporting the same
WO2023068607A1 (ko) * 2021-10-20 2023-04-27 삼성전자 주식회사 이미지를 제공하는 방법 및 이를 지원하는 전자 장치

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0818857B2 (ja) 1988-03-04 1996-02-28 株式会社アスク 珪酸カルシウム・ポリマー複合板の製造方法
JP3192875B2 (ja) * 1994-06-30 2001-07-30 キヤノン株式会社 画像合成方法および画像合成装置
JP4886162B2 (ja) 2003-06-18 2012-02-29 キヤノン株式会社 撮像装置付き表示装置
JP4411059B2 (ja) 2003-12-12 2010-02-10 キヤノン株式会社 カメラ付きディスプレイ装置、通信装置および通信システム
US20110285891A1 (en) * 2010-05-21 2011-11-24 Maglaque Chad L Integrated Display Camera Using Masked Display Elements
JP5569156B2 (ja) * 2010-06-07 2014-08-13 ソニー株式会社 画像表示装置、電子機器、画像表示システム、画像取得方法、プログラム
WO2012013156A1 (zh) 2010-07-30 2012-02-02 北京联想软件有限公司 显示屏幕以及使用该显示屏幕的终端设备
KR101781533B1 (ko) 2010-12-23 2017-09-27 삼성디스플레이 주식회사 영상 촬영 장치 및 이의 영상 촬영 방법
US9437132B2 (en) * 2011-11-30 2016-09-06 Apple Inc. Devices and methods for providing access to internal component
CN104021759A (zh) 2014-05-30 2014-09-03 京东方科技集团股份有限公司 一种显示器件的亮度补偿方法、亮度补偿装置及显示器件
CN104079811B (zh) * 2014-07-24 2017-09-26 广东欧珀移动通信有限公司 一种拍照时滤除障碍物的方法及装置
CN104580882B (zh) * 2014-11-03 2018-03-16 宇龙计算机通信科技(深圳)有限公司 拍照的方法及其装置
KR102418520B1 (ko) * 2015-09-04 2022-07-08 삼성디스플레이 주식회사 표시 장치
US20170084231A1 (en) * 2015-09-23 2017-03-23 Intel Corporation Imaging system management for camera mounted behind transparent display
CN105208255B (zh) * 2015-10-27 2018-08-07 合肥联宝信息技术有限公司 摄像头组件
CN106603772B (zh) 2017-01-26 2019-12-27 Oppo广东移动通信有限公司 电子装置及图像获取方法
CN106921767A (zh) * 2017-03-07 2017-07-04 捷开通讯(深圳)有限公司 一种高屏占比的移动终端
CN106920470B (zh) 2017-04-27 2019-05-28 武汉华星光电技术有限公司 一种纯屏幕无边框显示装置及显示方法
CN107426471B (zh) * 2017-05-03 2021-02-05 Oppo广东移动通信有限公司 相机模组和电子装置
CN107589600B (zh) * 2017-09-22 2021-03-02 京东方科技集团股份有限公司 一种像素结构、显示面板及显示装置

Also Published As

Publication number Publication date
KR20200014408A (ko) 2020-02-10
KR102192809B1 (ko) 2020-12-18
WO2019006749A1 (zh) 2019-01-10
US20200195764A1 (en) 2020-06-18
EP3624434A1 (en) 2020-03-18
CN110024366B (zh) 2020-08-14
US11082547B2 (en) 2021-08-03
EP3624434A4 (en) 2020-04-15
CN110024366A (zh) 2019-07-16
EP3624434B1 (en) 2021-06-02
JP2020526972A (ja) 2020-08-31

Similar Documents

Publication Publication Date Title
JP6892549B2 (ja) カメラを備えた端末および撮影方法
US11917234B2 (en) Display device configured as an illumination source
US20170084231A1 (en) Imaging system management for camera mounted behind transparent display
EP3537709B1 (en) Electronic device photographing method and apparatus
US11509806B2 (en) Under-display camera synchronization with display pixel operation
EP4295569A1 (en) Under-display camera systems and methods
WO2021093513A1 (en) Under-display camera systems and methods
JP5585117B2 (ja) マルチディスプレイシステム、マルチディスプレイ調整方法およびプログラム
US20150022715A1 (en) Irradiation device, irradiation method, and program
CN115691418A (zh) 亮度补偿方法、亮度补偿装置及存储介质

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200214

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200214

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210527

R150 Certificate of patent or registration of utility model

Ref document number: 6892549

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250