TWI428903B - A display device and a display method thereof - Google Patents
A display device and a display method thereof Download PDFInfo
- Publication number
- TWI428903B TWI428903B TW096138062A TW96138062A TWI428903B TW I428903 B TWI428903 B TW I428903B TW 096138062 A TW096138062 A TW 096138062A TW 96138062 A TW96138062 A TW 96138062A TW I428903 B TWI428903 B TW I428903B
- Authority
- TW
- Taiwan
- Prior art keywords
- display
- image
- imaging
- image signal
- unit
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 25
- 238000003384 imaging method Methods 0.000 claims description 272
- 238000012545 processing Methods 0.000 claims description 134
- 230000000149 penetrating effect Effects 0.000 claims description 77
- 230000035945 sensitivity Effects 0.000 claims description 27
- 230000007246 mechanism Effects 0.000 claims description 20
- 230000008859 change Effects 0.000 claims description 16
- 230000009467 reduction Effects 0.000 claims description 6
- 238000003331 infrared imaging Methods 0.000 claims description 4
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 37
- 230000006870 function Effects 0.000 description 30
- 230000009471 action Effects 0.000 description 24
- 230000000007 visual effect Effects 0.000 description 20
- 230000008569 process Effects 0.000 description 16
- 230000033001 locomotion Effects 0.000 description 15
- 238000005286 illumination Methods 0.000 description 12
- 238000010191 image analysis Methods 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 9
- 230000035515 penetration Effects 0.000 description 9
- 210000003128 head Anatomy 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 239000011521 glass Substances 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000012937 correction Methods 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 210000000744 eyelid Anatomy 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 1
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 208000004350 Strabismus Diseases 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 208000003464 asthenopia Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000241 respiratory effect Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0127—Head-up displays characterised by optical features comprising devices increasing the depth of field
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Social Psychology (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Description
本發明係關於一種在藉由例如眼鏡型或頭部裝戴型之裝戴單元等而裝戴於使用者之狀態下,在使用者之眼睛之前方進行圖像顯示之顯示裝置、與顯示方法。
例如日本特開平8—126031號公報、日本特開平9—27970號公報及日本特開平9—185009號公報所示,已提出有藉由眼鏡型或頭部裝戴型之裝戴單元,在使用者之眼睛之正前方配置顯示部以進行顯示之裝置之各種方案。
然而,在習知之裝置中,尚未得知尤其在以使用者之視覺之輔助、或視覺能力之擴大之觀點而言進行有關於攝像或顯示之控制者。
因此,本發明之目的為實現使用者之視覺之輔助或擴張。
本發明之顯示裝置係包括:顯示機構,其配置成位於使用者之眼睛前方以進行圖像顯示,並可使進行圖像顯示之畫面區域成為透明或半透明之穿透(through)狀態;圖像信號產生機構,其在使顯示機構成為穿透狀態時,產生與使用者經由顯示機構所看見之景象不同景象之顯示圖像信號;及控制機構,其進行使顯示機構之畫面區域一部分成為穿透狀態,並使顯示機構執行由圖像信號產生機構所產生之顯示圖像信號之控制。
圖像信號產生機構具有:攝像部;及信號處理部,其對於由攝像部所獲得之攝像圖像信號進行信號處理。
此時,攝像部係配置成如下之攝像部:在使畫面區域成為穿透狀態之際,以使用者經由顯示機構看見之方向為被攝體方向而進行攝像之攝像部。
或者,攝像部係配置成如下之攝像部:在使畫面區域成為穿透狀態之際,以與使用者經由顯示機構看見之方向不同之方向為被攝體方向而進行攝像之攝像部。
此外,攝像部係以被攝體方向為可變之攝像部。
此外,圖像信號產生機構具有從外部機器接收圖像信號之接收部而構成。
此外,圖像信號產生機構具有對於所供給之圖像信號進行信號處理之信號處理部而構成。
此外,控制機構在顯示機構中,於畫面區域內設定母畫面區域與子畫面區域,且使母畫面區域與子畫面區域之一方成為穿透狀態,使另一方成為依據顯示圖像信號之圖像顯示狀態。
此外,控制機構在顯示機構中,分割畫面區域,且使所分割之各區域之一方成為穿透狀態,使另一方成為依據顯示圖像信號之圖像顯示狀態。
此外,顯示圖像信號係由近景攝像或遠景攝像所獲得之圖像信號。
此外,顯示圖像信號係由望遠攝像或廣角攝像所獲得之圖像信號。
此外,顯示圖像信號係由放大處理或縮小處理所獲得之圖像信號。
此外,顯示圖像信號係由使攝像靈敏度上升或下降之攝像所獲得之圖像信號。
此外,顯示圖像信號係由使紅外線攝像靈敏度上升之攝像所獲得之圖像信號。
此外,顯示圖像信號係由使紫外線攝像靈敏度上升之攝像所獲得之圖像信號。
此外,顯示圖像信號係由使畫面區域成為穿透狀態之際,以與使用者經由顯示機構看見之方向不同之方向為被攝體方向之攝像所獲得之圖像信號。
此外,圖像信號產生機構藉由攝像部之攝像透鏡(lens)系統之動作控制,在使顯示機構成為穿透狀態時,獲得作為與使用者所看見之景象不同景象之顯示圖像信號。
此外,圖像信號產生機構藉由信號處理部之信號處理,在使顯示機構成為穿透狀態時,獲得作為與使用者所看見之景象不同景象之顯示圖像信號。
此外,圖像信號產生機構藉由以接收部接收由外部之攝像裝置所攝像之圖像信號,在使顯示機構成為穿透狀態時,獲得作為與使用者所看見之景象不同景象之顯示圖像信號。
此外進一步包括取得外界資訊之外界資訊取得機構,控制機構根據從外界資訊取得機構所獲得之外界資訊而使顯示圖像信號顯示於顯示機構。
此外,控制機構根據從外界資訊取得機構所獲得之外界資訊而控制使顯示圖像信號顯示之區域。
本發明之顯示方法係一種作為顯示裝置之顯示方法,該顯示裝置係包括配置成位於使用者之眼睛前方以進行圖像顯示,並可使進行圖像顯示之畫面區域成為透明或半透明之穿透狀態之顯示機構;且包括以下步驟:使顯示機構成為穿透狀態時,產生與使用者經由顯示機構所看見之景象不同景象之顯示圖像信號;及使顯示機構之畫面區域一部分成為穿透狀態,並執行依據所產生之顯示圖像信號之顯示。
在以上之本發明中,使用者(user)藉由眼鏡型或頭部裝戴型之裝戴單元等裝戴本發明之顯示裝置,而成為看見位於眼睛前方之顯示機構之狀態。此顯示機構係可成為穿透狀態。
再者,在使顯示機構之畫面區域一部分成為穿透狀態之後,執行依據由圖像信號產生機構所產生之顯示圖像信號之顯示,故使用者在藉由穿透狀態之區域看見通常之視覺景象之狀態下,可藉由顯示圖像信號之顯示,觀看與通常看見之視覺景象不同景象之圖像。例如,藉由穿透狀態之區域一面觀看前方,一面藉由顯示圖像信號之顯示,觀看望遠圖像、放大圖像、特殊攝像圖像、後方景象之圖像等。
換言之,與通常之視覺景象同時成為觀看在通常之視覺下無法觀看之景象之狀態,而成為使使用者之視覺能力擴
張之狀態。
以下,依下列順序說明本發明之顯示裝置、顯示方法之實施形態。
[1.顯示裝置之外觀例及與外部機器之關聯]
[2.顯示裝置之構成例]
[3.畫面上之區域形態]
[4.顯示動作例]
[5.動作觸發(trigger)之例]
[6.實施形態之效果、變形例及擴張例]
[1.顯示裝置之外觀例及與外部機器之關聯]
作為實施形態,於圖1A及圖1B顯示作為眼鏡型顯示器之顯示裝置1之外觀例。顯示裝置1係具有例如圖1B所示,從兩側頭部到後頭部半圍繞之框體(frame)之結構之裝戴單元,且如圖1A所示藉由掛在兩耳殼而裝戴於使用者。
再者,此顯示裝置1係在裝戴狀態下,於使用者之兩眼之正前方,亦即通常之眼鏡之透鏡所位在之處,設為供左眼用與右眼用之一對顯示部2、2配置之構成。在該顯示部2中,係使用例如液晶面板,且藉由控制透過率,可設為如圖所示之穿透狀態,亦即透明或半透明之狀態。藉由顯示部2設為穿透狀態,即使使用者平時如眼鏡般裝戴,對於通常之生活亦不會造成障礙。
此外,在使用者裝戴之狀態中,係朝使用者之前方方向配置攝像透鏡3a。亦即,此時攝像透鏡3a係設成為在將顯
示部2設為穿透狀態時,以使用者經由顯示部2看見之方向為被攝體方向進行攝像。
此外,設置對於藉由攝像透鏡3a之攝像方向進行照明之發光部4a。發光部4a係藉由例如LED(Light Emitting Diode,發光二極體)而形成。
另外,圖1A及圖1B係為一例,供使用者裝戴之顯示裝置1之結構係可考慮各種形態。一般而言只要是以作成眼鏡型、或頭部裝戴型之裝戴單元形成即可,至少以本實施形態而言,只要於接近使用者之眼睛之前方設置顯示部2即可。此外,顯示部2係與兩眼對應設置一對之外,亦可為與單側之眼睛對應而設置1個之構成。
此外,亦可考慮不設置發光部4a之構成。
此外,在圖1A中雖係將攝像透鏡3a安裝成以使用者之前方為被攝體方向,惟亦可將攝像透鏡3a安裝成將顯示部2設為穿透狀態時以與使用者經由顯示部2看見之方向不同之方向為被攝體方向進行攝像。
茲例示於圖2A及圖2B。在圖2A及圖2B之例中,在前方未設置攝像透鏡3a,而在位於後頭部側之單元設置有攝像透鏡3a及發光部4a。換言之,此時,攝像透鏡3a係設為將使用者在通常無法看見之後方進行攝像者。
此外,雖未圖示,惟攝像透鏡3a亦可安裝成以使用者之上方、左側方、右側方、腳下等為被攝體方向。
此外,在圖1A、圖2B之例中,攝像透鏡3a雖係藉由固定式安裝而使攝像時之被攝體方向為固定(使用者之前方
或使用者之後方),惟藉由經由可使被攝體方向變化之可動機構來安裝攝像透鏡3a,而以手動或自動來使攝像時之被攝體方向變化亦可。
此外,在圖1A、圖2B中,雖係設置1個攝像功能部作為攝像透鏡3a,惟安裝複數個攝像透鏡3a,包括複數個攝像功能部亦可。
在由包含攝像透鏡3a之後述之攝像功能系統所攝像之圖像信號係經由特定之處理作成顯示圖像信號而顯示於顯示部2。
此時,在顯示部2之畫面上係將一部分之區域設為穿透狀態,而於其他區域進行依據顯示圖像信號之圖像顯示。
另有關於內部構成例將於後述,惟此顯示裝置1亦可考慮包括與外部機器進行通信之通信功能(圖5中所敘述之通信部26)。
因此,在顯示部2顯示之顯示圖像信號之來源,係假想通信功能部,而非僅是包括攝像透鏡3a之攝像功能部。換言之,亦可在通信功能部接收從作為外部機器之其他攝像裝置等所傳送之圖像信號,而將之顯示於顯示部2。
圖3A、圖3B及圖3C係為將實施形態1之使用形態在與外部機器之關聯中加以例示者。
圖3A係為以單體使用顯示裝置1之情形,此時,由於顯示裝置1具有攝像功能,因此可使將所攝像之圖像信號作為來源產生之顯示圖像信號予以顯示於顯示部2。
圖3B係為顯示裝置1包括通信功能,且與外部之攝像裝
置70進行通信之例。此時,顯示裝置1係接收由攝像裝置70所攝像之圖像並將之顯示於顯示部2。所謂外部之攝像裝置70係可假設包括有通信功能之攝錄影機(video camera)、數位靜態相機(digital still camera)等,此外亦可如圖1A及圖1B所示將包括有攝像功能之顯示裝置1考慮為相對於某顯示裝置1為外部之攝像裝置70。
此外,外部之攝像裝置70係為使用顯示裝置1之使用者本人所有之攝像裝置,或為顯示裝置1之使用者之熟人所有之攝像裝置,或為進行圖像提供之公共或服務企業等之攝像裝置而設為可與顯示裝置1通信者等,可考慮各種形態。
圖3C係顯示裝置1藉由包括通信功能,尤其是經由網際網路等之網路73之通信存取功能,而與由網路73所連接之外部之攝像裝置70進行通信之例。此時,顯示裝置1係經由網路73接收攝像圖像信號,且在顯示部2執行根據該接收之攝像圖像信號之顯示圖像信號之圖像顯示。
[2.顯示裝置之構成例]
茲將顯示裝置1之內部構成例顯示於圖4。
系統控制器(system controller)10係例如由CPU(Central Processing Unit,中央處理單元)、ROM(Read Only Memory,唯讀記憶體)、RAM(Random Access Memory,隨機存取記憶體)、非揮發性記憶體部、包括介面部之微電腦所構成,且設為控制顯示裝置1之整體之控制部。
此系統控制器10係根據內部之動作程式及來自動作觸發
資訊產生部16之動作觸發而進行顯示裝置1內之各部之控制,並在顯示部2執行所需要之圖像顯示。
在顯示裝置1內,係設置有攝像部3、攝像控制部11、攝像信號處理部15。
攝像部3係設置有包括如圖1A或圖2B所示之攝像透鏡3a、光圈、變焦透鏡(zoom lens)、聚焦透鏡(focus lens)等所構成之透鏡系統、或相對於透鏡系統進行聚焦動作或變焦動作之驅動系統、進一步藉由檢測在透鏡系統所獲得之攝像光以進行光電轉換而產生攝像信號之固體攝像元件陣列等。固體攝像元件陣列係例如設為CCD(Charge Coupled Device,電耦合元件)感測器陣列、或CMOS(Complementar yMetal Oxide Semiconductor,互補式金屬氧化半導體)感測器陣列。
圖1A及圖1B之例之情形係藉由該攝像部3而將使用者之前方之景象進行攝像,此外,圖2A及圖2B之例之情形係藉由該攝像部3而將使用者之後方之景象進行攝像。
攝像信號處理部15係包括對於藉由攝像部3之固體攝像元件所獲得之信號進行增益(gain)調整或波形調整之取樣保持(sample hold)/AGC(Automatic Gain Control,自動增益控制)電路、或視訊(video)A/D(analogue/digital,類比/數位)轉換器(converter),以獲得作為數位資料之攝像信號。此外,攝像信號處理部15對於攝像信號亦進行白平衡(white balance)處理、亮度處理、顏色信號處理、振動補正處理等。
攝像控制部11係根據來自系統控制器10之指示,控制攝像部3及攝像信號處理部15之動作。例如攝像控制部11係控制攝像部3、攝像信號處理部15之動作之導通(on)/切斷(off)。此外,攝像控制部11係設為對於攝像部3,進行用以執行自動聚焦(autofocus)、自動曝光調整、光圈調整、變焦、焦點變更等之動作之控制(馬達控制)者。
此外,如上所述當設有可改變藉由攝像透鏡3a之被攝體方向之可動機構時,攝像控制部11係根據來自系統控制器10之指示,控制可動機構之動作,而使攝像部3之攝像透鏡3a之方向變化。
此外,攝像控制部11係包括時序產生器(timing generator),對於固體攝像元件及攝像信號處理部15之取樣保持/AGC電路、視訊A/D轉換器,藉由在時序產生器所產生之時序信號來控制信號處理動作。此外,亦可設為藉由該時序控制進行攝像訊框率(frame rate)之可變控制。
再者,攝像控制部11係用以進行固體攝像元件及攝像信號處理部15之攝像靈敏度或信號處理之控制。例如,作為攝像靈敏度控制可進行從固體攝像元件讀取之信號之增益控制,或進行黑色位準設定控制、及數位資料階段之攝像信號處理之各種係數控制、振動補正處理之補正量控制等。關於攝像靈敏度,亦可進行尤其是不考慮波長帶域之整體之靈敏度調整、或調整例如紅外線區域、紫外線區域等特定之波長帶域之攝像靈敏度之靈敏度調整(例如將特定波長帶域去除之攝像)等。與波長對應之靈敏度調整係
可藉由攝像透鏡系統之波長濾波器(filter)之插入、或對於攝像信號之波長濾波器運算處理來進行。此等情形,攝像控制部11係可藉由波長濾波器之插入控制、或濾波器運算係數之指定等來進行靈敏度控制。
此外,以在顯示裝置1中對於使用者進行顯示之構成而言,係設有顯示部2、顯示圖像處理部12、顯示驅動部13、顯示控制部14。
由攝像部3所攝像,且由攝像信號處理部15所處理之攝像信號係供給至顯示圖像處理部12。顯示圖像處理部12係例如設為所謂視訊處理器(video processor),且設為對於所供給之攝像信號可執行供各種顯示之處理之部位。
例如可進行攝像信號之亮度位準(level)調整、顏色補正、對比(contrast)調整、銳利度(sharpness)(輪廓強調)調整等。此外,顯示圖像處理部12亦可進行將攝像信號之一部分放大之放大圖像之產生、或縮小圖像之產生、柔焦(soft focus)、馬賽克(mosaic)、亮度反轉、圖像內之一部分之輝亮(highlight)顯示(強調顯示)、整體顏色之氛圍之變化等之圖像特效(effect)處理、攝像圖像之分割顯示用之圖像之分離或合成、人物(character)圖像或影像(image)圖像之產生及將所產生之圖像合成為攝像圖像之處理等。換言之,可進行對於作為攝像信號之數位影像信號之各種處理。
顯示驅動部13係由像素驅動電路所構成,該像素驅動電路係使從顯示圖像處理部12所供給之圖像信號,顯示在例
如設為液晶顯示器之顯示部2。亦即,對於在顯示部2中配置成矩陣狀之各像素,分別以特定之水平/垂直驅動時序施加根據影像信號之驅動信號,而執行顯示。此外,顯示驅動部13亦可控制顯示部2之各像素之透過率,將畫面整體及一部分設為穿透狀態。
顯示控制部14係根據系統控制器10之指示,而控制顯示圖像處理部12之處理動作或顯示驅動部13之動作。亦即,對於顯示圖像處理部12係執行上述各種處理。此外,對於顯示驅動部13係進行控制以使執行穿透狀態、圖像顯示狀態之切換。
此外設有照明部4與照明控制部18。照明部4係由圖1A、圖2B所示之發光部4a與使該發光部4a(例如LED)發光之發光電路所構成。照明控制部18係根據系統控制器10之指示而使照明部4執行發光動作。
由於照明部4之發光部4a係如圖1A及圖2B所示安裝,故照明部4係進行對於藉由攝像透鏡3a之被攝體方向之照明動作。
動作觸發資訊產生部16係產生在顯示部2之圖像顯示之開始/終了、顯示態樣之切換等用之動作觸發資訊。
此動作觸發資訊產生部16係可例如由使用者操作之作為操作鍵或操作轉盤(dial)之操作器、及用以檢測該操作器之操作之操作偵測機構所構成。亦即,以使用者之手動操作為各種動作之動作觸發資訊之情形。動作觸發資訊產生部16係藉由將使用者之操作資訊供給至系統控制器10作為
動作觸發資訊,而由系統控制器10進行與使用者之操作對應之顯示動作控制。
此外,動作觸發資訊產生部16亦可作成可偵測使用者資訊(使用者之視覺狀況、身體之動作、生物體狀況等之偵測資訊)、外界資訊(顯示裝置周圍之狀況、或場所、時間日期、被攝體之狀況等之偵測資訊)之構成。例如,亦可令作成系統控制器10根據該等使用者資訊或外界資訊,以進行動作觸發產生之判斷。另外,關於使用者資訊或外界資訊之例係將後述。
圖5係為顯示作為顯示裝置1之另一構成例者。另外,對於與圖4相同功能之區塊係賦予相同符號,且避免重複說明。
該圖5之構成係不包括圖4之構成之攝像功能部位(攝像部3、攝像控制部11、攝像信號處理部15)、與照明部4、照明控制部18,而取代為作成具有通信部26之構成。
通信部26係進行與外部機器之間之資料之傳收送。以外部機器而言,係可考慮圖3B及圖3C所述之作為攝像裝置70之各種機器。
通信部26係可作成以無線LAN(Local Area Network,區域網路)、藍牙(Bluetooth)(註冊商標)等之方式,經由例如對於網路存取點(Network Access Point)之近距離無線通信以進行網路通信之構成,亦可以是在與包括有對應之通信功能之外部機器之間直接進行無線通信者。
此圖5之例之情形,在與外部之攝像裝置70之間係如圖
3B或圖3C所示進行通信,且從攝像裝置70接收攝像圖像信號。通信部26係將所接收之攝像圖像信號供給至顯示圖像處理部12。再者,經由顯示圖像處理部12所處理之圖像信號係供給至顯示驅動部13,且在顯示部2顯示。
圖6係顯示作為顯示裝置1之又另一構成例者。另外,對於與圖4相同功能之區塊係賦予相同符號,並省略重複說明。
此圖6之構成係為包括圖4之構成中之攝像功能部位(攝像部3、攝像控制部11、攝像信號處理部15)之2個系統者。
亦即,設有由攝像部3X、攝像控制部11X、攝像信號處理部15X而成之第1攝像功能部位、及由攝像部3Y、攝像控制部11Y、攝像信號處理部15Y而成之第2攝像功能部位。
攝像部3X、3Y係可設為分別在相同之被攝體方向進行攝像者,亦可設為分別在不同之被攝體方向進行攝像者。
例如攝像部3X、3Y係可均配置成進行前方攝像,而配置成攝像部3X進行前方攝像、攝像部3Y進行後方攝像亦可。此外,配置成攝像部3X進行右後方、攝像部3Y進行左後方之攝像亦可,或配置成攝像部3X進行腳下、攝像部3Y進行上空之攝像亦可。
在各攝像功能部位所獲得之攝像圖像信號係經由顯示圖像處理部12處理而供給至顯示驅動部13,且在顯示部2顯示。
以上雖顯示顯示裝置1之構成例於圖4、圖5、圖6,惟作為顯示裝置1尚可假設有各種形態之構成例。
例如,亦可考慮設置3系統以上之攝像功能部位。
此外,亦可考慮除了1個或複數個攝像功能部位,同時設置用以接收來自外部之攝像裝置70之攝像信號之通信部26之構成。
此外,在攝像功能部位中,攝像部3(攝像透鏡3a)雖係可考慮將被攝體方向設為固定之例與設為可動藉而可變更被攝體方向之例,惟設置複數個攝像功能部位時,係分別假設將全部設為固定之構成例、將所有設為可動之構成例、將一部分設為固定而一部分設為可動之構成例。
然而,在圖4、圖5、圖6或作為其變形例之構成中,於作為實施形態之顯示裝置1中,經由顯示圖像處理部12處理而供給至顯示驅動部13之圖像信號最終係成為供在顯示部2之顯示之顯示圖像信號。本例之情形,尤其是顯示圖像信號係作成在將顯示部2設為穿透狀態時使其顯示作為與使用者經由顯示部2看見之景象不同之景象之圖像之信號。
作為顯示圖像信號之圖像,換言之在將顯示部2設為穿透狀態時要如何獲得作為與使用者經由顯示部2看見之景象不同之景象之圖像,可以考慮各種形態。
例如由攝像部3(3X、3Y)所攝像之圖像或由通信部26所接收之圖像本身,有成為作為與使用者經由顯示部2看見之景象不同之景象之圖像之情形,亦有藉由在攝像信號處
理部15、顯示圖像處理部12施以特定之處理,而成為作為與使用者經由顯示部2看見之景象相同圖像之圖像之情形。
茲容後敘述作為與使用者經由顯示部2看見之景象不同之景象之圖像之具體例。
此外,在本例中,係在進行此種圖像之顯示時,於將顯示部2之畫面區域之一部分設為穿透狀態之後,以進行藉由從顯示圖像處理部12所輸出之圖像信號之顯示為基本。亦即,在穿透狀態之顯示部2之一部分之區域進行圖像顯示者。
[3.畫面上之區域形態]
茲將在顯示部2之畫面上,於將畫面區域之一部分設為穿透狀態之後,進行藉由從顯示圖像處理部12所輸出之圖像信號之顯示時之例顯示於圖7A、圖7B、圖7C、圖7D、圖7E及圖7F以及圖8A、圖8B、圖8C及圖8D。
在顯示部2中,以殘存穿透狀態之區域之狀態下直接進行圖像顯示之形態而言,係於畫面區域內設定母畫面區域與子畫面區域,且將母畫面區域與子畫面區域之一方設為穿透狀態,而另一方設為依據顯示圖像信號之圖像顯示狀態。
或者將畫面區域分割,且將分割之各區域之一方設為穿透狀態,而另一方設為依據顯示圖像信號之圖像顯示裝置亦可。
在圖7A、圖7B、圖7C、圖7D、圖7E及圖7F以及圖8A、
圖8B、圖8C及圖8D中,區域AR1係設為穿透狀態之區域,而區域AR2係設為進行依據顯示圖像信號之圖像顯示之區域。
圖7A係為在顯示部2之畫面區域,於區域AR1內右下方設定作為子畫面之區域AR2,且進行圖像顯示之例。
圖7B係為在顯示部2之畫面區域,於區域AR1內左下方設定作為子畫面之區域AR2,且進行圖像顯示之例。
雖未圖示,惟如此設定子畫面時,於區域AR1內之右上、左上、中央、中央靠右、中央靠左等,於各種位置亦可設定作為子畫面之區域AR2。
圖7C係為將作為區域AR2之大小縮小之例。
圖7D係為將作為區域AR2之大小放大之例。
圖7E係為在顯示部2之畫面區域,將區域AR1與區域AR2均等分割而區分為左右之例。
圖7F係為在顯示部2之畫面區域,將區域AR1與區域AR2均等分割而區分為上下之例。
例如在圖4、圖5之構成中,於進行圖像顯示時,可考慮以該圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之形態,一面將區域AR1設為穿透狀態,一面於區域AR2進行圖像顯示。
此外,系統控制器10係根據來自動作觸發資訊產生部16之資訊(例如使用者之操作資訊、使用者資訊、外界資訊等)而選擇以圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之何種區域形態來進行圖像顯示,或是將此等形態進行切換亦
可。例如,依據使用者之操作等,如圖7A或圖7B變更作為子畫面之區域AR2之位置,或如圖7C或圖7D變更區域AR2之大小,或如圖7E或圖7F均等分割,藉此以配合使用者之喜好。
此外,作為所謂顯示區域交替,亦可考慮進行將圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之之區域AR1設為圖像顯示,而將區域AR2設為穿透狀態之切換。
此外,在圖8D,雖係顯示以畫面區域整體為區域AR2而進行依據顯示圖像信號之圖像顯示之例,惟從例如圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之顯示狀態,切換到如圖8D所示將穿透狀態之區域消除而以全畫面進行圖像顯示之狀態亦可。
接著,圖8A係為在顯示部2之畫面區域,於區域AR1內右下與左下設定作為2個子畫面之區域AR2a、AR2b,而進行圖像顯示之例。
圖8B係為在顯示部2之畫面區域,於區域AR1之左右設定區域AR2a、AR2b,而進行圖像顯示之例。
圖8C係為在顯示部2之畫面區域,於區域AR1之上下設定區域AR2a、AR2b,而進行圖像顯示之例。
例如圖6所示具有2系統之攝像功能部位時,可考慮在此等之2個區域AR2a、AR2b進行根據在各攝像功能部位之攝像圖像之圖像顯示。
此外,將區域AR1、AR2a、AR2b分割設定為3等份亦可。
此外,藉由系統控制器10之控制以進行區域形態之切換或區域之交替,亦與圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之情形同樣地假設。
此外,亦可設為可從圖8A、圖8B或圖8C之狀態切換成如圖8D所示以畫面整體進行圖像顯示之狀態。
另外,即使於複數個攝像功能部位或通信部26等具有複數個顯示圖像來源時,亦可考慮選擇其中之一而以圖7A、圖7B、圖7C、圖7D、圖7E及圖7F之區域形態來顯示。
此外,當作成顯示裝置1具有3個以上顯示圖像來源之構成時,設定3個以上作為區域AR2之區域,且使來自各個顯示圖像之來源之圖像同時顯示亦可。
此外,如圖1A所示,當顯示部2具有右眼用與左眼用2個時,可考慮將其一方之畫面整體設為穿透狀態,且在另一方之畫面整體如圖8D所示進行圖像顯示。
[4.顯示動作例]
在如上述圖4、圖5、圖6之構成之本實施之形態之顯示裝置1中,經由顯示圖像處理部12處理而供給至顯示驅動部13之圖像信號,最終係作為供在顯示部2之顯示之顯示圖像信號,尤其是該顯示圖像信號係如在上述圖7A、圖7B、圖7C、圖7D、圖7E及圖7F以及圖8A、圖8B、圖8C及圖8D所說明,在殘留穿透狀態之區域之狀態下直接顯示於畫面上之一部份區域。此外,顯示圖像信號係為將作為與使用者經由顯示部2看見之景象(亦即於穿透狀態看見之景象)不同之景象之圖像予以顯示之信號。
作為顯示圖像信號之圖像雖係為由攝像部3(或3X、3Y)所攝像之圖像,或是由通信部26所接收之圖像,惟將以此等作為來源之顯示圖像信號,設為與在穿透狀態下看見之景象不同之景象之圖像,可令使用者以穿透狀態之區域一面觀看外界之景象,一面以一部分區域觀看顯示圖像,藉此而可擴張視覺。
茲說明根據供此之用之系統控制器10之控制之各種動作例。
圖9係顯示系統控制器10之控制處理。
步驟F101係顯示系統控制器10對於顯示控制部14將顯示部2設為穿透狀態之控制處理。例如,在顯示裝置1設為電源導通(on)之初期階段,系統控制器10係於步驟F101將顯示部2之畫面整面控制為穿透狀態。
將顯示部2之畫面整面設為穿透狀態之期間,系統控制器10係在步驟F102確認顯示開始之觸發是否已產生。例如,只要設置使用者可操作之操作器作為動作觸發資訊產生部16,且判斷使用者藉由特定之操作器之操作而使顯示狀態開始之觸發之產生即可。或是雖在之後將敘述例子,惟亦可在動作觸發資訊產生部16檢測使用者之狀況或外界之狀況,而由系統控制器10判斷依據特定之條件使顯示開始之觸發之產生。
判別具有顯示開始觸發時,系統控制器10係將處理前進至步驟F103,而進行顯示圖像信號之顯示開始控制。亦即,係控制成使根據由攝像部3(或3X、3Y)所攝像之圖像
信號、或由通信部26所接收之圖像信號之顯示圖像信號在顯示部2顯示。此外,此時,例如在圖7A、圖7B、圖7C、圖7D、圖7E及圖7F以及圖8A、圖8B、圖8C及圖8D所示,在畫面上之一部分之區域執行圖像顯示。
在開始圖像顯示之後,換言之在顯示部2之畫面上一部分被設為穿透狀態之區域且一部分被設為圖像顯示之區域之期間,系統控制器10係監視在步驟F104是否已產生顯示切換觸發,此外並監視在步驟F105是否已產生顯示終了觸發。
所謂在步驟F104之顯示切換觸發之產生係指系統控制器10依據使用者操作、或使用者狀況及外界狀況之判斷,而由系統控制器10判斷進行顯示圖像之切換。
所謂顯示圖像之切換係具有例如顯示圖像內容之切換、區域形態之切換。
再者,所謂顯示圖像內容之切換係指藉由例如在攝像部3之變焦處理或焦點位置之變更之圖像變更、藉由攝像靈敏度之變更之圖像變更、藉由在攝像信號處理部15之信號處理之圖像變更、藉由攝像部3為可動照相機(camera)時之攝像方向(被攝體方向)之變更之圖像變更、藉由在顯示圖像處理部12之信號處理之圖像變更、藉由具有複數個顯示圖像信號之來源時之來源切換之圖像變更等,可考慮極多形態之例。
此外,所謂區域形態之切換係為母子畫面之位置變更或親子畫面交替、分割畫面之位置變更或區域交替、切換為
全畫面顯示等,例如為從圖7A之狀態切換為圖7B之狀態,或從圖7A之狀態切換為圖7E之狀態,或從圖7A之狀態切換為圖8D之狀態等之控制。
此外,至於在步驟F105之顯示終了觸發,只要例如於使用者藉由特定之操作而進行使顯示終了之操作時,系統控制器10即判斷使顯示狀態終了之觸發之產生即可,惟亦可檢測使用者之狀況或外界之狀況,依據特定之條件而由系統控制器10判斷顯示終了觸發之產生。
判斷顯示切換觸發產生時,系統控制器10係將處理從步驟F104前進至步驟F106,而進行關於圖像顯示動作之切換控制。藉此,在顯示部2進行顯示於一部分之區域之圖像之內容,或區域形態之切換。
系統控制器10係在步驟F106進行關於顯示切換之控制之後,進行步驟F104、F105之觸發產生之監視。
判斷顯示終了觸發產生時,系統控制器10係將處理從步驟F105返回至F101,且對於顯示控制部14,進行使圖像顯示終了,同時將顯示部2之整面設為穿透之指示。
使用者裝設顯示裝置1而設為電源導通之期間,系統控制器10係進行例如該圖9之控制處理。
再者,在該處理中,雖係於步驟F103進行圖像顯示,此外於步驟F106進行顯示切換,惟將此等處理中所實現之圖像顯示例在圖10A及圖10B、圖11A及圖11B、圖12A及圖12B、圖13A及圖13B、圖14A及圖14B、以及圖15A、圖15B、圖15C及圖15D中敘述。
另外,在圖10A及圖10B、圖11A及圖11B、圖12A及圖12B、圖13A及圖13B、以及圖14A及圖14B中,基本上係為圖4之構成例,係假設構成為攝像部3將使用者之前方,亦即經由穿透狀態之區域而將與使用者所看見之景象相同之方向之景象進行攝像之情形進行說明。
圖10A係顯示顯示部2之整面成為穿透狀態之情形。換言之,顯示部2係成為單純透明之板狀體,係為由使用者經由透明之顯示部2觀看視界景象之狀態。
圖10B係將例如由攝像部3所攝像之圖像顯示於顯示部2之狀態以作為圖像顯示狀態。在此,區域AR1係設為穿透狀態,而於區域AR2進行圖像顯示。此時,係設攝像部3為將使用者之前方進行攝像者,且對於該攝像部3進行變焦控制而進行望遠攝像,藉此將與經由穿透狀態之區域AR1之使用者之視界不同之景象之圖像(望遠圖像)顯示於區域AR2。藉此,使用者係可一面觀看通常之光景,一面享有通常之視覺所無法觀看之望遠圖像。
另外,在此雖係以藉由攝像部3之動作而獲得望遠圖像為例,惟,反之藉由執行廣角變焦,近距離之景象輝映成廣角之圖像即顯示於顯示部2。另外,望遠—廣角之控制係除攝像部3之變焦透鏡之驅動控制之外,尚可由攝像信號處理部15之信號處理來進行。
此外,雖未圖示,惟藉由系統控制器10指示使攝像部3可改變焦點位置而非所謂之變焦動作,使之進行近景、遠景之圖像之攝像,而使該圖像顯示於顯示部2之區域AR2
亦可。
圖11A係顯示顯示部2之整面設為穿透狀態之情形。
圖11B係為圖像顯示狀態,藉由系統控制器10對於顯示控制部14(顯示圖像處理部12、顯示驅動部13)指示關於從攝像部3所獲得之圖像之放大處理,如圖11B所示區域AR1係設為穿透狀態,而區域AR2係進行放大圖像之顯示之例。如此作為放大圖像,由於將與經由穿透狀態之區域AR1之使用者之視界不同之景象之圖像顯示於區域AR2,故使用者即可一面觀看通常之景象,一面觀看通常之視覺所無法觀看之圖像。
反之,亦可考慮系統控制器10對於顯示控制部14(顯示圖像處理部12、顯示驅動部13)執行關於從攝像部3所獲得之圖像之縮小處理,以於區域AR2進行縮小圖像之顯示。
圖12A雖係顯示顯示部2之整面設為穿透狀態之情形,惟尤其係顯示周圍微暗之情形。
圖12B係為圖像顯示狀態,當周圍為如此微暗時,系統控制器10係對於攝像控制部11(攝像部3、攝像信號處理部15)指示提升攝像靈敏度,或對於攝像信號處理部15或顯示圖像處理部12指示亮度位準、對比、銳利度調整等,而獲得更為清晰之明亮之顯示圖像信號,以使其顯示。換言之,區域AR1係設為穿透狀態,且於區域AR2使亮度進行提升明亮度之圖像之顯示之例。如此,作為明亮度調整圖像,藉由將與經由穿透狀態之區域AR1之使用者之視界不同之景象之圖像顯示於區域AR2,使用者即可觀看通常之
視覺所無法觀看之圖像。
另外,使照明部4執行照明動作,亦適用於進行此種攝像之情形。
此外,反之當周圍過於明亮時等,亦可考慮系統控制器10對於攝像控制部11(攝像部3、攝像信號處理部15)指示降低攝像靈敏度,或對於攝像信號處理部15或顯示圖像處理部12指示亮度位準、對比、銳利度調整等,藉此以獲得不炫目之顯示圖像信號,且使其顯示。
圖13A雖係顯示顯示部2之整面設為穿透狀態之情形,惟係設為例如使用者處於孩童入睡之灰暗臥室之情形等,幾乎為全黑無法觀看之狀況。
圖13B係為圖像顯示狀態,係系統控制器10對於攝像控制部11(攝像部3、攝像信號處理部15)指示紅外線攝像靈敏度之上升,藉此使紅外線靈敏度上升攝像之圖像顯示於區域AR2。亦即進行在灰暗之房間可確認孩童之睡容等之圖像顯示。藉此,使用者即可觀看通常之視覺所無法觀看之暗視圖像。
圖14A係顯示部2之整面設為穿透狀態之情形。
圖14B雖係顯示圖像顯示狀態,惟藉由系統控制器10對於攝像控制部11(攝像部3、攝像信號處理部15)指示紫外線攝像靈敏度之上升,而使紫外線靈敏度上升之圖像顯示於區域AR2。藉此,使用者即可觀看通常之視覺所無法觀看之呈現紫外線成分之圖像。
在以上之圖10A及圖10B、圖11A及圖11B、圖12A及圖
12B、圖13A及圖13B、以及圖14A及圖14B雖係敘述在圖4之構成中將攝像部3配置成將使用者之前方進行攝像時之例,惟圖15A、圖15B、圖15C及圖15D則係顯示將圖4之攝像部3(或圖6之攝像部3X、3Y)配置成將與使用者看見之前方方向不同之方向進行攝像時之例。
圖15A係為顯示部2之整面設為穿透狀態之情形。
攝像部3配置成例如將使用者之後方進行攝像時,圖像顯示狀態即成為如圖15B所示,而區域AR1係設為穿透狀態,且於區域AR2進行將使用者之後方進行攝像之圖像之顯示。
此外,攝像部3配置成例如將使用者之上方進行攝像時,圖像顯示狀態即成為如圖15C所示,而區域AR1係設為穿透狀態,且於區域AR2進行將使用者之上方進行攝像之圖像之顯示。
此等之情形亦為與經由穿透狀態之區域AR1之使用者之視界不同之景象之圖像顯示於區域AR2,而使用者可一面觀看通常之前方之景象,一面觀看通常之視覺所無法觀看之方向之圖像(後方圖像及上方圖像等)。
圖15D係為在圖6所示包括有複數個攝像功能部位之構成中,攝像部3X、3Y分別配置成將使用者之右後方與左後方進行攝像時之圖像顯示例。亦即,區域AR1係設為穿透狀態,且於區域AR2a、AR2b分別進行將使用者之右後方與左後方進行攝像之圖像之顯示。
此時,與經由穿透狀態之區域AR1之使用者之視界不同
之景象之圖像即顯示於區域AR2a、AR2b,而使用者除在穿透狀態之區域AR1之通常之前方之景象之外,另可看見右後方、左後方,成為大致可確認周圍全周之狀態。
至此為止雖顯示各種之顯示例,惟此等僅為一例。在本例中,係藉由控制攝像部3(3X、3Y)、攝像信號處理部15、顯示圖像處理部12、顯示驅動部13、通信部26之各處理或動作,以實現各種形態之顯示形態。
以下,茲舉在畫面上與穿透狀態之區域配合顯示之圖像信號,亦即在將顯示部2設為穿透狀態時,用以進行作為與使用者經由顯示部2看見之景象不同之景象之圖像顯示之顯示圖像信號之例。
首先,在以如圖4所示之構成將攝像部3配置成將使用者之前方進行攝像之情形(亦即將在穿透狀態下可看見之景象進行攝像之情形)中,根據由攝像部3所獲得之攝像信號之顯示圖像信號例係如下所示。
.由攝像部3之變焦動作所獲得之作為望遠變焦圖像之顯示圖像信號
.由攝像部3之變焦動作所獲得之作為廣角變焦圖像之顯示圖像信號
.由攝像部3之焦點控制動作所獲得之作為遠景圖像之顯示圖像信號
.由攝像部3之焦點控制動作所獲得之作為近景圖像之顯示圖像信號
.藉由攝像部3使攝像訊框率變更所獲得之作為高速攝
像圖像及低速攝像圖像等之顯示圖像信號
.藉由攝像信號處理部15或顯示圖像處理部12之信號處理所進行之放大處理之顯示圖像信號
.藉由攝像信號處理部15或顯示圖像處理部12之信號處理所進行之縮小處理之顯示圖像信號
.作為藉由攝像部3使攝像靈敏度上升而使明亮度提升之圖像之顯示圖像信號
.作為藉由攝像部3使攝像靈敏度降低而抑制明亮度之圖像之顯示圖像信號
.作為藉由攝像部3使紅外線攝像靈敏度上升所獲得之暗視圖像之顯示圖像信號
.作為藉由攝像部3使紫外線攝像靈敏度上升所獲得之圖像之顯示圖像信號
.作為藉由攝像部3將特定波長帶域刪除而進行攝像之圖像之顯示圖像信號
.作為藉由攝像信號處理部15或顯示圖像處理部12之信號處理使亮度上升而使明亮度提升之圖像之顯示圖像信號
.作為藉由攝像信號處理部15或顯示圖像處理部12之信號處理使亮度降低而抑制明亮度之圖像之顯示圖像信號
.作為藉由攝像信號處理部15或顯示圖像處理部12之顏色信號處理使色澤或氛圍變化之圖像之顯示圖像信號
.作為藉由攝像信號處理部15或顯示圖像處理部12之信號處理而調整對比、銳利度等之圖像之顯示圖像信號
.作為攝像信號處理部15或顯示圖像處理部12之信號處
理,作為進行馬賽克/亮度反轉/柔焦/圖像內之一部分之強調顯示/輝亮顯示等之圖像特效處理所獲得之圖像之顯示圖像信號
.藉由以上之各動作或信號處理之組合所獲得之顯示圖像信號
藉由攝像部3,將在穿透狀態中可看見之使用者正面之景象進行攝像時,係以例如此等之動作或處理來獲得顯示圖像信號,藉此,該顯示圖像信號即成為用以進行在將顯示部2設為穿透狀態時作為與使用者經由顯示部2看見之景象不同之景象之圖像顯示之信號。
當然,並不以上述所列舉者為限,藉由攝像部3之動作、攝像信號處理部15之信號處理、顯示圖像處理部12之信號處理所獲得之作為「與穿透狀態不同之景象」之顯示圖像信號係可考慮各種形態。
此外,變焦處理或放大/縮小處理之倍率、攝像靈敏度變更時之要變更之位準、於亮度信號處理或顏色信號處理之處理係數等,亦可考慮可任意變更。
另一方面,在以圖4所示之構成將攝像部3配置成將與使用者之前方不同之方向進行攝像時,根據由攝像部3所獲得之攝像信號之顯示圖像信號例係可考慮如下。
亦即,此時在攝像部3之通常攝像所獲得之攝像圖像,由於其本身已為與使用者經由穿透狀態之顯示部2而通常看見之景象不同之景象(例如後方、上方、腳下、右方、左方等之景象)之攝像圖像,因此只要將攝像圖像信號直
接作為顯示圖像信號顯示於顯示部2即可。
再者,此時如上述所列舉,亦可將施加攝像部3之攝像動作或攝像信號處理部15之信號處理、顯示圖像處理部12之信號處理之圖像信號作為顯示圖像信號。
此外,如圖6所示在包括複數個攝像功能部位時亦可同樣考慮。於複數個攝像功能部位之中,存在將前方進行攝像之攝像部3時,對於該攝像圖像信號,如上述所列舉,只要將藉由攝像部3之攝像動作或攝像信號處理部15之信號處理、在顯示圖像處理部12之信號處理而成為不同之景象之圖像信號設為顯示圖像信號即可。
此外,當存在用以將前方以外之方向進行攝像之攝像部3時,係可將其攝像圖像信號本身設為顯示圖像信號,而如上述所列舉,亦可將施加攝像部3之攝像動作、攝像信號處理部15之信號處理、顯示圖像處理部12之信號處理之圖像信號設為顯示圖像信號。
此外,具有攝像方向可變之可動式之攝像部之構成時亦相同,可將使用者之前方以外之攝像圖像、或施加攝像部3之攝像動作、攝像信號處理部15之信號處理、及在顯示圖像處理部12之信號處理之圖像信號設為顯示圖像信號。
此外,若為可動式時,亦可考慮進行追蹤特定之對象之可動控制。例如,進行對於攝像圖像信號之圖像解析,並於檢測出特定對象時,配合在攝像圖像內之特定對象之動作而變化攝像方向。藉由此種控制,使用者即可在例如區域AR2觀看要追蹤特定之對象之圖像。
在使經由通信部26所接收之外部之攝像裝置70之攝像圖像顯示之情形亦可同樣考慮。
亦即,外部之攝像裝置70之攝像圖像,由於其本身為與使用者經由穿透狀態之顯示部2而通常看見之景象不同之景象之攝像圖像,因此藉由將由通信部26所接收之圖像信號直接作為顯示圖像信號而顯示於顯示部2,即可提供給使用者各種形態之圖像。
當然,此時,如上述所列舉之中將施加顯示圖像處理部12之信號處理之圖像信號設為顯示圖像信號亦可。
例如從使用者之視界,如圖10A所示處於在競賽場從座位觀看足球賽之狀態時,雖可考慮將經由在競賽場其他場所進行攝像之攝像裝置70之影像藉由通信部26接收,而如圖10B所示顯示於顯示部2之區域AR2,惟藉由將來自例如設置於教練席附近之攝像裝置70、或裁判所裝戴之小型攝像裝置70等之影像加以接收以於顯示部2進行顯示,即可藉此更興緻盎然地進行比賽觀戰。
或是將藉由設置於旅遊勝地之攝像裝置70、或旅行中之熟人所持有之攝像裝置70所攝像之影像,以通信部26加以接收而使之顯示於顯示部2之區域AR2,或將藉由設置於航空器或衛星之攝像裝置70所攝像之地上之影像(硬拷貝(hard copy)影像),以通信部26加以接收而顯示於顯示部2之區域AR2等,可假設各種形態之例,且藉由此種顯示,使用者即可享受通常無法觀看之風景。
[5.動作觸發之例]
如上述圖9之處理所示,系統控制器10係依據在步驟F102判斷顯示開始觸發產生、或在步驟F104判斷顯示切換觸發產生而執行顯示。再者,藉由在步驟F105判斷顯示終了觸發產生而使顯示動作終了。
再者,以關於此等顯示動作之觸發而言,雖只要設為經由使用者之操作者即可,惟已敘述偵測使用者之狀況或外界之狀況,藉由特定之條件而由系統控制器10判斷觸發產生亦可。
在此,係就藉由使用者狀況或外界狀況進行觸發產生之判斷之例進行敘述。
首先,依據使用者狀況判斷觸發產生時,係令顯示裝置1設置視覺感測器、加速度感測器、陀螺儀(gyro)、生物體感測器等以作為動作觸發資訊產生部16。
視覺感測器雖係設為檢測關於使用者之視覺之資訊者,惟此視覺感測器作為一例而言,係可藉由配置於例如顯示部2之附近並設為將使用者之眼部進行攝像之攝像部所形成。再者,藉由由系統控制器10將該攝像部所攝像之使用者之眼部之圖像加以取入以進行圖像解析,即可檢測視線方向、焦點距離、瞳孔之打開情形、眼底圖案、眼簾之開閉等,且根據此而可判斷使用者之狀況或意志。
或者視覺感測器係可藉由配置於顯示部2之附近並將光照射至使用者之眼部之發光部、及接收來自眼部之反射光之受光部所形成。例如,藉由從受光信號偵測使用者之水晶體之厚度,即可檢測使用者之眼睛之焦點距離。
藉由檢測使用者之視線方向,系統控制器10係可判定例如在顯示於顯示部2之圖像中使用者所注目之部分。
此外,系統控制器10亦可將使用者之視線方向辨識作為操作輸入。例如將使用者左右移動視線,設為對於顯示裝置1要求之特定之操作輸入等。
藉由檢測使用者之焦點距離,即可判別使用者所注目之景象是遠方還是附近,且依據此即可進行變焦控制、放大/縮小控制、焦點變更控制等。例如,使用者觀看遠處時進行望遠顯示等。
只要檢測出使用者之瞳孔之打開情況,若為穿透狀態則可判定周圍之明亮度之狀態,此外若為監控顯示狀態則可判定使用者對於所顯示之圖像所感到之炫目等,且可依據此而進行亮度調整、攝像靈敏度調整等。
使用者之眼底圖案之檢測係可使用於例如使用者之個人認證。由於眼底圖案為各人固有之圖案,因此可藉由眼底圖案判定裝戴之使用者,且進行適合該使用者之控制,或可進行僅令特定之使用者執行顯示動作等之控制。
藉由檢測使用者之眼簾之開閉動作,即可判定使用者所感受之眼簾或眼睛之疲勞。此外,亦可將眼簾之開閉識別作為使用者之意識性之操作輸入。例如將使用者眨眼3次判定作為特定之操作輸入等。
加速度感測器、及陀螺儀係將與使用者之動作對應之信號予以輸出。例如加速度感測器係檢測直線方向之動作,適用於藉由陀螺儀檢測旋轉系統之動作或振動時。
雖因加速度感測器或陀螺儀之配置位置而有所不同,惟藉由加速度感測器或陀螺儀亦可檢測使用者之身體全體或身體之各部之動作。
例如安裝於如圖1A及圖1B所示之眼鏡型之顯示裝置1之內部時,換言之加速度感測器及陀螺儀設為檢測使用者之頭部之動作者時,加速度感測器之檢測資訊成為作為使用者之頭部或全身之動作之加速度資訊,此外,陀螺儀之檢測資訊則成為作為使用者之頭部或全身之動作之角速度或振動之資訊。
藉此,即可偵測使用者從頸部移動頭部之動作。例如可判定朝上方之狀態或朝下方之狀態。所謂朝下方時亦可判斷為使用者在讀書等觀看附近。反之朝上方時,則亦可判斷為觀看遠方。
此外,系統控制器10亦可一檢測出使用者從頸部移動頭部之動作,即將其辨識為使用者之意識性之操作。例如只要向左擺頭2次,就將其視為特定之操作輸入等。
此外,藉由加速度感測器及陀螺儀,亦可判斷使用者是靜止狀態(非步行狀態)、還是步行狀態、或是行進狀態等。此外,亦可檢測從站著狀態到坐下時,或起身時等。
此外,加速度感測器或陀螺儀係與裝戴於頭部之裝戴單元另外設置,且只要安裝於手腕或腳,即亦可檢測僅有手腕之動作、僅有腳之動作。
生物體感測器雖係檢測例如心跳資訊(心率)、脈搏資訊(脈搏數)、出汗資訊、腦波資訊(例如α波、β波、θ波、δ波
之資訊)、或皮膚電性反應、體溫、血壓、呼吸活動(例如呼吸之速度、深度、換氣量等)等以作為使用者之生物體資訊,惟系統控制器10係可由該等資訊判定使用者處於緊張狀態或興奮狀態、或處於情緒性穩定之狀態、或處於舒適之狀態還是不舒適之狀態等。
此外,使用者裝戴顯示裝置1之檢測,亦可依據生物體資訊。例如,系統控制器10係於使用者未裝戴顯示裝置1時,控制成僅進行生物體資訊檢測之等待(standby)狀態,且亦可進行只要依據生物體資訊一偵測到使用者裝戴顯示裝置1,就設為電源導通狀態、或反之只要使用者一卸除顯示裝置1之裝戴,則回復到等待狀態等之控制。
再者,依據生物體感測器之檢測資訊亦可利用在使用者之個人認證(裝戴者個人之辨識)。
另外,生物體感測器係可設成例如配置於眼鏡型之顯示裝置1之裝戴框體內側,藉此而在例如使用者之側頭部或後頭部檢測上述資訊,而與顯示裝置1之裝戴框體部分另外裝戴於身體之特定部位亦可。
接著,在偵測外界之狀況時,顯示裝置1係作為用以取得外界資訊之構成,於動作觸發資訊產生部16設置周圍環境感測器、攝像對象感測器、GPS(Global Position System,全球定位系統)接收部、時間日期計數部、圖像解析部,或利用通信部26。
以周圍環境感測器而言,係假設照度感測器、溫度感測器、溼度感測器、氣壓感測器等。
依據照度感測器,可檢測顯示裝置1之周圍之明亮度之資訊。
此外,依據溫度感測器、溼度感測器、氣壓感測器,係可獲得判別溫度、溼度、氣壓或天候之資訊。
藉由此等周圍環境感測器,顯示裝置1係可判定周圍之明亮度或戶外情形之氣象狀況等,因此系統控制器10係使用此等作為外界資訊,而可執行控制適於周圍之明亮度或氣象狀況之顯示圖像信號之產生動作。例如,依據周圍之明亮度而使圖像之亮度位準上升下降,或依據天候狀況而改變圖像之氛圍等。
攝像對象感測器係檢測關於攝像對象之資訊。可考慮例如測距感測器或焦電感測器(pyroelectric sensor)等,可獲得與攝像對象之距離、或判定攝像對象本身之資訊。
藉由檢測至攝像對象為止之距離,系統控制器10即可執行控制與距離對應之攝像動作、顯示動作。此外,藉由檢測攝像對象為人等之生物體,即可執行控制與攝像對象對應之顯示圖像信號之產生動作。
GPS接收部係取得作為目前位置之緯度、經度之資訊。檢測出緯度/經度時,藉由參照地圖資料庫等,即可獲得目前位置之地點(地點附近)之資訊。例如作為系統控制器10可參照之記錄媒體,例如搭載HDD(Hard Disk Drive,硬碟驅動器)或快閃記憶體(flash memory)等較大容量之記錄媒體,且藉由將地圖資料庫記憶於此等記錄媒體,而可取得與目前位置相關之資訊。
此外,具有通信部26之構成時,即使於顯示裝置1未內建地圖資料庫,而經由通信部26存取例如網路伺服器或地圖資料庫內建機器,並傳送緯度/經度並要求與目前位置對應之資訊,而接收資訊亦可。
以與目前位置相關之資訊而言,係有目前位置附近之地名、建築物名稱、設施名稱、店名、車站名稱等之名稱資訊。
此外,以與目前位置相關之資訊而言,係亦有公園、主題樂園(theme park)、音樂廳(concert hall)、劇場、電影院、運動設施等,顯示建築物種類之資訊。
此外,以與目前位置相關之資訊而言,係亦有海岸、海上、河川、山間、山頂、森林、湖泊、平原等,自然物之種類或名稱之資訊。
此外,作為關於更詳細之位置之資訊,亦可取得例如在主題樂園內之區域、或在棒球場、足球場等之觀眾席之區域、在音樂廳之座位之區域之資訊等作為關於目前位置之資訊。
藉由取得此等關於目前位置之資訊,系統控制器10即可執行控制與目前位置或目前地點附近之地理條件或設施等對應之顯示圖像信號之產生動作,或在特定之場所進行顯示開始控制或顯示終了控制等。
日期時間計數部係例如計數年月日時分秒。藉由此日期時間計數部,系統控制器10即可辨識目前時刻、日夜之別、月、季節等。因此,可執行控制例如與日夜之別(時
刻)對應之顯示圖像信號之產生動作、或適於目前之季節之顯示圖像信號之產生動作等。
只要設置解析攝像圖像之圖像解析部,即可從攝像圖像檢測關於攝像對象之以下之各種資訊。
首先,以攝像對象之種類而言,可判別包含於攝像圖像之人物、動物、自然物、建築物、機器等。例如以動物而言,係可判別作為被攝體進行鳥之攝像之狀況或進行貓之攝像之狀況等。此外,以自然物而言,係可判別海、山、樹木、河川、湖泊、天空、太陽、月亮等。以建築物而言,係可判別房屋、樓房、競技場等。以機器而言,係可判別個人電腦、AV(Audio—Visual,音訊視訊)機器、攜帶型電話、PDA、IC卡、二維條碼等作為攝像對象之狀況。
此等攝像對象之種類係可預先設定各種類之形狀之特徵,且可藉由於攝像圖像內是否包含有所屬形狀之被攝體而進行判別。
此外,依據圖像解析部之圖像解析,藉由圖像之前後訊框之差分檢測等之方法,在圖像內亦可檢測被攝體之動作,例如快速之動作。例如在運動觀戰中進行選手攝像之際,或在進行行進中汽車等攝像時等,可檢測正進行動作迅速之被攝體攝像之狀況。
此外,依據圖像解析部之圖像解析,亦可判定周圍之狀況。例如,可判定因為日夜或天候之明亮度之狀況,亦可辨識雨之強度等。
此外,依據根據圖像解析部之圖像解析,於人物作為被
攝體時,亦可從該人物之臉部來進行特定人物個人之判別。已為一般所知,人物之臉部係可作為臉部之構成要素之相對位置資訊而予以個人特徵資料化。例如,眼睛之中心與鼻之距離EN與眼睛之間隔之距離Ed之比(Ed/EN)、或眼睛之中心與口之距離EM與眼睛之間隔之距離Ed之比(Ed/EM)係依每個人而特有,同時不會因為髮型或眼鏡等之裝戴物等之外觀上之變化而受到影響之資訊。再者,亦不會由於年齡增長而變化亦為一般所知。
因此,圖像解析部係當攝像圖像內包含有某人物之臉部時,只要解析該圖像,即可檢測上述之個人特徵資料。
從攝像圖像檢測出個人特徵資料時,例如作為系統控制器10可參照之記錄媒體,例如只要搭載HDD(Hard Disk Drive,硬碟驅動器)或快閃記憶體等,先將人物資料庫記憶於此等記錄媒體,即可取得作為被攝體之個人之資訊。或是,即使在顯示裝置1不內建人物資料庫,經由通信部26存取例如網路伺服器或人物資料內建機器,傳送個人特徵資料並要求資訊,而接收特定之人物之資訊亦可。
例如,只要使用者本身將過去遇見之人物之姓氏或所屬等之人物資訊與個人特徵資料一起先登錄在人物資料庫,則在遇見某人物時(被攝像時),系統控制器10即可檢索該人物之資訊。
此外,只要有準備將有名人士之資訊與個人特徵資料一起登錄之人物資料庫,則使用者遇見有名人士時,即可檢索該人物之資訊。
根據此種藉由圖像解析部之檢測資訊,系統控制器10即可執行控制與攝像對象對應之顯示圖像信號之產生處理。例如,特定之對象或特定之人物被攝像時,可考慮產生將該特定之對象予以輝亮顯示之顯示圖像信號等。
依據通信部26,即可取得各種形態之資訊以作為外界資訊。
例如上述所示可取得依據從顯示裝置1所傳送之緯度/經度、或個人特徵資料等而由外部機器所檢索之資訊。
此外,亦可從外部機器取得天候資訊、氣溫資訊、溫度資訊等與氣象相關之資訊。
此外,從外部機器可取得設施之利用資訊、在設施內之攝像禁止/許可資訊、諮詢資訊等。
此外,可取得外部機器本身之識別資訊。例如在特定之通信協定中被識別作為網路元件之機器之種類或機器ID等。
此外,可取得存放於外部機器之圖像資料、在外部機器再生或顯示之圖像資料、在外部機器接收之圖像資料等。
根據此種在通信部26可取得之資訊,系統控制器10即可執行控制顯示圖像信號之產生處理。
藉由設置以上所述例子之構成要素作為動作觸發資訊產生部16,且檢測使用者之狀況或外界之狀況,而進行與該等狀況對應之顯示開始/結束、或顯示切換(顯示內容之變更或區域形態之切換),即使使用者不操作,亦可實現適當或具有趣味之顯示動作。
此外,用以檢測使用者之狀況或外界之狀況之構成例亦可考慮其他。
[6.實施形態之效果、變形例及擴張例]
以上雖說明實施形態,惟依據實施形態,在將顯示部2之畫面區域之一部分設為穿透狀態之後執行依據顯示圖像信號之顯示,藉此,使用者在藉由穿透狀態之區域而可觀看通常之視覺景象之狀態下,仍可觀看與通常看見之視覺景象不同之景象之圖像。例如,可藉由穿透狀態區域一面觀看前方,一面依據顯示圖像信號之顯示而觀看望遠圖像、放大圖像、特殊攝像圖像、後方之景象之圖像等。因此,即成為與通常之視覺景象同時,觀看通常之視覺所無法觀看之景象之狀態,而可虛擬地作出使使用者之視覺能力擴張之狀況。
此外,顯示部2至少畫面區域之一部分係為穿透狀態,因此即使是裝戴狀態,仍然不會對通常之生活造成障礙。因此,在使用者之通常之生活之中,可有效獲得顯示裝置1之優點。
顯示裝置1之外觀或構成並不以圖1A及圖1B、圖2A及圖2B、圖4、圖5、圖6之例為限,而可考慮各種之變形例。
例如,設置將由攝像部3所攝像之圖像信號記錄於記錄媒體之儲存(storage)部亦可。
此外,亦可進行將所攝像之圖像信號從通信部26傳送到其他機器之動作。
設置儲存部時,將在儲存部從記錄媒體再生之再生圖像
作為顯示圖像信號顯示於顯示部2亦可。
以從記錄媒體再生之資料而言,係假設例如電影或視訊片段(video clip)等之動態圖像內容、由數位靜態相機等攝像而記錄於記錄媒體之靜態圖像內容、電子書籍等之資料、使用者藉由個人電腦等所作成而記錄於記錄媒體之圖像資料、文字(text)資料、試算表資料等之電腦使用之資料、根據記錄於記錄媒體之遊戲程式之遊戲圖像等、記錄於記錄媒體而成為顯示對象之所有資料。
此外,通信部26亦可考慮接收從外部之內容來源機器所提供之圖像(動態圖像/靜態圖像)而顯示於顯示部2,而非僅接收來自外部之攝像裝置70之圖像信號。
所謂內容來源機器係指可假設例如視訊機器、電視調諧器、家用伺服器(home server)機器等之AV(Audio—Visual,音訊視訊)機器、或個人電腦、PDA(Personal Digital Assistant,個人數位助理)、攜帶電話機等之資訊處理裝置等。此種內容來源機器亦可為使用顯示裝置1之使用者本人或其熟人所具有之機器,或亦可為進行各種內容提供之公共或服務企業等之伺服器機器等,可考慮各種形態。
以從內容來源機器傳送至顯示裝置1之資料而言,係假設例如電影或視訊片段等之動態圖像內容、由數位靜態相機等攝像而記錄於記錄媒體之靜態圖像內容、電子書籍等之資料、使用者藉由個人電腦等所作成之圖像資料、文字資料、試算表資料等之電腦使用之資料、遊戲圖像等,作為顯示對象之所有資料。
此外,於攝像時設置將周圍聲音加以集中之麥克風、或將聲音予以輸出之耳機型等之揚聲器部亦可。
此外,亦可考慮設置辨識圖像內之文字之文字辨識部、進行聲音合成處理之聲音合成部,而於攝像圖像含有文字時,藉由聲音合成部,產生該朗讀聲音之聲音信號,而從揚聲器部輸出。
此外,顯示圖像信號作為靜態圖像亦可。例如藉由攝像部3進行靜態圖像攝像特定之觸發之時序,而將該攝像之靜態圖像顯示於顯示部2。
此外,雖已敘述具有眼鏡型或頭部裝戴型之裝戴單元之例作為顯示裝置1,惟本發明之顯示裝置只要構成為在使用者之眼前可進行顯示即可,例如耳機型、頸帶(neck band)形態、耳掛式等,可以是任何裝戴單元裝戴於使用者者。再者,藉由將夾鉗(clip)等之安裝具安裝於例如通常之眼鏡或護目鏡(visor)、或耳機等而裝戴於使用者之任何形態亦可。
綜上所述,依據本發明,係將顯示機構之畫面區域之一部分設為穿透狀態之後,使顯示機構執行由圖像信號產生機構所產生之顯示圖像信號,藉此,使用者在藉由穿透狀態之區域觀看通常之視覺景象之狀態下,仍然可觀看與通常看見之視覺景象不同之景象之圖像,而具有可擬似性作出使使用者之視覺能力擴張之狀況之效果。
此外,顯示機構至少畫面區域之一部分係為穿透狀態,因此可使在裝戴狀態之狀態下亦不致對通常之生活造成障
礙。因此,在使用者之通常之生活中,可有效獲得本發明之顯示裝置之優點。
1‧‧‧顯示裝置
2‧‧‧顯示部
3‧‧‧攝像部
4‧‧‧照明部
10‧‧‧系統控制器
11‧‧‧攝像控制部
12‧‧‧顯示圖像處理部
13‧‧‧顯示驅動部
14‧‧‧顯示控制部
15‧‧‧攝像信號處理部
16‧‧‧動作觸發資訊產生部
26‧‧‧通信部
F101‧‧‧將顯示部控制為全部穿透狀態
F102‧‧‧是否有顯示開始觸發?
F103‧‧‧在顯示部之一部分進行圖像之顯示開始控制
F104‧‧‧是否有顯示切換觸發?
F105‧‧‧是否有顯示終了觸發?
F106‧‧‧顯示切換控制
圖1A及圖1B係為本發明之實施形態之顯示裝置之外觀例之說明圖,圖2A及圖2B係為實施形態之顯示裝置之另一外觀例之說明圖,圖3A、圖3B及圖3C係為實施形態之顯示裝置之與外部機器之關係之說明圖,圖4係為實施形態之顯示裝置之區塊圖,圖5係為實施形態之顯示裝置之另一區塊圖,圖6係為實施形態之顯示裝置之又另一區塊圖,圖7A、圖7B、圖7C、圖7D、圖7E及圖7F係為實施形態之顯示部之區域形態之說明圖,圖8A、圖8B、圖8C及圖8D係為實施形態之顯示部之區域形態之說明圖,圖9係為實施形態之控制處理之流程圖,圖10A及圖10B係為實施形態之圖像顯示狀態之說明圖,圖11A及圖11B係為實施形態之圖像顯示狀態之說明圖,圖12A及圖12B係為實施形態之圖像顯示狀態之說明圖,圖13A及圖13B係為實施形態之圖像顯示狀態之說明圖,圖14A及圖14B係為實施形態之圖像顯示狀態之說明圖,圖15A、圖15B、圖15C及圖15D係為實施形態之圖像顯示狀態之說明圖。
1‧‧‧顯示裝置
2‧‧‧顯示部
3a‧‧‧攝像透鏡
4a‧‧‧發光部
Claims (21)
- 一種顯示裝置,其包括:第1顯示機構,其配置成位於使用者之一隻眼睛前方以於第1畫面區域進行圖像顯示,及使整個第1畫面區域成為穿透狀態;第2顯示機構,其配置成位於上述使用者之另一隻眼睛前方且不同於上述第1顯示機構,以使整個第2畫面區域成為上述穿透狀態,該穿透狀態對應於上述第1畫面區域與上述第2畫面區域之透明或半透明狀態、及上述使用者之眼睛看到無圖像景象之狀態;圖像信號產生機構,其在使上述第1或第2顯示機構成為上述穿透狀態時,產生與上述使用者經由上述第1或第2顯示機構所看見之上述景象不同之景象之顯示圖像信號;及控制機構,其基於外界資訊以控制上述第2顯示機構之上述第2畫面區域成為上述穿透狀態,及基於上述外界資訊以控制上述第1顯示機構將上述第1畫面區域從上述穿透狀態轉變為非穿透狀態且依據由上述圖像信號產生機構所產生之上述顯示圖像信號執行顯示以顯示該圖像於成為上述非穿透狀態之上述第1畫面區域,藉此,成為上述非穿透狀態之上述第1畫面區域上所顯示之上述圖像被表現至上述使用者之上述一隻眼睛,且成為上述穿透狀態之上述第2畫面區域被表現至上述使用者之上述另一隻眼睛。
- 如請求項1之顯示裝置,其中上述圖像信號產生機構具有:攝像部;及信號處理部,其對於由上述攝像部所獲得之攝像圖像信號進行信號處理。
- 如請求項2之顯示裝置,其中上述攝像部係配置成如下之攝像部:在使上述第2畫面區域成為上述穿透狀態之際,以使用者經由上述第2顯示機構看見之方向為被攝體方向而進行攝像之攝像部。
- 如請求項2之顯示裝置,其中上述攝像部係配置成如下之之攝像部:在使上述第2畫面區域成為上述穿透狀態之際,以與使用者經由上述第2顯示機構看見之方向不同之方向為被攝體方向而進行攝像之攝像部。
- 如請求項2之顯示裝置,其中上述攝像部係以被攝體方向為可變之攝像部。
- 如請求項1之顯示裝置,其中上述圖像信號產生機構具有從外部機器接收圖像信號之接收部。
- 如請求項1之顯示裝置,其中上述圖像信號產生機構具有對於所供給之圖像信號進行信號處理之信號處理部。
- 如請求項1之顯示裝置,其中 上述顯示圖像信號係由近景攝像或遠景攝像所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係由望遠攝像或廣角攝像所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係由放大處理或縮小處理所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係由使攝像靈敏度上升或下降之攝像所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係由使紅外線攝像靈敏度上升之攝像所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係由使紫外線攝像靈敏度上升之攝像所獲得之圖像信號。
- 如請求項1之顯示裝置,其中上述顯示圖像信號係如下之圖像信號:由使上述第2畫面區域成為上述穿透狀態之際,以與使用者經由上述第2顯示機構看見之方向不同之方向為被攝體方向之攝像所獲得之圖像信號。
- 如請求項2之顯示裝置,其中上述圖像信號產生機構藉由上述攝像部控制攝像透鏡 系統之動作,在使上述第2顯示機構成為上述穿透狀態時,獲得作為與使用者所看見之上述景象不同之景象之顯示圖像信號。
- 如請求項2之顯示裝置,其中上述圖像信號產生機構藉由上述信號處理部之信號處理,在使上述第2顯示機構成為上述穿透狀態時,獲得作為與使用者所看見之上述景象不同之景象之顯示圖像信號。
- 如請求項6之顯示裝置,其中上述圖像信號產生機構藉由以上述接收部接收由外部之攝像裝置所攝像之圖像信號,在使上述第2顯示機構成為上述穿透狀態時,獲得作為與使用者所看見之上述景象不同之景象之顯示圖像信號。
- 如請求項1之顯示裝置,其中進一步包括取得上述外界資訊之外界資訊取得機構;上述控制機構根據從上述外界資訊取得機構所獲得之上述外界資訊而使上述顯示圖像信號顯示於上述第1顯示機構。
- 如請求項18之顯示裝置,其中上述控制機構根據從上述外界資訊取得機構所獲得之上述外界資訊而控制使上述顯示圖像信號顯示之上述第1畫面區域。
- 一種顯示方法,其係作為顯示裝置之顯示方法,而該顯示裝置係包括配置成位於使用者之一隻眼睛前方以於第 1畫面區域進行圖像顯示,及使整個第1畫面區域成為穿透狀態之第1顯示機構;及配置成位於上述使用者之另一隻眼睛前方且不同於上述第1顯示機構,以使整個第2畫面區域成為上述穿透狀態之第2顯示機構;且上述顯示方法包括以下步驟:使上述第1或第2顯示機構成為上述穿透狀態時,產生與上述使用者經由上述述第1或第2顯示機構看見之景象不同之景象之顯示圖像信號,上述穿透狀態對應於上述第1畫面區域與上述第2畫面區域之透明或半透明狀態、及上述使用者之眼睛看到無圖像景象之狀態;及基於外界資訊控制上述第2顯示機構之上述第2畫面區域成為上述穿透狀態,並基於上述外界資訊控制上述第1顯示機構將上述第1畫面區域從上述穿透狀態轉變為非穿透狀態且依據上述所產生之顯示圖像信號執行顯示以顯示上述圖像於成為上述非穿透狀態之上述第1畫面區域,藉此,成為上述非穿透狀態之上述第1畫面區域上所顯示之上述圖像被表現至上述使用者之上述一隻眼睛,且成為上述穿透狀態之上述第2畫面區域被表現至上述使用者之上述另一隻眼睛。
- 一種顯示裝置,其包括:第1顯示器,其配置於使用者之一隻眼睛前方,構成為於第1畫面區域顯示圖像,並構成為使整個第1畫面區域成為穿透狀態;第2顯示器,其配置於上述使用者之另一隻眼睛前方 且不同於上述第1顯示器,構成為使整個第2畫面區域成為上述穿透狀態,該穿透狀態對應於上述第1畫面區域與上述第2畫面區域之透明或半透明狀態、及上述使用者之眼睛看到無圖像景象之狀態;圖像信號產生器,其構成為在使上述第1顯示器或第2顯示器成為上述穿透狀態時,產生與上述使用者經由上述第1顯示器或第2顯示器所看見之上述景象不同之景象之顯示圖像信號;及控制器,其構成為基於外界資訊來控制上述第2顯示器之上述第2畫面區域成為上述穿透狀態,及基於上述外界資訊來控制上述第1顯示器將上述第1畫面區域從上述穿透狀態轉變為非穿透狀態且依據由上述圖像信號產生器所產生之上述顯示圖像信號執行顯示以顯示該圖像於成為上述非穿透狀態之上述第1畫面區域,藉此,成為上述非穿透狀態之上述第1畫面區域上所顯示之上述圖像被表現至上述使用者之上述一隻眼睛,且成為上述穿透狀態之上述第2畫面區域被表現至上述使用者之上述另一隻眼睛。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006281042A JP5228307B2 (ja) | 2006-10-16 | 2006-10-16 | 表示装置、表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200834536A TW200834536A (en) | 2008-08-16 |
TWI428903B true TWI428903B (zh) | 2014-03-01 |
Family
ID=39314102
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW096138062A TWI428903B (zh) | 2006-10-16 | 2007-10-11 | A display device and a display method thereof |
Country Status (8)
Country | Link |
---|---|
US (4) | US8681256B2 (zh) |
EP (1) | EP2081182B1 (zh) |
JP (1) | JP5228307B2 (zh) |
KR (1) | KR20090069335A (zh) |
CN (2) | CN101542584A (zh) |
CA (1) | CA2666692C (zh) |
TW (1) | TWI428903B (zh) |
WO (1) | WO2008047889A1 (zh) |
Families Citing this family (103)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5119636B2 (ja) | 2006-09-27 | 2013-01-16 | ソニー株式会社 | 表示装置、表示方法 |
JP5017989B2 (ja) | 2006-09-27 | 2012-09-05 | ソニー株式会社 | 撮像装置、撮像方法 |
JP5228307B2 (ja) * | 2006-10-16 | 2013-07-03 | ソニー株式会社 | 表示装置、表示方法 |
JP2008096868A (ja) | 2006-10-16 | 2008-04-24 | Sony Corp | 撮像表示装置、撮像表示方法 |
US8786675B2 (en) * | 2008-01-23 | 2014-07-22 | Michael F. Deering | Systems using eye mounted displays |
US9812096B2 (en) | 2008-01-23 | 2017-11-07 | Spy Eye, Llc | Eye mounted displays and systems using eye mounted displays |
WO2009094587A1 (en) * | 2008-01-23 | 2009-07-30 | Deering Michael F | Eye mounted displays |
DE102008049407A1 (de) * | 2008-09-29 | 2010-04-01 | Carl Zeiss Ag | Anzeigevorrichtung und Anzeigeverfahren |
USRE45394E1 (en) | 2008-10-20 | 2015-03-03 | X6D Limited | 3D glasses |
US9480919B2 (en) * | 2008-10-24 | 2016-11-01 | Excalibur Ip, Llc | Reconfiguring reality using a reality overlay device |
JP5651386B2 (ja) * | 2010-06-23 | 2015-01-14 | ソフトバンクモバイル株式会社 | 眼鏡型表示装置 |
JP5700963B2 (ja) * | 2010-06-29 | 2015-04-15 | キヤノン株式会社 | 情報処理装置およびその制御方法 |
US20120026191A1 (en) * | 2010-07-05 | 2012-02-02 | Sony Ericsson Mobile Communications Ab | Method for displaying augmentation information in an augmented reality system |
JP5499985B2 (ja) * | 2010-08-09 | 2014-05-21 | ソニー株式会社 | 表示装置組立体 |
US9510765B2 (en) * | 2010-11-24 | 2016-12-06 | Awear Technologies, Llc | Detection and feedback of information associated with executive function |
JP5953714B2 (ja) * | 2011-11-24 | 2016-07-20 | セイコーエプソン株式会社 | 装置、頭部装着型表示装置、装置の制御方法および頭部装着型表示装置の制御方法 |
US9081416B2 (en) | 2011-03-24 | 2015-07-14 | Seiko Epson Corporation | Device, head mounted display, control method of device and control method of head mounted display |
CN102693068B (zh) * | 2011-03-25 | 2014-10-22 | 京东方科技集团股份有限公司 | 一种视觉扩展显示设备和方法 |
CA2750287C (en) | 2011-08-29 | 2012-07-03 | Microsoft Corporation | Gaze detection in a see-through, near-eye, mixed reality display |
US9213163B2 (en) | 2011-08-30 | 2015-12-15 | Microsoft Technology Licensing, Llc | Aligning inter-pupillary distance in a near-eye display system |
JP6144681B2 (ja) * | 2011-08-30 | 2017-06-07 | マイクロソフト テクノロジー ライセンシング,エルエルシー | 虹彩スキャン・プロファイリング機能を有する頭部装着ディスプレイ |
US9025252B2 (en) | 2011-08-30 | 2015-05-05 | Microsoft Technology Licensing, Llc | Adjustment of a mixed reality display for inter-pupillary distance alignment |
KR20220032059A (ko) * | 2011-09-19 | 2022-03-15 | 아이사이트 모빌 테크놀로지 엘티디 | 증강 현실 시스템용 터치프리 인터페이스 |
US8941560B2 (en) | 2011-09-21 | 2015-01-27 | Google Inc. | Wearable computer with superimposed controls and instructions for external device |
JP6105850B2 (ja) * | 2012-03-16 | 2017-03-29 | 富士通株式会社 | 携帯端末装置、表示制御方法及び表示制御プログラム |
JP6008086B2 (ja) * | 2012-03-26 | 2016-10-19 | セイコーエプソン株式会社 | 頭部装着型表示装置 |
US9671566B2 (en) | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US9219901B2 (en) * | 2012-06-19 | 2015-12-22 | Qualcomm Incorporated | Reactive user interface for head-mounted display |
JP5694257B2 (ja) * | 2012-08-27 | 2015-04-01 | 株式会社東芝 | 表示装置、表示方法及びプログラム |
US10620902B2 (en) * | 2012-09-28 | 2020-04-14 | Nokia Technologies Oy | Method and apparatus for providing an indication regarding content presented to another user |
US9894269B2 (en) | 2012-10-31 | 2018-02-13 | Atheer, Inc. | Method and apparatus for background subtraction using focus differences |
JP6040715B2 (ja) | 2012-11-06 | 2016-12-07 | ソニー株式会社 | 画像表示装置及び画像表示方法、並びにコンピューター・プログラム |
EP2922049A4 (en) * | 2012-11-13 | 2016-07-13 | Sony Corp | PICTURE DISPLAY DEVICE AND PICTURE DISPLAY METHOD, MOBILE BODY DEVICE, PICTURE DISPLAY SYSTEM AND COMPUTER PROGRAM |
JP6023568B2 (ja) * | 2012-11-30 | 2016-11-09 | オリンパス株式会社 | 頭部装着型装置 |
CN103024582B (zh) * | 2012-12-26 | 2016-09-21 | 深圳Tcl新技术有限公司 | 多屏显示控制方法及多屏显示装置 |
JP6375591B2 (ja) * | 2013-01-15 | 2018-08-22 | セイコーエプソン株式会社 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム |
JP6333801B2 (ja) * | 2013-02-19 | 2018-05-30 | ミラマ サービス インク | 表示制御装置、表示制御プログラム、および表示制御方法 |
IL298018B2 (en) | 2013-03-11 | 2024-04-01 | Magic Leap Inc | System and method for augmentation and virtual reality |
EP2973532A4 (en) | 2013-03-15 | 2017-01-18 | Magic Leap, Inc. | Display system and method |
US9819627B2 (en) | 2013-07-01 | 2017-11-14 | Paypal, Inc. | Location restricted message exchange system |
JP6252002B2 (ja) * | 2013-07-11 | 2017-12-27 | セイコーエプソン株式会社 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
CN104427226B (zh) * | 2013-08-20 | 2018-08-31 | 联想(北京)有限公司 | 图像采集方法和电子设备 |
KR102081934B1 (ko) * | 2013-08-28 | 2020-02-26 | 엘지전자 주식회사 | 헤드 마운트 디스플레이 디바이스 및 그 제어 방법 |
KR20150045637A (ko) * | 2013-10-21 | 2015-04-29 | 삼성전자주식회사 | 사용자 인터페이스 운용 방법 및 그 전자 장치 |
US9772495B2 (en) * | 2013-11-04 | 2017-09-26 | Weng-Kong TAM | Digital loupe device |
US9672649B2 (en) | 2013-11-04 | 2017-06-06 | At&T Intellectual Property I, Lp | System and method for enabling mirror video chat using a wearable display device |
JP6264014B2 (ja) * | 2013-12-17 | 2018-01-24 | セイコーエプソン株式会社 | 頭部装着型表示装置 |
US9436367B2 (en) * | 2013-12-18 | 2016-09-06 | Flir Systems Ab | Processing an infrared (IR) image based on swipe gestures |
US9993335B2 (en) | 2014-01-08 | 2018-06-12 | Spy Eye, Llc | Variable resolution eye mounted displays |
CN106030692B (zh) * | 2014-02-20 | 2019-11-15 | 索尼公司 | 显示控制装置、显示控制方法及计算机程序 |
JP2015159383A (ja) * | 2014-02-21 | 2015-09-03 | ソニー株式会社 | ウェアラブル機器、制御装置、撮影制御方法および自動撮像装置 |
USD817353S1 (en) * | 2014-03-07 | 2018-05-08 | Sony Corporation | Display panel or screen with an icon |
CN103929606B (zh) * | 2014-04-01 | 2017-10-10 | 北京智谷睿拓技术服务有限公司 | 图像呈现控制方法及图像呈现控制装置 |
CN106464797B (zh) * | 2014-06-03 | 2019-06-11 | 索尼公司 | 获得标记有修正的图像方向的数字图像的方法和电子装置 |
KR101652475B1 (ko) * | 2014-06-11 | 2016-08-30 | 안병영 | 후방 영상이 나타나는 안경 |
KR102217561B1 (ko) * | 2014-06-23 | 2021-02-19 | 엘지전자 주식회사 | 헤드 마운티드 디스플레이 및 그것의 제어방법 |
JP6638195B2 (ja) * | 2015-03-02 | 2020-01-29 | セイコーエプソン株式会社 | 表示装置、表示装置の制御方法、および、プログラム |
US9959591B2 (en) * | 2014-07-31 | 2018-05-01 | Seiko Epson Corporation | Display apparatus, method for controlling display apparatus, and program |
JP2016033763A (ja) * | 2014-07-31 | 2016-03-10 | セイコーエプソン株式会社 | 表示装置、表示装置の制御方法、および、プログラム |
KR102337509B1 (ko) * | 2014-08-29 | 2021-12-09 | 삼성전자주식회사 | 컨텐츠 제공 방법 및 그 전자 장치 |
US9495004B2 (en) * | 2014-09-08 | 2016-11-15 | Qualcomm Incorporated | Display device adjustment by control device |
JP6501389B2 (ja) * | 2014-12-01 | 2019-04-17 | 浅田 一憲 | ヘッドマウントディスプレイ装置、撮影制御方法、及びプログラム |
US10379357B2 (en) * | 2015-01-08 | 2019-08-13 | Shai Goldstein | Apparatus and method for displaying content |
JP2016191845A (ja) | 2015-03-31 | 2016-11-10 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
US9811681B2 (en) * | 2015-07-28 | 2017-11-07 | Sony Mobile Communications Inc. | Method and system for providing access to a device for a user |
JP6679856B2 (ja) * | 2015-08-31 | 2020-04-15 | カシオ計算機株式会社 | 表示制御装置、表示制御方法及びプログラム |
EP3185535A1 (en) * | 2015-12-22 | 2017-06-28 | Thomson Licensing | Method and apparatus for controlling a discrepant aiming direction of a camera |
US10976809B2 (en) * | 2016-03-14 | 2021-04-13 | Htc Corporation | Interaction method for virtual reality |
JP2017182130A (ja) * | 2016-03-28 | 2017-10-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
KR102595020B1 (ko) | 2016-05-03 | 2023-10-27 | 엘지전자 주식회사 | 헤드마운티드 디스플레이 |
AU2017301435B2 (en) | 2016-07-25 | 2022-07-14 | Magic Leap, Inc. | Imaging modification, display and visualization using augmented and virtual reality eyewear |
EP3296792A1 (en) * | 2016-09-19 | 2018-03-21 | Essilor International | Method for managing the display of an image to a user of an optical system |
EP3316117A1 (en) * | 2016-10-31 | 2018-05-02 | Nokia Technologies OY | Controlling content displayed in a display |
KR20180065515A (ko) * | 2016-12-08 | 2018-06-18 | 박순구 | 다기능 웨어러블 디스플레이 장치 |
US10963054B2 (en) | 2016-12-15 | 2021-03-30 | Sony Interactive Entertainment Inc. | Information processing system, vibration control method and program |
WO2018110432A1 (ja) | 2016-12-15 | 2018-06-21 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理システム、コントローラデバイス、コントローラデバイスの制御方法、及びプログラム |
JP6634528B2 (ja) | 2016-12-15 | 2020-01-22 | 株式会社ソニー・インタラクティブエンタテインメント | 振動デバイス、及び制御システム |
KR102553190B1 (ko) | 2016-12-29 | 2023-07-07 | 매직 립, 인코포레이티드 | 외부 조건들에 기초한 웨어러블 디스플레이 디바이스의 자동 제어 |
US10277943B2 (en) * | 2017-03-27 | 2019-04-30 | Microsoft Technology Licensing, Llc | Selective rendering of sparse peripheral displays based on user movements |
US11145172B2 (en) * | 2017-04-18 | 2021-10-12 | Sony Interactive Entertainment Inc. | Vibration control apparatus |
WO2018193514A1 (ja) | 2017-04-18 | 2018-10-25 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置 |
WO2018193557A1 (ja) | 2017-04-19 | 2018-10-25 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置 |
WO2018198229A1 (ja) | 2017-04-26 | 2018-11-01 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置 |
JP6976719B2 (ja) * | 2017-05-25 | 2021-12-08 | キヤノン株式会社 | 表示制御装置、表示制御方法及びプログラム |
CN108983421B (zh) * | 2017-06-02 | 2022-02-01 | 富泰华工业(深圳)有限公司 | 佩戴显示装置 |
US10687119B2 (en) | 2017-06-27 | 2020-06-16 | Samsung Electronics Co., Ltd | System for providing multiple virtual reality views |
US10578869B2 (en) * | 2017-07-24 | 2020-03-03 | Mentor Acquisition One, Llc | See-through computer display systems with adjustable zoom cameras |
WO2019038887A1 (ja) | 2017-08-24 | 2019-02-28 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置 |
JP6893561B2 (ja) | 2017-08-24 | 2021-06-23 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置 |
WO2019043781A1 (ja) | 2017-08-29 | 2019-03-07 | 株式会社ソニー・インタラクティブエンタテインメント | 振動制御装置、振動制御方法、及びプログラム |
JP7135413B2 (ja) * | 2018-05-07 | 2022-09-13 | セイコーエプソン株式会社 | 接続装置、表示装置、接続装置の制御方法、及び、表示装置の制御方法 |
CN117238224A (zh) | 2018-08-31 | 2023-12-15 | 奇跃公司 | 用于增强现实装置的空间分辨的动态调暗 |
KR20210073603A (ko) | 2018-11-09 | 2021-06-18 | 베크만 컬터, 인코포레이티드 | 선택적 데이터 제공을 갖는 서비스 안경 |
EP3908876A4 (en) | 2019-01-11 | 2022-03-09 | Magic Leap, Inc. | TIME MULTIPLEXED DISPLAY OF VIRTUAL CONTENT AT VARIOUS DEPTHS |
CN113168676A (zh) | 2019-04-18 | 2021-07-23 | 贝克曼库尔特有限公司 | 保护实验室环境中对象的数据 |
CN114222942A (zh) | 2019-08-12 | 2022-03-22 | 奇跃公司 | 用于虚拟和增强现实的系统和方法 |
JP2021089351A (ja) * | 2019-12-03 | 2021-06-10 | キヤノン株式会社 | 頭部装着システム及び情報処理装置 |
JP7170277B2 (ja) * | 2019-12-09 | 2022-11-14 | 株式会社辰巳菱機 | 通報装置 |
CN111208964B (zh) * | 2020-01-13 | 2023-08-01 | 宜视智能科技(苏州)有限公司 | 低视力助视方法、终端及存储介质 |
JP7414355B2 (ja) | 2020-07-16 | 2024-01-16 | ベンテック ライフ システムズ, インコーポレイテッド | ガスを濃縮するためのシステムおよび方法 |
CA3189540A1 (en) | 2020-07-16 | 2022-01-20 | Invacare Corporation | System and method for concentrating gas |
DE102021206565A1 (de) * | 2021-06-24 | 2022-12-29 | Siemens Healthcare Gmbh | Darstellungsvorrichtung zur Anzeige einer graphischen Darstellung einer erweiterten Realität |
WO2023173323A1 (zh) * | 2022-03-16 | 2023-09-21 | 深圳市大疆创新科技有限公司 | 无人机的功耗控制方法、装置、系统及存储介质 |
Family Cites Families (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0226870U (zh) | 1988-08-04 | 1990-02-21 | ||
US7310072B2 (en) * | 1993-10-22 | 2007-12-18 | Kopin Corporation | Portable communication display device |
US5978015A (en) | 1994-10-13 | 1999-11-02 | Minolta Co., Ltd. | Stereoscopic system with convergence and dioptric power adjustments according to object distance |
JP3478354B2 (ja) | 1994-10-20 | 2003-12-15 | ミノルタ株式会社 | 方位検出機構付hmd |
JPH08163526A (ja) | 1994-11-30 | 1996-06-21 | Canon Inc | 映像選択装置 |
JP3701053B2 (ja) | 1995-07-13 | 2005-09-28 | コニカミノルタホールディングス株式会社 | 映像表示装置 |
US5905525A (en) | 1995-07-13 | 1999-05-18 | Minolta Co., Ltd. | Image display apparatus having a display controlled by user's head movement |
JP3632271B2 (ja) | 1995-12-28 | 2005-03-23 | 富士ゼロックス株式会社 | メガネディスプレイ |
US6847336B1 (en) * | 1996-10-02 | 2005-01-25 | Jerome H. Lemelson | Selectively controllable heads-up display system |
JPH1164780A (ja) | 1997-08-12 | 1999-03-05 | Olympus Optical Co Ltd | 頭部装着型映像表示装置 |
US6037914A (en) | 1997-08-25 | 2000-03-14 | Hewlett-Packard Company | Method and apparatus for augmented reality using a see-through head-mounted display |
JPH11249588A (ja) | 1998-02-27 | 1999-09-17 | Shimadzu Corp | 頭部装着型表示装置 |
CA2270003A1 (en) | 1998-05-01 | 1999-11-01 | Sarwat Ghobranios | Video camera with eyeglass interface |
JPH11341399A (ja) | 1998-05-29 | 1999-12-10 | Sony Corp | 眼鏡型画像表示装置 |
JP2000284214A (ja) | 1999-03-30 | 2000-10-13 | Suzuki Motor Corp | ヘルメット搭載用表示手段制御装置 |
JP2001356836A (ja) | 2000-06-16 | 2001-12-26 | Toshiba Corp | コンピュータシステム、その画面保護の制御方法及び記憶媒体 |
JP2002044683A (ja) * | 2000-07-19 | 2002-02-08 | Yasushi Haruta | 立体画像用ビデオカメラおよび立体画像再生装置 |
US20020130953A1 (en) | 2001-03-13 | 2002-09-19 | John Riconda | Enhanced display of environmental navigation features to vehicle operator |
GB0109720D0 (en) * | 2001-04-20 | 2001-06-13 | Koninkl Philips Electronics Nv | Display apparatus and image encoded for display by such an apparatus |
CN1156248C (zh) * | 2001-07-13 | 2004-07-07 | 清华大学 | 运动图像的人脸特征检测方法 |
GB2378075A (en) | 2001-07-27 | 2003-01-29 | Hewlett Packard Co | Method and apparatus for transmitting images from head mounted imaging device. |
JP3893983B2 (ja) | 2002-01-17 | 2007-03-14 | ソニー株式会社 | 情報提供装置及び情報提供方法、記憶媒体、並びにコンピュータ・プログラム |
JP2003244728A (ja) | 2002-02-15 | 2003-08-29 | Mitsubishi Heavy Ind Ltd | 仮想映像作成装置及び仮想映像作成方法 |
US7204425B2 (en) | 2002-03-18 | 2007-04-17 | Precision Dynamics Corporation | Enhanced identification appliance |
JP2004023692A (ja) * | 2002-06-20 | 2004-01-22 | Hitachi Ltd | 撮影装置、撮影制限システム、撮影警告システム、及び撮影制限解除システム |
JP3988632B2 (ja) | 2002-11-28 | 2007-10-10 | 日本電気株式会社 | 眼鏡型ディスプレイの制御方法 |
FR2848304A1 (fr) | 2002-12-10 | 2004-06-11 | Ingineo | Nouveau systeme audiovisuel mobile de gestion d'information |
JP4133297B2 (ja) | 2002-12-19 | 2008-08-13 | シャープ株式会社 | カメラシステム |
SE0203908D0 (sv) * | 2002-12-30 | 2002-12-30 | Abb Research Ltd | An augmented reality system and method |
US7495638B2 (en) * | 2003-05-13 | 2009-02-24 | Research Triangle Institute | Visual display with increased field of view |
JP3741713B2 (ja) | 2003-05-20 | 2006-02-01 | 松下電器産業株式会社 | 撮像システム |
US7369101B2 (en) | 2003-06-12 | 2008-05-06 | Siemens Medical Solutions Usa, Inc. | Calibrating real and virtual views |
JP3968522B2 (ja) * | 2003-10-06 | 2007-08-29 | ソニー株式会社 | 記録装置、及び記録方法 |
JP4801340B2 (ja) | 2003-10-28 | 2011-10-26 | 株式会社半導体エネルギー研究所 | 表示装置 |
US8884845B2 (en) * | 2003-10-28 | 2014-11-11 | Semiconductor Energy Laboratory Co., Ltd. | Display device and telecommunication system |
JP2005172851A (ja) * | 2003-12-05 | 2005-06-30 | Sony Corp | 画像表示装置 |
JP4206036B2 (ja) | 2003-12-09 | 2009-01-07 | 株式会社ゼンリン | 電子地図データを利用した風景画像の撮像位置の特定 |
WO2005088970A1 (ja) | 2004-03-11 | 2005-09-22 | Olympus Corporation | 画像生成装置、画像生成方法、および画像生成プログラム |
JP2005269010A (ja) | 2004-03-17 | 2005-09-29 | Olympus Corp | 画像生成装置、画像生成プログラム、及び画像生成方法 |
WO2005088384A1 (ja) * | 2004-03-12 | 2005-09-22 | Nikon Corporation | 画像表示光学系及び画像表示装置 |
CN1922651A (zh) * | 2004-06-10 | 2007-02-28 | 松下电器产业株式会社 | 穿戴型信息提示装置 |
JP2006050265A (ja) | 2004-08-04 | 2006-02-16 | Sony Corp | アンテナモジュール用磁芯部材、アンテナモジュールおよびこれを備えた携帯情報端末 |
JP2006050285A (ja) | 2004-08-05 | 2006-02-16 | Matsushita Electric Ind Co Ltd | 携帯端末 |
JP2006067139A (ja) | 2004-08-25 | 2006-03-09 | Matsushita Electric Ind Co Ltd | 複数カメラ映像検索装置、複数カメラ映像検索方法、及び複数カメラ映像検索プログラム |
JP4720167B2 (ja) | 2004-12-03 | 2011-07-13 | 株式会社ニコン | 電子カメラおよびプログラム |
JP5040061B2 (ja) | 2004-12-15 | 2012-10-03 | コニカミノルタホールディングス株式会社 | 映像表示装置及び情報提供システム |
US20080136916A1 (en) * | 2005-01-26 | 2008-06-12 | Robin Quincey Wolff | Eye tracker/head tracker/camera tracker controlled camera/weapon positioner control system |
JP2006208687A (ja) | 2005-01-27 | 2006-08-10 | Konica Minolta Photo Imaging Inc | ヘッドマウントディスプレイの映像調節システム |
JP2006208867A (ja) | 2005-01-31 | 2006-08-10 | Three Bond Co Ltd | プロジェクター用液晶パネルの製造方法 |
US20080122931A1 (en) * | 2006-06-17 | 2008-05-29 | Walter Nicholas Simbirski | Wireless Sports Training Device |
JP5119636B2 (ja) | 2006-09-27 | 2013-01-16 | ソニー株式会社 | 表示装置、表示方法 |
JP2008096868A (ja) | 2006-10-16 | 2008-04-24 | Sony Corp | 撮像表示装置、撮像表示方法 |
JP5228307B2 (ja) | 2006-10-16 | 2013-07-03 | ソニー株式会社 | 表示装置、表示方法 |
JP4961984B2 (ja) | 2006-12-07 | 2012-06-27 | ソニー株式会社 | 画像表示システム、表示装置、表示方法 |
-
2006
- 2006-10-16 JP JP2006281042A patent/JP5228307B2/ja active Active
-
2007
- 2007-10-11 TW TW096138062A patent/TWI428903B/zh not_active IP Right Cessation
- 2007-10-12 EP EP07830131.4A patent/EP2081182B1/en not_active Not-in-force
- 2007-10-12 CA CA2666692A patent/CA2666692C/en not_active Expired - Fee Related
- 2007-10-12 KR KR1020097010005A patent/KR20090069335A/ko active Search and Examination
- 2007-10-12 CN CNA2007800431636A patent/CN101542584A/zh active Pending
- 2007-10-12 US US12/445,477 patent/US8681256B2/en not_active Expired - Fee Related
- 2007-10-12 CN CN201310332669.6A patent/CN103399403B/zh not_active Expired - Fee Related
- 2007-10-12 WO PCT/JP2007/070397 patent/WO2008047889A1/ja active Application Filing
-
2014
- 2014-02-04 US US14/172,521 patent/US9182598B2/en not_active Expired - Fee Related
-
2015
- 2015-06-09 US US14/734,308 patent/US9846304B2/en not_active Expired - Fee Related
-
2017
- 2017-11-13 US US15/811,227 patent/US20180067313A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US9846304B2 (en) | 2017-12-19 |
EP2081182A1 (en) | 2009-07-22 |
TW200834536A (en) | 2008-08-16 |
CA2666692A1 (en) | 2008-04-24 |
CN101542584A (zh) | 2009-09-23 |
WO2008047889A1 (en) | 2008-04-24 |
US20140152688A1 (en) | 2014-06-05 |
US20180067313A1 (en) | 2018-03-08 |
KR20090069335A (ko) | 2009-06-30 |
CA2666692C (en) | 2018-01-02 |
CN103399403A (zh) | 2013-11-20 |
CN103399403B (zh) | 2016-10-05 |
US20150268471A1 (en) | 2015-09-24 |
US8681256B2 (en) | 2014-03-25 |
JP5228307B2 (ja) | 2013-07-03 |
JP2008096867A (ja) | 2008-04-24 |
EP2081182A4 (en) | 2011-08-24 |
US9182598B2 (en) | 2015-11-10 |
EP2081182B1 (en) | 2016-03-30 |
US20100085462A1 (en) | 2010-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI428903B (zh) | A display device and a display method thereof | |
US9772686B2 (en) | Imaging display apparatus and method | |
TWI384256B (zh) | Display device, display method | |
US7855743B2 (en) | Image capturing and displaying apparatus and image capturing and displaying method | |
JP6137113B2 (ja) | 表示装置、表示方法、プログラム | |
JP2008083289A (ja) | 撮像表示装置、撮像表示方法 | |
JP5664677B2 (ja) | 撮像表示装置、撮像表示方法 | |
JP2013174898A (ja) | 撮像表示装置、撮像表示方法 | |
JP2013083994A (ja) | 表示装置、表示方法 | |
JP5971298B2 (ja) | 表示装置、表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |