CN107884928A - 光扫描式头戴式显示器以及视网膜扫描式头戴式显示器 - Google Patents

光扫描式头戴式显示器以及视网膜扫描式头戴式显示器 Download PDF

Info

Publication number
CN107884928A
CN107884928A CN201710823251.3A CN201710823251A CN107884928A CN 107884928 A CN107884928 A CN 107884928A CN 201710823251 A CN201710823251 A CN 201710823251A CN 107884928 A CN107884928 A CN 107884928A
Authority
CN
China
Prior art keywords
mentioned
view data
image
mounted display
head mounted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710823251.3A
Other languages
English (en)
Inventor
黑川隆之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsumi Electric Co Ltd
Original Assignee
Mitsumi Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsumi Electric Co Ltd filed Critical Mitsumi Electric Co Ltd
Publication of CN107884928A publication Critical patent/CN107884928A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/10—Scanning systems
    • G02B26/101—Scanning systems with both horizontal and vertical deflecting means, e.g. raster or XY scanners
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N3/00—Scanning details of television systems; Combination thereof with generation of supply voltages
    • H04N3/02—Scanning details of television systems; Combination thereof with generation of supply voltages by optical-mechanical means only
    • H04N3/08—Scanning details of television systems; Combination thereof with generation of supply voltages by optical-mechanical means only having a moving reflector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence

Abstract

本发明提供一种光扫描式头戴式显示器以及视网膜扫描式头戴式显示器，抑制图像数据的传输中的画质的劣化。光扫描式头戴式显示器具有：光源，其射出光线；头戴部，其具有扫描上述光线并照射至投影面的光扫描部、将拍摄到的图像的图像数据作为第一格式的图像数据输出的拍摄装置、以及将从上述拍摄装置获取到的上述第一格式的图像数据转换为第二格式的图像数据并输出的接口部；传输电缆，其传输上述第二格式的图像数据；以及控制装置，其经由上述传输电缆获取上述第二格式的图像数据，并基于上述第二格式的图像数据进行来自上述光源的上述光线的射出控制。

Description

光扫描式头戴式显示器以及视网膜扫描式头戴式显示器
技术领域
本发明涉及光扫描式头戴式显示器以及视网膜扫描式头戴式显示器。
背景技术
近年来，已知有佩戴于头部的头部佩戴型的显示装置。在该显示装置中，在佩戴于头部的图像显示部设置外景拍摄用的照相机，通过照相机拍摄利用者所面向的方向的外景，将拍摄到的内容经由软线从图像显示部传输到控制部。
另外，在该显示装置中，在控制部中生成了控制图像显示部所具有的光学像显示部的信号。图像显示部根据该信号控制光学像显示部，来显示由照相机拍摄到的内容的图像。
现有技术文献
专利文献
专利文献1：日本特开2016-75735号公报
发明内容
发明所要解决的课题
在上述的现有技术中，虽然由照相机拍摄到的图像的图像数据经由软线传输到控制部，但未考虑由于该传输所造成的画质的劣化。
公开的技术是鉴于上述的事情而完成的，其目的在于，提供能够抑制图像数据的传输中的画质的劣化的光扫描式头戴式显示器以及视网膜扫描式头戴式显示器。
用于解决课题的方案
公开的技术是光扫描式头戴式显示器，具有：
光源(125)，其射出光线；
头戴部(HM)，其具有扫描上述光线并照射到投影面的光扫描部(30)、将拍摄到的图像的图像数据作为第一格式的图像数据输出的拍摄装置(51)、以及将从上述拍摄装置(51)获取到的上述第一格式的图像数据转换成第二格式的图像数据并输出的接口部(52)；
传输电缆(20)，其传输上述第二格式的图像数据；以及
控制装置(10)，其经由上述传输电缆(20)获取上述第二格式的图像数据，并基于上述第二格式的图像数据进行来自上述光源(125)的上述光线的射出控制。
此外，上述括号内的参照符号是为了使理解容易而标注的，只不过是一个例子，并不局限于图示的方式。
根据公开的技术，能够抑制图像数据的传输中的画质的劣化。
附图说明
图1是对视网膜扫描式头戴式显示器进行说明第一图。
图2是对视网膜扫描式头戴式显示器进行说明的第二图。
图3是对照相机接口部的功能进行说明的图。
图4是对格式转换部进行说明的图。
图5是对照相机接口部的处理进行说明的流程图。
图6(A)至(B)是对图像处理部的图像处理进行说明的第一图。
图7(A)至(C)是对图像处理部的图像处理进行说明的第二图。
图中：
1—视网膜扫描式头戴式显示器；10—控制装置；11—壳体；12—电子电路基板；13—操作部；14—IC芯片；15—外部输入端子；20—传输电缆；30—光扫描部；40—眼镜型框架；42—MEMS接口部；50—拍摄单元；51—拍摄装置；52—照相机接口部；60—光学系统部；HM—头戴部；121—主控制部；122—激光控制部；123—MEMS驱动器；124—激光驱动器；125—激光模块；521—格式转换部；522—图像处理部；523—电压生成部。
具体实施方式
在本实施方式中，在佩戴于利用者的头部的头戴部中设置接口部，该接口部将设置于头戴部的拍摄装置所拍摄到的图像数据转换成适合电缆朝向控制装置传输的格式的图像数据。
以下，参照附图对本实施方式进行说明。图1是对视网膜扫描式头戴式显示器进行说明的图。
本实施方式的视网膜扫描式头戴式显示器1是利用了麦克斯韦观察法(Maxwellian view)的视网膜扫描式头戴式显示器。所谓麦克斯韦观察法是通过使基于图像数据的图像光(以下，也称为图像用光线)暂时地收敛在瞳孔的中心后投影到视网膜上，而不被利用者的水晶体的功能影响地使利用者视觉确认图像数据所表示的图像的方法。
对视网膜扫描式头戴式显示器1的整体结构进行说明。如图1所示，视网膜扫描式头戴式显示器1具有控制装置10、传输电缆20、以及头戴部HM。
控制装置10为能够放到利用者的衣服的口袋等携带的程度的大小，将与图像信号对应的强度的激光作为图像光射出。将在后面描述控制装置的详细。
传输电缆20将从控制装置10射出的图像光传输到光扫描部30。
头戴部HM包括光扫描部30、眼镜型框架40、以及拍摄单元50。
光扫描部30通过扫描被传输电缆20传输的图像光并照射到利用者的眼球(视网膜)，来使图像光所示的图像投影到利用者的视网膜上。
眼镜型框架40被构成为能够佩戴于利用者的头部。拍摄单元50具有照相机等。光扫描部30以及拍摄单元50具备于眼镜型框架40。
这里，所谓图像光是基于作为通过光扫描部30投影到利用者的视网膜上的图像的源的信息生成的光。作为图像的源的信息既可以是文字、数字等符号，也可以是图像。
控制装置10具备利用者能够操作的壳体11、电子电路基板12、以及操作部13。操作部13设置于壳体11的侧面部。操作部13具有电源13a、相开关部13b、以及调整图像的大小的调整部13c等。电子电路基板12收纳于壳体11内，安装有用于实现控制装置10的动作的多个IC芯片14。
在控制装置10设置有外部输入端子15(参照图2)。控制装置10经由外部输入端子15进行从未图示的个人计算机等外部设备发送的内容信息等的接收。此外，内容信息是指投影到利用者的视网膜的信息，例如是文字、图像、动画等。具体而言，内容信息例如是个人计算机等所使用的文档文件、图像文件、动画文件等。
本实施方式的控制装置10被构成为能够输入来自两个系统的图像信号。一个是从拍摄单元50输入的图像信号，另一个是从外部设备输入的图像信号。
从上述的点来看，本实施方式的操作部13具有使利用者选择使来自拍摄单元50的图像信号投影到视网膜还是使来自外部设备的图像信号投影到视网膜的选择开关(未图示)。
图2是对视网膜扫描式头戴式显示器进行说明的第二图。在图2中，示出头戴部HM的结构和安装于电子电路基板12的电路块。
首先，对头戴部HM进行说明。
本实施方式的头戴部HM具备光扫描部30、MEMS(Micro Electro MechanicalSystem：微机电系统)接口部42、拍摄单元50、光学系统部60。
光扫描部30例如是MEMS(Micro Electro Mechanical System)镜。光扫描部30例如配置于眼镜型框架40的镜腿41。光扫描部30基于驱动控制信号在水平方向以及垂直方向上扫描从后述的激光模块125射出的图像光。驱动控制信号从后述的MEMS驱动器123输出。
另外，作为扫描图像光并将图像投影到眼球G的视网膜G1的方法，能够实施使光从投影图像的区域的左上朝向右下高速地扫描，并显示图像的方法(例如光栅扫描)。
从光扫描部30射出的图像光被光学系统部60收敛，向视网膜G1投影。此外，光学系统部60配置于眼镜型框架40的镜腿41。
MEMS接口部42检测光扫描部30(MEMS镜)的动作(偏转角)，将与光扫描部30的倾斜对应的动作信息向后述的主控制部121输出。此外，本实施方式的MEMS接口部42也可以具有温度传感器(未图示)，检测光扫描部30的温度，并将温度信息向主控制部121输出。
本实施方式的拍摄单元50包括拍摄装置51和照相机接口部52。
拍摄装置51是CMOS等的照相机。拍摄装置51以根据拍摄装置51的规格等规定的格式将拍摄到的图像数据向照相机接口部52输出。
照相机接口部52将从拍摄装置51输出的图像数据向后述的主控制部121输出。在本实施方式的照相机接口部52中，将从拍摄装置51接收到的图像数据转换成适合由传输电缆20传输的格式后，向主控制部121输出。
另外，本实施方式的照相机接口部52根据供给至照相机接口部52的电源电压生成多个电压，并向拍摄装置51提供。并且，若在控制装置10的操作部13中进行了指示拍摄到的图像的放大或缩小的操作，则本实施方式的照相机接口部52对于从拍摄装置51输出的图像数据进行与操作对应的图像处理。
将在后面描述本实施方式的照相机接口部52的详细。
接下来，对控制装置10的电子电路基板12的电路块进行说明。
在电子电路基板12安装有主控制部121、激光控制部122、MEMS驱动器123、激光驱动器124、激光模块(光源)125。
主控制部121由CPU(Central Processing Unit：中央处理器)等处理器和RAM((Random Access Memory：随机存取存储器)以及ROM(Read Only Memory：只读存储器)等实现。对主控制部121输入有从拍摄单元50输出的照相机的图像数据、和经由外部输入端子15从外部设备输出的内容信息(图像数据)这两个系统的图像数据。主控制部121进行被输入的图像数据的处理和光扫描部30(MEMS镜)的驱动控制。
另外，主控制部121基于从MEMS接口部42获取到的光扫描部30的动作信息、温度信息等，控制光扫描部30(MEMS镜)的驱动和图像光从激光模块125的射出。
另外，主控制部121将控制光扫描部30的驱动的驱动控制信号向MEMS驱动器123输出。MEMS驱动器123将接收到的驱动控制信号向光扫描部30输出。
另外，主控制部121将被输入的图像数据向激光驱动器124输出。激光驱动器124基于图像数据生成控制激光的点亮以及熄灭的射出控制信号，并将生成的射出控制信号向激光模块125输出。
激光控制部122由CPU等处理器和RAM以及ROM等实现。若激光控制部122从操作部13输入有电源接通信号、放大信号或者缩小信号等，则将与信号对应的控制信号向激光模块125输出。此外，若本实施方式的激光控制部122在操作部13的选择开关中受理两个系统的图像数据中任一个图像数据的选择，则根据选择将控制信号向激光模块125输出。
激光模块125在主控制部121的指示下，将例如单一或者多个波长的激光L向光扫描部30输出(射出)。该激光L是用于将图像投影到用户的眼球G的视网膜G1的图像用光线。此外，从激光模块125射出的激光L经由传输电缆20向光扫描部30传输。
激光模块125例如射出红色激光(波长：610nm～660nm左右)、绿色激光(波长：515nm～540nm左右)、以及蓝色激光(波长：440nm～480nm左右)。射出红色、绿色、以及蓝色激光。本实施方式的激光模块125例如由集成有RGB(红·绿·蓝)各自的激光二极管芯片、三色合成设备以及微型准直透镜的光源等实现。
另外，激光模块125具备光量传感器125a、温度传感器125b。光量传感器125a检测激光模块125的各激光二极管的光量，并将检测到的光量信息向激光控制部122输出。温度传感器125b检测激光模块125的各激光二极管的温度，并将检测到的温度信息向激光控制部122输出。
激光控制部122基于从光量传感器125a获取到的光量信息，生成控制激光模块125的各激光二极管的光量的信号，并向激光模块125输出。
接下来，参照图3对本实施方式的照相机接口部52进行说明。图3是对照相机接口部的功能进行说明的图。
首先，对拍摄单元50内的拍摄装置51与照相机接口部52之间的收发进行说明。
本实施方式的拍摄装置51通过从照相机接口部52输出的控制信号S1而控制动作。
具体而言，拍摄装置51也可以通过控制信号S1指示拍摄的开始。拍摄的开始例如也可以在控制装置10中，在操作部13的选择开关被操作，而选择了拍摄装置51拍摄到的图像数据的情况下被指示。该情况下，控制装置10将对拍摄装置51指示了拍摄开始的情况通过控制信号S11通知给照相机接口部52。也可以是若照相机接口部52接收控制信号S11，则对拍摄装置51通知指示拍摄开始的控制信号S1。
拍摄装置51接收拍摄开始的指示，来开始拍摄，并将拍摄到的图像数据向照相机接口部52发送。此时，从拍摄装置51输出的图像数据S2按照与内置于移动终端的照相机等的接口标准之一的MIPI((Mobile Industry Processor Interface：移动产业处理器接口)标准向照相机接口部52发送。另外，从拍摄装置51输出的图像数据S2通过并行通信向照相机接口部52发送。
另外，本实施方式的拍摄装置51通过照相机接口部52而被供给了作为电源的电压V1～V4。
接下来，对照相机接口部52与控制装置10之间的收发进行说明。
本实施方式的照相机接口部52将从拍摄装置51接收到的图像数据S2作为按照以数字信号传输影像、声音的通信接口的标准的HDMI(注册商标)(High DefinitionMultimedia Interface：高清晰度多媒体接口)标准的图像数据S21向控制装置10发送。
换句话说，本实施方式的格式转换部521将按照MIPI标准的图像数据或者通过并行通信发送的图像数据转换成按照HDMI标准的图像数据。这里，将按照MIPI标准的格式或者按照并行通信方式的格式称为第一格式，将按照HDMI标准的格式称为第二格式。
另外，照相机接口部52从控制装置10接收通知针对拍摄装置51的指示的控制信号S11。针对拍摄装置51的指示例如包括拍摄开始的指示、放大或者缩小等的指示。
另外，照相机接口部52从控制装置10被供给了作为照相机接口部52的电源的电压V31。
接下来，对本实施方式的照相机接口部52的功能进行说明。本实施方式的照相机接口部52具有格式转换部521、图像处理部522、电压生成部523。
也可以是上述的照相机接口部52的格式转换部521、图像处理部522的功能由PFGA实现，电压生成部523由公知的升压/降压电路等实现。
格式转换部521将从拍摄装置51发送的图像数据S2转换成按照用于向控制装置10发送的标准的图像数据S21。
图像处理部522根据来自控制装置10的指示，对由格式转换部521转换前的图像数据S2进行图像处理。
电压生成部523生成向拍摄装置51提供的电压。
以下，进一步对各部进行说明。首先，对格式转换部521进行说明。图4是对格式转换部进行说明的图。
本实施方式的格式转换部521具有HDMI发射机531、MIPI/并行转换部532、位扩展部533。
本实施方式的HDMI发射机531将作为8bit的输入信号而输入的图像数据转换成按照HDMI标准的图像数据S21。具体而言，本实施方式的HDMI发射机531将RGB图像数据中的R成分的图像数据、G成分的图像数据、B成分的图像数据分别作为8bit的输入信号而接收，并转换成按照HDMI标准的图像数据。
MIPI/并行转换部532在按照MIPI标准发送了图像数据S2的情况下，将该图像数据的R成分、G成分、B成分分别转化成8bit的输入信号。
位扩展部533在通过并行通信发送了图像数据S2的情况下，将该图像数据的R成分、G成分、B成分分别扩展成8bit的信号。
更具体而言，在通过并行通信从拍摄装置51发送了图像数据的情况下，图像数据以R成分为5bit、G成分为6bit、B成分为5bit的信号的方式发送。因此，位扩展部533将这些信号扩展成各成分8bit的信号。
在本实施方式中，这样，通过将从拍摄装置51接收到的图像数据S2变更为HDMI标准的图像数据S21，能够使拍摄装置51拍摄到的图像(影像)数据、声音数据作为数字信号向控制装置10发送。因此，根据本实施方式，在从拍摄单元50到控制装置10的利用传输电缆20进行的图像数据的传输中，能够减少噪声，抑制画质的劣化。
另外，在HDMI标准中，因为通过数字传输而传输了图像数据S21，所以传输路径的长度也不需要设置限制。
因此，在本实施方式中，也可以不对设置有拍摄单元50的头戴部HM和控制装置10进行连接的传输电缆20的长度设置限制。换句话说，根据本实施方式，利用者将头戴部HM佩戴于头部，将控制装置10穿戴在衣服等上时，能够使传输电缆20的长度足够长以免限制利用者的动作。因此，在本实施方式中，能够使视网膜扫描式头戴式装显示器1的佩戴感提高。
另外，在本实施方式中，能够通过这样转换图像数据，来减少图像数据的传输所需要的信号线(针)的根数。因此，与例如通过并行通信将图像数据S2向控制装置10传输的情况相比，按照HDMI标准传输图像数据的方式能够使传输电缆20的直径更细。
传输电缆20的直径越细硬度越软化，变为不限制利用者的动作。因此，根据本实施方式，能够使视网膜扫描式头戴式显示器1的佩戴感提高。
接下来，对图像处理部522进行说明。
若本实施方式的图像处理部522从控制装置10接收放大或者缩小的指示，则对于从拍摄装置51接收到的图像数据S2，进行对应的图像处理。将在后面描述图像处理部522的处理的详细。
接下来，对电压生成部523进行说明。本实施方式的电压生成部523基于从控制装置10供给的电压V31生成电压V1～V4，并向拍摄装置51供给。
成为拍摄装置51的电源的电压V1～V4是根据拍摄装置51的规格预先规定的值的电压，包括多个值。
在拍摄装置51中，例如，作为电源被供给至用于使拍摄所涉及的机构驱动的马达等的电压和作为电源被供给至进行拍摄装置51内的各种控制的IC(Integrated Circuit：集成电路)芯片等的电压其大小不同。因此，在本实施方式的照相机接口部52中，生成在拍摄装置51中所需要的值的电压，并向拍摄装置51提供。
此外，电压生成部523除了供给至拍摄装置51的电压V1～V4以外，也可以生成自身所需要的值的电压。另外，供给至拍摄装置51的电压的值也可以包含电压V1～V4以外的值。
在本实施方式中，在配置于拍摄装置51附近的照相机接口部52中生成并提供向拍摄装置51提供的电压。因此，在本实施方式中，与从比照相机接口部52更在物理上远离拍摄装置51的控制装置10供给电压的情况相比，能够抑制由电源线造成的电压下降(损失)。换言之，在本实施方式中，因为在配置于拍摄装置51附近的照相机接口部52中，生成成为拍摄装置51的电源的电压，所以能够减少连结两者的电源线的电阻所造成的电压的损失。
接下来，参照图5对本实施方式的照相机接口部52从拍摄装置51接收到图像数据时的处理进行说明。图5是对照相机接口部的处理进行说明的流程图。
本实施方式的照相机接口部52从拍摄装置51接收图像数据(步骤S501)。接着，照相机接口部52通过图像处理部522判定是否受理了放大或者缩小的指示(步骤S502)。
在步骤S502中，在受理了该指示的情况下，图像处理部522对于接收到的图像数据进行与指示对应的图像处理(步骤S503)。
在步骤S502中，在未受理该指示的情况下，照相机接口部52通过格式转换部521将接收到的图像数据变更为按照HDMI标准的图像数据S21，并向控制装置10输出(步骤S504)，结束处理。
以下，参照图6(A)至(B)以及图7(A)至(C)，对图5的步骤S503中的图像处理部522所进行的图像处理进行说明。图6(A)至(B)是对图像处理部的图像处理进行说明的第一图。
在图6(A)至(B)中，示出在控制装置10的操作部13中进行了指示放大的操作的情况下的图像处理。图6(A)表示图像处理前的图像，图6(B)表示图像处理后的图像。
图6(A)表示既未接收放大的指示和也未接收缩小的指示的情况下的图像601。这里，图像601为x像素×y像素的图像，将中心点设为点P。
对于该图像601若进行与例如倍率为2倍的放大对应的图像处理，则图像601为图6(B)所示的图像601A。
图像601A是以点P为中心的x像素×y像素的图像。换句话说，图像601A是与图像处理前的图像601相同的大小的图像。
图像601A包括区域602和覆盖区域602的周围的黑色区域603。区域602是将中心作为点P的x/2像素×y/2像素的区域。
若本实施方式的图像处理部522例如通过控制信号S11接收倍率为2倍的放大的指示，则对于从拍摄装置51获取到的图像601的图像数据，生成用黑色一种颜色覆盖将中心作为点P的x/2像素×y/2像素的区域602的外侧的区域603而成为黑色区域603的图像601A。
而且，图像处理部522将图像601A向格式转换部521传递。格式转换部521将该图像601A的图像数据转换为按照HDMI标准的图像数据，并向控制装置10发送。
控制装置10通过扫描图像601A的图像数据，将使图像601放大了2倍的图像投影到利用者的视网膜。此外，控制装置10对光扫描部30进行与倍率2倍的放大的指示对应的控制。
此外，在图6(A)至(B)中，对接收了放大的指示时的图像处理部522的处理进行了说明。本实施方式的图像处理部522在接收了缩小的指示的情况下，进行和与放大的指示对应的处理相反的处理即可。
例如，在接收了倍率2倍的缩小的指示的情况下，从图像601A删除黑色区域603即可。
此外，在本实施方式中，能够对于根据放大的指示进行了一次图像处理后的图像，进行与缩小的指示对应的图像处理。另外，在本实施方式中，也可以对于未进行与放大的指示对应的图像处理的图像，不进行与缩小对应的图像处理。
接下来，参照图7(A)至(C)，对在本实施方式中，在与放大对应的图像处理中设置黑色区域的理由进行说明。
图7(A)至(C)是对图像处理部的图像处理进行说明的第二图。图7(A)是对与一般的投影装置所进行的放大对应的图像处理进行说明的图。图7(B)是对与本实施方式所进行的放大对应的图像处理进行说明的第一图，图7(C)是对与本实施方式所进行的放大对应的图像处理进行说明的第二图。
如图7(A)所示，在投影区域是平面的屏幕等的投影装置的情况下，对于x像素×y像素且以点P1为中心的图像701指示了2倍的放大的情况下，将图像701中以点P1为中心的x/2像素×y/2像素的区域的图像向投影区域710投影即可。此外，所谓投影区域是指被光扫描部扫描的区域。
若这样投影，则在图7(A)的例子中，投影区域和被投影到投影区域的图像的大小以及形状一致，所以区域702的图像被投影到整个投影区域710。
与此相对，如本实施方式那样，将图像照射到人的视网膜的情况下，成为投影面的视网膜因为眼球是球状而不是平面，而成为曲面。因此，在本实施方式中，与视网膜的曲面对应地呈梯形状地扫描投影面。因此，在本实施方式中，投影区域710A的形状如图7(B)、(C)所示为梯形。
因此，在本实施方式中，如图7(B)所示，即使打算仅将图像701中，以点P1为中心的x/2像素×y/2像素的区域702的图像投影到投影区域710A，但实际上图像701中的区域703的图像也被投影。
该情况下，实际想关注的图像以外的图像也被投影到利用者的视网膜，因此不优选。
因此，本实施方式的图像处理部522如图7(C)所示，使图像701成为将图像701中想投影到投影区域710A的区域702以外的区域作为用黑色覆盖的黑色区域704的图像701A。
在本实施方式中，光扫描部30对于黑色的图像进行不使激光二极管发光的控制。换句话说，光扫描部30针对图像701A中的黑色区域704内，使激光二极管熄灭。
因此，通过本实施方式的视网膜扫描式头戴式显示器，在投影了图像701A的情况下，在投影区域710A中，区域702的图像以外不被投影。
因此，根据本实施方式，能够解决在图像的投影面如视网膜等那样是曲面的情况中，在打算使图像放大投影的情况下，连利用者想关注的图像以外的图像也被放大投影这样的问题。换句话说，根据本实施方式，能够仅使利用者想关注的区域的图像放大并投影。
另外，在本实施方式中，在接收了放大的指示的情况下，在照相机接口部52中，在转换图像数据S2的格式之前，进行上述的图像处理。
因此，根据本实施方式，在控制装置10中，不需要进行针对放大的指示的图像处理，能够通过公知的处理仅使利用者想关注的区域的图像放大并投影，能够减少控制装置10的处理负荷。
此外，在上述的说明中，本实施方式应用于视网膜扫描式头戴式显示器，但并不局限于此。只要是光扫描部30和拍摄单元50通过传输电缆20与控制装置10连接的投影装置，则也可以应用于任何的投影装置。
以上，根据各实施方式进行了本发明的说明，但本发明并不局限于上述实施方式所列举的结构、与其他的要素的组合等此处所示出的要件。关于这些点，能够在不损害本发明的主旨的范围内变更，能够根据其应用形态适当地规定。

Claims (6)

1.一种光扫描式头戴式显示器，其特征在于，具有：
光源，其射出光线；
头戴部，其具有扫描上述光线并照射至投影面的光扫描部、将拍摄到的图像的图像数据作为第一格式的图像数据输出的拍摄装置、以及将从上述拍摄装置获取到的上述第一格式的图像数据转换成第二格式的图像数据并输出的接口部；
传输电缆，其传输上述第二格式的图像数据；以及
控制装置，其经由上述传输电缆获取上述第二格式的图像数据，并基于上述第二格式的图像数据进行来自上述光源的上述光线的射出控制。
2.根据权利要求1所述的光扫描式头戴式显示器，其特征在于，
上述第一格式是按照MIPI标准的格式或者按照并行通信方式的格式，
上述第二格式是按照HDMI标准的格式。
3.根据权利要求1或2所述的光扫描式头戴式显示器，其特征在于，
上述接口部具有图像处理部，该图像处理部进行针对上述第一格式的图像数据的图像处理，
上述图像处理部在上述控制装置接收了指示放大的操作时，使在上述第一格式的图像数据所示的图像中作为放大的对象的区域以外的区域成为黑色，并向上述接口部输出。
4.根据权利要求1或2所述的光扫描式头戴式显示器，其特征在于，
上述接口部具有电压生成部，该电压生成部经由上述传输电缆从上述控制装置接受预定值的电压的供给，而生成向上述拍摄装置供给的多个值的电压。
5.根据权利要求1或2所述的光扫描式头戴式显示器，其特征在于，
上述光扫描部使上述光线照射至利用者的视网膜。
6.一种视网膜扫描式头戴式显示器，其特征在于，具有：
光源，其射出光线；
头戴部，其具有扫描上述光线并照射至利用者的视网膜的光扫描部、将拍摄到的图像的图像数据作为第一格式的图像数据输出的拍摄装置、以及将从上述拍摄装置获取到的上述第一格式的图像数据转换成第二格式的图像数据并输出的接口部；
传输电缆，其传输上述第二格式的图像数据；以及
控制装置，其经由上述传输电缆获取上述第二格式的图像数据，并基于上述第二格式的图像数据进行来自上述光源的上述光线的射出控制。
CN201710823251.3A 2016-09-29 2017-09-13 光扫描式头戴式显示器以及视网膜扫描式头戴式显示器 Pending CN107884928A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016192102A JP6882659B2 (ja) 2016-09-29 2016-09-29 光走査型ヘッドマウントディスプレイ及び網膜走査型ヘッドマウントディスプレイ
JP2016-192102 2016-09-29

Publications (1)

Publication Number Publication Date
CN107884928A true CN107884928A (zh) 2018-04-06

Family

ID=59974178

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710823251.3A Pending CN107884928A (zh) 2016-09-29 2017-09-13 光扫描式头戴式显示器以及视网膜扫描式头戴式显示器

Country Status (4)

Country Link
US (1) US10257478B2 (zh)
EP (1) EP3301499A1 (zh)
JP (1) JP6882659B2 (zh)
CN (1) CN107884928A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112306444A (zh) * 2020-11-23 2021-02-02 青岛海信移动通信技术股份有限公司 移动终端及其投影方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230290318A1 (en) * 2022-03-11 2023-09-14 Medicapture, Inc. Power-optimized monitor

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1064783B1 (en) * 1998-03-25 2003-06-04 W. Stephen G. Mann Wearable camera system with viewfinder means
CN101150727A (zh) * 2007-10-19 2008-03-26 深圳华为通信技术有限公司 多路视频信号传输和电视墙显示的方法、系统以及处理设备
JP2008310130A (ja) * 2007-06-15 2008-12-25 Konica Minolta Holdings Inc 制御ユニットおよびヘッドマウントディスプレイ
CN101635837A (zh) * 2008-07-23 2010-01-27 三菱电机株式会社 显示装置
JP2011076503A (ja) * 2009-09-30 2011-04-14 Brother Industries Ltd ヘッドマウントディスプレイ
CN104883527A (zh) * 2015-06-04 2015-09-02 段然 一种mipi接口转化成hdmi接口的方法及其应用系统
WO2015134733A1 (en) * 2014-03-07 2015-09-11 Aguren Jerry G Stereo 3d head mounted display applied as a low vision aid
CN105474302A (zh) * 2013-12-19 2016-04-06 索尼公司 头戴显示设备和图像显示方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2950528A1 (en) * 2006-11-07 2015-12-02 Sony Corporation Video signal transmitting device
JP2011205327A (ja) * 2010-03-25 2011-10-13 Nikon Corp 画像出力装置
JP5478761B2 (ja) * 2013-07-22 2014-04-23 オリンパス株式会社 撮像装置
JP6137092B2 (ja) * 2014-09-12 2017-05-31 ブラザー工業株式会社 表示装置、ヘッドマウントディスプレイ、表示制御装置、表示プログラム、及び表示方法
JP6500382B2 (ja) 2014-10-03 2019-04-17 セイコーエプソン株式会社 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
CN107076992A (zh) 2014-10-03 2017-08-18 精工爱普生株式会社 适应于环境的头戴式显示装置
JP5861071B1 (ja) * 2014-10-14 2016-02-16 パナソニックＩｐマネジメント株式会社 内視鏡
JP6734532B2 (ja) 2016-04-22 2020-08-05 ミツミ電機株式会社 表示装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1064783B1 (en) * 1998-03-25 2003-06-04 W. Stephen G. Mann Wearable camera system with viewfinder means
JP2008310130A (ja) * 2007-06-15 2008-12-25 Konica Minolta Holdings Inc 制御ユニットおよびヘッドマウントディスプレイ
CN101150727A (zh) * 2007-10-19 2008-03-26 深圳华为通信技术有限公司 多路视频信号传输和电视墙显示的方法、系统以及处理设备
CN101635837A (zh) * 2008-07-23 2010-01-27 三菱电机株式会社 显示装置
JP2011076503A (ja) * 2009-09-30 2011-04-14 Brother Industries Ltd ヘッドマウントディスプレイ
CN105474302A (zh) * 2013-12-19 2016-04-06 索尼公司 头戴显示设备和图像显示方法
WO2015134733A1 (en) * 2014-03-07 2015-09-11 Aguren Jerry G Stereo 3d head mounted display applied as a low vision aid
CN104883527A (zh) * 2015-06-04 2015-09-02 段然 一种mipi接口转化成hdmi接口的方法及其应用系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112306444A (zh) * 2020-11-23 2021-02-02 青岛海信移动通信技术股份有限公司 移动终端及其投影方法

Also Published As

Publication number Publication date
EP3301499A1 (en) 2018-04-04
US10257478B2 (en) 2019-04-09
JP6882659B2 (ja) 2021-06-02
US20180091783A1 (en) 2018-03-29
JP2018054944A (ja) 2018-04-05

Similar Documents

Publication Publication Date Title
US9906761B2 (en) Projector, its control method, and image projection system
US8123363B2 (en) Projector device, portable telephone and camera
JP4427515B2 (ja) 対象画像検出表示制御装置およびその制御方法
JP6104493B1 (ja) 撮像システム
EP3202366A1 (en) Method, apparatus, and computer program for scanning an object in three dimensions using color dashed line pattern
JP7020417B2 (ja) 映像信号処理装置、映像信号処理方法および映像信号処理システム
CN107870431B (zh) 光扫描式头戴式显示器以及视网膜扫描式头戴式显示器
CN107884928A (zh) 光扫描式头戴式显示器以及视网膜扫描式头戴式显示器
JP4631370B2 (ja) プロジェクタ装置、携帯電話、カメラ
JP4961662B2 (ja) プロジェクタ装置、携帯電話、カメラ
JP2006093823A (ja) プロジェクタ装置、携帯電話、カメラ
KR100723060B1 (ko) 플래시 광량 조절 기능을 구비한 휴대용 단말기
JP6883256B2 (ja) 投影装置
JP2019012892A (ja) 画像処理装置および画像処理方法
JP5880221B2 (ja) 撮像装置、撮像方法、及び画像処理装置
JP2006091111A (ja) プロジェクタ装置、携帯電話、カメラ
JP2006091109A (ja) プロジェクタ装置、携帯電話、カメラ
US11972742B2 (en) Display apparatus, photoelectric conversion apparatus, electronic equipment, and wearable device
US20230032431A1 (en) Display apparatus, photoelectric conversion apparatus, electronic equipment, and wearable device
JP4493426B2 (ja) 電子内視鏡システム
JP2019009551A (ja) 投影装置およびその制御方法、並びにプログラム
JP2004077748A (ja) プロジェクタ装置、プロジェクタ装置のリモートコントローラ、画像投射方法および画像補正方法
JP2006091110A (ja) プロジェクタ装置、携帯電話、カメラ
JP2018148420A (ja) 画像処理装置及び画像処理方法
JP2016177132A (ja) 表示装置及び画像表示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination