CN117082219A - 信息处理装置、投影方法、及非暂时性计算机可读取介质 - Google Patents

信息处理装置、投影方法、及非暂时性计算机可读取介质 Download PDF

Info

Publication number
CN117082219A
CN117082219A CN202310554791.1A CN202310554791A CN117082219A CN 117082219 A CN117082219 A CN 117082219A CN 202310554791 A CN202310554791 A CN 202310554791A CN 117082219 A CN117082219 A CN 117082219A
Authority
CN
China
Prior art keywords
image
medium
processing apparatus
region
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310554791.1A
Other languages
English (en)
Inventor
加来航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN117082219A publication Critical patent/CN117082219A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/12—Detection or correction of errors, e.g. by rescanning the pattern
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/1431—Illumination control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/18—Extraction of features or characteristics of the image
    • G06V30/18086—Extraction of features or characteristics of the image by performing operations within image blocks or by using histograms
    • G06V30/18095—Summing image-intensity values; Projection and histogram analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/18—Extraction of features or characteristics of the image
    • G06V30/18105—Extraction of features or characteristics of the image related to colour
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B11/00—Teaching hand-writing, shorthand, drawing, or painting
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/02—Electrically-operated educational appliances with visual presentation of the material to be studied, e.g. using film strip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/315—Modulator illumination systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

本公开改善与图像投影相关的技术。信息处理装置(30)获取包括第一区域的第一介质的第一图像，所述第一区域写有文字。信息处理装置(30)将第一图像向第二介质的规定位置投影。信息处理装置(30)获取包括第二区域的第二介质的第二图像，所述第二区域描绘了与被投影的第一图像中表示的文字不同颜色的线。信息处理装置(30)对第二图像上的第一区域和第二区域重叠的重叠区域的颜色数据进行校正。信息处理装置(30)以文字的位置一致的方式将校正后的第二图像向第一介质投影。

Description

信息处理装置、投影方法、及非暂时性计算机可读取介质
技术领域
本公开涉及信息处理装置、投影方法、及非暂时性计算机可读取介质。
背景技术
当前已知与图像投影相关的技术。例如，在专利文献1中公开有下述技术：将书写在纸张上的文字与参考信息进行比较，将需要修正的部分投影于纸张上。
专利文献1：日本特开2005-293290号公报
发明内容
[发明所要解决的课题]
在使用实物的书法练习工具(纸张、笔和砚台等)的书法练习电子学习(e-learning)中，在对教师侧的增删结果进行拍摄时发生一次且在学生侧投影增删结果时发生一次这合计两次的、学生的文字和教师的线(表示改进点的修正线)产生重叠的区域中，发生教师的线的颜色的亮度或饱和度降低而色调变暗的、所谓的图像变暗(darkening)。如果发生图像变暗，则学生侧的改进点的识别性和增删结果的再现性降低，导致难以提升书法练习电子学习的学习效果。然而，在现有的图像投影中并没有考虑这些问题。因此，在与图像投影相关的技术上还有改善的空间。
鉴于上述情况而提出的本公开的目的在于，改善与图像投影相关的技术。
[用于解决课题的手段]
本公开的一个实施方式所涉及的信息处理装置为具备控制部的信息处理装置，
所述控制部获取包括第一区域的第一介质的第一图像，所述第一区域写有文字，
将所述第一图像向第二介质的规定位置投影，
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正，以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
本公开的一个实施方式所涉及的投影方法为信息处理装置执行的投影方法，
包括：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
本公开的一个实施方式所涉及的非暂时性计算机可读取介质，其存储有用于使信息处理装置执行包括下述动作在内的动作的程序：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
发明的效果
根据本公开的一个实施方式，改善了与图像投影相关的技术。
附图说明
图1是表示本公开的一个实施方式所涉及的系统的概略构成的框图。
图2是表示第一图像处理装置的概略构成的框图。
图3是表示第二图像处理装置的概略构成的框图。
图4是表示信息处理装置的概略构成的框图。
图5是表示信息处理装置的动作的流程图。
图6是表示第一图像的具体例的图。
图7是表示第二图像的具体例的图。
具体实施方式
以下，说明本公开的实施方式。
＜实施方式的概要＞
参照图1，对本公开的实施方式所涉及的系统1的概要进行说明。系统1具备第一图像处理装置10、第二图像处理装置20和信息处理装置30。第一图像处理装置10、第二图像处理装置20和信息处理装置30例如与包括互联网和移动通信网络等的网络40可通信地连接。
在本实施方式中，第一图像处理装置10为具备拍摄部和投影部(例如投影仪)的装置，但并不限定于此，可以是任意的图像处理装置。投影仪为液晶显示器(LCD：liquidcrystal display)投影仪、硅基液晶(LCOS：liquid crystal on silicon)投影仪或数字光处理(DLP：digital light processing)投影仪等任意方式的投影仪。投影仪通常将基于图像信号调制后的红色(R)光、绿色(G)光、和蓝色(B)光这三原色向投影面(纸张、墙壁、屏幕等)投射而投影图像。此外，也可以将各种颜色的激光通过光学扫描单元进行二维扫描而投影图像。在本实施方式中，第一图像处理装置10设置于书法练习的学生(以下也称为“第一用户”)的头上，但并不限定于此，能够设置于任意的位置。系统1具备的第一图像处理装置10的数量可以任意确定。
在本实施方式中，第二图像处理装置20为具备拍摄部和投影部(例如投影仪)的装置，但并不限定于此，可以是任意的图像处理装置。投影仪为液晶显示器(LCD)投影仪、数字光处理(DLP)投影仪或硅基液晶(LCOS)投影仪等任意方式的投影仪。投影仪通常将基于图像信号调制后的红色(R)光、绿色(G)光、和蓝色(B)光这三原色向投影面投射而投影图像。此外，也可以将各种颜色的激光通过光学扫描单元进行二维扫描而投影图像。在本实施方式中，第二图像处理装置20设置于书法练习的教师(以下也称为“第二用户”)的头上，但并不限定于此，能够设置于任意的位置。系统1具备的第二图像处理装置20的数量可以任意确定。
信息处理装置30例如为服务器装置等的计算机。信息处理装置30能够经由网络40与第一图像处理装置10和第二图像处理装置20通信。
首先，说明本实施方式的概要，详细说明在后面记述。信息处理装置30获取包括第一区域的第一介质的第一图像，所述第一区域写有文字。信息处理装置30将第一图像向第二介质的规定位置投影。信息处理装置30获取包括第二区域的第二介质的第二图像，该第二区域描绘了与被投影的第一图像中表示的文字不同颜色的线。信息处理装置30对第二图像上的第一区域和第二区域重叠的重叠区域的颜色数据进行校正。信息处理装置30以文字的位置一致的方式将校正后的第二图像向第一介质投影。
如上所述，根据本实施方式，重叠区域的颜色数据被校正后的第二图像，以文字的位置一致的方式向第一介质投影。因此，即使例如在第二图像上的重叠区域处发生图像变暗的情况下，也能够将以该图像变暗按规定比例被消除的方式校正了颜色数据后的第二图像向第一介质投影。因此，从第一用户侧的改进点的识别性和增删结果的再现性提高、易于提升书法练习电子学习(e-learning)的学习效果的角度，与图像投影相关的技术被改善。
接下来，对系统1的各构成进行详细说明。
＜第一图像处理装置的构成＞
如图2所示，第一图像处理装置10具备通信部11、拍摄部12、投影部13、检测部14、输出部15、输入部16、存储部17和控制部18。
通信部11包括与网络40连接的一个以上的通信接口。该通信接口例如符合4G(4thGeneration)或5G(5th Generation)等移动通信标准，但不限定于此。在本实施方式中，第一图像处理装置10经由通信部11和网络40与第二图像处理装置20和信息处理装置30通信。
拍摄部12包括一个以上的照相机。拍摄部12中包括的各照相机例如是具有电荷耦合元件(CCD：Charge Coupled Device)或互补金属氧化物半导体(CMOS：ComplementaryMetal Oxide Semiconductor)图像传感器等的拍摄元件的所谓数字照相机。拍摄部12以规定帧率进行被摄体的拍摄，将通过该拍摄得到的拍摄图像的图像数据进行输出。经由拍摄部12得到的图像数据能够作为帧图像构成动态图像。在一个实施方式中，拍摄部12获取第一介质的图像。
投影部13包括图像显示元件、光源、投影透镜。例如在第一图像处理装置10为液晶显示器(LCD)或硅基液晶(LCOS)方式的投影仪的情况下，作为图像显示元件使用液晶，在第一图像处理装置10为数字光处理(DLP)方式的投影仪的情况下，作为图像显示元件使用数字微镜器件(DMD：Digital Micromirror Device)。光源向图像显示元件照射投影光，通过投影部13向投影面投影图像。作为光源，可以在照射投影光之外还照射照明光。投影光的照射范围和照明光的照射范围可以相同也可以不同。投影透镜使图像显示元件的图像在投影面上以任意的倍率放大或缩小显示。在一个实施方式中，投影部13向第一介质投影图像。
检测部14包括能够获取表示投影面的状态的信息的任意传感器模块，在该投影面上从投影部13将图像投影。例如，投影面的状态包括投影面与投影部13的距离、投影面的位移、或者它们的组合。例如，传感器模块包括激光传感器、光电传感器、超声波传感器、或者它们的组合。
输出部15包括至少一个输出用接口。输出用接口例如为显示器或扬声器。显示器例如为液晶显示器(LCD)或有机电致发光(EL：Electro Luminescence)显示器。输出部15输出通过第一图像处理装置10的动作得到的数据。输出部15也可以作为外部的输出仪器与第一图像处理装置10连接，以替代第一图像处理装置10具备输出部15这种方式。作为连接用接口，例如能够使用符合通用串行总线(USB：Universal Serial Bus)或蓝牙(Bluetooth：注册商标)等标准的接口。
输入部16包括至少一个输入用接口。输入用接口例如为物理键、电容键、指点设备、与显示器一体设置的触摸屏、或者拾音器。输入部16接受将第一图像处理装置10的动作所使用的数据进行输入的操作。输入部16也可以作为外部的输入仪器与第一图像处理装置10连接，以替代第一图像处理装置10具备输入部16这种方式。作为连接用接口，例如能够使用符合通用串行总线(USB：Universal Serial Bus)或蓝牙(Bluetooth：注册商标)等标准的接口。
存储部17包括一个以上的存储器。存储器例如为半导体存储器、磁存储器或光存储器等，但不限定于此。存储部17所包括的各存储器例如也可以作为主存储装置、辅助存储装置或缓冲存储器起作用。存储部17存储第一图像处理装置10的动作所使用的任意信息。例如，存储部17可以存储系统程序、应用程序和嵌入式软件等。存储部17所存储的信息也可以例如能够根据经由通信部11从网络40获取到的信息更新。在本实施方式中，存储部17能够存储经由拍摄部12拍摄到的图像或动态图像、和经由检测部14获取到的信息。
控制部18包括一个以上的处理器、一个以上的可编程电路、一个以上的专用电路、或者它们的组合。处理器例如为中央处理单元(CPU：Central Processing Unit)或图形处理单元(GPU：Graphics Processing Unit)等的通用处理器、或者为了特定处理专业化的专用处理器，但不限定于此。可编程电路例如为现场可编程逻辑门阵列(FPGA：Field-Programmable Gate Array)，但不限定于此。专用电路例如为特殊应用集成电路(ASIC：Application Specific Integrated Circuit)，但不限定于此。控制部18控制第一图像处理装置10整体的动作。
＜第二图像处理装置的构成＞
如图3所示，第二图像处理装置20具备通信部21、拍摄部22、投影部23、检测部24、输出部25、输入部26、存储部27和控制部28。
通信部21包括与网络40连接的一个以上通信接口。该通信接口例如符合4G或5G等移动通信标准，但不限定于此。在本实施方式中，第二图像处理装置20经由通信部21和网络40与第一图像处理装置10和信息处理装置30通信。
拍摄部22包括一个以上的照相机。拍摄部22中包括的各照相机例如是具有电荷耦合元件(CCD)或互补金属氧化物半导体(CMOS)图像传感器等拍摄元件的所谓数字照相机。拍摄部22以规定帧率进行被摄体的拍摄，将通过该拍摄得到的拍摄图像的图像数据进行输出。经由拍摄部22得到的图像数据也能够作为帧图像构成动态图像。在一个实施方式中，拍摄部22获取第二介质的图像。
投影部23包括图像显示元件、光源、投影透镜。例如在第二图像处理装置20为液晶显示器(LCD)或硅基液晶(LCOS)方式的投影仪的情况下，作为图像显示元件使用液晶，在第二图像处理装置20为数字光处理(DLP)方式的投影仪的情况下，作为图像显示元件使用数字微镜器件(DMD)。光源向图像显示元件照射投影光，通过投影部23向投影面投影图像。作为光源，可以在照射投影光之外还照射照明光。投影光的照射范围和照明光的照射范围可以相同也可以不同。投影透镜使图像显示元件的图像在投影面上以任意的倍率放大或缩小显示。在一个实施方式中，投影部23向第二介质投影图像。
检测部24包括能够获取表示投影面的状态的信息的任意传感器模块，在该投影面上从投影部23将图像投影。例如，投影面的状态包括投影面与投影部23的距离、投影面的位移、或者它们的组合。例如，传感器模块包括激光传感器、光电传感器、超声波传感器、或者它们的组合。
输出部25包括至少一个输出用接口。输出用接口例如为显示器或扬声器。显示器例如为液晶显示器(LCD)或有机电致发光(EL)显示器。输出部25输出通过第二图像处理装置20的动作得到的数据。输出部25也可以作为外部的输出仪器与第二图像处理装置20连接，以替代第二图像处理装置20具备输出部25这种方式。作为连接用接口，例如能够使用符合通用串行总线(USB)或蓝牙(Bluetooth：注册商标)等标准的接口。
输入部26包括至少一个输入用接口。输入用接口例如为物理键、电容键、指点设备、与显示器一体设置的触摸屏、或者拾音器。输入部26接受将第二图像处理装置20的动作所使用的数据进行输入的操作。输入部26也可以作为外部的输入仪器与第二图像处理装置20连接，以替代第二图像处理装置20具备输入部26这种方式。作为连接用接口，例如能够使用符合通用串行总线(USB)或蓝牙(Bluetooth：注册商标)等标准的接口。
存储部27包括一个以上的存储器。存储器例如为半导体存储器、磁存储器或光存储器等，但不限定于此。存储部27所包括的各存储器例如也可以作为主存储装置、辅助存储装置或缓冲存储器起作用。存储部27存储第二图像处理装置20的动作所使用的任意信息。例如，存储部27可以存储系统程序、应用程序和嵌入式软件等。存储部27所存储的信息也可以例如能够根据经由通信部21从网络40获取到的信息更新。在本实施方式中，存储部27能够存储经由拍摄部22拍摄到的图像或动态图像、和经由检测部24获取到的信息。
控制部28包括一个以上的处理器、一个以上的可编程电路、一个以上的专用电路、或者它们的组合。处理器例如为中央处理单元(CPU)或图形处理单元(GPU)等的通用处理器、或者为了特定处理专业化的专用处理器，但不限定于此。可编程电路例如为现场可编程逻辑门阵列(FPGA)，但不限定于此。专用电路例如为特殊应用集成电路(ASIC)，但不限定于此。控制部28控制第二图像处理装置20整体的动作。
＜信息处理装置的构成＞
如图4所示，信息处理装置30具备通信部31、存储部32、控制部33。
通信部31包括与网络40连接的一个以上通信接口。该通信接口例如符合移动通信标准、有线局域网(LAN：Local Area Network)标准、或无线局域网(LAN)标准，但不限定于此，可以符合任意的通信标准。在本实施方式中，信息处理装置30经由通信部31和网络40与第一图像处理装置10和第二图像处理装置20通信。
存储部32包括一个以上的存储器。存储部32所包括的各存储器例如也可以作为主存储装置、辅助存储装置或缓冲存储器起作用。存储部32存储信息处理装置30的动作所使用的任意信息。例如，存储部32可以存储系统程序、应用程序、数据库和地图信息等。存储部32所存储的信息也可以例如能够根据经由通信部31从网络40获取到的信息更新。
控制部33包括一个以上的处理器、一个以上的可编程电路、一个以上的专用电路、或者它们的组合。控制部33控制信息处理装置30整体的动作。
＜信息处理装置的动作流程＞
参照图5，说明本实施方式所涉及的信息处理装置30的动作。图5的动作对应于本实施方式所涉及的投影方法。图5的动作以规定周期反复执行。在本实施方式中，在每次检测到后述的作品提交的意思表示时图5的动作被执行。但规定周期并不限定于此，可以任意确定。
在以下的说明中，“题材作品”是指第一用户在白色的纸张(以下也称为“第一用户侧的纸张”)上以附着规定颜色的墨汁的笔书写文字而得到的写有文字的纸张。在本实施方式中，规定颜色为黑色，因此，文字的颜色为黑色。但文字的颜色并不限定于此，能够采用任意的颜色。“增删结果”是指，第二用户在投影至第二用户侧的白色的纸张(以下也称为“第二用户侧的纸张”)的表示第一用户侧的纸张的图像的区域中，利用附着有与文字颜色不同的颜色的墨汁的笔与写有文字的第一区域的至少一部分重叠地追加表示改进点的线而得到的纸张。在本实施方式中，与文字颜色不同的颜色为红色，因此，线的颜色为红色。但线的颜色并不限定于此，能够采用与文字的颜色不同的任意颜色。
另外，在以下的说明中，设为下述情况：第一用户和第二用户以各自坐在椅子上而并非正座于地板上的姿势，向置于载置台(例如桌子)上的相同尺寸(例如，纵334mm×横243mm)的矩形的纸张(例如，木浆纸)上各自利用附着有不同颜色的墨汁的笔书写文字或线。另外，为了防止载置台的污损，设为在载置台与纸张之间铺设有毡制的相同尺寸(例如，纵360mm×横260mm)的矩形的垫。但纸张和垫的材料及尺寸并不限定为这些例子，能够任意地选择。
步骤S100：信息处理装置30的控制部33获取包括第一区域的第一介质的第一图像，该第一区域写有文字。
具体而言，信息处理装置30的通信部31经由网络40从第一图像处理装置10的通信部11接收第一用户侧的纸张的图像，该第一用户侧的纸张的图像是由拍摄部12拍摄的，包括由第一用户写有文字的区域。写有文字的区域(利用墨汁书写的文字本身)对应于本实施方式的第一区域，第一用户侧的纸张对应于本实施方式的第一介质，该纸张的图像对应于本实施方式的第一图像。此外，在由拍摄部12拍摄到的纸张的拍摄图像中有可能还包括纸张的周围(例如垫或载置台)的图像，在此情况下，优选通过进行接收到的拍摄图像的图像分析，仅提取纸张部分的图像，将纸张部分的图像作为第一图像(第一用户侧的纸张的图像)进行存储。信息处理装置30的控制部33将经由通信部31接收到的第一用户侧的纸张的图像存储于存储部32。然后，控制部33在每次执行图5的动作时，都通过从存储部32读取第一用户侧的纸张的图像而获取第一图像。例如，控制部33也可以获取包括图6所示的、写有文字的区域R1的第一用户侧的纸张M1的图像S1。区域R1对应于本实施方式的第一区域，第一用户侧的纸张M1对应于本实施方式的第一介质，图像S1对应于本实施方式的第一图像。
另外，控制部33计算写有文字的第一区域在第一图像上的位置。具体而言，控制部33通过计算第一图像的各个像素的颜色特征值，从第一图像所包含的像素中提取与第一区域对应的一组像素(以下也称为“第一像素组”)。在本实施方式中，颜色特征值为RGB颜色空间中的R值、G值、B值(以下也称为“RGB值”)，但并不限定于此，能够采用任意的值。例如，作为颜色特征值，也可以替换RGB值而使用HSV颜色空间中的色相H、饱和度S、亮度V，或者在RGB值的基础上加上HSV颜色空间中的色相H、饱和度S、亮度V。对于第一像素组的提取能够采用任意的方法。例如，第一像素组具有与其它区域所对应的像素不同的、第一像素组特有的RGB值。因此，控制部33能够将第一图像的各像素的RGB值进行比较，从而从第一图像所包含的像素中提取第一像素组。控制部33计算所提取的第一像素组中包含的各像素对应的第一图像上的二维坐标值，将计算出的二维坐标值与各像素相关联地存储于存储部32。此外，在本实施方式中，表示第一像素组的位置的信息是作为第一图像的二维坐标值计算出的，但并不限定于此，能够采用任意的信息。
在本实施方式中，第一用户侧的纸张的图像的拍摄能够以任意定时执行。例如，可以在检测到将题材作品向第二用户提交这一第一用户的意思表示(以下也称为“作品提交的意思表示”)的情况下，信息处理装置30的控制部33将拍摄第一用户侧的纸张的图像的指示向第一图像处理装置10的通信部11发送。也可以是第一图像处理装置10的控制部18与经由通信部11接收到的指示对应地，使拍摄部12执行第一用户侧的纸张的图像的拍摄。
对于作品提交的意思表示的检测能够采用任意的方法。例如，也可以在规定的条件被满足的情况下，控制部33判定为检测到作品提交的意思表示。规定的条件可以任意确定，以下作为具体例示出第一例和第二例。
第一例是第一用户明示地进行了作品提交的意思表示的情况。在该情况下，规定的条件可以是检测到第一用户进行的规定操作。例如，规定操作可以是第一用户操作第一图像处理装置10的输入部16所包括的触摸屏而触摸用于作品提交的按钮等图标的情况、或者是第一用户按下输入部16所包括的物理键的情况。也可以在检测到规定操作的情况下，第一图像处理装置10的控制部18经由通信部11和网络40向信息处理装置30的通信部31发送表示检测到第一用户进行了规定操作这一内容的信息。在该信息由通信部31接收到的情况下，控制部33可以判定为满足了规定的条件，可以判定为检测到作品提交的意思表示。
第二例是第一用户默示地进行了作品提交的意思表示的情况。在该情况下，规定的条件可以是检测到第一用户进行的规定的举动。例如，规定的举动可以是第一用户将笔置于规定位置(例如，放置于载置台的砚台之上)、手离开笔的情况。对于规定的举动的检测能够采用任意的方法。例如，第一图像处理装置10的拍摄部12可以将第一用户和载置台作为被摄体以规定帧率进行拍摄，将通过该拍摄得到的拍摄图像的图像数据输出。第一图像处理装置10的控制部18可以经由通信部11和网络40向信息处理装置30的通信部31发送该图像数据。信息处理装置30的控制部33也可以通过对由通信部31接收到的图像数据进行图像分析，从而判定第一用户的举动是否符合规定的举动。在图像分析的结果是判定为第一用户的举动符合规定的举动的情况下，控制部33能够判定为规定的条件被满足，能够判定为检测到作品提交的意思表示。
此外，在本实施方式中，将题材作品向第二用户的提交以下述方式执行：从第一图像处理装置10经由网络40向信息处理装置30发送表示题材作品的信息，并且从信息处理装置30向第二图像处理装置20转发该信息。但将题材作品向第二用户的提交并不限定于此，能够采用任意的方法。例如，表示题材作品的信息也可以从第一图像处理装置10向信息处理装置30和第二图像处理装置20这两者直接发送。
步骤S101：控制部33将在步骤S100中获取到的第一图像向第二介质的规定位置投影。在本实施方式中，第二介质的规定位置为第一图像投影时收敛于第二介质的轮廓线这样的第二介质上的位置，以第二介质的二维坐标值表示。但第二介质的规定位置并不限定于这些例子，能够采用任意的位置和值。
具体而言，控制部33设定第二介质中的位置对准的基准点，基于基准点进行第一图像与第二介质之间的位置对准，进行将第一图像投影于第二介质上，由此，将第一图像投影于第二介质的规定位置。第二介质中的位置对准的基准点能够采用第二介质的任意的点。例如，控制部33设定第二介质(矩形的纸张)的四个角作为基准点。在该情况下，控制部33通过经由通信部31和网络40，从第二图像处理装置20接收第二介质的拍摄图像，对接收到的拍摄图像进行图像分析，从而能够确定作为投影面的第二介质的四个角，将确定的四个角设定为基准点。然后，控制部33经由通信部31和网络40，向第二图像处理装置20的通信部21发送所设定的基准点。第二图像处理装置20的控制部28在使投影部23将第一图像向第二介质投影的同时，进行第一图像与第二介质之间的位置对准，以使被投影的第一图像的四个角收敛于经由通信部21接收到的基准点(即，第二介质的四个角)的框内。例如优选使第一介质和第二介质为相同尺寸的纸张，根据需要进行第一图像的扩大、缩小、倾斜修正等处理，以使第一图像的四个角与第二介质的四个角一致，然后将第一图像投影于第二介质上。这样，图6所示的图像S1以在投影时如图7所示那样收敛于第二用户侧的纸张M2的轮廓线内的纸张M2上的位置处被位置对准。由此，第一图像在投影时收敛于第二介质的轮廓线，第一图像被投影于第二介质的规定位置处。
在本实施方式中，在第一图像中表示的文字是没有光的黑色，所以难以鲜明地投影于第二介质。因此，优选在控制部33将第一图像向第二介质投影时，对载置有第二介质的载置台(即，载置台的顶板)整体避开第一区域而照射照明光。避开了第一区域的照明光的照射能够采用任意的方法。例如，控制部33从存储部32读取与第一像素组中包含的各像素对应的第一图像上的二维坐标值。控制部33例如如下进行控制：通过遮蔽以限制照明范围，从而在由从存储部32读取的二维坐标值所表示的位置处不照射来自投影部23的光源的照明光。并且，如上述所示，控制部33在将第一图像投影于第二介质的规定位置的同时，向载置有第二介质的载置台的整体照射照明光。由此，能够向载置有第二介质的载置台的整体避开第一区域而照射照明光。其结果，在将第一图像向第二介质投影时，相当于第一区域的写有文字的区域与其它区域相比变暗。因此，变得易于将在第一图像中显示的文字鲜明地投影于第二介质。此外，在本实施方式中，照明光是从投影部23的光源照射的，但不限定于此。例如，照明光也可以从不同于投影部23的其它外部光源照射。在这里，如果不向第二用户侧的载置台的整体照射光而是仅对载置于载置台的第二介质照射光，则有可能第二介质上的相当于第一区域的部分与其它部分之间的对比度不足，第二介质上的第一区域被观察为比黑色更亮的颜色(例如浅灰色)，第一介质的再现性降低。因此，优选照明光向载置有第二介质的载置台的整体照射。
另外，更优选对于载置台将除了投影第一图像的投影光和照明光之外的光进行遮光。载置台的遮光能够采用任意的方法。例如，在载置台为矩形的桌子的情况下，通过利用遮光性板(例如不透明的丙烯酸板)将载置台以U字形包围，即包围除了第二用户就座的一侧之外的三个边，从而将载置台遮光。通过对于载置台将除了投影第一图像的投影光和照明光之外的光进行遮光，从而载置台的相当于第一区域的部分与剩余的部分之间的对比度易于变高。其结果，变得易于将在第一图像中显示的文字更鲜明地投影于第二介质。
步骤S102：控制部33获取包括第二区域的第二介质的第二图像，该第二区域描绘有与所投影的第一图像中表示的文字颜色不同的线。
具体而言，信息处理装置30的通信部31经由网络40从第二图像处理装置20的通信部21接收由拍摄部22拍摄的、第二用户侧的纸张的一组图像。一组图像包括：对投影有第一图像的第二用户侧的纸张进行拍摄得到的图像(以下也称为“文字的图像”。)；在第二用户侧的纸张上投影有第一图像的状态下，对由第二用户描绘了线的第二用户侧的纸张进行拍摄得到的图像(以下也称为“增删结果的图像”。)；以及在中断第一图像的投影等而第二用户侧的纸张上未投影第一图像的状态下，对由第二用户描绘了线的第二用户侧的纸张行拍摄得到的图像(以下也称为“线的图像”。)。描绘有线的区域相当于本实施方式的第二区域，第二用户侧的纸张相当于本实施方式的第二介质，一组图像相当于本实施方式的第二图像。此外，由拍摄部22拍摄到的纸张的拍摄图像中有时还包括纸张的周围(例如垫或载置台)的图像，在此情况下，优选通过对接收到的拍摄图像进行图像分析，仅提取纸张部分的图像，将纸张部分的图像作为第二图像(包括文字的图像、增删结果的图像、以及线的图像的一组图像)进行存储。信息处理装置30的控制部33将经由通信部31接收到的一组图像相关联地存储于存储部32。并且，控制部33在每次执行图5的动作时，都通过从存储部32读取一组图像而获取第二图像。
例如，控制部33可以将图7所示那样的包括写有文字的区域R1、描绘有线的区域R2和区域R1与区域R2重叠的重叠区域R3的第二用户侧的纸张M2的图像S2(相当于增删结果的图像)；仅包括区域R1的纸张M2的图像(相当于文字的图像)；以及仅包括区域R2的纸张M2的图像(相当于线的图像)这三种图像作为一组图像获取。区域R2(红线本身)相当于本实施方式的第二区域，第二用户侧的纸张M2相当于本实施方式的第二介质，三种图像相当于本实施方式的由一组图像构成的第二图像。此外，为了易于理解附图，在图7中，将区域R1以绘出轮廓的实线表示，将区域R2以绘出轮廓的虚线表示，阴影部分相当于重叠区域R3。
在本实施方式中，第二用户侧的纸张的一组图像的拍摄能够以任意定时执行。例如，对于“文字的图像”，信息处理装置30的控制部33可以将以使第一图像投影于第二用户侧的纸张的状态下对该纸张进行拍摄的指示向第二图像处理装置20的通信部21发送。第二图像处理装置20的控制部28可以与经由通信部21接收到的指示对应地，在使通过投影部23向第二用户侧的纸张进行第一图像的投影持续的同时，使拍摄部22执行该纸张的图像的拍摄。由此，能够拍摄“文字的图像”。
另外，对于“增删结果的图像”和“线的图像”，控制部33可以在检测到将增删结果向第一用户通知的第二用户的意思表示(以下也称为“结果通知的意思表示”。)的情况下，将对第二用户侧的纸张的图像进行拍摄的指示向第二图像处理装置20的通信部21发送。第二图像处理装置20的控制部28可以与经由通信部21接收到的指示对应地，在使通过投影部23向第二用户侧的纸张进行第一图像的投影持续或中断的同时，使拍摄部22执行该纸张的图像的拍摄。由此，能够拍摄“增删结果的图像”和“线的图像”。
结果通知的意思表示的检测能够采用任意的方法。例如，控制部33可以在规定的条件被满足的情况下，判定为检测到结果通知的意思表示。规定的条件能够任意确定，以下作为具体例示出第三例和第四例。
第三例是第二用户明示地进行了结果通知的意思表示的情况。在该情况下，规定的条件可以是检测到第二用户进行的规定操作。例如，规定操作可以是第二用户操作第二图像处理装置20的输入部26所包括的触摸屏而触摸用于通知增删结果的按钮等图标的情况、或者是第二用户按下输入部26所包括的物理键的情况。也可以在检测到规定操作的情况下，第二图像处理装置20的控制部28经由通信部21和网络40向信息处理装置30的通信部31发送表示检测到第二用户进行了规定操作这一内容的信息。在该信息由通信部31接收到的情况下，控制部33可以判定为满足了规定的条件，可以判定为检测到结果通知的意思表示。
第四例是第二用户默示地进行了结果通知的意思表示的情况。在该情况下，规定的条件可以是检测到第二用户进行的规定的举动。例如，规定的举动可以是第二用户将笔置于规定位置(例如，放置于载置台的砚台之上)、手离开笔的情况。对于规定的举动的检测能够采用任意的方法。例如，第二图像处理装置20的拍摄部22可以将第二用户和载置台作为被摄体以规定帧率进行拍摄，将通过该拍摄得到的拍摄图像的图像数据输出。第二图像处理装置20的控制部28可以经由通信部21和网络40向信息处理装置30的通信部31发送该图像数据。信息处理装置30的控制部33也可以通过对由通信部31接收到的图像数据进行图像分析，从而判定第二用户的举动是否符合规定的举动。在图像分析的结果是判定为第二用户的举动符合规定的举动的情况下，控制部33能够判定为规定的条件被满足，能够判定为检测到结果通知的意思表示。
此外，在本实施方式中，增删结果向第一用户的通知以下述方式执行：从第二图像处理装置20经由网络40向信息处理装置30发送表示增删结果的信息，并且从信息处理装置30向第一图像处理装置10转发该信息。但增删结果向第一用户的通知并不限定于此，能够采用任意的方法。例如，表示增删结果的信息也可以从第二图像处理装置20向信息处理装置30和第一图像处理装置10这两者直接发送。
步骤S103：控制部33判定在步骤S102中获取到的第二图像上是否存在重叠区域。“重叠区域”是指第一区域与第二区域重叠的区域。在判定为存在重叠区域的情况下(步骤S103为“是”)，进程前进至步骤S104。在判定为没有重叠区域的情况下，(步骤S103为“否”)，进程前进至步骤S106。
具体而言，控制部33通过对在步骤S102中获取到的一组图像(包括“文字的图像”、“增删结果的图像”和“线的图像”。)构成的第二图像进行以下的图像分析，从而计算出第一区域和第二区域各自在第二图像上的位置。
控制部33从“文字的图像”所包含的像素中提取与第一区域对应的一组像素(以下也称为“第二像素组”。)。第二像素组的提取能够采用任意的方法。例如与相对于第一图像的第一像素组相同地，第二像素组具有与对应于其它区域的像素不同的、第二像素组特有的RGB值。因此，控制部33能够通过比较文字的图像的各像素的RGB值，而从文字的图像所包含的像素中提取第二像素组。控制部33计算与提取出的第二像素组所包含的各像素对应的文字的图像上的二维坐标值，将计算出的二维坐标值与各像素相关联地存储于存储部32。此外，在本实施方式中，表示第二像素组的位置的信息是作为文字的图像的二维坐标值计算出的，但并不限定于此，能够采用任意的信息。
另外，控制部33从“线的图像”所包含的像素中提取与第二区域对应的一组像素(以下也称为“第三像素组”。)。第三像素组的提取能够采用任意的方法。例如与上述第一像素组相同地，第三像素组具有与对应于其它区域的像素不同的、第三像素组特有的RGB值。因此，控制部33能够通过比较线的图像的各像素的RGB值，而从线的图像所包含的像素中提取第三像素组。控制部33计算与提取出的第三像素组所包含的各像素对应的线的图像上的二维坐标值，将计算出的二维坐标值与各像素相关联地存储于存储部32。此外，在本实施方式中，表示第三像素组的位置的信息是作为线的图像的二维坐标值计算出的，但并不限定于此，能够采用任意的信息。
然后，控制部33通过比较如上所示计算出的第二像素组和第三像素组各自的二维坐标值，从而判定“增删结果的图像”上是否存在重叠区域。在本实施方式中，文字的图像上的二维坐标值、线的图像上的二维坐标值和增删结果的图像上的二维坐标值所表示的位置彼此相等。因此，在比较的结果是确定出二维坐标值相等的至少一个像素的情况下，控制部33能够判定为第二图像上存在重叠区域。控制部33计算出由确定的至少一个像素构成的像素组(以下也称为“第四像素组”。)所包含的各像素对应的增删结果的图像上的二维坐标值，将计算出的二维坐标值与各像素相关联地存储于存储部32。第四像素组相当于本实施方式的重叠区域。在图7所示的例子中，控制部33能够将区域R1与区域R2重叠的重叠区域R3(阴影部分)确定为重叠区域，判定为第二图像上存在重叠区域。此外，在本实施方式中，表示第四像素组的位置的信息是作为增删结果的图像的二维坐标值计算出的，但并不限定于此，能够采用任意的信息。
步骤S104：在判定为存在重叠区域的情况下(步骤S103为“是”)，控制部33校正重叠区域的颜色数据。
具体而言，控制部33基于在第二图像上的第一区域与第二区域不重叠的区域中的线的颜色所对应的RGB值，校正在步骤S103中确定的重叠区域的颜色所对应的RGB值。在图7所示的例子中，控制部33能够基于图像S2上的区域R1与区域R2不重叠的区域中的线的颜色所对应的RGB值，校正重叠区域R3的颜色所对应的RGB值。将第二图像(在这里为“增删结果的图像”)的重叠区域R3的颜色所对应的RGB值被校正后的图像称为“校正后的第二图像”。
RGB值的校正能够采用任意的方法。例如，控制部33选择第三像素组的像素中的不被第四像素组包含的一个像素。这一个像素是不受图像变暗的影响的第三像素组的像素，保持第三像素组原本的颜色所对应的RGB值。控制部33从存储部32读取所选择的一个像素所对应的RGB值。控制部33计算第四像素组的各像素的颜色所对应的RGB值。控制部33计算出所选择的一个像素所对应的RGB值与计算出的第四像素组的各像素的颜色所对应的RGB值之间的差值。控制部33能够基于计算出的差值，以规定的比例接近所选择的一个像素所对应的RGB值的方式，对第四像素组的各像素的颜色所对应的RGB值进行校正。规定的比例能够针对各个像素分别任意确定。例如，将规定的比例设置得越小(即越接近0％)，差值就越被保持，易于维持重叠区域的外观。另一方面，将规定的比例设置得越大(即越接近100％)，差值就变得越小，重叠区域中的第三像素组就越接近原本的颜色，越易于提高改进点的识别性。因此，规定的比例能够考虑维持增删结果的外观的程度与改进点的识别性之间的平衡而设定。
另外，控制部33也可以基于在第二图像上的第一区域与第二区域不重叠的区域中的线的颜色所对应的RGB值还加上第一区域的文字的颜色所对应的RGB值，校正重叠区域的颜色所对应的RGB值。具体而言，控制部33可以与第一区域的文字的颜色所对应的RGB值相应地，设定使R值、G值和B值的一部分或全部以规定的比例增加的增加率作为规定的值。例如，在如本实施方式所示那样第一区域的文字的颜色为黑色的情况下，与第四像素组对应的各像素的颜色所对应的R值、G值和B值全部较低。在该情况下，控制部33能够设定使R值、G值和B值的全部以规定的比例增加的增加率(例如+10％)作为规定的值。增加率能够与第一区域的文字的颜色所对应的RGB值相应地，对R值、G值、B值分别单独设定。
另外，在本实施方式中，规定的值是考虑到在第一图像处理装置10侧投影增删结果时发生的图像变暗的影响而设定的。由此，能够以所期望的程度缓和在第二图像处理装置20侧拍摄增删结果时发生一次、在第一图像处理装置10侧投影增删结果时发生一次的共计发生两次图像变暗的影响。因此，在第一用户侧的改进点的识别性和增删结果的再现性提高、变得更加易于提升书法练习电子学习(e-learning)的学习效果。另外，重叠区域的颜色数据的校正并不限定于这些例子，能够采用任意的方法。
步骤S105：控制部33以文字的位置一致的方式将校正后的第二图像向第一介质投影。
具体而言，控制部33以使得校正后的第二图像所包含的第二像素组(对应于第一区域)的轮廓线在投影时与第一介质上所书写的文字(使用墨汁书写的文字本身)的轮廓线一致的方式，确定第一介质上的位置。在本实施方式中，所述的第一介质上的位置作为第一介质的二维坐标值表示，但并不限定于此，能够采用任意的值。所述的确定第一介质上的位置能够采用任意的方法。例如，控制部33从存储部32读取第一图像，计算出书写在第一介质上的文字在第一介质中占据的面积。控制部33从存储部32读取第二图像，计算出第二像素组在第二图像中占据的面积。控制部33在维持纵横比的同时放大或缩小第二图像，直至第二像素组的面积与作为投影面的第一介质上书写的文字的面积一致。控制部33计算出此时的扩大或缩小的倍率作为投影倍率。此时，控制部33还根据需要计算出倾斜修正等其它处理中所使用的值(以下也称为“其它调整值”。)。控制部33经由通信部31和网络40，向第一图像处理装置10的通信部11发送计算出的投影倍率及/或其它调整值。第一图像处理装置10的控制部18根据经由通信部11接收到的投影倍率及/或其它调整值，使投影部13将第二图像向第一介质投影。然后，控制部18以使得第二图像所包含的第二像素组的轮廓线与第一介质上所书写的文字的轮廓线无错开地重叠的方式进行位置对准。例如，以使得颜色数据被校正后的图7所示的图像S2的轮廓线与图6所示的第一用户侧的纸张M1上所书写的文字所对应的区域R1的轮廓线无错开地重叠的方式进行位置对准。由此，以文字的位置一致的方式将校正后的第二图像投影于第一介质。然而，第二图像在第一介质中的投影并不限于这些例子，能够采用任意的方法。
步骤S106：在判定为没有重叠区域的情况下(步骤S103为“否”)，控制部33不对第二图像的颜色数据进行校正而以文字的位置一致的方式将第二图像向第一介质投影。第二图像的投影方法，除了不进行颜色数据的校正这一点之外与步骤S105中上述的方法相同，因此省略说明。
如上所述，本实施方式所涉及的信息处理装置30获取包括写有文字的第一区域的第一介质的第一图像。信息处理装置30将第一图像向第二介质的规定位置投影。信息处理装置30获取包括第二区域的第二介质的第二图像，所述第二区域描绘了与被投影的第一图像中表示的文字不同颜色的线。信息处理装置30对第二图像上的第一区域和第二区域重叠的重叠区域的颜色数据进行校正。信息处理装置30以文字的位置一致的方式将校正后的第二图像向第一介质投影。
根据所述构成，以文字的位置一致的方式，重叠区域的颜色数据校正后的第二图像向第一介质投影。因此，例如即使第二图像上的重叠区域处发生图像变暗的情况，也能够将以规定的比例消除该图像变暗的方式进行了颜色数据的第二图像向第一介质投影。因此，从第一用户侧的改进点的识别性和增删结果的再现性提高、易于提升书法练习电子学习(e-learning)的学习效果的角度，与图像投影相关的技术被改善。
虽然基于各附图及实施例说明了本公开，但应当注意的是，作为本领域技术人员能够基于本公开进行各种变形及改变。因此，应当注意的是，这些变形和改变都包含在本公开的范围内。例如，各构成部或各步骤等中所包括的功能等能够以逻辑上不矛盾的方式进行再配置，能够多个构成部或步骤等组合成一个、或者将单个构成部或步骤等进行拆分。
例如，在上述实施方式中，也可以是信息处理装置30的构成及动作分散于彼此可通信的多个计算机中的实施方式。另外，例如也可以是信息处理装置30的部分或全部构成要素设置于第一图像处理装置10和第二图像处理装置20的实施方式。
另外，例如在上述实施方式中，在第一用户侧完成了题材作品后拍摄第一图像(静止图)，将第一图像投影于第二用户侧，在第二用户侧被投影了第一图像后及增删结果完成后拍摄第二图像(静止图)，将校正后的第二图像向第一用户侧投影。与此相对，在本实施方式的第一变形例中，也可以在第一用户与第二用户之间实时地接收/发送表示随时间变化的彼此的纸张状态(例如外观)的动态图像数据，向彼此的纸张实时进行投影。在第一变形例中，在第一用户与第二用户之间接收/发送彼此的纸张的动态图像数据，在彼此的纸张上实时投影动态图像。
具体而言，在第一变形例中，第一图像是规定帧数的第一图像，第二图像是规定帧数的第二图像。在第一变形例中，信息处理装置30获取规定帧数的包括第一区域的第一介质的第一图像。信息处理装置30将规定帧数的第一图像向第二介质的规定位置投影。信息处理装置30获取规定帧数的包括第二区域的第二介质的第二图像。信息处理装置30对第二图像上的第一区域和第二区域重叠的重叠区域的颜色数据进行校正。信息处理装置30以文字的位置一致的方式将校正后的第二图像向第一介质投影。
规定帧数的第一图像可以是由第一图像处理装置10的拍摄部12在第一期间以规定帧率拍摄的第一图像(第一影像)。例如，第一期间可以是从检测到第一图像处理装置10侧的开始事件(例如，第一用户按下输入部16所包括的按钮等图标或按下物理键、或者手取下砚台上的笔的情况)的时刻开始至检测到结束事件(例如，作品提交的意思表示)的时刻为止的期间。开始事件和结束事件的检测能够与上述的第一例和第二例的情况相同地执行。或者，第一期间也可以是从授课的开始时刻至结束时刻为止的期间。第一图像处理装置10的控制部18能够经由信息处理装置30向第二图像处理装置20、或者信息处理装置30和第二图像处理装置20这两者直接实时发送规定帧数的第一图像。在第二图像处理装置20侧，能够将接收到的规定帧数的第一图像作为动态图像向第二介质投影，从而实时显示经时变化的第一用户侧的纸张的状态。
规定帧数的第二图像可以是由第二图像处理装置20的拍摄部22在第二期间以规定帧率拍摄的第二图像(第二影像)。例如，第二期间可以是从在第二图像处理装置20侧拍摄到“文字的图像”的时刻开始，然后至检测到第二图像处理装置20侧的开始事件(例如，第二用户按下输入部26所包括的按钮等图标或按下物理键、或者手取下砚台上的笔的情况)、结束事件(例如，结果通知的意思表示)的时刻为止的期间。开始事件和结束事件的检测能够与上述的第三例和第四例的情况相同地执行。或者，第二期间也可以是从授课的开始时刻至结束时刻为止的期间。第二图像处理装置20的控制部28能够经由信息处理装置30向第一图像处理装置10、或者信息处理装置30和第一图像处理装置10这两者直接实时发送规定帧数的第二图像。在第一图像处理装置10侧，能够将接收到的规定帧数的第二图像作为动态图像向第一介质投影，从而实时显示经时变化的第二用户侧的纸张的状态。
根据第一变形例，第一用户和第二用户不仅能够确认彼此的作业结果，还能够确认作业进程(例如，书写顺序或运笔方式等)。其结果，变得容易在书法练习的电子学习(e-learning)中创造出与面对面授课相同的临场感。
另外，例如在本实施方式的第二变形例中，可以在第一变形例的基础上，还加上获取对第一用户和第二用户分别从正面拍摄到的规定帧数的图像数据，在第一图像处理装置10与第二图像处理装置20之间经由信息处理装置30间接或直接地实时接收/发送。第一图像处理装置10和第二图像处理装置20可以在位于各个第一用户和第二用户各自的正面的液晶显示器等的面板上实时显示彼此的姿态。
具体而言，在第二变形例中，信息处理装置30的控制部33还获取对在第一介质上书写文字的第一用户和在第二介质上描绘线的第二用户分别从正面拍摄到的规定帧数的第三图像和规定帧数的第四图像，基于规定帧数的第三图像和规定帧数的第四图像，使配置于第一用户和第二用户各自的正面的面板(例如，液晶显示器等显示装置)实时显示彼此的姿态。例如，第一用户和第二用户的拍摄可以经由分别配置于各自的正面的面板所设置的照相机等外部的拍摄装置进行。
规定帧数的第三图像可以是由第一图像处理装置10的拍摄部12在第三期间以规定帧率拍摄的第三图像(第三影像)。例如，第三期间可以与上述第一期间相同，也可以不同。例如，在第一期间是从检测到第一图像处理装置10侧的开始事件的时刻开始至检测到结束事件的时刻为止的期间的情况下，第三期间可以是从授课的开始时刻至结束时刻为止的期间。第一图像处理装置10的控制部18能够经由信息处理装置30向第二图像处理装置20、或者信息处理装置30和第二图像处理装置20这两者直接实时发送规定帧数的第三图像。在第二图像处理装置20侧，能够通过将接收到的规定帧数的第三图像作为动态图像使配置于第二用户正面的面板显示，从而实时显示经时变化的第一用户的情况。
规定帧数的第四图像可以是由第二图像处理装置20的拍摄部22在第四期间以规定帧率拍摄的第四图像(第四影像)。例如，第四期间可以与上述第二期间相同，也可以不同。例如，在第二期间是从在第二图像处理装置20侧拍摄到“文字的图像”的时刻开始至检测到开始事件和结束事件的时刻为止的期间的情况下，第四期间可以是从授课的开始时刻至结束时刻为止的期间。第二图像处理装置20的控制部28能够经由信息处理装置30向第一图像处理装置10、或者信息处理装置30和第一图像处理装置10这两者直接实时发送规定帧数的第四图像。在第一图像处理装置10侧，能够通过将接收到的规定帧数的第四图像作为动态图像使配置于第一用户正面的面板显示，从而实时显示经时变化的第二用户的情况。
根据第二变形例，第一用户和第二用户还能够确认彼此的表情或姿势等追加信息。其结果，变得更容易在书法练习的电子学习(e-learning)中创造出与面对面授课相同的临场感。
另外，例如也可以是将通用的计算机作为上述实施方式所涉及的信息处理装置30而发挥功能的实施方式。具体地，将记载了实现上述实施方式涉及的信息处理装置30的各功能的处理内容的程序存储到通用计算机的存储器中，使处理器读取该程序而执行。由此，本公开也可以作为处理器可执行的程序、或存储该程序的非临时性计算机可读介质实现。
以下对本公开的实施方式的一部分进行例示。但需要注意的是，本公开的实施方式并不限定于此。
[附记1]
一种信息处理装置，其为具备控制部的信息处理装置，
所述控制部获取包括第一区域的第一介质的第一图像，所述第一区域写有文字，
将所述第一图像向第二介质的规定位置投影，
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正，
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
[附记2]
一种信息处理装置，其为附记1所记载的信息处理装置，其中，
所述文字的颜色为黑色，
所述控制部在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
[附记3]
一种信息处理装置，其为附记2所记载的信息处理装置，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
[附记4]
一种信息处理装置，其为附记1至3中任一项所记载的信息处理装置，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
[附记5]
一种信息处理装置，其为附记4所记载的信息处理装置，其中，
所述控制部基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
[附记6]
一种信息处理装置，其为附记1至5中任一项所记载的信息处理装置，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
[附记7]
一种信息处理装置，其为附记6所记载的信息处理装置，其中，
所述控制部还获取对在所述第一介质上书写所述文字的第一用户和在所述第二介质上描绘所述线的第二用户分别从正面拍摄到的规定帧数的第三图像和规定帧数的第四图像，基于所述规定帧数的第三图像和所述规定帧数的第四图像，使配置于所述第一用户和所述第二用户各自的正面的面板实时显示彼此的姿态。
[附记8]
一种投影方法，其为信息处理装置执行的投影方法，
包括：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
[附记9]
一种投影方法，其为附记8所记载的投影方法，其中，
所述文字的颜色为黑色，
所述投影方法还包括：
在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
[附记10]
一种投影方法，其为附记9所记载的投影方法，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
[附记11]
一种投影方法，其为附记8至10中任一项所记载的投影方法，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
[附记12]
一种投影方法，其为附记11所记载的投影方法，其中，
还包括：
基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
[附记13]
一种投影方法，其为附记8至12中任一项所记载的投影方法，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
[附记14]
一种投影方法，其为附记13所记载的投影方法，其中，
还包括：
还获取对在所述第一介质上书写所述文字的第一用户和在所述第二介质上描绘所述线的第二用户分别从正面拍摄到的规定帧数的第三图像和规定帧数的第四图像，基于所述规定帧数的第三图像和所述规定帧数的第四图像，使配置于所述第一用户和所述第二用户各自的正面的面板实时显示彼此的姿态。
[附记15]
一种非暂时性计算机可读取介质，其存储有用于使信息处理装置执行包括下述动作在内的动作的程序：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
[附记16]
一种非暂时性计算机可读取介质，为附记15所记载的非暂时性计算机可读取介质，其中，
所述文字的颜色为黑色，
所述动作还包括：
在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
[附记17]
一种非暂时性计算机可读取介质，为附记16所记载的非暂时性计算机可读取介质，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
[附记18]
一种非暂时性计算机可读取介质，为附记15至17中任一项所记载的非暂时性计算机可读取介质，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
[附记19]
一种非暂时性计算机可读取介质，为附记18所记载的非暂时性计算机可读取介质，其中，
所述动作还包括：
基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
[附记20]
一种非暂时性计算机可读取介质，为附记15至19中任一项所记载的非暂时性计算机可读取介质，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
标号的说明
1系统
10第一图像处理装置
11通信部
12拍摄部
13投影部
14检测部
15输出部
16输入部
17存储部
18控制部
20第二图像处理装置
21通信部
22拍摄部
23投影部
24检测部
25输出部
26输入部
27存储部
28控制部
30信息处理装置
31通信部
32存储部
33控制部
40网络
M1 第一用户侧的纸张
M2 第二用户侧的纸张
R1写有文字的区域
R2描绘有线的区域
R3重叠区域
S1第一用户侧的纸张的图像
S2第二用户侧的纸张的图像

Claims (20)

1.一种信息处理装置，其具备控制部，其中，
所述控制部获取包括第一区域的第一介质的第一图像，所述第一区域写有文字，
将所述第一图像向第二介质的规定位置投影，
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正，以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
2.根据权利要求1所述的信息处理装置，其中，
所述文字的颜色为黑色，
所述控制部在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
3.根据权利要求2所述的信息处理装置，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
4.根据权利要求1至3中任一项所述的信息处理装置，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
5.根据权利要求4所述的信息处理装置，其中，
所述控制部基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
6.根据权利要求1至3中任一项所述的信息处理装置，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
7.根据权利要求6所述的信息处理装置，其中，
所述控制部还获取对在所述第一介质上书写所述文字的第一用户和在所述第二介质上描绘所述线的第二用户分别从正面拍摄到的规定帧数的第三图像和规定帧数的第四图像，基于所述规定帧数的第三图像和所述规定帧数的第四图像，使配置于所述第一用户和所述第二用户各自的正面的面板实时显示彼此的姿态。
8.一种投影方法，其是由信息处理装置执行的投影方法，
包括：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
9.根据权利要求8所述的投影方法，其中，
所述文字的颜色为黑色，
所述投影方法还包括：
在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
10.根据权利要求9所述的投影方法，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
11.根据权利要求8至10中任一项所述的投影方法，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
12.根据权利要求11所述的投影方法，其还包括：
基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
13.根据权利要求8至10中任一项所述的投影方法，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
14.根据权利要求13所述的投影方法，其还包括：
还获取对在所述第一介质上书写所述文字的第一用户和在所述第二介质上描绘所述线的第二用户分别从正面拍摄到的规定帧数的第三图像和规定帧数的第四图像，基于所述规定帧数的第三图像和所述规定帧数的第四图像，使配置于所述第一用户和所述第二用户各自的正面的面板实时显示彼此的姿态。
15.一种非暂时性计算机可读取介质，其存储有用于使信息处理装置执行包括下述动作在内的动作的程序：
获取包括第一区域的第一介质的第一图像，所述第一区域写有文字；
将所述第一图像向第二介质的规定位置投影；
获取包括第二区域的所述第二介质的第二图像，所述第二区域描绘了与被投影的所述第一图像中表示的所述文字不同颜色的线，
对所述第二图像上的所述第一区域和所述第二区域重叠的重叠区域的颜色数据进行校正；以及
以所述文字的位置一致的方式将校正后的所述第二图像向所述第一介质投影。
16.根据权利要求15所述的非暂时性计算机可读取介质，其中，
所述文字的颜色为黑色，
所述动作还包括：
在将所述第一图像向所述第二介质投影时，对载置有所述第二介质的载置台整体避开所述第一区域而照射照明光。
17.根据权利要求16所述的非暂时性计算机可读取介质，其中，
对于所述载置台将除了投影所述第一图像的投影光和所述照明光之外的光进行遮光。
18.根据权利要求15至17中任一项所述的非暂时性计算机可读取介质，其中，
所述颜色数据是所述重叠区域的颜色所对应的RGB值。
19.根据权利要求18所述的非暂时性计算机可读取介质，其中，
所述动作还包括：
基于在所述第二图像上的所述第一区域与所述第二区域不重叠的区域中的所述线的颜色所对应的RGB值，校正所述重叠区域的颜色所对应的RGB值。
20.根据权利要求15至17中任一项所述的非暂时性计算机可读取介质，其中，
所述第一图像是规定帧数的第一图像，所述第二图像是规定帧数的第二图像。
CN202310554791.1A 2022-05-17 2023-05-17 信息处理装置、投影方法、及非暂时性计算机可读取介质 Pending CN117082219A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022081179A JP2023169830A (ja) 2022-05-17 2022-05-17 情報処理装置、投影方法、及びプログラム
JP2022-081179 2022-05-17

Publications (1)

Publication Number Publication Date
CN117082219A true CN117082219A (zh) 2023-11-17

Family

ID=88704950

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310554791.1A Pending CN117082219A (zh) 2022-05-17 2023-05-17 信息处理装置、投影方法、及非暂时性计算机可读取介质

Country Status (3)

Country Link
US (1) US20230379442A1 (zh)
JP (1) JP2023169830A (zh)
CN (1) CN117082219A (zh)

Also Published As

Publication number Publication date
US20230379442A1 (en) 2023-11-23
JP2023169830A (ja) 2023-11-30

Similar Documents

Publication Publication Date Title
JP3844075B2 (ja) 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP5266954B2 (ja) 投写型表示装置および表示方法
CN103019638B (zh) 显示装置、投影仪以及显示方法
US7176890B2 (en) Projection-type display device and software program
JP5122641B2 (ja) カメラとマーク出力とによるポインティング装置
US7764307B2 (en) Remote instruction system, computer readable medium for remote instruction system and method
US8827461B2 (en) Image generation device, projector, and image generation method
KR101428064B1 (ko) 화면 왜곡 보정 장치 및 방법
JPWO2008012905A1 (ja) 認証装置および認証用画像表示方法
CN109644248B (zh) 投射型影像显示装置和投射影像的调整方法
CN114007053B (zh) 图像生成方法、图像生成系统和记录介质
JP2008076445A (ja) 投影型表示装置、投影型表示方法、該方法を実行させるプログラム及び該プログラムを格納したコンピュータ読み取り可能な記録媒体
CN117082219A (zh) 信息处理装置、投影方法、及非暂时性计算机可读取介质
JP5445858B2 (ja) 入力支援装置、入力支援方法、及びプログラム
JP5550111B2 (ja) 撮像装置、撮像方法、及びプログラム
JP2019016843A (ja) 原稿読取装置、原稿読取装置の制御方法、及びプログラム
CN114339179A (zh) 投影校正方法、装置、存储介质以及投影设备
WO2012111121A1 (ja) プロジェクタおよび議事録情報生成方法
JP6220931B1 (ja) 画像処理システム、画像処理方法、及び画像処理端末
JP2009060564A (ja) 会議システム
JP2018191094A (ja) 原稿読取装置、原稿読取装置の制御方法、及びプログラム
US20200174555A1 (en) Display device, display method, and display system
JP2001350585A (ja) 座標入力機能付き画像表示装置
JP2007148612A (ja) 撮影装置、画像処理方法および画像処理プログラム
KR20040088166A (ko) 그림자를 이용한 인터액티브 동영상 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination