WO2013175550A1 - 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体 - Google Patents

撮像システム、撮像方法、撮像用プログラム及び情報記録媒体 Download PDF

Info

Publication number
WO2013175550A1
WO2013175550A1 PCT/JP2012/062930 JP2012062930W WO2013175550A1 WO 2013175550 A1 WO2013175550 A1 WO 2013175550A1 JP 2012062930 W JP2012062930 W JP 2012062930W WO 2013175550 A1 WO2013175550 A1 WO 2013175550A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
information
document
range
imaging system
Prior art date
Application number
PCT/JP2012/062930
Other languages
English (en)
French (fr)
Inventor
松本　和彦
Original Assignee
ピタフォー・モバイル・エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ピタフォー・モバイル・エルエルシー filed Critical ピタフォー・モバイル・エルエルシー
Priority to JP2014516535A priority Critical patent/JPWO2013175550A1/ja
Priority to PCT/JP2012/062930 priority patent/WO2013175550A1/ja
Publication of WO2013175550A1 publication Critical patent/WO2013175550A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image

Definitions

  • the present invention belongs to the technical field of an imaging system, an imaging method, an imaging program, and an information recording medium. More specifically, the present invention belongs to the technical field of an imaging system and an imaging method for imaging an imaging object by an imaging means such as a camera, a program for the imaging system, and an information recording medium on which the program is recorded.
  • Patent Documents 1 to 3 As the prior art related to the above-described imaging apparatus using a digital camera or the like, for example, the contents disclosed in the following Patent Documents 1 to 3 are known as related to the so-called “document table camera”. ing.
  • the right end of the single imaging result (captured image) itself is the document or the like itself, and at that position, There is no boundary line between the edge of the captured document or the like and the background.
  • the biggest problem that the entire imaging of the document etc. cannot be completed at one time is to combine the imaging results obtained in multiple times.
  • There is a distortion at the time That is, for example, when such a connection is performed, information indicating in which position on the document the character, symbol, or figure corresponding to the description content of the document was originally not obtained. . More specifically, for example, when the upper half and the lower half of the document or the like are imaged separately and with a sufficient overlapping range, the above-described omission or the like does not occur.
  • one “line” made up of letters on a document or the like may not be horizontal at the joining portion or the like, and may be inclined slightly, for example.
  • it may be an imaging result in which the upper and lower edges of the document are generally horizontal, but the row has dropped to the right near the joint between the two imaging results.
  • the contents described in a document including the line cannot be accurately recognized.
  • the present invention has been made in view of the above-described demand, and an example of the problem is that even when a part of the document or the like is outside the imaging range, the size of the document or the shape of the document or the document It is an object of the present invention to provide an imaging system and an imaging method capable of accurately recognizing description contents and the like, a program for the imaging system, and an information recording medium on which the program is recorded.
  • the invention according to claim 1 uses a portable information processing apparatus including an imaging unit such as a camera, and an image in which a part of the outer edge is outside the imaging range of the imaging unit.
  • fixing / restricting means such as a fixture for fixing the imaging object or restricting movement of the imaging object, and a relative position and relationship with the fixing / restricting means are known and Auxiliary means such as auxiliary figures that are captured by the imaging means together with the imaging object that is fixed or the movement is restricted by being located within the imaging range, and imaging of the imaging means
  • the specifying unit such as a CPU for specifying the auxiliary unit in the imaging range, and the specified
  • the imaging corresponding to the imaging range is corrected by correcting the imaging information corresponding to the imaging range based on the auxiliary means and the known and constant position and the relationship of the auxiliary means with respect to the fixing / restricting means.
  • Correction acquisition means such as a CPU
  • a computer included in the information processing apparatus of the system is operated within the imaging range based on imaging information corresponding to the imaging range output from the imaging unit by imaging of the imaging unit.
  • the imaging information to be corrected is corrected to function as correction acquisition means for acquiring corrected imaging information obtained by imaging the imaging object corresponding to the imaging range.
  • the imaging program according to claim 29 is recorded so as to be readable by the computer according to claim 29.
  • the invention according to claim 3 is the imaging system according to claim 2, wherein the synthesizing unit is configured such that each of the plurality of portions of the imaging target object that partially overlap each other. Is configured to synthesize the composite image by alignment processing using a plurality of the corrected imaging information.
  • a plurality of corrected imaging information in which a plurality of portions of the imaging target that partially overlap each other are set as the imaging range. Since the synthesized image is synthesized by the alignment processing using the image, it is possible to acquire a higher-accuracy image corresponding to the entire imaging target.
  • the invention according to claim 5 is the imaging system according to any one of claims 1 to 3, wherein the auxiliary means includes the imaging means and the imaging object. It is comprised so that it may be an auxiliary material installed between.
  • the auxiliary means is installed between the imaging means and the imaging object. Since it is a thing, the auxiliary
  • the invention according to claim 6 is the imaging system according to any one of claims 1 to 3, wherein the auxiliary means includes the imaging means and the imaging object. It is configured to be a reference pattern drawn on a transparent object placed between and.
  • the invention according to claim 7 is the imaging system according to any one of claims 1 to 3, wherein the imaging object side surface of the imaging object is Projection means such as a projection device for projecting an image of a reference pattern as the auxiliary means is further provided.
  • the invention according to claim 8 is the imaging system according to any one of claims 1 to 7, wherein the fixing by the fixing / restricting means is temporarily released. Or by changing the position, angle or deformation state of the imaging object by moving the imaging object within the limit of movement, The means specifies the auxiliary means in each of the plurality of imaging information sequentially output from the imaging means in response to the change by the aspect changing means, and the correction acquisition means includes the specified auxiliary means, Based on the known and constant position and the relationship of the auxiliary unit with respect to the fixing / restricting unit, the imaging information corresponding to each imaging range is corrected, and each imaging unit is corrected. It constituted the imaged object corresponding to the range so as to obtain the correction imaging information obtained by imaging.
  • the fixing by the fixing / restricting means is temporarily released, or the movement Within the limits, the position, angle, or deformation state of the imaging object is changed, and auxiliary means specified in each of a plurality of pieces of imaging information sequentially output in response to the change, and fixing / fixing of the auxiliary means Since the corrected imaging information is acquired from each imaging information based on the known and constant position and relationship with respect to the limiting means, accurate corrected imaging information can be acquired for various imaging objects.
  • the invention according to claim 9 is the imaging system according to claim 8, wherein the fixing / restricting means moves the imaging object in one direction within the imaging range.
  • the aspect changing unit is configured to be a moving unit that moves the imaging target in another direction within the imaging range different from the one direction.
  • the invention according to claim 10 is the imaging system according to claim 8 or 9, wherein the imaging object is in a state in which the aspect is changed by the aspect changing means.
  • the correction acquisition unit acquires the corrected imaging information based on the imaging information output from the imaging unit in a state where the change is stopped. Configured to do.
  • the corrected imaging information based on the imaging information in a state where the change of the mode is stopped by the mode change unit. Therefore, accurate corrected imaging information can be acquired.
  • an invention according to claim 11 is the imaging system according to any one of claims 1 to 10, wherein the information processing device is A determination unit such as a CPU that determines whether or not the imaging object is stationary based on the imaging information, and when it is determined that the imaging object is stationary, the imaging unit And a control unit such as a CPU that performs imaging.
  • the information processing device is A determination unit such as a CPU that determines whether or not the imaging object is stationary based on the imaging information, and when it is determined that the imaging object is stationary, the imaging unit
  • a control unit such as a CPU that performs imaging.
  • the imaging target is stationary based on the imaging information.
  • the imaging means performs imaging of the imaging range, so that imaging of the imaging range can be automated.
  • the invention according to claim 12 is the imaging system according to any one of claims 1 to 11, wherein the imaging object in which the fixation or the movement is restricted.
  • Mounting means such as a mounting table, and holding means such as a stand that holds the information processing apparatus and makes the relative position and relationship of the imaging means relative to the mounting means constant.
  • the information processing apparatus further includes a correction unit such as a CPU that corrects the imaging information output from the imaging unit using surface correspondence information corresponding to the surface of the mounting unit on the imaging unit side.
  • the relative position and relationship of the imaging unit with respect to the mounting unit are made constant. Since the holding means is provided and the imaging information is corrected using the surface correspondence information, the imaging object can be imaged easily and with high image quality using the holding means and the portable information processing apparatus.
  • the invention according to claim 14 is configured such that in the imaging system according to claim 13, the surface has no pattern and is one color.
  • the invention according to claim 15 is the imaging system according to claim 12, in which the imaging means has the surface of the placing means on which the imaging object is not placed. Imaging is performed, and imaging information for correction that is the imaging information corresponding to the surface is output.
  • the correction unit includes the surface correspondence information corresponding to the surface of the placing unit on which the imaging object is not placed. Then, using the output correction imaging information, it is configured to remove reflections included with the imaging object in an image obtained by imaging the imaging object by the imaging means.
  • the surface correspondence information corresponding to the surface of the mounting means on which the imaging object is not placed, the correction imaging information Since the reflections included in the image are removed using, the shadow can be removed easily and with high image quality using a portable information processing device and holding means.
  • the invention according to claim 16 is the imaging system according to claim 12, wherein the surface has an achromatic pattern, and the correction means At least one of brightness and contrast is configured to be corrected using the surface correspondence information corresponding to the pattern.
  • an invention according to claim 17 is the imaging system according to claim 12, wherein the surface has a colored pattern, and the correction unit includes the imaging information. The color is corrected using the surface correspondence information corresponding to the pattern.
  • the invention according to claim 18 is the imaging system according to claim 12, wherein the surface has reference information that is a reference of at least one of length and angle.
  • the correction means is configured to correct at least distortion in the imaging information using the surface correspondence information corresponding to the reference information.
  • the surface of the mounting means has reference information that serves as a reference for at least one of length and angle. Since at least the distortion in the imaging information corresponding to the imaging range is corrected using the surface correspondence information corresponding to the reference information, the distortion and the like can be corrected easily and with high accuracy.
  • the invention described in claim 19 is the imaging system according to claim 12, wherein the surface has reference information that is a reference of at least one of length and angle.
  • the information processing apparatus further includes a recognition unit such as a CPU for recognizing the specifications of the imaging object placed on the placing unit using the output imaging information and the reference information. Prepare.
  • the surface of the mounting means on which the imaging object is placed in addition to the operation of the invention described in claim 12, the surface of the mounting means on which the imaging object is placed, imaging information corresponding to the imaging object, and the standard Since the specification of the imaging object in the mounting means is recognized using the information, the specification of the imaging object can be accurately recognized.
  • an invention according to claim 20 is the imaging system according to any one of claims 16 to 19, wherein the imaging means includes the imaging object.
  • the surface of the placing means is imaged together with the imaging object, the imaging information corresponding to the surface and the imaging object is output, and the correction means is output using the surface correspondence information It is configured to correct the imaging information.
  • the surface of the mounting means on which the imaging object is placed and the imaging object Since the imaging information corresponding to the object is corrected using the surface correspondence information, the imaging information can be corrected accurately.
  • the invention according to claim 21 is the imaging system according to claim 12, wherein the information processing apparatus is configured to capture the image on the placement unit based on the surface correspondence information. Further provided is a determination means such as a CPU for determining the presence or absence of an object.
  • the presence / absence of the imaging target is determined based on the surface correspondence information, so the presence / absence of the imaging target is accurately determined. be able to.
  • an invention according to claim 22 is the imaging system according to any one of claims 12 to 21, wherein the information processing device includes the imaging information and the surface.
  • the information processing device includes the imaging information and the surface.
  • generating means such as a CPU that generates imaging environment information indicating an imaging environment related to imaging of the imaging target, and notification means such as a display that notifies the generated imaging environment information; Is further provided.
  • the imaging environment information is generated based on the imaging information and the surface correspondence information, Since the generated imaging environment information is notified, it is possible to notify the user of the imaging environment and improve it.
  • the invention described in claim 23 is the imaging system according to any one of claims 12 to 21, wherein the information processing device includes the imaging information and the surface.
  • generating means such as a CPU for generating imaging environment information indicating an imaging environment related to imaging of the imaging object based on the correspondence information, and the imaging system changes the relative position and relationship.
  • a control unit such as a CPU for controlling the change unit to change the relative position and relationship based on the generated imaging environment information.
  • the imaging environment information is generated based on the imaging information and the surface correspondence information, Since the relative position and relationship between the imaging unit and the mounting unit are changed based on the generated imaging environment information, the imaging object can be imaged with higher image quality in the imaging environment.
  • an invention according to claim 24 is the imaging system according to any one of claims 12 to 23, wherein the information processing apparatus stores the corrected imaging information. Recording means such as a ROM for recording is further provided.
  • the invention according to claim 25 is the imaging system according to any one of claims 1 to 24, wherein the fixing or the movement is restricted by the fixing / restricting means.
  • an exchange means such as an auto sheet feeder mechanism for exchanging a plurality of the imaging objects within the imaging range, and identification information that can identify each imaging object to be exchanged
  • Identification information display means such as a mounting table, that respectively displays within the imaging range at a timing corresponding to the replacement of the imaging object, the imaging means being displayed corresponding to the imaging object and the imaging object
  • the identification information is imaged together and the imaging information is output, and the correction acquisition unit identifies each imaging object using the identification information included in the imaging information, and Configured to obtain the correction imaging information corresponding to the imaged object.
  • identification information that can identify each imaging object to be exchanged is used for the exchange.
  • Each image is displayed within the imaging range at the corresponding timing, and the identification information and the imaging object are imaged together to output the imaging information, and each imaging object is identified using the identification information included in the imaging information. Therefore, the corrected imaging information corresponding to them can be acquired while identifying each of the plurality of imaging objects.
  • an invention according to claim 26 is the imaging system according to any one of claims 1 to 25, wherein the fixing or the movement is restricted by the fixing / restricting means.
  • the timing information indicating the imaging timing by the imaging means corresponding to the replacement such as an Aether sheet feeder mechanism for exchanging a plurality of the imaging objects within the imaging range, and each imaging object Timing information display means for displaying corresponding to the replacement of the information, and timing information display means such as a mounting table within the imaging range, wherein the imaging means is based on the displayed timing information
  • the imaging object is imaged and the imaging information is output.
  • the timing information is obtained within the imaging range corresponding to the exchange of each imaging object. Since the imaging information is output based on the displayed timing information and the imaging information is output, one of the imaging objects is missing when imaging while exchanging a plurality of imaging objects. Or overlapping images can be prevented.
  • an invention according to claim 27 is the imaging system according to any one of claims 1 to 25, wherein the imaging means includes the imaging means and the previously described placing means. Output the imaging information including the auxiliary means and the imaging information not including the auxiliary means for the same imaging object, while maintaining the relative position and the relationship relative to each other, and the correction acquisition means The corrected imaging information is acquired based on the respective output imaging information.
  • the relative position and relationship between the imaging means and the placing means are made constant.
  • the imaging information including the auxiliary means and the imaging information not including the auxiliary means are output for the same imaging object, and the corrected imaging information is acquired based on the output imaging information. Even when there is a part that is not imaged in the imaging object, the entire imaging object can be imaged and corrected.
  • the size or shape of the imaging object or the description content of the imaging object can be accurately recognized.
  • the contents of the imaging target can be accurately recognized.
  • (a) is an external appearance top view which shows a 3rd example
  • (b) is an external appearance top view which shows a 4th example.
  • (a) is an external appearance top view which shows a 5th example
  • (b) is an external appearance top view which shows a 6th example.
  • FIGS. 1-10 Each embodiment described below is a capture system that captures (i.e., records) an image using a portable smartphone including a digital camera (hereinafter simply referred to as a camera) capable of continuous shooting and moving image capturing.
  • a digital camera hereinafter simply referred to as a camera
  • the present invention may be applied to a capture system that captures an image using an independent digital camera as an apparatus instead of the digital camera provided in the smartphone.
  • a smartphone user according to the present invention is hereinafter simply referred to as a “carrier”.
  • the stand ST illustrated in FIG. 1A is a stand that can be assembled by folding a foldable sheet material, for example. That is, as shown in FIG. 1, the stand ST is a foldable stand ST that is cut out from a single sheet-like material (for example, corrugated cardboard or the like). It is set as the structure which hold
  • a foldable stand ST that is cut out from a single sheet-like material (for example, corrugated cardboard or the like). It is set as the structure which hold
  • the stand ST shown in FIG. 1 is configured to include a holding base PT1, support portions PT2 and PT3, and a mounting base PT4, which are formed of the single sheet-like material.
  • the mounting table PT4 corresponds to an example of “mounting unit”, an example of “identification information display unit”, and an example of “timing information display unit” according to the present invention.
  • the mounting table PT4 is provided with a slit SL for positioning the document P to be imaged at the time of imaging.
  • the solid line is cut at the joint between the holding base PT1 and the support PT2, the joint between the support PT2 and the support PT3, and the joint between the placement part PT4 and the support PT2.
  • the alternate long and short dash line indicates a line part that is valley-folded during assembly as the stand ST.
  • 1A shows that the stand ST is actually assembled, the document P is placed along the slit SL of the placement part PT4, and the smartphone S is placed on the holding table PT1 so that the camera faces the document P.
  • 1 is an external perspective view of a capture system CS in a state where it can be placed and imaged.
  • the reference pattern according to the first embodiment may be provided on the surface of the mounting table PT4 facing the holding table PT1 by a technique such as printing or sticking. .
  • the reference pattern according to the first embodiment corrects the color, brightness, or contrast, the shape of the captured document P, or the like on the image data as the imaging result in the capture processing according to the first embodiment to be described later. Used as a criterion.
  • a current image buffer 32 is formed as a volatile storage area as a buffer necessary for executing the capture processing according to the first embodiment centered on the CPU 1.
  • the CPU 1 is an example of “identifying means”, an example of “correction obtaining means”, an example of “control means”, an example of “determination means”, an example of “correction means”, It corresponds to an example of “means” and an example of “generation means”, respectively.
  • the display 5 corresponds to an example of “notification means”, an example of “identification information display means”, and an example of “timing information display means” according to the present invention.
  • the ROM 2 corresponds to an example of a “recording unit” according to the present invention.
  • the communication interface 10 controls transmission / reception of data with the network via the antenna ANT under the control of the CPU 1.
  • the communication interface 10 may be configured not only to transmit / receive data wirelessly via the antenna ANT but also to control data transmission / reception via a wired LAN or a so-called USB (Universal Serial Bus). it can.
  • the call control unit 6 controls a voice call as the smartphone S using the microphone 8 and the speaker 7 under the control of the CPU 1. Furthermore, the operation part 4 produces
  • the RAM 3 temporarily stores data necessary for the current image buffer 32, and further temporarily stores other data necessary for processing as the smartphone S. Further, the display 5 displays information necessary for the process as the smartphone S to the user under the control of the CPU 1 in addition to the information necessary for the capture process according to the first embodiment.
  • the camera 9 continuously captures or captures the information on the document P or the like, and captures image data (digitized image data) corresponding to the captured image.
  • image data digital image data
  • the data is output to the CPU 1 continuously.
  • the CPU 1 temporarily inputs the output image data to the current image buffer 32 in the RAM 3.
  • the CPU 1 executes the capture process according to the first embodiment using the image data stored in the current image buffer 32.
  • the light 11 illuminates a part or all of the document P or the like imaged by the camera 9 under the control of the CPU 1 so that the illuminance is suitable for the imaging at the time of the imaging.
  • reference patterns there are three types of reference patterns as reference patterns according to the first embodiment. More specifically, the reference pattern RP1 for color correction illustrated in FIG. 3A, the reference pattern RP2 for lightness or contrast correction illustrated in FIG. 3B, and the distortion illustrated in FIG. 3C. There are three types of reference pattern RP3-1 and reference pattern RP3-2 for equal correction.
  • the reference pattern RP1 illustrated in FIG. 3A is provided, for example, at the end of the imaging range of the camera 9 in the mounting table PT4 illustrated in FIG. 1, and the scale SC, the color pattern CRP, It is comprised by.
  • the color pattern CRP is, for example, red ⁇ yellow ⁇ green ⁇ blue ⁇ red from left to right in the drawing of FIG. 3A, and the color of each boundary portion changes gradually (continuously) by gradation. This is a color sample pattern.
  • the scales SC are formed at preset intervals. Then, when the reference pattern RP1 is imaged by the camera 9 together with the document P, the CPU 1 performs correction processing on the color described later in the image data as the imaging result.
  • the reference pattern RP3-1 and the reference pattern RP3-2 illustrated in FIG. 3C are within the imaging range of the camera 9 in the mounting table PT4 illustrated in FIG. 1 as illustrated in FIG. 3C, for example. It is provided in a region on the diagonal line and outside the slit SL.
  • the reference pattern RP3-1 and the reference pattern 3-2 are each composed of two line segments that are parallel to each side of the mounting table PT4 and orthogonal to each other. Then, when the reference pattern RP3-1 and the reference pattern RP3-2 are imaged together with the document P by the camera 9, the CPU 1 performs distortion correction processing described later on the image data as the imaging result.
  • the capture processing according to the first embodiment is started, for example, when a predetermined operation by a carrier is executed on the operation unit 4.
  • the CPU 1 When the document P is placed and the capture process is started, as shown in FIG. 4, the CPU 1 first activates the camera 9 to image the document P placed in the imaging range (step S1). ). Thereby, a plurality of images corresponding to the document P and any of the reference patterns RP illustrated in FIG. 3 (images corresponding to the current image) are captured by continuous shooting or moving images. Then, the CPU 1 temporarily inputs the image data of the current image input from the camera 9 along with the imaging to the current image buffer 32 (step S2). Next, in any one of the images picked up by the process of step S1, the CPU 1 has a boundary between the document P shown in the image and the periphery thereof (in the example shown in FIG. 1, the document P and the document P are placed thereon).
  • step S3 It is identified whether or not the entire boundary with the mounting table PT4 is recognized (step S3).
  • step S3 the entire boundary is recognized in any image in the identification in step S3 (step S3; YES)
  • the CPU 1 next sets in advance the image data stored in the current image buffer 32 at that time. It is determined whether or not the document P or the like shown in the image is stationary for the predetermined time (step S4). Note that in this case, it may be configured so as to sequentially notify whether or not the document P is recognized by using, for example, blinking of the display 5 and the light 11 or sound emission from the speaker 7. it can.
  • step S4 If it is determined in step S4 that the document P or the like in the image is stationary for a predetermined time (step S4; YES), the CPU 1 next stores the image data stored in the current image buffer 32 at that time. Then, after performing correction processing using any of the reference patterns RP, one of the image data is recorded (ie, captured) in the ROM 2 (step S5). Thereafter, the CPU 1 determines whether or not an operation for ending the capture processing according to the first embodiment has been performed by the user, for example, in the operation unit 4 (step S6), and when the end operation is performed ( Step S6; YES), the capture processing according to the first embodiment is terminated. On the other hand, when the end operation is not performed in the determination in step S6 (step S6; NO), the CPU 1 returns to step S2 and performs the next imaging.
  • FIG. 5A is a plan view (the slit SL is omitted) on which the actual document P corresponding to the image data G in FIG. 5A is placed.
  • FIG. 5A an intersection of a straight line obtained by extending the line segment AC of the reference pattern RP3-1 in the A direction and a straight line obtained by extending the line segment DF of the reference pattern RP3-2 in the F direction is defined as P.
  • the position on the mounting table PT4 can be determined. If the reference pattern RP3-1 and the reference pattern RP3-2 are imaged together with the document P in this way, the mounting table PT4 at an arbitrary point P (a point S that is one of the corners of the document P in the case of FIG. 5). Since the upper position is determined, as a result, the distortion in the image data G can be corrected, and the position, shape and dimensions of the entire document P on the mounting table PT4 can be determined and recognized. In order to correct more accurately, for example, a ratio between the line segment AC and the line segment FD in FIG. 5A may be used.
  • the stand ST that makes the relative position and relationship of the camera 9 relative to the mounting table PT4 known and constant is used, and the reference pattern RP is used. Since the image data is corrected, the document P can be picked up simply and with high image quality using the stand ST and the portable smartphone S.
  • the brightness and the like can be corrected easily and with high accuracy.
  • the color in the image data G is corrected using the reference pattern RP1 (see FIG. 3A), the color can be corrected easily and with high accuracy.
  • the specifications such as the position, shape and dimensions of the document P on the mounting table PT4 are recognized using the reference pattern RP3-1 and the reference pattern RP3-2, the specifications of the document P are accurately recognized. be able to.
  • the image data G including both the reference pattern RP on the mounting table PT4 on which the document P is placed and the document P itself is corrected using the reference pattern RP, the image data G can be corrected accurately. it can.
  • the surface of the mounting table PT4 on which the document P is not mounted is imaged by the camera 9, and the corresponding image data G (including an image corresponding to the reference pattern RP) is used. It is also possible to perform a correction so as to remove the shadow included together with the document P in the image data G obtained by capturing the document P with the camera 9 afterwards.
  • the shadow included in the image data G is removed using the reference pattern RP and the image of the mounting table PT4 on which the document P is not mounted, the portable smartphone S and the stand ST are used.
  • the shadow can be easily removed with high image quality.
  • the mounting table PT4 that does not have the reference pattern RP can be used.
  • the shadow can be accurately removed by making the surface of the mounting table PT4 unpatterned and one color.
  • the surface of the mounting table PT4 on which the document P is not placed is imaged by the camera 9 as in the case of the first modification, and the corresponding image data G is used. It is also possible to perform a correction so as to remove the reflection included together with the document P in the image data G obtained by capturing the document P with the camera 9 afterwards.
  • the portable smartphone S and the stand ST are By using it, it is possible to remove the reflection easily and with high image quality.
  • the presence / absence of the document P is determined based on the image data G, the presence / absence of the document P can be accurately determined.
  • a change mechanism that automatically changes the relative position and relationship between the camera 9 of the smartphone S and the mounting table PT4 is provided, and any reference pattern RP included in the image data G is provided. It can also be configured to generate data indicating an imaging environment when imaging the document P and to drive the change mechanism based on this data, similarly to the fourth modification.
  • This changing mechanism corresponds to an example of a “changing unit” according to the present invention. In this case, since the relative position and relationship between the camera 9 and the mounting table PT4 are changed based on the generated data, the document P can be imaged with high image quality in a better imaging environment.
  • FIG. 6 is a diagram for explaining the principle of correction processing in the capture processing according to the second embodiment
  • FIGS. 7 to 10 are external plan views each illustrating the configuration of the imaging system according to the second embodiment.
  • FIGS. 11 to 13 are diagrams illustrating the alignment process according to the second embodiment.
  • the hardware configuration of the smartphone according to the second embodiment is basically the same as the smartphone S according to the first embodiment except for the configuration of the placement unit, the smartphone according to the first embodiment. About the same member as S, the structure, a function, etc. are demonstrated, omitting a part of detailed description using the same member number.
  • the capture processing according to the second embodiment is generally the same as the capture processing according to the first embodiment, in the following description, the second part will be described with a focus on portions different from the capture processing according to the first embodiment. A capture process according to the embodiment will be described.
  • the capture system according to the second embodiment simultaneously captures, together with the document P, auxiliary graphics (described later) whose relative position with respect to the fixture that fixes the document P or restricts its movement is known and constant. Then, the imaging result of a part of the document P in the image data G is corrected based on the relationship with the captured auxiliary figure and the like, and the dimension of the entire document P and the part of the captured image are corrected only with the part.
  • This fixing tool corresponds to an example of the “fixing / restricting means” according to the present invention, and the fixing tool itself or the auxiliary graphic within the imaging range corresponds to an example of the “auxiliary means” according to the present invention.
  • FIG. 6A image data G as a result of imaging the left portion of the document P by the camera 9 is shown.
  • the document P is imaged after the fixture 20 is placed parallel to the short side direction of the document P at a position corresponding to the center viewed from the entire document P, Image data G illustrated in FIG. 6A is obtained.
  • the left portion of the document P and the fixture according to the second embodiment are not captured because the image is not captured from a position perpendicular to the document P. 20 is imaged in a distorted state in the image data G.
  • Fixture data indicating that the fixture 20 is placed is stored in advance in the ROM 2, for example.
  • the CPU 1 included in the capture system according to the second embodiment specifies the fixture 20 in the image data G corresponding to the imaging range of the camera 9, and further reads the fixture data from the ROM 2. Based on the read fixture data, the document P reflected in the image data G, and the specified fixture 20, the CPU 1 shows the image data G corresponding to the imaging range in FIG. As shown in FIG.
  • the CPU 1 accurately recognizes which part of the document P that has entered the imaging range is the whole part.
  • the imaging range of the camera 9 itself in the case illustrated in FIG. 6B is an imaging range AR indicated by a broken line in FIG. 6B when described in correspondence with FIG.
  • acquisition of the accurate size and the like related to the entire document P described above will be described later, for example, during the capture process of step S5 in the flowchart shown in FIG. It is preferably performed after the alignment process.
  • the fixing tool 20 is composed of two fixing plates 20-1 and 20-2 having an interval at which exactly half of the writing P is exposed. The shape is connected outside the range. Then, the fixture 20 and the document P are placed so that the imaging range AR of the camera 9 at this time is an imaging range indicated by a broken line in FIG. In this case, as indicated by a double-headed arrow in FIG. 7A, the document P cannot move in the left-right direction in FIG. 7A, but can move in the up-down direction. Even in the case of the first example, since it is known and fixed as the fixing tool data that a half area of the document P is exposed and imaged by the fixing tool 20, the CPU 1 applies the captured image data G to the CPU 1. Corrects the image of the document P in the image data G using the fixture data.
  • the fixing device 20 has an interval at which a predetermined range that is equal to or larger than a predetermined amount range (for example, a 1/4 range) in the document P is exposed.
  • a predetermined amount range for example, a 1/4 range
  • a fixed plate 20-1 and a fixed plate 20-2 are provided, and the writing P is fixed at its corners so as to be immovable in the vertical and horizontal directions in FIG. 7B.
  • the lower left corner of the document P is engaged with the right-angled concave portion of the fixture 20 so that the document P is fixed.
  • the fixture 20 and the document P are placed so that the imaging range AR of the camera 9 at this time becomes an imaging range indicated by a broken line in FIG.
  • the fixture 20 since it is known and constant as the fixture data that the fixture 20 exposes and captures a known area of 1/4 or more of the document P, the captured image data G On the other hand, the CPU 1 corrects the image of the document P in the image data G using the fixture data.
  • the document P is fixed by the fixing tool 20 in the same manner as in the second example, and the known and constant position and relationship with respect to the fixing tool 20 are fixed.
  • a rectangular auxiliary figure 20 ⁇ / b> A having the certain position and relationship (range) is projected onto an area on the document P with an optical projection device such as a laser beam.
  • This projection apparatus corresponds to an example of a “projection unit” according to the present invention.
  • the imaging range AR of the camera 9 at this time is an imaging range AR indicated by a broken line in FIG. 8A so as to include all the auxiliary figures 20A.
  • the CPU 1 performs the above-described fixation on the captured image data G.
  • the image of the document P in the image data G is corrected using the tool data.
  • the document P is fixed by the fixing tool 20 as in the case of the second example, and the transparent plate 21 is fixed to the fixing tool 20.
  • a rectangular auxiliary figure 20B having a certain position and relationship (range) is physically written in a region on the transparent plate 21 having a known and certain position and relationship with respect to the fixture 20.
  • the document P is fixed by the fixture 20 while being sandwiched between the transparent plate 21 and the mounting table PT4 (not shown).
  • the imaging range AR of the camera 9 at this time is set to the imaging range AR indicated by a broken line in FIG. 8B so as to include all the auxiliary figures 20B as in the third example.
  • the document P is a sheet of paper as an example of “moving means”, an example of “mode changing means”, and an example of “changing means” according to the present invention. It is placed on the feed roller 22 and the paper feed roller 23, and the paper feed roller 22 and the paper feed roller 23 are intermittently driven by rotation and repeatedly stopped and moved (feed) in FIG. Only conveyed in the direction. At this time, the document P cannot be moved in the vertical direction in FIG. Then, a transparent plate 21 is provided at a position fixed with respect to the positions of the paper feed roller 22 and the paper feed roller 23 for moving the document P, and further, a fixed position with respect to the positions of the paper feed roller 22 and the paper feed roller 23.
  • a rectangular and scaled auxiliary figure 20C having the certain position and relationship (range) is physically written in a region on the transparent plate 21 having the relationship.
  • the imaging range AR of the camera 9 at this time is the imaging range AR indicated by a broken line in FIG. 9A so as to include all the auxiliary figures 20C and the vertical direction of the moving document P.
  • the document P is stopped.
  • the CPU 1 corrects the image of the document P in the image data G using the fixture data.
  • FIG. 9 (b) this is similar to the first example illustrated in FIG. 7 (a), but as illustrated in FIG. 9 (b), the fixture 20 is spaced at an interval where exactly half of the document P is exposed.
  • Two fixed plates 20-1 and 20-2 (of which a portion of the fixed plate 20-2 having a shape straddling the document P is lost) are connected outside the range of the document P. Shape.
  • the fixture 20 and the document P are placed so that the imaging range AR of the camera 9 at this time is an imaging range indicated by a broken line in FIG.
  • the document P cannot move in the left-right direction in FIG. 9B, but can move in the up-down direction.
  • the fixture data that the fixture 20 exposes and captures the half area of the document P.
  • the CPU 1 corrects the image of the document P in the image data G using the fixture data.
  • the fixing tool 20 is in a position and shape where the end of the document P (the left end in the case of FIG. 10) is in close contact, and further from the fixing tool 20 to the document P.
  • a straight line mark 24 is written on the mounting table PT4 at a position corresponding to exactly half of the above. Then, the fixture 20 and the document P are placed in relation to the straight mark 24 so that the imaging range AR of the camera 9 at this time becomes an imaging range indicated by a broken line in FIG.
  • the document P cannot move in the left-right direction in FIG. 10, but can move in the up-down direction.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Character Input (AREA)

Abstract

　書面等の一部が撮像範囲外となる場合でも、書面等の大きさ又は書面等の形状或いは書面等の記載内容等を正確に認識することが可能な撮像システムを提供する。　カメラ９を備えるスマートフォンＳを用いて、外縁の一部が撮像範囲外となる書面を撮像する撮像システムであって、書面を固定又は動きを制限する固定具と、固定具に対する相対的な位置及び関係が既知且つ一定であり、更に撮像範囲内に位置することにより、固定又は動きが制限されている書面と共に撮像される補助図形と、カメラ９の撮像により出力された、撮像範囲に相当する画像データに基づいて、撮像範囲内における固定具又は補助図形を特定し、特定された固定具又は補助図形と、上記既知の位置及び関係と、に基づいて、撮像範囲に相当する画像データから、書面全体を示す合成画像を取得する。

Description

撮像システム、撮像方法、撮像用プログラム及び情報記録媒体
　本発明は、撮像システム、撮像方法、撮像用プログラム及び情報記録媒体の技術分野に属する。より詳細には、カメラ等の撮像手段により撮像対象物を撮像する撮像システム並びに撮像方法、当該撮像システム用のプログラム及び当該プログラムが記録された情報記録媒体の技術分野に属する。
　近年の情報化社会においては、書面（紙）等に文字や記号又は図形として記載されている内容を、高画質且つ高解像度或いは広範囲でデジタル的に画像化したいという要望が多い。ここで、上記のような画像化のためには、いわゆるスキャナを用いることが一般的である。この場合のスキャナとしては、例えばいわゆるフラットベッド型のスキャナ等が一般的である。
　しかしながら、このようなスキャナを例えば業務以外の個人用として保有することは、コスト、設置場所又は取り扱いの煩雑さ等の面から便利でない場合が多い。また近年では、個人としてパーソナルコンピュータを保有しない場合も多くなり、よって上記スキャナを接続する本体としてのパーソナルコンピュータがそもそも存在しない環境も、個人宅等においては増加している。更に、一般に大型のフラットベッド型スキャナが必要な単行本、雑誌又は大型紙などに記載されている情報の画像化は、上記のような事情でより困難である場合が多い。
　一方、個人が手軽に扱える撮像用装置としては、いわゆるデジタルカメラが一般化している。しかしながら現在入手可能なデジタルカメラをスキャナ代わりに用いて、例えば大判の書面等に記載されている図形や文字等を撮像してその記載内容を認識しようとした場合、当該書面等全体を一度に撮像範囲に入れようとすると細部が不鮮明になって使いものにならないことが多い。また鮮明な撮像結果を得るためにデジタルカメラを書面等に近づけると、今度は一回の撮像範囲に書面等の全体が入らなくなることになる。
　なお、上述したデジタルカメラ等を用いた撮像装置に関連する先行技術としては、いわゆる「書画台カメラ」に関連するものとして、例えば下記特許文献１乃至特許文献３に開示されている内容が知られている。
特開２００７－２０８８２１号公報 特開２０１０－５６７７１号公報 特開２００６－２３５４９８号公報
　ここで、上述した各特許文献記載の先行技術では、いずれも、撮像対象物たる書面等が一回の撮像範囲に入らないほど大きい場合については、考慮されていない。
　一方、例えば二回の撮像で上記書面等全体を撮像して例えばその記載内容を認識しようとした場合、当該二回に分けた撮像結果のそれぞれを合成して書面等の全体の画像を取得する必要が少なくともある一方で、一回の撮像では上記書面等の一部がその撮像範囲から外れることとなる。この場合、一回の撮像で得られる撮像結果では、上記書面等の端部と撮像時の背景との境界線がない部分がある。即ち、例えば一回の撮像結果で上記書面等の右半分が撮像できなかったとすると、当該一回の撮像結果（撮像画像）自体における右の端部は当該書面等自体であり、その位置では、撮像された書面等の端部と背景との境界線がないことになる。
　これに対して、書面等の上下の端部及び左の端部では、書面等と背景との境界線の少なくとも一部が撮像結果に含まれることになるため、その後の合成上の位置合わせ並びに合成後の記載内容の認識等で問題になることはない。しかしながら書面等の右の端部については、上記境界線が撮像結果に全く含まれないため、二回の撮像結果を繋ぎ合わせて合成する際に、当該右の端部についての境界線が不明であることにより、例えば合成画像全体が歪んだり、合成画像における境界部分（継ぎ合わせ部分）の一部が欠落したり、或いはいわゆるゴーストのように境界部分が重複したりすることにより、結果として撮像後の合成処理が正確にできないという問題点があった。
　更に、上記書面等の記載内容の認識の観点では、当該書面等の全体の撮像を一度に完結させることができないことの最も大きな問題点は、複数回に分けて得られた撮像結果を繋ぎ合わせる際の歪みにある。即ち例えば、そのような繋ぎ合わせを行う場合、当該書面等の記載内容に相当する文字や記号又は図形が当該書面等上のどの位置に元々あったのかを示す情報は、原理的に得られない。より具体的に例えば、当該書面等の上半分と下半分とをそれぞれ別々に、且つ十分な重複範囲を持たせて撮像した場合、上述したような欠落等は生じない。しかしながらそのような場合でも、例えば書面等上の文字からなる一つの「行」が繋ぎ合わせ部分等において水平にはならず、例えば微妙に斜めに傾く場合があり得る。典型的には、例えば書面等における上端及び下端では概ね水平であるが、二回の撮像結果の継ぎ目近辺では右に向かって行が下がってしまっている、といった撮像結果となり得、このような場合に、その行を含む書面等における記載内容を正確に認識することができない場合があり得るのである。
　なお上述したような一連の問題点は、一回の撮像結果で上記書面等の左半分が撮像できなかった場合にも同様に起こる事象である。結果として上記各問題点は、書面等の一部が欠落した撮像結果と他の一部が欠落した撮像結果とを合成して元の全体の撮像画像を取得しようとする場合には、広く起こり得ることになる。
　そこで、本発明は上記の要望に鑑みて為されたもので、その課題の一例は、書面等の一部が撮像範囲外となる場合でも、書面等の大きさ又は書面等の形状或いは当該書面等の記載内容等を正確に認識することが可能な撮像システム並びに撮像方法、当該撮像システム用のプログラム及び当該プログラムが記録された情報記録媒体を提供することにある。
　上記の課題を解決するために、請求項１に記載の発明は、カメラ等の撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムにおいて、前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定具等の固定／制限手段と、前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助図形等の補助手段と、前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定するＣＰＵ等の特定手段と、前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得するＣＰＵ等の補正取得手段と、を備える。
　上記の課題を解決するために、請求項２８に記載の発明は、カメラ等の撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムであって、前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定具等の固定／制限手段と、前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助図形等の補助手段と、を備える撮像システムの前記情報処理装置において実行される撮像方法であって、前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定する特定工程と、前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得する補正取得工程と、を含む。
　上記の課題を解決するために、請求項２９に記載の発明は、カメラ等の撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムであって、前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定具等の固定／制限手段と、前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助図形等の補助手段と、を備える撮像システムの前記情報処理装置に含まれるコンピュータを、前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定する特定手段、及び、前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得する補正取得手段、として機能させる。
　上記の課題を解決するために、請求項３０に記載の発明は、請求項２９に記載の撮像用プログラムが請求項２９に記載のコンピュータにより読み取り可能に記録されている。
　請求項１、請求項２８から請求項３０のいずれか一項に記載の発明によれば、撮像対象物の外縁の一部が撮像手段の撮像範囲外となる場合に、固定又は動きが制限されている撮像対象物と共に撮像される補助手段を撮像情報に基づいて特定し、特定された補助手段と、補助手段の固定／制限手段に対する既知且つ一定の位置及び関係と、に基づき、撮像情報を補正して補正撮像情報を取得する。よって、撮像対象物の外縁の一部が撮像範囲外となる場合でも撮像対象物の大きさ又は形状或いは当該撮像対象物の記載内容等を正確に認識できる。また撮像範囲に入った撮像対象物の部分がその全体におけるどの部分であるか等を正確に認識できることで、撮像対象物の内容を正確に認識することができる。
　上記の課題を解決するために、請求項２に記載の発明は、請求項１に記載の撮像システムにおいて、複数の前記取得された補正撮像情報を合成し、当該各補正撮像情報それぞれに対応する各前記撮像範囲に相当する前記撮像対象物を含む合成撮像情報を生成する合成手段を更に備える。
　請求項２に記載の発明によれば、請求項１に記載の発明の作用に加えて、複数の補正撮像情報を合成し、各補正撮像情報それぞれに対応する各撮像範囲に相当する撮像対象物を含む合成撮像情報を生成するので、複数の撮像範囲に渡る撮像対象物の大きさ又は形状或いは当該撮像対象物の記載内容等を認識できる。
　上記の課題を解決するために、請求項３に記載の発明は、請求項２に記載の撮像システムにおいて、前記合成手段は、前記撮像対象物の、相互に一部が重複する複数の部分それぞれを前記撮像範囲とした複数の前記補正撮像情報を用いた位置合わせ処理により前記合成画像を合成するように構成される。
　請求項３に記載の発明によれば、請求項２に記載の発明の作用に加えて、撮像対象物の、相互に一部が重複する複数の部分それぞれを撮像範囲とした複数の補正撮像情報を用いた位置合わせ処理により合成画像を合成するので、撮像対象物全体に対応するより高精度な画像を取得することができる。
　上記の課題を解決するために、請求項４に記載の発明は、請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、前記固定又は前記動きが制限される前記撮像対象物を載置可能な載置台等の載置手段を更に備え、前記補助手段は、前記載置手段の前記撮像手段側の面に描かれている規準パターンであるように構成される。
　請求項４に記載の発明によれば、請求項１から請求項３のいずれか一項に記載の発明の作用に加えて、補助手段が載置手段の撮像手段側の面に描かれている規準パターンであるので、正確な補正撮像情報が取得可能な補助手段を簡易な構成で構成することができる。
　上記の課題を解決するために、請求項５に記載の発明は、請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、前記補助手段は、前記撮像手段と前記撮像対象物との間に設置される補助物であるように構成される。
　請求項５に記載の発明によれば、請求項１から請求項３のいずれか一項に記載の発明の作用に加えて、補助手段が撮像手段と撮像対象物との間に設置される補助物であるので、正確な補正撮像情報が取得可能な補助手段を簡易な構成で構成することができる。
　上記の課題を解決するために、請求項６に記載の発明は、請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、前記補助手段は、前記撮像手段と前記撮像対象物との間に設置される透明物に描かれている規準パターンであるように構成される。
　請求項６に記載の発明によれば、請求項１から請求項３のいずれか一項に記載の発明の作用に加えて、補助手段が、撮像手段と撮像対象物との間に設置される透明物に描かれている規準パターンであるので、正確な補正撮像情報が取得可能な補助手段を簡易な構成で構成することができる。
　上記の課題を解決するために、請求項７に記載の発明は、請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、前記撮像対象物の前記撮像手段側の面に、前記補助手段としての規準パターンの画像を投影させる投影装置等の投影手段を更に備える。
　請求項７に記載の発明によれば、請求項１から請求項３のいずれか一項に記載の発明の作用に加えて、補助手段としての規準パターンを投影させるので、例えば凹凸がある撮像対象物であっても、規準パターンをそれに投影させることで補助手段を構成することができる。
　上記の課題を解決するために、請求項８に記載の発明は、請求項１から請求項７のいずれか一項に記載の撮像システムにおいて、前記固定／制限手段による前記固定を一時的に解除して、又は前記動きの制限の範囲内において前記撮像対象物を動かすことにより、当該撮像対象物の位置、角度又は変形の状態を変更する紙送りローラ等の態様変更手段を更に備え、前記特定手段は、前記態様変更手段による変更に対応して前記撮像手段から逐次出力される複数の前記撮像情報それぞれにおける前記補助手段を特定し、前記補正取得手段は、各前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、各前記撮像範囲にそれぞれ相当する前記撮像情報を補正し、当該各撮像範囲に相当する前記撮像対象物を撮像した前記補正撮像情報を取得するように構成される。
　請求項８に記載の発明によれば、請求項１から請求項７のいずれか一項に記載の発明の作用に加えて、固定／制限手段による固定を一時的に解除して、又は動きの制限の範囲内において、撮像対象物の位置、角度又は変形の状態を変更し、当該変更に対応して逐次出力される複数の撮像情報それぞれにおいて特定された補助手段と、当該補助手段の固定／制限手段に対する既知且つ一定の位置及び関係と、に基づいて各撮像情報から補正撮像情報を取得するので、多様な撮像対象物について、正確な補正撮像情報が取得できる。
　上記の課題を解決するために、請求項９に記載の発明は、請求項８に記載の撮像システムにおいて、前記固定／制限手段は、前記撮像範囲内の一の方向について前記撮像対象物の動きを制限し、前記態様変更手段は、前記一の方向とは異なる前記撮像範囲内の他の方向について、前記撮像対象物を移動させる移動手段であるように構成される。
　請求項９に記載の発明によれば、請求項８に記載の発明の作用に加えて、撮像範囲内の他の方向について撮像対象物を移動させると共に、各撮像情報から補正撮像情報を取得するので、撮像範囲に対してより大きな撮像対象物であっても、正確な補正撮像情報が取得できる。
　上記の課題を解決するために、請求項１０に記載の発明は、請求項８又は請求項９に記載の撮像システムにおいて、前記撮像対象物は、前記態様変更手段により態様が変更されている状態と当該態様の変更が停止されている状態とを繰り返し、前記補正取得手段は、前記変更が停止されている状態において前記撮像手段から出力された前記撮像情報に基づいて、前記補正撮像情報を取得するように構成される。
　請求項１０に記載の発明によれば、請求項８又は請求項９に記載の発明の作用に加えて、態様変更手段により態様の変更が停止している状態における撮像情報に基づいて補正撮像情報を取得するので、正確な補正撮像情報を取得することができる。
　上記の課題を解決するために、請求項１１に記載の発明は、請求項１から請求項１０のいずれか一項に記載の撮像システムにおいて、前記情報処理装置は、前記固定／制限手段により前記撮像対象物が静止させられているか否かを前記撮像情報に基づいて判定するＣＰＵ等の判定手段と、前記撮像対象物が静止させられていると判定されたとき前記撮像手段に前記撮像範囲の撮像を行わせるＣＰＵ等の制御手段と、を更に備える。
　請求項１１に記載の発明によれば、請求項１から請求項１０のいずれか一項に記載の発明の作用に加えて、撮像情報に基づいて、撮像対象物が静止させられていると判定されたとき撮像手段に撮像範囲の撮像を行わせるので、撮像範囲の撮像を自動化することができる。
　上記の課題を解決するために、請求項１２に記載の発明は、請求項１から請求項１１のいずれか一項に記載の撮像システムにおいて、前記固定又は前記動きが制限される前記撮像対象物を載置可能な載置台等の載置手段と、前記情報処理装置を保持して前記撮像手段の前記載置手段に対する相対的な位置及び関係を一定とするスタンド等の保持手段と、を備え、前記情報処理装置は、前記撮像手段から出力された前記撮像情報を、前記載置手段の前記撮像手段側の面に対応する面対応情報を用いて補正するＣＰＵ等の補正手段を更に備える。
　請求項１２に記載の発明によれば、請求項１から請求項１１のいずれか一項に記載の発明の作用に加えて、撮像手段の載置手段に対する相対的な位置及び関係を一定とする保持手段を備え、撮像情報を面対応情報を用いて補正するので、保持手段と携帯可能な情報処理装置とを用いて、簡易且つ高画質に撮像対象物を撮像することができる。
　上記の課題を解決するために、請求項１３に記載の発明は、請求項１２に記載の撮像システムにおいて、前記撮像手段は、前記撮像対象物が置かれていない前記載置手段の前記面を撮像し、当該面に相当する前記撮像情報である補正用撮像情報を出力し、前記補正手段は、前記撮像対象物が置かれていない前記載置手段の前記面に対応する前記面対応情報と、前記出力された補正用撮像情報と、を用いて、前記撮像手段により前記撮像対象物を撮像して得られる画像内に当該撮像対象物と共に含まれる影を除去するように構成される。
　請求項１３に記載の発明によれば、請求項１２に記載の発明の作用に加えて、撮像対象物が置かれていない載置手段の面に対応する面対応情報と、補正用撮像情報と、を用いて、画像内に含まれる影を除去するので、携帯可能な情報処理装置と保持手段とを用いて、簡易且つ高画質に影を除去することができる。
　上記の課題を解決するために、請求項１４に記載の発明は、請求項１３に記載の撮像システムにおいて、前記面は無模様且つ一色であるように構成される。
　請求項１４に記載の発明によれば、請求項１３に記載の発明の作用に加えて、載置手段の面が無模様且つ一色であるので、精度良く影を除去することができる。
　上記の課題を解決するために、請求項１５に記載の発明は、請求項１２に記載の撮像システムにおいて、前記撮像手段は、前記撮像対象物が置かれていない前記載置手段の前記面を撮像し、当該面に相当する前記撮像情報である補正用撮像情報を出力し、前記補正手段は、前記撮像対象物が置かれていない前記載置手段の前記面に対応する前記面対応情報と、前記出力された補正用撮像情報と、を用いて、前記撮像手段により前記撮像対象物を撮像して得られる画像内に当該撮像対象物と共に含まれる映り込みを除去するように構成される。
　請求項１５に記載の発明によれば、請求項１２に記載の発明の作用に加えて、撮像対象物が置かれていない載置手段の面に相当する面対応情報と、補正用撮像情報と、を用いて、画像内に含まれる映り込みを除去するので、携帯可能な情報処理装置と保持手段とを用いて、簡易且つ高画質に影を除去することができる。
　上記の課題を解決するために、請求項１６に記載の発明は、請求項１２に記載の撮像システムにおいて、前記面が無彩色の模様を有しており、前記補正手段は、前記撮像情報における明度又はコントラストの少なくともいずれか一方を、前記模様に相当する前記面対応情報を用いて補正するように構成される。
　請求項１６に記載の発明によれば、請求項１２に記載の発明の作用に加えて、載置手段の面が無彩色の模様を有しており、撮像情報における明度又はコントラストの少なくともいずれか一方を当該模様に相当する面対応情報を用いて補正するので、簡易且つ高精度に明度等を補正することができる。
　上記の課題を解決するために、請求項１７に記載の発明は、請求項１２に記載の撮像システムにおいて、前記面が彩色された模様を有しており、前記補正手段は、前記撮像情報における色を、前記模様に相当する前記面対応情報を用いて補正するように構成される。
　請求項１７に記載の発明によれば、請求項１２に記載の発明の作用に加えて、載置手段の面が彩色された模様を有しており、撮像範囲に相当する撮像情報における色を模様に相当する面対応情報を用いて補正するので、簡易且つ高精度に色を補正することができる。
　上記の課題を解決するために、請求項１８に記載の発明は、請求項１２に記載の撮像システムにおいて、前記面が長さ又は角度の少なくともいずれか一方の規準となる規準情報を有しており、前記補正手段は、前記撮像情報における少なくとも歪みを、前記規準情報に相当する前記面対応情報を用いて補正するように構成される。
　請求項１８に記載の発明によれば、請求項１２に記載の発明の作用に加えて、載置手段の面が長さ又は角度の少なくともいずれか一方の規準となる規準情報を有しており、撮像範囲に相当する撮像情報における少なくとも歪みを、規準情報に相当する面対応情報を用いて補正するので、簡易且つ高精度に歪み等を補正することができる。
　上記の課題を解決するために、請求項１９に記載の発明は、請求項１２に記載の撮像システムにおいて、前記面が長さ又は角度の少なくともいずれか一方の規準となる規準情報を有しており、前記情報処理装置は、前記出力された撮像情報と、前記規準情報と、を用いて、前記載置手段に置かれた前記撮像対象物の諸元を認識するＣＰＵ等の認識手段を更に備える。
　請求項１９に記載の発明によれば、請求項１２に記載の発明の作用に加えて、撮像対象物が置かれている載置手段の面及び当該撮像対象物に相当する撮像情報と、規準情報と、を用いて、載置手段における撮像対象物の諸元を認識するので、正確に当該撮像対象物の諸元を認識することができる。
　上記の課題を解決するために、請求項２０に記載の発明は、請求項１６から請求項１９のいずれか一項に記載の撮像システムにおいて、前記撮像手段は、前記撮像対象物が置かれている前記載置手段の前記面を当該撮像対象物と共に撮像し、当該面及び当該撮像対象物に相当する前記撮像情報を出力し、前記補正手段は、前記面対応情報を用いて前記出力された撮像情報を補正するように構成される。
　請求項２０に記載の発明によれば、請求項１６から請求項１９のいずれか一項に記載の発明の作用に加えて、撮像対象物が置かれている載置手段の面及び当該撮像対象物に相当する撮像情報を、面対応情報を用いて補正するので、正確に撮像情報を補正することができる。
　上記の課題を解決するために、請求項２１に記載の発明は、請求項１２に記載の撮像システムにおいて、前記情報処理装置は、前記面対応情報に基づいて、前記載置手段上における前記撮像対象物の有無を判定するＣＰＵ等の判定手段を更に備える。
　請求項２１に記載の発明によれば、請求項１２に記載の発明の作用に加えて、面対応情報に基づいて撮像対象物の有無を判定するので、撮像対象物の有無を正確に判定することができる。
　上記の課題を解決するために、請求項２２に記載の発明は、請求項１２から請求項２１のいずれか一項に記載の撮像システムにおいて、前記情報処理装置は、前記撮像情報と、前記面対応情報と、に基づいて、前記撮像対象物の撮像に係る撮像環境を示す撮像環境情報を生成するＣＰＵ等の生成手段と、前記生成された撮像環境情報を告知するディスプレイ等の告知手段と、を更に備える。
　請求項２２に記載の発明によれば、請求項１２から請求項２１のいずれか一項に記載の発明の作用に加えて、撮像情報と面対応情報とに基づいて撮像環境情報を生成し、その生成された撮像環境情報を告知するので、当該撮像環境をユーザに告知してそれを改善させることができる。
　上記の課題を解決するために、請求項２３に記載の発明は、請求項１２から請求項２１のいずれか一項に記載の撮像システムにおいて、前記情報処理装置は、前記撮像情報と、前記面対応情報と、に基づいて、前記撮像対象物の撮像に係る撮像環境を示す撮像環境情報を生成するＣＰＵ等の生成手段を更に備え、前記撮像システムは、前記相対的な位置及び関係を変更する変更手段と、前記生成された撮像環境情報に基づいて、前記相対的な位置及び関係を変更するように前記変更手段を制御するＣＰＵ等の制御手段と、を更に備える。
　請求項２３に記載の発明によれば、請求項１２から請求項２１のいずれか一項に記載の発明の作用に加えて、撮像情報と面対応情報とに基づいて撮像環境情報を生成し、その生成された撮像環境情報に基づいて撮像手段と載置手段との相対的な位置及び関係を変更するので、より撮像環境により撮像対象物を高画質に撮像することができる。
　上記の課題を解決するために、請求項２４に記載の発明は、請求項１２から請求項２３のいずれか一項に記載の撮像システムにおいて、前記情報処理装置は、前記補正された撮像情報を記録するＲＯＭ等の記録手段を更に備える。
　請求項２４に記載の発明によれば、請求項１２から請求項２３のいずれか一項に記載の発明の作用に加えて、補正された撮像情報を記録する記録手段を情報処理装置に更に備えるので、撮像情報が外部に流出することを防止しつつ、撮像対象物を簡易且つ高画質に撮像することができる。
　上記の課題を解決するために、請求項２５に記載の発明は、請求項１から請求項２４のいずれか一項に記載の撮像システムにおいて、前記固定／制限手段による前記固定又は前記動きの制限を解除して、複数の前記撮像対象物を前記撮像範囲内において交換するオードシートフィーダ機構等の交換手段と、前記交換される各撮像対象物を識別可能な識別情報を、当該各撮像対象物の交換に対応したタイミングで前記撮像範囲内においてそれぞれ表示する載置台等の識別情報表示手段と、を更に備え、前記撮像手段は、前記撮像対象物及び当該撮像対象物に対応して表示されている前記識別情報を共に撮像して前記撮像情報を出力し、前記補正取得手段は、前記撮像情報に含まれている前記識別情報を用いて各前記撮像対象物を識別して当該各撮像対象物に対応する前記補正撮像情報を取得するように構成される。
　請求項２５に記載の発明によれば、請求項１から請求項２４のいずれか一項に記載の発明の作用に加えて、交換される各撮像対象物を識別可能な識別情報を当該交換に対応したタイミングで撮像範囲内においてそれぞれ表示し、その識別情報と撮像対象物とを共に撮像して撮像情報を出力し、撮像情報に含まれている識別情報を用いて各撮像対象物を識別して対応する補正撮像情報を取得するので、複数の撮像対象物それぞれを識別しつつ、それらに対応する補正撮像情報を取得することができる。
　上記の課題を解決するために、請求項２６に記載の発明は、請求項１から請求項２５のいずれか一項に記載の撮像システムにおいて、前記固定／制限手段による前記固定又は前記動きの制限を解除して、複数の前記撮像対象物を前記撮像範囲内において交換するオードシートフィーダ機構等の交換手段と、前記交換に対応した前記撮像手段による撮像タイミング示すタイミング情報を、当該各撮像対象物の交換に対応して表示するタイミング情報表示手段であって前記撮像範囲内にある載置台等のタイミング情報表示手段と、を更に備え、前記撮像手段は、前記表示されているタイミング情報に基づいて前記撮像対象物を撮像して前記撮像情報を出力するように構成される。
　請求項２６に記載の発明によれば、請求項１から請求項２５のいずれか一項に記載の発明の作用に加えて、各撮像対象物の交換に対応して撮像範囲内においてタイミング情報を表示し、その表示されているタイミング情報に基づいて撮像対象物を撮像して撮像情報を出力するので、複数の撮像対象物を交換しつつ撮像する場合において、いずれかの撮像対象物が欠落したり重複して撮像されたりすることを防止することができる。
　上記の課題を解決するために、請求項２７に記載の発明は、請求項１から請求項２５のいずれか一項に記載の撮像システムにおいて、前記撮像手段は、前記撮像手段と前記載置手段との相対的な前記位置及び前記関係を一定としつつ、前記補助手段を含む前記撮像情報と前記補助手段を含まない前記撮像情報とを同一の前記撮像対象物について出力し、前記補正取得手段は、当該それぞれ出力された撮像情報に基づいて前記補正撮像情報の取得を行うように構成される。
　請求項２７に記載の発明によれば、請求項１から請求項２５のいずれか一項に記載の発明の作用に加えて、撮像手段と載置手段との相対的な位置及び関係を一定としつつ、補助手段を含む撮像情報と補助手段を含まない撮像情報とを同一の撮像対象物について出力し、それぞれ出力された撮像情報に基づいて補正撮像情報の取得を行うので、補助手段の存在により撮像されない部分が撮像対象物にある場合でも、撮像対象物全体を撮像して補正することができる。
　本発明によれば、撮像対象物の外縁の一部が撮像手段の撮像範囲外となる場合に、固定又は動きが制限されている撮像対象物と共に撮像される補助手段を撮像情報に基づいて特定し、特定された補助手段と、補助手段の固定／制限手段に対する既知且つ一定の位置及び関係と、に基づき、撮像情報を補正して補正撮像情報を取得する。
　従って、撮像対象物の外縁の一部が撮像範囲外となる場合でも撮像対象物の大きさ又は形状或いは当該撮像対象物の記載内容等を正確に認識できる。また撮像範囲に入った撮像対象物の部分がその全体におけるどの部分であるか等を正確に認識できることで、撮像対象物の内容を正確に認識することができる。
第１実施形態に係るキャプチャシステムの概要構成を示す外観斜視図等であり、（ａ）は実際の使用状態における当該外観斜視図であり、（ｂ）は組立前の当該スタンドを示す展開状態の正面図である。 第１実施形態に係るスマートフォンの概要構成を示すブロック図である。 第１実施形態に係る参照パターンを例示する図であり、（ａ）は第１例を示す図であり、（ｂ）は第２例を示す図であり、（ｃ）は第３例を示す図である。 第１実施形態に係るキャプチャ処理を示すフローチャートである。 第１実施形態に係る補正処理を示す図であり、（ａ）は当該補正処理を示す第１図であり、（ｂ）は当該補正処理を示す第２図である。 第２実施形態に係るキャプチャ処理における補正処理を説明する図であり、（ａ）は第１図であり、（ｂ）は第２図である。 第２実施形態に係る撮像システムの構成を例示する外観平面図であり、（ａ）は第１例を示す外観平面図であり、（ｂ）は第２例を示す外観平面図である。 第２実施形態に係る撮像システムの構成を例示する外観平面図であり、（ａ）は第３例を示す外観平面図であり、（ｂ）は第４例を示す外観平面図である。 第２実施形態に係る撮像システムの構成を例示する外観平面図であり、（ａ）は第５例を示す外観平面図であり、（ｂ）は第６例を示す外観平面図である。 第２実施形態に係る撮像システムの構成の第７例を示す外観平面図である。 第２実施形態に係る位置合わせ処理を例示する図（ｉ）であり、（ａ）は位置合わせ前の状態を例示する図であり、（ｂ）は位置合わせ処理中を例示する図（ｉ）であり、（ｃ）は位置合わせ処理中を例示する図（ii）である。 第２実施形態に係る位置合わせ処理を例示する図（ii）であり、（ａ）は位置合わせ処理中を例示する図（iii）であり、（ｂ）は位置合わせ処理中を例示する図（iv）であり、（ｃ）は位置合わせ処理中を例示する図（ｖ）であり、（ｄ）は位置合わせ処理中を例示する図（vi）である。 第２実施形態に係る位置合わせ処理を例示する図（iii）である。
　次に、本発明を実施するための形態について、図面に基づいて説明する。なお、以下に説明する各実施形態は、連写及び動画の撮像が可能なデジタルカメラ（以下、単にカメラと称する）を備える携帯可能なスマートフォンを用いて画像をキャプチャ（即ち記録する）するキャプチャシステムに対して本発明を適用した場合の実施の形態である。ここで、当該スマートフォンに備えられているデジタルカメラではなく、装置として独立したデジタルカメラを用いて画像をキャプチャするキャプチャシステムに対して本発明を適用しても良い。また、本発明に係るスマートフォンの携帯者を、以下、単に「携帯者」と称する。
（Ｉ）第１実施形態
　初めに、本発明に係る第１実施形態について、図１乃至図５を用いて説明する。なお、図１は第１実施形態に係るキャプチャシステムの概要構成を示す外観斜視図等であり、図２は第１実施形態に係るスマートフォンの概要構成を示すブロック図であり、図３は第１実施形態に係る参照パターンを例示する図である。また図４は第１実施形態に係るキャプチャ処理を示すフローチャートであり、図５は第１実施形態に係る補正処理を示す図である。
　第１実施形態に係るキャプチャシステムでは、撮像対象物の一例としての例えば書面又は立体物上に文字、記号又は図形等を用いて記載されている情報を、当該撮像対象物が置かれる位置に対して相対的に一定の位置にある上記スマートフォンのカメラを用いて撮像する。その後、当該撮像された画像に相当する画像データの中から、後述するキャプチャ処理により画像データを当該スマートフォン内に記録する。
　即ち図１（ａ）に実際の使用状態を示すように、第１実施形態に係るキャプチャシステムＣＳは、カメラを備えるスマートフォンＳと、撮像対象物の一例である書面Ｐに当該カメラが対向するようにスマートフォンＳを保持するスタンドＳＴと、により構成されている。この場合のスマートフォンＳが本発明に係る「情報処理装置」の一例に相当し、スタンドＳＴが本発明に係る「保持手段」の一例に相当する。このスタンドＳＴによりスマートフォンＳが動かないように保持されることで、スマートフォンＳのカメラ（及びその撮像範囲）の位置が、書面Ｐが載置される位置に対して相対的に一定とされる。スタンドＳＴにより保持されているスマートフォンＳのカメラにより、その撮像範囲内に置かれている書面Ｐが撮像される。これにより、第１実施形態に係る書面Ｐ（換言すれば書面Ｐ上に記載された情報）のキャプチャ処理が行われる。
　ここで、スマートフォンＳを保持するために図１（ａ）に例示するスタンドＳＴは、例えば折り曲げ可能なシート状材料を折り曲げて組み立てられるスタンドである。即ちスタンドＳＴは、図１に示すように、一枚のシート状素材（例えば段ボール紙等）から切り出してなる折り曲げ可能なスタンドＳＴであり、これを折り曲げて組み立てることにより、図１（ａ）に例示するように書面Ｐに対してスマートフォンＳのカメラが対向するように当該スマートフォンＳを保持する構成とされている。
　より具体的に図１に示すスタンドＳＴは、当該一枚のシート状素材により形成される保持台ＰＴ１、支持部ＰＴ２及びＰＴ３並びに載置台ＰＴ４からなるように構成されている。この載置台ＰＴ４が、本発明に係る「載置手段」の一例、「識別情報表示手段」の一例及び「タイミング情報表示手段」の一例に、それぞれ相当する。載置台ＰＴ４には、撮像される書面Ｐをその撮像時において位置決めするためのスリットＳＬが開けられている。また図１（ｂ）において、保持台ＰＴ１と支持部ＰＴ２との接合部、支持部ＰＴ２と支持部ＰＴ３との接合部、及び載置部ＰＴ４と支持部ＰＴ２との接合部において、実線は切り込みを示しており、一点鎖線はスタンドＳＴとしての組立時において谷折りとされる線部を示している。そして図１（ａ）は、実際にスタンドＳＴが組み立てられ、書面Ｐが載置部ＰＴ４のスリットＳＬに沿って置かれ、更にカメラが書面Ｐに対向するようにスマートフォンＳが保持台ＰＴ１上に置かれて撮像可能となっている状態のキャプチャシステムＣＳの外観斜視図である。なお図１には図示していないが、載置台ＰＴ４の保持台ＰＴ１に対向する側の面には、第１実施形態に係る参照パターンが印刷又は貼付等の手法により設けられている場合がある。第１実施形態に係る参照パターンは、後述する第１実施形態に係るキャプチャ処理において、色、明度又はコントラスト、或いは撮像された書面Ｐの形状等を、それぞれ撮像結果としての画像データ上において補正する際の規準として用いられる。これらの参照パターンについては、後ほど図３を用いて詳述する。
　次に、図２乃至図５を用いて、第１実施形態に係るキャプチャシステムＣＳの構成及び動作の細部について説明する。
　先ず図２に示すように、第１実施形態に係るキャプチャシステムＣＳに含まれるスマートフォンＳは、ＣＰＵ１と、ＲＯＭ（Read Only Memory）２と、ＲＡＭ（Random Access Memory）３と、操作ボタン及びタッチパネル等からなる操作部４と、当該タッチパネルがその表面に配置されている液晶ディスプレイ等からなるディスプレイ５と、スピーカ７及びマイク８が接続されている通話制御部６と、本発明に係る「撮像手段」の一例としての上記カメラ９と、図１において図示しない外部のネットワーク（無線ＬＡＮ（Local Area Network）、専用回線、インターネット又はいわゆる３Ｇ回線等のネットワーク）に接続するためのアンテナＡＮＴを備える通信インターフェース１０と、カメラ９による撮像の対象となる上記撮像対象物の一部又は全部を撮像時に照らすライト１１と、により構成されている。またＲＡＭ３内には、ＣＰＵ１を中心とした第１実施形態に係るキャプチャ処理を実行するために必要なバッファとして、カレント画像バッファ３２が揮発性の記憶領域として形成されている。
　上記の構成のうちＣＰＵ１が、本発明に係る「特定手段」の一例、「補正取得手段」の一例、「制御手段」の一例、「判定手段」の一例、「補正手段」の一例、「認識手段」の一例及び「生成手段」の一例に、それぞれ相当する。またディスプレイ５が、本発明に係る「告知手段」の一例、「識別情報表示手段」の一例及び「タイミング情報表示手段」の一例に、それぞれ相当する。更にまたＲＯＭ２が、本発明に係る「記録手段」の一例に相当する。
　この構成において通信インターフェース１０は、ＣＰＵ１の制御の下、アンテナＡＮＴを介した上記ネットワークとのデータの授受を制御する。この時通信インターフェース１０は、アンテナＡＮＴを介した無線によるデータの授受だけでなく、例えば有線ＬＡＮやいわゆるＵＳＢ（Universal Serial Bus）等を介した有線によるデータの授受を制御するように構成することもできる。
　また通話制御部６は、ＣＰＵ１の制御の下、マイク８及びスピーカ７を用いたスマートフォンＳとしての音声通話を制御する。更に操作部４は、スマートフォンＳの使用者による操作に基づいて、当該操作に対応する操作信号を生成してＣＰＵ１に出力する。これによりＣＰＵ１は、当該操作信号に基づいてスマートフォンＳ全体を制御する。
　一方ＲＯＭ２には、後述する第１実施形態に係るキャプチャ処理を初めとするスマートフォンＳとしての処理のためのプログラム等が予め不揮発性に記録されている。またＲＯＭ２には書き換え可能な領域が含まれており、この書き換え可能なＲＯＭ２の領域内には、第１実施形態に係るキャプチャ処理によりキャプチャされた画像に相当する画像データが記録される。そしてＣＰＵ１は、ＲＯＭ２に記録されている上記プログラム等を読み出して実行することにより、上記スマートフォンＳとしての処理を制御する。この他ＲＯＭ２内の上記書き換え可能な領域内には、例えば電話番号データやアドレスデータ等、スマートフォンＳとしての処理に必要なデータも不揮発性に記録される。
　一方ＲＡＭ３は、上記カレント画像バッファ３２として必要なデータを一時的に記憶し、更に上記スマートフォンＳとしての処理に必要な他のデータを一時的に記憶する。更にディスプレイ５は、ＣＰＵ１の制御の下、第１実施形態に係るキャプチャ処理のために必要な情報に加えて、スマートフォンＳとしての処理に必要な情報を、その携帯者に対して表示する。
　他方、カメラ９は、ＣＰＵ１の制御の下、上記書面Ｐ等上の情報を連写又は動画撮像し、当該撮像した画像に対応する画像データ（デジタル化された画像データ）を、当該連写の都度又は動画撮像の場合にあっては連続して、ＣＰＵ１に出力する。これによりＣＰＵ１は、出力された画像データをＲＡＭ３内のカレント画像バッファ３２に一時的に入力する。そしてＣＰＵ１は、カレント画像バッファ３２に記憶されている画像データを用いて、第１実施形態に係るキャプチャ処理を実行する。またこの際にライト１１は、ＣＰＵ１の制御の下、カメラ９により撮像される上記書面Ｐ等の一部又は全部を、当該撮像時において当該撮像に好適な照度となるように照らす。
　次に、ＲＡＭ３内のカレント画像バッファ３２は、その時点で第１実施形態に係るキャプチャ処理の対象となっている一フレーム分の画像データを記憶する。この場合の一フレーム分の画像データ（フレーム画像データ）に相当する画像を、以下、「カレント画像」と称する。
　次に、第１実施形態に係る参照パターンについて、具体的に図３を用いて例示しつつ説明する。
　第１実施形態に係る参照パターンとして具体的には、三種類の参照パターンがある。より具体的には、図３（ａ）に例示する色補正用の参照パターンＲＰ１、図３（ｂ）に例示する明度又はコントラスト補正用の参照パターンＲＰ２、並びに図３（ｃ）に例示する歪み等補正用の参照パターンＲＰ３－１及び参照パターンＲＰ３－２の三種類である。
　このとき、図３（ａ）に例示する参照パターンＲＰ１は、例えば図１に例示する載置台ＰＴ４におけるカメラ９の撮像範囲の端部等に設けられており、スケールＳＣと、色パターンＣＲＰと、により構成されている。この構成において色パターンＣＲＰは、図３（ａ）の図中において例えば左から右に赤色→黄色→緑色→青色→赤色と、それぞれの境界部の色がグラデーションにより徐々に（連続的に）変化する色見本のパターンである。またスケールＳＣは予め設定された間隔で形成されている。そして当該参照パターンＲＰ１が書面Ｐと共にカメラ９により撮像されることにより、当該撮像結果としての画像データにおいて、後述する色についての補正処理がＣＰＵ１により施される。
　次に図３（ｂ）に例示する参照パターンＲＰ２は、参照パターンＲＰ１と同様に例えば図１に例示する載置台ＰＴ４におけるカメラ９の撮像範囲の端部等に設けられており、参照パターンＲＰ１と同様のスケールＳＣと、コントラストパターンＢＲＰと、により構成されている。この構成においてコントラストパターンＢＲＰは、図３（ｂ）の図中において例えば左から右に黒色→白色と、グラデーションにより徐々に（連続的に）変化するコントラスト見本のパターンである。そして当該参照パターンＲＰ２が書面Ｐと共にカメラ９により撮像されることにより、当該撮像結果としての画像データにおいて、後述する明度又はコントラストについての補正処理がＣＰＵ１により施される。
　最後に図３（ｃ）に例示する参照パターンＲＰ３－１及び参照パターンＲＰ３－２は、例えば図３（ｃ）に例示するように図１に例示する載置台ＰＴ４におけるカメラ９の撮像範囲内の対角線上の角部で且つスリットＳＬの外側の領域に設けられている。この構成において参照パターンＲＰ３－１及び参照パターン３－２はそれぞれ、載置台ＰＴ４の各辺に平行で且つ互いには直交する二つの線分により構成されている。そして当該参照パターンＲＰ３－１及び参照パターンＲＰ３－２が書面Ｐと共にカメラ９により撮像されることにより、当該撮像結果としての画像データにおいて、後述する歪みの補正処理がＣＰＵ１により施される。
　次に、第１実施形態に係るキャプチャ処理について、具体的に図２乃至図５を用いて説明する。第１実施形態に係るキャプチャ処理は、例えば携帯者による所定の操作が操作部４において実行されたときに開始される。
　そして書面Ｐが置かれて当該キャプチャ処理が開始されると、図４に示すようにＣＰＵ１は先ず、その撮像範囲内に置かれている書面Ｐを撮像すべく、カメラ９を起動する（ステップＳ１）。これにより、書面Ｐ及び図３に例示するいずれかの参照パターンＲＰに相当する画像（カレント画像に相当する画像）が、連写又は動画により複数撮像される。そしてＣＰＵ１は、当該撮像に伴ってカメラ９から入力されてくるカレント画像の画像データを、カレント画像バッファ３２に一時的に入力する（ステップＳ２）。次にＣＰＵ１は、ステップＳ１の処理により撮像された画像のいずれかにおいて、それに映っている書面Ｐとその周囲との境界（図１に例示する場合には書面Ｐとそれが載置されている載置台ＰＴ４との境界）の全部が認識されるか否かを識別する（ステップＳ３）。ステップＳ３の識別においていずれかの画像において当該境界の全体が認識されている場合（ステップＳ３；ＹＥＳ）、ＣＰＵ１は次に、その時点でカレント画像バッファ３２に記憶されている画像データにおいて、予め設定された所定時間、当該画像に写っている書面Ｐ等が静止しているか否かを判定する（ステップＳ４）。なおこの場合、書面Ｐが置かれていることが認識されているか否かを、例えばディスプレイ５やライト１１の点滅、或いはスピーカ７からの放音等を用いて逐次告知するように構成することもできる。
　ステップＳ４の判定において当該画像内の書面Ｐ等が所定時間静止していると判定された場合（ステップＳ４；ＹＥＳ）、次にＣＰＵ１は、その時点でカレント画像バッファ３２に記憶されている画像データに対して上記参照パターンＲＰのいずれかを用いた補正処理を行った後、当該画像データのいずれかをＲＯＭ２に記録（即ちキャプチャ）する（ステップＳ５）。その後ＣＰＵ１は、操作部４において第１実施形態に係るキャプチャ処理を終了する旨の操作が例えば携帯者により行われたか否かを判定し（ステップＳ６）、当該終了操作が行われたときは（ステップＳ６；ＹＥＳ）、第１実施形態に係るキャプチャ処理を終了する。一方ステップＳ６の判定において当該終了操作が行われていないとき（ステップＳ６；ＮＯ）、ＣＰＵ１は上記ステップＳ２に戻って、次の撮像を行う。
　一方、上記ステップＳ３の識別において、カレント画像バッファ３２に記憶されている画像において書面Ｐとその周囲との境界の全体が認識されていない場合（ステップＳ３；ＮＯ）、又は上記ステップＳ４の判定において、カレント画像バッファ３２に記憶されている画像データの画像内の書面Ｐ等が所定時間静止していないと判定された場合（ステップＳ４；ＮＯ）、ＣＰＵ１は、その時点でカレント画像バッファ３２に記憶されている画像データはキャプチャに適さないとして、これらを破棄し（ステップＳ７）、その後上記ステップＳ２の処理に移行する。
　ここで、上記ステップＳ５の処理において、画像データにおける色補正を行う場合、書面Ｐと同時に撮像されている上記参照パターンＲＰ１（図３（ａ）参照）が用いられることになる。また画像データにおける明度又はコントラストの補正を行う場合、書面Ｐと同時に撮像されている上記参照パターンＲＰ２（図３（ｂ）参照）が用いられることになる。更に画像データにおける歪みを補正する場合には、書面Ｐと同時に撮像されている上記参照パターンＲＰ３－１及び参照パターンＲＰ３－２が用いられることになる。
　ここで、上記参照パターンＲＰ３－１及び参照パターンＲＰ３－２を用いた第１実施形態に係る歪みの補正処理について、具体的に図５を用いて説明する。
　先ず、撮像された画像データＧにおいて、書面Ｐが図５（ａ）に例示するように歪んだ状態で撮像されているとする。このとき上記参照パターンＲＰ３－１及び参照パターンＲＰ３－２も、同様に歪んだ状態で撮像されている。なお図５（ｂ）は、図５（ａ）の画像データＧに対応する実際の書面Ｐが載置されている平面図（スリットＳＬは記載を省略）である。この図５（ａ）において、参照パターンＲＰ３－１の線分ＡＣをＡ方向に延長した直線と参照パターンＲＰ３－２の線分ＤＦをＦ方向に延長した直線との交点をＰとし、一方参照パターンＲＰ３－１の線分ＡＢをＢ方向に延長した直線と参照パターンＲＰ３－２の線分ＥＤをＤ方向に延長した直線との交点をＱとする。また、図５（ａ）に示す∠ＡＰＦをθ0とし、∠ＡＰＳをθとし、∠ＢＱＤをφ0とし、∠ＡＱＳをφとする。このとき、図５における点Ａ乃至点Ｆそれぞれの位置は参照パターンＲＰ３－１及び参照パターンＲＰ３－２として既知である。そして図５（ａ）及び図５（ｂ）に例示するように、
　θ0：θ＝Ｗ：ｘ、φ0：φ＝Ｈ：ｙ
　となるので、図５の点Ｓの図中における位置（換言すれば、載置台ＰＴ４上の位置）を定めることができる。このように参照パターンＲＰ３－１及び参照パターンＲＰ３－２を書面Ｐと共に撮像すれば、任意の点Ｐ（図５に例示する場合は書面Ｐの角の一つである点Ｓ）の載置台ＰＴ４上における位置が定められるので、結果的に画像データＧ内における歪みを補正して、載置台ＰＴ４上における書面Ｐ全体の位置、形状及び寸法を定めてこれらを認識することができるのである。なお、より正確に補正するべく、例えば、図５（ａ）における線分ＡＣと線分ＦＤとの間の比率を用いるように構成することもできる。
　以上説明したように、第１実施形態に係るキャプチャシステムＣＳの動作によれば、カメラ９の載置台ＰＴ４に対する相対的な位置及び関係を既知且つ一定とするスタンドＳＴを備え、参照パターンＲＰを用いて画像データを補正するので、スタンドＳＴと携帯可能なスマートフォンＳとを用いて、簡易且つ高画質に書面Ｐを撮像することができる。
　また、参照パターンＲＰ２（図３（ｂ）参照）を用いて画像データＧにおける明度又はコントラストの少なくともいずれか一方を補正する場合には、簡易且つ高精度に明度等を補正することができる。
　更に、参照パターンＲＰ１（図３（ａ）参照）を用いて画像データＧにおける色を補正する場合には、簡易且つ高精度に色を補正することができる。
　更にまた、参照パターンＲＰ３－１及び参照パターンＲＰ３－２（図３（ｃ）参照）を用いて画像データＧにおける少なくとも歪みを補正する場合には、簡易且つ高精度に当該歪み等を補正することができる。
　また、参照パターンＲＰ３－１及び参照パターンＲＰ３－２を用いて載置台ＰＴ４における書面Ｐの位置、形状及び寸法等の諸元を認識する場合には、正確に当該書面Ｐの諸元を認識することができる。
　更に、書面Ｐが置かれている載置台ＰＴ４上の参照パターンＲＰと書面Ｐ自体を共に含む画像データＧを、当該参照パターンＲＰを用いて補正するので、正確に画像データＧを補正することができる。
　更にまた、補正された画像データＧをキャプチャされた画像としてスマートフォンＳ内に記録するので、画像データＧが外部に流出することを防止しつつ、書面Ｐを簡易且つ高画質に撮像することができる。
（II）第１実施形態の変形形態
　なお、上述した第１実施形態に係るキャプチャシステムＣＳの動作に対しては、種々の変形形態が考えられる。
　先ず第１の変形形態として、書面Ｐが載置されていない載置台ＰＴ４の面をカメラ９により撮像し、それに対応する画像データＧ（上記参照パターンＲＰに相当する画像を含む）を用いて、カメラ９により爾後に書面Ｐを撮像して得られる画像データＧ内に当該書面Ｐと共に含まれる影を除去するような補正を施すように構成することもできる。
　この場合には、参照パターンＲＰと書面Ｐが載置されていない載置台ＰＴ４の画像とを用いて画像データＧ内に含まれる影を除去するので、携帯可能なスマートフォンＳとスタンドＳＴとを用いて、簡易且つ高画質に影を除去することができる。
　また上記第１の変形形態においては、参照パターンＲＰを有さない載置台ＰＴ４を用いることもできる。この場合には、載置台ＰＴ４の面を無模様且つ一色とすることで、精度良く影を除去することができる。
　次に第２の変形形態として、上記第１の変形形態の場合と同様に書面Ｐが載置されていない載置台ＰＴ４の面をカメラ９により撮像し、それに対応する画像データＧを用いて、カメラ９により爾後に書面Ｐを撮像して得られる画像データＧ内に書面Ｐと共に含まれる映り込みを除去するような補正を施すように構成することもできる。
　この場合には、参照パターンＲＰと書面Ｐが載置されていない載置台ＰＴ４の画像とを用いて画像データＧ内に含まれる映り込みを除去するので、携帯可能なスマートフォンＳとスタンドＳＴとを用いて、簡易且つ高画質に映り込みを除去することができる。
　更に第３の変形形態として、載置台ＰＴ４の面を撮像した画像データＧを用いて、載置台ＰＴ４上における書面Ｐの有無をＣＰＵ１により判定するように構成することもできる。
　この場合には、画像データＧに基づいて書面Ｐの有無を判定するので、書面Ｐの有無を正確に判定することができる。
　更にまた第４の変形形態として、画像データＧに含まれるいずれかの参照パターンＲＰを用いて、書面Ｐを撮像する際の撮像環境（例えば、照明が明る過ぎる又は暗過ぎる、或いは書面Ｐまでの距離が近すぎる等の撮像環境）を示すデータを生成し、これを例えばディスプレイ５等を用いてユーザに告知するように構成することもできる。この場合には、当該撮像環境をユーザに告知してそれを改善させることができる。
　また第５の変形形態として、スマートフォンＳのカメラ９と載置台ＰＴ４との相対的な位置及び関係を自動的に変更する変更機構を設けると共に、画像データＧに含まれるいずれかの参照パターンＲＰを用いて上記第４の変形形態と同様に書面Ｐを撮像する際の撮像環境を示すデータを生成し、このデータに基づいて変更機構を駆動するように構成することもできる。この変更機構が本発明に係る「変更手段」の一例に相当する。この場合には、生成された当該データに基づいてカメラ９と載置台ＰＴ４との相対的な位置及び関係が変更されるので、より良い撮像環境により書面Ｐを高画質に撮像することができる。
　更に第６の変形形態として、カメラ９と載置台ＰＴ４との間の相対的な位置及び関係を一定としつつ、参照パターンＲＰを含む画像データＧと参照パターンＲＰを含まない画像データＧとを同一の書面Ｐについて生成し、当該生成された画像データＧに基づいて合成画像の生成等を行うように構成することもできる。この場合には、参照パターンＲＰの存在により撮像されない部分が書面Ｐにある場合でも、書面Ｐ全体を撮像して補正することができる。
（III）第２実施形態
　次に、上記第１実施形態とは異なった本発明に係る他の実施形態である第２実施形態について、図６乃至図１３を用いて説明する。なお図６は第２実施形態に係るキャプチャ処理における補正処理の原理を説明する図であり、図７乃至図１０は第２実施形態に係る撮像システムの構成をそれぞれ例示する外観平面図である。また図１１乃至図１３は第２実施形態に係る位置合わせ処理を例示する図である。
　更に、第２実施形態に係るスマートフォンのハードウエア的な構成は、載置部の構成を除き、基本的には第１実施形態に係るスマートフォンＳと同一であるので、第１実施形態に係るスマートフォンＳと同一の部材については同一の部材番号を用いて、細部説明の一部を省略しつつ、その構成及び機能等を説明する。また、第２実施形態に係るキャプチャ処理も全体としては第１実施形態に係るキャプチャ処理と同様であるので、以下の説明では、第１実施形態に係るキャプチャ処理と異なる部分を中心として、第２実施形態に係るキャプチャ処理を説明する。
　上述した第１実施形態に係るキャプチャシステムＣＳのキャプチャ処理では、一回の撮像範囲内に書面Ｐの全てが一度に入り得る場合について、これをキャプチャする構成であった。これに対し、以下に説明する第２実施形態に係るキャプチャシステムは、カメラ９による一回の撮像範囲では書面Ｐの全てを鮮明に撮像できない場合でも、これを正確にキャプチャすることができる。なお、第２実施形態に係るキャプチャシステム含まれる載置台ＰＴ４は、第１実施形態において説明したような参照パターンＲＰを有してはいない。
　即ち、書面Ｐが大判であることにより、カメラ９による一回の撮像で載置台ＰＴ４上の当該書面Ｐを鮮明にその撮像範囲内に収められない場合、複数回、具体的には例えば二回の撮像結果を繋ぎ合わせて合成することで、書面Ｐの全体に対応する合成画像を取得する。この場合に第２実施形態に係るキャプチャシステムでは、書面Ｐと共に、当該書面Ｐを固定する又はその動きを制限する固定具に対する相対的な位置が既知且つ一定である後述の補助図形等を同時に撮像し、当該撮像された補助図形等との関係をもって、画像データＧにおける書面Ｐの一部の撮像結果を補正すると共に、当該一部のみをもって、書面Ｐ全体の寸法や撮像された当該一部の書面Ｐ全体の中での位置を認識して合成する。この固定具が本発明に係る「固定／制限手段」の一例に相当し、また撮像範囲内にある当該固定具自体又は当該補助図形が本発明に係る「補助手段」の一例に相当する。
　より具体的に第２実施形態にかかる補正処理の原理を説明すると、例えば図６（ａ）において、カメラ９により書面Ｐの左部分を撮像した結果としての画像データＧが示されている。このとき第２実施形態に係るキャプチャシステムでは、例えば書面Ｐ全体から見たその中央に相当する位置に書面Ｐの短辺方向に平行に固定具２０を載置した上で書面Ｐを撮像し、図６（ａ）に例示する画像データＧを得る。この図６（ａ）に例示する画像データＧでは、例えば書面Ｐに対して垂直な位置からの撮像が為されなかった等の理由により、書面Ｐの左部分及び第２実施形態に係る固定具２０が画像データＧ内で歪んだ状態で撮像されている。
　これに対し、画像データＧ内に書面Ｐ（の左半分）と共に映っている第２実施形態に係る固定具２０については、書面Ｐの中央に相当する位置に書面Ｐの短辺方向に平行に当該固定具２０が載置されていることを示す固定具データが、例えばＲＯＭ２内に予め記憶されている。そして第２実施形態に係るキャプチャシステムに含まれるＣＰＵ１は、カメラ９の撮像範囲に相当する画像データＧ内において固定具２０を特定し、更に上記固定具データをＲＯＭ２から読み出す。そしてＣＰＵ１は、当該読み出した固定具データ、画像データＧ内に映っている書面Ｐ、及び上記特定した固定具２０に基づいて、上記撮像範囲に相当する画像データＧ内において図６（ａ）に例示するように歪んで撮像されている書面Ｐの一部について、図６（ｂ）に例示するように、当該書面Ｐの一部を補正する（より具体的に図６に示す場合、書面Ｐの上辺における画像データＧ内に映っている部分のうち、更に固定具２０と書面Ｐの端部とにより画定される部分の長さ（図６（ａ）における上側の水平両矢印部分）と、書面Ｐの下辺における画像データＧ内に映っている部分のうち、更に固定具２０と書面Ｐの端部とにより画定される部分の長さ（図６（ａ）における下側の水平両矢印部分）と、が等しい長さとなるように補正する）と共に、固定具２０と画像データＧ内に映っている書面Ｐとの関係から、書面Ｐ全体に係る大きさ、当該全体の形状又は当該全体の合成画像等を正確に取得する。更にＣＰＵ１は、撮像範囲に入った書面Ｐの部分がその全体におけるどの部分であるか等をも正確に認識する。なお図６（ｂ）に例示する場合のカメラ９自体の撮像範囲は、図６（ｂ）に対応させて記載すると当該図６（ｂ）に破線で示す撮像範囲ＡＲとなる。また、以下に説明する第２実施形態に係るキャプチャ処理の場合、上述した書面Ｐ全体に係る正確な大きさ等の取得は、例えば図４に示すフローチャートにおけるステップＳ５のキャプチャ処理中に、後述する位置合わせ処理を経た後に行われるのが好ましい。
　次に、第２実施形態に係るキャプチャシステムにおける上記固定具２０の種々の態様について、具体的に図７乃至図１０を用いて説明する。
　先ず第１例として図７（ａ）に例示するように、固定具２０を、書面Ｐのちょうど半分が露出する間隔を持った二枚の固定板２０－１及び固定板２０－２が書面Ｐの範囲外で接続された形状とする。そしてこのときのカメラ９の撮像範囲ＡＲが、図７（ａ）に破線で示す撮像範囲となるように固定具２０及び書面Ｐを載置する。なおこの場合、図７（ａ）に両矢印で示すように、書面Ｐは図７（ａ）中の左右方向には移動不可であるが、その上下方向には移動可能とされている。この第１例の場合でも、固定具２０により書面Ｐの半分の領域が露出されて撮像されることが上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　次に第２例として図７（ｂ）に例示するように、固定具２０を、書面Ｐにおける既定量の範囲（例えば１／４の範囲）以上の予め設定された範囲が露出する間隔を有する固定板２０－１及び固定板２０－２を備え、且つ書面Ｐをその角部により図７（ｂ）中の上下左右方向共に移動不可として固定する形状とする。図７（ｂ）においては、書面Ｐの左下角が固定具２０の直角凹部と噛み合うことにより、書面Ｐが固定されている。そしてこのときのカメラ９の撮像範囲ＡＲが、図７（ｂ）に破線で示す撮像範囲となるように固定具２０及び書面Ｐを載置する。この第２例の場合でも、固定具２０により書面Ｐの１／４以上既知の領域が露出されて撮像されることが上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　また第３例として図８（ａ）に例示する場合では、上記第２例の場合と同様にして固定具２０により書面Ｐを固定すると共に、固定具２０に対して既知且つ一定の位置及び関係を有する書面Ｐ上の領域に、例えばレーザ光線等の光学的な投影装置を用いて、当該一定の位置及び関係（範囲）を有する例えば矩形の補助図形２０Ａを投影している。この投影装置が本発明に係る「投影手段」の一例に相当する。このときのカメラ９の撮像範囲ＡＲは、当該補助図形２０Ａを全て含むように、図８（ａ）に破線で示す撮像範囲ＡＲとされる。この第３例の場合でも、投影される補助図形２０Ａの固定具２０に対する位置及び関係が上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　更に第４例として図８（ｂ）に例示する場合では、上記第２例の場合と同様にして固定具２０により書面Ｐを固定すると共に、固定具２０に対して透明板２１を固定し、固定具２０に対して既知且つ一定の位置及び関係を有する透明板２１上の領域に、当該一定の位置及び関係（範囲）を有する例えば矩形の補助図形２０Ｂが物理的に書き込まれている。そして書面Ｐは、この透明板２１と図示しない載置台ＰＴ４との間に挟まれつつ固定具２０により固定される。またこのときのカメラ９の撮像範囲ＡＲは、上記第３例と同様に補助図形２０Ｂを全て含むように、図８（ｂ）に破線で示す撮像範囲ＡＲとされる。この第４例の場合でも、書き込まれた補助図形２０Ｂの固定具２０に対する位置及び関係が上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　次に第５例として図９（ａ）に例示する場合では、書面Ｐは、本発明に係る「移動手段」の一例、「態様変更手段」の一例、及び「変更手段」の一例としての紙送りローラ２２及び紙送りローラ２３上に載置されており、これら紙送りローラ２２及び紙送りローラ２３の断続的な回転駆動により、停止と移動（送り）を繰り返しながら図９（ａ）中左右方向にのみ搬送される。なおこのとき図９（ａ）中上下方向について、書面Ｐは移動不可とされている。そしてこれら書面Ｐを移動させる紙送りローラ２２及び紙送りローラ２３の位置に対して固定された位置に透明板２１を設け、更に紙送りローラ２２及び紙送りローラ２３の位置に対して一定の位置及び関係を有する透明板２１上の領域に、当該一定の位置及び関係（範囲）を有する例えば矩形且つ目盛り付きの補助図形２０Ｃが物理的に書き込まれている。またこのときのカメラ９の撮像範囲ＡＲは、補助図形２０Ｃ及び移動する書面Ｐの縦方向を全て含むように、図９（ａ）に破線で示す撮像範囲ＡＲとされる。この第５例の場合でも、書き込まれた補助図形２０Ｃの紙送りローラ２２及び紙送りローラ２３の位置に対する位置及び関係が上記固定具データとして既知且つ一定であるので、書面Ｐが停止されているタイミングで撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　なおこの第５例において、複数の画像データＧから選択する、或いは書面Ｐが停止しているタイミングにおいて撮像を行う等により、上記書面Ｐが停止しているタイミングで撮像された画像データＧを取得するためには、例えば、画像データＧの品質評価を複数の画像データＧに対して行うことにより取得する方法や、画像が動いていることを認識して取得する方法、或いは書面Ｐが移動しているか否かをカメラ９により撮像可能とするための表示装置（より具体的には小型の液晶ディスプレイ等）を紙送りローラ２２及び紙送りローラ２３を駆動する図示しない駆動部側に備える方法などが挙げられる。
　次に第６例として、これは図７（ａ）に例示する第１例に類似するが、図９（ｂ）に例示するように、固定具２０を、書面Ｐのちょうど半分が露出する間隔を持つ二枚の固定板２０－１及び固定板２０－２（このうち、書面Ｐを跨ぐ形となる固定板２０－２についてはその一部を欠損させる）を書面Ｐの範囲外で接続された形状とする。そしてこのときのカメラ９の撮像範囲ＡＲが、図９（ｂ）に破線で示す撮像範囲となるように固定具２０及び書面Ｐを載置する。なおこの場合、図９（ｂ）に両矢印で示すように、書面Ｐは図９（ｂ）中の左右方向には移動不可であるが、その上下方向には移動可能とされている。この第６例の場合でも、上記第１例の場合と同様に、固定具２０により書面Ｐの半分の領域が露出されて撮像されることが上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　最後に第７例として図１０に例示するように、固定具２０を、書面Ｐの端部（図１０に例示する場合は左端）が密着する位置及び形状とし、更に当該固定具２０から書面Ｐのちょうど半分に相当する位置の載置台ＰＴ４上に直線マーク２４を書き込んでおく。そしてこのときのカメラ９の撮像範囲ＡＲが、図１０に破線で示す撮像範囲となるように、直線マーク２４との関係で固定具２０及び書面Ｐを載置する。なおこの場合も図１０に両矢印で示すように、書面Ｐは図１０中の左右方向には移動不可であるが、その上下方向には移動可能とされている。この第７例の場合でも、固定具２０と直線マーク２４により画定される領域が書面Ｐのちょうど半分の領域になって撮像されることが上記固定具データとして既知且つ一定であるので、当該撮像された画像データＧに対してＣＰＵ１は、上記固定具データを用いて画像データＧ内の書面Ｐの画像を補正する。
　以上七通りの場合について第２実施形態に係る固定具２０等を例示したが、これらいずれの場合でも、画像データＧ内において撮像されている書面Ｐの一部について、これを補正すると共に、固定具２０等との関係から、書面Ｐ全体に係る大きさ、当該全体の形状又は当該全体の合成画像等を正確に取得することができるのである。
　なお上述したように、これら七通りの場合のいずれでも、書面Ｐ全体に係る正確な大きさ等の取得は例えば図４に示すフローチャートにおけるステップＳ５のキャプチャ処理中に行われるのが好ましい。
　次に、第２実施形態に係る固定具２０等を用いた撮像により、書面Ｐの一部の撮像が複数回行われた場合において、当該各撮像の結果得られた複数の画像データＧを用いて書面Ｐ全体の画像を合成する際に実行される位置合わせ処理について、具体的に一例を挙げつつ、図１１乃至図１３を用いて説明する。ここで、以下に説明する位置合わせ処理は、第２実施形態に係る固定具２０等を用いた撮像のうち、複数回の撮像によりそれぞれ生成された複数の画像データＧの部分同士に重複がある場合について適用される位置合わせ処理である。
　更に、第２実施形態に係る書面Ｐ全体に対応する合成処理は、以下に説明する位置合わせ処理が実行された各カレント画像を用いて実行されることになる。より具体的に、一回ごとの撮像で補正及び取得ができた各画像データＧは、例えばいわゆる非剛体の位置合わせ処理により各画像データＧの境界部が接続され、元の書面Ｐ全体の合成画像が生成される。
　即ち、当該位置合わせ処理は、例えば二回に分けてそれぞれの一部が互いに重複するように撮像された書面Ｐの異なる部分（例えば右半分と左半分）について、両者の重複部分が画像として不連続とならずに両者が継ぎ合わされるように、カレント画像の位置合わせ（変形）を行う処理である。ここで、図１１乃至図１３に示す例では、図１１（ａ）左に示すカレント画像ＧＡを基準画像とし、図１１（ａ）右に示すカレント画像ＧＴについて非剛体の位置合わせ処理を行うものとする。
　第２実施形態に係る位置合わせ処理として先ずＣＰＵ１は、図１１（ｂ）に例示するように、カレント画像ＧＴを所定数に分割する。図１１（ｂ）右に例示する場合では、カレント画像ＧＴを四つの分割画像ＧＴａ乃至ＧＴｄに分割しているが、より高画質を得るためには分割数は多いほどよい。次にＣＰＵ１は、図１１（ｃ）に例示するように一つの分割画像に着目する。図１１（ｃ）に例示する場合、ＣＰＵ１は分割画像ＧＴａに着目している。
　次にＣＰＵ１は、図１２（ａ）に例示するように、着目している分割画像ＧＴａをカレント画像ＧＡに重ねる。なお図１２における座標軸は、カレント画像ＧＡにおける各分割画像に対応する領域の左上隅と、各分割画像の左上隅と、を原点（０，０）とし、図１２において右方向がｘ座標軸の正方向、図１２において下方向がｙ座標軸の正方向である。図１２（ａ）において分割画像ＧＴａをカレント画像ＧＡに最初に重ねる場合、そのオフセットは（０，０）とされる。
　その後ＣＰＵ１は、図１２（ｂ）に例示するように、カレント画像ＧＡ内において、分割画像ＧＴａとその内容が最もよく一致する位置（オフセット）を探索する。なお、画像同士の内容の一致を定量化するためには、例えば相互情報量（Mutual Information）を用いる手法や、対象となる領域（図１２（ｂ）に例示する場合は、分割画像ＧＴａの領域）に対する輝度差の総和（ＳＡＤ（Sum of Absolute Difference））を用いる手法などが好適である。図１２（ｂ）の例でＣＰＵ１は、当該オフセットとして座標データ（－２，＋３）が得られている。
　その後ＣＰＵ１は、図１２に例示する分割画像ＧＴａ以外の他の分割画像ＧＴｂ乃至分割画像ＧＴｄについても、同様にその内容が最もよく一致する位置（オフセット）をカレント画像ＧＡ内において探索する。図１２（ｃ）に例示する場合、分割画像ＧＴａの場合は当該オフセットとして座標データ（－２，＋３）が、分割画像ＧＴｂの場合は当該オフセットとして座標データ（＋２，＋３）が、分割画像ＧＴｃの場合は当該オフセットとして座標データ（＋４，－１）が、分割画像ＧＴｄの場合は当該オフセットとして座標データ（－３，－１）が、それぞれＣＰＵ１により得られている。
　以上の一連の処理により、第２実施形態に係る位置合わせ処理として各分割画像ＧＴａ乃至分割画像ＧＴｄそれぞれの中心点が移動されるべき量が、上記オフセットとして、例えば図１２（ｄ）右に例示するようにそれぞれ得られる。なおこの中心点は、一般に「アンカー」と称されることもある。
　この他、各分割画像ＧＴａ乃至分割画像ＧＴｄそれぞれのアンカーの移動量に基づいたいわゆる内挿法又は外挿法により、図１３に例示するようにカレント画像ＧＴ全体を変形させるように位置合わせ処理を行うことも可能である。この場合には、カレント画像ＧＴの内容とカレント画像ＧＡの内容とを、より一致させることができる。更には、カレント画像ＧＴ全体、或いは分割画像ＧＴａ乃至分割画像ＧＴｄ全体の移動や変形（それらの回転、拡大／縮小又は台形変形等を含む）を用いることもできる。
　以上説明したように、第２実施形態に係るキャプチャシステムの動作によれば、書面Ｐの外縁の一部がカメラ９の撮像範囲外となる場合に、固定又は動きが制限されている書面Ｐと共に撮像される固定具２０等又は補助図形２０Ａ等を画像データＧに基づいて特定し、特定された固定具２０等又は補助図形２０Ａ等と、それらの既知且つ一定の位置及び関係と、に基づき、画像データＧを補正するので、書面Ｐの外縁の一部が撮像範囲外となる場合でもその大きさ又は形状或いは当該書面等の記載内容等を正確に認識できる。また撮像範囲に入った書面Ｐの部分がその全体におけるどの部分であるか等を正確に認識できることで、書面Ｐの記載内容を正確に認識することができる。
　更に、補正後の複数の画像データＧを合成し、各画像データＧそれぞれに対応する各撮像範囲に相当する書面Ｐの部分を含む（それらの部分を合成した）合成画像を取得するので、複数の撮像範囲に渡る書面Ｐの大きさ又は形状或いは当該書面等の記載内容等を認識できる。
　更にまた、例えば図１０に示す第７例の場合では、固定具２０等に載置第ＰＴ４のカメラ９側の面に描かれている直線マーク２４が含まれているので、正確な合成画像等が取得可能な補助部２０等を簡易な構成で構成することができる。
　また、例えば図７に示す第１例等の場合では、固定具２０がカメラ９と書面Ｐとの間に設置されているので、正確な合成画像等が取得可能な固定具２０を簡易な構成で構成することができる。
　更にまた、例えば図８（ｂ）に示す第４例等の場合では、カメラ９と書面Ｐとの間に設置される透明板２１に描かれている補助図形２０Ｂ等が固定具であるので、正確な合成画像等が取得可能な固定具２０等を簡易な構成で構成することができる。
　更に、例えば図９（ａ）に示す第５例の場合では、撮像範囲ＡＲ内の一方向のみについて書面Ｐを移動させ、当該移動に対応して逐次出力される複数の画像データＧそれぞれにおいて特定された補助図形２０Ｃと、当該補助図形２０Ｃの紙送りローラ２２及び紙送りローラ２３に対する既知且つ一定の位置及び関係と、に基づいて各画像データＧから合成画像等を取得するので、撮像範囲に対してより大きな書面Ｐであっても、正確な合成画像等が取得できる。
　更にまた、移動中の書面Ｐが停止しているタイミングにおける画像データＧに基づいて、書面Ｐ全体に相当する合成画像を合成するので、正確な合成画像を取得することができる。
　また、例えば図８（ａ）に示す第３例等の場合では、固定具としての補助図形２０Ｂを投影させるので、例えば凹凸がある書面Ｐであっても、補助図形２０Ｂをそれに投影させることで固定具を構成することができる。
　更に、書面Ｐの複数の部分それぞれを撮像範囲とした複数の画像データＧに基づいて、書面Ｐ全体に相当する合成画像を合成するので、書面Ｐの外縁の一部が撮像範囲外となる場合でも書面Ｐ全体に対応する合成画像を取得することができる。
　更にまた、相互に一部が重複する書面Ｐの複数の部分それぞれを撮像範囲とした複数の画像データＧを用いた非剛体の位置合わせ処理により合成画像を合成するので、書面Ｐ全体に対応するより高精度な画像を取得することができる。
　なお、画像データＧに基づいて、書面Ｐが静止させられていると判定されたときカメラ９に撮像を行わせる場合は、撮像範囲の撮像を自動化することができる。
（IV）変形形態
　なお、本発明は、上述してきた各実施形態以外にも様々な応用が可能である。
（ａ）第一の変形形態
　先ず第一の変形形態として、書面Ｐの固定又は動きの制限を解除して、複数の書面Ｐを撮像範囲内において交換するオードシートフィーダ機構（本発明に係る「交換手段」の一例に相当）を設けると共に、交換される各書面Ｐを識別可能な識別データを、当該各書面Ｐの交換に対応したタイミングでカメラ９の撮像範囲内の載置台ＰＴ４においてそれぞれ表示するように構成し、カメラ９により、書面Ｐ及び当該書面Ｐに対応して表示されている識別データを共に撮像し、その撮像結果に含まれている識別データを用いて各書面Ｐを識別して当該各書面Ｐに対応する合成画像を取得するように構成してもよい。
　この場合は、複数の書面Ｐそれぞれを識別しつつ、それらに対応する合成画像を取得することができる。
（ｂ）第二の変形形態
　また第二の変形形態として、第一の変形形態と同様なオートシートフィーダ機構を設けると共に、書面Ｐの交換に対応したカメラ９による撮像タイミング示すタイミング（より具体的には、例えば「交換中」、「撮影」等の表示）を、当該各書面Ｐの交換に対応してカメラ９の撮像範囲内の載置台ＰＴ４において表示し、カメラ９により、当該表示されているタイミングに基づいて書面Ｐを撮像して撮像情報を出力するように構成することもできる。
　この場合は、複数の書面Ｐを交換しつつ撮像する場合において、いずれかの書面Ｐが欠落したり重複して撮像されたりすることを防止することができる。
　更には、本発明は以下のような様々な変形が可能である。
・各実施形態に係るスタンドＳＴを、角度や高さの調整が可能な構成とすることができる。
・また撮像時においてスマートフォンＳのライト１１によるフラッシュ撮影を行うように構成することができる。
・画像データＧを参照パターンＲＰ３－１及び参照パターンＲＰ３－２を用いて補正する場合に、スマートフォンＳに備えられた姿勢センサ（加速度センサやジャイロセンサ）を用いて書面Ｐに対するカメラ９の角度を検出し、これを上記幾何補正に用いるように構成することができる。
・スタンドＳＴと文書（ノートなど）を物理的にクリップなどで固定するように構成することができる。この場合、文書を手で動かすと、スタンドもこれに合わせて一緒に動くことになる。
・自動でキャプチャが行われた瞬間に、音声、ＬＥＤ等の発光体又は振動などの表示以外の方法で携帯者に通知するように構成しても良い。
・書面Ｐを置く位置を決める際に、書面Ｐを置く推奨位置をスマートフォンＳ又はスタンドＳＴからの光やレーザ光線、或いはディスプレイで提示すると共に、実際のキャプチャ時には、書面Ｐの位置に対して最適となるように、カメラ９のズーム又は首振り角度等の自動的に調節するように構成することができる。
・一つの書面Ｐだけでなく、複数の撮像対象物（例えば、名刺等の小さい書面等）を同時に認識してキャプチャするように構成することができる。
・本発明に係る撮像対象物としては、各実施形態において説明した書面Ｐ、即ち紙だけではなく、例えばスレート型のパーソナルコンピュータやいわゆる電子ブックの表示装置等の携帯型の表示装置に表示されている画像等を撮像するように構成することができる。
・更に、キャプチャの際、各画像データを識別するための識別文字列（シリアル番号等）、当該画像データが撮像された時を示す時刻情報、又は当該キャプチャが行われた場所を示す場所情報の少なくともいずれか一つを画像データ内に画像として埋め込んだ後、記録するように構成することができる。この場合には、画像データをキャプチャする際、識別文字列、時刻情報又は場所情報の少なくともいずれか一つを画像として埋め込んだ後に記録するので、記録後の画像データを容易に識別することができる。
　なお、図４に示すフローチャートに対応するプログラムを、インターネット等のネットワークを介して取得し、或いは光ディスク等の情報記録媒体に記録されているものを取得して、例えば汎用のマイクロコンピュータによりこれを読み出して実行するように構成することもできる。この場合のマイクロコンピュータは、各実施形態に係るＣＰＵ１と同様の処理を実行することになる。
　以上夫々説明したように、本発明は撮像システムの分野に利用することが可能であり、特にカメラ９により撮像された画像をキャプチャする撮像システムの分野に適用すれば特に顕著な効果が得られる。
　１　　ＣＰＵ
　２　　ＲＯＭ
　３　　ＲＡＭ
　４　　操作部
　５　　ディスプレイ
　７　　スピーカ
　８　　マイク
　６　　通話制御部
　９　　カメラ
　１０　　通信インターフェース
　１１　　ライト
　２０　　固定具
　２０－１、２０－２　　固定板
　２０Ａ、２０Ｂ、２０Ｃ　　補助図形
　２１　　透明板
　２２、２３　　紙送りローラ
　２４　　直線マーク
　３２　　カレント画像バッファ
　ＣＳ　　キャプチャシステム
　Ｓ　　スマートフォン
　ＳＴ　　スタンド
　ＰＴ１　　保持台
　ＰＴ２、ＰＴ３　　支持部
　ＰＴ４　　載置台
　Ｐ　　書面
　ＳＬ　　スリット
　ＡＮＴ　　アンテナ
　ＲＰ１、ＲＰ２、ＲＰ３－１、ＲＰ３－２　　参照パターン
　ＳＣ　　スケール
　ＣＲＰ　　色パターン
　ＢＲＰ　　コントラストパターン
　Ｇ　　画像データ
　ＡＲ　　撮像範囲
　ＧＡ、ＧＴ　　カレント画像
　ＧＴａ、ＧＴｂ、ＧＴｃ、ＧＴｄ　　分割画像

Claims (30)

  1. 　撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムにおいて、
    　前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定／制限手段と、
    　前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助手段と、
    　前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定する特定手段と、
    　前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得する補正取得手段と、
    　を備えることを特徴とする撮像システム。
  2. 　請求項１に記載の撮像システムにおいて、
    　複数の前記取得された補正撮像情報を合成し、当該各補正撮像情報それぞれに対応する各前記撮像範囲に相当する前記撮像対象物を含む合成撮像情報を生成する合成手段を更に備えることを特徴とする撮像システム。
  3. 　請求項２に記載の撮像システムにおいて、
    　前記合成手段は、前記撮像対象物の、相互に一部が重複する複数の部分それぞれを前記撮像範囲とした複数の前記補正撮像情報を用いた位置合わせ処理により前記合成画像を合成することを特徴とする撮像システム。
  4. 　請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、
    　前記固定又は前記動きが制限される前記撮像対象物を載置可能な載置手段を更に備え、
    　前記補助手段は、前記載置手段の前記撮像手段側の面に描かれている規準パターンであることを特徴とする撮像システム。
  5. 　請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、
    　前記補助手段は、前記撮像手段と前記撮像対象物との間に設置される補助物であることを特徴とする撮像システム。
  6. 　請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、
    　前記補助手段は、前記撮像手段と前記撮像対象物との間に設置される透明物に描かれている規準パターンであることを特徴とする撮像システム。
  7. 　請求項１から請求項３のいずれか一項に記載の撮像システムにおいて、
    　前記撮像対象物の前記撮像手段側の面に、前記補助手段としての規準パターンの画像を投影させる投影手段を更に備えることを特徴とする撮像システム。
  8. 　請求項１から請求項７のいずれか一項に記載の撮像システムにおいて、
    　前記固定／制限手段による前記固定を一時的に解除して、又は前記動きの制限の範囲内において前記撮像対象物を動かすことにより、当該撮像対象物の位置、角度又は変形の状態を変更する態様変更手段を更に備え、
    　前記特定手段は、前記態様変更手段による変更に対応して前記撮像手段から逐次出力される複数の前記撮像情報それぞれにおける前記補助手段を特定し、
    　前記補正取得手段は、各前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、各前記撮像範囲にそれぞれ相当する前記撮像情報を補正し、当該各撮像範囲に相当する前記撮像対象物を撮像した前記補正撮像情報を取得することを特徴とする撮像システム。
  9. 　請求項８に記載の撮像システムにおいて、
    　前記固定／制限手段は、前記撮像範囲内の一の方向について前記撮像対象物の動きを制限し、
    　前記態様変更手段は、前記一の方向とは異なる前記撮像範囲内の他の方向について、前記撮像対象物を移動させる移動手段であることを特徴とする撮像システム。
  10. 　請求項８又は請求項９に記載の撮像システムにおいて、
    　前記撮像対象物は、前記態様変更手段により態様が変更されている状態と当該態様の変更が停止されている状態とを繰り返し、
    　前記補正取得手段は、前記変更が停止されている状態において前記撮像手段から出力された前記撮像情報に基づいて、前記補正撮像情報を取得することを特徴とする撮像システム。
  11. 　請求項１から請求項１０のいずれか一項に記載の撮像システムにおいて、
    　前記情報処理装置は、
    　前記固定／制限手段により前記撮像対象物が静止させられているか否かを判定する判定手段と、
    　前記撮像対象物が静止させられていると判定されたとき前記撮像手段に前記撮像範囲の撮像を行わせる制御手段と、
    　を更に備えることを特徴とする撮像システム。
  12. 　請求項１から請求項１１のいずれか一項に記載の撮像システムにおいて、
    　前記固定又は前記動きが制限される前記撮像対象物を載置可能な載置手段と、
    　前記情報処理装置を保持して前記撮像手段の前記載置手段に対する相対的な位置及び関係を一定とする保持手段と、
    　を備え、
    　前記情報処理装置は、
    　前記撮像手段から出力された前記撮像情報を、前記載置手段の前記撮像手段側の面に対応する面対応情報を用いて補正する補正手段を更に備えることを特徴とする撮像システム。
  13. 　請求項１２に記載の撮像システムにおいて、
    　前記撮像手段は、前記撮像対象物が置かれていない前記載置手段の前記面を撮像し、当該面に相当する前記撮像情報である補正用撮像情報を出力し、
    　前記補正手段は、前記撮像対象物が置かれていない前記載置手段の前記面に対応する前記面対応情報と、前記出力された補正用撮像情報と、を用いて、前記撮像手段により前記撮像対象物を撮像して得られる画像内に当該撮像対象物と共に含まれる影を除去することを特徴とする撮像システム。
  14. 　請求項１３に記載の撮像システムにおいて、
    　前記面は無模様且つ一色であることを特徴とする撮像システム。
  15. 　請求項１２に記載の撮像システムにおいて、
    　前記撮像手段は、前記撮像対象物が置かれていない前記載置手段の前記面を撮像し、当該面に相当する前記撮像情報である補正用撮像情報を出力し、
    　前記補正手段は、前記撮像対象物が置かれていない前記載置手段の前記面に対応する前記面対応情報と、前記出力された補正用撮像情報と、を用いて、前記撮像手段により前記撮像対象物を撮像して得られる画像内に当該撮像対象物と共に含まれる映り込みを除去することを特徴とする撮像システム。
  16. 　請求項１２に記載の撮像システムにおいて、
    　前記面が無彩色の模様を有しており、
    　前記補正手段は、前記撮像情報における明度又はコントラストの少なくともいずれか一方を、前記模様に相当する前記面対応情報を用いて補正することを特徴とする撮像システム。
  17. 　請求項１２に記載の撮像システムにおいて、
    　前記面が彩色された模様を有しており、
    　前記補正手段は、前記撮像情報における色を、前記模様に相当する前記面対応情報を用いて補正することを特徴とする撮像システム。
  18. 　請求項１２に記載の撮像システムにおいて、
    　前記面が長さ又は角度の少なくともいずれか一方の規準となる規準情報を有しており、
    　前記補正手段は、前記撮像情報における少なくとも歪みを、前記規準情報に相当する前記面対応情報を用いて補正することを特徴とする撮像システム。
  19. 　請求項１２に記載の撮像システムにおいて、
    　前記面が長さ又は角度の少なくともいずれか一方の規準となる規準情報を有しており、
    　前記情報処理装置は、前記出力された撮像情報と、前記規準情報と、を用いて、前記載置手段に置かれた前記撮像対象物の諸元を認識する認識手段を更に備えることを特徴とする撮像システム。
  20. 　請求項１６から請求項１９のいずれか一項に記載の撮像システムにおいて、
    　前記撮像手段は、前記撮像対象物が置かれている前記載置手段の前記面を当該撮像対象物と共に撮像し、当該面及び当該撮像対象物に相当する前記撮像情報を出力し、
    　前記補正手段は、前記面対応情報を用いて前記出力された撮像情報を補正することを特徴とする撮像システム。
  21. 　請求項１２に記載の撮像システムにおいて、
    　前記情報処理装置は、
    　前記面対応情報に基づいて、前記載置手段上における前記撮像対象物の有無を判定する判定手段を更に備えることを特徴とする撮像システム。
  22. 　請求項１２から請求項２１のいずれか一項に記載の撮像システムにおいて、
    　前記情報処理装置は、
    　前記撮像情報と、前記面対応情報と、に基づいて、前記撮像対象物の撮像に係る撮像環境を示す撮像環境情報を生成する生成手段と、
    　前記生成された撮像環境情報を告知する告知手段と、
    　を更に備えることを特徴とする撮像システム。
  23. 　請求項１２から請求項２１のいずれか一項に記載の撮像システムにおいて、
    　前記情報処理装置は、前記撮像情報と、前記面対応情報と、に基づいて、前記撮像対象物の撮像に係る撮像環境を示す撮像環境情報を生成する生成手段を更に備え、
    　前記撮像システムは、
    　前記相対的な位置及び関係を変更する変更手段と、
    　前記生成された撮像環境情報に基づいて、前記相対的な位置及び関係を変更するように前記変更手段を制御する制御手段と、
    　を更に備えることを特徴とする撮像システム。
  24. 　請求項１２から請求項２３のいずれか一項に記載の撮像システムにおいて、
    　前記情報処理装置は、前記補正された撮像情報を記録する記録手段を更に備えることを特徴とする撮像システム。
  25. 　請求項１から請求項２４のいずれか一項に記載の撮像システムにおいて、
    　前記固定／制限手段による前記固定又は前記動きの制限を解除して、複数の前記撮像対象物を前記撮像範囲内において交換する交換手段と、
    　前記交換される各撮像対象物を識別可能な識別情報を、当該各撮像対象物の交換に対応したタイミングで前記撮像範囲内においてそれぞれ表示する識別情報表示手段と、
    　を更に備え、
    　前記撮像手段は、前記撮像対象物及び当該撮像対象物に対応して表示されている前記識別情報を共に撮像して前記撮像情報を出力し、
    　前記補正取得手段は、前記撮像情報に含まれている前記識別情報を用いて各前記撮像対象物を識別して当該各撮像対象物に対応する前記補正撮像情報を取得することを特徴とする撮像システム。
  26. 　請求項１から請求項２５のいずれか一項に記載の撮像システムにおいて、
    　前記固定／制限手段による前記固定又は前記動きの制限を解除して、複数の前記撮像対象物を前記撮像範囲内において交換する交換手段と、
    　前記交換に対応した前記撮像手段による撮像タイミング示すタイミング情報を、当該各撮像対象物の交換に対応して表示するタイミング情報表示手段であって前記撮像範囲内にあるタイミング情報表示手段と、
    　を更に備え、
    　前記撮像手段は、前記表示されているタイミング情報に基づいて前記撮像対象物を撮像して前記撮像情報を出力することを特徴とする撮像システム。
  27. 　請求項１から請求項２５のいずれか一項に記載の撮像システムにおいて、
    　前記撮像手段は、前記撮像手段と前記載置手段との相対的な前記位置及び前記関係を一定としつつ、前記補助手段を含む前記撮像情報と前記補助手段を含まない前記撮像情報とを同一の前記撮像対象物について出力し、
    　前記補正取得手段は、当該それぞれ出力された撮像情報に基づいて前記補正撮像情報の取得を行うことを特徴とする撮像システム。
  28. 　撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムであって、
    　前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定／制限手段と、
    　前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助手段と、
    　を備える撮像システムの前記情報処理装置において実行される撮像方法であって、
    　前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定する特定工程と、
    　前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得する補正取得工程と、
    　を含むことを特徴とする撮像方法。
  29. 　撮像手段を備える携帯型の情報処理装置を用いて、外縁の一部が前記撮像手段の撮像範囲外となる撮像対象物を撮像する撮像システムであって、
    　前記撮像対象物を固定又は当該撮像対象物の動きを制限する固定／制限手段と、
    　前記固定／制限手段に対する相対的な位置及び関係が既知且つ一定であり、更に前記撮像範囲内に位置することにより、前記固定又は前記動きが制限されている前記撮像対象物と共に前記撮像手段により撮像される補助手段と、
    　を備える撮像システムの前記情報処理装置に含まれるコンピュータを、
    　前記撮像手段の撮像により当該撮像手段から出力された、前記撮像範囲に相当する撮像情報に基づいて、前記撮像範囲内における前記補助手段を特定する特定手段、及び、
    　前記特定された補助手段と、当該補助手段の前記固定／制限手段に対する既知且つ一定の前記位置及び前記関係と、に基づいて、前記撮像範囲に相当する前記撮像情報を補正し、当該撮像範囲に相当する前記撮像対象物を撮像した補正撮像情報を取得する補正取得手段、
    　として機能させることを特徴とする撮像用プログラム。
  30. 　請求項２９に記載の撮像用プログラムが請求項２９に記載のコンピュータにより読み取り可能に記録されていることを特徴とする情報記録媒体。
PCT/JP2012/062930 2012-05-21 2012-05-21 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体 WO2013175550A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2014516535A JPWO2013175550A1 (ja) 2012-05-21 2012-05-21 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体
PCT/JP2012/062930 WO2013175550A1 (ja) 2012-05-21 2012-05-21 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2012/062930 WO2013175550A1 (ja) 2012-05-21 2012-05-21 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体

Publications (1)

Publication Number Publication Date
WO2013175550A1 true WO2013175550A1 (ja) 2013-11-28

Family

ID=49623283

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/062930 WO2013175550A1 (ja) 2012-05-21 2012-05-21 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体

Country Status (2)

Country Link
JP (1) JPWO2013175550A1 (ja)
WO (1) WO2013175550A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4191993A4 (en) * 2020-07-29 2024-02-07 Fujifilm Corp IMAGE CORRECTION DEVICE, IMAGE CORRECTION METHOD, PROGRAM, AND RECORDING MEDIUM

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08263626A (ja) * 1995-03-22 1996-10-11 Canon Inc 画像処理方法および画像処理装置
JP2002199189A (ja) * 2000-12-25 2002-07-12 Hitachi Ltd 画像読取装置
JP2003319145A (ja) * 2002-04-26 2003-11-07 Hitachi Ltd 非接触画像読取システム
JP2006333162A (ja) * 2005-05-27 2006-12-07 Nikon Corp イメージスキャナ
JP2006338584A (ja) * 2005-06-06 2006-12-14 Ribakku:Kk 画像処理装置、画像処理方法、画像処理プログラム、及び画像処理システム、並びに撮像装置
JP2007194794A (ja) * 2006-01-18 2007-08-02 Casio Comput Co Ltd 撮影装置、撮影画像の画像処理方法及びプログラム
JP2009060393A (ja) * 2007-08-31 2009-03-19 Casio Comput Co Ltd 書画カメラ装置、画像処理装置、画像処理方法及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08263626A (ja) * 1995-03-22 1996-10-11 Canon Inc 画像処理方法および画像処理装置
JP2002199189A (ja) * 2000-12-25 2002-07-12 Hitachi Ltd 画像読取装置
JP2003319145A (ja) * 2002-04-26 2003-11-07 Hitachi Ltd 非接触画像読取システム
JP2006333162A (ja) * 2005-05-27 2006-12-07 Nikon Corp イメージスキャナ
JP2006338584A (ja) * 2005-06-06 2006-12-14 Ribakku:Kk 画像処理装置、画像処理方法、画像処理プログラム、及び画像処理システム、並びに撮像装置
JP2007194794A (ja) * 2006-01-18 2007-08-02 Casio Comput Co Ltd 撮影装置、撮影画像の画像処理方法及びプログラム
JP2009060393A (ja) * 2007-08-31 2009-03-19 Casio Comput Co Ltd 書画カメラ装置、画像処理装置、画像処理方法及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4191993A4 (en) * 2020-07-29 2024-02-07 Fujifilm Corp IMAGE CORRECTION DEVICE, IMAGE CORRECTION METHOD, PROGRAM, AND RECORDING MEDIUM

Also Published As

Publication number Publication date
JPWO2013175550A1 (ja) 2016-01-12

Similar Documents

Publication Publication Date Title
CN102484724A (zh) 投影图像区域检测装置
JP6233356B2 (ja) シートサイズ特定システム、シートサイズ特定方法、シートサイズ特定プログラムおよび画像形成装置
US9041982B1 (en) Portable device scanner support with contour correction and automatic copying
JP2006338584A (ja) 画像処理装置、画像処理方法、画像処理プログラム、及び画像処理システム、並びに撮像装置
US20110164226A1 (en) System and method for projection correction
US8988745B2 (en) Image processing apparatus for processing photographed images
JP2010219825A (ja) 三次元計測用画像撮影装置
JP5858388B2 (ja) 画像記録装置、画像記録方法、画像記録用プログラム及び情報記録媒体
US9092669B2 (en) Image processing apparatus for processing photographed images
JP2003015218A (ja) 投影型表示装置
JP5233868B2 (ja) 画像切出装置
JP5909990B2 (ja) 撮像装置および撮像方法
US9241086B1 (en) Image-reading apparatus
WO2013175550A1 (ja) 撮像システム、撮像方法、撮像用プログラム及び情報記録媒体
JP4182937B2 (ja) 撮影装置、撮影装置の画像処理方法及びプログラム
JP6099281B2 (ja) 書籍読み取りシステム及び書籍読み取り方法
JP5987136B2 (ja) 印刷装置、情報処理装置、印刷方法、情報処理プログラム及び情報記録媒体
JP2006053313A (ja) 撮影機能付き映像投射装置およびそれを用いたデータ管理システム
CN111426453A (zh) 显示面板的检测装置
US4794462A (en) Method and system for patching an original at a desired angular orientation on a scanner input drum or an original patching sheet and extracting original trimming data
JP6067040B2 (ja) 情報処理装置、情報処理方法及びプログラム
KR20160095404A (ko) 휴대용 스캐너 및 이를 이용한 자료 스캔 방법
CN211784211U (zh) 显示面板的检测装置
WO2022113582A1 (ja) キャリブレーション方法、キャリブレーション装置、キャリブレーションシステム、及び記録媒体
JP2007148612A (ja) 撮影装置、画像処理方法および画像処理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12877209

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014516535

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12877209

Country of ref document: EP

Kind code of ref document: A1