WO2018034414A1 - 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체 - Google Patents

화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체 Download PDF

Info

Publication number
WO2018034414A1
WO2018034414A1 PCT/KR2017/006288 KR2017006288W WO2018034414A1 WO 2018034414 A1 WO2018034414 A1 WO 2018034414A1 KR 2017006288 W KR2017006288 W KR 2017006288W WO 2018034414 A1 WO2018034414 A1 WO 2018034414A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
detecting
processor
forming apparatus
scanned image
Prior art date
Application number
PCT/KR2017/006288
Other languages
English (en)
French (fr)
Inventor
이해기
공정탁
이창형
이호근
Original Assignee
에스프린팅솔루션주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스프린팅솔루션주식회사 filed Critical 에스프린팅솔루션주식회사
Priority to CN201780064011.8A priority Critical patent/CN109845237B/zh
Priority to EP17841598.0A priority patent/EP3487159B1/en
Priority to US16/325,948 priority patent/US11295415B2/en
Publication of WO2018034414A1 publication Critical patent/WO2018034414A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/146—Aligning or centring of the image pick-up or image-field
    • G06V30/1463—Orientation detection or correction, e.g. rotation of multiples of 90 degrees
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G06T3/602—Rotation of whole images or parts thereof by block rotation, e.g. by recursive reversal or rotation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • G06T3/608—Rotation of whole images or parts thereof by skew deformation, e.g. two-pass or three-pass rotation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/146—Aligning or centring of the image pick-up or image-field
    • G06V30/1475—Inclination or skew detection or correction of characters or of image to be recognised
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00681—Detecting the presence, position or size of a sheet or correcting its position before scanning
    • H04N1/00684—Object of the detection
    • H04N1/00718—Skew
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877—Image rotation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877—Image rotation
    • H04N1/3878—Skew detection or correction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Definitions

  • the present disclosure relates to an image forming apparatus, a method of correcting a scan image thereof, and a non-transitory computer readable recording medium, and more particularly, an image forming apparatus capable of improving image quality deterioration that may occur during scanning, a method of correcting a scanned image thereof. And non-transitory computer readable recording medium.
  • the present disclosure is to solve the above-described problems, an image forming apparatus capable of correcting distortion of a scanned image, adjusting document orientation, correcting an outer boundary of an original, a method of correcting the scanned image thereof, and non-transitory computer readable.
  • the purpose is to provide a recording medium.
  • the scanning unit for scanning a document to generate a scanned image and detects the skew angle of the generated scan image
  • the processor may include a processor configured to determine a reference point based on the position of the content, and to correct the skew angle by rotating the scan image about the determined reference point.
  • the processor may detect a boundary of the original from the generated scan image, and detect a twist angle of the scan image based on the detected boundary.
  • the processor may detect content in the scan image and detect a skew angle of the scan image based on the inclination of the detected content.
  • the processor may detect the inclination of the content by using at least one of the inclination of the character string included in the scan image, the inclination of the line of the chart, and the inclination of the edge of the image.
  • the apparatus may further include an input / output unit configured to display a screen and receive a user input, wherein the processor controls the input / output unit to display a UI for selecting one of a plurality of methods of detecting a skew angle of the generated scan image.
  • the twisted angle of the generated scan image may be detected by the selected method in response to a user input of selecting one of the plurality of methods.
  • the plurality of methods may include: a first method of detecting a skew angle by detecting a boundary of the document; a second method of detecting a skew angle by detecting content in the scanned image; If the angle is not detected, it may include a third method of performing the second method.
  • the scanned image may include a plurality of contents
  • the processor may determine the size and position of each of the plurality of contents and weight the positions of each of the plurality of contents according to the size of each of the plurality of contents.
  • the reference point may be determined based on a location of each of the plurality of weighted content.
  • the processor may detect a plurality of text areas in the scan image, and determine a page direction of the scan image based on a column direction of each of the plurality of text areas.
  • the processor may detect a text area having a preset text size.
  • the processor detects an amount that needs to be rotated from the determined column direction of the text area, and if the detected amount is greater than the predetermined value, the processor moves the scanned image to the determined page direction of the scanned image. Can be rotated.
  • the scan image correction method of the image forming apparatus for achieving the above object, the step of generating a scan image by scanning the original, detecting the skew angle of the generated scan image
  • the method may include determining a reference point based on the position of the content in the scan image, and correcting the twist angle by rotating the scan image around the determined reference point.
  • the detecting of the skew angle may include detecting a boundary of the original from the generated scan image and detecting a skew angle of the scan image based on the detected boundary.
  • the detecting of the skew angle may further include detecting content in the scanned image and detecting the skew angle of the scanned image based on the inclination of the detected content if the boundary of the original is not detected. It may include.
  • the inclination of the content may be detected using at least one of a slope of a string included in the scan image, a slope of a line of a chart, and a slope of an image edge.
  • the method may further include displaying a UI for selecting one of a plurality of methods for detecting a twist angle of the generated scan image, and the detecting of the twist angle may include selecting one of the plurality of methods.
  • the twist angle of the generated scan image may be detected by the selected method in response to a user input.
  • the plurality of methods may include: a first method of detecting a skew angle by detecting a boundary of the document; a second method of detecting a skew angle by detecting content in the scanned image; If the angle is not detected, it may include a third method of performing the second method.
  • the scan image may include a plurality of contents
  • the determining of the reference point may include determining a size and a location of each of the plurality of contents, and determining the size of each of the plurality of contents according to the size of each of the plurality of contents.
  • the method may include weighting a location and determining the reference point based on a location of each of the plurality of weighted content.
  • the method may further include detecting a plurality of text areas in the scan image and determining a page direction of the scan image based on a column direction of each of the plurality of text areas.
  • the method may further include detecting an amount requiring rotation from the determined column direction of the text area, and if the detected amount is larger than the predetermined value, rotating the scan image in the page direction of the determined scan image. It may further include.
  • a non-transitory computer-readable recording medium may include scanning a document to generate a scan image, and detecting a skew angle of the generated scan image. And determining a reference point based on the position of the content in the scanned image, and correcting the skew angle by rotating the scan image around the determined reference point. It may include a program for.
  • distortion of a scanned image may be corrected without losing content contents, and correction of a document direction and correction of an outer boundary of an original may be performed.
  • FIG. 1 is a schematic block diagram illustrating a configuration of an image forming apparatus according to an embodiment of the present disclosure
  • FIG. 2 is a block diagram for explaining in detail the configuration of the image forming apparatus according to an embodiment of the present disclosure
  • FIG. 3 is a diagram illustrating a case in which a skew angle can be detected by detecting a boundary of an original
  • FIG. 4 is a diagram showing a case where the boundary of an original cannot be detected
  • 5A to 5C are diagrams for explaining determining a rotation reference point for correcting a twist angle
  • FIG. 6 is a view for explaining determining a rotation reference point when a plurality of contents exists
  • 7A to 7C are diagrams for describing determining a direction of a scanned image
  • 12A to 12B are diagrams for explaining a correction method when no boundary of an original is detected.
  • first and second may be used to describe various components, but the components are not limited by the terms. The terms are only used to distinguish one component from another.
  • first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component.
  • image forming job may refer to various jobs related to an image (eg printing, scanning, or faxing), such as forming an image or generating / storing / transmitting an image file.
  • job not only means an image forming job, but also may include a series of processes necessary for performing the image forming job.
  • an "image forming apparatus” refers to an apparatus for printing print data generated on a terminal apparatus such as a computer on a recording sheet.
  • Examples of such an image forming apparatus include a copier, a scanner, a printer, a facsimile machine, or a multi-function printer (MFP) that implements their functions in a single device.
  • MFP multi-function printer
  • hard copy refers to an operation of outputting an image to a print medium such as paper.
  • content may mean all kinds of data that is an object of an image forming operation, such as a photo, an image, or a document file.
  • print data may refer to data converted into a format printable by a printer.
  • the printer supports direct printing, the file itself may be print data.
  • the "scan file” may mean a file generated by scanning an image in a scanner.
  • the term “user” may mean a person who performs an operation related to an image forming job by using an image forming apparatus or by using a device connected to the image forming apparatus by wire or wireless.
  • the “manager” may mean a person who has the authority to access all functions and systems of the image forming apparatus. "Administrator” and “User” may be the same person.
  • the image forming apparatus 100 may include a scan unit 110 and a processor 120.
  • the image forming apparatus 100 may further include a power supply unit for supplying power to the respective components.
  • the scan unit 110 may scan a document to generate a scanned image.
  • the scan unit 110 may irradiate the document with light, receive the reflected light, and read an image recorded on the document.
  • an image sensor for reading an image from an original for example, a charge coupled device (CCD), a contact type image sensor (CIS), or the like can be employed.
  • the scanning unit 110 has a flatbed structure in which an original is positioned at a fixed position, an image sensor is moved to read an image, a document feed in which an image sensor is positioned at a fixed position, and the original is fed. ), And complex structures thereof.
  • the processor 120 may detect a skew angle of the generated scan image.
  • the processor 120 may determine a reference point to scan the scan image based on the location of the content in the scan image. By rotating the scan image about the determined reference point, the processor 120 may correct the twist angle.
  • the processor 120 may detect the boundary of the original from the generated scan image. In addition, the processor 120 may detect a skew angle of the scanned image based on the detected boundary of the document.
  • the processor 120 may detect the content in the scanned image.
  • the processor 120 may detect a skew angle of the scanned image based on the detected slope of the content. For example, the processor 120 may detect a skew angle of the scan image from a slope of a string included in the scan image, a slope of a line included in a table, and an edge slope of an image such as a photograph.
  • the processor 120 may rotate the scan image to correct the detected skew angle.
  • the processor 120 may determine a reference point that is a center point of rotation based on the position of the content. If a plurality of contents is detected in the scanned image, the processor 120 may determine a reference point by weighting the plurality of contents according to the size of each of the detected plurality of contents.
  • the processor 120 may rotate the scan image in the page direction of the content. Through this, the readability of the scanned image may be improved.
  • the processor 120 may detect the exact boundary of the original so that the outline of the final scan / print result is not damaged.
  • the image forming apparatus 100 may include a scanning unit 110, a processor 120, an image forming unit 130, an input / output unit 140, a communication unit 150, and a memory 160. have. The description of the scan unit 110 will be omitted.
  • the processor 120 controls the overall operation of the image forming apparatus 100, and may include a processor such as a CPU, an ASIC, an SoC, a memory, a ROM, or the like.
  • the processor 120 may control other components included in the image forming apparatus 100 to perform an operation corresponding to a user input received through the input / output unit 140.
  • the image forming unit 130 may print the corrected scan image.
  • the image forming unit 130 may form an image on the recording medium by various printing methods such as an electrophotographic method, an inkjet method, a thermal transfer method, and a thermal method.
  • the image forming unit 130 may form an image on the recording medium by a series of processes including exposure, development, transfer, and fixing.
  • the input / output unit 140 may include an input unit for receiving an input for performing an image forming operation from a user, and a display for displaying information such as a result of performing the image forming operation or the state of the image forming apparatus 100. Can be.
  • the input / output unit 140 may include an operation panel for receiving a user input and a display panel for displaying a screen.
  • the input unit may include, for example, devices capable of receiving various types of user input such as a keyboard, a physical button, a touch screen, a camera or a microphone.
  • the present invention is not limited thereto, and the input / output unit 140 may include a device supporting various input / outputs.
  • the processor 120 may control the input / output unit 140 to display a UI on which the user can set a method of detecting the twist angle.
  • the processor 120 may detect the twist angle by the selected method.
  • the processor 120 may display a UI for setting a reference point for the user to rotate the scanned image.
  • the communicator 150 may perform wired or wireless communication with another device or network (eg, a local area network (LAN), an internet network, or a public switched telephone network (PSTN) network).
  • the communication unit 150 may include a communication module supporting at least one of various wired and wireless communication methods.
  • the communication module may be in the form of a chipset, or may be a sticker / barcode (sticker including an e.g. NFC tag) including information necessary for communication.
  • the wireless communication may include, for example, at least one of wireless fidelity (Wi-Fi), Wi-Fi Direct, Bluetooth, Ultra Wide Band (UWB), or Near Field Communication (NFC).
  • the wired communication may include, for example, at least one of Ethernet, Universal Serial Bus (USB), or High Definition Multimedia Interface (HDMI).
  • the memory 160 may install and store various types of data such as a program such as an application and a scan file.
  • the processor 120 may access and use data stored in the memory 160 or store new data in the memory 160.
  • the processor 120 may execute a program installed in the memory 160.
  • the processor 120 may install an application received from the outside through the communication unit 150 in the memory 160.
  • the memory 160 may include a storage medium (eg, HDD, SDD, etc.) and an external storage medium, eg, a removable disk including a USB memory, a web server via a network. ) May be implemented.
  • a storage medium eg, HDD, SDD, etc.
  • an external storage medium eg, a removable disk including a USB memory, a web server via a network.
  • a fax transmitting / receiving unit that performs a fax transmission / reception function according to a function supported by the image forming apparatus 100 is described. And the like may be further included.
  • the processor 120 may detect a skew angle of the generated scan image.
  • the processor 120 may detect the skew angle based on the boundary of the document. If the boundary of the document cannot be detected, the processor 120 may detect a skew angle based on the content of the content.
  • FIG. 3 is a diagram illustrating a case in which a skew angle can be detected by detecting a boundary of an original.
  • the processor 120 may detect the boundary of the document using the shaded value.
  • the processor 120 may omit the twist angle detection process based on the content of the content. Through this, the processor 120 may quickly detect a twist angle of the scan image.
  • the processor 120 may detect content in the scanned image.
  • the processor 120 may detect a twist angle of the scan image based on the detected tilt of the content.
  • the processor 120 may detect a skew angle of the scan image by using a slope of a string included in the scan image illustrated in FIG. 4, a slope of an outline of a photo, and a slope of a line of a table.
  • the processor 120 detects the skew angle by detecting the boundary of the original, the skew angle by detecting the contents in the scanned image, first detects the boundary of the original, and if the boundary of the original is not detected, the processor 120 detects the skew angle.
  • the twist angle may be detected by various methods such as a method of detecting the twist angle by detecting the content.
  • the processor 120 may provide the user with a plurality of methods of detecting a twist angle, and allow the user to select one of the provided methods.
  • the processor 120 may control the input / output unit 140 to display a UI for selecting one of a plurality of methods.
  • the processor 120 may detect the twist angle by the selected method through the UI.
  • the processor 120 may determine a reference point at which the scan image is to be scanned based on the location of the content in the scan image. By rotating the scan image about the determined reference point, the processor 120 may correct the twist angle.
  • the content is not cut off even when the processor 120 rotates the scan image based on the center coordinate of the scan image.
  • the processor 120 may calculate coordinates in which the content is located in the scanned image. In addition, the processor 120 may determine the center coordinates of the content as a reference point, and rotate the scanned image about the determined reference point.
  • the processor 120 may determine the center coordinate 520 of the content as the reference point, not the center coordinate 510 of the scan image.
  • the processor 120 may rotate the scanned image by the detected twist angle around the determined reference point.
  • the processor 120 may transmit the scanned image whose distortion angle is corrected to the image forming unit 130 for output, or store the scanned image in the memory 160.
  • the processor 120 may determine a reference point in consideration of the size of the contents. For example, the processor 120 may determine a reference point to a position close to the content having a large size by weighting the content according to the size of the content.
  • the processor 120 may detect a plurality of contents 601, 602, and 603 and calculate central coordinates 610, 620, and 630 of each of the plurality of contents. In addition, the processor 120 may determine the reference point 640 in consideration of the size of the content rather than the simple average value of the calculated coordinates.
  • the processor 120 may correct the direction of the scan image so that the direction of the document and the direction of the scan image coincide.
  • the orientation or page orientation of the document refers to the orientation in which the rectangular pages are appropriately placed in terms of readability.
  • the page direction when the length in the vertical direction (height direction) is larger than the length in the horizontal direction (width direction) is called a portrait type
  • the page direction when the length in the horizontal direction is larger than the length in the vertical direction is a landscape. It is called the (landscape) type.
  • An example in which a portrait type page orientation is suitable is a book in which content is arranged long in the vertical direction.
  • An example of a landscape type page orientation is a timeline graph that arranges content in a horizontal direction.
  • the processor 120 may detect a direction of content in the scanned image to determine a document direction or a page direction. If the determined page orientation is different from the page orientation of the current scan image, the processor 120 may rotate the scan image at right angles (90 degrees, 180 degrees, 270 degrees) to match the determined page orientation.
  • the processor 120 may detect a plurality of text areas in the scan image.
  • the processor 120 may determine the page direction of the original based on the column direction of each of the plurality of text areas. Note that the column orientation of the text and the page orientation of the original are different. For example, when the text is in a horizontal direction written in the horizontal direction, the document containing the text has a vertical page direction.
  • the scan image is generated in the vertical direction (portrait type).
  • the processor 120 may determine the page direction as the vertical direction of the portrait type. Therefore, the processor 120 may not rotate the scan image by determining that the direction of the scanned image and the page direction of the original are the same.
  • the processor 120 may determine the page direction as the landscape type of the landscape type. Since it is determined that the direction of the scanned image and the page direction of the original are different, the processor 120 may rotate the scanned image to be a landscape type.
  • the processor 120 may improve readability by rotating the scan image when the document direction and the scan image are different from each other.
  • the processor 120 may detect the direction of each text to detect the direction of a text string (or a character line). For example, the processor 120 may detect the direction of each text through OCR (Optical Character Recognition). In detail, the processor 120 may perform OCR in all four directions and detect a direction having the highest probability of being recognized as a character as a direction of text. As another example, the processor 120 may obtain a connection angle between texts and detect the direction of the text area according to the slope of the connection angle.
  • OCR Optical Character Recognition
  • the processor 120 may detect a direction mainly on an object having a high recognition rate. For example, the processor 120 may attempt direction detection only for a text area of a preset size range. As another example, the processor 120 may attempt direction detection only for text having a preset text size.
  • the processor 120 may detect an amount requiring rotation from the column direction of each text area. If the detected amount is greater than the preset value, the processor 120 may rotate the scan image in the page direction of the determined scan image. For example, the processor 120 may detect the sizes of the text areas where the column direction of the text area matches the document direction. When the size of the detected text areas exceeds half of the size of the content area included in the original, the processor 120 may perform correction to rotate the scanned image.
  • the processor 120 may determine the direction of a document by extracting only representative text for each paragraph. For example, the processor 120 may determine that the paragraph at the bottom is a paragraph in which the text is described in the horizontal direction based on only the text of "header”, and the processor 120 based on only the text of "Item 1". May determine that the paragraph at the top is a paragraph in which the text is described in the vertical direction.
  • the processor 120 may determine which direction occupies a majority based on the size of the region of each determined paragraph. In the example of FIG. 7A, the processor 120 may compare the size of the lower paragraph including “hearder” with the size of the upper paragraph including “Item 1”. Since the bottom paragraph including “header” is larger, the processor 120 may determine the page direction as a portrait type in which the text is written in the horizontal direction.
  • the processor 120 may determine a document direction by dividing a document into paragraph units and recognizing only a part of text for every paragraph.
  • the processor 120 may first recognize the text having the size.
  • FIG. 8 is a flowchart illustrating a method of correcting a scanned image of the image forming apparatus 100 according to an exemplary embodiment.
  • the image forming apparatus 100 may scan a document to generate a scanned image (S810). Scanning / copying a thick book when the document is placed at an angle in the process of creating a scanned image, or when the document is placed at an angle due to uneven speed when the Automatic Document Feeder feeds the document. In this case, distortion may occur in the scanned image due to various causes.
  • the image forming apparatus 100 may detect a skew angle of the generated scan image (S820). For example, the image forming apparatus 100 may detect the boundary of the original by using the shadow of the outside of the original, and detect the twist angle of the scanned image by using the detected boundary. As another example, the image forming apparatus 100 may detect a skew angle of the scanned image based on the content (or document content).
  • the image forming apparatus 100 may determine a reference point to rotate the scan image based on the position of the content (S830). The image forming apparatus 100 may correct the skew angle by rotating the scan image about the determined reference point (S840). Subsequently, the image forming apparatus 100 may print the corrected scan image. The image forming apparatus 100 may store, or transmit the corrected scan image to an external device without printing.
  • FIG. 9 is a flowchart illustrating a method of correcting a scanned image of the image forming apparatus 100 according to an exemplary embodiment.
  • the image forming apparatus 100 may scan a document to generate a scanned image (S910).
  • the image forming apparatus 100 may detect the boundary of the document (S920).
  • the image forming apparatus 100 may detect a skew angle of the scanned image based on the detected boundary (S940). Detecting the skew angle based on the document boundary may be performed faster than detecting the skew angle based on the content, so the image forming apparatus 100 may first attempt to detect the document boundary.
  • the image forming apparatus 100 may shift the angle of the scanned image based on the content in the scanned image. It may be detected (S950). For example, the image forming apparatus 100 may detect an inclination of content from an inclination of a character string included in a scanned image, an inclination of a line of a table, an inclination of an image edge, and the like. The image forming apparatus 100 may detect a skew angle of the scanned image from the inclination of the content.
  • the image forming apparatus 100 may determine a reference point to rotate the scanned image.
  • the image forming apparatus 100 may determine a reference point based on the position of the content (S960). When the reference point is determined based on the location of the content, the possibility of the content being cut off is reduced.
  • the image forming apparatus 100 may correct the skew angle by rotating the scan image about the determined reference point (S970).
  • the image forming apparatus 100 may print the corrected scan image (S980).
  • FIG. 10 is a flowchart for describing a document orientation correcting method of the image forming apparatus 100 according to an exemplary embodiment.
  • the image forming apparatus 100 may detect text in a scanned image (S1005).
  • the image forming apparatus 100 may compare whether the detected text size is included in a preset range (S1010).
  • the preset range may be a size range that is easily recognized by the image forming apparatus 100.
  • the image forming apparatus 100 may remove the detected text object and not use it for document orientation determination (S1015). On the contrary, if the size of the detected text is within a preset range, the image forming apparatus 100 may generate a character line by aligning the position of the text (S1020).
  • the image forming apparatus 100 may classify the image based on the size of the character line (S1025). For example, the image forming apparatus 100 may divide the size of the character line into a class A and a class B by comparing the size of the character line with a preset size. According to the classified class, the image forming apparatus 100 may assign a weight when calculating a direction for each paragraph in the future.
  • the image forming apparatus 100 may group the character lines to generate a text area (or paragraph) (S1030).
  • the image forming apparatus 100 may calculate a column direction for each text area (S1035).
  • the image forming apparatus 100 may perform column direction calculation using the direction of the text obtained as a result of the OCR or the slope of the connection angle between the word and the word.
  • the image forming apparatus 100 may determine the direction of the entire document based on the direction of each text area that is weighted according to the size of the character line (S1040). In addition, the image forming apparatus 100 may detect an amount requiring rotation from the determined column direction of the text area, and determine whether rotation of the scanned image is required by comparing the detected amount with a preset value (S1045). If it is determined that rotation is necessary (S1045-Y), the image forming apparatus 100 may perform correction to rotate the direction of the document (S1050).
  • FIG. 11 is a flowchart illustrating a method of correcting a boundary of the image forming apparatus 100 according to an exemplary embodiment.
  • a border area other than the book is output black according to the size and thickness of the book regardless of whether the cover is opened or closed.
  • a phenomenon in which content such as text existing in a central area where a book is folded, is distorted occurs. In order to correct such distortion, it is necessary to accurately recognize the boundary.
  • the image forming apparatus 100 may solve the problem by detecting or estimating the boundary position through profile analysis.
  • the image forming apparatus 100 outputs the vertical boundary first and then outputs the horizontal boundary.
  • the image forming apparatus 100 may output the horizontal boundary first, and the processes for the vertical boundary and the horizontal boundary may be performed in parallel. It is also possible to proceed.
  • the image forming apparatus 100 may detect an accurate boundary so that the outline of the final scanned result may not be damaged. For example, even when a book is placed on the edge of the glass plate of the scanning unit and the boundary of the original is cut off, the image forming apparatus 100 may estimate the boundary so that the contents are not cut off and other correction processes may not be malfunctioned. have.
  • the image forming apparatus 100 may calculate a vertical tilt of the scanned image (S1105).
  • Vertical inclination means the degree to which the vertical boundary of the scanned image is inclined.
  • the vertical inclination should be calculated so that the image forming apparatus 100 can perform profile analysis while accurately following the boundaries of the originals.
  • the subsequent process after the vertical edge map configuration and the process after the vertical edge profile may proceed in parallel.
  • the image forming apparatus 100 may construct a vertical edge map in the vertical direction (S1120).
  • An edge represents a boundary of an area in an image or an image and represents a discontinuous point of pixel brightness. That is, the brightness difference appears between the object and the background. It corresponds to the outline of the object and gives a lot of information such as the position, shape and size of the object.
  • the pixel corresponding to the edge is detected and the image or image represented by the detected edges is called an edge map.
  • the image forming apparatus 100 may select a vertical boundary candidate by analyzing the vertical edge histogram (S1125 & S1130).
  • the image forming apparatus 100 may divide the scanned image into a plurality of pieces in the horizontal direction. That is, the document may be separated into a form in which a plurality of pieces of long strings in the vertical direction are arranged in the horizontal direction.
  • the image forming apparatus 100 may perform a vertical edge histogram analysis for analyzing the shadows of the respective pieces. Since the vertical edge histogram analysis has a high probability of detecting a peak value at the boundary portion of the original, the image forming apparatus 100 may select a portion where the peak value is detected as the vertical boundary candidate.
  • the image forming apparatus 100 may detect a vertical edge profile (S1110).
  • the vertical edge profile refers to analyzing the change of the edge while proceeding in the vertical direction. For example, when the edge of the original is clearly scanned, the edge profile of the inner portion of the original becomes straight. On the contrary, in the case where the edge of the original is scanned so that the edge of the original cannot be clearly understood, the edge profile of the inside portion of the original is in the form of an irregular wave. For example, the edge profile takes the form of an irregular wave when the document border is not scanned and thus the content in the document is scanned as a border.
  • the image forming apparatus 100 may select a vertical boundary candidate through the vertical edge histogram analysis as the vertical boundary (S1130).
  • the linear edge profile means that the edges of the original have been clearly scanned, so that the image forming apparatus 100 may determine that the vertical boundary candidate selected in the vertical edge histogram analysis is the correct vertical boundary.
  • the image forming apparatus 100 may determine that the vertical boundary candidate through the vertical edge histogram analysis is not the actual vertical boundary.
  • the image forming apparatus 100 may estimate the vertical boundary (S1135). Since the vertical edge profile is not linear, it means that the content of the original is determined to be an edge.
  • the image forming apparatus 100 may estimate the vertical boundary at a point away from the vertical boundary candidate.
  • the image forming apparatus 100 may output the selected or estimated vertical boundary (S1140).
  • the image forming apparatus 100 may generate a scan image after adding a predetermined amount of margin from the output vertical boundary.
  • FIG. 12A is a result of scanning using a conventional method, and it can be seen that contents of an original are lost.
  • the image forming apparatus 100 may correct the distortion of the original that may occur when scanning the original. In addition, since the image forming apparatus 100 corrects the distortion based on the content of the original, it is possible to prevent image loss after the correction.
  • the image forming apparatus 100 may improve readability by matching the direction of the scanned document with the direction of the sentence in the document. In addition, the image forming apparatus 100 may detect or estimate an accurate boundary surface so that the outline of the final scanned result may not be damaged.
  • the above-described embodiments may be implemented in the form of a computer-readable recording medium storing instructions and data executable by a computer. At least one of the instructions and data may be stored in the form of program code, and when executed by a processor, a predetermined program module may be generated to perform a predetermined operation.
  • the computer-readable recording medium may mean, for example, a magnetic storage medium such as a hard disk, an optical read medium such as a CD or a DVD, or the like, and may mean a memory included in a server accessible through a network.
  • the computer-readable recording medium may be at least one of the memory 160 of the image forming apparatus 100 and the memory of the input / output unit 140 or the network with the image forming apparatus 100. It may also be a memory included in the external device connected through.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Control Or Security For Electrophotography (AREA)
  • Image Processing (AREA)

Abstract

화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체가 제공된다. 본 개시의 일 실시 예에 따른 화상 형성 장치는 원고를 스캔하여 스캔 이미지를 생성하는 스캔부 및 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 결정된 기준점을 중심으로 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서를 포함할 수 있다.

Description

화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체
본 개시는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체에 관한 것으로, 더욱 구체적으로는, 스캔시 발생할 수 있는 화질 열화를 개선할 수 있는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체에 관한 것이다.
화상 형성 장치나 스캐너 등이 대중적으로 보급됨에 따라, 원고를 스캔하거나 복사하는 경우, 사용자가 원하는 형태의 스캔 이미지로 보정하는 기술에 대한 필요성이 증가하고 있다.
종래에도 스캔 이미지의 틀어짐을 보정하는 여러 방법이 제시되었으나, 원고의 경계를 검출하기 어려운 경우에는 틀어짐 보정을 정확히 할 수 없다는 문제점이 존재하였다. 또한, 문서의 내용을 전부 분석하는 경우에는 복잡도가 과도하게 높아지는 문제점이 존재하였다. 그리고, 틀어짐 보정에 의해 원고의 내용이 잘려나가는 문제점 또한 존재하였다.
그리고, 언어별 특징이나 문단의 형태에 따라 문서의 방향이 다르게 판단될 수 있는 문제점이 존재한다. 또한, 책과 같은 두꺼운 원고를 스캔하는 경우에 스캔 이미지에서 경계를 추출하는 기술이 존재하지 않아, 책의 내용이 잘려나가는 문제점 역시 존재한다.
본 개시는 상술한 문제점을 해결하기 위한 것으로, 스캔 이미지의 틀어짐을 보정하고, 문서 방향을 조정하며, 원고의 외곽 경계면을 보정할 수 있는 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체를 제공함을 목적으로 한다.
상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 화상 형성 장치는, 원고를 스캔하여 스캔 이미지를 생성하는 스캔부 및 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서를 포함할 수 있다.
그리고, 상기 프로세서는, 상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하고, 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
또한, 상기 프로세서는, 상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
그리고, 상기 프로세서는, 상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출할 수 있다.
또한, 화면을 표시하고 사용자 입력을 수신하는 입출력부를 더 포함하고, 상기 프로세서는, 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 상기 입출력부를 제어하고, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
그리고, 상기 복수의 방법은, 상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함할 수 있다.
또한, 상기 스캔 이미지는 복수의 컨텐츠를 포함하고, 상기 프로세서는, 상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하고, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하며, 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정할 수 있다.
그리고, 상기 프로세서는, 상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하고, 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 페이지 방향을 판단할 수 있다.
또한, 상기 프로세서는, 기설정된 텍스트 크기를 갖는 텍스트 영역을 검출할 수 있다.
그리고, 상기 프로세서는, 상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 페이지 방향으로 회전시킬 수 있다.
한편, 상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 화상 형성 장치의 스캔 이미지 보정 방법은, 원고를 스캔하여 스캔 이미지를 생성하는 단계, 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계 및 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계를 포함할 수 있다.
그리고, 상기 틀어짐 각도를 검출하는 단계는, 상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하는 단계 및 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계를 포함할 수 있다.
또한, 상기 틀어짐 각도를 검출하는 단계는, 상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계를 더 포함할 수 있다.
그리고, 상기 틀어짐 각도를 검출하는 단계는, 상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출할 수 있다.
또한, 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하는 단계를 더 포함하고, 상기 틀어짐 각도를 검출하는 단계는, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
그리고, 상기 복수의 방법은, 상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함할 수 있다.
또한, 상기 스캔 이미지는 복수의 컨텐츠를 포함하고, 상기 기준점을 결정하는 단계는, 상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하는 단계, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하는 단계 및 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정하는 단계를 포함할 수 있다.
그리고, 상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하는 단계 및 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 페이지 방향을 판단하는 단계를 더 포함할 수 있다.
또한, 상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하는 단계 및 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 페이지 방향으로 회전시키는 단계를 더 포함할 수 있다.
한편, 상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 비일시적 컴퓨터 판독가능 기록매체는, 원고를 스캔하여 스캔 이미지를 생성하는 단계, 상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계 및 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계를 포함하는 화상 형성 장치의 스캔 이미지 보정 방법을 실행하기 위한 프로그램을 포함할 수 있다.
이상과 같은 본 개시의 다양한 실시 예에 따르면, 컨텐츠 내용의 손실 없이 스캔 이미지의 틀어짐 보정이 가능하고, 문서 방향에 대한 보정 및 원고의 외곽 경계에 대한 보정이 가능하다.
도 1은 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성을 설명하기 위한 개략적인 블럭도,
도 2는 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성을 상세히 설명하기 위한 블럭도,
도 3은 원고의 경계를 검출하여 틀어짐 각도를 검출할 수 있는 경우를 도시한 도면,
도 4는 원고의 경계를 검출할 수 없는 경우를 도시한 도면,
도 5a 내지 도 5c는 틀어짐 각도를 보정하기 위한 회전 기준점을 결정하는 것을 설명하기 위한 도면,
도 6은 복수의 컨텐츠가 존재하는 경우 회전 기준점을 결정하는 것을 설명하기 위한 도면,
도 7a 내지 도 7c는 스캔 이미지의 방향을 결정하는 것을 설명하기 위한 도면,
도 8 내지 도 11은 본 개시의 다양한 실시 예에 따른 스캔 이미지 보정 방법을 설명하기 위한 흐름도, 그리고,
도 12a 내지 도 12b는 원고의 경계선이 검출되지 않은 경우의 보정 방법을 설명하기 위한 도면이다.
이하에서는 본 개시의 바람직한 실시 예가 첨부된 도면을 참조하여 상세히 설명한다. 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 개시에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되지는 않는다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 항목들의 조합 또는 복수의 관련된 항목들 중의 어느 하나의 항목을 포함한다.
본 명세서에서 사용한 용어는 실시예를 설명하기 위해 사용된 것으로, 본 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 숫자, 동작, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 동작, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서 “화상 형성 작업(image forming job)”이란 화상의 형성 또는 화상 파일의 생성/저장/전송 등과 같이 화상과 관련된 다양한 작업들(e.g. 인쇄, 스캔 또는 팩스)을 의미할 수 있으며, “작업(job)”이란 화상 형성 작업을 의미할 뿐 아니라, 화상 형성 작업의 수행을 위해서 필요한 일련의 프로세스들을 모두 포함하는 의미일 수 있다.
또한, “화상 형성 장치”란 컴퓨터와 같은 단말장치에서 생성된 인쇄 데이터를 기록 용지에 인쇄하는 장치를 말한다. 이러한 화상 형성 장치의 예로는 복사기, 스캐너, 프린터, 팩스밀리 또는 이들의 기능을 하나의 장치를 통해 복합적으로 구현하는 복합기(multi-function printer, MFP )등을 들 수 있다.
또한, “하드 카피(hard copy)”란 종이 등과 같은 인쇄 매체에 화상을 출력하는 동작을 의미한다.
또한, “컨텐츠”란 사진, 이미지 또는 문서 파일 등과 같이 화상 형성 작업의 대상이 되는 모든 종류의 데이터를 의미할 수 있다.
또한, “인쇄 데이터”란 프린터에서 인쇄 가능한 포맷으로 변환된 데이터를 의미할 수 있다. 한편, 프린터가 다이렉트 프린팅을 지원한다면, 파일 그 자체가 인쇄 데이터가 될 수 있다.
또한, “스캔 파일”이란 스캐너에서 화상을 스캔하여 생성한 파일을 의미할 수 있다.
또한, “사용자”란 화상 형성 장치를 이용하여, 또는 화상 형성 장치와 유무선으로 연결된 디바이스를 이용하여 화상 형성 작업과 관련된 조작을 수행하는 사람을 의미할 수 있다. 또한, “관리자”란 화상 형성 장치의 모든 기능 및 시스템에 접근할 수 있는 권한을 갖는 사람을 의미할 수 있다. “관리자”와 “사용자”는 동일한 사람일 수도 있다.
도 1은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 구성을 설명하기 위한 개략적인 블럭도이다. 도 1을 참조하면 화상 형성 장치(100)는 스캔부(110) 및 프로세서(120)를 포함할 수 있다. 또한, 도시되지는 않았으나, 화상 형성 장치(100)는 각 구성들에 전원을 공급하기 위한 전원부를 더 포함할 수도 있다.
스캔부(110)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다. 스캔부(110)는 원고에 광을 조사하고, 반사되는 광을 수광하여 원고에 기록된 화상을 읽어들일 수 있다. 원고로부터 화상을 읽어들이는 이미지 센서로서, 예를 들어 CCD (Charge Coupled Device), CIS(contact type image sensor) 등이 채용될 수 있다. 스캔부(110)는 원고가 고정된 위치에 위치되고, 이미지 센서가 이동되면서 화상을 읽어들이는 플랫베드(flatbed) 구조, 이미지 센서가 고정된 위치에 위치되고 원고가 이송되는 원고이송(document feed) 구조, 그리고 이들의 복합 구조를 가질 수 있다.
프로세서(120)는 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출할 수 있다. 그리고, 스캔 이미지 내의 컨텐츠의 위치를 기초로, 프로세서(120)는 스캔 이미지를 스캔할 기준점을 결정할 수 있다. 결정된 기준점을 중심으로 스캔 이미지를 회전시킴으로써, 프로세서(120)는 틀어짐 각도를 보정할 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 생성된 스캔 이미지로부터 원고의 경계를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 원고의 경계를 기초로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
본 개시의 일 실시 예에 따르면, 원고의 손상 등으로 인하여 원고의 경계를 검출할 수 없는 경우에, 프로세서(120)는 스캔 이미지 내의 컨텐츠를 검출할 수 있다. 그리고, 검출된 컨텐츠의 기울기를 기초로, 프로세서(120)는 스캔 이미지의 틀어짐 각도를 검출할 수 있다. 예를 들어, 프로세서(120)는 스캔 이미지에 포함된 문자열의 기울기, 도표에 포함된 선의 기울기, 사진과 같은 영상의 에지 기울기로부터 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 검출된 틀어짐 각도를 보정하기 위하여 스캔 이미지를 회전시킬 수 있다. 스캔 이미지를 회전시킬 때, 프로세서(120)는 컨텐츠의 위치를 기초로 회전의 중심점이 되는 기준점을 결정할 수 있다. 만일 스캔 이미지 내에서 복수의 컨텐츠가 검출되면, 프로세서(120)는 검출된 복수의 컨텐츠 각각의 크기에 따라 가중치를 부여하여 기준점을 결정할 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 스캔 이미지의 방향과 컨텐츠의 페이지 방향이 일치되지 않는 경우, 컨텐츠의 페이지 방향으로 스캔 이미지를 회전시킬 수 있다. 이를 통해, 스캔 이미지의 가독성이 향상될 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 원고의 정확한 경계 면을 검출하여 최종 스캔/인쇄 결과물의 외곽이 훼손되지 않도록 할 수 있다.
한편, 이상에서는 화상 형성 장치(100)를 구성하는 간단한 구성에 대해서만 도시하고 설명하였지만, 구현시에는 다양한 구성이 추가로 구비될 수 있다. 이에 대해서는 도 2를 참조하여 이하에서 설명한다.
도 2는 본 개시의 일 실시 예에 따른 화상 형성 장치의 구성(100)을 상세히 설명하기 위한 블럭도이다. 도 2를 참조하면, 화상 형성 장치(100)는 스캔부(110), 프로세서(120), 화상 형성부(130), 입출력부(140), 통신부(150) 및 메모리(160)를 포함할 수 있다. 스캔부(110)에 대한 설명은 생략하기로 한다.
프로세서(120)는 화상 형성 장치(100)의 전체적인 동작을 제어하며, CPU, ASIC, SoC 등과 같은 프로세서, 메모리, 롬 등을 포함할 수 있다. 프로세서(120)는 입출력부(140)를 통해 수신한 사용자 입력에 대응되는 동작을 수행하도록 화상 형성 장치(100)에 포함된 다른 구성들을 제어할 수 있다.
프로세서(120)의 구체적인 동작에 대해서는 이하에서 도면을 참조하여 상세히 설명하기로 한다.
화상 형성부(130)는 보정된 스캔 이미지를 인쇄할 수 있다. 화상 형성부(130)는 전자 사진 방식, 잉크젯 방식, 열전사 방식 및 감열 방식 등 다양한 인쇄 방식에 의하여 기록매체에 화상을 형성할 수 있다.
예를 들어, 화상 형성부(130)는 노광, 현상, 전사 및 정착 과정을 포함하는 일련의 프로세스에 의하여 기록매체에 화상을 형성할 수 있다.
입출력부(140)는 사용자로부터 화상 형성 작업의 수행을 위한 입력 등을 수신하기 위한 입력부와, 화상 형성 작업의 수행 결과 또는 화상 형성 장치(100)의 상태 등의 정보를 표시하기 위한 디스플레이를 포함할 수 있다. 예를 들어, 입출력부(140)는 사용자 입력을 수신하는 조작 패널(operation panel) 및 화면을 표시하는 디스플레이 패널(display panel) 등을 포함할 수 있다.
구체적으로, 입력부는, 예를 들어, 키보드, 물리 버튼, 터치 스크린, 카메라 또는 마이크 등과 같이 다양한 형태의 사용자 입력을 수신할 수 있는 장치들을 포함할 수 있다. 다만, 이에 한정되지 않고 입출력부(140)는 다양한 입출력을 지원하는 장치를 포함할 수 있다.
예를 들어, 프로세서(120)는 사용자가 틀어짐 각도를 검출하는 방법을 설정할 수 있는 UI를 표시하도록 입출력부(140)를 제어할 수 있다. 그리고, UI를 통해 수신된 사용자 입력에 대응하여, 프로세서(120)는 선택된 방법으로 틀어짐 각도를 검출할 수 있다.
다른 예로, 프로세서(120)는 사용자가 스캔 이미지를 회전시킬 기준점을 설정할 수 있는 UI를 표시할 수도 있다.
통신부(150)는 다른 디바이스 또는 네트워크(예를 들어, 근거리 통신망(LAN:Local Area Network), 인터넷 망, PSTN(Public Switched Telephone Network) 망)와 유무선 통신을 수행할 수 있다. 이를 위해, 통신부(150)는 다양한 유무선 통신 방법 중 적어도 하나를 지원하는 통신 모듈을 포함할 수 있다. 예를 들어, 통신 모듈은 칩셋(chipset)의 형태일 수도 있고, 또는 통신에 필요한 정보를 포함하는 스티커/바코드(e.g. NFC tag를 포함하는 스티커)등일 수도 있다.
무선 통신은, 예를 들어, Wi-Fi(Wireless Fidelity), Wi-Fi Direct, 블루투스(Bluetooth), UWB(Ultra Wide Band) 또는 NFC(Near Field Communication) 중 적어도 하나를 포함할 수 있다. 유선 통신은, 예를 들어, 이더넷(ethernet), USB(Universal Serial Bus) 또는 HDMI(High Definition Multimedia Interface) 중 적어도 하나를 포함할 수 있다.
메모리(160)에는 어플리케이션과 같은 프로그램 및 스캔 파일 등과 같은 다양한 종류의 데이터가 설치 및 저장될 수 있다. 프로세서(120)는 메모리(160)에 저장된 데이터에 접근하여 이를 이용하거나, 또는 새로운 데이터를 메모리(160)에 저장할 수도 있다. 또한, 프로세서(120)는 메모리(160)에 설치된 프로그램을 실행할 수도 있다. 또한, 프로세서(120)는 통신부(150)를 통해 외부로부터 수신한 어플리케이션을, 메모리(160)에 설치할 수도 있다.
한편, 메모리(160)는 화상 형성 장치(100) 내의 저장 매체(예를 들어, HDD, SDD 등) 및 외부 저장 매체, 예를 들어, USB 메모리를 포함한 Removable Disk, 네트워크를 통한 웹 서버(Web server) 등으로 구현될 수 있다.
또한, 도 1 및 도 2에는 화상 형성 장치(100)의 일반적인 기능만을 도시하고 설명하였지만, 상술한 구성뿐만 아니라, 화상 형성 장치(100)가 지원하는 기능에 따라 팩스 송수신 기능을 수행하는 팩스 송수신부 등이 더 포함될 수도 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출할 수 있다. 프로세서(120)는 원고의 경계를 기초로 틀어짐 각도를 검출할 수도 있다. 만일 원고의 경계를 검출할 수 없다면, 프로세서(120)는 컨텐츠의 내용을 기초로 틀어짐 각도를 검출할 수도 있다.
도 3은 원고의 경계를 검출하여 틀어짐 각도를 검출할 수 있는 경우를 도시한 도면이다. 예를 들어, 프로세서(120)는 원고의 경계를 음영 값을 이용하여 검출할 수 있다. 도 3과 같이 원고의 경계로부터 틀어짐 각도를 검출한 경우, 프로세서(120)는 컨텐츠의 내용을 기초로 한 틀어짐 각도 검출 과정을 생략할 수 있다. 이를 통해 프로세서(120)는 빠르게 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
도 4에 도시된 바와 같이 원고 외곽이 훼손된 경우에는 원고의 경계가 검출되지 않을 수 있다. 이러한 경우, 프로세서(120)는 스캔 이미지 내의 컨텐츠를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 컨텐츠의 기울기를 바탕으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
예를 들어, 도 4에 도시된 스캔 이미지에 포함된 문자열의 기울기, 사진의 외곽선의 기울기, 표의 선의 기울기 등을 이용하여, 프로세서(120)는 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
프로세서(120)는 원고의 경계를 검출하여 틀어짐 각도를 검출하는 방법, 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 방법, 먼저 원고의 경계를 검출하도록 하고 원고의 경계가 검출되지 않으면 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 방법 등 다양한 방법으로 틀어짐 각도를 검출할 수 있다.
또한, 프로세서(120)는 사용자에게 틀어짐 각도를 검출하는 복수의 방법을 제공하고, 사용자가 제공된 복수의 방법 중 하나를 선택하도록 할 수 있다. 예를 들어, 프로세서(120)는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 입출력부(140)를 제어할 수 있다. 그리고, 프로세서(120)는 UI를 통해 선택된 방법으로 틀어짐 각도를 검출할 수 있다.
이어서, 프로세서(120)는 스캔 이미지 내의 컨텐츠의 위치를 기초로, 프로세서(120)는 스캔 이미지를 스캔할 기준점을 결정할 수 있다. 결정된 기준점을 중심으로 스캔 이미지를 회전시킴으로써, 프로세서(120)는 틀어짐 각도를 보정할 수 있다.
도 5a와 같이 컨텐츠가 스캔 이미지의 가운데 부분에 위치하는 경우에는 프로세서(120)가 스캔 이미지의 중앙 좌표를 기준점으로 스캔 이미지를 회전시키더라도 컨텐츠가 잘려나가는 문제점은 발생하지 않는다.
하지만, 도 5b와 같이 컨텐츠가 스캔 이미지의 외곽 부분에 위치하는 경우에, 프로세서(120)가 스캔 이미지의 중앙 좌표를 기준점으로 스캔 이미지를 회전시키면 일부 컨텐츠가 잘려나가는 문제점이 발생한다.
이러한 문제점을 방지하기 위하여, 프로세서(120)는 스캔 이미지 내에서 컨텐츠가 위치하는 좌표를 계산할 수 있다. 그리고, 프로세서(120)는 컨텐츠의 중앙 좌표를 기준점으로 결정하고, 결정된 기준점을 중심으로 스캔 이미지를 회전시킬 수 있다.
도 5c를 참조하면, 프로세서(120)는 스캔 이미지의 중앙 좌표(510)이 아닌 컨텐츠의 중앙 좌표(520)를 기준점으로 결정할 수 있다. 그리고, 프로세서(120)는 결정된 기준점을 중심으로 스캔 이미지를 검출된 틀어짐 각도만큼 회전시킬 수 있다. 프로세서(120)는 틀어짐 각도가 보정된 스캔 이미지를 화상 형성부(130)로 전달하여 출력하거나, 메모리(160)에 저장할 수 있다.
도 6에 도시된 바와 같이 스캔 이미지 내에서 복수의 컨텐츠(601, 602, 603)가 검출되는 경우, 프로세서(120)는 컨텐츠의 크기를 고려하여 기준점을 결정할 수 있다. 예를 들어, 프로세서(120)는 컨텐츠의 크기에 따라 가중치를 부여하여 크기가 큰 컨텐츠에 가까운 위치로 기준점을 결정할 수 있다.
도 6의 경우, 프로세서(120)는 복수의 컨텐츠(601, 602, 603)를 검출하고, 복수의 컨텐츠 각각의 중앙 좌표(610, 620, 630)를 계산할 수 있다. 그리고, 프로세서(120)는 계산된 좌표들의 단순 평균 값이 아니라 컨텐츠의 크기를 고려하여 기준점(640)을 결정할 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 문서의 방향과 스캔 이미지의 방향이 일치되도록 스캔 이미지의 방향을 보정할 수 있다. 문서의 방향 또는 페이지 방향(page orientation)이란 사각형의 페이지가 가독성 측면에서 적합하게 배치된 방향을 말한다. 세로 방향(높이 방향)의 길이가 가로 방향(너비 방향)의 길이보다 큰 경우의 페이지 방향은 포트레이트(portrait) 타입이라고 불리며, 가로 방향의 길이가 세로 방향의 길이보다 큰 경우의 페이지 방향은 랜드스케이프(landscape) 타입이라고 불린다. 포트레이트 타입의 페이지 방향이 적합한 예로는 세로 방향으로 길게 컨텐츠를 배치하는 책을 들 수 있다. 랜드스케이프 타입의 페이지 방향이 적합한 예로는 가로방향으로 길게 컨텐츠를 배치하는 타임라인 그래프를 들 수 있다.
프로세서(120)는 스캔 이미지 내의 컨텐츠의 방향을 검출하여, 문서 방향 또는 페이지 방향을 결정할 수 있다. 그리고, 결정된 페이지 방향이 현재 스캔 이미지의 페이지 방향과 상이한 경우, 프로세서(120)는 결정된 페이지 방향과 일치되도록 스캔 이미지를 직각 회전(90도, 180도, 270도)시킬 수 있다.
본 개시의 일 실시 예에 따르면, 프로세서(120)는 스캔 이미지 내의 복수의 텍스트 영역을 검출할 수 있다. 그리고, 프로세서(120)는 복수의 텍스트 영역 각각의 열 방향을 기초로 원고의 페이지 방향을 판단할 수 있다. 텍스트의 열 방향과 원고의 페이지 방향은 서로 다르다는 점에 주의하여야 한다. 예를 들어, 텍스트가 가로 방향으로 길게 쓰여진 가로 방향인 경우, 그 텍스트를 포함하는 원고는 세로 방향의 페이지 방향을 갖는다.
예를 들어, 스캔 이미지가 세로 방향(포트레이트 타입)으로 생성된 경우를 가정하여 설명하기로 한다. 검출된 텍스트 영역의 방향이 가로 방향인 경우(즉, 텍스트가 가로 방향으로 쓰여진 경우), 프로세서(120)는 페이지 방향을 포트레이트 타입의 세로 방향으로 결정할 수 있다. 따라서, 프로세서(120)는 스캔 이미지의 방향과 원고의 페이지 방향이 일치하는 것으로 판단하여 스캔 이미지를 회전시키지 않을 수 있다.
반대로, 검출된 텍스트 영역의 방향이 세로 방향인 경우(즉, 텍스트가 세로 방향으로 쓰여진 경우), 프로세서(120)는 페이지 방향을 랜드스케이프 타입의 가로 방향으로 결정할 수 있다. 스캔 이미지의 방향과 원고의 페이지 방향이 상이한 것으로 판단되기 때문에, 프로세서(120)는 스캔 이미지를 직각 회전시켜 랜드스케이프 타입으로 변경할 수 있다.
이를 통해, 프로세서(120)는 문서 방향과 스캔 이미지의 방향이 상이한 경우, 스캔 이미지를 회전시켜 가독성을 향상시킬 수 있다.
프로세서(120)는 각각의 텍스트의 방향을 검출하여 텍스트 열(또는 문자 라인)의 방향을 검출할 수 있다. 예를 들어, 프로세서(120)는 OCR(Optical Character Recognition)을 통해 각각의 텍스트의 방향을 검출할 수 있다. 구체적으로, 프로세서(120)는 4방향으로 모두 OCR을 진행하고, 문자로 인식되는 확률이 가장 높은 방향을 텍스트의 방향으로 검출할 수 있다. 다른 예로, 프로세서(120)는 텍스트 사이의 연결 각도를 구하고, 연결 각도의 기울기에 따라 텍스트 영역의 방향을 검출할 수 있다.
다양한 언어에 대해 인식을 시도해야 하기 때문에, 프로세서(120)는 인식률이 높은 대상을 위주로 방향을 검출할 수 있다. 예를 들어, 프로세서(120)는 기설정된 크기 범위의 텍스트 영역에 대해서만 방향 검출을 시도할 수 있다. 다른 예로, 프로세서(120)는 기설정된 텍스트 크기를 갖는 텍스트에 대해서만 방향 검출을 시도할 수 있다.
그리고, 프로세서(120)는 각각의 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출할 수 있다. 검출된 양이 기설정된 값보다 크면, 프로세서(120)는 스캔 이미지를 판단된 스캔 이미지의 페이지 방향으로 회전시킬 수 있다. 예를 들어, 프로세서(120)는 텍스트 영역의 열 방향이 문서 방향과 일치하는 텍스트 영역들의 크기를 검출할 수 있다. 그리고, 프로세서(120)는 검출된 텍스트 영역들의 크기가 원고에 포함된 컨텐츠 영역의 크기의 절반을 초과하면, 스캔 이미지를 회전하는 보정을 수행할 수 있다.
도 7a를 참조하면, 프로세서(120)는 문단별로 대표 텍스트만을 추출하여 문서의 방향을 판단할 수 있다. 예를 들어, "header"라는 텍스트만을 기초로 프로세서(120)는 하단의 문단이 텍스트가 가로 방향으로 기재되어 있는 문단임을 판단할 수 있다 그리고, "Item 1"이라는 텍스트만을 기초로 프로세서(120)는 상단의 문단이 텍스트가 세로 방향으로 기재되어 있는 문단임을 판단할 수 있다.
그리고, 프로세서(120)는 각각의 판단된 문단의 영역의 크기를 기초로, 어느 방향이 다수(majority)를 차지하는 방향인지를 결정할 수 있다. 도 7a의 예에서, 프로세서(120)는 “hearder”를 포함하는 하단 문단의 크기와 “Item 1”을 포함하는 상단 문단의 크기를 비교할 수 있다. “header”를 포함하는 하단 문단의 크기가 더 크기 때문에, 프로세서(120)는 페이지 방향을 텍스트가 가로 방향으로 기재된 포트레이트 타입으로 판단할 수 있다.
도 7b를 참조하면, 프로세서(120)는 문서를 문단 단위로 나누고 모든 문단 별로 일부의 텍스트만을 인식하여 전체의 문서 방향을 판단할 수 있다.
도 7c를 참조하면, 문단 내에서 인식하기 쉬운 크기의 텍스트가 포함되어 있으면, 프로세서(120)는 해당 크기의 텍스트에 대한 인식을 우선 진행할 수 있다.
도 8은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 스캔 이미지 보정 방법을 설명하기 위한 흐름도이다.
도 8을 참조하면, 화상 형성 장치(100)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다(S810). 스캔 이미지를 생성하는 과정에서 사용자가 원고를 삐뚤게 배치한 경우, 자동 문서 공급 장치(Automatic Document Feeder)가 문서를 공급할 때 비정속 등에 의해 원고가 삐뚤게 배치된 경우, 두꺼운 책을 스캔/복사하는 경우 등다양한 원인에 의해, 스캔 이미지에 틀어짐이 발생할 수 있다.
화상 형성 장치(100)는 생성된 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S820). 예를 들어, 화상 형성 장치(100)는 원고 외곽의 음영을 이용하여 원고의 경계를 검출하고, 검출된 경계를 이용하여 스캔 이미지의 틀어짐 각도를 검출할 수 있다. 다른 예로, 화상 형성 장치(100)는 컨텐츠(또는 문서 내용)을 기초로 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
화상 형성 장치(100)는 컨텐츠의 위치를 기초로 스캔 이미지를 회전시킬 기준점을 결정할 수 있다(S830). 그리고, 화상 형성 장치(100)는 결정된 기준점을 중심으로 스캔 이미지를 회전하여 틀어짐 각도를 보정할 수 있다(S840). 이어서, 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄할 수 있다. 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄하지 않고, 저장하거나, 외부 장치로 전송할 수도 있다.
도 9는 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 스캔 이미지 보정 방법을 보다 상세히 설명하기 위한 흐름도이다.
도 9를 참조하면, 화상 형성 장치(100)는 원고를 스캔하여 스캔 이미지를 생성할 수 있다(S910). 그리고, 화상 형성 장치(100)는 원고의 경계를 검출할 수 있다(S920). 원고 외곽의 음영을 이용하여 원고의 경계가 검출된 경우(S930-Y), 화상 형성 장치(100)는 검출된 경계를 기반으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S940). 원고 경계를 기반으로 틀어짐 각도를 검출하는 것은 컨텐츠를 기반으로 틀어짐 각도를 검출하는 것보다 빠르게 수행될 수 있는바, 화상 형성 장치(100)는 우선적으로 원고 경계에 대한 검출을 시도할 수 있다.
만일 원고 외곽이 훼손된 경우, 스캔 덮개를 열고 원고를 스캔한 경우 등과 같이 원고의 경계 검출에 실패하면(S930-N), 화상 형성 장치(100)는 스캔 이미지 내의 컨텐츠를 기반으로 스캔 이미지의 틀어짐 각도를 검출할 수 있다(S950). 예를 들어, 화상 형성 장치(100)는 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 등으로부터 컨텐츠의 기울기를 검출할 수 있다. 그리고, 화상 형성 장치(100)는 컨텐츠의 기울기로부터 스캔 이미지의 틀어짐 각도를 검출할 수 있다.
틀어짐 각도를 검출한 후, 화상 형성 장치(100)는 스캔 이미지를 회전시킬 기준점을 결정할 수 있다. 단순히 스캔 이미지의 중앙 좌표를 기준으로 스캔 이미지를 회전시킬 경우, 일부 컨텐츠가 잘려나갈 우려가 있다. 따라서, 화상 형성 장치(100)는 컨텐츠의 위치를 기초로 기준점을 결정할 수 있다(S960). 컨텐츠의 위치를 기초로 기준점이 결정되는 경우에는 컨텐츠가 잘려나갈 가능성이 줄어들게 된다.
이어서, 화상 형성 장치(100)는 결정된 기준점을 중심으로 스캔 이미지를 회전하여 틀어짐 각도를 보정할 수 있다(S970). 그리고, 화상 형성 장치(100)는 보정된 스캔 이미지를 인쇄할 수 있다(S980).
도 10은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 문서 방향 보정 방법을 설명하기 위한 흐름도이다.
도 10을 참조하면, 화상 형성 장치(100)는 스캔 이미지 내에서 텍스트를 검출할 수 있다(S1005). 그리고, 화상 형성 장치(100)는 검출된 텍스트 크기가 기설정된 범위에 포함되는지를 비교할 수 있다(S1010). 예를 들어, 기설정된 범위는 화상 형성 장치(100)가 인식하기 용이한 크기 범위를 설정한 것일 수 있다.
만일 검출된 텍스트의 크기가 기설정된 범위 밖이면, 화상 형성 장치(100)는 검출된 텍스트 객체를 제거하여 문서 방향 판단에 이용하지 않을 수 있다(S1015). 반대로, 검출된 텍스트의 크기가 기설정된 범위 이내이면, 화상 형성 장치(100)는 텍스트의 위치를 정렬하여 문자 라인을 생성할 수 있다(S1020).
그리고, 화상 형성 장치(100)는 문자 라인의 크기를 기준으로 분류할 수 있다(S1025). 예를 들어, 화상 형성 장치(100)는 문자 라인의 크기를 기설정된 크기와 비교하여 클래스 A 및 클래스 B로 구분할 수 있다. 분류된 클래스에 따라 화상 형성 장치(100)는 향후 문단별 방향을 계산할 때 가중치를 부여할 수 있다.
이어서, 화상 형성 장치(100)는 문자 라인을 그룹화하여 텍스트 영역(또는 문단)을 생성할 수 있다(S1030). 그리고, 화상 형성 장치(100)는 텍스트 영역 별로 열 방향을 계산할 수 있다(S1035). 예를 들어, 화상 형성 장치(100)는 OCR 수행 결과 취득된 텍스트의 방향 또는 단어와 단어 사이의 연결 각도의 기울기를 이용하여 열 방향 계산을 수행할 수 있다.
화상 형성 장치(100)는 문자 라인의 크기에 따른 가중치가 부여된 각 텍스트 영역의 방향을 기초로 문서 전체의 방향을 판단할 수 있다(S1040). 그리고, 화상 형성 장치(100)는 각각 판단된 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 검출된 양을 기설정된 값과 비교하여 스캔 이미지의 회전이 필요한지 판단할 수 있다(S1045). 만일 회전이 필요한 것으로 판단되면(S1045-Y), 화상 형성 장치(100)는 문서의 방향을 회전시키는 보정을 수행할 수 있다(S1050).
도 11은 본 개시의 일 실시 예에 따른 화상 형성 장치(100)의 경계 보정 방법을 설명하기 위한 흐름도이다. 책과 같이 두꺼운 원고를 화상 형성 장치(100)의 유리 평판에 두고 스캔 또는 복사하는 경우, 덮개의 개폐 여부와 무관하게 책의 크기와 두께에 따라 책 이외의 테두리 영역이 검게 출력된다. 또한, 책이 접히는 중앙 영역에 존재하는 텍스트 등의 컨텐츠가 왜곡되는 현상이 발생한다. 이와 같은 왜곡 현상을 보정하기 위해서는 경계를 정확히 인식할 필요성이 있다. 본 개시의 일 실시 예에 따른 화상 형성 장치(100)는 프로파일 분석을 통해 경계 위치를 검출 또는 추정하여, 이러한 문제점을 해결할 수 있다.
도 11의 실시 예에서는 화상 형성 장치(100)가 수직 경계를 먼저 출력한 후 수평 경계를 출력하는 것으로 도시되었으나, 수평 경계를 먼저 출력해도 무방하고, 수직 경계 및 수평 경계에 대한 과정을 병렬적으로 진행하는 것도 가능하다.
도 11의 실시 예를 이용하여, 화상 형성 장치(100)는 책 복사와 같이 경계 파악이 어려운 경우도, 정확한 경계면을 검출하여 최종 스캔된 결과물의 외곽이 훼손되지 않도록 할 수 있다. 예를 들어, 책이 스캔부의 유리 평판의 가장자리에 놓여져 원고의 경계가 잘려나간 경우에도, 화상 형성 장치(100)는 경계를 추정하여 컨텐츠가 잘려나가지 않도록 하고, 다른 보정 과정이 오작동되지 않도록 할 수 있다.
도 11을 참조하면, 화상 형성 장치(100)는 스캔 이미지의 수직 경사도를 계산할 수 있다(S1105). 수직 경사도는 스캔 이미지의 수직 경계가 기울어진 정도를 의미한다. 원고가 비뚤어져 배치되어 스캔된 경우에 수직 경사도를 계산하여야 화상 형성 장치(100)는 정확히 원고의 경계를 따라가며 프로파일 분석 등을 진행할 수 있다.
이어지는 수직 에지 맵 구성 이후의 과정과 수직 에지 프로파일 이후의 과정은 병렬적으로 진행될 수 있다.
계산된 수직 경사도를 바탕으로, 화상 형성 장치(100)는 세로 방향의 수직 에지 맵을 구성할 수 있다(S1120). 에지(edge)란 화상 또는 영상 안의 영역의 경계를 나타내며 픽셀 밝기의 불연속점을 나타낸다. 즉 물체와 배경과의 경계를 사이에 두고 밝기 차가 나타난다. 이것은 물체의 윤곽에 대응되고 물체의 위치, 모양, 크기 등의 많은 정보를 준다. 에지에 해당하는 픽셀을 검출하고 이렇게 검출된 에지 들로 표현된 화상 또는 영상을 에지 맵(edge map)이라고 한다.
세로 방향의 수직 에지 맵을 이용하여, 화상 형성 장치(100)는 수직 에지 히스토그램을 분석하여 수직 경계 후보를 선정할 수 있다(S1125 & S1130). 구체적으로, 화상 형성 장치(100)는 스캔 이미지를 수평 방향으로 복수의 조각으로 나뉠 수 있다. 즉, 문서는 수직 방향으로 긴 끈 모양의 조각들이 수평 방향으로 복수 개 배치된 형태로 분리될 수 있다. 화상 형성 장치(100)는 각각의 조각들의 음영을 분석하는 수직 에지 히스토그램 분석을 진행할 수 있다. 수직 에지 히스토그램 분석을 진행하면 원고의 경계 부분에서 피크 값이 검출될 확률이 높기 때문에, 화상 형성 장치(100)는 피크 값이 검출된 부분을 수직 경계 후보로 선정할 수 있다.
그리고, 화상 형성 장치(100)는 수직 에지 프로파일을 검출할 수 있다(S1110). 구체적으로, 수직 에지 프로파일은 수직 방향으로 진행하며 에지의 변화를 분석하는 것을 말한다. 예를 들어, 원고의 에지가 명확히 스캔된 경우에, 원고 내부 부분의 에지 프로파일은 직선 형태를 띄게 된다. 반대로, 원고의 에지를 명확히 알 수 없도록 스캔된 경우에, 원고 내부 부분의 에지 프로파일은 불규칙한 파동의 형태를 띄게 된다. 예를 들어, 원고 경계가 스캔되지 않아 원고 내의 컨텐츠를 경계인 것처럼 스캔된 경우에 에지 프로파일은 불규칙한 파동의 형태를 갖는다.
수직 에지 프로파일이 선형적인 경우(S1115-Y), 화상 형성 장치(100)는 수직 에지 히스토그램 분석을 통한 수직 경계 후보를 수직 경계로 선정할 수 있다(S1130). 수직 에지 프로파일이 선형적이라는 것은 원고의 에지가 명확히 스캔되었다는 것을 의미하는바, 화상 형성 장치(100)는 수직 에지 히스토그램 분석에서 선정한 수직 경계 후보가 정확한 수직 경계라고 결정할 수 있다.
만일 수직 에지 프로파일이 선형적이 아니라면(S1115-N), 화상 형성 장치(100)는 수직 에지 히스토그램 분석을 통한 수직 경계 후보가 실제 수직 경계가 아닌 것으로 확정할 수 있다. 그리고, 화상 형성 장치(100)는 수직 경계를 추정할 수 있다(S1135). 수직 에지 프로파일이 선형적이 아니라는 것은 원고의 내용이 에지로 판단되었다는 것을 의미하는바, 화상 형성 장치(100)는 수직 경계 후보로부터 일정 거리가 떨어진 지점을 수직 경계를 추정할 수 있다.
화상 형성 장치(100)는 선정 또는 추정된 수직 경계를 출력할 수 있다(S1140). 그리고, 화상 형성 장치(100)는 출력된 수직 경계로부터 기설정된 양의 여백을 추가한 후 스캔 이미지를 생성할 수 있다.
수평 경계를 출력하는 S1145 내지 S1180의 과정은 수직 경계를 출력하는 S1105 내지 S1140의 과정과 대응되는 것인바, 중복 설명은 생략하기로 한다.
도 12a는 종래의 방법을 이용하여 스캔한 결과물로, 원고의 내용이 손실되는 것을 확인할 수 있다. 이에 반해, 본 개시의 일 실시 예에 따르면, 도 12b와 같이 원고의 경계선을 추정함으로써 원고의 내용이 손실되지 않음을 확인할 수 있다.
상술한 바와 같은 다양한 실시 예에 따르면, 화상 형성 장치(100)는 원고를 스캔할 때 발생할 수 있는 원고의 틀어짐을 보정할 수 있다. 또한, 화상 형성 장치(100)는 원고의 내용을 기반으로 틀어짐을 보정하기 때문에 보정 후에 이미지 손실을 방지할 수 있다.
그리고, 화상 형성 장치(100)는 스캔 문서의 방향과 문서 내 문장의 방향이 일치되도록 함으로써 가독성을 향상시킬 수 있다. 또한, 화상 형성 장치(100)는 정확한 경계 면을 검출 또는 추정함으로써 최종 스캔된 결과물의 외곽이 훼손되지 않도록 할 수 있다.
한편, 상술된 실시 예들은 컴퓨터에 의하여 실행 가능한 명령어 및 데이터를 저장하는 컴퓨터로 읽을 수 있는 기록매체의 형태로 구현될 수 있다. 상기 명령어 및 데이터 중 적어도 하나는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 소정의 프로그램 모듈을 생성하여 소정의 동작을 수행할 수 있다.
컴퓨터로 읽을 수 있는 기록매체란, 예를 들어 하드디스크 등과 같은 마그네틱 저장매체, CD 및 DVD 등과 같은 광학적 판독매체 등을 의미할 수 있으며, 네트워크를 통해 접근 가능한 서버에 포함되는 메모리를 의미할 수도 있다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 화상 형성 장치(100)의 메모리(160) 및 입출력부(140)의 메모리 중 적어도 하나가 될 수도 있으며, 또는, 화상 형성 장치(100)와 네트워크를 통하여 연결된 외부 장치에 포함되는 메모리가 될 수도 있다.
이상과 같이 본 개시는 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 개시는 상기의 실시 예에 한정되는 것은 아니며, 본 개시가 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 개시의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

Claims (15)

  1. 원고를 스캔하여 스캔 이미지를 생성하는 스캔부; 및
    상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하고, 상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하며, 상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 프로세서;를 포함하는 화상 형성 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하고, 상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
  4. 제3항에 있어서,
    상기 프로세서는,
    상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출하는 화상 형성 장치.
  5. 제1항에 있어서,
    화면을 표시하고 사용자 입력을 수신하는 입출력부;를 더 포함하고,
    상기 프로세서는,
    상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하도록 상기 입출력부를 제어하고, 상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 화상 형성 장치.
  6. 제5항에 있어서,
    상기 복수의 방법은,
    상기 원고의 경계를 검출하여 틀어짐 각도를 검출하는 제1 방법, 상기 스캔 이미지 내의 컨텐츠를 검출하여 틀어짐 각도를 검출하는 제2 방법, 상기 제1 방법을 먼저 수행하여 틀어짐 각도가 검출되지 않으면 상기 제2 방법을 수행하는 제3 방법을 포함하는 화상 형성 장치.
  7. 제1항에 있어서
    상기 스캔 이미지는 복수의 컨텐츠를 포함하고,
    상기 프로세서는,
    상기 복수의 컨텐츠 각각의 크기 및 위치를 판단하고, 상기 복수의 컨텐츠 각각의 크기에 따라 상기 복수의 컨텐츠 각각의 위치에 가중치를 부여하며, 상기 가중치가 부여된 상기 복수의 컨텐츠 각각의 위치를 기초로 상기 기준점을 결정하는 화상 형성 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 스캔 이미지 내의 복수의 텍스트 영역을 검출하고, 상기 복수의 텍스트 영역 각각의 열 방향을 기초로 상기 스캔 이미지의 페이지 방향을 판단하는 화상 형성 장치.
  9. 제8항에 있어서,
    상기 프로세서는,
    기설정된 텍스트 크기를 갖는 텍스트 영역을 검출하는 화상 형성 장치.
  10. 제8항에 있어서,
    상기 프로세서는,
    상기 판단된 상기 텍스트 영역의 열 방향으로부터 회전이 필요한 양을 검출하고, 상기 검출된 양이 상기 기설정된 값보다 크면, 상기 스캔 이미지를 상기 판단된 상기 스캔 이미지의 페이지 방향으로 회전시키는 화상 형성 장치.
  11. 화상 형성 장치의 스캔 이미지 보정 방법에 있어서,
    원고를 스캔하여 스캔 이미지를 생성하는 단계;
    상기 생성된 스캔 이미지의 틀어짐(skew) 각도를 검출하는 단계;
    상기 스캔 이미지 내의 컨텐츠의 위치를 기초로 기준점을 결정하는 단계; 및
    상기 결정된 기준점을 중심으로 상기 스캔 이미지를 회전시켜 틀어짐 각도를 보정하는 단계;를 포함하는 보정 방법.
  12. 제11항에 있어서,
    상기 틀어짐 각도를 검출하는 단계는,
    상기 생성된 스캔 이미지로부터 상기 원고의 경계를 검출하는 단계; 및
    상기 검출된 경계를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계;를 포함하는 보정 방법.
  13. 제12항에 있어서,
    상기 틀어짐 각도를 검출하는 단계는,
    상기 원고의 경계가 검출되지 않으면, 상기 스캔 이미지 내의 컨텐츠를 검출하고, 상기 검출된 컨텐츠의 기울기를 기초로 상기 스캔 이미지의 틀어짐 각도를 검출하는 단계;를 더 포함하는 보정 방법.
  14. 제13항에 있어서,
    상기 틀어짐 각도를 검출하는 단계는,
    상기 스캔 이미지에 포함된 문자열의 기울기, 도표의 선의 기울기, 영상 에지의 기울기 중 적어도 하나를 이용하여 상기 컨텐츠의 기울기를 검출하는 보정 방법.
  15. 제11항에 있어서,
    상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 복수의 방법 중 하나를 선택할 수 있는 UI를 표시하는 단계;를 더 포함하고,
    상기 틀어짐 각도를 검출하는 단계는,
    상기 복수의 방법 중 하나를 선택하는 사용자 입력에 대응하여 상기 선택된 방법으로 상기 생성된 스캔 이미지의 틀어짐 각도를 검출하는 보정 방법.
PCT/KR2017/006288 2016-08-17 2017-06-16 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체 WO2018034414A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201780064011.8A CN109845237B (zh) 2016-08-17 2017-06-16 图像形成设备、图像形成设备的扫描图像校正方法以及非暂时性计算机可读记录介质
EP17841598.0A EP3487159B1 (en) 2016-08-17 2017-06-16 Image forming apparatus, scanned image correction method thereof, and non-transitory computer-readable recording medium
US16/325,948 US11295415B2 (en) 2016-08-17 2017-06-16 Image forming apparatus, scanned image correction method thereof, and non-transitory computer-readable recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160104342A KR20180019976A (ko) 2016-08-17 2016-08-17 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체
KR10-2016-0104342 2016-08-17

Publications (1)

Publication Number Publication Date
WO2018034414A1 true WO2018034414A1 (ko) 2018-02-22

Family

ID=61196847

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2017/006288 WO2018034414A1 (ko) 2016-08-17 2017-06-16 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체

Country Status (5)

Country Link
US (1) US11295415B2 (ko)
EP (1) EP3487159B1 (ko)
KR (1) KR20180019976A (ko)
CN (1) CN109845237B (ko)
WO (1) WO2018034414A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11017258B2 (en) * 2018-06-05 2021-05-25 Microsoft Technology Licensing, Llc Alignment of user input on a screen
JP7196644B2 (ja) * 2019-01-30 2022-12-27 株式会社リコー 傾き検出装置、読取装置、画像処理装置および傾き検出方法
US11308167B2 (en) * 2019-06-11 2022-04-19 Verizon Patent And Licensing Inc. Dynamically rendering very large multi-format documents
KR102284781B1 (ko) * 2020-05-19 2021-08-02 (주)가온아이 문서의 스캔 이미지에 대한 보정이 가능한 전자 장치 및 그 동작 방법
WO2022013753A1 (en) * 2020-07-15 2022-01-20 Corephotonics Ltd. Point of view aberrations correction in a scanning folded camera
CN112383670B (zh) * 2020-11-10 2022-09-16 武汉天有科技有限公司 一种试卷扫描自动扶正方法及装置
CN112101317B (zh) * 2020-11-17 2021-02-19 深圳壹账通智能科技有限公司 页面方向识别方法、装置、设备及计算机可读存储介质
WO2022173521A1 (en) * 2021-02-11 2022-08-18 Hewlett-Packard Development Company, L.P. Image objects extraction

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003259109A (ja) * 2002-02-27 2003-09-12 Ricoh Co Ltd 画像補正装置、プログラム、記憶媒体及び画像補正方法
JP2010021937A (ja) * 2008-07-14 2010-01-28 Sharp Corp 画像処理装置、画像読取装置、画像形成装置、画像処理方法、プログラムおよびその記録媒体
JP2010062924A (ja) * 2008-09-04 2010-03-18 Fuji Xerox Co Ltd 画像読取装置及びプログラム
KR20110121959A (ko) * 2010-05-03 2011-11-09 주식회사 코아비즈 휴대용 스캐너
US20150281519A1 (en) * 2014-03-31 2015-10-01 Brother Kogyo Kabushiki Kaisha Image processing apparatus configured to execute correction on scanned image

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11308437A (ja) * 1998-04-17 1999-11-05 Canon Inc 傾斜画像補正装置、傾斜画像補正方法、及び記憶媒体
JP4574235B2 (ja) * 2004-06-04 2010-11-04 キヤノン株式会社 画像処理装置、及びその制御方法、プログラム
US8270044B2 (en) * 2006-10-26 2012-09-18 Samsung Electronics Co., Ltd. Scanning apparatus having image correction function
JP4804433B2 (ja) * 2007-08-21 2011-11-02 キヤノン株式会社 画像処理装置、画像処理方法、及び、画像処理プログラム
JP4557184B2 (ja) * 2008-04-23 2010-10-06 村田機械株式会社 画像処理装置、画像読取装置及び画像処理プログラム
US8290302B2 (en) * 2009-01-30 2012-10-16 Xerox Corporation Method and system for skew detection of a scanned document using connected components analysis
US9160885B2 (en) * 2009-07-02 2015-10-13 Hewlett-Packard Development Company, L.P. Skew detection
US8571313B2 (en) * 2010-03-22 2013-10-29 Sharp Laboratories Of America, Inc. Methods and systems for estimation of document skew in an image
KR20120019020A (ko) * 2010-08-24 2012-03-06 삼성전자주식회사 화상을 독취하는 방법 및 이를 수행하는 화상독취시스템
US9110926B1 (en) * 2012-11-07 2015-08-18 Amazon Technologies, Inc. Skew detection for vertical text
JP6335663B2 (ja) * 2013-09-06 2018-05-30 キヤノン株式会社 画像処理装置およびその方法、並びに、画像読取装置
JP6575273B2 (ja) * 2015-09-30 2019-09-18 ブラザー工業株式会社 画像処理装置、および、コンピュータプログラム
JP6200040B1 (ja) * 2016-06-17 2017-09-20 株式会社Pfu 画像処理装置、画像処理方法、および、プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003259109A (ja) * 2002-02-27 2003-09-12 Ricoh Co Ltd 画像補正装置、プログラム、記憶媒体及び画像補正方法
JP2010021937A (ja) * 2008-07-14 2010-01-28 Sharp Corp 画像処理装置、画像読取装置、画像形成装置、画像処理方法、プログラムおよびその記録媒体
JP2010062924A (ja) * 2008-09-04 2010-03-18 Fuji Xerox Co Ltd 画像読取装置及びプログラム
KR20110121959A (ko) * 2010-05-03 2011-11-09 주식회사 코아비즈 휴대용 스캐너
US20150281519A1 (en) * 2014-03-31 2015-10-01 Brother Kogyo Kabushiki Kaisha Image processing apparatus configured to execute correction on scanned image

Also Published As

Publication number Publication date
CN109845237A (zh) 2019-06-04
EP3487159A1 (en) 2019-05-22
KR20180019976A (ko) 2018-02-27
US20190180415A1 (en) 2019-06-13
US11295415B2 (en) 2022-04-05
EP3487159A4 (en) 2020-03-18
CN109845237B (zh) 2020-10-09
EP3487159B1 (en) 2023-08-16

Similar Documents

Publication Publication Date Title
WO2018034414A1 (ko) 화상 형성 장치, 그의 스캔 이미지 보정 방법 및 비일시적 컴퓨터 판독가능 기록매체
JP5280425B2 (ja) 画像処理装置、画像読取装置、画像形成装置、画像処理方法、プログラムおよびその記録媒体
US11386046B2 (en) Apparatus for setting file name for scan image, method of controlling same, and storage medium
US8755066B2 (en) Image processing apparatus, image processing method, recording medium recorded with image processing program, and image processing system
US9485368B2 (en) Electronic document generation apparatus, recording medium, and electronic document generation system
US8363963B2 (en) Apparatus, method and computer readable medium that associates a plurality of possible word recognition results with an image
WO2019198882A1 (en) Image scanning apparatus for protecting personal information and method for scanning image thereof
WO2019013422A1 (en) PRINTING BY TRACTION THROUGH ADDITIONAL SECURITY PROCESSES
US8953225B2 (en) Image reading device
WO2020022574A1 (en) Character recognition using previous recognition result of similar character
US10291805B1 (en) Image processing apparatus
JP2020184207A (ja) 画像処理装置、画像処理方法、及びプログラム
WO2019022363A1 (en) OPERATING AN IMAGE FORMING APPARATUS BASED ON CHARACTERISTICS
US11521403B2 (en) Image processing device for a read image of an original
US11849086B2 (en) Image processing apparatus capable of extracting portion of document image specified by preset index and subjecting character string in extracted portion to processing associated with index
JP2011010232A (ja) 画像処理装置、画像読取装置、複合機、画像処理方法、プログラムおよび記録媒体
WO2019146859A1 (en) Image scanning apparatus to detect shadow of document
JP6708118B2 (ja) 画像処理装置
JP6876917B2 (ja) 原稿サイズ検出装置、原稿サイズ検出プログラム及び画像処理システム
WO2018211804A1 (ja) 画像処理装置及び画像処理方法
JP6072628B2 (ja) 画像形成装置及び画像形成方法
JP2023136551A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP6002618B2 (ja) 画像処理装置、画像形成装置、及び画像処理プログラム
JP2007306356A (ja) 画像処理装置
JP2015009454A (ja) 画像形成装置及び画像形成方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17841598

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017841598

Country of ref document: EP

Effective date: 20190215