WO2022014847A1 - Display device having defect test function and test method thereof - Google Patents

Display device having defect test function and test method thereof Download PDF

Info

Publication number
WO2022014847A1
WO2022014847A1 PCT/KR2021/006343 KR2021006343W WO2022014847A1 WO 2022014847 A1 WO2022014847 A1 WO 2022014847A1 KR 2021006343 W KR2021006343 W KR 2021006343W WO 2022014847 A1 WO2022014847 A1 WO 2022014847A1
Authority
WO
WIPO (PCT)
Prior art keywords
touch
image
software
display device
test
Prior art date
Application number
PCT/KR2021/006343
Other languages
French (fr)
Korean (ko)
Inventor
이건영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of WO2022014847A1 publication Critical patent/WO2022014847A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/22Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26Functional testing
    • G06F11/261Functional testing by simulating additional hardware, e.g. fault simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/22Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26Functional testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/22Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/26Functional testing
    • G06F11/263Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3055Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3696Methods or tools to render software testable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04103Manufacturing, i.e. details related to manufacturing processes specially suited for touch sensitive devices

Definitions

  • the present invention relates to a display device having a failure test function and a test method therefor.
  • the present invention has been devised in response to the above needs, and an object of the present invention is to provide a display device having a function of more efficiently testing a defect and a test method therefor.
  • a display device for achieving the above object includes a display including a display panel and a touch sensor, a memory storing software and test images operating according to a touch signal provided from the touch sensor, and a processor, wherein when the mode for testing the software defect is executed, a virtual touch signal corresponding to the test image is provided to the software to generate an image corresponding to the virtual touch signal, By comparing the generated image and the test image, it is possible to determine whether the software is defective.
  • the virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display panel.
  • the test image is displayed on the display panel, and when a user touch operation is performed according to the test image, the touch sensor is detected for the user touch operation A defect of the touch sensor may be tested based on the result and the test image.
  • the processor displays a touch trace image on the display panel according to a detection result of the touch sensor for the user's touch manipulation, compares the touch trace image and the test image, and according to a matching rate between images, the touch You can test the sensor for defects.
  • the test image is an image including a plurality of grids each having data values based on a preset pattern
  • the processor is configured to include coordinates of each grid included in the test image and a data value of each grid
  • the virtual touch signal defining a touch time and touch type is generated and provided to the software, and when an image corresponding to the virtual touch signal is generated by the software, the generated image and the test image correspond to each other
  • a ratio of lattices having matching data values is calculated, and based on the ratio, it is possible to determine whether the software is defective.
  • the processor may display software update information on the display when the software is identified as defective.
  • the processor when the software is identified as defective, may transmit information about the software defect to the external server through the communication unit.
  • the processor includes images transmitted to the plurality of external display devices, images received from the plurality of external display devices, and the test pre-stored in the memory By comparing images, communication performance with the plurality of external display devices may be tested according to a matching rate between the images.
  • the processor may continuously monitor the image-to-image matching rate, and if the image-to-image matching rate is less than a threshold ratio, an error message may be displayed on the display.
  • the processor is configured to: When at least one of a condition for booting the display device, a condition for terminating playback of the content being reproduced on the display device, a condition for playing the next content, and a condition for repeatedly playing the content, is satisfied can test the communication performance with an external display device.
  • the software when the mode for testing the software failure is executed, generating a virtual touch signal corresponding to the test image stored in the display device, the software It may include generating an image according to a virtual touch signal, and determining whether the software is defective by comparing the generated image with the test image.
  • the virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display device.
  • the test image is displayed, and when a user touch operation is performed according to the test image, the detection result of the touch sensor for the user touch operation and the test
  • the method may further include testing a defect of the touch sensor based on the image.
  • the step of testing the failure of the touch sensor includes displaying a touch trace image according to a detection result of the touch sensor for the user touch manipulation, comparing the touch trace image with the test image, and matching rate between images
  • the method may further include testing for a defect of the touch sensor.
  • the test image is an image including a plurality of grids each having data values based on a preset pattern
  • the step of determining whether the software is defective may include comparing the generated image and the test image to corresponding grids.
  • the method may include comparing units, calculating a ratio of grids having matching data values, and determining whether the software is defective based on the ratio.
  • the method may further include displaying software update information.
  • the method may further include transmitting information about the software defect to an external server.
  • the method may further include continuously monitoring the image-to-image matching rate and displaying an error message when the image-to-image matching rate is less than a threshold ratio.
  • the testing of the communication performance with the plurality of external display devices includes: a condition in which the display device is booted, a condition in which reproduction of the content being reproduced in the display device is terminated, a condition in which the next content is reproduced, and repeated reproduction are performed. It may be performed whenever at least one of the conditions to be performed is satisfied.
  • FIG. 1 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present disclosure.
  • FIG. 2 is a diagram for explaining an example of a test image.
  • 3 is a diagram for explaining a process of generating a virtual touch signal.
  • FIG. 4 is a diagram for explaining a process of comparing an image generated by a virtual touch signal with a test image.
  • FIG. 5 is a diagram for explaining an example of a method for testing a touch sensor for failure.
  • FIG. 6 is a diagram for explaining an example of a processing method according to a test result.
  • FIG. 7 is a view for explaining another example of a processing method according to a test result.
  • FIG. 8 is a diagram for explaining a method of testing data transmission/reception performance between a plurality of display devices
  • FIG. 9 is a view for explaining an example of a processing method according to the test result of FIG. 8 .
  • FIG. 10 is a flowchart illustrating a test method according to an embodiment of the present invention.
  • a component eg, a first component
  • another component eg, a second component
  • an element may be directly connected to another element or may be connected through another element (eg, a third element).
  • a “module” or “unit” performs at least one function or operation, and may be implemented as hardware or software, or a combination of hardware and software.
  • a plurality of “modules” or a plurality of “units” may be integrated into at least one module and implemented by at least one processor, except for “modules” or “units” that need to be implemented with specific hardware.
  • the display device 100 refers to an electronic device having a display. Specifically, the display device 100 includes a TV, a monitor, a laptop PC, a mobile phone, a PDA, a kiosk, and a video wall, as well as various types of home appliances such as a refrigerator, a washing machine, and an air conditioner provided with the display 130 . It can also be implemented as a product.
  • a display apparatus 100 includes a processor 110 , a memory 120 , and a display 130 .
  • the processor 110 is a component provided to perform an overall operation or some functions of the display apparatus 100 .
  • the processor 110 includes a digital signal processor (DSP), a microprocessor, a central processing unit (CPU), a micro controller unit (MCU), a micro processing unit (MPU), a controller ( controller), an application processor (application processor (AP)), etc., may be named variously, but in the present specification, it is referred to as the processor 110.
  • the processor 110 is a system on chip (SoC), large scale integration (LSI), etc. It may be implemented in the form of a field programmable gate array (FPGA) or implemented in the form of a field programmable gate array (FPGA).
  • SoC system on chip
  • LSI large scale integration
  • FPGA field programmable gate array
  • FPGA field programmable gate array
  • the memory 120 is a component in which various software or data necessary for the operation of the display device are stored. Although only one is illustrated, the memory 120 may be implemented as a combination of at least one or more of various memories such as a non-volatile memory such as UVEPROM or EEPROM, or a volatile memory.
  • the memory 120 may store a test image used to test software failure and touch sensor failure.
  • software for displaying the user's touch sensed by the touch sensor may be stored in the memory 120 .
  • Information stored in the memory 120 may be stored during manufacturing of the display device, may be downloaded later, or may be updated from time to time from an external source.
  • the display 130 is a component for displaying images, various information, menus, and the like.
  • the display 130 includes a display panel 131 for displaying various information or menus, and a touch sensor 132 for sensing a touch on the display panel 131 .
  • the touch sensor 132 may be manufactured separately from the display panel 131 and disposed on the upper or lower portion of the display panel 131 , or may be implemented in a form embedded in the display panel 131 . Because it includes a touch sensor 132 , the display 130 may alternatively be referred to as a touch screen.
  • the user can control the home appliances provided with the display device according to the UI displayed on the display 130 .
  • a user may manipulate functions of the refrigerator by directly touching while viewing various information or menus displayed on the display 130 .
  • the touch sensor 132 provides a signal corresponding to the location touched by the user, the size of the touch area, etc. to the processor 110 , and the processor 110 performs an operation corresponding to the signal.
  • the first is a case in which the touch sensor 132 provided in the display 130 is defective.
  • the touch sensor 132 When the touch sensor 132 is defective, the user's touch point may be incorrectly recognized. Accordingly, even when the processor 110 operates normally, a touch effect different from that intended by the user occurs. For example, an error may occur, such as an attempt to lower the temperature of the refrigerator compartment, but an increase in the temperature of the refrigerator compartment due to a defective touch sensor. In this case, the touch sensor 132 or the display 130 may need to be replaced.
  • the touch sensor since the touch sensor operates normally, the coordinates of the touch point on the display according to the user's input are accurately transmitted to the processor 110 .
  • the processor 110 may not perform a special operation or may perform an operation different from the user's intention. It is not easy to distinguish such a defect in a method that a user directly touches and tests as in the present. That is, even if the user recognizes that a touch event occurs at a point having a coordinate different from the coordinates input by the user, it is not possible to determine whether the touch sensor is defective or the software is defective.
  • the processor 110 may test the display apparatus 100 for defects in various aspects. Specifically, a defect in software, a defect in a touch sensor, a defect in a data transmission/reception process with an external display device, etc. may be tested. Each test can be implemented in a different mode so that the user can selectively perform it. Alternatively, only one mode may be applied to each product. Hereinafter, a case in which the user performs the test under various modes will be described in detail.
  • the processor 110 When the mode for testing software failure is executed, the processor 110 provides a virtual touch signal corresponding to the test image stored in the memory 120 to the software.
  • the virtual touch signal means a signal generated by the processor 110 itself, not a signal that is actually detected and output by the touch sensor.
  • the processor 110 may generate, as a virtual touch signal, a signal defining a touch position, a touch time, and a touch type required to display a test image on the display panel. For example, if the user touches the point a of the display panel 131 and performs a touch manipulation by dragging the point to the point b within t time, the normal touch sensor 132 detects this and outputs a touch signal.
  • the processor 110 provides the touch signal to the software stored in the memory 120 as an input, and displays an image drawn from the point a to the point b within t time on the display panel 131 .
  • the touch signal input at this time may be a virtual touch signal.
  • test image and the virtual touch signal will be described in detail with reference to FIGS. 2 and 3 .
  • the software generates an image corresponding thereto based on the virtual touch signal provided from the processor 110 .
  • the processor 110 compares the image generated by the software with the test image to determine whether the software is defective. Specifically, the processor 110 compares the generated image and the test image for each corresponding part to check whether they match, and then determines whether the software is defective if they do not match by a certain percentage or more.
  • the processor 110 may determine that the touch sensor is not defective but software is defective. have.
  • a mode for testing the failure of the touch sensor may be executed.
  • the processor 110 displays the test image on the display 130 .
  • the user may perform a touch operation according to the test image. That is, when the test image is displayed in the form of a line, the user may touch one end of the line and then drag along the line.
  • the processor 110 may identify a failure of the touch sensor by comparing the detection result of the touch sensor for the user's touch manipulation with the test image.
  • the processor 110 determines whether the coordinates of the point where the user's touch manipulation is performed coincide with the coordinates of the point where the test image is displayed. As a result of the determination, if the matching rate is equal to or greater than a certain ratio, the processor 110 determines that the touch sensor 132 is normal, and if it is less than the predetermined ratio, it is determined that the touch sensor 132 is defective.
  • the display apparatus 100 may provide a UI related to a poor touch test. That is, the processor 110 may display the touch trace image on the display according to the detection result of the touch sensor for the user's touch manipulation in the mode for testing the failure of the touch sensor. In this case, if the touch sensor 132 is defective, the touch trace image may be displayed at a point different from the coordinates input by the touch, or the touch trace image may not be displayed at all. The user can immediately check whether his or her touch operation is properly detected with the naked eye.
  • the mode for determining whether the touch sensor is defective and the mode for determining whether the software is defective may be individually performed according to embodiments, but may be applied together regardless of the order.
  • test image may be provided in various forms according to embodiments.
  • test image 200 is a view for explaining a test image according to an embodiment of the present disclosure.
  • some grids 210 having data values among them constitute the test image 200 .
  • the test image 200 is an image of a pattern connected in two diagonal directions with upper, lower, left, and right edges with respect to the display screen.
  • the test image 200 of FIG. 2 is only an example of an image that can be used when inspecting whether a touch is defective during shipment, and thus is not limited thereto, and may be provided in various forms.
  • the test pattern may have a bmp format in that it is an image of a simple pattern divided in a grid form.
  • it may be an image file such as jpeg or png.
  • One grid on the test image 200 may be implemented to have horizontal and vertical lengths greater than the user's finger diameter, but is not limited thereto.
  • test image is a grid-shaped image
  • the display device is recognized as a defect due to a difference between minute touch points even though the display device is operating normally.
  • it has the advantage of reducing the burden of data processing so that the processor can perform a failure test more quickly.
  • the processor 110 generates a virtual touch signal defining the coordinates of each grid included in the test image, a touch time corresponding to a data value of each grid, and a touch type, and provides the virtual touch signal to the software, and provides the virtual touch signal corresponding to the virtual touch signal.
  • the image is generated by software, the generated image and the test image are compared in grid units corresponding to each other, the ratio of grids having matching data values is calculated, and based on the ratio, it is possible to determine whether the software is defective. have.
  • the display apparatus 100 may transmit information about software defects to an external server through the communication unit. This will be described in detail with reference to FIG. 6 .
  • the display device is not limited to using only one set.
  • a single display wall may be configured by bonding several display devices. In this case, since an error may occur in a data transmission/reception process between display devices, a mode for testing this may be prepared. This will be described in detail with reference to FIG. 8 .
  • FIG. 3 is a diagram for explaining generation of a virtual touch signal according to an embodiment of the present disclosure.
  • the operating system of the display device is composed of a kernel that controls hardware, a library, an application executive environment (AEE), a UI framework, and the like.
  • the kernel is a program for controlling specific hardware or devices.
  • the kernel may include a Board Support Package (BSP).
  • BSP Board Support Package
  • BSP is a set of software that allows you to use the Board. It consists of a bootloader for loading an operating system, an OEM adaptation layer (OAL) that performs hardware management functions, and a device driver, a program that operates as a part of the kernel to control specific hardware.
  • OEM adaptation layer OEM adaptation layer
  • An error may also occur in the process in which the kernel receives and processes the sensed data from the touch sensor 132 .
  • the kernel receives and processes the sensed data from the touch sensor 132 .
  • FIG. 3 since a process of generating a touch event by receiving a virtual touch signal will be described in FIG. 3 , the above problem is not discussed.
  • the processor 110 may generate a virtual touch signal corresponding to the test image stored in the memory 120 .
  • the virtual touch signal is a signal generated to generate the same effect as if the user did not actually input a touch through the touch screen, but as if there is a touch by the user.
  • a script language such as Shell Script may be used, and for example, matrix-type data such as [touch x-coordinate, touch y-coordinate, data value] is included in the virtual touch signal. can do it
  • a virtual touch signal is generated in order to exclude a case where there is a problem in the detection of the touch sensor, and through this, a software defect is tested on the premise that there is a touch corresponding to the test image. be able to do
  • the virtual touch signal may define a touch position, a touch time, and a touch type for displaying a test image. In the process of testing software defects, only information on the touch position may be included.
  • the kernel to which the virtual touch signal is input generates an image corresponding to the virtual touch signal by driving a function.
  • a virtual touch signal corresponding to the coordinates of each grid included in the test image 200 is generated, and an image corresponding thereto is generated by software.
  • the generated image and the test image may be different due to a software defect, which will be described in detail in the description of FIG. 4 .
  • FIG. 4 is a view for explaining a process of comparing an image generated according to a virtual touch signal and a test image according to an embodiment of the present disclosure.
  • the processor 110 compares the generated image with the test image 420 .
  • the image 410 corresponding to the virtual touch signal matches the test image with respect to the upper grids, but is different from the test image 420 in the arrangement of the vertical grids.
  • the function itself may contain code that does not match the grid characteristics of the test image.
  • the test image has a lattice structure of 6 by 6, and codes may be configured based on the lattice structure corresponding to 5 by 6 in the function.
  • the first left column may not have data values, and an error may occur in which data in the first left column is moved to the second left column.
  • Errors that may occur in the software are not limited to the above cases. Even if a function composed of code that matches the grid characteristics of the test image is driven, various errors occur when the function is running, so an image different from the test image may be created, and errors may also occur in the UI Framework, not the kernel.
  • the processor 110 compares the image corresponding to the virtual touch signal and the test image 420 in grid units corresponding to each other, and calculates a ratio of grids having matching data values in the number of all grids for each image.
  • the processor 110 may use a library such as Open CV in calculating the corresponding ratio.
  • Open CV is a library that focuses on real-time image processing, and is cross-platform that can be used on operating systems such as Windows and Linux.
  • the processor may determine whether the software is defective. When the calculated ratio is not 100%, it can be generally determined that there is a defect in the software.
  • FIG. 5 is a diagram for explaining a touch sensor failure test according to an embodiment of the present disclosure.
  • the user can run a mode for testing the touch sensor for failure.
  • the processor 110 displays the test image stored in the memory 120 on the display panel 131 .
  • the user performs a touch manipulation 510 according to the displayed test image.
  • touch events are displayed on the grid on the display panel 131 based on the touch coordinates sensed by the touch sensor 132 , but it is not necessarily displayed as such, and data detected by the touch sensor and It can also be implemented by comparing test images.
  • the user performed a touch manipulation 510 to drag a row at the bottom of the test image, but it is confirmed that one grid 511 of the data sensed by the touch sensor does not match the user's touch manipulation can
  • the processor may determine that the touch sensor is defective.
  • the inconsistency grid 511 can be identified using a library such as Open CV as in the software failure test.
  • the touch trace may be displayed on the display panel so that the user can intuitively feel that a touch defect is occurring.
  • 6 is a diagram for explaining provision of software update information according to another embodiment of the present disclosure.
  • the display apparatus 100 may further include a communication unit 140 in addition to the processor 110 , the memory 120 , and the display 130 .
  • Communication unit 140 is WIFI, Zigbee (zigbee), 3G (3rd Generation), 3GPP (3rd Generation Partnership Project), LTE (Long Term Evolution), LTE-A (LTE Advanced), 4G (4th Generation), 5G (5th) Generation) and the like, communication can be performed using various wireless communication methods or various wired communication methods.
  • the processor 110 when it is determined that the software is defective, the processor 110 provides the software update related information screen 600 through the display 130 .
  • the user may perform a software update 611 by checking the software update notification window 610 .
  • the processor 110 accesses the server 10 through the communication unit 140 to download and update new software.
  • the server 10 may be a server operated by a software developer or a manufacturer of the display device 100 , but is not limited thereto, and may be various application stores.
  • the display device may further include a voice recognition sensor, and the processor 110 may determine whether to update from the user's utterance sensed through the voice recognition sensor and perform the update.
  • the update button 612 is disabled and a notification is displayed to the user can do.
  • the processor 110 automatically sends the defect information to the server 10 through the communication unit 140 without a separate user operation. You can also send it.
  • FIG. 7 is a diagram for explaining provision of feedback regarding a failure of a touch sensor according to an embodiment of the present disclosure.
  • the processor may display a warning message 710 informing the user of the failure of the touch sensor. If the touch sensor is defective, the software update is useless, so a notification is provided so that you can visit a service center to replace the display panel.
  • FIG. 8 is a diagram for explaining a method of testing data transmission/reception performance between a plurality of display devices
  • a plurality of display devices 100 - 1 to 100 - n may be combined to configure one display wall 800 .
  • 8 shows a combined system in a 4*4 form, the number and arrangement of the devices may be variously modified.
  • Each display device may have different configurations, but in FIG. 8 , it is assumed that all display devices have the same configuration.
  • one display device 100 constituting the display wall 800 includes a processor 110 , a memory 120 , a display 130 , and an interface 150 .
  • the interface 150 is configured to communicate with other peripheral devices, that is, a plurality of external display devices.
  • the interface 150 may be implemented as a wired or wireless interface.
  • each display device When a plurality of display devices reproduce one content, each display device displays an image portion corresponding to one area of the content. Content, other information, control signals, and the like are exchanged between display devices through an interface. In this case, image distortion may occur in a process of receiving or transmitting an image from an adjacent display device.
  • a mode for testing communication performance between display devices may be separately performed. This mode may be automatically performed according to a user selection or when a preset condition is satisfied.
  • the processor 110 compares the image transmitted to the plurality of external display apparatuses 100 - 3 and the image received from the plurality of external display apparatuses 100 - 1 with the test image pre-stored in the memory 120 .
  • the processor may determine that communication performance between displays is degraded.
  • the processor 110 continuously monitors an image matching rate calculated by comparing an image transmitted to a plurality of external display devices and an image received from a plurality of external display devices with a test image pre-stored in the memory, and the image matching ratio is a critical value. If it is less than the ratio, an error message can be shown on the display.
  • the preset condition may be a condition for booting the display device, a condition for terminating the reproduction of content that has been reproduced on the display device, a condition for reproducing the next content, a condition for repeatedly performing replay, and the like.
  • FIG. 9 is a diagram for explaining provision of feedback for a decrease in communication performance between various displays according to another embodiment of the present disclosure.
  • the processor may continuously monitor the image-to-image matching rate described with reference to FIG. 8 , and if the image-to-image matching rate is lower than the threshold ratio, an error message 910 may be displayed on the display.
  • the corresponding error message 910 may be displayed on all display devices, but the error message may be displayed only on a specific display device or the master device that is easy to see from the user's field of view. A user who sees this message will contact a service center and request a repair.
  • FIG. 10 is a flowchart illustrating a software failure test mode according to another embodiment of the present disclosure.
  • a virtual touch signal corresponding to the test image stored in the display device is generated (S1020).
  • Software stored in the display device generates an image according to a virtual touch signal (S1030).
  • the display device compares the generated image with the pre-stored test image to determine whether the software is defective (S1040).
  • the virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display a test image on the display device.
  • the mode for testing the failure of the touch sensor When the mode for testing the failure of the touch sensor is executed, a test image is displayed, and when a user touch operation is performed according to the test image, based on the detection result of the touch sensor for the user touch operation and the test image, the The method may further include testing for defects.
  • the step of testing the defect of the touch sensor includes displaying a touch trace image according to the detection result of the touch sensor for user touch manipulation, comparing the touch trace image and the test image, and determining the defect of the touch sensor according to the matching rate between images It may further include the step of testing.
  • the test image is an image including a plurality of grids each having data values based on a preset pattern, and the step of determining whether the software is defective includes comparing the generated image and the test image in grid units corresponding to each other; It may include calculating a ratio of grids having matching data values, and determining whether software is defective based on the ratio.
  • the method may further include displaying software update information or transmitting information about the software defect to an external server.
  • Comparing the image transmitted to the plurality of external display devices and the image received from the plurality of external display devices with the test image pre-stored in the memory, further comprising the step of testing communication performance with the plurality of external display devices according to the matching rate between the images may include
  • the method may further include the step of continuously monitoring the image-to-image matching rate and displaying an error message when the image-to-image matching rate falls below a threshold ratio.
  • the testing of communication performance with the plurality of external display devices may include at least one of a condition in which the display device is booted, a condition in which reproduction of content being played on the display device is terminated, a condition in which the next content is reproduced, and a condition in which repeated reproduction is performed. This can be done whenever one is satisfied.
  • test method may be implemented in the display device having the configuration of FIGS. 1 and 8 , but is not limited thereto, and may be implemented by a display device having a different configuration.
  • test methods described above may be stored and distributed in a recording medium in the form of a program code for performing the method.
  • the recording medium is mounted on the display device or downloaded online through a network and executed, the test operation in various modes as described above may be performed.
  • the recording medium may be various types of computer-readable media such as ROM, RAM, memory chip, memory card, external hard drive, hard drive, CD, DVD, magnetic disk, or magnetic tape.

Abstract

A display device having a defect test function is disclosed. The display device comprises: a display including a display panel and a touch sensor; a memory in which a test image and software operating according to a touch signal provided from the touch sensor are stored; and a processor, wherein the processor provides, when a mode for testing a software defect is executed, a virtual touch signal corresponding to the test image to the software to generate an image corresponding to the virtual touch signal, and compares the generated image and the test image to determine whether a software defect occurs.

Description

불량 테스트 기능을 갖는 디스플레이 장치 및 이의 테스트 방법 Display device having defect test function and test method therefor
본 발명은 불량 테스트 기능을 갖는 디스플레이 장치 및 이의 테스트 방법에 관한 것이다.The present invention relates to a display device having a failure test function and a test method therefor.
최근 디스플레이를 가진 냉장고, 터치가 가능한 전자칠판, 스마트폰 등의 사용이 점점 늘어나고 있다. 이러한 디스플레이 장치를 제조 후 출하과정에서 사람이 일일이 불량 여부를 확인하는 과정을 거치게 된다. 하지만, 작업의 정확도와 효율 부족으로 인해 불량을 놓치는 경우가 발생하고 있다. 또한, 문제가 발생했을 때, 디스플레이의 터치 센서(하드웨어)가 불량인지, 아니면 소프트웨어의 불량인지 구분하기 어려워 디스플레이 패널 전체를 교체해야만 하는 문제점이 있었다. 이에 따라, 디스플레이 장치의 불량을 좀 더 효율적으로 테스트할 수 있는 방법의 필요성이 대두되었다.Recently, refrigerators with displays, touch-enabled electronic boards, and smartphones are increasingly used. After manufacturing such a display device, in a shipping process, a person goes through a process of individually checking whether the display device is defective. However, there are cases where defects are missed due to lack of accuracy and efficiency of work. Also, when a problem occurs, it is difficult to distinguish whether the touch sensor (hardware) of the display is defective or the software is defective, so that the entire display panel must be replaced. Accordingly, there is a need for a method capable of more efficiently testing a defect of a display device.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은 좀 더 효율적으로 불량을 테스트할 수 있는 기능을 갖는 디스플레이 장치 및 그 테스트 방법을 제공함에 있다.SUMMARY OF THE INVENTION The present invention has been devised in response to the above needs, and an object of the present invention is to provide a display device having a function of more efficiently testing a defect and a test method therefor.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 디스플레이 장치는 디스플레이 패널 및 터치 센서를 포함하는 디스플레이, 상기 터치 센서로부터 제공되는 터치 신호에 따라 동작하는 소프트웨어 및 테스트 이미지가 저장된 메모리, 및 프로세서를 포함하며, 상기 프로세서는, 상기 소프트웨어의 불량을 테스트하기 위한 모드가 실행되면 상기 테스트 이미지에 대응되는 가상의 터치 신호를 상기 소프트웨어에 제공하여 상기 가상의 터치 신호에 대응되는 이미지를 생성하고, 상기 생성된 이미지 및 상기 테스트 이미지를 비교하여 상기 소프트웨어의 불량 여부를 판단할 수 있다.A display device according to an embodiment of the present invention for achieving the above object includes a display including a display panel and a touch sensor, a memory storing software and test images operating according to a touch signal provided from the touch sensor, and a processor, wherein when the mode for testing the software defect is executed, a virtual touch signal corresponding to the test image is provided to the software to generate an image corresponding to the virtual touch signal, By comparing the generated image and the test image, it is possible to determine whether the software is defective.
여기서, 상기 가상의 터치 신호는, 상기 테스트 이미지를 상기 디스플레이 패널에 표시하기 위하여 입력되는 터치 위치, 터치 시간 및 터치 타입을 정의하기 위하여 생성된 신호일 수 있다.Here, the virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display panel.
또한, 상기 터치 센서의 불량을 테스트하기 위한 모드가 실행되면, 상기 테스트 이미지를 상기 디스플레이 패널에 표시하고, 상기 테스트 이미지에 따라 사용자 터치 조작이 이루어지면, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과와 상기 테스트 이미지에 기초하여, 상기 터치 센서의 불량을 테스트할 수 있다.In addition, when a mode for testing the failure of the touch sensor is executed, the test image is displayed on the display panel, and when a user touch operation is performed according to the test image, the touch sensor is detected for the user touch operation A defect of the touch sensor may be tested based on the result and the test image.
여기서, 상기 프로세서는, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 상기 디스플레이 패널에 표시하고, 상기 터치 궤적 이미지 및 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라 상기 터치 센서의 불량을 테스트할 수 있다.Here, the processor displays a touch trace image on the display panel according to a detection result of the touch sensor for the user's touch manipulation, compares the touch trace image and the test image, and according to a matching rate between images, the touch You can test the sensor for defects.
여기서, 상기 테스트 이미지는, 기 설정된 패턴에 기초한 데이터 값들을 각각 가지는 복수의 격자들을 포함하는 이미지이며, 상기 프로세서는, 상기 테스트 이미지에 포함된 각 격자들의 좌표, 상기 각 격자들의 데이터 값에 대응되는 터치 시간 및 터치 타입을 정의하는 상기 가상의 터치 신호를 생성하여 상기 소프트웨어에 제공하며, 상기 가상의 터치 신호에 대응되는 이미지가 상기 소프트웨어에 의해 생성되면, 상기 생성된 이미지 및 상기 테스트 이미지를 서로 대응되는 격자 단위로 비교하여, 일치되는 데이터 값을 가지는 격자들의 비율을 산출하며, 상기 비율에 기초하여 상기 소프트웨어의 불량 여부를 판단할 수 있다.Here, the test image is an image including a plurality of grids each having data values based on a preset pattern, and the processor is configured to include coordinates of each grid included in the test image and a data value of each grid The virtual touch signal defining a touch time and touch type is generated and provided to the software, and when an image corresponding to the virtual touch signal is generated by the software, the generated image and the test image correspond to each other By comparing each lattice unit, a ratio of lattices having matching data values is calculated, and based on the ratio, it is possible to determine whether the software is defective.
또한, 상기 프로세서는, 상기 소프트웨어가 불량인 것으로 식별되면, 소프트웨어 업데이트 정보를 상기 디스플레이에 표시할 수 있다.Also, the processor may display software update information on the display when the software is identified as defective.
여기서, 외부 서버와 통신을 수행하기 위한 통신부를 더 포함하며, 상기 프로세서는, 상기 소프트웨어가 불량인 것으로 식별되면, 상기 통신부를 통해서 상기 외부 서버로 소프트웨어 불량에 대한 정보를 전송할 수 있다.Here, further comprising a communication unit for communicating with an external server, the processor, when the software is identified as defective, may transmit information about the software defect to the external server through the communication unit.
여기서, 복수의 외부 디스플레이 장치와 통신하기 위한 인터페이스를 더 포함하고, 상기 프로세서는, 상기 복수의 외부 디스플레이 장치로 송신하는 이미지 및 상기 복수의 외부 디스플레이 장치로부터 수신되는 이미지와 상기 메모리에 기 저장된 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라서 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트할 수 있다.Here, further comprising an interface for communicating with a plurality of external display devices, wherein the processor includes images transmitted to the plurality of external display devices, images received from the plurality of external display devices, and the test pre-stored in the memory By comparing images, communication performance with the plurality of external display devices may be tested according to a matching rate between the images.
또한, 상기 프로세서는, 상기 이미지간 일치율을 지속적으로 모니터링하며, 상기 이미지간 일치율이 임계비율 미만이면 에러 메시지를 상기 디스플레이를 통해 표시할 수 있다. Also, the processor may continuously monitor the image-to-image matching rate, and if the image-to-image matching rate is less than a threshold ratio, an error message may be displayed on the display.
여기서, 상기 프로세서는, 상기 디스플레이 장치가 부팅되는 조건, 상기 디스플레이 장치에서 재생되던 컨텐츠의 재생이 종료되는 조건, 다음 컨텐츠가 재생되는 조건, 반복 재생이 수행되는 조건 중 적어도 하나가 충족되면, 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트할 수 있다.Here, the processor is configured to: When at least one of a condition for booting the display device, a condition for terminating playback of the content being reproduced on the display device, a condition for playing the next content, and a condition for repeatedly playing the content, is satisfied can test the communication performance with an external display device.
한편, 본 발명의 일 실시 예에 따른 테스트 방법은, 상기 소프트웨어의 불량을 테스트하기 위한 모드가 실행되면, 상기 디스플레이 장치에 저장된 테스트 이미지에 대응되는 가상의 터치 신호를 생성하는 단계, 상기 소프트웨어가 상기 가상의 터치 신호에 따라 이미지를 생성하는 단계, 및 상기 생성된 이미지 및 상기 테스트 이미지를 비교하여 상기 소프트웨어의 불량 여부를 판단하는 단계를 포함할 수 있다.Meanwhile, in the test method according to an embodiment of the present invention, when the mode for testing the software failure is executed, generating a virtual touch signal corresponding to the test image stored in the display device, the software It may include generating an image according to a virtual touch signal, and determining whether the software is defective by comparing the generated image with the test image.
여기서, 상기 가상의 터치 신호는, 상기 테스트 이미지를 상기 디스플레이 장치에 표시하기 위하여 입력되는 터치 위치, 터치 시간 및 터치 타입을 정의하기 위하여 생성된 신호일 수 있다.Here, the virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display device.
또한, 상기 터치 센서의 불량을 테스트하기 위한 모드가 실행되면, 상기 테스트 이미지를 표시하고, 상기 테스트 이미지에 따라 사용자 터치 조작이 이루어지면, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과와 상기 테스트 이미지에 기초하여, 상기 터치 센서의 불량을 테스트하는 단계를 더 포함할 수 있다.In addition, when the mode for testing the failure of the touch sensor is executed, the test image is displayed, and when a user touch operation is performed according to the test image, the detection result of the touch sensor for the user touch operation and the test The method may further include testing a defect of the touch sensor based on the image.
여기서, 상기 터치 센서의 불량을 테스트하는 단계는, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 표시하는 단계, 상기 터치 궤적 이미지 및 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라 상기 터치 센서의 불량을 테스트하는 단계를 더 포함할 수 있다.Here, the step of testing the failure of the touch sensor includes displaying a touch trace image according to a detection result of the touch sensor for the user touch manipulation, comparing the touch trace image with the test image, and matching rate between images The method may further include testing for a defect of the touch sensor.
여기서, 상기 테스트 이미지는, 기 설정된 패턴에 기초한 데이터 값들을 각각 가지는 복수의 격자들을 포함하는 이미지이며, 상기 소프트웨어의 불량 여부를 판단하는 단계는, 상기 생성된 이미지 및 상기 테스트 이미지를 서로 대응되는 격자 단위로 비교하는 단계, 일치되는 데이터 값을 가지는 격자들의 비율을 산출하는 단계, 및 상기 비율에 기초하여 상기 소프트웨어의 불량 여부를 판단하는 단계를 포함할 수 있다. Here, the test image is an image including a plurality of grids each having data values based on a preset pattern, and the step of determining whether the software is defective may include comparing the generated image and the test image to corresponding grids. The method may include comparing units, calculating a ratio of grids having matching data values, and determining whether the software is defective based on the ratio.
여기서, 상기 소프트웨어가 불량인 것으로 식별되면, 소프트웨어 업데이트 정보를 표시하는 단계를 더 포함할 수 있다.Here, when it is identified that the software is defective, the method may further include displaying software update information.
또한, 상기 소프트웨어가 불량인 것으로 식별되면, 외부 서버로 소프트웨어 불량에 대한 정보를 전송하는 단계를 더 포함할 수 있다.In addition, when the software is identified as defective, the method may further include transmitting information about the software defect to an external server.
여기서, 복수의 외부 디스플레이 장치로 송신하는 이미지 및 상기 복수의 외부 디스플레이 장치로부터 수신되는 이미지와 상기 메모리에 기 저장된 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라서 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는 단계를 더 포함할 수 있다.Here, by comparing an image transmitted to a plurality of external display apparatuses and an image received from the plurality of external display apparatuses with the test image previously stored in the memory, communication performance with the plurality of external display apparatuses according to a matching rate between the images It may further include the step of testing.
여기서, 상기 이미지간 일치율을 지속적으로 모니터링하여 상기 이미지간 일치율이 임계비율 미만이면 에러 메시지를 표시하는 단계를 더 포함할 수 있다.Here, the method may further include continuously monitoring the image-to-image matching rate and displaying an error message when the image-to-image matching rate is less than a threshold ratio.
여기서, 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는 단계는, 상기 디스플레이 장치가 부팅되는 조건, 상기 디스플레이 장치에서 재생되던 컨텐츠의 재생이 종료되는 조건, 다음 컨텐츠가 재생되는 조건, 반복 재생이 수행되는 조건 중 적어도 하나가 충족될 때마다 수행될 수 있다.Here, the testing of the communication performance with the plurality of external display devices includes: a condition in which the display device is booted, a condition in which reproduction of the content being reproduced in the display device is terminated, a condition in which the next content is reproduced, and repeated reproduction are performed. It may be performed whenever at least one of the conditions to be performed is satisfied.
이상과 같은 다양한 실시 예에 따르면, 디스플레이 시스템의 불량 여부 및 그 원인을 좀 더 용이하고 효율적으로 테스트할 수 있다.According to various embodiments as described above, it is possible to more easily and efficiently test whether the display system is defective and its cause.
도 1은 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 도시한 블록도이다.1 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present disclosure.
도 2는 테스트 이미지의 일 예를 설명하기 위한 도면이다.2 is a diagram for explaining an example of a test image.
도 3은 가상의 터치 신호 발생 과정을 설명하기 위한 도면이다.3 is a diagram for explaining a process of generating a virtual touch signal.
도 4는 가상의 터치 신호에 의해 생성된 이미지와 테스트 이미지를 비교하는 과정을 설명하기 위한 도면이다.4 is a diagram for explaining a process of comparing an image generated by a virtual touch signal with a test image.
도 5는 터치 센서의 불량을 테스트하는 방법의 일 예에 대해 설명하기 위한 도면이다.5 is a diagram for explaining an example of a method for testing a touch sensor for failure.
도 6은 테스트 결과에 따른 처리 방법의 일 예를 설명하기 위한 도면이다.6 is a diagram for explaining an example of a processing method according to a test result.
도 7은 테스트 결과에 따른 처리 방법의 다른 예를 설명하기 위한 도면이다.7 is a view for explaining another example of a processing method according to a test result.
도 8은 복수의 디스플레이 장치 간의 데이터 송수신 성능을 테스트하는 방법을 설명하기 위한 도면이다 8 is a diagram for explaining a method of testing data transmission/reception performance between a plurality of display devices;
도 9는 도 8의 테스트 결과에 따른 처리 방법의 일 예를 설명하기 위한 도면이다.9 is a view for explaining an example of a processing method according to the test result of FIG. 8 .
도 10은 본 발명의 일 실시 예에 따른 테스트 방법을 설명하기 위한 흐름도이다.10 is a flowchart illustrating a test method according to an embodiment of the present invention.
--
본 명세서에서 사용되는 용어에 대해 먼저 간략히 설명 한다. Terms used in this specification will be briefly described first.
본 명세서에서 사용되는 용어는 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다. The terms used in this specification have been selected as currently widely used general terms as possible, which may vary depending on the intention or precedent of a person skilled in the art, the emergence of new technology, and the like. In addition, in a specific case, there is a term arbitrarily selected by the applicant, and in this case, the meaning will be described in detail in the description of the corresponding disclosure. Therefore, the terms used in the present disclosure should be defined based on the meaning of the term and the contents of the present disclosure, rather than the simple name of the term.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms such as first, second, etc. may be used to describe various elements, but the elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
A 또는/및 B 중 적어도 하나라는 표현은 "A" 또는 "B" 또는 "A 및 B" 중 어느 하나를 나타내는 것으로 이해되어야 한다. The expression "at least one of A and/or B" is to be understood as indicating either "A" or "B" or "A and B".
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 어떤 구성요소가 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. A component (eg, a first component) is "coupled with/to (operatively or communicatively)" to another component (eg, a second component); When referring to "connected to", it should be understood that an element may be directly connected to another element or may be connected through another element (eg, a third element).
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. The singular expression includes the plural expression unless the context clearly dictates otherwise. In the present application, terms such as "comprises" or "consisting of" are intended to designate that the features, numbers, steps, operations, components, parts, or combinations thereof described in the specification exist, but one or more other It should be understood that this does not preclude the possibility of addition or presence of features or numbers, steps, operations, components, parts, or combinations thereof.
본 개시에서 "모듈" 혹은 "부"는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 "모듈" 혹은 복수의 "부"는 특정한 하드웨어로 구현될 필요가 있는 "모듈" 혹은 "부"를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.In the present disclosure, a “module” or “unit” performs at least one function or operation, and may be implemented as hardware or software, or a combination of hardware and software. In addition, a plurality of “modules” or a plurality of “units” may be integrated into at least one module and implemented by at least one processor, except for “modules” or “units” that need to be implemented with specific hardware.
아래에서는 첨부한 도면을 참고하여 본 개시의 실시 예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present disclosure will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art to which the present disclosure pertains can easily implement them. However, the present disclosure may be implemented in several different forms and is not limited to the embodiments described herein. And in order to clearly explain the present disclosure in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.
도 1은 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 도시한 블록도이다. 디스플레이 장치(100)는 디스플레이를 구비한 전자 장치를 의미한다. 구체적으로는, 디스플레이 장치(100)는 TV, 모니터, 랩탑 PC, 휴대폰, PDA, 키오스크, 비디오 월(video wall) 뿐만 아니라, 디스플레이(130)를 구비한 냉장고나 세탁기, 에어컨 등과 같은 다양한 유형의 가전 제품으로 구현될 수도 있다. 도 1에 따르면, 디스플레이 장치(100)는 프로세서(110), 메모리(120), 디스플레이(130)를 포함한다. 1 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present disclosure. The display device 100 refers to an electronic device having a display. Specifically, the display device 100 includes a TV, a monitor, a laptop PC, a mobile phone, a PDA, a kiosk, and a video wall, as well as various types of home appliances such as a refrigerator, a washing machine, and an air conditioner provided with the display 130 . It can also be implemented as a product. Referring to FIG. 1 , a display apparatus 100 includes a processor 110 , a memory 120 , and a display 130 .
프로세서(110)는, 디스플레이 장치(100)의 전반적인 동작 또는 일부 기능을 수행하기 위하여 마련된 구성요소이다. 프로세서(110)는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)) 등 다양한 이름으로 명명될 수 있으나, 본 명세서에서는 프로세서(110)로 기재한다. 프로세서(110)는 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다. 메모리(120)는, 디스플레이 장치의 동작에 필요한 각종 소프트웨어나 데이터가 저장된 구성요소이다. 도 1에서 메모리(120)는 하나만으로 도시하였으나, 메모리(120)는 UVEPROM이나 EEPROM과 같은 비휘발성 메모리나, 휘발성 메모리 등 다양한 메모리 들 중 적어도 하나 이상의 조합으로 구현될 수도 있다. The processor 110 is a component provided to perform an overall operation or some functions of the display apparatus 100 . The processor 110 includes a digital signal processor (DSP), a microprocessor, a central processing unit (CPU), a micro controller unit (MCU), a micro processing unit (MPU), a controller ( controller), an application processor (application processor (AP)), etc., may be named variously, but in the present specification, it is referred to as the processor 110. The processor 110 is a system on chip (SoC), large scale integration (LSI), etc. It may be implemented in the form of a field programmable gate array (FPGA) or implemented in the form of a field programmable gate array (FPGA). The memory 120 is a component in which various software or data necessary for the operation of the display device are stored. Although only one is illustrated, the memory 120 may be implemented as a combination of at least one or more of various memories such as a non-volatile memory such as UVEPROM or EEPROM, or a volatile memory.
메모리(120)에는 소프트웨어 불량 및 터치 센서 불량을 테스트할 때 사용되는 테스트 이미지가 저장될 수 있다. 또한, 메모리(120)에는 터치 센서에서 감지된 사용자의 터치를 디스플레이 하기 위한 소프트웨어가 저장될 수 있다. 메모리(120)에 저장되는 정보는, 디스플레이 장치 제조 시에 저장되거나, 추후에 다운로드 받을 수도 있고, 외부 소스로부터 수시로 업데이트될 수도 있다.The memory 120 may store a test image used to test software failure and touch sensor failure. In addition, software for displaying the user's touch sensed by the touch sensor may be stored in the memory 120 . Information stored in the memory 120 may be stored during manufacturing of the display device, may be downloaded later, or may be updated from time to time from an external source.
디스플레이(130)는 화상이나 각종 정보 및 메뉴 등을 표시하기 위한 구성요소이다. 디스플레이(130)는 각종 정보나 메뉴 등을 디스플레이하기 위한 디스플레이 패널(131)과, 그 디스플레이 패널(131)에 대한 터치를 감지하는 터치 센서(132)를 포함한다. 터치 센서(132)는 디스플레이 패널(131)과 별도로 제작되어 디스플레이 패널(131)의 상부나 하부 등에 배치될 수도 있고, 디스플레이 패널(131)에 내장되는 형태로 구현될 수도 있다. 터치 센서(132)를 포함하기 때문에, 디스플레이(130)는 다르게는 터치 스크린이라 부를 수도 있다. The display 130 is a component for displaying images, various information, menus, and the like. The display 130 includes a display panel 131 for displaying various information or menus, and a touch sensor 132 for sensing a touch on the display panel 131 . The touch sensor 132 may be manufactured separately from the display panel 131 and disposed on the upper or lower portion of the display panel 131 , or may be implemented in a form embedded in the display panel 131 . Because it includes a touch sensor 132 , the display 130 may alternatively be referred to as a touch screen.
디스플레이(130)가 터치 스크린으로 구현된 경우, 사용자는 디스플레이(130)에 표시된 UI에 따라 디스플레이 장치가 구비된 가전제품 등을 제어할 수 있게 된다. 냉장고인 경우, 사용자는 디스플레이(130)에 표시된 각종 정보나 메뉴를 보면서 직접 터치하여 냉장고의 기능을 조작할 수 있다. 터치 센서(132)는 사용자가 터치한 위치, 터치 면적의 크기 등에 대응되는 신호를 프로세서(110)로 제공하고, 프로세서(110)는 그 신호에 대응되는 동작을 수행한다. When the display 130 is implemented as a touch screen, the user can control the home appliances provided with the display device according to the UI displayed on the display 130 . In the case of a refrigerator, a user may manipulate functions of the refrigerator by directly touching while viewing various information or menus displayed on the display 130 . The touch sensor 132 provides a signal corresponding to the location touched by the user, the size of the touch area, etc. to the processor 110 , and the processor 110 performs an operation corresponding to the signal.
한편, 디스플레이 장치(100)를 제조하여 출하하기 전에 디스플레이(130)의 터치 감지 동작이나 디스플레이 동작 등에 불량이 있는지 여부를 확인해야 한다. 이러한 불량의 원인은 크게 두 가지로 나눌 수 있다. Meanwhile, before manufacturing and shipping the display device 100 , it is necessary to check whether there is a defect in the touch sensing operation or the display operation of the display 130 . The causes of these defects can be divided into two main categories.
첫번째는 디스플레이(130)에 구비된 터치 센서(132)가 불량인 경우이다. 터치 센서(132)가 불량인 경우, 사용자의 터치 지점을 잘못 인식할 수 있다. 따라서, 프로세서(110)가 정상적으로 작동하는 경우에도, 사용자가 의도한 바와 다른 터치 효과가 발생하게 된다. 가령, 냉장실 온도를 낮추고 싶었으나 터치 센서 불량으로 인해 냉장실 온도가 올라가는 것과 같은 오류가 생길 수 있다. 이 때는 터치 센서(132) 또는 디스플레이(130)를 교체해야 할 수 있다. The first is a case in which the touch sensor 132 provided in the display 130 is defective. When the touch sensor 132 is defective, the user's touch point may be incorrectly recognized. Accordingly, even when the processor 110 operates normally, a touch effect different from that intended by the user occurs. For example, an error may occur, such as an attempt to lower the temperature of the refrigerator compartment, but an increase in the temperature of the refrigerator compartment due to a defective touch sensor. In this case, the touch sensor 132 or the display 130 may need to be replaced.
두번째는 터치 센서는 정상적으로 작동하나, 터치 신호에 따라 기능을 수행하는 소프트웨어에 불량이 있는 경우를 상정할 수 있다.Second, it can be assumed that the touch sensor operates normally, but there is a defect in the software performing a function according to the touch signal.
이 경우, 터치 센서는 정상적으로 작동하기 때문에, 사용자의 입력에 따른 디스플레이 상 터치 포인트의 좌표는 정확하게 프로세서(110)로 전달된다. 그러나, 메모리(120)에 저장된 소프트웨어의 문제로 인해 프로세서(110)가 별다른 동작을 수행하지 않거나, 사용자 의도와 다른 동작을 수행할 수 있다. 이러한 불량은 현재와 같이 사용자가 직접 터치하여 테스트하는 방식으로는 구별하기 쉽지 않다. 즉, 사용자는 자신이 입력한 좌표와 다른 좌표를 갖는 포인트에 터치 이벤트가 발생하는 것을 인지하더라도, 이것이 터치 센서 불량인지 혹은 소프트웨어 불량인지 판단할 수 없다. In this case, since the touch sensor operates normally, the coordinates of the touch point on the display according to the user's input are accurately transmitted to the processor 110 . However, due to a problem in software stored in the memory 120 , the processor 110 may not perform a special operation or may perform an operation different from the user's intention. It is not easy to distinguish such a defect in a method that a user directly touches and tests as in the present. That is, even if the user recognizes that a touch event occurs at a point having a coordinate different from the coordinates input by the user, it is not possible to determine whether the touch sensor is defective or the software is defective.
프로세서(110)는 디스플레이 장치(100)에 대해 다양한 측면에서의 불량을 테스트할 수 있다. 구체적으로는 소프트웨어의 불량, 터치 센서의 불량, 외부 디스플레이 장치와의 데이터 송수신 과정에서의 불량 등을 테스트할 수 있다. 각각에 대한 테스트는 서로 다른 모드로 구현되어 사용자가 선택적으로 수행하도록 할 수 있다. 또는, 제품 별로 하나의 모드만 적용될 수도 있다. 이하에서는, 사용자가 다양한 모드 하에서 테스트를 수행하는 경우를 기준으로 구체적으로 설명한다. The processor 110 may test the display apparatus 100 for defects in various aspects. Specifically, a defect in software, a defect in a touch sensor, a defect in a data transmission/reception process with an external display device, etc. may be tested. Each test can be implemented in a different mode so that the user can selectively perform it. Alternatively, only one mode may be applied to each product. Hereinafter, a case in which the user performs the test under various modes will be described in detail.
소프트웨어의 불량을 테스트하기 위한 모드가 실행되면, 프로세서(110)는 메모리(120)에 저장된 테스트 이미지에 대응되는 가상의 터치 신호를 소프트웨어에 제공하게 된다. 가상의 터치 신호란, 실제로 터치 센서에서 사용자 터치를 감지하여 출력하는 신호가 아니라, 프로세서(110)가 자체적으로 생성한 신호를 의미한다. 프로세서(110)는 테스트 이미지를 디스플레이 패널에 표시하고자 하였을 때 필요한 터치 위치, 터치 시간 및 터치 타입을 정의하는 신호를 가상의 터치 신호로 생성할 수 있다. 일 예로, 사용자가 디스플레이 패널(131)의 a지점을 터치하여 t 시간 내에 b지점까지 드래그하는 터치 조작을 한다면, 정상적인 터치 센서(132)에서 이를 감지하여 터치 신호를 출력한다. 프로세서(110)는 메모리(120)에 저장된 소프트웨어에 대해 그 터치 신호를 입력으로 제공하여 a지점부터 b지점까지 t시간 내에 드로잉되는 이미지를 디스플레이 패널(131)에 디스플레이한다. 이 때 드로잉되는 이미지가 테스트 이미지라면, 이 때 입력되는 터치 신호가 가상의 터치 신호가 될 수 있다. When the mode for testing software failure is executed, the processor 110 provides a virtual touch signal corresponding to the test image stored in the memory 120 to the software. The virtual touch signal means a signal generated by the processor 110 itself, not a signal that is actually detected and output by the touch sensor. The processor 110 may generate, as a virtual touch signal, a signal defining a touch position, a touch time, and a touch type required to display a test image on the display panel. For example, if the user touches the point a of the display panel 131 and performs a touch manipulation by dragging the point to the point b within t time, the normal touch sensor 132 detects this and outputs a touch signal. The processor 110 provides the touch signal to the software stored in the memory 120 as an input, and displays an image drawn from the point a to the point b within t time on the display panel 131 . At this time, if the drawn image is a test image, the touch signal input at this time may be a virtual touch signal.
테스트 이미지 및 가상의 터치 신호의 예에 대해서는 도 2 및 도 3에서 상세히 설명하도록 한다.Examples of the test image and the virtual touch signal will be described in detail with reference to FIGS. 2 and 3 .
소프트웨어는 프로세서(110)로부터 제공받은 가상의 터치 신호에 기초하여 이에 대응되는 이미지를 생성하게 된다.The software generates an image corresponding thereto based on the virtual touch signal provided from the processor 110 .
프로세서(110)는 소프트웨어가 생성한 이미지를 테스트 이미지와 비교하여 소프트웨어의 불량 여부를 판단하게 된다. 구체적으로는, 프로세서(110)는 생성되는 이미지와 테스트 이미지를 서로 대응되는 파트 별로 비교하여 일치 여부를 확인한 후, 일정 비율 이상 불일치하면 소프트웨어의 불량으로 판단한다. The processor 110 compares the image generated by the software with the test image to determine whether the software is defective. Specifically, the processor 110 compares the generated image and the test image for each corresponding part to check whether they match, and then determines whether the software is defective if they do not match by a certain percentage or more.
가상의 터치 신호를 생성하는 경우, 터치 센서의 불량과 상관없이 입력이 이루어지게 되므로, 이러한 상황에서 이미지가 정상적으로 디스플레이되지 않으면, 프로세서(110)는 터치 센서의 불량이 아닌 소프트웨어의 불량이라고 판단할 수 있다. In the case of generating a virtual touch signal, since input is made regardless of the touch sensor defect, if the image is not displayed normally in this situation, the processor 110 may determine that the touch sensor is not defective but software is defective. have.
이와 별도로, 터치 센서의 불량을 테스트하기 위한 모드를 실행할 수도 있다. 이 경우, 프로세서(110)는 테스트 이미지를 디스플레이(130)에 표시한다. 사용자는 테스트 이미지에 따라 터치 조작을 수행할 수 있다. 즉, 테스트 이미지가 라인 형태로 표시되면, 사용자는 그 라인의 일 단을 터치한 후 라인을 따라서 드래그하는 조작을 수행할 수 있다. 프로세서(110)는 사용자의 터치 조작에 대한 터치 센서의 감지 결과와 테스트 이미지를 비교하여 터치 센서의 불량을 식별할 수 있다.Separately, a mode for testing the failure of the touch sensor may be executed. In this case, the processor 110 displays the test image on the display 130 . The user may perform a touch operation according to the test image. That is, when the test image is displayed in the form of a line, the user may touch one end of the line and then drag along the line. The processor 110 may identify a failure of the touch sensor by comparing the detection result of the touch sensor for the user's touch manipulation with the test image.
구체적으로, 사용자의 터치 조작이 이루어지는 포인트의 좌표와 테스트 이미지가 표시된 포인트의 좌표가 일치하는지 여부를 픽셀 별로 또는 영역 별로 판단한다. 판단 결과, 일치율이 일정 비율 이상이면, 프로세서(110)는 터치 센서(132)가 정상이라고 판단하고, 일정 비율 미만이면 불량이라고 판단한다. Specifically, whether the coordinates of the point where the user's touch manipulation is performed coincide with the coordinates of the point where the test image is displayed is determined for each pixel or region. As a result of the determination, if the matching rate is equal to or greater than a certain ratio, the processor 110 determines that the touch sensor 132 is normal, and if it is less than the predetermined ratio, it is determined that the touch sensor 132 is defective.
다른 실시 예에 따르면, 디스플레이 장치(100)는 터치 불량 테스트에 관한 UI를 제공할 수도 있다. 즉, 프로세서(110)는 터치 센서의 불량을 테스트하기 위한 모드 내에서, 사용자 터치 조작에 대한 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 디스플레이에 표시할 수 있다. 이 경우, 터치 센서(132)가 불량이라면, 터치 입력된 좌표와 다른 지점에서 터치 궤적 이미지가 표시되거나, 아예 터치 궤적 이미지가 표시되지 않을 수 있다. 사용자는 자신의 터치 조작이 제대로 감지되는지 여부를 육안으로 바로 확인할 수 있게 된다.According to another embodiment, the display apparatus 100 may provide a UI related to a poor touch test. That is, the processor 110 may display the touch trace image on the display according to the detection result of the touch sensor for the user's touch manipulation in the mode for testing the failure of the touch sensor. In this case, if the touch sensor 132 is defective, the touch trace image may be displayed at a point different from the coordinates input by the touch, or the touch trace image may not be displayed at all. The user can immediately check whether his or her touch operation is properly detected with the naked eye.
터치 센서 불량인지 여부를 판단하기 위한 모드, 소프트웨어 불량 여부를 판단하기 위한 모드는 실시 예에 따라 개별적으로 이루어질 수도 있지만, 순서와 상관없이 함께 적용될 수도 있다. The mode for determining whether the touch sensor is defective and the mode for determining whether the software is defective may be individually performed according to embodiments, but may be applied together regardless of the order.
한편, 테스트 이미지는 실시 예에 따라 다양한 형태로 마련될 수 있다. Meanwhile, the test image may be provided in various forms according to embodiments.
도 2는 본 개시의 일 실시 예에 따른 테스트 이미지를 설명하기 위한 도면이다. 전체 디스플레이 화면을 복수의 격자로 나누면, 그 중 데이터 값을 가지는 일부 격자들(210)이 테스트 이미지(200)를 구성한다. 도 2의 예에서는, 테스트 이미지(200)는 디스플레이 화면을 기준으로 하여 상, 하, 좌, 우 가장자리 부분과 두 대각선 방향으로 이어진 패턴의 이미지임을 알 수 있다. 2 is a view for explaining a test image according to an embodiment of the present disclosure. When the entire display screen is divided into a plurality of grids, some grids 210 having data values among them constitute the test image 200 . In the example of FIG. 2 , it can be seen that the test image 200 is an image of a pattern connected in two diagonal directions with upper, lower, left, and right edges with respect to the display screen.
도 2의 테스트 이미지(200)는 출하 과정에서 터치 불량 여부를 검수할 때 사용 가능한 이미지의 일 예에 불과하므로, 이에 국한되지 않고, 다양한 형태로 마련될 수 있다. 테스트 패턴이 격자 형태로 분할된 단순한 패턴의 이미지라는 점에서 bmp 형식을 가질 수 있으나, 이 밖에도, jpeg, png등과 같은 이미지 파일이 될 수도 있다. The test image 200 of FIG. 2 is only an example of an image that can be used when inspecting whether a touch is defective during shipment, and thus is not limited thereto, and may be provided in various forms. The test pattern may have a bmp format in that it is an image of a simple pattern divided in a grid form. In addition, it may be an image file such as jpeg or png.
테스트 이미지(200)상의 하나의 격자는 사용자의 손가락 직경보다 큰 가로 및 세로 길이를 갖도록 구현할 수 있으나, 반드시 이에 한정되는 것은 아니다. One grid on the test image 200 may be implemented to have horizontal and vertical lengths greater than the user's finger diameter, but is not limited thereto.
테스트 이미지가 격자 형태의 이미지일 경우, 디스플레이 장치가 정상 동작을 하고 있음에도 미세한 터치 포인트 간 차이로 인해 불량으로 인식되는 문제점을 방지할 수 있다. 또한, 데이터 처리의 부담을 줄여 프로세서가 더욱 신속하게 불량 테스트를 할 수 있게 하는 장점도 가진다.When the test image is a grid-shaped image, it is possible to prevent a problem in that the display device is recognized as a defect due to a difference between minute touch points even though the display device is operating normally. In addition, it has the advantage of reducing the burden of data processing so that the processor can perform a failure test more quickly.
프로세서(110)는 테스트 이미지에 포함된 각 격자들의 좌표, 각 격자들의 데이터 값에 대응되는 터치 시간 및 터치 타입을 정의하는 가상의 터치 신호를 생성하여 소프트웨어에 제공하며, 가상의 터치 신호에 대응되는 이미지가 소프트웨어에 의해 생성되면, 생성된 이미지 및 테스트 이미지를 서로 대응되는 격자 단위로 비교하여, 일치되는 데이터 값을 가지는 격자들의 비율을 산출하고, 해당 비율에 기초하여 소프트웨어의 불량 여부를 판단할 수 있다.The processor 110 generates a virtual touch signal defining the coordinates of each grid included in the test image, a touch time corresponding to a data value of each grid, and a touch type, and provides the virtual touch signal to the software, and provides the virtual touch signal corresponding to the virtual touch signal. When the image is generated by software, the generated image and the test image are compared in grid units corresponding to each other, the ratio of grids having matching data values is calculated, and based on the ratio, it is possible to determine whether the software is defective. have.
소프트웨어 불량 테스트 결과, 프로세서(110)가 소프트웨어 불량인 것으로 식별하면 소프트웨어 업데이트를 제안하는 피드백을 디스플레이(130)를 통해 사용자에게 제공할 수 있다.As a result of the software failure test, if the processor 110 identifies that the software is defective, feedback suggesting a software update may be provided to the user through the display 130 .
소프트웨어가 불량인 경우, 소프트웨어 불량 테스트를 실행했던 제품뿐만 아니라, 동종의 제품에 대한 동일 버전의 소프트웨어가 모두 불량일 가능성이 높으므로, 이를 제조사 측에 알릴 필요가 있다. 이 경우, 디스플레이 장치(100)는 통신부를 통해서 외부 서버로 소프트웨어 불량에 관한 정보를 전송할 수 있다. 이에 대해서는 도 6에서 구체적으로 설명한다. If the software is defective, it is highly likely that the software of the same version for the same type of product as well as the product that was tested for software failure is defective, so it is necessary to notify the manufacturer of this. In this case, the display apparatus 100 may transmit information about software defects to an external server through the communication unit. This will be described in detail with reference to FIG. 6 .
디스플레이 장치는 1개의 set만 사용되는 것으로 국한되지 않는다. 여러 개의 디스플레이 장치를 접합하여 하나의 디스플레이 월(Wall)을 구성할 수도 있다. 이 경우, 디스플레이 장치들 간의 데이터 송수신 과정에서 에러가 발생할 수도 있으므로, 이를 테스트하기 위한 모드가 마련될 수 있다. 이에 대한 설명은 도 8에서 구체적으로 기재한다. The display device is not limited to using only one set. A single display wall may be configured by bonding several display devices. In this case, since an error may occur in a data transmission/reception process between display devices, a mode for testing this may be prepared. This will be described in detail with reference to FIG. 8 .
도 3은 본 개시의 일 실시 예에 따른 가상의 터치 신호 발생을 설명하기 위한 도면이다.3 is a diagram for explaining generation of a virtual touch signal according to an embodiment of the present disclosure.
디스플레이 장치의 운영체제(Operating System)은 하드웨어를 제어하는 커널(Kernel), 라이브러리(Library), AEE(Application Executive Environment), UI Framework 등으로 구성된다. 이 중에 커널은 특정 하드웨어나 장치를 제어하기 위한 프로그램이다.The operating system of the display device is composed of a kernel that controls hardware, a library, an application executive environment (AEE), a UI framework, and the like. Among them, the kernel is a program for controlling specific hardware or devices.
커널은 BSP(Board Support Package)를 포함할 수 있다. BSP는 Board를 사용할 수 있도록 하기 위한 소프트웨어의 묶음이다. 이는 운영체제를 로드하기 위한 부트 로더(Bootloader), 하드웨어 관리 기능을 수행하는 OAL(OEM Adaption Layer), 특정 하드웨어를 제어하기 위한 커널의 일부분으로 동작하는 프로그램인 장치 드라이버(Device Driver)로 구성된다.The kernel may include a Board Support Package (BSP). BSP is a set of software that allows you to use the Board. It consists of a bootloader for loading an operating system, an OEM adaptation layer (OAL) that performs hardware management functions, and a device driver, a program that operates as a part of the kernel to control specific hardware.
커널이 터치 센서(132)로부터 감지 데이터를 받아서 처리하는 과정에서도 오류가 발생할 수 있다. 그러나 도 3에서는 가상의 터치 신호를 받아 터치 이벤트를 발생시키는 과정에 대해 설명할 것이기 때문에, 위와 같은 문제는 논외로 한다.An error may also occur in the process in which the kernel receives and processes the sensed data from the touch sensor 132 . However, since a process of generating a touch event by receiving a virtual touch signal will be described in FIG. 3 , the above problem is not discussed.
프로세서(110)는 메모리(120)에 저장된 테스트 이미지에 대응되는 가상의 터치 신호를 발생시킬 수 있다. 가상의 터치 신호는 실제로 사용자가 터치스크린을 통해 터치 입력을 하지는 않았으나, 마치 사용자에 의한 터치가 있는 것과 마찬가지의 효과를 발생시키기 위해 생성되는 신호이다.The processor 110 may generate a virtual touch signal corresponding to the test image stored in the memory 120 . The virtual touch signal is a signal generated to generate the same effect as if the user did not actually input a touch through the touch screen, but as if there is a touch by the user.
프로세서(110)가 해당 신호를 발생시킬 때 Shell Script와 같은 스크립트 언어를 사용할 수 있으며, 예를 들어 [터치 x좌표, 터치 y좌표, 데이터 값]과 같은 행렬 형태의 데이터를 가상의 터치 신호에 포함시킬 수 있다.When the processor 110 generates a corresponding signal, a script language such as Shell Script may be used, and for example, matrix-type data such as [touch x-coordinate, touch y-coordinate, data value] is included in the virtual touch signal. can do it
소프트웨어의 불량에 관하여 테스트하는 과정에서 터치 센서의 감지에 문제가 있는 경우를 배제하기 위하여 가상의 터치 신호를 발생시키는 것이며, 이를 통해 테스트 이미지에 대응되는 터치가 있는 것을 전제로 소프트웨어만의 불량을 테스트할 수 있게 된다.In the process of testing software defects, a virtual touch signal is generated in order to exclude a case where there is a problem in the detection of the touch sensor, and through this, a software defect is tested on the premise that there is a touch corresponding to the test image. be able to do
가상의 터치 신호는 테스트 이미지를 표시하기 위한 터치 위치, 터치 시간 및 터치 타입을 정의할 수 있는데, 소프트웨어 불량을 테스트하는 과정에서는 터치 위치에 대한 정보만을 포함해도 무방하다.The virtual touch signal may define a touch position, a touch time, and a touch type for displaying a test image. In the process of testing software defects, only information on the touch position may be included.
가상의 터치 신호가 입력된 커널에서는 함수(function)를 구동하여 가상의 터치 신호에 대응되는 이미지를 생성한다.The kernel to which the virtual touch signal is input generates an image corresponding to the virtual touch signal by driving a function.
도 3을 참고하면, 테스트 이미지(200) 에 포함된 각 격자들의 좌표에 대응되는 가상의 터치 신호가 생성되어, 소프트웨어에 의해 이에 대응되는 이미지가 생성되는 것을 알 수 있다. 소프트웨어의 불량으로 인해 생성된 이미지와 테스트 이미지가 달라질 수 있는데, 이는 도 4에 관한 설명에서 상세히 설명하도록 한다.Referring to FIG. 3 , it can be seen that a virtual touch signal corresponding to the coordinates of each grid included in the test image 200 is generated, and an image corresponding thereto is generated by software. The generated image and the test image may be different due to a software defect, which will be described in detail in the description of FIG. 4 .
도 4는 본 개시의 일 실시 예에 따른 가상의 터치 신호에 따라 생성된 이미지와 테스트 이미지를 비교하는 과정을 설명하기 위한 도면이다.4 is a view for explaining a process of comparing an image generated according to a virtual touch signal and a test image according to an embodiment of the present disclosure.
소프트웨어가 가상의 터치 신호에 대응되는 이미지(410)를 생성하면, 프로세서(110)는 생성된 이미지를 테스트 이미지(420)와 비교하게 된다.When the software generates the image 410 corresponding to the virtual touch signal, the processor 110 compares the generated image with the test image 420 .
가상의 터치 신호에 대응되는 이미지(410)은 상단의 격자들에 대해서는 테스트 이미지와 일치하지만, 세로 방향 격자들의 배열에 있어서는 테스트 이미지(420)와 다른 것을 확인할 수 있다.It can be seen that the image 410 corresponding to the virtual touch signal matches the test image with respect to the upper grids, but is different from the test image 420 in the arrangement of the vertical grids.
이는 소프트웨어, 그 중에서도 주로 커널에서 오류가 발생함으로써 생길 수 있는 문제이다. 커널에서 함수 구동 시 함수 자체가 테스트 이미지의 격자 특성과 일치하지 않는 코드를 포함하고 있을 수 있다. 가령 테스트 이미지는 6 by 6의 격자 구조를 가지는데, 함수에는 5 by 6에 대응되는 격자 구조를 기준으로 코드가 구성되어 있을 수 있다. 이럴 경우 도 4에서 보는 바와 같이, 좌측 제1열은 데이터 값을 가질 수 없게 되고, 좌측 제1열의 데이터들이 좌측 제2열로 옮겨지는 오류가 발생할 수 있다.This is a problem that can be caused by errors occurring in software, especially in the kernel. When a function is run in the kernel, the function itself may contain code that does not match the grid characteristics of the test image. For example, the test image has a lattice structure of 6 by 6, and codes may be configured based on the lattice structure corresponding to 5 by 6 in the function. In this case, as shown in FIG. 4 , the first left column may not have data values, and an error may occur in which data in the first left column is moved to the second left column.
소프트웨어에서 발생할 수 있는 오류는 상술한 경우로 국한되지 않는다. 테스트 이미지의 격자 특성에 맞는 코드로 구성된 함수를 구동하더라도, 함수 구동 시 다양한 오류가 발생함으로써 테스트 이미지와 다른 이미지가 생성될 수 있으며, 커널이 아닌 UI Framework 부분에서도 오류가 발생할 수 있다.Errors that may occur in the software are not limited to the above cases. Even if a function composed of code that matches the grid characteristics of the test image is driven, various errors occur when the function is running, so an image different from the test image may be created, and errors may also occur in the UI Framework, not the kernel.
프로세서(110)는 가상의 터치 신호에 대응되는 이미지와 테스트 이미지(420)를 서로 대응되는 격자 단위로 비교하여, 이미지 별 모든 격자들의 수에서 일치되는 데이터 값을 가지는 격자들의 비율을 산출한다.The processor 110 compares the image corresponding to the virtual touch signal and the test image 420 in grid units corresponding to each other, and calculates a ratio of grids having matching data values in the number of all grids for each image.
프로세서(110)는 해당 비율을 산출함에 있어 Open CV와 같은 라이브러리를 사용할 수 있다. Open CV는 실시간 이미지 프로세싱에 중점을 둔 라이브러리로서, 윈도우나 리눅스 같은 운영체제에서 사용 가능한 크로스 플랫폼이다.The processor 110 may use a library such as Open CV in calculating the corresponding ratio. Open CV is a library that focuses on real-time image processing, and is cross-platform that can be used on operating systems such as Windows and Linux.
이렇게 산출된 비율에 기초하여 프로세서는 소프트웨어의 불량 여부를 판단할 수 있다. 산출된 비율이 100%가 아닐 때는 일반적으로 소프트웨어에 불량이 있다고 판단할 수 있으나, 제조사가 임계비율을 설정하여 임계비율에 미달될 때는 추가로 소프트웨어 불량 테스트 모드를 재실행 하는 것으로도 정할 수 있다.Based on the calculated ratio, the processor may determine whether the software is defective. When the calculated ratio is not 100%, it can be generally determined that there is a defect in the software.
도 5는 본 개시의 일 실시 예에 따른 터치 센서 불량 테스트에 대해 설명하기 위한 도면이다.5 is a diagram for explaining a touch sensor failure test according to an embodiment of the present disclosure.
사용자는 소프트웨어의 불량을 테스트하는 것 외에도 터치 센서의 불량을 테스트하기 위한 모드를 실행할 수 있다. 터치 센서의 불량을 테스트하기 위한 모드가 실행되면, 프로세서(110)는 메모리(120)에 저장된 테스트 이미지를 디스플레이 패널(131)에 표시한다. 표시된 테스트 이미지에 따라 사용자는 터치 조작(510)을 수행하게 된다.In addition to testing the software for failure, the user can run a mode for testing the touch sensor for failure. When the mode for testing the failure of the touch sensor is executed, the processor 110 displays the test image stored in the memory 120 on the display panel 131 . The user performs a touch manipulation 510 according to the displayed test image.
도 5에서는, 터치 센서(132)가 감지한 터치 좌표에 기초하여 디스플레이 패널(131) 상의 격자에 터치 이벤트를 표시한 것처럼 도시하였으나, 반드시 이와 같이 표시될 필요는 없으며, 터치 센서가 감지한 데이터와 테스트 이미지를 비교하는 것으로 구현될 수도 있다. In FIG. 5 , touch events are displayed on the grid on the display panel 131 based on the touch coordinates sensed by the touch sensor 132 , but it is not necessarily displayed as such, and data detected by the touch sensor and It can also be implemented by comparing test images.
도 5를 참조하면, 사용자는 테스트 이미지의 하단에 있는 행을 드래그 하는 터치 조작(510)을 수행했으나, 터치 센서에 의한 감지 데이터 중 하나의 격자(511)가 사용자의 터치 조작과 불일치하는 것을 확인할 수 있다.Referring to FIG. 5 , the user performed a touch manipulation 510 to drag a row at the bottom of the test image, but it is confirmed that one grid 511 of the data sensed by the touch sensor does not match the user's touch manipulation can
프로세서는 이렇게 테스트 이미지와 불일치 하는 격자(511)가 존재하는 경우, 터치 센서의 불량이 있는 것으로 판단할 수 있다. 이 경우에도 소프트웨어 불량 테스트에서와 같이 Open CV 등의 라이브러리를 사용하여 불일치 격자(511)를 식별할 수 있음은 물론이다.When the grid 511 that does not match the test image is present, the processor may determine that the touch sensor is defective. Of course, in this case as well, the inconsistency grid 511 can be identified using a library such as Open CV as in the software failure test.
또는, 사용자로 하여금 터치 불량이 발생하고 있다는 직관적으로 느끼게 할 수 있도록, 디스플레이 패널 상에 터치 궤적을 표시해 줄 수도 있다. 도 6은 본 개시의 다른 실시 예에 따른 소프트웨어 업데이트 정보 제공에 관해 설명하기 위한 도면이다. 도 6에 따르면, 디스플레이 장치(100)는 프로세서(110), 메모리(120), 디스플레이(130)에 추가하여 통신부(140)를 더 포함할 수 있다. Alternatively, the touch trace may be displayed on the display panel so that the user can intuitively feel that a touch defect is occurring. 6 is a diagram for explaining provision of software update information according to another embodiment of the present disclosure. Referring to FIG. 6 , the display apparatus 100 may further include a communication unit 140 in addition to the processor 110 , the memory 120 , and the display 130 .
통신부(140)는 WIFI, 지그비(zigbee), 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), LTE-A(LTE Advanced), 4G(4th Generation), 5G(5th Generation)등과 같은 다양한 무선 통신 방식이나, 각종 유선 통신 방식으로 통신을 수행할 수 있다. Communication unit 140 is WIFI, Zigbee (zigbee), 3G (3rd Generation), 3GPP (3rd Generation Partnership Project), LTE (Long Term Evolution), LTE-A (LTE Advanced), 4G (4th Generation), 5G (5th) Generation) and the like, communication can be performed using various wireless communication methods or various wired communication methods.
소프트웨어 불량 테스트 모드 실행 결과, 소프트웨어가 불량인 것으로 판단된 경우 프로세서(110)는 디스플레이(130)를 통해서 소프트웨어 업데이트 관련 정보 화면(600)을 제공한다. 사용자는 소프트웨어 업데이트 알림 창(610)을 확인하여 소프트웨어 업데이트(611)를 수행할 수 있다. 사용자가 업데이트(611) 메뉴를 선택하면, 프로세서(110)는 통신부(140)를 통해서 서버(10)에 접속하여, 새로운 소프트웨어를 다운로드 받아서, 업데이트한다. 서버(10)는 소프트웨어 개발자 또는 디스플레이 장치(100)의 제조회사에서 운영하는 서버가 될 수 있으나 반드시 이에 한정되는 것은 아니며 각종 어플리케이션 스토어가 될 수도 있다. As a result of executing the software failure test mode, when it is determined that the software is defective, the processor 110 provides the software update related information screen 600 through the display 130 . The user may perform a software update 611 by checking the software update notification window 610 . When the user selects the update 611 menu, the processor 110 accesses the server 10 through the communication unit 140 to download and update new software. The server 10 may be a server operated by a software developer or a manufacturer of the display device 100 , but is not limited thereto, and may be various application stores.
그러나 이미 소프트웨어에 불량이 있어 사용자가 업데이트 버튼(611) 및 취소 버튼(612)를 터치하더라도 원하는 조작이 수행되지 않을 수 있다. 이럴 경우를 대비하여, 디스플레이 장치는 음성인식 센서를 추가로 구비할 수 있으며, 프로세서(110)는 음성인식 센서를 통해 감지된 사용자의 발화로부터 업데이트 여부를 판단하여 수행할 수도 있다.However, since the software is already defective, even if the user touches the update button 611 and the cancel button 612 , a desired operation may not be performed. In preparation for this case, the display device may further include a voice recognition sensor, and the processor 110 may determine whether to update from the user's utterance sensed through the voice recognition sensor and perform the update.
특정 제품의 소프트웨어가 불량이고, 사용자들이 이러한 불량을 확인하기 시작한 직후에는, 제조사에서 해당 소프트웨어에 대한 업데이트를 제공할 수 없는 상태이므로, 이때는 업데이트 버튼(612)이 비활성화된 상태로 사용자에게 알림을 표시할 수 있다.Since the software of a specific product is defective, and immediately after users start to check for such defects, the manufacturer cannot provide an update for the software, at this time, the update button 612 is disabled and a notification is displayed to the user can do.
도 6에서는 사용자가 업데이트 메뉴를 선택하여 소프트웨어를 업데이트하는 경우를 설명하였으나, 소프트웨어 불량을 확인한 경우 별도의 사용자 조작 없이도 프로세서(110)가 통신부(140)를 통해서 자동으로 서버(10)로 불량 정보를 전송하여 줄 수도 있다. In FIG. 6 , a case in which the user selects the update menu to update the software has been described, but when a software defect is confirmed, the processor 110 automatically sends the defect information to the server 10 through the communication unit 140 without a separate user operation. You can also send it.
도 7은 본 개시의 일 실시 예에 따른 터치 센서의 불량에 관한 피드백 제공을 설명하기 위한 도면이다.7 is a diagram for explaining provision of feedback regarding a failure of a touch sensor according to an embodiment of the present disclosure.
도 5에서 설명한 것과 같이, 터치 센서가 불량으로 식별된 경우에는 프로세서가 사용자에게 터치 센서의 불량을 알려주는 경고 문구(710)를 표시할 수 있다. 터치 센서가 불량인 경우, 소프트웨어 업데이트는 무용하므로 서비스 센터에 방문하여 디스플레이 패널을 교체할 수 있도록 알림을 제공하는 것이다.As described in FIG. 5 , when the touch sensor is identified as defective, the processor may display a warning message 710 informing the user of the failure of the touch sensor. If the touch sensor is defective, the software update is useless, so a notification is provided so that you can visit a service center to replace the display panel.
도 8은 복수의 디스플레이 장치 간의 데이터 송수신 성능을 테스트하는 방법을 설명하기 위한 도면이다 8 is a diagram for explaining a method of testing data transmission/reception performance between a plurality of display devices;
도 8에 도시된 바와 같이 복수의 디스플레이 장치(100-1 ~ 100-n)들이 조합되어 하나의 디스플레이 월(800)을 구성할 수 있다. 도 8에서는 4*4 형태로 조합된 시스템을 도시하였으나, 장치의 개수 및 배치 형태는 다양하게 변형될 수 있다. 각 디스플레이 장치들은 서로 다른 구성을 가질 수도 있지만, 도 8에서는 모두 동일한 구성을 갖춘 경우를 가정하여 설명한다. As shown in FIG. 8 , a plurality of display devices 100 - 1 to 100 - n may be combined to configure one display wall 800 . 8 shows a combined system in a 4*4 form, the number and arrangement of the devices may be variously modified. Each display device may have different configurations, but in FIG. 8 , it is assumed that all display devices have the same configuration.
도 8에 따르면, 디스플레이 월(800)을 구성하는 하나의 디스플레이 장치(100)는 프로세서(110), 메모리(120), 디스플레이(130) 및 인터페이스(150)를 포함한다. 인터페이스(150)는 주변의 다른 장치, 즉, 복수의 외부 디스플레이 장치들과 통신을 수행하기 위한 구성이다. 인터페이스(150)는 유선 또는 무선 인터페이스로 구현될 수 있다. According to FIG. 8 , one display device 100 constituting the display wall 800 includes a processor 110 , a memory 120 , a display 130 , and an interface 150 . The interface 150 is configured to communicate with other peripheral devices, that is, a plurality of external display devices. The interface 150 may be implemented as a wired or wireless interface.
복수의 디스플레이 장치들이 하나의 컨텐츠를 재생할 경우, 각 디스플레이 장치들은 컨텐츠의 일 영역에 해당하는 영상 부분을 디스플레이 하게 된다. 컨텐츠나 기타 정보, 제어 신호 등은 디스플레이 장치들 간에 인터페이스를 통해 교환된다. 이 경우, 인접한 디스플레이 장치로부터 영상을 수신하는 과정이나 송신하는 과정에서 영상 왜곡이 발생할 수 있다.When a plurality of display devices reproduce one content, each display device displays an image portion corresponding to one area of the content. Content, other information, control signals, and the like are exchanged between display devices through an interface. In this case, image distortion may occur in a process of receiving or transmitting an image from an adjacent display device.
이러한 통신 성능 저하를 감지하기 위해서, 디스플레이 장치들 간 통신 성능을 테스트하는 모드를 별도로 수행 할 수 있다. 이러한 모드는 사용자 선택에 따라 또는 기 설정된 조건이 충족될 때 자동으로 수행될 수 있다. In order to detect such communication performance degradation, a mode for testing communication performance between display devices may be separately performed. This mode may be automatically performed according to a user selection or when a preset condition is satisfied.
프로세서(110)는 복수의 외부 디스플레이 장치(100-3)로 송신하는 이미지 및 복수의 외부 디스플레이 장치(100-1)로부터 수신되는 이미지와 메모리(120)에 기 저장된 테스트 이미지를 비교한다.The processor 110 compares the image transmitted to the plurality of external display apparatuses 100 - 3 and the image received from the plurality of external display apparatuses 100 - 1 with the test image pre-stored in the memory 120 .
이미지간 일치율이 임계비율보다 낮으면 프로세서는 디스플레이들 간의 통신 성능이 저하된 것으로 판단할 수 있다. When the matching rate between images is lower than the threshold ratio, the processor may determine that communication performance between displays is degraded.
프로세서(110)는, 복수의 외부 디스플레이 장치로 송신하는 이미지 및 복수의 외부 디스플레이 장치로부터 수신되는 이미지와 메모리에 기 저장된 테스트 이미지를 비교하여 산출되는 이미지 일치율을 지속적으로 모니터링하며, 이미지간 일치율이 임계비율 미만이면 에러 메시지를 디스플레이를 통해 표시할 수 있다.The processor 110 continuously monitors an image matching rate calculated by comparing an image transmitted to a plurality of external display devices and an image received from a plurality of external display devices with a test image pre-stored in the memory, and the image matching ratio is a critical value. If it is less than the ratio, an error message can be shown on the display.
기 설정된 조건은 디스플레이 장치가 부팅되는 조건, 디스플레이 장치에서 재생되던 컨텐츠의 재생이 종료되는 조건, 다음 컨텐츠가 재생되는 조건, 반복 재생이 수행되는 조건 등일 수 있다. 도 9는 본 개시의 다른 실시 예에 따른 여러 디스플레이 사이의 통신 성능 저하에 대한 피드백 제공을 설명하기 위한 도면이다.The preset condition may be a condition for booting the display device, a condition for terminating the reproduction of content that has been reproduced on the display device, a condition for reproducing the next content, a condition for repeatedly performing replay, and the like. FIG. 9 is a diagram for explaining provision of feedback for a decrease in communication performance between various displays according to another embodiment of the present disclosure.
프로세서는 도 8에서 설명한 이미지간 일치율을 지속적으로 모니터링하고, 이미지간 일치율이 임계비율보다 낮으면 에러 메시지(910)를 디스플레이를 통해 표시할 수 있다.The processor may continuously monitor the image-to-image matching rate described with reference to FIG. 8 , and if the image-to-image matching rate is lower than the threshold ratio, an error message 910 may be displayed on the display.
디스플레이 장치가 복수이므로, 모든 디스플레이 장치에 해당 에러 메시지(910)를 표시하여도 되나, 사용자의 시야에서 보기 편한 특정 디스플레이 장치 또는 마스터 기기에서만 에러 메시지를 표시할 수도 있다. 이러한 메시지를 확인한 사용자는, 서비스 센터에 문의하여 수리를 요청하게 된다.Since there are a plurality of display devices, the corresponding error message 910 may be displayed on all display devices, but the error message may be displayed only on a specific display device or the master device that is easy to see from the user's field of view. A user who sees this message will contact a service center and request a repair.
도 10은 본 개시의 또 다른 실시 예에 따른 소프트웨어 불량 테스트 모드에 대해 설명하기 위한 흐름도이다.10 is a flowchart illustrating a software failure test mode according to another embodiment of the present disclosure.
소프트웨어의 불량을 테스트하기 위한 모드가 실행되면(S1010), 디스플레이 장치에 저장된 테스트 이미지에 대응되는 가상의 터치 신호를 생성한다(S1020). 디스플레이 장치에 저장된 소프트웨어는 가상의 터치 신호에 따라 이미지를 생성한다(S1030). 디스플레이 장치는, 생성된 이미지 및 기 저장된 테스트 이미지를 비교하여 소프트웨어의 불량 여부를 판단하게 된다(S1040). When the mode for testing software failure is executed (S1010), a virtual touch signal corresponding to the test image stored in the display device is generated (S1020). Software stored in the display device generates an image according to a virtual touch signal (S1030). The display device compares the generated image with the pre-stored test image to determine whether the software is defective (S1040).
가상의 터치 신호는 테스트 이미지를 디스플레이 장치에 표시하기 위하여 입력되는 터치 위치, 터치 시간 및 터치 타입을 정의하기 위하여 생성된 신호일 수 있다.The virtual touch signal may be a signal generated to define a touch position, a touch time, and a touch type input to display a test image on the display device.
터치 센서의 불량을 테스트하기 위한 모드가 실행되면, 테스트 이미지를 표시하고, 테스트 이미지에 따라 사용자 터치 조작이 이루어지면, 사용자 터치 조작에 대한 터치 센서의 감지 결과와 테스트 이미지에 기초하여, 터치 센서의 불량을 테스트하는 단계를 더 포함할 수 있다.When the mode for testing the failure of the touch sensor is executed, a test image is displayed, and when a user touch operation is performed according to the test image, based on the detection result of the touch sensor for the user touch operation and the test image, the The method may further include testing for defects.
터치 센서의 불량을 테스트하는 단계는, 사용자 터치 조작에 대한 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 표시하는 단계, 터치 궤적 이미지 및 테스트 이미지를 비교하여, 이미지간 일치율에 따라 터치 센서의 불량을 테스트하는 단계를 더 포함할 수 있다.The step of testing the defect of the touch sensor includes displaying a touch trace image according to the detection result of the touch sensor for user touch manipulation, comparing the touch trace image and the test image, and determining the defect of the touch sensor according to the matching rate between images It may further include the step of testing.
테스트 이미지는, 기 설정된 패턴에 기초한 데이터 값들을 각각 가지는 복수의 격자들을 포함하는 이미지이며, 소프트웨어의 불량 여부를 판단하는 단계는, 생성된 이미지 및 테스트 이미지를 서로 대응되는 격자 단위로 비교하는 단계, 일치되는 데이터 값을 가지는 격자들의 비율을 산출하는 단계, 및 비율에 기초하여 소프트웨어의 불량 여부를 판단하는 단계를 포함할 수 있다. The test image is an image including a plurality of grids each having data values based on a preset pattern, and the step of determining whether the software is defective includes comparing the generated image and the test image in grid units corresponding to each other; It may include calculating a ratio of grids having matching data values, and determining whether software is defective based on the ratio.
소프트웨어가 불량인 것으로 식별되면, 소프트웨어 업데이트 정보를 표시하는 단계 또는 외부 서버로 소프트웨어 불량에 대한 정보를 전송하는 단계를 더 포함할 수 있다.When the software is identified as defective, the method may further include displaying software update information or transmitting information about the software defect to an external server.
복수의 외부 디스플레이 장치로 송신하는 이미지 및 복수의 외부 디스플레이 장치로부터 수신되는 이미지와 메모리에 기 저장된 테스트 이미지를 비교하여, 이미지간 일치율에 따라서 복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는 단계를 더 포함할 수 있다.Comparing the image transmitted to the plurality of external display devices and the image received from the plurality of external display devices with the test image pre-stored in the memory, further comprising the step of testing communication performance with the plurality of external display devices according to the matching rate between the images may include
이미지간 일치율을 지속적으로 모니터링하여 이미지간 일치율이 임계비율보다 떨어지면 에러 메시지를 표시하는 단계를 더 포함할 수 있다.The method may further include the step of continuously monitoring the image-to-image matching rate and displaying an error message when the image-to-image matching rate falls below a threshold ratio.
복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는 단계는, 디스플레이 장치가 부팅되는 조건, 디스플레이 장치에서 재생되던 컨텐츠의 재생이 종료되는 조건, 다음 컨텐츠가 재생되는 조건, 반복 재생이 수행되는 조건 중 적어도 하나가 충족될 때마다 수행될 수 있다.The testing of communication performance with the plurality of external display devices may include at least one of a condition in which the display device is booted, a condition in which reproduction of content being played on the display device is terminated, a condition in which the next content is reproduced, and a condition in which repeated reproduction is performed. This can be done whenever one is satisfied.
이상의 각 단계는 상술한 다른 도면들에 대한 설명에서 구체적으로 기재한 바 있다. 또한, 상술한 테스트 방법은 도 1 및 도 8의 구성을 가지는 디스플레이 장치에서 구현될 수 있으나 반드시 이에 한정되는 것은 아니며, 다른 구성을 가지는 디스플레이 장치에 의해서도 구현될 수 있다. Each of the above steps has been specifically described in the description of the other drawings described above. In addition, the above-described test method may be implemented in the display device having the configuration of FIGS. 1 and 8 , but is not limited thereto, and may be implemented by a display device having a different configuration.
또한, 이상에서 설명한 각종 테스트 방법들은 그 방법을 수행하기 위한 프로그램 코드의 형태로 기록 매체에 저장되어 배포될 수도 있다. 이러한 기록 매체가 디스플레이 장치에 탑재되거나, 네트워크를 통해 온라인 상으로 다운로드되어 실행되면, 상술한 바와 같은 다양한 모드에서의 테스트 동작을 수행할 수 있다. In addition, the various test methods described above may be stored and distributed in a recording medium in the form of a program code for performing the method. When the recording medium is mounted on the display device or downloaded online through a network and executed, the test operation in various modes as described above may be performed.
여기서, 기록 매체는, ROM, RAM, 메모리 칩, 메모리 카드, 외장형 하드, 하드, CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 다양한 유형의 컴퓨터 판독 가능 매체가 될 수 있다. Here, the recording medium may be various types of computer-readable media such as ROM, RAM, memory chip, memory card, external hard drive, hard drive, CD, DVD, magnetic disk, or magnetic tape.
이상 첨부 도면을 참고하여 본 발명에 대해서 설명하였지만 본 발명의 권리범위는 후술하는 특허청구범위에 의해 결정되며 전술한 실시예 및/또는 도면에 제한되는 것으로 해석되어서는 아니 된다. 그리고 특허청구범위에 기재된 발명의, 당업자에게 자명한 개량, 변경 및 수정도 본 발명의 권리범위에 포함된다는 점이 명백하게 이해되어야 한다.The present invention has been described above with reference to the accompanying drawings, but the scope of the present invention is determined by the following claims and should not be construed as being limited to the above-described embodiments and/or drawings. And it should be clearly understood that improvements, changes and modifications obvious to those skilled in the art of the invention described in the claims are also included in the scope of the present invention.

Claims (15)

  1. 불량 테스트 기능을 탑재한 디스플레이 장치에 있어서,In the display device equipped with a defect test function,
    디스플레이 패널 및 터치 센서를 포함하는 디스플레이; a display including a display panel and a touch sensor;
    상기 터치 센서로부터 제공되는 터치 신호에 따라 동작하는 소프트웨어 및 테스트 이미지가 저장된 메모리; 및a memory storing software and a test image operating according to a touch signal provided from the touch sensor; and
    프로세서;를 포함하며,processor; including;
    상기 프로세서는,The processor is
    상기 소프트웨어의 불량을 테스트하기 위한 모드가 실행되면 상기 테스트 이미지에 대응되는 가상의 터치 신호를 상기 소프트웨어에 제공하여 상기 가상의 터치 신호에 대응되는 이미지를 생성하고, 상기 생성된 이미지 및 상기 테스트 이미지를 비교하여 상기 소프트웨어의 불량 여부를 판단하는, 디스플레이 장치.When the mode for testing the failure of the software is executed, a virtual touch signal corresponding to the test image is provided to the software to generate an image corresponding to the virtual touch signal, and the generated image and the test image are A display device that compares the software to determine whether the software is defective.
  2. 제1항에 있어서, According to claim 1,
    상기 가상의 터치 신호는, The virtual touch signal is
    상기 테스트 이미지를 상기 디스플레이 패널에 표시하기 위하여 입력되는 터치 위치, 터치 시간 및 터치 타입을 정의하기 위하여 생성된 신호인, 디스플레이 장치. A display device, which is a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display panel.
  3. 제1항에 있어서,According to claim 1,
    상기 프로세서는,The processor is
    상기 터치 센서의 불량을 테스트하기 위한 모드가 실행되면, When the mode for testing the failure of the touch sensor is executed,
    상기 테스트 이미지를 상기 디스플레이 패널에 표시하고, 상기 테스트 이미지에 따라 사용자 터치 조작이 이루어지면, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과와 상기 테스트 이미지에 기초하여, 상기 터치 센서의 불량을 테스트하는, 디스플레이 장치.The test image is displayed on the display panel, and when a user touch operation is performed according to the test image, the failure of the touch sensor is tested based on a detection result of the touch sensor for the user touch operation and the test image which is a display device.
  4. 제3항에 있어서,4. The method of claim 3,
    상기 프로세서는,The processor is
    상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 상기 디스플레이 패널에 표시하고, 상기 터치 궤적 이미지 및 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라 상기 터치 센서의 불량을 테스트하는, 디스플레이 장치.Displaying a touch trace image on the display panel according to the detection result of the touch sensor for the user's touch manipulation, comparing the touch trace image and the test image, and testing the failure of the touch sensor according to the matching rate between images , display device.
  5. 제1항에 있어서,According to claim 1,
    상기 테스트 이미지는,The test image is
    기 설정된 패턴에 기초한 데이터 값들을 각각 가지는 복수의 격자들을 포함하는 이미지이며, It is an image including a plurality of grids each having data values based on a preset pattern,
    상기 프로세서는,The processor is
    상기 테스트 이미지에 포함된 각 격자들의 좌표, 상기 각 격자들의 데이터 값에 대응되는 터치 시간 및 터치 타입을 정의하는 상기 가상의 터치 신호를 생성하여 상기 소프트웨어에 제공하며,Coordinates of each grid included in the test image, a touch time corresponding to a data value of each grid, and the virtual touch signal defining a touch type are generated and provided to the software;
    상기 가상의 터치 신호에 대응되는 이미지가 상기 소프트웨어에 의해 생성되면, 상기 생성된 이미지 및 상기 테스트 이미지를 서로 대응되는 격자 단위로 비교하여, 일치되는 데이터 값을 가지는 격자들의 비율을 산출하며, 상기 비율에 기초하여 상기 소프트웨어의 불량 여부를 판단하는, 디스플레이 장치. When the image corresponding to the virtual touch signal is generated by the software, the generated image and the test image are compared in grid units corresponding to each other to calculate a ratio of grids having matching data values, the ratio Determining whether the software is defective based on the display device.
  6. 제1항에 있어서,According to claim 1,
    상기 프로세서는,The processor is
    상기 소프트웨어가 불량인 것으로 식별되면, 소프트웨어 업데이트 정보를 상기 디스플레이에 표시하는, 디스플레이 장치.If the software is identified as defective, displaying software update information on the display.
  7. 제1항에 있어서,According to claim 1,
    외부 서버와 통신을 수행하기 위한 통신부;를 더 포함하며,It further includes; a communication unit for performing communication with an external server,
    상기 프로세서는,The processor is
    상기 소프트웨어가 불량인 것으로 식별되면, 상기 통신부를 통해서 상기 외부 서버로 소프트웨어 불량에 대한 정보를 전송하는, 디스플레이 장치.When it is identified that the software is defective, the display device transmits information about the software defect to the external server through the communication unit.
  8. 제1항에 있어서,According to claim 1,
    복수의 외부 디스플레이 장치와 통신하기 위한 인터페이스;를 더 포함하고,Further comprising; an interface for communicating with a plurality of external display devices;
    상기 프로세서는,The processor is
    상기 복수의 외부 디스플레이 장치로 송신하는 이미지 및 상기 복수의 외부 디스플레이 장치로부터 수신되는 이미지와 상기 메모리에 기 저장된 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라서 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는, 디스플레이 장치.By comparing the image transmitted to the plurality of external display apparatuses and the image received from the plurality of external display apparatuses with the test image previously stored in the memory, communication performance with the plurality of external display apparatuses is improved according to the image matching rate. Testing, display device.
  9. 제8항에 있어서,9. The method of claim 8,
    상기 프로세서는, The processor is
    상기 이미지간 일치율을 지속적으로 모니터링하며, 상기 이미지간 일치율이 임계비율 미만이면 에러 메시지를 상기 디스플레이를 통해 표시하는 디스플레이 장치. A display device for continuously monitoring the matching rate between images, and displaying an error message through the display when the matching rate between images is less than a threshold ratio.
  10. 제8항에 있어서,9. The method of claim 8,
    상기 프로세서는, 상기 디스플레이 장치가 부팅되는 조건, 상기 디스플레이 장치에서 재생되던 컨텐츠의 재생이 종료되는 조건, 다음 컨텐츠가 재생되는 조건, 반복 재생이 수행되는 조건 중 적어도 하나가 충족되면, 상기 복수의 외부 디스플레이 장치와의 통신 성능을 테스트하는, 디스플레이 장치. When at least one of a condition for booting the display device, a condition for terminating the reproduction of the content being reproduced on the display device, a condition for reproducing the next content, and a condition for repeatedly performing replay, the processor is configured to A display device for testing communication performance with a display device.
  11. 터치 센서를 포함하며, 상기 터치 센서로부터 제공되는 터치 신호에 따라 동작하는 소프트웨어가 설치된 디스플레이 장치의 테스트 방법에 있어서, In the test method of a display device including a touch sensor, the software operating according to the touch signal provided from the touch sensor is installed,
    상기 소프트웨어의 불량을 테스트하기 위한 모드가 실행되면, 상기 디스플레이 장치에 저장된 테스트 이미지에 대응되는 가상의 터치 신호를 생성하는 단계;generating a virtual touch signal corresponding to a test image stored in the display device when a mode for testing the software defect is executed;
    상기 소프트웨어가 상기 가상의 터치 신호에 따라 이미지를 생성하는 단계; 및generating, by the software, an image according to the virtual touch signal; and
    상기 생성된 이미지 및 상기 테스트 이미지를 비교하여 상기 소프트웨어의 불량 여부를 판단하는 단계;를 포함하는 테스트 방법. and determining whether the software is defective by comparing the generated image with the test image.
  12. 제11항에 있어서, 12. The method of claim 11,
    상기 가상의 터치 신호는, The virtual touch signal is
    상기 테스트 이미지를 상기 디스플레이 장치에 표시하기 위하여 입력되는 터치 위치, 터치 시간 및 터치 타입을 정의하기 위하여 생성된 신호인, 테스트 방법. and a signal generated to define a touch position, a touch time, and a touch type input to display the test image on the display device.
  13. 제11항에 있어서,12. The method of claim 11,
    상기 터치 센서의 불량을 테스트하기 위한 모드가 실행되면, 상기 테스트 이미지를 표시하는 단계;displaying the test image when a mode for testing the failure of the touch sensor is executed;
    상기 테스트 이미지에 따라 사용자 터치 조작이 이루어지면, 상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과와 상기 테스트 이미지에 기초하여, 상기 터치 센서의 불량을 테스트하는 단계;를 더 포함하는, 테스트 방법.When a user touch manipulation is performed according to the test image, testing the failure of the touch sensor based on a detection result of the touch sensor for the user touch manipulation and the test image; further comprising a test method.
  14. 제13항에 있어서,14. The method of claim 13,
    상기 터치 센서의 불량을 테스트하는 단계는,Testing the failure of the touch sensor comprises:
    상기 사용자 터치 조작에 대한 상기 터치 센서의 감지 결과에 따라 터치 궤적 이미지를 표시하는 단계;displaying a touch trace image according to a detection result of the touch sensor for the user's touch manipulation;
    상기 터치 궤적 이미지 및 상기 테스트 이미지를 비교하여, 이미지간 일치율에 따라 상기 터치 센서의 불량을 테스트하는 단계;를 포함하는, 테스트 방법.Comparing the touch trace image and the test image, the step of testing the failure of the touch sensor according to the image matching rate; test method comprising a.
  15. 제12항에 있어서,13. The method of claim 12,
    상기 테스트 이미지는,The test image is
    기 설정된 패턴에 기초한 데이터 값들을 각각 가지는 복수의 격자들을 포함하는 이미지이며, It is an image including a plurality of grids each having data values based on a preset pattern,
    상기 소프트웨어의 불량 여부를 판단하는 단계는, The step of determining whether the software is defective,
    상기 생성된 이미지 및 상기 테스트 이미지를 서로 대응되는 격자 단위로 비교하는 단계;comparing the generated image and the test image in lattice units corresponding to each other;
    일치되는 데이터 값을 가지는 격자들의 비율을 산출하는 단계; 및calculating a proportion of grids having matching data values; and
    상기 비율에 기초하여 상기 소프트웨어의 불량 여부를 판단하는 단계;를 포함하는, 테스트 방법.Determining whether the software is defective based on the ratio; including a test method.
PCT/KR2021/006343 2020-07-17 2021-05-21 Display device having defect test function and test method thereof WO2022014847A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2020-0088971 2020-07-17
KR1020200088971A KR20220010281A (en) 2020-07-17 2020-07-17 Display apparatus with defect testing and Testing method thereof

Publications (1)

Publication Number Publication Date
WO2022014847A1 true WO2022014847A1 (en) 2022-01-20

Family

ID=79554871

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/006343 WO2022014847A1 (en) 2020-07-17 2021-05-21 Display device having defect test function and test method thereof

Country Status (2)

Country Link
KR (1) KR20220010281A (en)
WO (1) WO2022014847A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120117595A (en) * 2011-04-16 2012-10-24 비티에스테크놀로지스(주) Touch screen base user interface test apparatus and test method
KR101671835B1 (en) * 2015-07-17 2016-11-04 주식회사 지2터치 Apparatus and method for non-touch testing touch screen module
KR20180061883A (en) * 2016-11-30 2018-06-08 엘지디스플레이 주식회사 Display panel
KR20190062785A (en) * 2017-11-29 2019-06-07 엘지디스플레이 주식회사 Touch sensing device and image display device using the same
KR102020981B1 (en) * 2013-01-28 2019-09-11 엘지디스플레이 주식회사 Display Device Included Touch Screen and Method for Inspect The Touch Screen

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120117595A (en) * 2011-04-16 2012-10-24 비티에스테크놀로지스(주) Touch screen base user interface test apparatus and test method
KR102020981B1 (en) * 2013-01-28 2019-09-11 엘지디스플레이 주식회사 Display Device Included Touch Screen and Method for Inspect The Touch Screen
KR101671835B1 (en) * 2015-07-17 2016-11-04 주식회사 지2터치 Apparatus and method for non-touch testing touch screen module
KR20180061883A (en) * 2016-11-30 2018-06-08 엘지디스플레이 주식회사 Display panel
KR20190062785A (en) * 2017-11-29 2019-06-07 엘지디스플레이 주식회사 Touch sensing device and image display device using the same

Also Published As

Publication number Publication date
KR20220010281A (en) 2022-01-25

Similar Documents

Publication Publication Date Title
WO2017034345A1 (en) Wireless terminal communicable with external device and server and software updating method thereof
KR101027971B1 (en) Mobile communication terminal capable of testing application and method thereof
WO2018128389A1 (en) Electronic device and method for displaying history of executed application thereof
CN103793323B (en) The automatic testing equipment and its automatic test approach of embedded software
WO2016126094A1 (en) Multi-display based device
WO2017142195A1 (en) Electronic device and method for switching and aligning applications thereof
WO2012091384A2 (en) Method for operating a portable terminal
WO2017052149A1 (en) Display apparatus and method for controlling display apparatus thereof
WO2019057089A1 (en) Network card image packet capture method, terminal, and readable storage medium
US10126879B2 (en) Testing method of touch device and system thereof
WO2014092310A1 (en) Electronic apparatus, and method of controlling the same
CN107765922B (en) Card screen detection and solution method, mobile terminal and computer readable storage medium
US11010213B2 (en) Electronic device and method for providing event management service
US8677433B2 (en) Endurance testing of a content processing device
WO2022014847A1 (en) Display device having defect test function and test method thereof
CN110895509A (en) Test processing method and device, electronic equipment and storage medium
WO2017014447A1 (en) Electronic device and method of controlling same
CN106789472A (en) Consumer electronics control CEC function detecting methods, apparatus and system
CN115480974A (en) Method and device for testing device interface, electronic device and storage medium
WO2021020711A1 (en) Electronic device for predicting defect and method for controlling the electronic device
US11314570B2 (en) Internet-of-things-associated electronic device and control method therefor, and computer-readable recording medium
WO2020022616A1 (en) Electronic device and operating method thereof
CN113810771B (en) Display device and display method of network connection diagnosis result
WO2022173155A1 (en) Electronic device for performing self-diagnosis using self-diagnosis application, and method for controlling same
WO2018074787A1 (en) Method for providing content and electronic device therefor

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21842129

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21842129

Country of ref document: EP

Kind code of ref document: A1