KR102100409B1

KR102100409B1 - Image display method

Info

Publication number: KR102100409B1
Application number: KR1020190054568A
Authority: KR
Inventors: 임국찬; 배용우; 신동엽; 신승민; 신승호; 이학순; 전진수
Original assignee: 에스케이텔레콤 주식회사
Priority date: 2019-05-09
Filing date: 2019-05-09
Publication date: 2020-04-13
Also published as: KR20190055040A

Abstract

본 발명에 개시된 2개 이상의 디스플레이를 구비한 멀티 디스플레이 장치에서 영상을 표시하는 방법은, 영상 중에서 제 1 디스플레이 장치와 제 2 디스플레이 장치의 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는지를 판단하는 단계와, 경계 영역 영상 내의 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입함으로써, 경계 영역 영상이 크기가 증가되어 표시되도록 재생하는 단계를 포함한다.A method of displaying an image in a multi-display device having two or more displays disclosed in the present invention determines whether there is a boundary area image to be displayed, including a boundary area between the first display device and the second display device. And generating and inserting dummy data at a position corresponding to the boundary area in the boundary area image, thereby reproducing the boundary area image to be displayed with an increase in size.

Description

Video display method {IMAGE DISPLAY METHOD}

본 발명은 영상 표시 방법에 관한 것으로, 복수의 디스플레이를 포함하는 멀티 디스플레이 장치에서 영상을 표시하는 방법에 관한 것이다.The present invention relates to an image display method, and relates to a method of displaying an image in a multi-display device including a plurality of displays.

멀티 디스플레이 장치는 다양한 영상들을 복수의 디스플레이 각각에 표시할 수 있을 뿐만 아니라, 분할된 영상들을 복수의 디스플레이에 표시하여 단일의 전체 영상을 표시할 수도 있다.The multi-display device may display various images on each of the plurality of displays, and may display divided images on a plurality of displays to display a single whole image.

멀티 디스플레이 장치는 전체 영상을 복수의 부분 영상으로 분할하여 복수의 디스플레이에 분배하는 분배기를 포함한다. 분배기는 전체 영상을 설정된 개수의 분할 영상들로 나누고, 분할 영상들을 지정된 디스플레이에 제공하여, 멀티 디스플레이 장치에 전체 영상이 표시되도록 한다.The multi-display device includes a divider that divides an entire image into a plurality of partial images and distributes the images to a plurality of displays. The divider divides the entire image into a set number of divided images, and provides the divided images to a designated display so that the entire image is displayed on a multi-display device.

그런데, 복수의 디스플레이를 최대한 서로 인접하게 배치하더라도 디스플레이의 베젤(bezel)로 인해 베젤을 포함하는 경계 영역에서는 필연적으로 화면 왜곡이 발생한다.However, even if a plurality of displays are disposed as close to each other as possible, screen distortion inevitably occurs in a boundary region including the bezel due to the bezel of the display.

공개특허공보 제10-2012-0114318호, 공개일자 2012년 10월 16일.Publication Patent Publication No. 10-2012-0114318, Publication date October 16, 2012.

본 발명은 멀티 디스플레이 장치에서 상호 인접하게 배치된 디스플레이들의 경계 영역을 걸쳐서 표시하여야 하는 영상 데이터에 대해 선별적으로 변화 시켜 표시하는 영상 표시 방법을 제공한다.The present invention provides an image display method for selectively changing and displaying image data to be displayed across a boundary area of displays disposed adjacent to each other in a multi-display device.

본 발명의 일 관점에 따르면, 2개 이상의 디스플레이를 구비한 멀티 디스플레이 장치에서 영상을 표시하는 방법은, 상기 영상 중에서 단일 영상이 서로 인접한 제 1 디스플레이와 제 2 디스플레이의 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는지를 판단하는 단계와, 상기 경계 영역 영상 내의 상기 경계 영역에 대응하는 위치에 더미(dummy) 데이터를 생성하여 삽입함으로써, 상기 경계 영역 영상이 크기가 증가되어 표시되도록 재생하는 단계를 포함한다.According to an aspect of the present invention, a method of displaying an image in a multi-display device having two or more displays includes displaying a boundary between first and second displays in which a single image is adjacent to each other. Determining whether there is a boundary area image, and generating and inserting dummy data at a position corresponding to the boundary area in the boundary area image, thereby reproducing the boundary area image to be increased in size and displayed. Includes.

본 발명의 다른 관점에 따르면, 컴퓨터 판독 가능한 기록매체에는 상기 멀티 디스플레이 장치에서 영상을 표시하는 방법에 따른 각각의 단계를 수행하는 명령어를 포함하는 컴퓨터 프로그램이 기록된다.According to another aspect of the present invention, a computer program including instructions for performing each step according to a method for displaying an image in the multi-display device is recorded on a computer-readable recording medium.

본 발명의 실시예에 의하면, 멀티 디스플레이 장치에서 상호 인접하게 배치된 디스플레이들의 경계 영역을 걸쳐서 표시하여야 하는 영상 데이터를 분석하여 변화 시킬 필요가 있는 변화 필요 영상을 선정한다. 선정된 변화 필요 영상에 대해서는 더미 데이터를 추가하여 표시함으로써, 영상 데이터에 포함된 오브젝트(object)에 대한 가독성이 향상되도록 한다.According to an exemplary embodiment of the present invention, image data that needs to be changed is selected by analyzing image data to be displayed across a boundary area of displays arranged adjacent to each other in a multi-display device. For the selected change-required image, dummy data is added and displayed to improve readability of an object included in the image data.

예를 들어, 컴퓨터에서 실행 중인 응용프로그램에 대응하여 멀티 디스플레이 장치에 표시되는 응용프로그램 화면창에 문서가 포함된 경우를 고려한다. 원래의 영상을 그대로 표시한다고 가정할 때에 글자가 디스플레이들의 경계 영역을 걸쳐서 표시되어야 한다면 이를 변화 필요 영상으로 선정한다. 그리고, 디스플레이들의 경계 영역을 비켜서 변화 필요 영상의 글자를 표시함으로써, 글자에 대한 가독성을 향상시킨다.For example, consider a case where a document is included in an application program window displayed on a multi-display device corresponding to an application program running on a computer. Assuming that the original image is displayed as it is, if the text should be displayed across the boundary area of the displays, it is selected as the image to be changed. In addition, by making the border area of the displays out to display the text of the image requiring change, the readability of the text is improved.

도 1은 본 발명의 일 실시예에 따른 영상 표시 방법을 수행할 수 있는 멀티 디스플레이 장치의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 영상 표시 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 일 실시예에 따라 멀티 디스플레이 장치에 경계 영역 영상이 표시되는 예를 나타낸 것이다.
도 4는 본 발명의 일 실시예에 따라 경계 영역 영상에 더미 데이터가 삽입되는 예를 나타낸 것이다.
도 5는 본 발명의 일 실시예에 따라 렌더링 버퍼와 디스플레이 버퍼에 저장되는 경계 영역 영상의 예와 멀티 디스플레이 장치에 표시되는 경계 영역 영상의 예를 나타낸 것이다.1 is a configuration diagram of a multi-display device capable of performing an image display method according to an embodiment of the present invention.
2 is a flowchart illustrating an image display method according to an embodiment of the present invention.
3 illustrates an example in which a boundary area image is displayed on a multi-display device according to an embodiment of the present invention.
4 illustrates an example in which dummy data is inserted into a boundary area image according to an embodiment of the present invention.
5 illustrates an example of a boundary area image stored in a rendering buffer and a display buffer and an example of a boundary area image displayed on a multi-display device according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명의 범주는 청구항에 의해 정의될 뿐이다.Advantages and features of the present invention, and methods for achieving them will be clarified with reference to embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various forms, and only these embodiments allow the disclosure of the present invention to be complete, and have ordinary knowledge in the art to which the present invention pertains. It is provided to fully inform the person of the scope of the invention, and the scope of the invention is only defined by the claims.

본 발명의 실시예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명은 본 발명의 실시예들을 설명함에 있어 실제로 필요한 경우 외에는 생략될 것이다. 그리고 후술되는 용어들은 본 발명의 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In describing the embodiments of the present invention, detailed descriptions of known functions or configurations will be omitted except when actually necessary in describing the embodiments of the present invention. In addition, terms to be described later are terms defined in consideration of functions in an embodiment of the present invention, which may vary according to a user's or operator's intention or practice. Therefore, the definition should be made based on the contents throughout this specification.

도 1은 본 발명의 일 실시예에 따른 영상 표시 방법을 수행할 수 있는 멀티 디스플레이 장치의 구성도이다.1 is a configuration diagram of a multi-display device capable of performing an image display method according to an embodiment of the present invention.

도 1을 참조하면, 일 실시예에 따른 멀티 디스플레이 장치(100)는 디스플레이부(110), 멀티 터치 감지부(120), 중앙 제어부(130) 및 영상 처리부(140)를 포함한다.Referring to FIG. 1, the multi-display device 100 according to an embodiment includes a display unit 110, a multi-touch sensing unit 120, a central control unit 130, and an image processing unit 140.

디스플레이부(110)는 멀티 터치 프레임(111), 강화유리(112), 복수의 디스플레이를 포함하는 디스플레이 모듈(113), 벽면 고정 브라켓(114)을 포함한다. 멀티 터치 프레임(111)에는 주연부를 따라 복수의 발광소자와 수광소자가 교번하여 배치되며, 발광소자에서 광이 조사되면 대향하는 위치에 배치된 수광소자가 수광하여 멀티 터치 감지부(120)에 제공한다. 강화유리(112)는 디스플레이 모듈(113)이 외력에 의해 손상되지 않도록 보호한다. 디스플레이 모듈(113)은 영상 처리부(140)로부터 각 디스플레이에 대응하여 전송되는 영상 데이터를 각 디스플레이에 출력한다. 벽면 고정 브라켓(114)은 멀티 터치 프레임(111), 강화유리(112) 및 디스플레이 모듈(113)을 벽면에 고정시켜 지지하는 역할을 한다. 여기서, 디스플레이 모듈(113)은 디스플레이들의 경계선에 가요성 필름 형태의 디스플레이 바(bar)를 별도로 설치한 심리스 디스플레이 장치일 수 있다.The display 110 includes a multi-touch frame 111, tempered glass 112, a display module 113 including a plurality of displays, and a wall fixing bracket 114. In the multi-touch frame 111, a plurality of light-emitting elements and a light-receiving element are alternately arranged along the periphery, and when light is irradiated from the light-emitting element, the light-receiving elements arranged at opposite positions receive the light and provide it to the multi-touch sensing unit 120 do. The tempered glass 112 protects the display module 113 from being damaged by external force. The display module 113 outputs image data transmitted corresponding to each display from the image processing unit 140 to each display. The wall fixing bracket 114 serves to fix and support the multi-touch frame 111, the tempered glass 112, and the display module 113 on the wall. Here, the display module 113 may be a seamless display device in which a display bar in the form of a flexible film is separately installed on the boundary of the displays.

멀티 터치 감지부(120)는 멀티 터치 프레임(111)로부터 멀티 터치 동작에 따른 신호를 수신하며, 수신된 멀티 터치 신호를 중앙 제어부(130)에 전달한다.The multi-touch sensing unit 120 receives a signal according to a multi-touch operation from the multi-touch frame 111 and transmits the received multi-touch signal to the central control unit 130.

중앙 제어부(130)는 멀티 터치 감지부(120)로부터 전달되는 멀티 터치 신호에 기초하여 멀티 터치 위치 및 각종 인터랙션을 판별하며, 영상 처리부(140)에 의한 영상 처리 과정을 제어하여, 디스플레이부(110)에 의해 영상이 표시되도록 한다.The central control unit 130 determines the multi-touch location and various interactions based on the multi-touch signal transmitted from the multi-touch detection unit 120, controls the image processing process by the image processing unit 140, and displays the 110 ) To display the image.

이러한 중앙 제어부(130)는 멀티 디스플레이 장치(100)에서 구동 중인 적어도 하나 이상의 응용프로그램에 대응하는 적어도 하나 이상의 응용프로그램 화면창이 디스플레이부(110)의 디스플레이 모듈(113)에 표시되도록 제어한다.The central control unit 130 controls such that at least one application program window corresponding to at least one application program running in the multi-display device 100 is displayed on the display module 113 of the display unit 110.

그리고, 중앙 제어부(130)는 응용프로그램 화면창의 이동에 관련한 인터랙션 이벤트가 발생하는지를 모니터링한다. 중앙 제어부(130)는 인터랙션 이벤트가 경계 영역을 걸쳐서 발생하는 경우에 디스플레이부(110)에 표시하여야 하는 영상 중에서 디스플레이 모듈(113)에 포함된 복수의 디스플레이 사이에 있는 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는지를 판단한다. 여기서, 복수의 디스플레이가 좌우로 인접한 경우에, 경계 영역이라 함은 상호간의 경계선을 포함하고, 좌측 디스플레이의 우측 가장자리 디스플레이 일부면 및/또는 우측 디스플레이의 좌측 가장자리 디스플레이 일부면을 포함한다. 또는, 복수의 디스플레이가 상하로 인접한 경우에, 경계 영역이라 함은 상호간의 경계선을 포함하고, 상측 디스플레이의 하측 가장자리 디스플레이 일부면 및/또는 하측 디스플레이의 상측 디스플레이 일부면을 포함한다. 또한, 오브젝트라 함은 소정의 형상을 갖는 텍스트, 캐릭터 등을 포함한다. 오브젝트는 오브젝트가 포함되어 있는 영상의 중심좌표와 별도의 표시좌표를 가짐으로써, 표시 좌표를 변경 시킬 경우, 오브젝트가 포함되어 있는 영상의 상단, 하단, 좌단, 우단으로부터 오브젝트까지의 거리 중 적어도 하나가 변경되는 특징을 갖는다.Then, the central control unit 130 monitors whether an interaction event related to the movement of the application program window occurs. When the interaction event occurs across the boundary area, the central controller 130 should display the boundary area between the plurality of displays included in the display module 113 among the images to be displayed on the display unit 110. It is determined whether there is a boundary region image. Here, when a plurality of displays are adjacent to the left and right, the boundary area includes a boundary line between each other, and includes a part of the right edge display part of the left display and / or a part of the left edge display part of the right display. Or, when a plurality of displays are vertically adjacent to each other, the boundary area includes a boundary line between each other, and includes a part of the lower edge display of the upper display and / or a part of the upper display of the lower display. Also, the object includes text, characters, and the like having a predetermined shape. The object has a display coordinate that is separate from the center coordinate of the image that contains the object. When changing display coordinates, at least one of the distances from the top, bottom, left, and right ends of the image containing the object to the object It has characteristics that change.

아울러, 중앙 제어부(130)는 경계 영역 영상 내의 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입함으로써, 경계 영역 영상의 크기가 증가되어 경계 영역 영상 내의 오브젝트가 경계 영역을 포함하지 않는 위치에 표시되도록 영상 처리부(140)를 제어한다.In addition, the central controller 130 generates and inserts dummy data at a position corresponding to the boundary area in the boundary area image, thereby increasing the size of the boundary area image and displaying the object in the boundary area image at a position not including the boundary area. The image processing unit 140 is controlled as much as possible.

한편, 중앙 제어부(130)는 디스플레이부(110)에 표시하여야 하는 영상 중에서 디스플레이 모듈(113)에 포함된 복수의 디스플레이 사이에 있는 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는 경우, 경계 영역 영상 내의 영상데이터의 변화량을 기초로 경계 영역 영상 내의 오브젝트를 변화 시킬 필요가 있는 변화 필요 영상인지를 결정할 수 있고, 경계 영역 영상이 변화 필요 영상일 경우에 경계 영역 영상 내의 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입할 수도 있다.Meanwhile, when there is an image of a boundary area to be displayed including a boundary area between a plurality of displays included in the display module 113, the central control unit 130 includes a boundary area among the images to be displayed on the display unit 110. Based on the amount of change in the image data in the image, it is possible to determine whether the object in the boundary region image is a change-needed image, and when the boundary region image is a change-needed image, a location corresponding to the boundary region in the boundary region image You can also create and insert dummy data.

한편, 디스플레이 모듈(113)이 디스플레이들의 경계선에 가요성 필름 형태의 디스플레이 바를 별도로 설치한 심리스 디스플레이 장치일 경우에, 중앙 제어부(130)는 경계 영역에 표시되는 영상의 색상과 유사한 색상을 디스플레이 바에 출력하는 심리스 디스플레이 제어를 수행할 수도 있다.On the other hand, when the display module 113 is a seamless display device in which a display bar in the form of a flexible film is separately installed on the boundary of the displays, the central control unit 130 outputs a color similar to the color of the image displayed in the boundary area to the display bar. You can also perform seamless display control.

영상 처리부(140)는 중앙 제어부(130)의 제어 신호에 따라 디스플레이부(110)에 표시하여야 하는 영상을 처리하며, 디스플레이부(110)를 구성하는 복수의 디스플레이에 각각 표시하고자 하는 영상 데이터를 분배하여 디스플레이 모듈(113)에 제공한다. 영상 처리부(140)의 렌더링 버퍼(142)에 저장되는 경계 영역 영상에는 디스플레이 모듈(113)에 포함된 복수의 디스플레이 사이에 있는 경계 영역에 대한 화소 정보 및 더미 데이터가 포함된다. 영상 처리부(140)의 디스플레이 버퍼(141)에 저장되는 경계 영역 영상에는 디스플레이 모듈(113)에 포함된 복수의 디스플레이 사이에 있는 경계 영역에 대한 화소 정보는 포함되지 않고 더미 데이터만 포함된다. 분배기(143)는 디스플레이 버퍼(141)에 저장된 경계 영역 영상을 디스플레이부(110)의 디스플레이 모듈(113)에 전송한다.The image processing unit 140 processes an image to be displayed on the display unit 110 according to a control signal from the central control unit 130 and distributes image data to be displayed on a plurality of displays constituting the display unit 110. It is provided to the display module 113. The boundary area image stored in the rendering buffer 142 of the image processing unit 140 includes pixel information and dummy data for a boundary area between a plurality of displays included in the display module 113. The boundary area image stored in the display buffer 141 of the image processing unit 140 does not include pixel information on a boundary area between a plurality of displays included in the display module 113 but only dummy data. The distributor 143 transmits the boundary area image stored in the display buffer 141 to the display module 113 of the display 110.

도 2는 본 발명의 일 실시예에 따른 영상 표시 방법을 설명하기 위한 흐름도이다. 이하의 설명에 있어서, 단계 S209 및 S211은 일 실시예에 따라 수행하는 것이며, 본 발명의 다른 실시예에 의하면 단계 S209 및 S211은 생략될 수 있으나 아래에서는 포함하는 예에 대해 우선 설명하기로 한다.2 is a flowchart illustrating an image display method according to an embodiment of the present invention. In the following description, steps S209 and S211 are performed according to an embodiment, and according to another embodiment of the present invention, steps S209 and S211 may be omitted, but the following examples will be described first.

도 2를 참조하면, 일 실시예에 따른 영상 표시 방법은, 멀티 디스플레이 장치에서 구동 중인 적어도 하나 이상의 응용프로그램에 대응하는 적어도 하나 이상의 응용프로그램 화면창을 디스플레이 모듈을 통해 표시하는 단계(S201)를 포함한다.Referring to FIG. 2, an image display method according to an embodiment includes displaying at least one application program window corresponding to at least one application program running in a multi-display device through a display module (S201). do.

그리고, 일 실시예에 따른 영상 표시 방법은, 응용프로그램 화면창의 이동에 관련한 인터랙션 이벤트가 발생하는지를 모니터링하는 단계(S203)를 더 포함한다.In addition, the image display method according to an embodiment further includes monitoring whether an interaction event related to the movement of the application program window occurs (S203).

이어서, 일 실시예에 따른 영상 표시 방법은 모니터링하는 단계에서, 인터랙션 이벤트가 경계 영역을 걸쳐서 발생하는 경우에 디스플레이 모듈에 포함된 디스플레이들의 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는지를 판단하는 단계(S205 및 S207)를 더 포함한다. 여기서, 멀티 디스플레이 장치에 표시될 단일 영상의 전체 좌표 정보에 따른 영상 표시 범위 내에 경계 영역의 좌표가 포함되면 경계 영역 영상이 있는 것으로 판단할 수 있다.Subsequently, in the image display method according to an embodiment, in the monitoring step, when an interaction event occurs across the boundary area, it is determined whether there is a boundary area image to be displayed including the boundary area of the displays included in the display module. Steps S205 and S207 are further included. Here, when the coordinates of the boundary area are included in the image display range according to the entire coordinate information of the single image to be displayed on the multi-display device, it may be determined that the boundary area image exists.

아울러, 일 실시예에 따른 영상 표시 방법은 경계 영역 영상이 있는 경우, 경계 영역 영상 내의 영상데이터의 변화량을 기초로 경계 영역 영상이 변화 시킬 필요가 있는 변화 필요 영상인지를 결정하는 단계(S209, S211)를 더 포함한다. 여기서, 경계 영역 영상 중에서, 임의 화소와 주위 화소들 사이의 화소간 데이터 변화량을 임의 화소를 변경하면서 반복 산출하고, 반복 산출된 화소간 데이터 변화량들의 합계 또는 평균을 이용하여 경계 영역 영상의 데이터 변화율을 산출하며, 산출된 데이터 변화율과 기 설정된 제 1 임계 변화율을 비교한 결과에 기초하여 경계 영역 영상이 변화 필요 영상인지를 판정할 수 있다.In addition, in the image display method according to an embodiment, when there is a border region image, determining whether the border region image is a change-required image that needs to be changed based on a change amount of image data in the border region image (S209, S211) ). Here, among the boundary area images, the amount of change in the inter-pixel data between arbitrary pixels and surrounding pixels is repeatedly calculated while changing the arbitrary pixels, and the data change rate of the boundary region image is calculated using the sum or average of the repeatedly calculated inter-pixel data changes. It is possible to determine whether the boundary region image is a change-needed image based on a result of comparing the calculated data change rate with a preset first threshold change rate.

다음으로, 일 실시예에 따른 영상 표시 방법은 경계 영역 영상이 변화 필요 영상이면, 경계 영역 영상 내의 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입함으로써, 경계 영역 영상 내의 오브젝트가 경계 영역을 포함하지 않는 위치에 표시되도록 하는 단계(S213, S215)를 더 포함한다. 이러한 단계 S213 및 S215에서, 더미 데이터가 삽입됨에 따라 경계 영역 영상의 크기가 증가되어 경계 영역 영상 내의 오브젝트의 표시 위치가 쉬프트된다. 여기서, 영상데이터의 변화량에 기초하여 경계 영역에 평행하는 화소 라인별로 영상데이터의 변화율을 산출하고, 화소 라인별로 산출된 영상데이터의 변화율과 기 설정된 제 2 임계 변화율을 비교한 결과에 기초하여 더미 데이터의 삽입 위치를 결정해 삽입할 수 있다. 또, 경계 영역을 기준으로 하여 인터랙션 이벤트의 이동 방향에 대응하는 방향으로 응용프로그램 화면창이 늘어나도록 더미 데이터를 삽입할 수 있다.Next, in the image display method according to an embodiment, when the boundary region image is a change-needed image, dummy data is generated and inserted at a position corresponding to the boundary region in the boundary region image, so that an object in the boundary region image includes the boundary region. Further comprising the steps (S213, S215) to be displayed in a position that is not. In these steps S213 and S215, as the dummy data is inserted, the size of the boundary area image is increased, and the display position of the object in the boundary area image is shifted. Here, the change rate of the image data is calculated for each pixel line parallel to the boundary area based on the change amount of the image data, and the dummy data is based on a result of comparing the change rate of the image data calculated for each pixel line with a preset second threshold change rate. You can decide where to insert and insert. In addition, dummy data may be inserted such that the application program window increases in a direction corresponding to the direction of movement of the interaction event based on the boundary area.

앞서 언급한 바와 같이, 단계 S209 및 S211은 일 실시예에 따라 수행하는 것이며, 다른 실시예에 의하면 단계 S209 및 S211은 생략될 수 있다. 이 경우에는, 단계 S207에서 복수의 디스플레이 사이에 있는 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있으면, 경계 영역 영상 내의 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입할 수 있다.As described above, steps S209 and S211 are performed according to one embodiment, and according to another embodiment, steps S209 and S211 may be omitted. In this case, if there is a boundary area image to be displayed including a boundary area between a plurality of displays in step S207, dummy data may be generated and inserted at a position corresponding to the boundary area in the boundary area image.

이하, 도 1 내지 도 5를 참조하여 본 발명의 일 실시예에 따른 멀티 디스플레이 장치(100)에서 수행하는 영상 표시 방법에 대해 더 자세히 살펴보기로 한다.Hereinafter, an image display method performed by the multi-display apparatus 100 according to an embodiment of the present invention will be described in more detail with reference to FIGS. 1 to 5.

먼저, 사용자가 멀티 디스플레이 장치(100)의 멀티 터치 프레임(111)의 소정 위치를 터치하여 응용프로그램의 구동을 명령할 수 있으며, 이러한 구동 명령은 멀티 터치 감지부(120)를 통해 중앙 제어부(130)에 전달된다.First, a user may command the driving of an application program by touching a predetermined position of the multi-touch frame 111 of the multi-display device 100, and the driving command is the central control unit 130 through the multi-touch sensing unit 120 ).

그러면, 중앙 제어부(130)는 멀티 터치 감지부(120)를 통해 입력되는 구동 명령에 대응하는 응용프로그램을 구동하며, 응용프로그램의 구동에 따른 응용프로그램 화면창을 표시하도록 영상 처리부(140)를 제어하고, 영상 처리부(140)에 의해 분배된 영상이 디스플레이부(110)에 포함된 디스플레이에 표시된다(S201). 예를 들어, 사용자가 응용프로그램A의 구동을 명령한 경우라면 도 3의 (a)와 같이 디스플레이부(110)에 응용프로그램A에 대응하는 응용프로그램 화면창(301)이 표시된다. 여기서, 응용프로그램 화면창(301)이 표시되는 초기 위치는 임의로 나타낸 것이다.Then, the central control unit 130 drives the application program corresponding to the driving command input through the multi-touch detection unit 120, and controls the image processing unit 140 to display the application program screen window according to the driving of the application program. Then, the image distributed by the image processing unit 140 is displayed on the display included in the display 110 (S201). For example, if the user commands the driving of the application program A, the application program window 301 corresponding to the application program A is displayed on the display 110 as shown in FIG. 3 (a). Here, the initial position where the application program window 301 is displayed is arbitrarily indicated.

이렇게, 멀티 디스플레이 장치(100)의 디스플레이부(110)에 영상이 표시된 상황에서, 중앙 제어부(130)는 응용프로그램 화면창의 이동에 관련한 인터랙션 이벤트가 발생하는지를 모니터링한다(S203).In this way, in a situation in which an image is displayed on the display unit 110 of the multi-display device 100, the central control unit 130 monitors whether an interaction event related to the movement of the application program window occurs (S203).

여기서, 사용자는 멀티 디스플레이 장치(100)의 멀티 터치 프레임(111)에 표시된 응용프로그램 화면창(301)의 표시 위치를 변경시키고자 할 경우에 응용프로그램 화면창(301)을 드래그 조작(302)하거나 사전에 약속된 신호를 입력하여 응용프로그램 화면창(301)의 이동에 관련한 인터랙션 이벤트를 발생시킬 수 있다. 그러면, 이러한 인터랙션 이벤트에 대한 신호가 멀티 터치 감지부(120)를 통해 중앙 제어부(130)에 전달된다.Here, when the user wants to change the display position of the application screen window 301 displayed on the multi-touch frame 111 of the multi-display device 100, drag the operation 302 of the application screen window 301 or An interaction event related to the movement of the application program screen window 301 may be generated by inputting a predetermined signal. Then, the signal for the interaction event is transmitted to the central control unit 130 through the multi-touch sensing unit 120.

그러면, 중앙 제어부(130)는 인터랙션 이벤트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 걸쳐서 발생하였는지를 확인한다. 예를 들어, 드래그 조작(302)의 좌표 정보와 경계 영역의 좌표 정보를 비교한 결과에 기초하여 인터랙션 이벤트가 디스플레이들의 경계 영역을 걸쳐서 발생하였는지를 확인할 수 있다(S205).Then, the central control unit 130 checks whether an interaction event has occurred across the boundary area of the displays included in the display module 113. For example, based on a result of comparing the coordinate information of the drag operation 302 and the coordinate information of the boundary area, it may be confirmed whether an interaction event has occurred across the boundary area of the displays (S205).

다음으로, 중앙 제어부(130)는 인터랙션 이벤트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 걸쳐서 발생하였다고 판단되면, 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 포함하여 표시하여야 하는 경계 영역 영상이 있는지를 판단한다. 여기서, 중앙 제어부(130)는 멀티 디스플레이 장치(100)에 표시될 단일 영상의 전체 좌표 정보에 따른 영상 표시 범위 내에 경계 영역의 좌표가 포함되면 경계 영역 영상이 있는 것으로 판단할 수 있다. 예를 들어, 도 3의 (a)에서 드래그 조작(302)에 의해 도 3의 (b)에 예시한 바와 같이 응용프로그램 화면창(301)을 표시하여야 한다면 경계 영역 영상이 있는 것으로 판단할 수 있다. 아울러, 멀티 디스플레이 장치(100)의 현재의 디스플레이 모드가 전체 화면에 영상을 재생하는 모드인 경우처럼 이미 복수의 디스플레이에 영상이 재생되는 중인 것을 알 수 있는 경우라면 반드시 경계 영역 영상이 존재하기 때문에 경계 영역 영상이 존재하는지를 별도로 파악하지 않을 수도 있다. 한편, 도 2를 참조하여 설명하고 있는 실시예에서는 중앙 제어부(130)가 인터랙션 이벤트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 걸쳐서 발생하였다고 판단되는 경우에 경계 영역 영상이 있는지를 판단하는 실시예를 설명하였으나, 중앙 제어부(130)는 단계 S203 및 단계 S205와는 무관하게, 단계 S201에서 디스플레이들에 영상을 표시하면서 경계 영역 영상이 있는지를 판단할 수도 있다(S207).Next, when it is determined that the interaction event has occurred across the boundary area of the displays included in the display module 113, the central control unit 130 includes the boundary area of the displays included in the display module 113 to display. It is determined whether there is an area image. Here, if the coordinates of the boundary area are included in the image display range according to the entire coordinate information of the single image to be displayed on the multi-display device 100, the central control unit 130 may determine that the boundary area image is present. For example, if the application program window 301 needs to be displayed as illustrated in FIG. 3B by the drag operation 302 in FIG. 3A, it can be determined that there is a boundary area image. . In addition, if it is known that an image is already being played on a plurality of displays, such as when the current display mode of the multi-display device 100 is a mode for reproducing an image on the entire screen, the boundary region image is necessarily present. It may not be possible to separately determine whether an area image exists. On the other hand, in the embodiment described with reference to FIG. 2, the central control unit 130 determines whether there is a boundary area image when it is determined that the interaction event has occurred across the boundary areas of the displays included in the display module 113. Although the embodiment has been described, the central control unit 130 may determine whether there is a boundary area image while displaying images on the displays in step S201, regardless of steps S203 and S205 (S207).

이후, 중앙 제어부(130)는 단계 S207에서 경계 영역 영상이 있다고 판단되면, 일 실시예에 따라, 경계 영역 영상 내의 영상데이터의 변화량을 기초로 경계 영역 영상이 변화 시킬 필요가 있는 변화 필요 영상인지를 결정한다. 예를 들어, 영상데이터의 변화량은 채도의 변화량 또는 색상 주파수의 변화량 등을 포함할 수 있다.Thereafter, if it is determined in step S207 that the boundary area image is present, the central control unit 130 determines whether the boundary area image needs to be changed based on the amount of change in the image data in the boundary area image, according to an embodiment. Decide. For example, the amount of change in image data may include a change in saturation or a change in color frequency.

중앙 제어부(130)에서 경계 영역 영상이 변화 필요 영상인지를 결정하는 과정을 좀 더 자세히 살펴보면, 경계 영역 영상 중에서, 임의 화소와 주위 화소들 사이의 화소간 데이터 변화량을 임의 화소를 변경하면서 반복 산출한다. 예를 들어, 임의 화소를 둘러싸고 있는 8개의 화소와의 데이터 변화량을 산출하며, 이러한 화소간 데이터 변화량을 산출하는 과정을 경계 영역 영상에 포함된 화소의 개수만큼 반복하여 수행하고, 반복 산출된 화소간 데이터 변화량들의 합계 또는 평균을 이용하여 경계 영역 영상의 데이터 변화율을 산출한다(S209). 그리고, 산출된 데이터 변화율과 기 설정된 제 1 임계 변화율을 비교한 결과에 기초하여 경계 영역 영상이 변화 필요 영상인지를 판정한다. 예를 들어, 경계 영역 영상 중에 오브젝트로서 글자가 포함되어 있는 경우에는 오브젝트로서 그림만 포함되는 경우와 비교할 때에 상대적으로 데이터 변화율이 더 높다. 그림은 인접한 화소들이 유사한 채도와 색상을 가질 확률이 높지만 글자는 흑과 백처럼 인접한 화소들의 채도와 색상이 큰 차이를 가질 확률이 높기 때문이다. 그러므로, 중앙 제어부(130)는 경계 영역 영상의 데이터 변화율이 기 설정된 제 1 임계 변화율보다 크면 오브젝트로서 글자가 포함되어 있는 경우라고 인지하여 경계 영역 영상을 변화 필요 영상으로 결정할 수 있다. 이처럼, 글자가 포함된 경우에 변화 필요 영상으로 결정하는 이유는 도 3의 (b)와 같이 응용프로그램 화면창(301)이 표시되면 응용프로그램 화면창(301)의 내부에 있는 글자에 대한 가독성이 매우 낮아지기 때문이다(S211).Looking at the process of determining whether the boundary area image is a change-needed image in more detail, the central control unit 130 repeatedly calculates an amount of change in data between pixels between an arbitrary pixel and surrounding pixels while changing an arbitrary pixel among the boundary area images. . For example, calculating a data change amount with eight pixels surrounding an arbitrary pixel, and repeating the process of calculating the data change amount between pixels as many as the number of pixels included in the boundary region image, and repeatedly calculating the inter-pixel The data change rate of the boundary region image is calculated using the sum or average of the data changes (S209). Then, it is determined whether the boundary region image is a change-needed image based on a result of comparing the calculated data change rate with a preset first threshold change rate. For example, when a text is included as an object in the boundary area image, the rate of data change is relatively higher when compared to the case where only the picture is included as the object. This is because a picture has a high probability that adjacent pixels have similar saturation and color, but a letter has a high probability of having a large difference in saturation and color of adjacent pixels like black and white. Therefore, if the data rate of change of the boundary area image is greater than the first threshold change rate, the central control unit 130 may recognize that the text is included as an object and determine the boundary area image as a change-needed image. As described above, when the text is included, the reason for determining the change-needed image is that when the application program window 301 is displayed as shown in FIG. 3 (b), the readability of the text inside the application program window 301 is unreadable. This is because it becomes very low (S211).

다음으로, 중앙 제어부(130)는 변화 필요 영상으로 판정된 경계 영역 영상에 대해, 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입한다(S213).Next, the central control unit 130 generates dummy data at a position corresponding to the boundary area and inserts it into the boundary area image determined as the change-required image (S213).

중앙 제어부(130)에서 더미 데이터를 삽입하는 과정을 좀 더 자세히 살펴보면, 단계 S209에서 산출된 화소간 영상데이터의 변화량에 기초하여 경계 영역에 평행하는 화소 라인별로 영상데이터의 변화율을 산출하고, 화소 라인별로 산출된 영상데이터의 변화율과 기 설정된 제 2 임계 변화율을 비교한 결과에 기초하여 더미 데이터의 삽입 위치를 결정한다. 예를 들어, 도 3의 (b)에 예시된 응용프로그램 화면창(301)의 화소 라인별 영상데이터의 변화율은 『응용프로그램A』를 포함하는 화소 라인들이 『응용프로그램A』를 포함하는 화소 라인들보다 더 큰 값을 나타낸다. 그러면, 중앙 제어부(130)는 글자 오브젝트를 포함하는 화소 라인의 처음과 끝을 알 수 있으며, 도 4에 예시한 바와 같이 글자 오브젝트를 포함하는 화소 라인들에 더미 데이터(301a)를 삽입하여 새롭게 변형된 응용프로그램 화면창(303)을 생성할 수 있다.Looking at the process of inserting the dummy data in the central control unit 130 in more detail, based on the amount of change in the inter-pixel image data calculated in step S209, the change rate of the image data is calculated for each pixel line parallel to the boundary area, and the pixel line The insertion position of the dummy data is determined based on a result of comparing the change rate of the image data calculated for each time with a preset second threshold change rate. For example, the change rate of image data for each pixel line of the application program window 301 illustrated in FIG. 3B is a pixel line in which pixel lines including "Application A" include "Application A" It shows a larger value than the field. Then, the central control unit 130 can know the beginning and end of the pixel line including the text object, and as illustrated in FIG. 4, the dummy data 301a is inserted into the pixel lines containing the text object to newly transform it. The generated application screen window 303 may be generated.

앞서 언급한 바와 같이, 단계 S209 및 S211은 일 실시예에 따라 수행하는 것이며, 다른 실시예에 의하면 단계 S209 및 S211은 생략될 수 있다. 다른 실시예에 의하면, 중앙 제어부(130)는 단계 S207에서 경계 영역 영상이 있다고 판단되면, 경계 영역 영상에 대해, 경계 영역에 대응하는 위치에 더미 데이터를 생성하여 삽입할 수 있다(S213).As described above, steps S209 and S211 are performed according to one embodiment, and according to another embodiment, steps S209 and S211 may be omitted. According to another embodiment, if it is determined in step S207 that there is a boundary region image, the central controller 130 may generate and insert dummy data in a location corresponding to the boundary region, for the boundary region image (S213).

이어서, 중앙 제어부(130)는 단계 S213에서 더미 데이터가 삽입되어 크기가 증가된 경계 영역 영상에 대해 경계 영역 영상 내의 오브젝트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 포함하지 않는 위치에 표시되도록 영상 처리부(140)를 제어한다. 그리고, 영상 처리부(140)는 디스플레이 모듈(113)에 포함되는 디스플레이들의 경계 영역을 포함하지 않는 위치에 경계 영역 영상 내의 오브젝트가 표시될 수 있도록 영상을 분배한다. 이로써, 디스플레이부(110)에는 경계 영역 영상 내의 오브젝트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 포함하지 않는 위치에 표시된다. 예를 들어, 단계 S213에서 경계 영역을 기준으로 하여 인터랙션 이벤트의 이동 방향에 대응하는 방향으로 응용프로그램 화면창(303)이 늘어나도록 더미 데이터가 삽입되면, 도 3의 (c)와 같이 드래그 조작(302)의 방향으로 늘어난 응용프로그램 화면창(303)이 표시된다(S215).Subsequently, in step S213, the central control unit 130 displays the object in the boundary area image at a position that does not include the boundary areas of the displays included in the display module 113 for the boundary area image whose size is increased by inserting dummy data. The image processing unit 140 is controlled as much as possible. Then, the image processing unit 140 distributes the image so that an object in the boundary region image can be displayed at a position not including the boundary region of the displays included in the display module 113. Accordingly, an object in the boundary area image is displayed on the display unit 110 at a position not including the boundary area of the displays included in the display module 113. For example, when the dummy data is inserted such that the application screen window 303 increases in a direction corresponding to the movement direction of the interaction event based on the boundary area in step S213, a drag operation (as shown in FIG. 3 (c)) The application program window 303 stretched in the direction of 302 is displayed (S215).

도 5는 본 발명의 일 실시예에 따라 렌더링 버퍼(142)와 디스플레이 버퍼(141)에 저장되는 경계 영역 영상의 예와 멀티 디스플레이 장치(100)의 디스플레이 모듈(113)에 표시되는 경계 영역 영상의 예를 나타낸 것이다.5 illustrates an example of a boundary area image stored in the rendering buffer 142 and the display buffer 141 and the boundary area image displayed on the display module 113 of the multi-display device 100 according to an embodiment of the present invention. This is an example.

도 5를 참조하면, 렌더링 버퍼(142)는 디스플레이부(110)가 가지고 있는 디스플레이들 사이의 경계 영역(예컨대, 베젤)을 포함한 물리적 해상도 정보를 가진다. 예를 들어, 2개의 Full HD 해상도를 갖는 디스플레이 장치의 경우에, 디스플레이 버퍼(141)는 1920 X 2160의 물리적 해상도 정보를 가지며, 렌더링 버퍼(142)는 1920 X (2160+경계 영역)의 물리적 해상도 정보를 가진다. 즉, 도 5의 (a)에 나타낸 바와 같이 렌더링 버퍼(142)는 경계 영역(142a)에 대한 위치 정보를 가지고 있다. 따라서, 단계 S213에서 경계 영역 영상에 더미 데이터가 삽입되면 영상 처리부(140)의 렌더링 버퍼(142)에는 도 5의 (a)와 같은 응용프로그램 화면창(303)이 저장된다. 그리고, 렌더링 버퍼(142)에 저장되어 있던 데이터가 디스플레이 버퍼(141)로 이동할 때에는 경계 영역(142a)이 버려지고 도 5의 (b)와 같은 응용프로그램 화면창(303)이 저장된다. 이러한 디스플레이 버퍼(141)에 저장된 응용프로그램 화면창(303)이 단계 S215에서 표시될 때에는 도 5의 (c)와 같이 응용프로그램 화면창(303) 내의 오브젝트가 디스플레이 모듈(113)에 포함된 디스플레이들의 경계 영역을 포함하지 않는 위치에 표시된다. 예를 들어, 응용프로그램 화면창(303)이 2개로 나뉘어서 디스플레이 모듈(113)에 포함된 제 1 디스플레이와 제 2 디스플레이에 각각 표시되지만 글자 오브젝트는 하나의 디스플레이에 표시되어, 가독성을 보장하게 된다.Referring to FIG. 5, the rendering buffer 142 has physical resolution information including a boundary area (eg, a bezel) between displays of the display 110. For example, in the case of a display device having two Full HD resolutions, the display buffer 141 has physical resolution information of 1920 X 2160, and the rendering buffer 142 has a physical resolution of 1920 X (2160 + boundary area). Have information That is, as shown in FIG. 5 (a), the rendering buffer 142 has location information for the border area 142a. Accordingly, when dummy data is inserted into the boundary area image in step S213, the application program window 303 as shown in FIG. 5A is stored in the rendering buffer 142 of the image processing unit 140. Then, when the data stored in the rendering buffer 142 moves to the display buffer 141, the boundary area 142a is discarded and the application program window 303 as shown in FIG. 5 (b) is stored. When the application screen window 303 stored in the display buffer 141 is displayed in step S215, objects in the application program window 303 are displayed in the display module 113 as shown in FIG. 5 (c). It is displayed at a position that does not include a border area. For example, the application program window 303 is divided into two to be displayed on the first display and the second display included in the display module 113, respectively, but the character object is displayed on one display, thereby ensuring readability.

지금까지 설명한 바와 같이 실시예에 의하면, 멀티 디스플레이 장치에서 상호 인접하게 배치된 디스플레이들의 경계 영역을 걸쳐서 표시하여야 하는 영상 데이터를 분석하여 변화 시킬 필요가 있는 변화 필요 영상을 선정한다. 선정된 변화 필요 영상에 대해서는 더미 데이터를 추가하여 크기를 증가시켜 표시함으로써, 영상 데이터에 포함된 오브젝트에 대한 가독성이 향상되도록 한다.As described so far, according to the embodiment, in the multi-display device, an image data that needs to be changed is selected by analyzing image data to be displayed across a boundary area of displays disposed adjacent to each other. For the selected change-required image, dummy data is added to increase the size to be displayed, thereby improving readability of the object included in the image data.

예를 들어, 컴퓨터에서 실행 중인 응용프로그램에 대응하여 멀티 디스플레이 장치에 표시되는 응용프로그램 화면창에 문서가 포함된 경우, 원래의 영상을 그대로 표시한다고 가정할 때에 글자가 디스플레이들의 경계 영역을 걸쳐서 표시되어야 한다면 변화 필요 영상으로 선정한다. 그리고, 선정된 변화 필요 영상에 대하여, 디스플레이들의 경계 영역을 비켜서 글자를 표시함으로써, 글자에 대한 가독성을 향상시킨다.For example, if a document is included in an application screen window displayed on a multi-display device in response to an application program running on a computer, the characters should be displayed across the boundary area of the displays assuming that the original image is displayed as it is. If it is, select the video that needs change. In addition, for a selected change-required image, the text is displayed by shifting the border area of the displays, thereby improving the readability of the text.

한편, 전술한 실시예에서는 디스플레이 모듈(113)이 디스플레이들의 경계선에 가요성 필름 형태의 디스플레이 바를 별도로 설치한 심리스 디스플레이 장치일 경우에, 중앙 제어부(130)가 경계 영역에 표시되는 영상의 색상과 유사한 색상을 디스플레이 바에 출력하는 공지의 심리스 디스플레이 제어 과정에 대해서는 설명을 생략하였다. 이렇게 본 발명의 실시예에 따른 경계 영역 영상에 대한 변화 기술에 공지의 심리스 디스플레이 제어 기술을 접목하더라도 종래 기술과 달리 경계 영역의 가독성이 저하되지 않는다. 예를 들어, 본 발명의 실시예에 의하면 영상 경계 영역에 글자 오브젝트가 포함되는 경우처럼 가독성의 보장이 요구되는 때에는 쉬프트되어 영상 경계 영역을 피해서 표시되기 때문에, 영상 경계 영역에 대한 심리스 디스플레이 제어가 적용되더라도 가요성 필름 형태의 디스플레이 바에는 글자 오브젝트가 포함되지 않기 때문이다.On the other hand, in the above-described embodiment, when the display module 113 is a seamless display device in which a display bar in the form of a flexible film is separately installed on the boundary line of the displays, the central control unit 130 is similar to the color of the image displayed in the boundary area. Description of the known seamless display control process of outputting the color to the display bar is omitted. Thus, even if a known seamless display control technique is combined with a change technique for a border region image according to an embodiment of the present invention, the readability of the border region does not deteriorate unlike the prior art. For example, according to an embodiment of the present invention, when a readability guarantee is required, such as when a text object is included in an image boundary area, shifted and displayed to avoid the image boundary area, so seamless display control for the image boundary area is applied. This is because, even if possible, the character object is not included in the flexible film type display bar.

앞서 도 3을 참조하여 복수의 디스플레이 중 상하로 인접한 두 개의 디스플레이의 경계 영역을 포함하는 경계 영역 영상을 실시예로서 설명하였으나, 복수의 디스플레이 중 좌우로 인접한 두 개의 디스플레이의 경계 영역을 포함하는 경계 영역 영상 또한 동일 또는 유사한 적용될 수 있음은 자명하다 할 것이다.Although the boundary region image including the boundary regions of two vertically adjacent displays among the plurality of displays has been described with reference to FIG. 3 as an embodiment, the boundary region including the boundary regions of two displays adjacent to the left and right of the plurality of displays It is obvious that the video can also be applied to the same or similar.

본 발명에 첨부된 각 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도의 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다. Combinations of each step of each flowchart attached to the present invention may be performed by computer program instructions. These computer program instructions can be mounted on a processor of a general purpose computer, special purpose computer, or other programmable data processing equipment, so that the instructions executed through the processor of a computer or other programmable data processing equipment are described in each step of the flowchart. It creates a means to do them. These computer program instructions can also be stored in computer readable or computer readable memory that can be oriented to a computer or other programmable data processing equipment to implement functionality in a particular way, so that computer readable or computer readable memory It is also possible for the instructions stored in to produce an article of manufacture containing instructions means for performing the functions described in each step of the flowchart. Since computer program instructions may be mounted on a computer or other programmable data processing equipment, a series of operational steps are performed on the computer or other programmable data processing equipment to create a process that is executed by the computer to generate a computer or other programmable data. It is also possible for instructions to perform processing equipment to provide steps for executing the functions described in each step of the flowchart.

또한, 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시예들에서는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.In addition, each step may represent a module, segment, or portion of code that includes one or more executable instructions for executing the specified logical function (s). It should also be noted that in some alternative embodiments it is also possible that the functions mentioned in the steps occur out of order. For example, the two steps shown in succession may in fact be performed substantially simultaneously, or it is also possible that the steps are sometimes performed in reverse order depending on the corresponding function.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The above description is merely illustrative of the technical idea of the present invention, and those skilled in the art to which the present invention pertains may make various modifications and variations without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical spirit of the present invention, but to explain, and the scope of the technical spirit of the present invention is not limited by these embodiments. The scope of protection of the present invention should be interpreted by the claims below, and all technical ideas within the scope equivalent thereto should be interpreted as being included in the scope of the present invention.

본 발명은 멀티 디스플레이 장치에서 상호 인접하게 배치된 디스플레이들의 경계 영역을 걸쳐서 표시하여야 하는 영상 데이터를 변화 시켜 표시한다. 이로써, 영상 데이터에 포함된 오브젝트에 대한 가독성이 향상되도록 한다. 이러한 본 발명은 복수의 디스플레이를 포함하는 멀티 디스플레이 장치가 채용된 벽면 고정형 컴퓨팅 장치나 테이블 탑 컴퓨팅 장치 등에 이용할 수 있다.The present invention changes and displays image data to be displayed across a boundary area of displays arranged adjacent to each other in a multi-display device. Accordingly, readability of an object included in image data is improved. The present invention can be used in a wall-mounted computing device or a table top computing device employing a multi-display device including a plurality of displays.

100 : 멀티 디스플레이 장치 110 : 디스플레이부
120 : 멀티 터치 감지부 130 : 중앙 제어부
140 : 영상 처리부 141 : 디스플레이 버퍼
142 : 렌더링 버퍼 143 : 분배기100: multi-display device 110: display unit
120: multi-touch detection unit 130: central control unit
140: image processing unit 141: display buffer
142: rendering buffer 143: divider

Claims

As a method of displaying an image in a multi-display device having two or more displays,
Determining whether there is a boundary area image to be displayed, including a boundary area between the first display and the second display, in which a single image is adjacent to each other, among the images;
And generating and inserting dummy data at a position corresponding to the boundary area in the boundary area image, thereby reproducing the boundary area image to be increased in size and displayed.
How to display video.

According to claim 1,
If the boundary area image is present, further comprising determining whether the boundary area image is a change-required image that needs to be changed based on a change amount of image data in the boundary region image.
The reproducing step is performed when the boundary area image is determined as the change-required image.
How to display video.

According to claim 1,
In the determining of whether the boundary area image is present, if the coordinates of the boundary area are included in an image display range according to the entire coordinate information of a single image to be displayed on the multi-display device, it is determined that the boundary area image is present.
How to display video.

According to claim 2,
The step of determining whether the change is necessary video,
Repeating calculating an amount of data change between pixels between an arbitrary pixel and surrounding pixels in the boundary region image while changing the arbitrary pixel;
Calculating a data change rate of the boundary area image by using the sum or average of the data amounts of the inter-pixel data calculated repeatedly;
And determining whether the boundary area image is the change-required image based on a result of comparing the calculated data change rate with a preset first threshold change rate.
How to display video.

According to claim 2,
The regeneration step,
Calculating a rate of change of image data for each pixel line parallel to the boundary area based on the amount of change in the image data;
And determining the insertion position of the dummy data based on a result of comparing a change rate of image data calculated for each pixel line with a preset second threshold change rate.
How to display video.

According to claim 1,
Displaying at least one application program window corresponding to at least one application program running on the multi-display device on the first display or the second display;
Further comprising the step of monitoring whether an interaction event related to the movement of the application screen window occurs,
In the monitoring step, when the interaction event occurs across the boundary area, performing the step of determining whether the boundary area image exists
How to display video.

The method of claim 6,
In the reproducing step, the dummy data is inserted such that the application program window increases in a direction corresponding to the movement direction of the interaction event based on the boundary area.
How to display video.

Claim 1 to 7 comprising a command for performing each step according to the image display method according to any one of claims
A computer-readable recording medium on which a computer program is recorded.