KR102137199B1 - Display device and operating method thereof - Google Patents

Display device and operating method thereof Download PDF

Info

Publication number
KR102137199B1
KR102137199B1 KR1020130106957A KR20130106957A KR102137199B1 KR 102137199 B1 KR102137199 B1 KR 102137199B1 KR 1020130106957 A KR1020130106957 A KR 1020130106957A KR 20130106957 A KR20130106957 A KR 20130106957A KR 102137199 B1 KR102137199 B1 KR 102137199B1
Authority
KR
South Korea
Prior art keywords
display unit
optical pen
display device
mark pattern
display
Prior art date
Application number
KR1020130106957A
Other languages
Korean (ko)
Other versions
KR20150028435A (en
Inventor
박경찬
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130106957A priority Critical patent/KR102137199B1/en
Publication of KR20150028435A publication Critical patent/KR20150028435A/en
Application granted granted Critical
Publication of KR102137199B1 publication Critical patent/KR102137199B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/32—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory with means for controlling the display position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542—Light pens for emitting or receiving light
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/04—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed using circuits for interfacing with colour displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명의 일 실 시 예에 따른 디스플레이 장치는 복수의 RGB 픽셀 상에 마크 패턴이 형성된 디스플레이부와 광학식 펜으로부터 상기 디스플레이부의 화면에 대한 캡쳐 이미지를 수신하는 네트워크 인터페이스부 및 상기 수신한 이미지를 통해 상기 마크 패턴을 획득하고, 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 제어부를 포함한다.The display device according to an exemplary embodiment of the present invention includes a network interface unit configured to receive a captured image of a screen of the display unit from a display unit having a mark pattern formed on a plurality of RGB pixels and an optical pen, and the received image. And a control unit that acquires a mark pattern and displays a movement path of the contact point of the optical pen and the display unit based on the obtained mark pattern.

Description

디스플레이 장치 및 그의 동작 방법{DISPLAY DEVICE AND OPERATING METHOD THEREOF}Display device and its operation method {DISPLAY DEVICE AND OPERATING METHOD THEREOF}

본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것이다.The present invention relates to a display device and a method of operation thereof.

현재 스마트 폰, 스마트 패드 등에 사용되고 있는 디스플레이 패널은 주로 정전 방식의 터치 패널을 사용하고 있으나, TV 등과 같은 대 화면의 경우에는 정전 방식의 터치 패널의 사이즈가 커져 제작 불량 증가, 제작 비용 증가 등의 문제점이 지적되고 있다. 정전 방식의 터치 패널을 사용하지 않고 디스플레이 상에서 펜으로 쓰기 기능이 가능하기 위해서는 펜이 디스플레이 표면을 움직일 때 그 위치의 절대좌표를 파악할 수 있어야 펜이 움직이는 궤적을 따라서 쓰기가 가능하게 된다. Currently, display panels used in smart phones, smart pads, etc. mainly use a capacitive touch panel, but in the case of a large screen such as a TV, the size of the capacitive touch panel is increased, which increases manufacturing defects and increases manufacturing costs. Is being pointed out. In order to be able to write with a pen on the display without using a capacitive touch panel, it is necessary to be able to grasp the absolute coordinates of the location when the pen moves on the display surface to enable writing along the trajectory of the pen movement.

이러한 방식을 구현하기 위해서는 위치 정보를 가지는 특정 패턴의 Mark를 디스플레이 표면에 미리 새겨두고 그 마크의 이미지를 광학식 펜을 이용하여 인식한 후 펜의 위치 정보를 파악하는 방법을 사용하고 있다. 도 1을 참조하면, 종이 위에 위치 정보를 가지는 특정 패턴의 Mark를 표시한 후, 광학식 Pen을 이용하여 쓰기를 하면 광학식 펜의 위치를 파악하게 되고, 그 위치 정보는 컴퓨터나 TV 등의 단말기로 전달되어 단말기의 디스플레이 상에서 펜으로 쓰여진 내용을 표시 할 수 가 있다. In order to implement such a method, a mark of a specific pattern having location information is previously engraved on the display surface, and an image of the mark is recognized using an optical pen, and then a method of grasping the location of the pen is used. Referring to FIG. 1, after marking a mark of a specific pattern having location information on paper, and writing using an optical pen, the position of the optical pen is grasped, and the location information is transmitted to a terminal such as a computer or a TV. It is possible to display the contents written with a pen on the display of the terminal.

또 다른 방법으로는 도 2에서와 같이 IR 파장대역은 반사시키고, 가시광 영역은 투과되는 Film을 패널에 적용하고, 위치 정보를 가지는 Mark를 Dot 형태로 표시한 패널을 디스플레이 장치 앞 표면에 부착하여 펜의 궤적을 확인할 수 있다. 즉, IR 광을 조사하는 펜을 사용하여 쓰기를 하게 되면 펜 내부에 위치한 이미지 센서가 Mark의 Pattern을 파악하고 그 위치 정보를 인식할 수 있게 된다.As another method, as shown in FIG. 2, the IR wavelength band is reflected, the visible light region is applied to the transmitted film on the panel, and the panel with the mark having the location information displayed in the form of a dot is attached to the front surface of the display device to pen. You can check the trajectory of In other words, when writing using a pen that irradiates IR light, the image sensor located inside the pen can recognize the pattern of the mark and recognize its location information.

그러나, 정전 방식의 경우, 별도로 정전 방식을 위한 터치 패널을 구비해야 하는 문제가 있고, 도 1의 경우, 특정 패턴의 마크가 형성된 종이가 별도로 필요하며, 도 2의 IR 방식의 경우, IR 파장대역은 반사시키고, 가시광 영역은 투과되는 Film을 별도로 디스플레이 패널에 추가해야 하는 문제가 있다.However, in the case of the electrostatic method, there is a problem that a touch panel for the electrostatic method must be provided separately, and in the case of FIG. 1, paper having a mark of a specific pattern is separately required, and in the case of the IR method of FIG. 2, the IR wavelength band Silver reflects, and the visible light region has a problem in that the transmitted film must be separately added to the display panel.

본 발명은 펜의 이동에 따라 형성되는 궤적을 인식하기 위해 추가적인 외부인식 장치 없이 디스플레이 장치 상에 글씨, 그리기 등의 작업을 수행할 수 있는 디스플레이 장치를 제공하기 위한 것이다.The present invention is to provide a display device capable of performing operations such as writing and drawing on a display device without an additional external recognition device in order to recognize a trajectory formed according to the movement of the pen.

본 발명의 일 실 시 예에 따른 디스플레이 장치는 복수의 RGB 픽셀 상에 마크 패턴이 형성된 디스플레이부와 광학식 펜으로부터 상기 디스플레이부의 화면에 대한 캡쳐 이미지를 수신하는 네트워크 인터페이스부 및 상기 수신한 이미지를 통해 상기 마크 패턴을 획득하고, 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 제어부를 포함한다.The display device according to an exemplary embodiment of the present invention includes a network interface unit configured to receive a captured image of a screen of the display unit from a display unit having a mark pattern formed on a plurality of RGB pixels and an optical pen, and the received image. And a control unit that acquires a mark pattern and displays a movement path of the contact point of the optical pen and the display unit based on the obtained mark pattern.

상기 디스플레이부는 상기 마크 패턴을 통해 형성된 반투명 영역을 포함한다.The display unit includes a translucent region formed through the mark pattern.

상기 마크 패턴은 검은 점(black dot)의 패턴을 갖는다.The mark pattern has a pattern of black dots.

상기 제어부는 상기 반투명 영역의 사이즈를 조절하기 위한 상기 광학식 펜의 입력을 수신하여 상기 반투명 영역의 사이즈를 조절한다.The control unit receives the input of the optical pen for adjusting the size of the translucent area and adjusts the size of the translucent area.

상기 마크 패턴은 상기 디스플레이부 상의 위치를 확인할 수 있는 좌표를 갖다. The mark pattern has coordinates that can confirm the position on the display unit.

상기 제어부는 상기 마크 패턴의 좌표를 이용하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 확인한다.The controller checks the movement path of the contact point of the optical pen and the display unit using the coordinates of the mark pattern.

본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은 광학식 펜으로부터 디스플레이부의 화면에 대한 캡쳐 이미지를 수신하는 단계와 상기 수신한 이미지를 통해 상기 마크 패턴을 획득하는 단계 및 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계를 포함한다.The operation method of the display apparatus according to an embodiment of the present invention includes receiving a captured image of a screen of a display unit from an optical pen and acquiring the mark pattern through the received image, and based on the obtained mark pattern. And displaying a movement path of the contact point of the optical pen and the display unit on the display unit.

상기 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계는 상기 획득한 마크 패턴이 갖는 좌표를 이용하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 위치를 확인하는 단계와 상기 확인된 접촉점의 위치를 이용하여 상기 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계를 포함한다.The step of displaying the movement path of the contact point of the optical pen and the display unit on the display unit based on the obtained mark pattern is to determine the position of the contact point of the optical pen and the display unit using coordinates of the acquired mark pattern. And confirming and displaying a movement path of the contact point on the display unit using the identified position of the contact point.

상기 반투명 영역의 사이즈를 조절하기 위한 상기 광학식 펜의 입력을 수신하는 단계 및 상기 광학식 펜의 입력을 수신에 따라 상기 반투명 영역의 사이즈를 조절하는 단계를 더 포함한다.The method further includes receiving an input of the optical pen to adjust the size of the translucent area and adjusting the size of the translucent area upon receiving the input of the optical pen.

상기 디스플레이부는 상기 마크 패턴을 통해 형성된 반투명 영역을 포함한다.The display unit includes a translucent region formed through the mark pattern.

상기 마크 패턴은 검은 점(black dot)의 패턴을 갖는다.The mark pattern has a pattern of black dots.

상기 디스플레이 장치의 동작 방법은 상기 디스플레이부의 화면 색상과 상기 반투명 영역의 콘트라스트(contrast)를 비교하는 단계와 비교 결과에 따라 상기 반투명 영역의 투명도를 조절하는 단계를 더 포함한다.The operation method of the display device further includes comparing the screen color of the display unit with the contrast of the translucent region and adjusting the transparency of the translucent region according to the comparison result.

본 발명의 다양한 실시 예에 따르면, 펜의 이동에 따라 형성되는 궤적을 인식하기 위해 추가적인 외부인식 장치 없이 디스플레이 장치 상에 글씨, 그리기 등의 작업을 수행 될 수 있다.According to various embodiments of the present invention, in order to recognize a trajectory formed according to the movement of the pen, operations such as writing and drawing may be performed on the display device without an additional external recognition device.

도 1 및 도 2는 펜을 이용하여 디스플레이 장치에 글이나 그림 등을 쓸 수 있는 종래기술의 예를 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시 예와 관련된 디스플레이 장치의 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 일 실시 예에 따라 마크 패턴이 형성된 디스플레이 장치의 구성을 설명하기 위한 도면이다.
도 6 내지 도 9는 본 발명의 일 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 조절되는 예를 설명하기 위한 도면이다.
도 10 내지 도 13은 본 발명의 다양한 실시 예에 따른 반투명 영역의 표시 예를 설명하기 위한 도면이다.1 and 2 are diagrams for explaining an example of a prior art that can write a text or a picture on a display device using a pen.
3 is a view for explaining the configuration of a display device related to an embodiment of the present invention.
4 is a flowchart illustrating an operation method of a display device according to an exemplary embodiment of the present invention.
5 is a view for explaining the configuration of a display device with a mark pattern formed according to an embodiment of the present invention.
6 to 9 are views for explaining an example in which the size of the translucent area of the display unit is adjusted according to an embodiment of the present invention.
10 to 13 are views for explaining a display example of a translucent area according to various embodiments of the present invention.

이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. Hereinafter, embodiments related to the present invention will be described in more detail with reference to the drawings. The suffixes "modules" and "parts" for components used in the following description are given or mixed only considering the ease of writing the specification, and do not have meanings or roles distinguished from each other in themselves.

이하, 첨부된 도면을 참조하여 본 발명의 실시 예에 따른 디스플레이 장치 및 그의 동작 방법에 관하여 상세히 설명한다.Hereinafter, a display device and an operation method thereof according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

본 발명의 실시 예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.The display device according to an exemplary embodiment of the present invention is, for example, an intelligent display device in which a computer support function is added to a broadcast reception function, while an Internet function or the like is added while being faithful to the broadcast reception function, a handwritten input device, a touch screen Or, it may have a more convenient interface such as a space remote control. And, it is connected to the Internet and a computer with the support of a wired or wireless Internet function, and can perform functions such as email, web browsing, banking, or gaming. A standardized general-purpose OS can be used for these various functions.

따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 디스플레이 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰 에도 적용 가능하다.Thus, the display device described in the present invention, for example, on a general-purpose OS kernel, since various applications can be freely added or deleted, various user-friendly functions can be performed. The display device may be, for example, a network TV, an HBBTV, a smart TV, an LED TV, or an OLED TV, and is also applicable to a smartphone in some cases.

다음은 도 3을 참고하여 본 발명의 일 실시 예에 따른 디스플레이 장치의 구조를 설명한다.Next, a structure of a display device according to an exemplary embodiment will be described with reference to FIG. 3.

도 3은 본 발명의 일 실시 예와 관련된 디스플레이 장치의 구성을 설명하기 위한 도면이다.3 is a view for explaining the configuration of a display device related to an embodiment of the present invention.

도 3을 참조하면, 본 발명의 일 실시 예에 따른 디스플레이 장치(100)는 방송 수신부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 전원공급부(190)를 포함할 수 있다. 한편, 방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다. Referring to FIG. 3, the display device 100 according to an embodiment of the present invention includes a broadcast receiving unit 130, an external device interface unit 135, a storage unit 140, a user input interface unit 150, and a control unit ( 170 ), a display unit 180, an audio output unit 185, and a power supply unit 190. Meanwhile, the broadcast reception unit 130 may include a tuner 131, a demodulation unit 132, and a network interface unit 133.

외부장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.The external device interface unit 135 may receive an application or a list of applications in an adjacent external device and transmit it to the control unit 170 or the storage unit 140.

네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. The network interface unit 133 may provide an interface for connecting the display device 100 to a wired/wireless network including an Internet network. The network interface unit 133 may transmit or receive data with other users or other electronic devices through a connected network or another network linked to the connected network.

또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.In addition, some content data stored in the display device 100 may be transmitted to a selected user or a selected electronic device among other users or other electronic devices registered in advance in the display device 100.

네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.The network interface unit 133 may access a predetermined web page through a connected network or another network linked to the connected network. That is, it is possible to connect to a predetermined web page through a network and transmit or receive data with the corresponding server.

그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.Also, the network interface unit 133 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 133 may receive content such as a movie, advertisement, game, VOD, broadcast signal, and related information provided by a content provider or a network provider through a network.

또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.In addition, the network interface unit 133 may receive update information and update files of firmware provided by the network operator, and may transmit data to the Internet or a content provider or a network operator.

네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.The network interface unit 133 may select and receive a desired application from among applications that are open to the public through a network.

특히, 네트워크 인터페이스부(133)는 광학식 펜(200)이 디스플레이부(180)에 접촉한 경우, 광학식 펜(200)을 통해 캡쳐된 이미지를 수신할 수 있다. 일 실시 예에서 네트워크 인터페이스부(133) 및 광학식 펜(200)은 유무선 통신을 통해 정보를 송수신할 수 있다. 예를 들어, 네트워크 인터페이스부(133) 및 광학식 펜(200)은 블루투스, 와이파이, 지그비 등과 같은 근거리 무선 통신 규격을 이용하여 정보를 교환할 수 있다.In particular, when the optical pen 200 contacts the display unit 180, the network interface unit 133 may receive an image captured through the optical pen 200. In one embodiment, the network interface unit 133 and the optical pen 200 may transmit and receive information through wired or wireless communication. For example, the network interface unit 133 and the optical pen 200 may exchange information using short-range wireless communication standards such as Bluetooth, Wi-Fi, ZigBee, and the like.

저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.The storage unit 140 may store a program for processing and controlling each signal in the control unit 170 and store a signal-processed image, audio, or data signal.

또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.In addition, the storage unit 140 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 135 or the network interface unit 133, and is predetermined through a channel memory function. You can also store information about the image.

저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.The storage unit 140 may store an application or a list of applications input from the external device interface unit 135 or the network interface unit 133.

디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.The display device 100 may play and provide content files (video files, still image files, music files, document files, application files, etc.) stored in the storage unit 140 to the user.

사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치로 송신하도록 처리할 수 있다.The user input interface unit 150 may transmit a signal input by the user to the control unit 170 or a signal from the control unit 170 to the user. For example, the user input interface unit 150 may be in accordance with various communication methods, such as Bluetooth, WB (Ultra Wideband), ZigBee, RF (Radio Frequency) communication, or infrared (IR) communication, A control signal such as power on/off, channel selection, screen setting, and the like may be received from the remote control device, or may be processed to transmit a control signal from the control unit 170 to the remote control device.

또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.In addition, the user input interface unit 150 may transmit a control signal input from a local key (not shown), such as a power key, a channel key, a volume key, and a set value, to the control unit 170.

제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.The image signal processed by the controller 170 may be input to the display unit 180 and displayed as an image corresponding to the corresponding image signal. Also, the image signal processed by the control unit 170 may be input to the external output device through the external device interface unit 135.

제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다. The audio signal processed by the control unit 170 may be audio output to the audio output unit 185. In addition, the voice signal processed by the control unit 170 may be input to the external output device through the external device interface unit 135.

그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다. In addition, the control unit 170 may control the overall operation in the display device 100.

또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.In addition, the control unit 170 may control the display device 100 by a user command or an internal program input through the user input interface unit 150, and access a network to display a list of applications or applications desired by the user. It can be made available for download within (100).

제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.The control unit 170 allows the channel information or the like selected by the user to be output through the display unit 180 or the audio output unit 185 together with the processed image or audio signal.

또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.In addition, the control unit 170 according to an external device image playback command received through the user input interface unit 150, from an external device input through the external device interface unit 135, for example, a camera or a camcorder, The video signal or the audio signal can be output through the display unit 180 or the audio output unit 185.

한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.Meanwhile, the control unit 170 may control the display unit 180 to display an image, for example, a broadcast image input through the tuner 131, or an external input input through the external device interface unit 135 The image or an image input through the network interface unit or an image stored in the storage unit 140 may be controlled to be displayed on the display unit 180. In this case, the image displayed on the display unit 180 may be a still image or a video, and may be a 2D image or a 3D image.

또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.In addition, the control unit 170 may control the content stored in the display device 100 or the received broadcast content or external input content input from the outside to be played, and the content may include a broadcast video, an external input video, and an audio file. , Still images, connected web screens, and document files.

디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.The display unit 180 converts image signals, data signals, OSD signals, or image signals received from the external device interface unit 135 processed by the control unit 170 into R, G, and B signals, respectively, and drives them. You can generate a signal.

한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.Meanwhile, since the display device 100 illustrated in FIG. 1 is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted depending on the specifications of the display device 100 that is actually implemented.

즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.That is, two or more components may be combined into one component, or one component may be divided into two or more components as necessary. In addition, the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.

본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.According to another embodiment of the present invention, unlike the display device 100 shown in FIG. 1, without a tuner 131 and a demodulator 132, the network interface unit 133 or the external device interface unit ( 135) to receive and reproduce the video.

예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.For example, the display device 100 is divided into an image processing device such as a set-top box for receiving broadcast signals or contents according to various network services, and a content playback device for playing content input from the image processing device. Can be implemented.

이 경우, 이하에서 설명할 본 발명의 실시예에 따른 이미지 표시 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.In this case, the image display method according to an embodiment of the present invention will be described below, as well as the display device 100 as described with reference to FIG. 1, as well as an image processing device or display unit 180 such as the separated set-top box. And it may be performed by any one of the content playback device having an audio output unit 185.

광학식 펜(200)은 접촉부, 이미지 획득부, 통신부를 포함할 수 있다.The optical pen 200 may include a contact unit, an image acquisition unit, and a communication unit.

접촉부는 디스플레이 장치(100)의 디스플레이부(180)에 접촉되어 디스플레이부(180)에 글, 도형, 그림을 입력하기 위한 구성이다.The contact unit is configured to contact the display unit 180 of the display device 100 and input text, figures, and pictures to the display unit 180.

이미지 획득부는 디스플레이부(180)의 화면에 빛을 조사하여 화면의 이미지를 획득할 수 있다.The image acquisition unit may acquire an image of the screen by irradiating light to the screen of the display unit 180.

이미지 획득부는 이미지 센서를 포함할 수 있다.The image acquisition unit may include an image sensor.

통신부는 획득한 이미지를 디스플레이 장치(100)의 네트워크 인터페이스부(133)에 전송할 수 있다.The communication unit may transmit the acquired image to the network interface unit 133 of the display device 100.

다음으로 도 4를 참조하여, 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명한다.Next, an operation method of a display device according to an embodiment of the present invention will be described with reference to FIG. 4.

도 4는 본 발명의 일 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 흐름도이다.4 is a flowchart illustrating an operation method of a display device according to an exemplary embodiment of the present invention.

도 4를 참조하면, 디스플레이 장치(100)의 제어부(170)는 광학식 펜(200)이 디스플레이부(180)의 반투명 영역에 접촉하는지 확인한다(S101). 일 실시 예에서 광학식 펜(200)은 사용자가 디스플레이 장치(100)에 원하는 글, 도형 이나 그림을 입력하기 위한 펜일 수 있다. 광학식 펜(200)은 광학식 펜(200)의 접촉부가 디스플레이부(180)의 접촉한 경우, 접촉된 지점에 빛을 조사하여 접촉된 지점에 대응하는 이미지를 캡쳐할 수 있다.Referring to FIG. 4, the control unit 170 of the display apparatus 100 checks whether the optical pen 200 contacts the translucent area of the display unit 180 (S101). In one embodiment, the optical pen 200 may be a pen for a user to input a desired text, figure, or picture into the display device 100. The optical pen 200 may capture an image corresponding to the contact point by irradiating light to the contact point when the contact portion of the optical pen 200 contacts the display unit 180.

일 실시 예에서 디스플레이부(180)의 반투명 영역은 복수의 RGB 픽셀 중 일부 픽셀에 마크 패턴이 형성된 영역일 수 있다. 이에 대해서는 도 5를 참조하여 설명한다.In one embodiment, the translucent area of the display unit 180 may be an area in which a mark pattern is formed on some of the plurality of RGB pixels. This will be described with reference to FIG. 5.

도 5는 본 발명의 일 실시 예에 따라 마크 패턴이 형성된 디스플레이 장치의 구성을 설명하기 위한 도면이다.5 is a view for explaining the configuration of a display device with a mark pattern formed according to an embodiment of the present invention.

도 5를 참조하면, 디스플레이부(180), 반투명 영역(181) 및 광학식 펜(200)의 접촉부와 디스플레이부(180)의 접촉점(182)의 확대도가 도시되어 있다.Referring to FIG. 5, an enlarged view of a contact portion 182 of the display portion 180 and a contact portion of the display portion 180 and the contact portion 182 of the display portion 180, the translucent region 181 is illustrated.

반투명 영역(181)의 디스플레이부(180)의 전체 영역 중 일부 영역을 차지할 수 있다. 반투명 영역(181)의 설명에 대해서는 후술한다.A portion of the entire area of the display unit 180 of the translucent area 181 may be occupied. The description of the translucent region 181 will be described later.

디스플레이부(180)의 패널에는 복수의 RGB 픽셀이 형성될 수 있다. 접촉점(182)의 확대도를 살펴보면, 복수의 RGB 픽셀(A) 중 일부 픽셀에는 복수의 마크 패턴(B)이 형성될 수 있다. 복수의 마크 패턴(B)은 복수의 RGB 픽셀(A) 중 일부 펙셀에 RGB 픽셀을 대신하여 일정한 간격으로 배치될 수 있다. 복수의 마크 패턴(B) 각각은 검은 점(black dot)의 패턴을 가질 수 있다.A plurality of RGB pixels may be formed on the panel of the display unit 180. Looking at an enlarged view of the contact point 182, a plurality of mark patterns B may be formed in some of the plurality of RGB pixels A. The plurality of mark patterns B may be arranged at regular intervals in place of the RGB pixels in some of the pixels of the plurality of RGB pixels A. Each of the plurality of mark patterns B may have a pattern of black dots.

디스플레이부(180)의 반투명 영역(181)은 복수의 마크 패턴(B)으로 인해 반투명 색상으로 표시될 수 있다. 즉, 디스플레이부(180)의 반투명 영역(181)은 복수의 RGB 픽셀(A) 및 검은 점의 색상을 갖는 복수의 마크 패턴(B)으로 인해 반투명 색상으로 표시될 수 있다. 디스플레이부(180)의 반투명 영역(181)이 반투명 색상으로 표시됨에 따라 사용자는 디스플레이부(180)의 전체 화면과 반투명 영역(181)을 쉽게 구분 지을 수 있다. The translucent region 181 of the display unit 180 may be displayed in a translucent color due to the plurality of mark patterns B. That is, the translucent region 181 of the display unit 180 may be displayed in a translucent color due to a plurality of RGB pixels A and a plurality of mark patterns B having a color of black dots. As the translucent area 181 of the display unit 180 is displayed in a translucent color, the user can easily distinguish the entire screen of the display unit 180 from the translucent area 181.

반투명 영역(181)은 광학식 펜을 통해 디스플레이부(180)에 글, 도형 또는 그림을 입력될 수 있는 영역일 수 있다. 사용자는 반투명 영역(181)에 글을 쓰거나, 도형이나 그림을 그릴 수 있다. 즉, 사용자는 디스플레이부(180)의 전체 화면 중 반투명 영역(181)내에서 글을 쓰거나 도형, 그림을 그리면, 반투명 영역(181) 내에쓰여진 글이나 그려진 도형, 그림이 디스플레이부(180) 상에 표시될 수 있다. 디스플레이부(180)의 일정 영역을 반투명 영역(181)으로 하는 이유는, 사용자가 기존에 시청하던 방송 영상이나, TV의 초기 화면 등을 표시하면서도 광학식 펜을 통해 디스플레이부(180)에 글, 도형 또는 그림을 입력하도록 하기 위함이다.The translucent area 181 may be an area through which an article, figure, or picture can be input to the display unit 180 through an optical pen. The user may write on the translucent area 181 or draw a figure or picture. That is, when the user writes or draws a figure or a picture in the semi-transparent area 181 of the entire screen of the display unit 180, the text or drawn figure or picture written in the semi-transparent area 181 is displayed on the display unit 180. Can be displayed. The reason for using a certain area of the display unit 180 as a translucent area 181 is that a user writes a figure on the display unit 180 through an optical pen while displaying an existing broadcast image or a TV initial screen, etc. Or, to enter a picture.

일 실시 예에서 디스플레이부(180)의 전체 영역 중 반투명 영역(181)이 차지하는 영역은 디폴트로 설정될 수 있다. 즉, 반투명 영역(181)은 디스플레이부(180)의 전체 영역을 차지할 수도 있고, 일부 영역만을 차지할 수도 있다.In one embodiment, an area occupied by the semi-transparent area 181 among the entire areas of the display unit 180 may be set as a default. That is, the translucent area 181 may occupy the entire area of the display unit 180 or only a part of the area.

일 실시 예에서 디스플레이 장치(100)를 원격에서 제어하기 위한 리모콘 등과 같은 원격제어장치의 외부 입력을 디스플레이 장치(100)가 수신하면, 반투명 영역(181)이 디스플레이부(180)에 표시될 수 있다. 또 다른 실시 예에서 광학식 펜(200)의 접촉부(210)가 디스플레이부(180)에 접촉되면, 반투명 영역(181)에 디스플레이부(180)에 표시될 수 있다.In one embodiment, when the display device 100 receives an external input of a remote control device, such as a remote control for remotely controlling the display device 100, the translucent area 181 may be displayed on the display unit 180. . In another embodiment, when the contact portion 210 of the optical pen 200 contacts the display portion 180, it may be displayed on the display portion 180 in the translucent region 181.

일 다른 실시 예에서 디스플레이부(180)의 전체 영역 중 반투명 영역(181)이 차지하는 영역은 확대 또는 축소될 수 있다. 이에 대해서는 도 6 내지 도 9을 참조하여 설명한다.In an exemplary embodiment, an area occupied by the translucent area 181 among the entire areas of the display unit 180 may be enlarged or reduced. This will be described with reference to FIGS. 6 to 9.

도 6 내지 도 9는 본 발명의 일 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 조절되는 예를 설명하기 위한 도면이다.6 to 9 are views for explaining an example in which the size of the translucent area of the display unit is adjusted according to an embodiment of the present invention.

특히, 도 6은 본 발명의 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 x,y 축 방향으로 동시에 확대되는 예를 보여주고, 도 7은 본 발명의 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 x,y 축 방향으로 축소되는 예를 보여주고, 도 8은 본 발명의 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 x축 방향으로 확대되는 예를 보여주고, 도 9는 본 발명의 실시 예에 따라 디스플레이부의 반투명 영역의 사이즈가 x축 방향으로 축소되는 예를 보여준다.In particular, FIG. 6 shows an example in which the size of the translucent region of the display unit is simultaneously enlarged in the x and y axis directions according to an embodiment of the present invention, and FIG. 7 shows the size of the translucent region of the display unit according to an embodiment of the present invention. FIG. 8 shows an example in which the size of the translucent region of the display unit is enlarged in the x-axis direction according to an embodiment of the present invention. Accordingly, an example in which the size of the translucent region of the display unit is reduced in the x-axis direction is shown.

이하에서는 반투명 영역(181)이 사각형의 형태를 갖는 것을 예로 들어 설명한다. 그러나, 반투명 영역(181)은 사각형에 한정될 필요는 없고, 원형 또는 다각형으로 형태를 가질 수 있다.Hereinafter, the translucent region 181 has a rectangular shape. However, the translucent region 181 need not be limited to a square, and may have a shape of a circle or a polygon.

도 6을 참조하면, 반투명 영역(181)의 꼭지점(C)에 광학식 펜(200)의 접촉부가 접촉되고, 광학식 펜(200)의 접촉부가 D 지점으로 이동되면, 제어부(170)는 광학식 펜(200)의 접촉부의 이동을 인식하여 반투명 영역(181)의 사이즈를 x,y 축 방향으로 확대시킬 수 있다.Referring to FIG. 6, when the contact portion of the optical pen 200 contacts the vertex C of the translucent region 181, and when the contact portion of the optical pen 200 moves to the D point, the control unit 170 displays the optical pen ( The size of the translucent region 181 may be enlarged in the x and y axis directions by recognizing the movement of the contact portion 200).

도 7을 참조하면, 반투명 영역(181)의 꼭지점(D)에 광학식 펜(200)의 접촉부가 접촉되고, 광학식 펜(200)의 접촉부가 C 지점으로 이동되면, 제어부(170)는 광학식 펜(200)의 접촉부의 이동을 인식하여 반투명 영역(181)의 사이즈를 x,y 축 방향으로 축소시킬 수 있다. Referring to FIG. 7, when the contact portion of the optical pen 200 is in contact with the vertex D of the translucent region 181, and when the contact portion of the optical pen 200 is moved to the point C, the control unit 170 may display the optical pen ( The size of the translucent region 181 may be reduced in the x and y axis directions by recognizing the movement of the contact portion 200).

도 8을 참조하면, 반투명 영역(181)의 세로 변의 일부 지점(E)에 광학식 펜(200)의 접촉부가 접촉되고, 광학식 펜(200)의 접촉부가 F 지점으로 이동되면, 제어부(170)는 광학식 펜(200)의 접촉부의 이동을 인식하여 반투명 영역(181)의 사이즈를 y축으로는 고정하고, x 축 방향으로 확대시킬 수 있다. Referring to FIG. 8, when a contact portion of the optical pen 200 contacts a portion E of a vertical side of the translucent region 181 and the contact portion of the optical pen 200 moves to the F point, the controller 170 Recognizing the movement of the contact portion of the optical pen 200, the size of the translucent region 181 can be fixed on the y-axis and enlarged in the x-axis direction.

도 9를 참조하면, 반투명 영역(181)의 세로 변의 일부 지점(F)에 광학식 펜(200)의 접촉부가 접촉되고, 광학식 펜(200)의 접촉부가 E 지점으로 이동되면, 제어부(170)는 광학식 펜(200)의 접촉부의 이동을 인식하여 반투명 영역(181)의 사이즈를 y 축으로는 고정하고, x축 방향으로 확대시킬 수 있다.Referring to FIG. 9, when a contact portion of the optical pen 200 contacts a portion F of a vertical side of the translucent region 181 and the contact portion of the optical pen 200 moves to the E point, the control unit 170 Recognizing the movement of the contact portion of the optical pen 200, the size of the translucent region 181 can be fixed in the y-axis and enlarged in the x-axis direction.

다시 도 4를 설명한다.4 will be described again.

네트워크 인터페이스부(133)는 광학식 펜(200)이 디스플레이부(180)에 접촉한 경우, 광학식 펜(200)을 통해 캡쳐된 이미지를 수신한다(S103). 디스플레이 장치(100)는 수신한 이미지를 통해 광학식 펜(200)의 접촉부와 디스플레이부(180)가 접촉하는 접촉점의 위치를 확인하기 위해 광학식 펜(200)가 캡쳐한 이미지를 수신할 수 있다.The network interface unit 133 receives the image captured through the optical pen 200 when the optical pen 200 contacts the display unit 180 (S103). The display apparatus 100 may receive the image captured by the optical pen 200 to confirm the position of the contact point of the contact portion of the optical pen 200 and the display unit 180 through the received image.

일 실시 예에서 네트워크 인터페이스부(133) 및 광학식 펜(200)은 유무선 통신을 통해 정보를 송수신할 수 있다. 예를 들어, 네트워크 인터페이스부(133) 및 광학식 펜(200)은 블루투스, 와이파이, 지그비 등과 같은 근거리 무선 통신 규격을 이용하여 정보를 교환할 수 있다.In one embodiment, the network interface unit 133 and the optical pen 200 may transmit and receive information through wired or wireless communication. For example, the network interface unit 133 and the optical pen 200 may exchange information using short-range wireless communication standards such as Bluetooth, Wi-Fi, ZigBee, and the like.

제어부(170)는 광학식 펜(200)으로부터 수신한 이미지에 기초하여 이미지의마크 패턴을 획득한다(S105). 수신한 이미지에는 복수의 RGB 픽셀 및 복수의 마크 패턴을 포함될 수 있고, 제어부(170)는 수신한 이미지에 포함된 복수의 마크 패턴을 추출하여 마크 패턴을 획득할 수 있다.The controller 170 acquires a mark pattern of the image based on the image received from the optical pen 200 (S105). The received image may include a plurality of RGB pixels and a plurality of mark patterns, and the controller 170 may obtain a mark pattern by extracting a plurality of mark patterns included in the received image.

제어부(170)는 획득한 마크 패턴에 기초하여 광학식 펜(200)의 접촉부와 디스플레이부(180)가 접촉하는 접촉점의 위치를 확인한다(S107). 일 실시 예에서 제어부(170)는 획득한 마크 패턴에 대응하는 좌표를 이용하여 광학식 펜(200)의 접촉부와 디스플레이부(180)가 접촉하는 접촉점의 위치를 확인할 수 있다. 이에 대해서는 도 5를 참조하여 설명한다.The control unit 170 checks the position of the contact point of the contact portion of the optical pen 200 and the display unit 180 based on the obtained mark pattern (S107). In one embodiment, the control unit 170 may check the position of the contact point between the contact portion of the optical pen 200 and the display portion 180 using coordinates corresponding to the obtained mark pattern. This will be described with reference to FIG. 5.

도 5를 참조하면, 복수의 마크 패턴(B) 각각은 x,y 좌표를 가질 수 있다. 제어부(170)는 획득한 마크 패턴(B) 각각의 x,y 좌표를 이용하여 광학식 펜(200)의 접촉부와 디스플레이부(180)의 반투명 영역이 접촉하는 접촉점의 위치를 확인할 수 있다. 예를 들어, 제어부(170)는 획득한 복수의 마크 패턴(B) 각각의 x 좌표 및 y좌표를 평균하여 광학식 펜(200)의 접촉부와 디스플레이부(180)의 반투명 영역이 접촉하는 접촉점의 위치를 확인할 수 있다.Referring to FIG. 5, each of the plurality of mark patterns B may have x and y coordinates. The control unit 170 may check the location of the contact point where the contact portion of the optical pen 200 and the translucent region of the display unit 180 contact each of the obtained mark patterns B using the x and y coordinates. For example, the controller 170 averages the x-coordinates and y-coordinates of each of the obtained plurality of mark patterns B, and the position of the contact point where the contact portion of the optical pen 200 and the translucent region of the display portion 180 contact each other You can check

제어부(170)는 확인한 접촉점의 위치와 이전에 확인된 광학식 펜(200)의 접촉부와 디스플레이부(180)가 접촉하는 접촉점의 위치를 비교하고(S109), 접촉점의 위치가 이전 접촉점의 위치와 동일한지를 확인한다(S111). 즉, 제어부(170)는 광학식 펜(200)의 접촉부가 디스플레이부(180)와 접촉하는 지점의 이동 경로를 확인하기 위해 단계 S109 및 S111의 과정을 수행할 수 있다.The control unit 170 compares the position of the identified contact point with the position of the contact point of the contact portion of the previously confirmed optical pen 200 and the display unit 180 (S109), and the position of the contact point is the same as the position of the previous contact point Is checked (S111). That is, the control unit 170 may perform the processes of steps S109 and S111 to check the movement path of the point where the contact portion of the optical pen 200 contacts the display unit 180.

비교결과, 이전 접촉점의 위치와 현재 확인된 접촉점의 위치가 동일하지 않은 경우, 제어부(170)는 디스플레이부(180)를 통해 광학식 펜(200)의 접촉부와 디스플레이부(180)가 접촉하는 접촉점의 이동 경로를 표시한다(S113). 즉, 제어부(170)는 광학식 펜(200)의 접촉부의 위치가 이동됨을 확인할 수 있고, 확인된 접촉부의 위치 이동 경로를 디스플레이부(180)를 통해 표시할 수 있다. 이를 통해 사용자는 광학식 펜(200)의 접촉부의 이동에 따라 쓰여진 글이나, 도형, 그림 등을 확인할 수 있다.As a result of comparison, when the position of the previous contact point and the position of the currently confirmed contact point are not the same, the control unit 170 displays the contact point of the optical pen 200 and the display unit 180 through the display unit 180. The moving path is displayed (S113). That is, the control unit 170 may confirm that the position of the contact portion of the optical pen 200 is moved, and may display the identified movement path of the contact portion through the display unit 180. Through this, the user can check the written text, figures, drawings, etc. according to the movement of the contact portion of the optical pen 200.

한편, 비교결과, 이전 접촉점의 위치와 현재 확인된 접촉점의 위치가 동일한 경우, 단계 S101로 돌아간다.On the other hand, as a result of comparison, when the position of the previous contact point and the position of the currently confirmed contact point are the same, the process returns to step S101.

다음으로, 도 10 내지 도 13을 참조하여, 본 발명의 다양한 실시 예에 따른 반투명 영역의 표시 예를 설명한다.Next, a display example of a translucent region according to various embodiments of the present invention will be described with reference to FIGS. 10 to 13.

먼저, 도 10은 디스플레이부(180) 상에 반투명 영역(181)의 사이즈가 여러 형태를 갖는 예를 보여준다.First, FIG. 10 shows an example in which the size of the translucent region 181 on the display unit 180 has various forms.

위에서 설명한 바와 같이, 반투명 영역(181)의 사이즈는 디폴토로 설정되어 있을 수도 있고, 사용자가 광학식 펜을 통해 반투명 영역(181)의 사이즈를 조절할 수 있다. 사용자는 디스플레이부(180)의 배경화면을 시청하면서 원하고자 하는 글을 쓰거나, 도형 및 그림을 반투명 영역(181)에 그릴 수 있고, 필요에 따라 반투명 영역(181_1,181_2)의 사이즈를 조절하여 활용할 수 있다.As described above, the size of the translucent region 181 may be set as a default, and a user may adjust the size of the translucent region 181 through an optical pen. The user can write the desired text while viewing the background screen of the display unit 180, draw a figure and a picture on the translucent area 181, and adjust the size of the translucent areas 181_1 and 181_2 as necessary. Can be.

다음으로, 도 11을 설명한다.Next, Fig. 11 will be described.

도 11을 참조하면, 디스플레이부(180)의 배경화면의 배경 색상과 반투명 영역(181)의 색상이 contrast 효과가 적은 경우, 반투명 영역(181)의 색상이 조절될 수 있다. 디스플레이 장치(100)의 제어부(170)는 배경화면의 색상과 반투명 영역(181)의 색상을 비교하여, contrast 효과가 적은 경우, 반투명 영역(181)의 색상을 조절하여 투명의 정도를 조절할 수 있다. 디스플레이 장치는 배경화면의 색상과 반투명 영역(181)의 색상을 대응시켜 저장하고, 배경화면의 색상에 따라 반투명 영역(181)의 색상을 조절할 수 있다.Referring to FIG. 11, when the background color of the background screen of the display 180 and the color of the translucent region 181 have a low contrast effect, the color of the translucent region 181 may be adjusted. The control unit 170 of the display device 100 compares the color of the background screen with the color of the translucent area 181, and if the contrast effect is small, the color of the translucent area 181 can be adjusted to adjust the degree of transparency. . The display device may store and store the color of the background screen and the color of the translucent area 181, and adjust the color of the translucent area 181 according to the color of the background screen.

다음으로, 도 12 및 도 13을 설명한다.Next, FIGS. 12 and 13 will be described.

도 12는 디스플레이부(180) 상의 반투명 영역(181)에 사용자가 광학식 펜을 통해 입력한 글이 표시되어 있으며, 도 13은 글의 입력이 종료된 경우, 반투명 영역(181)이 사라진 결과를 표시하고 있다. 일 실시 예에서 반투명 영역(181)은 광학식 펜을 통해 원하고자 하는 입력이 종료된 경우, 리모콘과 같은 원격제어장치의 입력이 수신되면, 디스플레이부(180) 상에서 제거될 수 있다. FIG. 12 shows the text input by the user through the optical pen on the translucent area 181 on the display unit 180, and FIG. 13 shows the result of the translucent area 181 disappearing when the text input is completed. Doing. In one embodiment, when the desired input is ended through the optical pen, the translucent area 181 may be removed on the display unit 180 when an input of a remote control device such as a remote control is received.

또 다른 실시 예에서 반투명 영역(181)은 광학식 펜을 통해 원하고자 하는 입력이 종료된 경우, 광학식 펜의 입력 종료 명령을 통해 디스플레이부(180) 상에서 제거될 수 있다. 광학식 펜의 입력 종료 명령은 광학식 펜에 장착된 버튼의 누름에 의해 수행될 수 있고, 입력 종료 명령이 디스플레이 장치(100)에 전달되어 반투명 영역(181)이 제거될 수 있다.In another embodiment, when the desired input is ended through the optical pen, the translucent area 181 may be removed on the display unit 180 through an input termination command of the optical pen. The input termination command of the optical pen may be performed by pressing a button mounted on the optical pen, and the input termination command may be transmitted to the display device 100 to remove the translucent area 181.

본 발명의 실시 예에 따르면, 디스플레이 장치(100)에서 위치정보를 가지는 반투명의 마크 패턴을 RGB Pixel 상에 형성시키고, 이를 광학식 펜으로부터 수신한 이미지에 기초하여 광학식 펜(200)의 디스플레이부(180) 상의 x,y 좌표를 파악할 수 있어서 사용자는 광학식 펜으로 직접 평면 디스플레이 장치에 글 쓰기, 그리기 등이 가능하다.According to an embodiment of the present invention, a translucent mark pattern having position information is formed on an RGB pixel in the display device 100, and the display unit 180 of the optical pen 200 is based on an image received from the optical pen. ), the user can grasp the x and y coordinates on the screen, so the user can write or draw on the flat display device directly with an optical pen.

특히, 광학식 펜 이외에 정전식 Touch panel 등의 외부 인식 장치를 추가로 사용하지 않고도 평판 TV 등의 다양한 디스플레이 장치에 적용할 수 있는 장점을 지니고 있다.In particular, it has the advantage that it can be applied to various display devices such as flat panel TVs without using an external recognition device such as an electrostatic touch panel in addition to the optical pen.

본 발명의 일 실시 예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.According to an embodiment of the present invention, it is possible to implement the above-described method as code readable by a processor on a medium on which a program is recorded. Examples of the medium readable by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and implemented in the form of a carrier wave (for example, transmission through the Internet). Includes.

상기와 같이 설명된 이동 단말기는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다. The mobile terminal described above is not limited to the configuration and method of the above-described embodiments, and the above embodiments may be configured by selectively combining all or part of each embodiment so that various modifications can be made. It might be.

Claims (12)

복수의 RGB 픽셀이 형성된 디스플레이부;
광학식 펜으로부터 상기 디스플레이부의 화면에 대한 캡쳐 이미지를 수신하는 네트워크 인터페이스부; 및
상기 수신한 이미지를 통해 마크 패턴을 획득하고, 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 제어부를 포함하고,
상기 제어부는 상기 광학식 펜의 접촉부가 상기 디스플레이부에 접촉하면 상기 복수의 RGB 픽셀 상에 상기 마크 패턴이 형성되도록 상기 디스플레이부를 제어하고,
상기 광학식 펜의 입력 종료 명령을 수신하면 상기 마크 패턴이 제거되도록 상기 디스플레이부를 제어하는
디스플레이 장치.A display unit in which a plurality of RGB pixels are formed;
A network interface unit that receives a captured image of a screen of the display unit from an optical pen; And
And a controller configured to acquire a mark pattern through the received image, and display a moving path of the contact point of the optical pen and the display unit on the display unit based on the obtained mark pattern,
The control unit controls the display unit to form the mark pattern on the plurality of RGB pixels when the contact portion of the optical pen contacts the display unit,
When the input end command of the optical pen is received, the display unit is controlled to remove the mark pattern
Display device. 제1항에 있어서,
상기 디스플레이부는
상기 마크 패턴을 통해 형성된 반투명 영역을 포함하는
디스플레이 장치.According to claim 1,
The display unit
A translucent region formed through the mark pattern
Display device. 제2항에 있어서,
상기 마크 패턴은 검은 점(black dot)의 패턴을 갖는
디스플레이 장치.According to claim 2,
The mark pattern has a pattern of black dots
Display device. 제2항에 있어서,
상기 제어부는
상기 반투명 영역의 사이즈를 조절하기 위한 상기 광학식 펜의 입력을 수신하여 상기 반투명 영역의 사이즈를 조절하는
디스플레이 장치.According to claim 2,
The control unit
Adjusting the size of the translucent area by receiving the input of the optical pen for adjusting the size of the translucent area
Display device. 제2항에 있어서,
상기 마크 패턴은
상기 디스플레이부 상의 위치를 확인할 수 있는 좌표를 갖는
디스플레이 장치.According to claim 2,
The mark pattern
Having coordinates that can confirm the position on the display unit
Display device. 제5항에 있어서,
상기 제어부는
상기 마크 패턴의 좌표를 이용하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 확인하는
디스플레이 장치.The method of claim 5,
The control unit
Using the coordinates of the mark pattern to confirm the movement path of the contact point of the optical pen and the display unit
Display device. 디스플레이 장치의 동작 방법에 있어서,
복수의 RGB 픽셀이 형성된 디스플레이부에 광학식 펜의 접촉부가 접촉하면 상기 복수의 RGB 픽셀 상에 마크 패턴이 형성되는 단계;
상기 광학식 펜으로부터 디스플레이부의 화면에 대한 캡쳐 이미지를 수신하는 단계;
상기 수신한 이미지를 통해 상기 마크 패턴을 획득하는 단계;
획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계; 및
상기 광학식 펜의 입력 종료 명령을 수신하면 상기 마크 패턴이 제거되는 단계를 포함하는
디스플레이 장치의 동작 방법.In the operation method of the display device,
Forming a mark pattern on the plurality of RGB pixels when a contact portion of an optical pen contacts a display unit on which a plurality of RGB pixels are formed;
Receiving a captured image of a screen of the display unit from the optical pen;
Acquiring the mark pattern through the received image;
Displaying a movement path of the contact point of the optical pen and the display unit on the display unit based on the obtained mark pattern; And
And removing the mark pattern when the input termination command of the optical pen is received.
How the display device works. 제7항에 있어서,
상기 획득한 마크 패턴에 기초하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계는
상기 획득한 마크 패턴이 갖는 좌표를 이용하여 상기 광학식 펜과 상기 디스플레이부의 접촉점의 위치를 확인하는 단계와
상기 확인된 접촉점의 위치를 이용하여 상기 접촉점의 이동 경로를 상기 디스플레이부에 표시하는 단계를 포함하는
디스플레이 장치의 동작 방법.The method of claim 7,
Displaying the movement path of the contact point of the optical pen and the display unit based on the obtained mark pattern is displayed on the display unit
Confirming a position of a contact point of the optical pen and the display unit using coordinates of the acquired mark pattern;
And displaying a movement path of the contact point on the display unit using the identified position of the contact point.
How the display device works. 제7항에 있어서,
상기 디스플레이부는 상기 마크 패턴을 통해 형성된 반투명 영역을 포함하는
디스플레이 장치의 동작 방법.The method of claim 7,
The display unit includes a translucent area formed through the mark pattern
How the display device works. 제9항에 있어서,
상기 반투명 영역의 사이즈를 조절하기 위한 상기 광학식 펜의 입력을 수신하는 단계; 및
상기 광학식 펜의 입력을 수신에 따라 상기 반투명 영역의 사이즈를 조절하는 단계를 더 포함하는
디스플레이 장치의 동작 방법.The method of claim 9,
Receiving an input of the optical pen to adjust the size of the translucent area; And
Further comprising the step of adjusting the size of the translucent area in response to receiving the input of the optical pen
How the display device works. 제7항에 있어서,
상기 마크 패턴은 검은 점(black dot)의 패턴을 갖는
디스플레이 장치의 동작 방법.The method of claim 7,
The mark pattern has a pattern of black dots
How the display device works. 제9항에 있어서,
상기 디스플레이부의 화면 색상과 상기 반투명 영역의 콘트라스트(contrast)를 비교하는 단계;
비교 결과에 따라 상기 반투명 영역의 투명도를 조절하는 단계를 더 포함하는
디스플레이 장치의 동작 방법.
The method of claim 9,
Comparing the screen color of the display unit with the contrast of the translucent region;
Further comprising the step of adjusting the transparency of the translucent region according to the comparison result
How the display device works.
KR1020130106957A 2013-09-06 2013-09-06 Display device and operating method thereof KR102137199B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130106957A KR102137199B1 (en) 2013-09-06 2013-09-06 Display device and operating method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130106957A KR102137199B1 (en) 2013-09-06 2013-09-06 Display device and operating method thereof

Publications (2)

Publication Number Publication Date
KR20150028435A KR20150028435A (en) 2015-03-16
KR102137199B1 true KR102137199B1 (en) 2020-07-23

Family

ID=53023296

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130106957A KR102137199B1 (en) 2013-09-06 2013-09-06 Display device and operating method thereof

Country Status (1)

Country Link
KR (1) KR102137199B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013035319A1 (en) * 2011-09-06 2013-03-14 パナソニック株式会社 Display panel, display device, and display control system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101457593B1 (en) * 2008-08-13 2014-11-03 엘지전자 주식회사 Mobile terminal for providing character prediction function and control method thereof
KR101688942B1 (en) * 2010-09-03 2016-12-22 엘지전자 주식회사 Method for providing user interface based on multiple display and mobile terminal using this method
KR20120110817A (en) * 2011-03-30 2012-10-10 삼성전자주식회사 Handwriting input apparatus and input method using the handwriting input apparatus, display divice for inputting of the handwriting input apparatus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013035319A1 (en) * 2011-09-06 2013-03-14 パナソニック株式会社 Display panel, display device, and display control system

Also Published As

Publication number Publication date
KR20150028435A (en) 2015-03-16

Similar Documents

Publication Publication Date Title
CN104853250B (en) The method of the control screen of remote controler and the remote controler
KR102327207B1 (en) Configuration and operation of display devices including device management
US8937664B2 (en) Method of controlling electronic device and portable terminal thereof
KR101220037B1 (en) Method for controlling connection between electronic devices and portable terminal thereof
US9799251B2 (en) Display device, mobile device, system including the same, and image quality matching method thereof
US20140184726A1 (en) Display apparatus and method for video calling thereof
KR102521343B1 (en) Display device and operating method thereof
CN107736031A (en) Image display and its operating method
US20150169085A1 (en) Information processing apparatus, program, information processing method, and information processing system
CN111699673B (en) Electronic device and operation method thereof
CN109661809A (en) Show equipment
US9998671B2 (en) Electronic apparatus, method of controlling the same, and computer-readable recording medium
EP2899986B1 (en) Display apparatus, mobile apparatus, system and setting controlling method for connection thereof
US10609305B2 (en) Electronic apparatus and operating method thereof
CN110620955B (en) Live broadcasting system and live broadcasting method thereof
US20200374472A1 (en) Electronic device and operation method thereof
KR102137199B1 (en) Display device and operating method thereof
KR102267194B1 (en) Terminal and operating method thereof
KR102168340B1 (en) Video display device
CN107239204A (en) Display device and display methods
KR102676837B1 (en) Display apparatus and control method thereof
KR101439178B1 (en) System and Method for remote control using camera
KR102564447B1 (en) Display device
KR102204566B1 (en) Display device and its operating method
KR20160038193A (en) Method and program for providing enterprise introduction using augmented reality contents based on business card or brochure

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right