KR20230007667A - User Interest Object Tracking Enlargement Screen User Interface - Google Patents
User Interest Object Tracking Enlargement Screen User Interface Download PDFInfo
- Publication number
- KR20230007667A KR20230007667A KR1020210088289A KR20210088289A KR20230007667A KR 20230007667 A KR20230007667 A KR 20230007667A KR 1020210088289 A KR1020210088289 A KR 1020210088289A KR 20210088289 A KR20210088289 A KR 20210088289A KR 20230007667 A KR20230007667 A KR 20230007667A
- Authority
- KR
- South Korea
- Prior art keywords
- video signal
- user
- interest
- enlarged
- screen
- Prior art date
Links
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 230000002194 synthesizing effect Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000034 method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
본 발명은 사용자의 관심 객체 트래킹 확대 화면 사용자 인터페이스에 관한 것으로, 상세하게는 화면의 움직이는 객체를 트래킹하여 사용자의 관심 영역을 확대표시하여 본 화면과 동시에 표시하는 사용자 인터페이스에 관한 것이다. The present invention relates to an enlarged screen user interface for tracking an object of interest of a user, and more particularly, to a user interface that tracks a moving object on a screen to enlarge and display a region of interest of a user and simultaneously display the same as the main screen.
일반적으로 사용자 인터페이스(User Interface)는 사물 또는 시스템, 컴퓨터 프로그램 등의 사이에서 의사소통을 할 수 있도록 일시적 또는 영구적인 접근을 목적으로 만들어진 물리적, 가상적 매개체로서, 입력, 출력, 삭제의 수단을 통해 작동한다.In general, a user interface is a physical or virtual medium designed for temporary or permanent access to communicate between objects, systems, computer programs, etc., and operates through means of input, output, and deletion. do.
확대/축소 화면 동시 표시 사용자 인터페이스는 사용자의 관심영역을 확대하여 전체화면과 동시에 표시해주는 사용자 인터페이스로, 예를 들어, 온라인 강의, CCTV 등에 활용되고 있다. A user interface for simultaneously displaying an enlarged/reduced screen is a user interface that enlarges a user's area of interest and displays the entire screen at the same time, and is used, for example, in online lectures and CCTVs.
한편, 이러한 확대/축소 화면 동시 표시 사용자 인터페이스는 확대화면과 본 화면을 동시에 표시해 주나 그 목적이 주로 감시나 모니터링에 특화된 것이다. 또한, 사용자의 관심 영역을 확대해주긴 하나 일반적으로 확대 되는 부분은 사용자가 화면 내에서 선택한 부분이 고정적으로 확대된다. 사용자가 화면 내의 지정된좌표가 아닌, 송출되는 영상 속의 객체 자체를 관심 영역으로 지정하였을 때, 해당 객체가 계속해서 움직인다면 객체가 확대화면 속에서 이탈할 가능성이 있다. 이 경우, 사용자는 객체가 이동한 좌표로 확대화면을 다시 지정해야 하는 불편함이 있다. Meanwhile, the user interface for simultaneously displaying the enlarged/reduced screen simultaneously displays the enlarged screen and the main screen, but its purpose is mainly specialized for surveillance or monitoring. In addition, although the user's area of interest is enlarged, the generally enlarged portion is fixedly enlarged in the portion selected by the user within the screen. When the user designates the object itself in the transmitted image as the region of interest, not the designated coordinates in the screen, if the object continues to move, there is a possibility that the object will break away from the enlarged screen. In this case, the user has the inconvenience of having to designate the enlarged screen again with the coordinates to which the object has moved.
따라서, 본 발명은 상기 문제점을 해결하기 위해 안출한 것으로서, 본 발명의 과제는 영상 내의 움직이는 사용자의 관심 객체를 사용자로 하여금 연속적으로 관심 객체를 관찰할 수 있도록 하는 것이다.Accordingly, the present invention has been made to solve the above problems, and an object of the present invention is to enable a user to continuously observe an object of interest of a user moving in an image.
상기 과제를 해결하기 위해서는 피아이피 기능을 지원하는 영상표시장치에 있어서, 입력 신호를 영상 신호로 처리하는 영상 처리부, 상기 영상 처리부로부터의 영상신호를 입력으로 하고, 피아이피 기능이 선택되면, 전체 표시 영역을 제 1, 제 2, 제 3, 제 4 표시영역으로 분할하고, 상기 제 1 표시영역에 전체영상 신호를 표시하며, 상기 제 2, 제 3, 제 4 표시영역에는 각각 트래킹한 물체의 상단, 중간, 하단 부분을 확대시킨 화면을 표시하는 피아이피 영상 처리부를 포함하는영상표시장치를 이용한다. 기존에 사진 편집 기술에 주로 사용되었던 물체 트래킹 기술을 영상에 도입하여 영상 속에서 연속적으로 움직이는 관심 객체를 트래킹한 뒤 확대 화면을 이탈하지 않도록 객체를 추적하며 확대하여 사용자의 관심객체가 확대 화면 내에 계속해서 표시될 수 있게 한다.In order to solve the above problem, in a video display device supporting the PI function, an image processing unit that processes an input signal into a video signal, and when the video signal from the image processing unit is input and the PI function is selected, the entire display is performed. The area is divided into first, second, third, and fourth display areas, the entire image signal is displayed on the first display area, and the top of the tracked object is displayed on the second, third, and fourth display areas, respectively. , An image display device including a PIP image processing unit for displaying a screen in which the middle and lower portions are enlarged is used. By introducing object tracking technology, which was mainly used in photo editing technology, to video, it tracks an object of interest that continuously moves in the video, and then tracks and enlarges the object so that it does not leave the enlarged screen so that the user's object of interest continues within the enlarged screen. so that it can be displayed.
본 발명에 따른 사용자 관심 객체 트랙킹 확대 화면 사용자 인터페이스는 사용자의 관심 객체가 화면 내에서 연속적으로 이동할 때, 관심 객체가 지정된 좌표의 확대화면을 이탈할 경우, 사용자가 객체의 이동 좌표로 확대화면을 변경하지 않아도 트래킹된 관심 객체의 확대화면이 지속적으로 표시되는 편의성을 제공한다.In the user interface for tracking an enlarged screen of a user's object of interest according to the present invention, when an object of interest of a user continuously moves within a screen and the object of interest moves out of the enlarged screen at designated coordinates, the user changes the enlarged screen to the moving coordinates of the object. Convenience is provided by continuously displaying an enlarged screen of the tracked object of interest without having to do so.
도 1은 본 발명의 실시예에 따른 플로우 차트이다.
도 2,도 3, 도 4는 본 발명의 실시예에 따른 사용자 관심 객체 트랙킹 확대 화면사용자 인터페이스에 있어 작동상태를 설명하기 위한 도면이다.1 is a flow chart according to an embodiment of the present invention.
2, 3, and 4 are diagrams for explaining an operating state in an enlarged screen user interface for tracking an object of interest according to an embodiment of the present invention.
본 발명의 실시예를 첨부 도면을 참조하여 설명하면 다음과 같다.An embodiment of the present invention will be described with reference to the accompanying drawings.
도 2는 사용자 관심 객체 트랙킹 확대 화면 사용자 인터페이스에 있어 작동상태를 설명하기 위한 도면으로, 사용자의 관심객체가 화면의 A 지점에 위치하고, 사용자는 인터페이스를 확대하지 않은 채 전체화면인 제 1 영역만이 표시되어 있는 상태이다. 2 is a diagram for explaining an operating state in an object-of-interest tracking enlargement screen user interface. The user's object of interest is located at point A of the screen, and the user does not enlarge the interface and only displays the first area, which is the entire screen. status is displayed.
이때, 사용자가 A 지점에 위치한 관심 객체를 확대하고자 줌인 명령을 내렸을 때, 도 1의 플로우 차트에 따라 관심 객체를 트래킹되고, 도 3과 같이 제 2영역, 제 3영역, 제 4영역에 관심 객체의 확대 화면이 표시된다. 이후, 관심 객체가 A 지점에서B 지점으로 이동했을 때, 관심 객체는 트래킹된 상태이기 때문에 A지점의 좌표에서 확대된 화면일지라도 관심객체의 확대화면은 제 2,제 3, 제 4영역에서 이탈하지 않고 그대로 유지되는 것을 볼 수 있다. 이는 도 4로 설명된다.At this time, when the user gives a zoom-in command to enlarge the object of interest located at point A, the object of interest is tracked according to the flow chart of FIG. An enlarged screen of is displayed. Then, when the object of interest moves from point A to point B, since the object of interest is in a tracked state, even if it is an enlarged screen at the coordinates of point A, the enlarged screen of the object of interest does not deviate from the second, third, and fourth areas. You can see that it stays the same. This is illustrated in FIG. 4 .
화상 회의, 비대면 온라인 강의, 무관객 패션쇼와 콘서트 등 디지털 스크린을 통한 비대면 활동이 이루어지는 각종 산업에서 활용될 가능성이 있다. 그 예로, 패션 분야에서, 패션쇼의 전체적인 분위기와 연속해서 이동하는 모델 각각의 착장과 세부 악세사리 등을 동시에 보기 위해서는 전체화면과 움직이는 모델을 트래킹하여 확대한 화면을 함께 표시하는 인터페이스가 필요하다. 또한, 기존에 확대화면 인터페이스가 많이 활용되던 감시 및 모니터링 분야에서도 활용될 수 있다. 움직이는 객체를 집중적으로 관찰이 가능하기 때문이다. 또한, 교육 분야에서의 활용도 기대할 수 있다. 확대 화면이 필수적인 외과 수술 시연 영상, 크기가 작은 재료를 다루는 교육 영상 등이 그 예시이다.It has potential to be used in various industries where non-face-to-face activities are performed through digital screens, such as video conferences, non-face-to-face online lectures, and fashion shows and concerts without audience. For example, in the field of fashion, in order to simultaneously view the overall atmosphere of a fashion show and the clothing and detailed accessories of each continuously moving model, an interface that displays the entire screen and an enlarged screen by tracking a moving model is required. In addition, it can be used in the field of surveillance and monitoring, where an enlarged screen interface has been widely used in the past. This is because moving objects can be observed intensively. Also, it can be expected to be used in the field of education. Examples include surgical demonstration videos, which require a magnified screen, and educational videos dealing with small-sized materials.
Claims (2)
입력 신호를 영상신호 처리하는 영상 처리부,
상기 영상 처리부로부터의 영상신호를 입력으로 하고,피아이피 기능이 선택되면,전체 표시 영역을 제 1, 제 2, 제 3, 제 4 표시영역으로 분할하고, 상기 제 1 표시영역에 전체영상 신호를 표시하며, 상기 제 2, 제 3, 제 4 표시영역에는 각각 트래킹한 물체의 상단, 중간, 하단 부분을 확대시킨 화면을 표시하는 피아이피 영상 처리부를 포함하는 영상표시장치.In the image display device supporting the PIP function,
An image processing unit for processing an input signal into a video signal;
When the video signal from the image processing unit is input and the PIP function is selected, the entire display area is divided into first, second, third and fourth display areas, and the entire video signal is supplied to the first display area. and a PIP image processor for displaying enlarged screens of upper, middle, and lower portions of the tracked object in the second, third, and fourth display areas, respectively.
상기 피아이피 영상 처리부는,
상기 피아이피 줌 기능을 위한 전반적인 제어를 수행하는 제어부, 확대하고자 하는 사물을 트래킹하여 움직임을 추적하는 추적부, 상기 영상 처리부로부터의 영상신호를 입력하고, 제어부에 의해 상기 영상신호에서 확대할 부분의 영상신호를분리하여 출력하는 화면 선택부, 상기 제어부의 제어에 의해 분활된 제 1, 제 2, 제 3, 제 4 표시영역의 크기를 맞춰줄 표시영역 스케일러, 상기 제어부의 제어에 의해 표시영역 스케일러로부터의 전체 영상신호와 부분 영상신호를 합성하여 하나의 영상신호를 출력하는 영상 합성부를 포함함을 특징으로 하는 영상표시장치.According to claim 1,
The PIP image processing unit,
A control unit that performs overall control for the PIP zoom function, a tracking unit that tracks an object to be enlarged and tracks its motion, inputs a video signal from the image processing unit, and controls a portion to be enlarged in the video signal A screen selection unit that separates and outputs video signals, a display area scaler that adjusts the sizes of the first, second, third, and fourth display areas divided under the control of the control unit, and a display area scaler under the control of the control unit An image display device comprising a video synthesis unit for outputting a single video signal by synthesizing the entire video signal and the partial video signal from the video display device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210088289A KR20230007667A (en) | 2021-07-06 | 2021-07-06 | User Interest Object Tracking Enlargement Screen User Interface |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210088289A KR20230007667A (en) | 2021-07-06 | 2021-07-06 | User Interest Object Tracking Enlargement Screen User Interface |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230007667A true KR20230007667A (en) | 2023-01-13 |
Family
ID=84900191
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210088289A KR20230007667A (en) | 2021-07-06 | 2021-07-06 | User Interest Object Tracking Enlargement Screen User Interface |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20230007667A (en) |
-
2021
- 2021-07-06 KR KR1020210088289A patent/KR20230007667A/en unknown
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5127390B2 (en) | Signal processing apparatus, signal processing method, and program | |
| US20050128530A1 (en) | Image projection control apparatus capable of displaying a plurality of images | |
| US7982751B2 (en) | Methods and systems for controlling a computer using a video image and for combining the video image with a computer desktop | |
| TW201507476A (en) | Television control apparatus and associated method | |
| CN110574000B (en) | display device | |
| US9906710B2 (en) | Camera pan-tilt-zoom (PTZ) control apparatus | |
| JP2008040190A (en) | Video switching system | |
| JP2016213677A (en) | Remote communication system, and control method and program for the same | |
| JP2008028876A (en) | Multi-split screen display device | |
| JP2006092450A (en) | Image processor and image processing method | |
| JPH04308895A (en) | Method for video operation, video search, video process definition, remote operation monitoring, and device or system | |
| KR20230007667A (en) | User Interest Object Tracking Enlargement Screen User Interface | |
| JP2006311063A (en) | Data presentation apparatus and operation method thereof | |
| KR20230006952A (en) | the container capable of the second pumping of the remaining amount | |
| JP2020123818A (en) | Monitoring system, monitoring method, and computer program | |
| CN115334237A (en) | Portrait focusing method, device and medium based on USB camera | |
| JPH10174090A (en) | Monitor supporting device | |
| JP2001103392A (en) | Image frame generating circuit and digital television system using it | |
| JP2003067048A (en) | Information processor | |
| JP2981408B2 (en) | Method and apparatus for controlling high-speed introduction of a target object in a camera image | |
| JPH04198987A (en) | Image processor | |
| JP6515975B2 (en) | MOBILE MONITORING DEVICE, MOBILE MONITORING SYSTEM, PROGRAM, AND CONTROL METHOD | |
| JP2005292414A (en) | Image output controller | |
| JP2003066934A (en) | Display device | |
| KR100460081B1 (en) | A moving picture virtual reality image construction system and a method thereof |