KR102489050B1 - Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof - Google Patents
Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof Download PDFInfo
- Publication number
- KR102489050B1 KR102489050B1 KR1020210151527A KR20210151527A KR102489050B1 KR 102489050 B1 KR102489050 B1 KR 102489050B1 KR 1020210151527 A KR1020210151527 A KR 1020210151527A KR 20210151527 A KR20210151527 A KR 20210151527A KR 102489050 B1 KR102489050 B1 KR 102489050B1
- Authority
- KR
- South Korea
- Prior art keywords
- seat
- caption
- camera
- control unit
- output
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 239000011521 glass Substances 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 4
- 210000003128 head Anatomy 0.000 claims description 3
- 230000004044 response Effects 0.000 claims 1
- 238000004891 communication Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000003252 repetitive effect Effects 0.000 description 4
- 238000007654 immersion Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/278—Subtitling
Abstract
Description
본 발명은 AR 영상 표시에 관한 것이며, 보다 상세하게는 관람 위치에 따른 AR 영상 내 자막 표시 위치 조정 장치 및 방법에 관한 것이다. The present invention relates to AR image display, and more particularly, to an apparatus and method for adjusting a subtitle display position in an AR image according to a viewing position.
이 부분에 기술된 내용은 단순히 본 명세서에 기재된 실시예에 대한 배경 정보를 제공할 뿐 반드시 종래 기술을 구성하는 것은 아니다.The content described in this section merely provides background information on the embodiments described herein and does not necessarily constitute prior art.
공연장을 가면 자막을 위한 LED 패널이나 스크린 등이 설치되어 있고, 해당 LED 패널이나 스크린을 통해 공연 내용에 대한 자막이 송출된다. 이러한 자막 제공을 위한 LED 패널이나 스크린은 공연 관람에 필요한 정보를 제공해 도움이 되기는 하지만, 그 불빛이 공연 관람을 방해하고, 자막과 공연을 번갈아 보아야 하므로 공연 집중도가 저하되는 문제가 있다.When you go to a performance hall, an LED panel or screen for subtitles is installed, and subtitles for the performance are transmitted through the LED panel or screen. Although the LED panel or screen for providing subtitles is helpful by providing necessary information for watching a performance, the light interferes with watching the performance, and since the subtitles and the performance must be viewed alternately, there is a problem in that the concentration of the performance is lowered.
이와 같은 LED 패널 또는 스크린의 단점을 해결하고자, 웨어러블 디바이스의 일종인 헤드 마운티드 디스플레이(Head Mounted Display)를 이용한 자막 제공 기술이 개발되었다. 예를 들어, 투과(see-through)형 헤드 마운티드 디스플레이(HMD)를 사용하여 증강현실(Augmented Reality, AR)을 통해 자막을 실시간으로 제공하는 기술이 제안되었다.In order to solve such disadvantages of the LED panel or screen, a technology for providing captions using a head mounted display, which is a type of wearable device, has been developed. For example, a technique for providing subtitles in real time through augmented reality (AR) using a see-through head-mounted display (HMD) has been proposed.
본 명세서는 관람 위치에 따라 자막의 표시위치를 조정할 수 있는 장치 및 방법을 제공하는 것을 목적으로 한다.An object of the present specification is to provide an apparatus and method capable of adjusting a display position of subtitles according to a viewing position.
본 명세서는 상기 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.This specification is not limited to the above-mentioned tasks, and other tasks not mentioned will be clearly understood by those skilled in the art from the description below.
상술한 과제를 해결하기 위한 본 명세서에 따른 자막 표시 위치 조정 장치는, 자막의 내용, 출력 타이밍 및 출력 위치를 저장하는 메모리부; 관람객의 객석 위치에 대한 정보를 입력하는 입력부; 상기 입력부에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부에 저장된 자막의 출력 위치를 조정하는 제어부; 및 상기 제어부의 제어 신호에 의해 자막의 내용을 조정된 자막 위치에 출력하는 디스플레이부;를 포함할 수 있다.An apparatus for adjusting a caption display position according to the present specification for solving the above problems includes: a memory unit for storing caption content, output timing, and output position; an input unit for inputting information about the location of spectators' seats; a control unit that adjusts the output position of the subtitles stored in the memory unit according to the seat position information of the audience output from the input unit; and a display unit outputting the contents of the caption to the adjusted position of the caption according to a control signal of the controller.
상기 메모리부는 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 더 저장할 수 있다. The memory unit may further store a subtitle position adjustment parameter table (hereinafter referred to as 'parameter table') according to the position of the audience seat.
본 명세서의 일 실시예에 따르면, 상기 입력부는 객석에 설치된 객석 위치 정보를 촬영하는 카메라이고, 상기 제어부는 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to one embodiment of the present specification, the input unit is a camera that captures seat position information installed in an audience seat, and the control unit uses a parameter corresponding to the seat location information captured by the camera in a parameter table stored in the memory unit to You can adjust the output position of subtitles.
본 명세서의 다른 실시예에 따르면, 상기 입력부는 공연장에 설치된 적어도 2이상의 마커를 촬영하는 카메라이고, 상기 제어부는 상기 카메라에서 촬영된 이미지 내 2이상의 마커를 이용하여 객석의 위치 정보를 산출하고, 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to another embodiment of the present specification, the input unit is a camera that captures at least two or more markers installed in a performance hall, and the control unit calculates position information of an audience seat using two or more markers in an image captured by the camera, and In the parameter table stored in the memory unit, the output position of the caption may be adjusted using a parameter corresponding to seat location information photographed by the camera.
상술한 과제를 해결하기 위한 본 명세서에 따른 자막 표시 위치 조정 장치는, 자막의 내용, 출력 타이밍 및 출력 위치를 저장하는 메모리부; 관람객의 객석 위치에 대한 정보를 수신하는 통신부; 상기 통신부에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부에 저장된 자막의 출력 위치를 조정하는 제어부; 및 상기 제어부의 제어 신호에 의해 자막의 내용을 조정된 자막 위치에 출력하는 디스플레이부;를 포함할 수 있다.An apparatus for adjusting a caption display position according to the present specification for solving the above problems includes: a memory unit for storing caption content, output timing, and output position; Communication unit for receiving information about the location of the seat of the spectator; a control unit that adjusts the output position of the subtitles stored in the memory unit according to the seat position information of the audience output from the communication unit; and a display unit outputting the contents of the caption to the adjusted position of the caption according to a control signal of the controller.
본 명세서에 따른 자막 표시 위치 조정 장치는, 자막 표시 위치 조정 장치; 및 상기 자막 표시 위치 조정 장치 중 메모리부, 입력부 및 제어부를 내부에 포함시키며, 상기 디스플레이를 사용자의 눈 앞에 위치시키며, 사용자의 머리에 장착되는 형상을 가진 하우징; 및 상기 자막 표시 위치 조정 장치에 전력을 공급하는 배터리;를 포함하는 AR 안경의 일 구성요소가 될 수 있다.A caption display position adjusting device according to the present specification includes a caption display position adjusting device; and a housing including a memory unit, an input unit, and a control unit among the caption display position adjusting devices, positioning the display in front of the user's eyes, and having a shape mounted on the user's head; and a battery supplying power to the caption display position adjusting device.
상술한 과제를 해결하기 위한 본 명세서에 따른 자막 표시 위치 조정 방법은 메모리부, 입력부, 디스플레이부 및 제어부를 포함하는 장치를 이용하여 자막의 표시 위치를 조정하는 방법으로서, (a) 상기 제어부가 자막의 내용, 출력 타이밍 및 출력 위치를 상기 메모리부에 저장시키는 단계; (b) 상기 제어부가 상기 입력부로부터 관람객의 객석 위치에 대한 정보를 수신하는 단계; (c) 상기 제어부가 상기 입력부에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부에 저장된 자막의 출력 위치를 조정하는 단계; 및 (d) 상기 제어부가 상기 디스플레이부에 자막의 내용을 조정된 자막 위치에 출력하는 단계;를 포함할 수 있다.A method for adjusting the display position of captions according to the present specification for solving the above problems is a method for adjusting the display position of captions using a device including a memory unit, an input unit, a display unit, and a control unit, wherein (a) the control unit controls the caption display position. storing the contents, output timing and output position of the in the memory unit; (b) receiving, by the control unit, information about a seat position of a spectator from the input unit; (c) adjusting, by the control unit, an output position of subtitles stored in the memory unit according to the position information of spectators' seats output from the input unit; and (d) outputting, by the control unit, the contents of the caption to the display unit at the adjusted position of the caption.
본 명세서의 일 실시예에 따르면, 상기 (a) 단계에서 상기 제어부가 상기 메모리부에 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 더 저장할 수 있다.According to one embodiment of the present specification, in step (a), the control unit may further store a subtitle position adjustment parameter table (hereinafter referred to as 'parameter table') according to the position of the audience seat in the memory unit.
본 명세서의 일 실시예에 따르면, 상기 입력부는 객석에 설치된 객석 위치 정보를 촬영하는 카메라이고, 상기 (c) 단계에서 상기 제어부가 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to one embodiment of the present specification, the input unit is a camera that captures seat position information installed in an audience seat, and in the step (c), the control unit records the seat location information captured by the camera from the parameter table stored in the memory unit. An output position of a subtitle may be adjusted using a corresponding parameter.
본 명세서의 다른 실시예에 따르면, 상기 입력부는 공연장에 설치된 적어도 2이상의 마커를 촬영하는 카메라이고, 상기 (c) 단계에서 상기 제어부가 상기 카메라에서 촬영된 이미지 내 2이상의 마커를 이용하여 객석의 위치 정보를 산출하고, 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to another embodiment of the present specification, the input unit is a camera that captures at least two markers installed in a performance hall, and in the step (c), the controller determines the position of the seat by using the two or more markers in the image captured by the camera. The information is calculated, and the output position of the caption may be adjusted using a parameter corresponding to the seat position information captured by the camera in the parameter table stored in the memory unit.
상술한 과제를 해결하기 위한 본 명세서에 따른 자막 표시 위치 조정 방법은 메모리부, 입력부, 디스플레이부 및 제어부를 포함하는 장치를 이용하여 자막의 표시 위치를 조정하는 방법으로서, (a) 상기 제어부가 자막의 내용, 출력 타이밍 및 출력 위치를 상기 메모리부에 저장시키는 단계; (b) 상기 제어부가 상기 통신부로부터 관람객의 객석 위치에 대한 정보를 수신하는 단계; (c) 상기 제어부가 상기 통신부에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부에 저장된 자막의 출력 위치를 조정하는 단계; 및 (d) 상기 제어부가 상기 디스플레이부에 자막의 내용을 조정된 자막 위치에 출력하는 단계;를 포함할 수 있다.A method for adjusting the display position of captions according to the present specification for solving the above problems is a method for adjusting the display position of captions using a device including a memory unit, an input unit, a display unit, and a control unit, wherein (a) the control unit controls the caption display position. storing the contents, output timing and output position of the in the memory unit; (b) receiving, by the control unit, information about a seat location of a spectator from the communication unit; (c) adjusting, by the control unit, an output position of subtitles stored in the memory unit according to information on the seat location of spectators output from the communication unit; and (d) outputting, by the control unit, the contents of the caption to the display unit at the adjusted position of the caption.
본 명세서에 따른 자막 표시 위치 조정 방법은, 컴퓨터에서 자막 표시 위치 조정 방법의 각 단계들을 수행하도록 작성되어 컴퓨터로 독출 가능한 기록 매체에 기록된 컴퓨터프로그램의 형태로 구현될 수 있다.The method for adjusting the position of a caption display according to the present specification may be implemented in the form of a computer program written to perform each step of the method for adjusting a display position of a caption in a computer and recorded on a computer-readable recording medium.
본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the invention are included in the detailed description and drawings.
본 명세서에 따르면, 관람 위치에 관계없이 적절한 위치에 자막이 표시되어, 자막이 관객의 몰입도를 저해하지 않으며, 공연의 만족도가 향상될 수 있다.According to the present specification, subtitles are displayed at an appropriate location regardless of the viewing position, so that the subtitles do not hinder the audience's immersion and the satisfaction of the performance can be improved.
본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the description below.
도 1은 종래 AR 안경에 자막을 표시하는 예시도이다.
도 2는 관람객의 위치에 따라 자막과 공연자가 겹쳐지는 예시도이다.
도 3은 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 장치의 개략적인 구성도이다.
도 4는 객석의 위치 정보에 따라 자막 위치 조정 값을 산출하는 참고도이다.
도 5는 객석 위치에 따라 자막의 위치가 수정된 예시도이다.
도 6은 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 방법의 개략적인 흐름도이다.
도 7은 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 장치()의 개략적인 구성을 나타낸 블럭도이다.
도 8은 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 방법의 개략적인 흐름도이다.1 is an exemplary view of displaying a caption on conventional AR glasses.
2 is an exemplary diagram in which subtitles and performers are overlapped according to the location of a viewer.
3 is a schematic configuration diagram of an apparatus for adjusting a position of a caption display according to the first embodiment of the present specification.
4 is a reference diagram for calculating a subtitle position adjustment value according to seat location information.
5 is an exemplary view in which the location of subtitles is modified according to the location of an audience seat.
6 is a schematic flowchart of a method for adjusting a caption display position according to the first embodiment of the present specification.
7 is a block diagram showing a schematic configuration of an apparatus for adjusting a position of a caption display according to a second embodiment of the present specification.
8 is a schematic flowchart of a method for adjusting a caption display position according to a second embodiment of the present specification.
본 명세서에 개시된 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 명세서가 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 명세서의 개시가 완전하도록 하고, 본 명세서가 속하는 기술 분야의 통상의 기술자(이하 '당업자')에게 본 명세서의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 명세서의 권리 범위는 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the invention disclosed in this specification, and methods for achieving them, will become clear with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present specification is not limited to the embodiments disclosed below and may be implemented in a variety of different forms, and only the present embodiments make the disclosure of the present specification complete, and are common in the art to which the present specification belongs. It is provided to fully inform the technical person (hereinafter referred to as 'one skilled in the art') of the scope of the present specification, and the scope of rights of the present specification is only defined by the scope of the claims.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 명세서의 권리 범위를 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.Terms used in this specification are for describing the embodiments and are not intended to limit the scope of the present specification. In this specification, singular forms also include plural forms unless specifically stated otherwise in a phrase. As used herein, "comprises" and/or "comprising" does not exclude the presence or addition of one or more other elements other than the recited elements.
명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.Like reference numerals throughout the specification refer to like elements, and “and/or” includes each and every combination of one or more of the recited elements. Although "first", "second", etc. are used to describe various components, these components are not limited by these terms, of course. These terms are only used to distinguish one component from another. Accordingly, it goes without saying that the first element mentioned below may also be the second element within the technical spirit of the present invention.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 명세서가 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used in this specification may be used with meanings commonly understood by those skilled in the art to which this specification belongs. In addition, terms defined in commonly used dictionaries are not interpreted ideally or excessively unless explicitly specifically defined.
공간적으로 상대적인 용어인 "아래(below)", "밑(beneath)", "하부(lower)", "위(above)", "상부(upper)" 등은 도면에 도시되어 있는 바와 같이 하나의 구성요소와 다른 구성요소들과의 상관관계를 용이하게 기술하기 위해 사용될 수 있다. 공간적으로 상대적인 용어는 도면에 도시되어 있는 방향에 더하여 사용시 또는 동작시 구성요소들의 서로 다른 방향을 포함하는 용어로 이해되어야 한다. 예를 들어, 도면에 도시되어 있는 구성요소를 뒤집을 경우, 다른 구성요소의 "아래(below)"또는 "밑(beneath)"으로 기술된 구성요소는 다른 구성요소의 "위(above)"에 놓일 수 있다. 따라서, 예시적인 용어인 "아래"는 아래와 위의 방향을 모두 포함할 수 있다. 구성요소는 다른 방향으로도 배향될 수 있으며, 이에 따라 공간적으로 상대적인 용어들은 배향에 따라 해석될 수 있다.The spatially relative terms "below", "beneath", "lower", "above", "upper", etc. It can be used to easily describe a component's correlation with other components. Spatially relative terms should be understood as including different orientations of elements in use or operation in addition to the orientations shown in the drawings. For example, if you flip a component that is shown in a drawing, a component described as "below" or "beneath" another component will be placed "above" the other component. can Thus, the exemplary term “below” may include directions of both below and above. Components may also be oriented in other orientations, and thus spatially relative terms may be interpreted according to orientation.
하나의 소자(elements)가 다른 소자와 "접속된(connected to)" 또는 "커플링된(coupled to)" 이라고 지칭되는 것은, 다른 소자와 직접 연결 또는 커플링된 경우 또는 중간에 다른 소자를 개재한 경우를 모두 포함한다. 반면, 하나의 소자가 다른 소자와 "직접 접속된(directly connected to)" 또는 "직접 커플링된(directly coupled to)"으로 지칭되는 것은 중간에 다른 소자를 개재하지 않은 것을 나타낸다.An element is said to be "connected to" or "coupled to" another element when it is directly connected or coupled to another element or intervening with another element. include all cases. On the other hand, when one element is referred to as “directly connected to” or “directly coupled to” another element, it indicates that another element is not intervened.
도 1은 종래 AR 안경에 자막을 표시하는 예시도이다.1 is an exemplary view of displaying a caption on conventional AR glasses.
도 1의 (a)를 참조하면, 종래 공연장의 일부 영역에 스크린을 설치하고, 스크린에 배우의 대사를 자막으로 표시한 예시도이다. 도 1의 (a)와 같이 배우의 위치에 관계없이 동일한 위치에 자막을 표시할 경우, 관람객의 시선이 분산되어 공연에 몰입도가 떨어지는 문제점이 존재한다. 따라서, 관람객이 AR 안경을 착용하고, AR 안경의 화면에 자막을 표시할 경우, 시선이 분산되는 문제를 해결할 수 있다. 특히, 대사를 해당 배우의 위치와 연계하여 표시할 경우, 공연에 대한 몰입도가 더욱 향상되는 장점이 있다.Referring to (a) of FIG. 1 , a screen is installed in a part of a conventional theater and an actor's lines are displayed as subtitles on the screen. As shown in (a) of FIG. 1 , when subtitles are displayed at the same position regardless of the position of an actor, there is a problem in that the viewer's gaze is dispersed and the degree of immersion in the performance is reduced. Therefore, when a viewer wears AR glasses and displays subtitles on the screen of the AR glasses, it is possible to solve the problem of distraction of gaze. In particular, when the lines are displayed in association with the location of the corresponding actor, there is an advantage in that the degree of immersion in the performance is further improved.
그러나 이러한 AR 안경을 이용한 자막 표시에는 관람객의 위치에 따라 발생하는 문제점이 있다.However, there is a problem that occurs depending on the location of the viewer in displaying subtitles using these AR glasses.
도 2는 관람객의 위치에 따라 자막과 공연자가 겹쳐지는 예시도이다.2 is an exemplary diagram in which subtitles and performers are overlapped according to the location of a viewer.
도 2를 참조하면, 무대를 마주보는 객석의 위치를 A 구역, B 구역, C 구역으로 나눈 것을 확인할 수 있다. AR 안경에 표시되는 자막의 위치는 공연자를 정면으로 바라보았을 때, 공연자의 위치를 기준으로 자막의 위치를 결정하는 것이 일반적이다. 따라서, 객석의 중앙에 해당하는 B 구역의 관람객은 AR 안경에 표시되는 자막의 위치가 공연자의 위치를 고려하여 최적의 화면을 볼 수 있다. 반면, 객석의 양 끝에 해당하는 A 구역 및 C 구역의 관람객은 AR 안경에 표시되는 자막이 공연자와 겹치거나 매우 떨어진 상태로 표시될 가능성이 높다.Referring to FIG. 2 , it can be seen that the seats facing the stage are divided into zone A, zone B, and zone C. In general, the position of the subtitles displayed on the AR glasses is determined based on the position of the performer when looking at the performer from the front. Therefore, the audience in area B corresponding to the center of the audience can view the optimal screen by considering the position of the performer in the position of the subtitle displayed on the AR glasses. On the other hand, it is highly likely that the subtitles displayed on the AR glasses will overlap or be displayed very far from the performers for the audience in zones A and C, which correspond to both ends of the audience.
따라서, 본 명세서에 따른 자막 표시 위치 조정 장치 및 방법은 관람 위치에 따라 자막의 위치를 자동으로 조정할 수 있는 기술을 제공할 수 있다. 이하, 첨부된 도면을 참조하여 본 명세서의 실시예를 상세하게 설명한다.Therefore, the apparatus and method for adjusting the position of a caption display according to the present specification can provide a technology capable of automatically adjusting the position of a caption according to a viewing position. Hereinafter, embodiments of the present specification will be described in detail with reference to the accompanying drawings.
도 3은 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 장치의 개략적인 구성도이다.3 is a schematic configuration diagram of an apparatus for adjusting a position of a caption display according to the first embodiment of the present specification.
도 3을 참조하면, 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 장치(100)는 메모리부(110), 디스플레이부(120), 제어부(130) 및 입력부(140)를 포함할 수 있다.Referring to FIG. 3 , the
상기 메모리부(110)는 자막의 내용, 출력 타이밍 및 출력 위치를 저장할 수 있다. 상기 출력 위치는 상기 디스플레이부(120)의 화면 내 출력되는 위치를 의미한다. 상기 출력 위치 정보는 디스플레이부(120)의 중심점을 기준으로 상대적인 거리로 설정될 수 있고, 디스플레이부(120)의 픽셀 좌표로 설정될 수도 있다.The
상기 입력부(140)는 관람객의 객석 위치에 대한 정보를 입력할 수 있다. 상기 입력부(140)는 영상 신호 입력을 위한 카메라, 오디오 신호 입력을 위한 마이크로폰(microphone), 사용자로부터 정보를 입력받기 위한 터치키(touch key)나 푸시키(mechanical key) 등을 포함할 수 있다.The
본 명세서의 일 실시예에 따르면, 사용자는 입력부(140)를 통해 자신의 객석 위치에 대한 정보를 직접 입력할 수 있다.According to one embodiment of the present specification, the user may directly input information about the location of his seat through the
본 명세서의 다른 실시예에 따르면, 상기 입력부는 카메라이고, 객석에는 각 객석의 위치를 나타내는 정보, 예를 들어, 객석 자리 번호, 바코드, QR코드 등이 설치되어 있을 수 있다. 이 경우, 사용자는 상기 카메라를 이용하여 상기 객석 정보를 촬영할 수 있다.According to another embodiment of the present specification, the input unit may be a camera, and information indicating the location of each seat may be installed in the seat, for example, a seat number, a barcode, a QR code, or the like. In this case, the user may capture the seat information using the camera.
본 명세서의 또 다른 실시예에 따르면, 상기 입력부는 카메라이고, 공연장에는 미리 설정된 위치에 2이상의 마커가 설치되어 있을 수 있다. 이 경우, 사용자는 상기 카메라를 이용하여 상기 2이상의 마커를 촬영할 수 있고, 상기 제어부(130)는 촬영된 이미지 내 마커의 크기, 위치, 기울기 등을 이용하여 촬영된 객석의 위치를 산출할 수 있다.According to another embodiment of the present specification, the input unit may be a camera, and two or more markers may be installed at preset positions in the performance hall. In this case, the user can photograph the two or more markers using the camera, and the
상기 제어부(130)는 상기 입력부(140)에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부(110)에 저장된 자막의 출력 위치를 조정할 수 있다.The
본 명세서의 일 실시예에 따르면, 공연장의 객석은 미리 설정된 객석 구역에 따라 나누어질 수 있다. 이 경우, 상기 메모리부(110)에는 각 구역마다 미리 설정된 자막의 출력 위치가 저장될 수 있다. 상기 제어부(130)는 객석 위치가 어느 구역에 속하는지 판단하고, 해당 구역마다 미리 설정된 위치에 맞추어 자막의 출력 위치를 조정할 수 있다.According to one embodiment of the present specification, seats in a performance hall may be divided according to preset seats. In this case, the
본 명세서의 다른 실시예에 따르면, 상기 메모리부(110)는 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 더 저장할 수 있다. 그리고 상기 제어부(130)는 상기 메모리부(110)에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to another embodiment of the present specification, the
도 4는 객석의 위치 정보에 따라 자막 위치 조정 값을 산출하는 참고도이다.4 is a reference diagram for calculating a subtitle position adjustment value according to seat location information.
도 4를 참조하면, 정면 좌석 A에서의 텍스트 위치가 배우의 위치에 맞춰서 각각 m과 n으로 하고, 그 거리를 x라고 가정하겠다. 측면 B 좌석에서의 텍스트 위치는 시야각도에 의해 m과 n’으로 조정이 되어야한다. 좌석 B에서 m, n의 중앙까지 연결한 점선(y)과 무대 중앙으로부터 연장선(h+z)을 시야각 Ψ로 정의하면, 원래 텍스트 위치 m, n과 조정된 m과 n’의 각도는 동위각과 엇각의 관계로 시야각과 같이 Ψ이다. 따라서 조정된 m, n＇의 거리는 삼각함수에 의해 xsinΨ로 구할 수 있다. 좌석 A와 B의 거리 관계 z와 d, 좌석 A로부터 공연자의 거리는 h로 공연장의 실제 객석 사이의 거리로서 미리 알고 입력 가능한 정보이므로, sinΨ를 산출할 수 있다. 이후 상기 제어부(130)는 정면 좌석 A에서는 m, n 텍스트를 각각 x/2 거리에 표시하고, 측면 좌석 B에서는 m, n' 텍스트를 xsinΨ/2 거리에 표시할 수 있다.Referring to FIG. 4 , it is assumed that the position of the text in the front seat A is set to m and n respectively according to the position of the actor, and the distance is x. The position of the text in the side B seat should be adjusted to m and n' by the viewing angle. If the dotted line (y) connecting from seat B to the center of m, n and the extension line (h+z) from the center of the stage are defined as the viewing angle Ψ, the original text position m, n and the adjusted angles of m and n' are equivalent to It is Ψ like the viewing angle due to the relationship of the opposite angle. Therefore, the adjusted distance of m and n' can be obtained as xsinΨ by the trigonometric function. The distance relationship z and d between seats A and B, and the distance h of the performer from seat A, are information that can be input and known in advance as the distance between actual seats in the concert hall. Thereafter, the
본 명세서의 일 실시예에 따르면, 상기 파라미터 테이블은 객석 위치에 따라 sinΨ이 저장될 수 있다. 본 명세서의 다른 실시예에 따르면, 상기 파라미터 테이블은 객석 위치에 따라 텍스트 사이의 거리 값 xsinΨ/2를 저장될 수 있다. 본 명세서의 또 다른 실시예에 따르면, 상기 파라미터 테이블은 객석 위치에 따라 기준 좌석(A)와 현재 객석 위치(B)의 거리 관계 z와 d, 좌석 A로부터 공연자의 거리는 h로 공연장의 실제 객석 사이의 거리에 대한 값이 저장될 있다. 이 경우, 상기 제어부(130)는 상기 파라미터값을 이용하여 실시간으로 sinΨ를 산출할 수 있다.According to one embodiment of the present specification, sinΨ may be stored in the parameter table according to the location of the seat. According to another embodiment of the present specification, the parameter table may store a distance value xsinΨ/2 between texts according to a seat position. According to another embodiment of the present specification, the parameter table is based on the seat position (A) and the current seat position (B) distance relationship z and d, the distance of the performer from the seat A is h, between the actual seats in the performance hall A value for the distance of can be stored. In this case, the
다시 도 3을 참조하면, 상기 디스플레이부(120)는 상기 제어부(130)의 제어 신호에 의해 자막의 내용을 조정된 자막 위치에 출력할 수 있다.Referring back to FIG. 3 , the
도 5는 객석 위치에 따라 자막의 위치가 수정된 예시도이다.5 is an exemplary view in which the location of subtitles is modified according to the location of an audience seat.
도 5를 참조하면, A구역 및 C 구역에서 화면에 표시되는 자막의 위치가 조정된 것을 확인할 수 있다. Referring to FIG. 5 , it can be seen that the positions of subtitles displayed on the screen have been adjusted in area A and area C.
이하, 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 방법을 설명하겠다. 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 방법은 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 장치(100)를 이용하므로, 각 구성에 대한 반복적인 설명은 생략하도록 한다.Hereinafter, a method for adjusting a caption display position according to the first embodiment of the present specification will be described. Since the caption display position adjusting method according to the first embodiment of the present specification uses the caption display
도 6은 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 방법의 개략적인 흐름도이다.6 is a schematic flowchart of a method for adjusting a caption display position according to the first embodiment of the present specification.
도 6을 참조하면, 먼저 단계 S10에서 상기 제어부(130)가 자막의 내용, 출력 타이밍 및 출력 위치를 상기 메모리부(110)에 저장시킬 수 있다.Referring to FIG. 6 , first, in step S10 , the
본 명세서의 일 실시예에 따르면, 상기 단계 S10에서 상기 제어부(130)가 상기 메모리부에 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 더 저장시킬 수 있다.According to one embodiment of the present specification, in the step S10, the
다음 단계 S12에서 상기 제어부가 상기 입력부(140)로부터 관람객의 객석 위치에 대한 정보를 수신할 수 있다.In the next step S12, the control unit may receive information about the seat position of the spectator from the
본 명세서의 일 실시예에 따르면, 단계 S12에서 상기 입력부(140)는 객석에 설치된 객석 위치 정보를 촬영하는 카메라일 수 있다. 본 명세서의 다른 실시예에 따르면, 단계 S12에서 상기 입력부(140)는 공연장에 설치된 적어도 2이상의 마커를 촬영하는 카메라일 수 있다.According to one embodiment of the present specification, in step S12, the
다음 단계 S13에서 상기 제어부(130)가 상기 입력부(140)에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부(110)에 저장된 자막의 출력 위치를 조정할 수 있다. In the next step S13 , the
본 명세서의 일 실시예에 따르면, 단계 S13에서 상기 제어부(130)가 상기 메모리부(110)에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to one embodiment of the present specification, in step S13, the
본 명세서의 다른 실시예에 따르면, 단계 S13에서 상기 제어부(130)가 상기 카메라에서 촬영된 이미지 내 2이상의 마커를 이용하여 객석의 위치 정보를 산출하고, 상기 메모리부(110)에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정할 수 있다.According to another embodiment of the present specification, in step S13, the
다은 단계 S13에서, 상기 제어부(130)가 상기 디스플레이부(120)에 자막의 내용을 조정된 자막 위치에 출력할 수 있다.In the next step S13, the
도 7은 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 장치(200)의 개략적인 구성을 나타낸 블럭도이다.7 is a block diagram showing a schematic configuration of an
도 7을 참조하면, 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 장치(200)는 도 3에 도시된 본 명세서의 제1 실시예에 따른 자막 표시 위치 조정 장치(100)와 비교할 때, 입력부(140)가 없고 대신 통신부(150)를 포함하는 것을 확인할 수 있다.Referring to FIG. 7 , the caption display
상기 통신부(150)는 관람객의 객석 위치에 대한 정보를 수신할 수 있다. 일 예로, 상기 통신부(150)는 관람객의 스마트폰과 같은 개인용 통신 단말을 통해서 객석 위치 정보를 수신할 수 있다. 상기 스마트폰에는 공연장 관련 어플리케이션이 설치되어 있을 수 있으며, 해당 어플리케이션은 각 관람객의 객석 번호 즉, 객석 위치 정보를 저장할 수 있다. 상기 통신부(150)는 근거리 통신 모듈로서, 상기 스마트폰과 통신을 통해 어플리케이션에 저장된 객석 위치 정보를 수신할 수 있다.The
이 경우, 상기 제어부(130)는 상기 통신부(150)에서 출력된 관람객의 객석 위치 정보에 따라 상기 메모리부(110)에 저장된 자막의 출력 위치를 조정할 수 있다. 나머지 메모리부(110) 및 디스플레이부(120)의 역할은 동일하므로 반복적인 설명은 생략한다.In this case, the
이하, 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 방법을 설명하겠다. 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 방법은 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 장치(200)를 이용하므로, 각 구성에 대한 반복적인 설명은 생략하도록 한다.Hereinafter, a method for adjusting a caption display position according to a second embodiment of the present specification will be described. Since the caption display position adjusting method according to the second embodiment of the present specification uses the caption display
도 8은 본 명세서의 제2 실시예에 따른 자막 표시 위치 조정 방법의 개략적인 흐름도이다.8 is a schematic flowchart of a method for adjusting a caption display position according to a second embodiment of the present specification.
도 8을 참조하면, 단계 S20은 단계 S10에 대응하고, 단계 S21은 단계 S11에 대응하고, 단계 S22은 단계 S12에 대응하고, 단계 S23은 단계 S13에 대응하는 것을 확인할 수 있다. 다만, 단계 S21에서 객석 위치 정보를 입력부(140)가 아닌 통신부(150)에서 수신하는 것이 차이날 뿐, 나머지 사항은 동일하므로 반복적인 설명은 생략한다.Referring to FIG. 8 , it can be confirmed that step S20 corresponds to step S10, step S21 corresponds to step S11, step S22 corresponds to step S12, and step S23 corresponds to step S13. However, since the only difference is that the seat location information is received through the
본 명세서의 제1 및 제2 실시예에 따른 자막 표시 위치 조정 장치(100, 200)는 상기 자막 표시 위치 조정 장치 중 메모리부, 입력부 및 제어부를 내부에 포함시키며, 상기 디스플레이를 사용자의 눈 앞에 위치시키며, 사용자의 머리에 장착되는 형상을 가진 하우징 및 상기 자막 표시 위치 조정 장치에 전력을 공급하는 배터리를 포함하는 AR 안경의 일 구성요소가 될 수 있다.The caption display
본 명세서의 제1 및 제2 실시예에 따른 자막 표시 위치 조정 방법은 컴퓨터에서 제1 및 제2 실시예에 따른 자막 표시 위치 조정 방법의 각 단계들을 수행하도록 작성되어 컴퓨터로 독출 가능한 기록 매체에 기록된 컴퓨터프로그램으로 구현될 수 있다.The method for adjusting the position of a caption display according to the first and second embodiments of the present specification is prepared so that a computer performs each step of the method for adjusting a position of a caption display according to the first and second embodiments, and is recorded in a computer-readable recording medium. can be implemented as a computer program.
상기 전술한 컴퓨터프로그램은, 상기 컴퓨터가 프로그램을 읽어 들여 프로그램으로 구현된 상기 방법들을 실행시키기 위하여, 상기 컴퓨터의 프로세서(CPU)가 상기 컴퓨터의 장치 인터페이스를 통해 읽힐 수 있는 C/C++, C#, JAVA, Python, 기계어 등의 컴퓨터 언어로 코드화된 코드(Code)를 포함할 수 있다. 이러한 코드는 상기 방법들을 실행하는 필요한 기능들을 정의한 함수 등과 관련된 기능적인 코드(Functional Code)를 포함할 수 있고, 상기 기능들을 상기 컴퓨터의 프로세서가 소정의 절차대로 실행시키는데 필요한 실행 절차 관련 제어 코드를 포함할 수 있다. 또한, 이러한 코드는 상기 기능들을 상기 컴퓨터의 프로세서가 실행시키는데 필요한 추가 정보나 미디어가 상기 컴퓨터의 내부 또는 외부 메모리의 어느 위치(주소 번지)에서 참조되어야 하는지에 대한 메모리 참조관련 코드를 더 포함할 수 있다. 또한, 상기 컴퓨터의 프로세서가 상기 기능들을 실행시키기 위하여 원격(Remote)에 있는 어떠한 다른 컴퓨터나 서버 등과 통신이 필요한 경우, 코드는 상기 컴퓨터의 통신 모듈을 이용하여 원격에 있는 어떠한 다른 컴퓨터나 서버 등과 어떻게 통신해야 하는지, 통신 시 어떠한 정보나 미디어를 송수신해야 하는지 등에 대한 통신 관련 코드를 더 포함할 수 있다.The above-described computer program is C / C ++, C #, JAVA that can be read by a processor (CPU) of the computer through a device interface of the computer so that the computer reads the program and executes the methods implemented as a program. , Python, may include code coded in a computer language such as machine language. These codes may include functional codes related to functions defining necessary functions for executing the methods, and include control codes related to execution procedures necessary for the processor of the computer to execute the functions according to a predetermined procedure. can do. In addition, these codes may further include memory reference related codes for which location (address address) of the computer's internal or external memory should be referenced for additional information or media required for the computer's processor to execute the functions. there is. In addition, when the processor of the computer needs to communicate with any other remote computer or server in order to execute the functions, the code uses the computer's communication module to determine how to communicate with any other remote computer or server. It may further include communication-related codes for whether to communicate, what kind of information or media to transmit/receive during communication, and the like.
상기 저장되는 매체는, 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상기 저장되는 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있지만, 이에 제한되지 않는다. 즉, 상기 프로그램은 상기 컴퓨터가 접속할 수 있는 다양한 서버 상의 다양한 기록매체 또는 사용자의 상기 컴퓨터상의 다양한 기록매체에 저장될 수 있다. 또한, 상기 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장될 수 있다.The storage medium is not a medium that stores data for a short moment, such as a register, cache, or memory, but a medium that stores data semi-permanently and is readable by a device. Specifically, examples of the storage medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc., but are not limited thereto. That is, the program may be stored in various recording media on various servers accessible by the computer or various recording media on the user's computer. In addition, the medium may be distributed to computer systems connected through a network, and computer readable codes may be stored in a distributed manner.
이상, 첨부된 도면을 참조로 하여 본 명세서의 실시예를 설명하였지만, 본 명세서가 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다. Although the embodiments of the present specification have been described with reference to the accompanying drawings, those skilled in the art to which the present specification pertains can be implemented in other specific forms without changing the technical spirit or essential features of the present invention. you will be able to understand Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive.
100, 200 : 자막 표시 위치 조정 장치
110 : 메모리부
120 : 디스플레이부
130 : 제어부
140 : 입력부
150 : 통신부100, 200: Subtitle display position adjusting device
110: memory unit
120: display unit
130: control unit
140: input unit
150: Ministry of Communication
Claims (10)
객석에 설치된 객석 위치 정보를 촬영하는 카메라;
상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정하는 제어부; 및
상기 제어부의 제어 신호에 의해 자막의 내용을 조정된 자막 위치에 출력하는 디스플레이부;를 포함하는 자막 표시 위치 조정 장치.A memory unit storing a subtitle position adjustment parameter table (hereinafter referred to as 'parameter table') according to the contents of the subtitle, output timing, output location, and seat location;
A camera installed in the seat to photograph seat location information;
a control unit that adjusts the output position of subtitles by using a parameter corresponding to seat location information captured by the camera in the parameter table stored in the memory unit; and
and a display unit outputting the contents of the caption to the adjusted caption position according to the control signal of the controller.
공연장에 설치된 적어도 2이상의 마커를 촬영하는 카메라;
상기 카메라에서 촬영된 이미지 내 2이상의 마커를 이용하여 객석의 위치 정보를 산출하고, 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정하는 제어부; 및
상기 제어부의 제어 신호에 의해 자막의 내용을 조정된 자막 위치에 출력하는 디스플레이부;를 포함하는 자막 표시 위치 조정 장치.a memory unit for storing a subtitle location adjustment parameter table (hereinafter referred to as 'parameter table') according to subtitle content, output timing, output location, and seat location;
A camera for photographing at least two markers installed in the performance hall;
Calculate seat position information using two or more markers in the image captured by the camera, and adjust the output position of subtitles using a parameter corresponding to the seat position information captured by the camera in the parameter table stored in the memory unit. a control unit; and
and a display unit that outputs the contents of the caption to the adjusted caption position in response to a control signal from the controller.
상기 자막 표시 위치 조정 장치 중 메모리부, 카메라 및 제어부를 내부에 포함시키며, 상기 디스플레이를 사용자의 눈 앞에 위치시키며, 사용자의 머리에 장착되는 형상을 가진 하우징; 및
상기 자막 표시 위치 조정 장치에 전력을 공급하는 배터리;를 포함하는 AR 안경.a caption display position adjusting device according to claim 1 or 2; and
a housing including a memory unit, a camera, and a control unit among the caption display position adjusting devices, positioning the display in front of the user's eyes, and having a shape mounted on the user's head; and
AR glasses including a battery supplying power to the caption display position adjusting device.
(a) 상기 제어부가 자막의 내용, 출력 타이밍, 출력 위치 및 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 상기 메모리부에 저장시키는 단계;
(b) 상기 제어부가 객석에 설치된 객석 위치 정보를 촬영한 카메라로부터 관람객의 객석 위치에 대한 정보를 수신하는 단계;
(c) 상기 제어부가 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정하는 단계; 및
(d) 상기 제어부가 상기 디스플레이부에 자막의 내용을 조정된 자막 위치에 출력하는 단계;를 포함하는 자막 표시 위치 조정 방법.A method of adjusting a display position of subtitles using a device including a memory unit, a camera, a display unit, and a control unit, the method comprising:
(a) storing, by the control unit, a subtitle position adjustment parameter table (hereinafter referred to as 'parameter table') according to subtitle content, output timing, output location, and seat location in the memory unit;
(b) receiving, by the control unit, information about the seat position of the spectator from a camera that has taken the seat position information installed in the seat;
(c) adjusting, by the control unit, an output position of subtitles by using a parameter corresponding to seat position information photographed by the camera in the parameter table stored in the memory unit; and
and (d) outputting, by the control unit, the content of the caption to the display unit at the adjusted position of the caption.
(a) 상기 제어부가 자막의 내용, 출력 타이밍, 출력 위치 및 객석의 위치에 따른 자막 위치 조정 파라미터 테이블(이하 '파라미터 테이블')를 상기 메모리부에 저장시키는 단계;
(b) 상기 제어부가 공연장에 설치된 적어도 2이상의 마커를 촬영한 카메라로부터 관람객의 객석 위치에 대한 정보를 수신하는 단계;
(c) 상기 제어부가 상기 카메라에서 촬영된 이미지 내 2이상의 마커를 이용하여 객석의 위치 정보를 산출하고, 상기 메모리부에 저장된 파라미터 테이블에서 상기 카메라에서 촬영된 객석 위치 정보에 대응하는 파라미터를 이용하여 자막의 출력 위치를 조정하는 단계; 및
(d) 상기 제어부가 상기 디스플레이부에 자막의 내용을 조정된 자막 위치에 출력하는 단계;를 포함하는 자막 표시 위치 조정 방법.A method of adjusting a display position of subtitles using a device including a memory unit, a camera, a display unit, and a control unit, the method comprising:
(a) storing, by the control unit, a subtitle position adjustment parameter table (hereinafter referred to as 'parameter table') according to subtitle content, output timing, output location, and seat location in the memory unit;
(b) receiving, by the control unit, information about the seat position of spectators from a camera that captures at least two markers installed in the performance hall;
(c) The control unit calculates seat location information using two or more markers in the image captured by the camera, and uses a parameter corresponding to the seat location information captured by the camera in the parameter table stored in the memory unit. Adjusting the output position of subtitles; and
and (d) outputting, by the control unit, the content of the caption to the display unit at the adjusted position of the caption.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210151527A KR102489050B1 (en) | 2021-11-05 | 2021-11-05 | Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210151527A KR102489050B1 (en) | 2021-11-05 | 2021-11-05 | Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102489050B1 true KR102489050B1 (en) | 2023-01-17 |
Family
ID=85111087
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210151527A KR102489050B1 (en) | 2021-11-05 | 2021-11-05 | Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102489050B1 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190073167A (en) * | 2017-12-18 | 2019-06-26 | 씨제이포디플렉스 주식회사 | Subtitle providing system and subtitle display method |
| KR20200000314A (en) * | 2018-06-22 | 2020-01-02 | 씨제이올리브네트웍스 주식회사 | Smart glasses and method of providing subtitles using the same |
| KR102316459B1 (en) | 2020-12-02 | 2021-10-25 | 주식회사 피앤씨솔루션 | Wireless augmented reality glasses device for providing subtitles in concert halls |
-
2021
- 2021-11-05 KR KR1020210151527A patent/KR102489050B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190073167A (en) * | 2017-12-18 | 2019-06-26 | 씨제이포디플렉스 주식회사 | Subtitle providing system and subtitle display method |
| KR20200000314A (en) * | 2018-06-22 | 2020-01-02 | 씨제이올리브네트웍스 주식회사 | Smart glasses and method of providing subtitles using the same |
| KR102316459B1 (en) | 2020-12-02 | 2021-10-25 | 주식회사 피앤씨솔루션 | Wireless augmented reality glasses device for providing subtitles in concert halls |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10318028B2 (en) | Control device and storage medium | |
| US10642564B2 (en) | Display system, display device, information display method, and program | |
| KR102462206B1 (en) | Method and apparatus for rendering timed text and graphics in virtual reality video | |
| US20190331914A1 (en) | Experience Sharing with Region-Of-Interest Selection | |
| US7817104B2 (en) | Augmented reality apparatus and method | |
| US9024842B1 (en) | Hand gestures to signify what is important | |
| JP6364715B2 (en) | Transmission display device and control method of transmission display device | |
| US8386909B2 (en) | Capturing and presenting interactions with image-based media | |
| KR102124617B1 (en) | Method for composing image and an electronic device thereof | |
| CN109416931A (en) | Device and method for eye tracking | |
| US20130010052A1 (en) | Information processing system and information processing method | |
| JP6155643B2 (en) | Display device and control method of display device | |
| US20150271457A1 (en) | Display device, image display system, and information processing method | |
| JP5464130B2 (en) | Information display system, apparatus, method and program | |
| JP2006107048A (en) | Controller and control method associated with line-of-sight | |
| JPWO2019181488A1 (en) | Information processing equipment, information processing methods, and programs | |
| US20190347864A1 (en) | Storage medium, content providing apparatus, and control method for providing stereoscopic content based on viewing progression | |
| JP2012108793A (en) | Information display system, device, method and program | |
| KR102489050B1 (en) | Apparatus for adjusting subtitle display position in ar video according to viewing position and method thereof | |
| JP6540426B2 (en) | Display system, display device, information display method, and program | |
| CN114846434A (en) | Non-uniform stereoscopic rendering | |
| US11972505B2 (en) | Augmented image overlay on external panel | |
| JP6733401B2 (en) | Display system, display device, information display method, and program | |
| EP2942707A1 (en) | Image display system, display device, and image processing method | |
| US20240104862A1 (en) | Spatially aware playback for extended reality content |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GRNT | Written decision to grant |