KR20160005878A - Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system - Google Patents

Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system Download PDF

Info

Publication number
KR20160005878A
KR20160005878A KR1020140084820A KR20140084820A KR20160005878A KR 20160005878 A KR20160005878 A KR 20160005878A KR 1020140084820 A KR1020140084820 A KR 1020140084820A KR 20140084820 A KR20140084820 A KR 20140084820A KR 20160005878 A KR20160005878 A KR 20160005878A
Authority
KR
South Korea
Prior art keywords
stereoscopic image
stereoscopic
setting information
time
image
Prior art date
Application number
KR1020140084820A
Other languages
Korean (ko)
Other versions
KR101645795B1 (en
Inventor
조준동
김종학
송상협
신한수
오정균
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR1020140084820A priority Critical patent/KR101645795B1/en
Publication of KR20160005878A publication Critical patent/KR20160005878A/en
Application granted granted Critical
Publication of KR101645795B1 publication Critical patent/KR101645795B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

According to embodiments of the present invention, a stereoscopic image system may comprise a stereoscopic image display device in a time-division manner and at least one stereoscopic image glasses device. The stereoscopic image display device generates multi-view images including at least a left image and a right image from image data; generates a time-divisional stereoscopic image of which three-dimensional sensation is adjustable, based on at least one information of three-dimensional sensation setting information received from the at least one stereoscopic image glasses device; and alternates a left image and a right image of the time-divisional stereoscopic image according to synchronization information on an alternation point for alternating the left image and the right image of the time-divisional stereoscopic image, and displays the same on a screen. The stereoscopic image glasses device can be operated to: block one between left or a right shuttered glasses according to the alternation point of the time-divisional stereoscopic image identified from the synchronization information and make the other one transparent; and transmit three-dimensional sensation setting information generated in accordance with visual fatigue of a user to the stereoscopic image display device.

Description

입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법{STEREOSCOPIC GLASS AND STEREOSCOPIC IMAGE DISPLAY SYSTEM CAPABLE OF ADJUSTING 3-DIMENSIONAL SENSATION AND METHOD FOR ADJUSTING 3-DIMENSIONAL SENSATION FOR STEREOSCOPIC IMAGE DISPLAY SYSTEM}TECHNICAL FIELD [0001] The present invention relates to a three-dimensional image sensing system, a stereoscopic image sensing system,

본 발명은 스테레오스코피에 관한 것으로, 더욱 상세하게는, 스테레오스코픽 영상의 깊이감에 관한 것이다.The present invention relates to stereoscopy, and more particularly, to a depth sense of a stereoscopic image.

스테레오스코픽 영상(stereoscopic image) 기술은 대표적인 입체 영상 기술로서, 사람의 좌안과 우안에 서로 간섭을 일으키지 않도록 분리된 두 종류의 영상들을 각각 입력하고, 사람의 두뇌가 좌안과 우안에 각각 입력된 영상들을 합성하여 가상의 입체감이 느껴지도록 만드는 기술이다.Stereoscopic image technology is a typical stereoscopic image technology. In this stereoscopic image technology, two separated images are inputted so that they do not interfere with each other's left and right eyes. It is a technique to make a virtual three-dimensional feeling to be synthesized.

좌안과 우안에 각각 입력되기 위한 두 종류의 영상들은 사람의 양안 거리만큼 이격되도록 배치된 두 개의 카메라들로 촬영한 좌영상과 우영상을 기반으로 얻을 수 있다. 두 개의 카메라들에 의해 획득되는 두 스테레오스코픽 영상들은 동일한 피사체에 상응하는 픽셀들 사이에 디스패리티(disparity)를 가지는데, 디스패리티에 의해 피사체의 깊이 정보(뎁스, depth)가 생성되며, 이들 스테레오스코픽 영상들이 각각 좌안과 우안에 입력되면 사용자는 서로 다른 깊이 정보를 가지는 피사체들에 의해 입체감을 느낄 수 있게 된다.The two kinds of images to be inputted to the left eye and the right eye can be obtained based on the left and right images taken by two cameras arranged so as to be separated from each other by the binocular distance of the person. Two stereoscopic images obtained by two cameras have a disparity between pixels corresponding to the same subject. Depth of the subject is generated by the disparity, When the scopic images are input to the left eye and the right eye, the user can feel the three-dimensional feeling by the subjects having different depth information.

좌안과 우안에 각각 간섭을 일으키지 않는 영상들을 입력하는 방법으로 편광 방식, 시분할 방식 및 스펙트럼 분할 방식이 사용되고 있다. A polarization method, a time division method, and a spectrum division method are used as methods for inputting images that do not cause interference to the left eye and the right eye, respectively.

편광 방식은 입체 영상 디스플레이에는 좌안을 위한 좌영상 라인들에서 발산되는 빛과 우안을 위한 우영상 라인들에서 발산되는 빛을 각각 서로 직교하도록 편광시키는 편광 필터가 부착되고, 사용자는 편광 안경을 착용하여 좌영상과 우영상을 분리 인식하는 방식이다. 좌영상 라인들에서 발산하는 빛은 편광 안경의 좌안 편광 필터만을 통과하여 좌안에만 입사하고 우영상 라인들에서 발산하는 빛은 편광 안경의 우안 편광 필터만을 통과하여 우안에만 입사하므로, 사용자는 좌영상과 우영상을 결합하여 입체감을 느끼게 된다.In the polarizing mode, a polarizing filter for polarizing the light emitted from the left video lines for the left eye and the right video lines for the right eye to orthogonally cross each other is attached to the stereoscopic image display. The left and right images are separated and recognized. Since the light emitted from the left image lines passes through only the left eye polarizing filter of the polarizing glasses and enters only the left eye and the light emitted from the right image lines passes through only the right eye polarizing filter of the polarizing glasses and enters the right eye only, And the right image is combined to feel a three-dimensional feeling.

시분할 방식은 입체 영상 디스플레이에서 좌안을 위한 좌영상과 우안을 위한 우영상을 각각 번갈아가며 표시하고 사용자는 능동식 셔터 안경을 착용하여 좌영상과 우영상을 분리 인식하는 방식이다. 능동식 셔터 안경은 입체 영상 디스플레이와 동기되어, 좌영상이 표시될 때에는 좌안 셔터를 열어 좌안이 좌영상을 인식하게 하고 우영상이 표시될 때에는 우안 셔터를 열어 우안이 우영상을 인식하게 하며, 사용자는 좌영상과 우영상을 결합하여 입체감을 느끼게 된다.In the time-division method, the left image for the left eye and the right image for the right eye are alternately displayed in the stereoscopic image display, and the user sees the left image and the right image separately by wearing active shutter glasses. The active shutter glasses are synchronized with the stereoscopic image display. When the left image is displayed, the left eye shutter is opened to allow the left eye to recognize the left image. When the right image is displayed, the right eye shutter is opened to allow the right eye to recognize the right image. The left image and the right image are combined and the three-dimensional image is sensed.

스펙트럼 방식은 RGB 스펙트럼에서 서로 중첩되지 않는 스펙트럼 대역을 가지는 스펙트럼 필터를 통해 좌우 영상을 입체 영상 디스플레이가 표시하고 사용자는 스펙트럼 필터 안경을 착용하여 좌우 영상을 분리 인식하는 방식이다.In the spectral method, the left and right images are displayed by the stereoscopic image display through the spectral filter having the spectral band that does not overlap with each other in the RGB spectrum, and the user wears the spectral filter glasses to separate the left and right images.

어떤 방식의 스테레오스코픽 방식이든, 사용자가 입체감을 느끼는 것은 피사체의 디스패리티에 따라 깊이 정보가 발생하기 때문이다.In any stereoscopic method, the user feels stereoscopic because the depth information is generated according to the disparity of the subject.

스크린 크기, 해상도, 설치 장소나 용도 등의 다양한 디스플레이 환경에 따라, 동일한 깊이 정보의 스테레오스코픽 영상이라도 입체감이 달라질 수 있다. 예를 들어, 모바일 기기라면, 상대적으로 작은 스크린을 가까이서 보는 상황이기 때문에 배경 평면과 전경 평면 사이에 깊이 간격이 좀더 커져야 어느 정도 입체감을 느낄 수 있다.Depending on various display environments such as the screen size, resolution, installation location, and purpose, stereoscopic images with the same depth information may have different stereoscopic effects. For example, in a mobile device, a relatively small screen is being viewed closely, so that the depth spacing between the background plane and the foreground plane needs to be larger to achieve a certain degree of stereoscopic effect.

한편, 스테레오스코픽 영상은 운동 시차(motion parallax)와 초점 조절(accommodation) 정보가 뇌에 전달되지 않거나 뇌에서 충돌을 일으켜 이른바 입체 피로, 입체 멀미를 초래할 수 있다.Stereoscopic images, on the other hand, can result in motion parallax and accommodation information not being transmitted to the brain or causing collisions in the brain, resulting in so-called stereoscopic fatigue and stereoscopic motion sickness.

입체감을 늘리거나 입체감을 줄이는 프로세스의 핵심은 깊이 맵에서 얻어지는 깊이 평면들을 적절히 스케일링하는 것이다. 깊이 평면들의 스케일링 기법은 예를 들어, 방송공학회 논문지 2011년 제16권 제6호, pp 916-926 "깊이맵 변환을 이용한 3D 입체감 개선 방법" 등을 참조할 수 있다.At the heart of the process of increasing the dimensionality or reducing the dimensionality is to appropriately scale the depth planes obtained from the depth map. For example, the scaling technique of depth planes can be referred to, for example, in the Broadcasting Engineering Journal, Vol. 16, No. 6, pp. 916-926, "3D depth enhancement method using depth map transformation".

[1] 장성은 외, "깊이맵 변환을 이용한 3D 입체감 개선 방법" 방송공학회 논문지 2011년 제16권 제6호, pp. 916-926[1] Jang Sung et al., "3D Depth Improvement Method Using Depth Map Transformation", Journal of Broadcast Engineering, Vol. 16, No. 6, pp. 916-926

본 발명이 해결하고자 하는 과제는 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법을 제공하는 데에 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide stereoscopic glasses, a stereoscopic image system, and a stereoscopic effect adjustment method capable of adjusting a stereoscopic effect.

본 발명이 해결하고자 하는 과제는 사용자의 피로도에 따라 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법을 제공하는 데에 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide stereoscopic glasses, a stereoscopic image system, and a stereoscopic effect adjustment method capable of adjusting a stereoscopic effect according to a user's fatigue.

본 발명이 해결하고자 하는 과제는 복수의 사용자의 피로도 또는 개별 설정에 따라 자동으로 전체적인 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법을 제공하는 데에 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a stereoscopic image glasses, a stereoscopic image system, and a stereoscopic effect adjustment method capable of automatically adjusting an overall stereoscopic effect according to fatigue or individual setting of a plurality of users.

본 발명이 해결하고자 하는 과제는 개별 사용자의 피로도 또는 개별 설정에 따라 2D 모드로 전환할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법을 제공하는 데에 있다.A problem to be solved by the present invention is to provide a stereoscopic image glasses, a stereoscopic image system, and a stereoscopic effect adjustment method capable of switching to a 2D mode according to fatigue or individual setting of an individual user.

본 발명의 해결과제는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확히 이해될 수 있을 것이다.The solution to the problem of the present invention is not limited to those mentioned above, and other solutions not mentioned can be clearly understood by those skilled in the art from the following description.

본 발명의 일 측면에 따른 시분할 방식의 입체 영상 디스플레이 장치 및 적어도 하나의 입체 영상 안경 장치를 포함하는 입체 영상 시스템으로서,A stereoscopic image system including a time-division-type stereoscopic image display apparatus and at least one stereoscopic image spectacle apparatus according to an aspect of the present invention,

상기 입체 영상 디스플레이 장치는,The stereoscopic image display device includes:

영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 입체감이 조절되는 시분할 입체 영상을 생성하고, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하도록 동작하고,Generating a time-division stereoscopic image in which a stereoscopic effect is adjusted based on at least one stereoscopic effect setting information received from the at least one stereoscopic image spectacle device, generating multi-view images including at least left and right images from the image data, Dividing the left and right images of the time-division stereoscopic image according to the synchronization information about the alternate time of the left and right images of the time-division stereoscopic image,

상기 입체 영상 안경 장치는,Wherein the stereoscopic image spectacle device comprises:

상기 동기화 정보로부터 식별된 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하며, 사용자의 시각적 피로도에 따라 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작할 수 있다.Dividing the time-division stereoscopic image identified from the synchronization information to block one of the left or right shuttered glasses and making the other one transparent, and outputting the stereoscopic effect setting information generated according to the visual fatigue of the user, To an image display device.

일 실시예에 따라, 상기 입체 영상 디스플레이 장치는,According to one embodiment, the stereoscopic image display apparatus includes:

영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하고, 상기 다시점 영상들로부터 깊이 맵을 생성하며, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하고, 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하며, 상기 보상된 깊이 맵을 기초로 상기 다시점 영상들로부터 시분할 입체 영상을 생성하고, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하도록 동작할 수 있다.The method of claim 1, further comprising: generating multi-view images including at least left and right images from the image data, generating depth maps from the multi-view images, And generating a compensated depth map by compensating the depth map according to the determined depth range, generating a time-division stereoscopic image from the multi-view images based on the compensated depth map, The left and right images of the time-division stereoscopic image may be alternately displayed on the screen in accordance with the synchronization information about the alternate time of the left and right images of the image.

일 실시예에 따라, 상기 입체 영상 안경 장치는, According to an embodiment, the stereoscopic image spectacles apparatus includes:

사용자의 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 생성된, 적어도 "입체감 없음" 설정을 포함하는 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작할 수 있다.Dimensional setting information including at least a "no stereoscopic effect" setting generated in accordance with visual fatigue determined based on at least one of a user's eye blink frequency, eyelid ratio, or eyelid time is transmitted to the stereoscopic image display device Can operate.

일 실시예에 따라, 상기 입체 영상 안경 장치는, According to an embodiment, the stereoscopic image spectacles apparatus includes:

만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하고, If the three-dimensional setting information is "no stereoscopic effect, " the left and right shuttered glasses are alternately blocked or made transparent according to the alternate time of the time-division stereoscopic image,

만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하도록 동작할 수 있다.If the three-dimensional setting information is other than "no stereoscopic effect ", one of the left shuttered glass or the right shuttered glass is alternately blocked in accordance with the alternate time point of the time-division stereoscopic image Can operate.

일 실시예에 따라, 상기 입체 영상 안경 장치는,According to an embodiment, the stereoscopic image spectacles apparatus includes:

사용자의 선택에 의해 상기 입체감 설정 정보를 생성하도록 동작할 수 있다.And generate the three-dimensional setting information at the user's selection.

본 발명의 다른 측면에 따른 시분할 방식의 입체 영상 디스플레이 장치는,According to another aspect of the present invention, there is provided a time-

영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하는 영상 처리부;An image processing unit for generating multi-view images including at least a left image and a right image from the image data;

상기 다시점 영상들로부터 깊이 맵을 생성하고, 외부에서 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 결정된 깊이 범위에 따라 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 깊이 정보 조절부;A depth map is generated from the multi-view images, a depth range is determined based on at least one external sensed setting information, and a depth map is generated by compensating the depth map according to the determined depth range. A control unit;

상기 보상된 깊이 맵을 기초로, 상기 좌영상 및 우영상을 포함하는 다시점 영상들로부터 시분할 입체 영상을 생성하는 입체 영상 생성부;A stereoscopic image generation unit for generating a time-division stereoscopic image from multi-view images including the left and right images based on the compensated depth map;

상기 시분할 입체 영상의 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보를 생성하는 동기화부; 및 A synchronization unit for determining an alternate time point of the time-division stereoscopic image and generating synchronization information about an alternate time point; And

상기 동기화 정보에 따라 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하는 디스플레이부를 포함할 수 있다.And a display unit for alternately displaying the left and right images of the time-division stereoscopic image on the screen according to the synchronization information.

일 실시예에 따라, 상기 깊이 정보 조절부는,According to one embodiment, the depth information adjuster comprises:

상기 수신된 복수의 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하도록 동작할 수 있다.And to determine a depth range based on the calculated cubic sensation by calculating one of an average value, a mode value, a maximum value, and a minimum value of the received plurality of three-dimensional setting information.

일 실시예에 따라, 상기 깊이 정보 조절부는,According to one embodiment, the depth information adjuster comprises:

만약 입체감 설정 정보들 중에 "입체감 없음"에 상응하는 입체감 설정 정보들이 있는 경우에는, 상기 수신된 복수의 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하도록 동작할 수 있다.If there is the three-dimensional setting information corresponding to the "no stereoscopic feeling" among the three-dimensional setting information, the average value of the stereoscopic effect setting information other than the three-dimensional setting information corresponding to " And to determine the depth range based on the calculated cubic effect by calculating one of the mode, the maximum value, and the minimum value.

본 발명의 또 다른 측면에 따른 입체 영상 안경 장치는,According to another aspect of the present invention, there is provided a three-

좌측 및 우측 셔터드 글래스들;Left and right shuttered glasses;

입체 영상 디스플레이 장치로부터 수신된 동기화 정보에서 식별된 시분할 입체 영상의 교번 시점에 따라, 상기 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하도록 제어하는 셔터 제어부; 및A shutter control unit for controlling one of the left or right shuttered glasses to be intercepted and the other to be transparent according to an alternate time point of the time-division stereoscopic image identified in the synchronization information received from the stereoscopic image display apparatus; And

사용자의 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정되는 시각적 피로도에 따라 생성한 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 입체감 설정부를 포함할 수 있다.And a stereoscopic effect setting unit that transmits the stereoscopic effect setting information generated according to the visual fatigue determined based on at least one of the frequency of blinking of the user's eyes, the eyelid ratio, or the eye-winking time to the stereoscopic image display device.

일 실시예에 따라, 상기 입체감 설정부는,According to one embodiment, the three-

눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 생성된, 적어도 "입체감 없음" 설정을 포함하는 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작할 수 있다.To the stereoscopic image display device, stereoscopic effect setting information including at least a "no stereoscopic effect" setting, which is generated in accordance with the visual fatigue determined based on at least one of eye blink frequency, eyelid rate, .

일 실시예에 따라, 상기 셔터 제어부는,According to an embodiment, the shutter control unit may include:

만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하고, If the three-dimensional setting information is "no stereoscopic effect, " the left and right shuttered glasses are alternately blocked or made transparent according to the alternate time of the time-division stereoscopic image,

만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하도록 동작할 수 있다.If the three-dimensional setting information is other than "no stereoscopic effect ", one of the left shuttered glass or the right shuttered glass is alternately blocked in accordance with the alternate time point of the time-division stereoscopic image Can operate.

일 실시예에 따라, 상기 입체감 설정부는,According to one embodiment, the three-

사용자의 선택에 의해 상기 입체감 설정 정보를 생성하도록 동작할 수 있다.And generate the three-dimensional setting information at the user's selection.

일 실시예에 따라, 상기 입체감 설정부는, According to one embodiment, the three-

사용자의 안구 방향을 향하도록 안경테에 부착된 이미지 센서를 포함할 수 있다.And an image sensor attached to the spectacle frame to direct the user's eyeball direction.

본 발명의 또 다른 실시예에 따른 시분할 방식의 입체 영상 디스플레이 장치 및 적어도 하나의 입체 영상 안경 장치를 포함하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법은,A stereoscopic effect adjustment method for a stereoscopic image for a stereoscopic image system including a time-division stereoscopic image display device and at least one stereoscopic image spectacle device according to another embodiment of the present invention,

상기 입체 영상 디스플레이 장치가, 영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하는 단계;Wherein the stereoscopic image display device comprises: generating multi-view images including at least a left image and a right image from the image data;

상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계;Wherein the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on at least one of the three-dimensional setting information received from the at least one stereoscopic image glasses apparatus, Generating a compensated depth map by compensating the depth map;

상기 입체 영상 디스플레이 장치가, 상기 보상된 깊이 맵을 기초로, 상기 다시점 영상들로부터 시분할 입체 영상을 생성하는 단계;Generating a time-division stereoscopic image from the multi-view images based on the compensated depth map;

상기 입체 영상 디스플레이 장치가, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하는 단계;The stereoscopic image display apparatus determines a time when the left and right images of the time-division stereoscopic image are alternated and displays the left and right images of the time-division stereoscopic image on the screen in accordance with the synchronization information about the alternate time ;

상기 입체 영상 안경 장치가, 상기 동기화 정보로부터 시분할 입체 영상의 교번 시점을 식별하고, 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하는 단계;Wherein the stereoscopic image glasses device identifies an alternate time point of the time-division stereoscopic image from the synchronization information, and blocks one of the left or right shuttered glasses according to an alternate time point of the time-division stereoscopic image and makes the other one transparent ;

상기 입체 영상 안경 장치가, 사용자의 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함할 수 있다.And the stereoscopic image spectacle device may include transmitting the stereoscopic effect setting information generated by the visual fatigue of the user to the stereoscopic image display device.

일 실시예에 따라, 상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계는,According to one embodiment, the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on the at least one stereoscopic effect setting information received from the at least one stereoscopic image spectacle apparatus, And generating the compensated depth map by compensating the depth map according to the determined depth range,

상기 입체 영상 디스플레이 장치가, 상기 수신된 복수의 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 결정된 입체감에 기초하여 상기 깊이 정보를 결정하는 단계를 포함할 수 있다.The stereoscopic image display apparatus may include the step of determining the depth information based on a stereoscopic effect determined by a method of calculating one of an average value, a mode value, a maximum value, and a minimum value of the received plurality of stereoscopic effect setting information.

일 실시예에 따라, 상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계는,According to one embodiment, the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on the at least one stereoscopic effect setting information received from the at least one stereoscopic image spectacle apparatus, And generating the compensated depth map by compensating the depth map according to the determined depth range,

상기 입체 영상 디스플레이 장치가, 만약 입체감 설정 정보들 중에 "입체감 없음"에 상응하는 입체감 설정 정보들이 있는 경우에는, 상기 수신된 복수의 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하는 단계를 포함할 수 있다.When the stereoscopic image display apparatus has stereoscopic effect setting information corresponding to "no stereoscopic effect" among the stereoscopic effect setting information, the stereoscopic effect setting information excluding the stereoscopic effect setting information corresponding to " And determining a depth range based on the calculated cubic sensation by calculating one of an average value, a mode value, a maximum value, and a minimum value of the remaining cubic setting information.

일 실시예에 따라, 상기 입체 영상 안경 장치가, 사용자의 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는,According to one embodiment, the step of transmitting the stereoscopic effect setting information generated by the visual fatigue of the user to the stereoscopic image display device,

상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 입체감 설정 정보를 생성하는 단계; 및Generating stereoscopic feeling setting information according to the visual fatigue determined based on at least one of eye blink frequency, eyelid ratio, and eye-winking time; And

생성된 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함하며,And transmitting the generated stereoscopic effect setting information to the stereoscopic image display device,

상기 입체감 설정 정보는 적어도 "입체감 없음" 설정을 포함할 수 있다.The stereoscopic effect setting information may include at least "no stereoscopic effect" setting.

일 실시예에 따라, 상기 입체 영상 안경 장치가, 상기 동기화 정보로부터 시분할 입체 영상의 교번 시점을 식별하고, 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하는 단계는,According to an embodiment, the stereoscopic image spectacle device may identify an alternate time point of the time-division stereoscopic image from the synchronization information, block any one of the left or right shuttered glasses according to an alternate time point of the time- The step of making one transparent,

상기 입체 영상 안경 장치가, 만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하는 단계; 및If the stereoscopic effect setting information is "no stereoscopic effect, " the stereoscopic image spectacle device alternately blocks or makes the left and right shuttered glasses turn alternately according to an alternate time point of the time-division stereoscopic image; And

상기 입체 영상 안경 장치가, 만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하는 단계를 포함할 수 있다.When the stereoscopic effect spectacle device is in a different setting than the "no stereoscopic feeling ", the stereoscopic vision spectacle device may be configured so that the left or right shuttered glass And alternately blocking any one of them.

일 실시예에 따라, 상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는According to an embodiment, the stereoscopic image spectacle device may display the stereoscopic effect setting information generated by the visual fatigue determined based on at least one of a blink frequency, an eyelid ratio, The transmitting step

상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해, 또는 사용자의 선택에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함할 수 있다.The stereoscopic image spectacle device displays the stereoscopic effect setting information generated by the user's selection or the visual fatigue determined based on at least one of the frequency of blinking of the eyes, the eyelid ratio, As shown in FIG.

일 실시예에 따라, 상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는,According to an embodiment, the stereoscopic image spectacle device may display the stereoscopic effect setting information generated by the visual fatigue determined based on at least one of a blink frequency, an eyelid ratio, The transmitting step includes:

상기 입체 영상 안경 장치가, 사용자의 안구 방향을 향하도록 안경테에 부착된 이미지 센서로부터 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나를 획득하는 단계를 포함할 수 있다.The stereoscopic image spectacles apparatus may include a step of acquiring at least one of an eye blink frequency, an eyelid ratio, and a retracted time from an image sensor attached to an eyeglass frame to face the user's eyeball.

본 발명의 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법에 따르면, 사용자의 피로도에 따라 입체감을 조절할 수 있다.According to the stereoscopic image glasses, the stereoscopic image system, and the stereoscopic effect adjustment method capable of adjusting the stereoscopic effect of the present invention, the stereoscopic effect can be controlled according to the user's fatigue.

본 발명의 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법에 따르면, 복수의 사용자의 피로도 또는 개별 설정에 따라 자동으로 전체적인 입체감을 조절할 수 있다.According to the stereoscopic image glasses, the stereoscopic image system, and the stereoscopic effect adjustment method capable of adjusting the stereoscopic effect of the present invention, the overall stereoscopic effect can be automatically adjusted according to the fatigue or individual setting of a plurality of users.

본 발명의 입체감을 조절할 수 있는 입체 영상 안경, 입체 영상 시스템 및 입체감 조절 방법에 따르면, 개별 사용자의 피로도 또는 개별 설정에 따라 다른 사용자들의 입체 영상 감상을 방해하지 않고 개별적으로 2D 영상 감상 모드로 전환할 수 있다.According to the stereoscopic image glasses, the stereoscopic image system, and the stereoscopic effect adjustment method capable of adjusting the stereoscopic effect of the present invention, it is possible to individually switch to the 2D image viewing mode without disturbing the stereoscopic image viewing of other users according to the fatigue or individual setting of the individual user .

본 발명의 효과는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to those mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the following description.

도 1은 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 안경 장치와 입체 영상 시스템을 예시한 개념도이다.
도 2는 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 안경 장치를 예시한 개념도이다.
도 3은 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 시스템에서, 일부 사용자들의 피로도 또는 개별 설정에 따라 전체적인 입체감이 조절되는 모습을 예시한 개념도이다.
도 4는 본 발명의 일 실시예에 따른 입체 영상의 입체감 조절 방법을 예시한 순서도이다.1 is a conceptual diagram illustrating a stereoscopic image spectacle device and a stereoscopic image system capable of adjusting a stereoscopic effect according to an embodiment of the present invention.
2 is a conceptual diagram illustrating a stereoscopic image spectacle device capable of adjusting stereoscopic effect according to an embodiment of the present invention.
FIG. 3 is a conceptual diagram illustrating an overall stereoscopic effect adjusted according to fatigue or individual setting of some users in a stereoscopic image system capable of adjusting stereoscopic effect according to an embodiment of the present invention.
4 is a flowchart illustrating a stereoscopic effect adjustment method of a stereoscopic image according to an exemplary embodiment of the present invention.

본문에 개시되어 있는 본 발명의 실시예들에 대해서, 특정한 구조적 내지 기능적 설명들은 단지 본 발명의 실시예를 설명하기 위한 목적으로 예시된 것으로, 본 발명의 실시예들은 다양한 형태로 실시될 수 있으며 본문에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니 된다.For the embodiments of the invention disclosed herein, specific structural and functional descriptions are set forth for the purpose of describing an embodiment of the invention only, and it is to be understood that the embodiments of the invention may be practiced in various forms, The present invention should not be construed as limited to the embodiments described in Figs.

이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. The same reference numerals are used for the same constituent elements in the drawings and redundant explanations for the same constituent elements are omitted.

도 1은 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 안경 장치와 입체 영상 시스템을 예시한 개념도이다.1 is a conceptual diagram illustrating a stereoscopic image spectacle device and a stereoscopic image system capable of adjusting a stereoscopic effect according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시예들에 따른 입체 영상 시스템(10)은 시분할 방식의 입체 영상 디스플레이 장치(100)와 각각의 사용자들이 착용할 수 있는 셔터 글래스 방식의 입체 영상 안경 장치들(200)을 포함할 수 있다.1, a stereoscopic image system 10 according to embodiments of the present invention includes a stereoscopic image display device 100 of a time division type and a stereoscopic image display device 100 of a shutter glass type that can be worn by each user 200).

입체 영상 디스플레이 장치(100)는, 영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하고, 적어도 하나의 입체 영상 안경 장치(200)로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 입체감이 조절되는 시분할 입체 영상을 생성하며, 시분할 입체 영상의 좌영상과 우영상을 교번하는 교번 시점에 관한 동기화 정보에 따라, 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시한다.The stereoscopic image display apparatus 100 generates multi-view images including at least a left image and a right image from the image data, and generates multi-view images based on the at least one stereoscopic effect setting information received from the at least one stereoscopic image glasses apparatus 200 Dimensional stereoscopic image, and displays the left and right images of the time-division stereoscopic image alternately on the screen in accordance with the synchronization information about the alternate times of alternating left and right images of the time-division stereoscopic image.

입체 영상 안경 장치(200)는, 동기화 정보로부터 식별된 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들(shuttered glasses) 중 어느 하나를 차단하고 다른 하나를 투명하게 하며, 사용자의 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도 또는 사용자의 선택에 의해 생성된 상기 입체감 설정 정보를 입체 영상 디스플레이 장치(100)로 전송한다.The stereoscopic vision glasses apparatus 200 blocks any one of the left or right shuttered glasses and makes the other one transparent according to the alternate time point of the time-division stereoscopic image identified from the synchronization information, To the stereoscopic image display apparatus 100, the visual fatigue determined based on at least one of the frequency, the eyelid ratio, and the eyelid time, or the stereoscopic effect setting information generated by the user's selection.

또한, 입체 영상 안경 장치(200)는 만약 입체감 설정 정보가 "입체감 없음" 설정인 경우에, 좌영상 또는 우영상 중 어느 한 영상의 교번 시점에 맞춰 좌측 셔터드 글래스와 우측 셔터드 글래스를 함께 차단한다.Further, when the stereoscopic effect setting information is set to "no stereoscopic effect ", the stereoscopic vision eyeglass apparatus 200 blocks the left shutter deck and the right shutter deck together in accordance with the alternate image of either the left image or the right image do.

이러한 동작을 위해, 시분할 방식의 입체 영상 디스플레이 장치(100)는 영상 처리부(110), 깊이 정보 조절부(120), 입체 영상 생성부(130), 동기화부(140), 디스플레이부(150) 및 통신 인터페이스(160)를 포함할 수 있다.For this operation, the time-division stereoscopic image display apparatus 100 includes an image processing unit 110, a depth information adjusting unit 120, a stereoscopic image generating unit 130, a synchronization unit 140, a display unit 150, Communication interface 160 may be included.

영상 처리부(110)는 영상 기록 매체에 기록된 영상 데이터, 수신된 공중파로부터 추출된 영상 데이터 또는 네트워크를 통해 수신된 영상 데이터를 디코딩, 스케일링 및 그 밖에 필요한 영상 처리를 수행하여 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성한다.The image processing unit 110 decodes, scales, and otherwise performs necessary image processing on the image data recorded on the image recording medium, the image data extracted from the received air wave, or the image data received through the network, Point images including the multi-view images.

깊이 정보 조절부(120)는 다시점 영상들로부터 깊이 맵을 생성하고, 적어도 하나의 입체 영상 안경 장치(200)로부터 통신 인터페이스(160)를 통해 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 결정된 깊이 범위에 따라 깊이 맵을 보상하여 보상된 깊이 맵을 생성한다. The depth information adjusting unit 120 generates a depth map from the multi-view images, and generates depth maps based on at least one depth-of-field setting information received from the at least one stereoscopic image glasses apparatus 200 through the communication interface 160 And generates a compensated depth map by compensating the depth map according to the determined depth range.

깊이 정보 조절부(120)는 수신된 복수의 입체감 설정 정보들에 대해, 소정의 정책에 따라, 예를 들어 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 입체감을 결정할 수 있다.The depth information control unit 120 determines a three-dimensional effect by calculating one of an average value, a mode value, a maximum value, and a minimum value of the three-dimensional setting information according to a predetermined policy, for example, .

깊이 정보 조절부(120)는, 만약 입체감 설정 정보들 중에 "입체감 없음"에 상응하는 입체감 설정 정보들이 있는 경우에는, 수신된 복수의 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들에 대해서만, 소정의 정책에 따라, 평균값, 최빈값, 최고값, 최저값 중 하나를 산출할 수 있다.If there is the three-dimensional setting information corresponding to the "no stereoscopic feeling" among the three-dimensional sensibility setting information, the depth information regulating unit 120 stores three-dimensionality setting information corresponding to & Only one of the average value, the mode value, the maximum value, and the minimum value can be calculated according to a predetermined policy only for the remaining three-dimensional setting information.

깊이 범위는, 예를 들어, 깊이 맵에서 분포된 깊이 평면들의 범위를 한꺼번에 변동할 수 있는 스케일링 비율로서, 예를 들어 보상하지 않은 깊이 맵의 깊이 평면들의 범위를 기준으로 30%, 50% 또는 100%와 같이 표현될 수 있다. 깊이 범위가 낮아지면 깊이감 또는 입체감도 낮아질 수 있다.The depth range may be, for example, a scaling ratio that can vary the range of depth planes distributed in the depth map at one time, e.g., 30%, 50%, or 100% based on the range of depth planes of the non- %. ≪ / RTI > The lower the depth range, the lower the depth sense or depth of field.

깊이 범위는 예를 들어 상술한 방송공학회 논문지 2011년 제16권 제6호, pp 916-926 "깊이맵 변환을 이용한 3D 입체감 개선 방법"과 같은 깊이 조절 기법을 이용하여 결정될 수 있다.The depth range can be determined, for example, by using a depth control technique such as the above-described method of improving the 3D stereoscopic effect using the depth map transformation, which is described in Journal of Broadcasting Engineering, Vol. 16, No. 6, pp. 916-926.

입체 영상 생성부(130)는 좌영상 및 우영상을 포함하는 다시점 영상들로부터, 보상된 깊이 맵을 기초로, 시분할 입체 영상을 생성할 수 있다.The stereoscopic image generation unit 130 may generate a time-division stereoscopic image based on the compensated depth map from the multi-view images including the left and right images.

시분할 입체 영상은 소정 주기로 반복하는 시구간들의 각각마다 각 다시점 영상의 프레임을 표시하도록, 예를 들어, 좌영상과 우영상이 교번하면서 스크린에 표시되도록 짜여진 영상이다.The time-division stereoscopic image is an image in which frames of each multi-view image are displayed for each of the time periods repeated at predetermined intervals, for example, such that the left and right images are alternately displayed on the screen.

동기화부(140)는 시분할 입체 영상의 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보를 생성할 수 있다. 또한, 동기화부(140)는 통신 인터페이스부(160)를 통해 동기화 정보를 외부에 출력할 수 있다.The synchronization unit 140 may determine an alternate time point of the time-division stereoscopic image and generate synchronization information on the alternate time point. In addition, the synchronization unit 140 may output synchronization information to the outside through the communication interface unit 160.

디스플레이부(150)는 동기화 정보에 따라 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시한다.The display unit 150 alternately displays the left and right images of the time-division stereoscopic image on the screen according to the synchronization information.

통신 인터페이스부(160)는 예를 들어 블루투스 또는 2.4 GHz 대역의 무선 통신, 적외선 통신(IrDA) 등의 통신 규격에 따른 통신 인터페이스로 구현되며, 동기화부(140)로부터 동기화 정보를 수신하여, 외부에, 특히 입체 영상 안경 장치(200)에 전송할 수 있다.The communication interface unit 160 is implemented by a communication interface conforming to a communication standard such as Bluetooth or 2.4 GHz band wireless communication or infrared communication (IrDA), receives synchronization information from the synchronization unit 140, , In particular, to the stereoscopic image spectacles apparatus 200.

한편, 입체 영상 안경 장치(200)를 예시하기 위해 도 2를 참조하면, 도 2는 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 안경 장치를 예시한 개념도이다.2 is a schematic view illustrating a stereoscopic spectacles apparatus 200 according to an exemplary embodiment of the present invention. Referring to FIG.

도 2에서, 일 실시예에 따른 입체 영상 안경 장치(200)는 좌측 또는 우측 셔터드 글래스들(211, 212), 통신 인터페이스부(220), 셔터 제어부(230) 및 입체감 설정부(240)를 포함할 수 있다. 실시예에 따라, 입체감 설정부(240)는 안구 검출부(241), 시각적 피로도 판정부(242) 및 입체감 결정부(243)를 포함할 수 있고, 사용자가 직접 입체감을 설정할 수 있도록 수동 설정부(244)를 더 포함할 수 있다.2, the stereoscopic spectacle device 200 according to one embodiment includes left or right shutter glasses 211 and 212, a communication interface 220, a shutter controller 230, and a three-dimensional setting unit 240 . According to an embodiment, the stereoscopic effect setting unit 240 may include an eye detecting unit 241, a visual fatigue determining unit 242, and a three-dimensional sensing unit 243. The three-dimensional sensing unit 240 may include a manual setting unit 244).

입체 영상 안경 장치(200)는 교변 시점에 관한 동기화 정보를 기초로, 시분할 입체 영상을 구성하는 다시점 영상들의 각각, 즉 좌영상 또는 우영상이 각각 스크린에 교번하여 표시되는 시구간에 좌측 셔터드 글래스(211) 또는 우측 셔터드 글래스(212) 중 어느 하나를 투명하게 만들고 다른 하나를 불투명하게 만듦으로써, 사용자가 시구간마다 좌영상 또는 우영상 중 어느 한 영상만을 시각적으로 인지하도록 한다.The stereoscopic spectacle device 200 is a device for displaying stereoscopic images on the basis of the synchronization information about the time of interchange, Either one of the right shutter glass 211 or the right shutter glass 212 is made transparent and the other is made opaque so that the user visually recognizes only either the left image or the right image every time period.

이를 위해, 통신 인터페이스부(220)는 입체 영상 디스플레이 장치(100)의 통신 인터페이스(160)로부터 송출된 동기화 정보를 수신하여 셔터 제어부(230)에 제공한다.The communication interface unit 220 receives the synchronization information transmitted from the communication interface 160 of the stereoscopic image display device 100 and provides the synchronization information to the shutter control unit 230.

셔터 제어부(230)는 동기화 정보로부터 시분할 입체 영상의 교번하는 시점을 식별하고, 좌영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)는 투명하게 되고 우측 셔터드 글래스(212)는 차단되며, 우영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)는 차단되고 우측 셔터드 글래스(212)는 투명하게 되도록, 교번 시점에 맞춰 좌측 셔터드 글래스(211) 또는 우측 셔터드 글래스(212) 중 어느 하나를 교번하여 차단한다.The shutter control unit 230 identifies the alternate time points of the time-division stereoscopic image from the synchronization information, and the left shuttered glass 211 becomes transparent, the right shuttered glass 212 is blocked, One of the left shuttered glass 211 and the right shuttered glass 212 is turned in accordance with the alternate time so that the left shuttered glass 211 is blocked and the right shuttered glass 212 is transparent, .

한편, 셔터 제어부(230)는 아래에서 설명되는 바와 같이, 입체감 결정부(243) 또는 수동 설정부(244)에 의해 설정되는 입체감 설정 정보가 "입체감 없음", 즉 2D 영상 모드에 상응하는 경우에, 좌영상 또는 우영상 중 어느 한 영상의 교번 시점에 맞춰 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 차단한다. 즉, 셔터 제어부(230)는, 좌영상 또는 우영상 중 하나를 선택하여, 선택된 영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 투명하게 하고, 나머지 영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 차단한다.On the other hand, when the three-dimensional sensed setting information set by the three-dimensional sensibility determining unit 243 or the manual setting unit 244 corresponds to the "no stereoscopic effect ", i.e., the 2D image mode, , The left shutter glass (211) and the right shutter glass (212) are shut off together with the alternate time of either the left image or the right image. That is, the shutter control unit 230 selects either the left image or the right image to make the left shuttered glass 211 and the right shuttered glass 212 transparent together between the time periods in which the selected image is displayed, The left shutter glass 211 and the right shutter glass 212 are shut off together.

입체감 설정부(240)는 안구 검출부(241), 피로도 판정부(242) 및 입체감 결정부(243)를 포함할 수 있는데, 안구 검출부(241)는 예를 들어, 사용자의 안구 방향을 향하도록 안경테(213)에 부착된 저해상도의 이미지 센서로 구현될 수 있다.The 3D sensation setting unit 240 may include an eye detection unit 241, a fatigue determination unit 242 and a 3D sensation determination unit 243. The eye detection unit 241 may include, for example, A low resolution image sensor attached to the image sensor 213 can be implemented.

실시예에 따라, 이미지 센서로 구현된 안구 검출부(241)는 사용자의 안구가 눈꺼풀에 의해 짧게 가려지는 빈도에 따라 눈깜빡임의 빈도를 측정할 수 있다.According to an embodiment, the eye detection unit 241 implemented by the image sensor can measure the frequency of eye blinking according to the frequency with which the user's eyeball is briefly covered by the eyelid.

실시예에 따라, 이미지 센서로 구현된 안구 검출부(241)는 사용자의 안구가 눈꺼풀에 의해 가려진 비율을 측정할 수 있다.According to the embodiment, the eye detection unit 241 implemented by the image sensor can measure the rate at which the user's eye is covered by the eyelid.

실시예에 따라, 이미지 센서로 구현된 안구 검출부(241)는 사용자의 안구가 눈꺼풀에 의해 가려지는 시간에 따라 사용자가 눈을 감고 있는 시간을 측정할 수 있다.According to an embodiment, the eye detecting unit 241 implemented by the image sensor can measure the time during which the user closes his or her eyes according to the time when the user's eyeball is covered by the eyelid.

시각적 피로도 판정부(242)는 안구 검출부(241)에서 검출된 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 시각적 피로도를 판정할 수 있다.The visual fatigue judging unit 242 can judge the visual fatigue based on at least any one of the eye blink frequency, the eyelid ratio, and the eyelid time detected by the eye detecting unit 241.

예를 들어, 시각적 피로도 판정부(242)는 눈깜빡임 빈도를 수치화하고, 안구가 눈꺼풀에 가려진 비율을 수치화하며, 눈을 깜빡이는 동안 눈을 감고 있는 시간을 수치화할 수 있고, 이들 수치들과 시각적 피로도 사이의 관계에 관하여 경험적으로 획득한 관계식에 따라, 이러한 수치들로부터 입체 영상의 시청에 따른 시각적 피로도를 산출할 수 있다.For example, the visual fatigue determination unit 242 may quantify the frequency of eye blinking, quantify the ratio of the eyeball to the eyelid, quantify the time of closing the eye while blinking, According to the relationship obtained empirically regarding the relationship between fatigue, the visual fatigue due to viewing of the stereoscopic image can be calculated from these values.

또는, 예를 들어, 시각적 피로도 판정부(242)는 눈깜빡임 빈도가 소정의 기준보다 높으면 눈을 자주 깜빡거린다고 판단하고, 안구가 눈꺼풀에 가려진 비율이 소정의 기준보다 높으면 눈을 찡그리고 있다고 판단하며, 눈을 깜빡이는 동안 눈을 감고 있는 시간이 소정의 기준보다 길면 눈이 피로하다고 판단할 수 있고, 식별되는 증상들의 개수나 그 정도에 따라 입체 영상의 시청에 따른 시각적 피로도를 판정할 수 있다. 예를 들어, 시각적 피로도 판정부(242)는 식별되는 증상이 하나이면 시각적 피로도를 "보통"으로, 둘 이상이면 "높음"으로 판정할 수 있다.Alternatively, for example, the visual fatigue judgment unit 242 judges that the eye blinks frequently if the blink frequency is higher than a predetermined criterion, and judges that the eye frowns if the rate of blinking of the eyeball is higher than a predetermined criterion , It is possible to judge that the eyes are tired when the time during which the eyes are closed while blinking the eyes is longer than the predetermined reference, and the visual fatigue according to the viewing of the stereoscopic images can be determined according to the number and the degree of the symptoms to be identified. For example, the visual fatigue judging section 242 can judge that visual fatigue is "normal" if there is one symptom to be identified, and "high" if it is two or more.

입체감 결정부(243)는 판정된 시각적 피로도에 따라 또는 수동 설정부(244)에서 사용자에 의해 조작된 셀렉터 위치에 따라 생성한 입체감 설정 정보를 통신 인터페이스(220)를 통해 입체 영상 디스플레이 장치(100)로 전송할 수 있다.The three-dimensional appearance determination unit 243 transmits the three-dimensional appearance setting information generated in accordance with the determined visual fatigue or the selector position manipulated by the user in the manual setting unit 244 to the stereoscopic image display apparatus 100 through the communication interface 220. [ Lt; / RTI >

예를 들어 입체감 결정부(243)는, 시각적 피로도가 "없음", "낮음", "보통", "높음" 중에 "높음"으로 판정될 경우에, 사용자에게 적절한 입체감에 관한 입체감 설정 정보를 "입체감 없음", "낮음", "보통", "높음" 중에 "낮음"으로 설정할 수 있다.For example, when the visual fatigue is judged to be "high" in the "none", "low", "medium", or "high", the three-dimensional sensation determination unit 243 sets the three- Low "," medium ", or" high "can be set to" low ".

수동 설정부(244)는 사용자가 원하는 셀렉터 위치의 선택을 위해 조작할 수 있는 복수의 셀렉터 위치들을 제공한다. 수동 설정부(244)는 예를 들어, 입체감 설정 정보를 "입체감 없음", "낮음", "보통", "높음"으로 설정할 수 있는 복수의 셀렉터 위치들을 가질 수 있다.The manual setting unit 244 provides a plurality of selector positions that the user can operate for selection of a desired selector position. The manual setting unit 244 may have a plurality of selector positions for setting the three-dimensional setting information to "no stereoscopic feeling "," low ", "normal &

한편, 실시예에 따라, 피로도 판정부(242) 및 입체감 결정부(243)는, 요구되는 전력 또는 연산 능력을 줄일 수 있도록, 입체 영상 안경 장치(200) 내에 구현되는 대신에, 입체 영상 디스플레이 장치(100) 내에서, 예를 들어 깊이 정보 조절부(120)에서, 구현될 수도 있다.According to the embodiment, instead of being implemented in the stereoscopic image spectacles apparatus 200 so that the required power or computing power can be reduced, the fatigue determination section 242 and the three-dimensional sensibility determination section 243 may be implemented as a three- For example, in the depth information control unit 120, in the image processing apparatus 100 shown in FIG.

다시 도 1로 돌아가서, 시분할 방식의 입체 영상 디스플레이 장치(100)는 복수의 입체 영상 안경 장치들(200)로부터 복수의 입체감 설정 정보를 수신할 수 있는데, 사용자들마다 서로 다른 입체감 설정 정보를 보내올 수 있다.Referring back to FIG. 1, the time-division-based stereoscopic image display apparatus 100 can receive a plurality of stereoscopic effect setting information from a plurality of stereoscopic image spectacle devices 200, .

이러한 경우에, 시분할 방식의 입체 영상 디스플레이 장치(100)는, 각 사용자들마다 다른 입체감 설정들을 조화시킬 수 있도록, 입체감 설정 정보들을 종합적으로 판단하여 깊이 범위를 결정할 수 있다.In this case, the time-division-based stereoscopic image display apparatus 100 can determine the depth range by comprehensively determining the stereoscopic effect setting information so as to harmonize different stereoscopic feel settings for each user.

예를 들어, 깊이 정보 조절부(120)는 복수의 입체 영상 안경 장치들(200)로부터 수신된 복수의 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 어느 한 값에 따라 깊이 범위를 결정하며, 결정된 깊이 범위에 따라 깊이 맵을 보상하여 보상된 깊이 맵을 생성한다.For example, the depth information adjusting unit 120 determines a depth range according to any one of an average value, a mode value, a maximum value, and a minimum value of a plurality of three-dimensional setting information received from a plurality of the stereoscopic image spectacle devices 200 , And compensates the depth map according to the determined depth range to generate the compensated depth map.

예를 들어, 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값이 낮아지면, 깊이 범위도 좁아지고, 보상 깊이 맵이 생성되며, 보상 깊이 맵에 따라 다시점 영상들에서 디스패리티가 조절된 입체 영상이 생성될 수 있다.For example, when the average value, the mode value, the maximum value, or the minimum value of the three-dimensional setting information is lowered, the depth range is narrowed and the compensation depth map is generated. Can be generated.

이러한 동작은 도 3을 참조하여 예시될 수 있다. 도 3은 본 발명의 일 실시예에 따른 입체감을 조절할 수 있는 입체 영상 시스템에서, 일부 사용자들의 시각적 피로도 또는 개별 설정에 따라 전체적인 입체감이 조절되는 모습을 예시한 개념도이다.This operation can be illustrated with reference to FIG. FIG. 3 is a conceptual diagram illustrating an overall stereoscopic effect adjusted according to visual fatigue or individual setting of some users in a stereoscopic image system capable of adjusting stereoscopic effect according to an embodiment of the present invention.

도 3을 참조하면, 6 명의 사용자들 중에 세 명은 시각적 피로를 약간 느끼는 중이고 한 명은 시각적 피로를 많이 느끼며, 나머지 두 명은 전혀 문제를 느끼지 못한다고 가정한다.Referring to FIG. 3, it is assumed that three out of six users are feeling a little bit of visual fatigue, one feeling a lot of visual fatigue, and the other two feeling no problem at all.

상부의 (a)는 입체감을 조절하기 전의 상황이고, 하부의 (b)는 입체감을 조절한 후의 상황이다. (a)의 입체 영상에 비해 (b)의 입체 영상은 배경과 전경 사이가 상당히 좁아지고 전체적으로 입체감이 크게 줄어든다.The upper part (a) shows the situation before adjusting the three-dimensional feeling, and the lower part (b) shows the situation after adjusting the three-dimensional feeling. Compared with the stereoscopic image of (a), the stereoscopic image of (b) is significantly narrowed between the background and the foreground, and the stereoscopic effect is largely reduced.

각 사용자의 입체 영상 안경 장치들(200)은 각 사용자의 안구 상태, 눈깜박임 상태, 눈 감는 시간 등에 기초하여 각각의 입체감 설정 정보를 생성하고, 입체 영상 디스플레이 장치(100)에 전송한다.The stereoscopic spectacles apparatus 200 of each user generates respective stereoscopic effect setting information on the basis of the eye state, blink state, eye closing time, etc. of each user, and transmits the stereoscopic effect setting information to the stereoscopic image display apparatus 100.

입체 영상 디스플레이 장치(100)는 수신된 입체감 설정 정보들에 대해, 정책에 따라, 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 입체감을 결정할 수 있다.The stereoscopic image display apparatus 100 can determine a stereoscopic effect by a method of calculating one of an average value, a mode value, a maximum value, and a minimum value according to a policy for the received stereoscopic effect setting information.

도 3의 (b)에서, 되도록 많은 수의 사용자들이 느끼는 시각적 피로를 감안하여 입체감을 맞춘다면, 입체 영상 디스플레이 장치(100)는 입체감 설정 정보들 중의 최빈값이나 평균값을 기준으로 입체감을 조절할 수 있다.In FIG. 3B, the stereoscopic image display device 100 can adjust the stereoscopic effect based on the mode or the average value of the stereoscopic effect setting information, if the stereoscopic effect is adjusted in consideration of the visual fatigue experienced by as many users as possible.

입체 영상 디스플레이 장치(100)는 입체감이 약간 줄어드는 정도에서 결정된 깊이 범위에 기초하여 보상된 깊이 맵을 생성하고, 보상된 깊이 맵에 기초하여 입체 영상을 생성할 수 있다.The stereoscopic image display apparatus 100 can generate a compensated depth map based on the determined depth range to a degree that the stereoscopic effect is slightly reduced and generate a stereoscopic image based on the compensated depth map.

다른 예에서, 시각적 피로가 가장 큰 사용자를 감안하여 입체감을 맞춘다면, 입체 영상 디스플레이 장치(100)는 입체감 설정 정보들 중 최저값을 기준으로 입체감을 조절할 수 있다. 이 경우, 시각적 피로를 느끼지 않는 사용자들에게는 입체 영상의 입체감이 많이 나빠지게 된다.In another example, if the stereoscopic effect is adjusted in consideration of the user with the largest visual fatigue, the stereoscopic image display apparatus 100 can adjust the stereoscopic effect based on the lowest stereoscopic effect setting information. In this case, the stereoscopic effect of stereoscopic images is poor for users who do not feel visual fatigue.

또 다른 예에서, 시각적 피로가 가장 적은 사용자를 감안하여 입체감을 맞춘다면, 입체 영상 디스플레이 장치(100)는 입체감 설정 정보들 중 최고값을 기준으로 입체감을 조절할 수 있다. In another example, if the stereoscopic effect is adjusted in consideration of the user with the least visual fatigue, the stereoscopic image display apparatus 100 can adjust the stereoscopic effect based on the highest stereoscopic effect setting information.

한편, 시각적 피로를 심하게 느끼는 사용자들에게, 입체 영상의 입체감이 다소 줄어드는 정도로는 입체 영상의 피로도가 해소되기 어려울 것이다. 입체 영상 안경 장치(200)를 벗고 입체 영상 디스플레이 장치(100)에 표시되는 스테레오스코픽 영상을 직접 보는 것도 어려운 일이지만, 단지 시각적 피로 때문에 컨텐츠 감상을 포기하기도 곤란할 수 있다.On the other hand, for users who feel severe visual fatigue, stereoscopic image fatigue will not be relieved to such an extent that the stereoscopic effect of the stereoscopic image is somewhat reduced. It is difficult to directly see the stereoscopic image displayed on the stereoscopic image display device 100 by removing the stereoscopic image glasses device 200. However, it may be difficult to abandon content appreciation simply because of visual fatigue.

이러한 경우에, 사용자가 입체감만 포기한다면 컨텐츠를 무리없이 감상할 수 있다. 이를 위해 입체 영상 안경 장치(200)는 사용자의 직접적인 셀렉터 조작 또는 피로도 판정에 따라 "입체감 없음"으로 입체감 설정 정보가 설정될 경우에, 2D 영상 감상 모드로 동작시킬 수 있다.In such a case, if the user gives up the stereoscopic effect, the content can be appreciated without difficulty. For this purpose, the stereoscopic spectacles apparatus 200 can operate in the 2D video appreciation mode when the stereoscopic effect setting information is set to "no stereoscopic feeling" according to the user's direct selector manipulation or fatigue determination.

2D 영상 감상 모드일 경우에, 입체 영상 안경 장치(200)는 좌영상 또는 우영상 중 어느 한 영상만 사용자가 시각적으로 인지하도록, 좌영상 및 우영상의 교번 시점에 맞춰 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 차단한다. 이러한 동작은 도 3의 (c)를 참조하여 설명될 수 있다.In the case of the 2D image viewing mode, the stereoscopic spectacles apparatus 200 displays the left shutter glass 211 in accordance with the alternate time of the left and right images so that the user visually recognizes only one of the left image and the right image. And the right shutter deck 212 together. This operation can be described with reference to FIG. 3 (c).

도 3의 (c)는 일부 사용자들의 개별 설정에 따라 개별적으로 2D 영상 감상 모드로 전환되는 모습을 예시한 개념도이다.FIG. 3C is a conceptual diagram illustrating a state in which the 2D video viewing mode is individually switched according to individual settings of some users.

도 3의 (c)를 참조하면, 6 명의 사용자들 중에 한 명은 시각적 피로를 약간 느끼는 중이고 한 명은 시각적 피로를 많이 느끼며, 두 명은 셀렉터 위치를 "입체감 없음"에 놓았고, 나머지 두 명은 전혀 문제를 느끼지 못한다고 가정한다.Referring to FIG. 3 (c), one of the six users is feeling a little bit of visual fatigue, one feeling a lot of visual fatigue, two placing the selector position "no stereoscopic", and the other two feeling no problem It is assumed that it can not.

(a)의 입체 영상에 비해 (c)의 입체 영상은 배경과 전경 사이가 약간 더 좁아지고 전체적으로 입체감이 다소 줄어들었지만, (b)의 입체 영상보다는 정도가 덜 하다.Compared with the stereoscopic image in (a), the stereoscopic image in (c) is somewhat narrower between the background and the foreground, and the stereoscopic effect is slightly reduced as a whole.

시각적 피로를 많이 느낀 사용자의 입체 영상 안경 장치(200)와, 셀렉터 위치를 "입체감 없음"에 놓은 사용자의 입체 영상 안경 장치들(200)은 "입체감 없음"에 상응하는 입체감 설정 정보를 생성하고, 입체 영상 디스플레이 장치(100)에 전송한다.The stereoscopic image spectacle apparatus 200 of the user who feels a lot of visual fatigue and the stereoscopic image spectacle apparatus 200 of the user who places the selector position at the "no stereoscopic effect" generates stereoscopic effect setting information corresponding to "no stereoscopic effect" And transmits it to the stereoscopic image display device 100.

이 경우에, 입체 영상 디스플레이 장치(100)는 "입체감 없음"에 상응하는 입체감 설정 정보들을 다른 입체감 설정 정보들과 다르게 취급할 수 있다.In this case, the stereoscopic image display apparatus 100 can treat the stereoscopic effect setting information corresponding to "no stereoscopic feeling" differently from other stereoscopic effect setting information.

예를 들어, "입체감 없음"으로 설정된 입체 영상 안경 장치(200)는 좌영상 또는 우영상만으로 된 2D 영상을 사용자에게 보여주므로, 이들 사용자들에 대해서는, 더 이상 입체감에 관한 조절에 고려할 필요가 없다.For example, since the stereoscopic image spectacle device 200 set to "no stereoscopic effect" displays a 2D image composed of only the left image or the right image to the user, it is no longer necessary to consider the adjustment on the stereoscopic effect for these users .

따라서, 입체 영상 디스플레이 장치(100)는 수신된 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들에 대해서만, 정책에 따라, 평균값, 최빈값, 최고값, 최저값 등을 산출할 수 있다.Therefore, the stereoscopic image display apparatus 100 displays only the remaining three-dimensional sensed setting information excluding the three-dimensional sensed setting information corresponding to "no stereoscopic sensation ", among the received stereoscopic sensation setting information, Can be calculated.

입체 영상 디스플레이 장치(100)는 입체감 설정 정보들 중 최빈값이나 평균값을 기준으로 입체감을 조절할 수 있다.The stereoscopic image display device 100 can adjust the stereoscopic effect based on the mode value or the average value among the stereoscopic effect setting information.

이 경우, 입체 영상 디스플레이 장치(100)는 입체감이 약간 줄어드는 정도에서 결정된 깊이 범위에 기초하여 보상된 깊이 맵을 생성하고, 보상된 깊이 맵에 기초하여 입체 영상을 생성할 수 있다.In this case, the stereoscopic image display apparatus 100 can generate a compensated depth map based on the determined depth range to a degree that the stereoscopic effect is slightly reduced, and generate a stereoscopic image based on the compensated depth map.

도 3의 (b)와 비교하면, "입체감 없음"으로 설정된 사용자들을 제외한 사용자들 중에 시각적 피로가 가장 큰 사용자를 감안하여 입체감을 맞추더라도, 입체 영상 디스플레이 장치(100)는 남은 입체감 설정 정보들 중 최저값을 기준으로 입체감을 조절할 수 있다. 도 3의 (c)에 예시된 경우에서, 약간의 시각적 피로를 느끼는 사용자 한 명과 시각적 피로를 전혀 느끼지 않는 사용자 두 명만 감안하여 입체감을 조절하므로, 시각적 피로를 느끼지 않는 두 사용자들에게 조정된 입체 영상의 입체감이 약간 나빠질 뿐이다.3, the stereoscopic image display apparatus 100 displays stereoscopic image information of the user who has the largest visual fatigue among the users except for the users who are set to "no stereoscopic sensation" The three-dimensional effect can be adjusted based on the lowest value. In the case illustrated in (c) of FIG. 3, since the three-dimensional feeling is adjusted considering only one user who feels slight visual fatigue and two users who do not feel visual fatigue at all, The three-dimensional feeling of the user is slightly worse.

도 4는 본 발명의 일 실시예에 따라 입체 영상의 입체감 조절 방법을 예시한 순서도이다.4 is a flowchart illustrating a stereoscopic effect adjustment method of a stereoscopic image according to an exemplary embodiment of the present invention.

도 4를 참조하면, 입체 영상의 입체감 조절 방법은 시분할 방식의 입체 영상 디스플레이 장치(100)와 각각의 사용자들이 착용할 수 있는 셔터 글래스 방식의 입체 영상 안경 장치들(200)을 포함하는 입체 영상 시스템(10)을 위한 입체 영상의 입체감 조절 방법으로서, 단계(S41)에서 시작할 수 있다.Referring to FIG. 4, a stereoscopic image adjustment method of a stereoscopic image includes a stereoscopic image display apparatus 100 of a time division type and a stereoscopic image system 200 including a shutter glass stereoscopic image glasses apparatus 200 that each user can wear, A method of adjusting the stereoscopic effect of the stereoscopic image for the stereoscopic image 10, starting at step S41.

단계(S41)에서, 시분할 방식의 입체 영상 디스플레이 장치(100)가, 영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성한다.In step S41, the time-division-based stereoscopic image display apparatus 100 generates multi-view images including at least a left image and a right image from the image data.

단계(S42)에서, 시분할 방식의 입체 영상 디스플레이 장치(100)가, 다시점 영상들로부터 깊이 맵을 생성하고, 적어도 하나의 입체 영상 안경 장치(200)로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 결정된 깊이 범위에 따라 깊이 맵을 보상하여 보상된 깊이 맵을 생성한다.In step S42, the time-division-type stereoscopic image display apparatus 100 generates a depth map from the multi-view images, and generates at least one depth-of-field setting information received from at least one of the stereoscopic- And the depth map is compensated according to the determined depth range to generate a compensated depth map.

단계(S43)에서, 시분할 방식의 입체 영상 디스플레이 장치(100)가, 좌영상 및 우영상을 포함하는 다시점 영상들로부터, 보상된 깊이 맵을 기초로, 시분할 입체 영상을 생성한다.In step S43, the time-sharing stereoscopic image display apparatus 100 generates a time-division stereoscopic image based on the compensated depth map from the multi-view images including the left and right images.

단계(S44)에서, 시분할 방식의 입체 영상 디스플레이 장치(100)가, 시분할 입체 영상의 좌영상과 우영상을 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보에 따라, 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시한다.In step S44, the time-division-based stereoscopic image display apparatus 100 determines a time at which the left and right images of the time-division stereoscopic image are alternated, and in accordance with the synchronization information about the alternate time, And right images are alternately displayed on the screen.

단계(S45)에서, 입체 영상 안경 장치(200)가, 동기화 정보로부터 시분할 입체 영상의 교번 시점을 식별하고, 만약 입체감 설정 정보가 "입체감 없음"이면, 시분할 입체 영상의 교번 시점에 따라 좌측 및 우측 셔터드 글래스들(211, 212)을 함께 교번하여 차단하거나 투명하게 하고, 그렇지 않은 경우에는, 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들(211, 212) 중 어느 하나를 차단하고 다른 하나를 투명하게 한다.In step S45, the stereoscopic vision apparatus 200 identifies the alternate time point of the time-division stereoscopic image from the synchronization information. If the stereoscopic effect setting information is "no stereoscopic effect," The shutter glasses 211 and 212 are alternately blocked or made transparent, and if not, either the left or right shutter glasses 211 and 212 are blocked according to the alternate time of the time-division stereoscopic image Make the other transparent.

구체적으로, 입체 영상 안경 장치(200)는, 만약 입체감 설정 정보가 "입체감 없음" 설정인 경우에, 좌영상 또는 우영상 중 어느 한 영상의 교번 시점에 맞춰 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 차단한다. 즉, 입체 영상 안경 장치(200)는, 좌영상 또는 우영상 중 하나를 선택하여, 선택된 영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 투명하게 하고, 나머지 영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)와 우측 셔터드 글래스(212)를 함께 차단한다.Specifically, when the stereoscopic effect setting information is set to be "no stereoscopic effect ", the stereoscopic vision eyeglass apparatus 200 sets the left shutter glass 211 and the right shutter 211 in accordance with the alternate image of either the left image or the right image, And cut off the de-glass 212 together. That is, the stereoscopic image spectacles apparatus 200 selects either the left image or the right image to make both the left shutter glass 211 and the right shutter glass 212 transparent at the time of displaying the selected image, The left shutter glass 211 and the right shutter glass 212 are shut off at the time of displaying the remaining images.

또한 구체적으로, 입체 영상 안경 장치(200)는, 만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 시분할 입체 영상의 교번 시점에 따라, 좌영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)는 투명하게 되고 우측 셔터드 글래스(212)는 차단되며, 우영상이 표시되는 시구간에는 좌측 셔터드 글래스(211)는 차단되고 우측 셔터드 글래스(212)는 투명하게 되도록, 교번 시점에 맞춰 좌측 셔터드 글래스(211) 또는 우측 셔터드 글래스(212) 중 어느 하나를 교번하여 차단한다.More specifically, in the case where the stereoscopic effect spectacle apparatus 200 is set to a setting other than the "no stereoscopic feeling ", the stereoscopic vision spectacle device 200 may display the left shuttered glass The right shutter shutter 211 is turned to be transparent and the right shutter shutter 212 is shut off so that the left shutter shutter 211 is blocked and the right shutter shutter 212 is transparent Either the left shutter deck 211 or the right shutter deck 212 is alternately blocked.

단계(S46)에서, 입체 영상 안경 장치(200)가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도 또는 사용자의 선택에 의해 생성된, 적어도 "입체감 없음" 설정을 포함하는 입체감 설정 정보를 입체 영상 디스플레이 장치(100)로 전송할 수 있다.If the stereoscopic spectacles apparatus 200 determines in step S46 that the visual fatigue determined based on at least one of the frequency of blinking of the eyes, the eyelid ratio, or the retracted time, or at least the " To the stereoscopic image display apparatus 100. The stereoscopic image display apparatus 100 may be a stereoscopic image display apparatus.

본 실시예 및 본 명세서에 첨부된 도면은 본 발명에 포함되는 기술적 사상의 일부를 명확하게 나타내고 있는 것에 불과하며, 본 발명의 명세서 및 도면에 포함된 기술적 사상의 범위 내에서 당업자가 용이하게 유추할 수 있는 변형예와 구체적인 실시예는 모두 본 발명의 권리범위에 포함되는 것이 자명하다고 할 것이다.It is to be understood that both the foregoing general description and the following detailed description of the present invention are exemplary and explanatory and are intended to provide further explanation of the invention as claimed. It will be understood that variations and specific embodiments which may occur to those skilled in the art are included within the scope of the present invention.

또한, 본 발명에 따른 장치는 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽힐 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 기록매체의 예로는 ROM, RAM, 광학 디스크, 자기 테이프, 플로피 디스크, 하드 디스크, 비휘발성 메모리 등을 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Further, the apparatus according to the present invention can be implemented as a computer-readable code on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the recording medium include ROM, RAM, optical disk, magnetic tape, floppy disk, hard disk, nonvolatile memory and the like. The computer-readable recording medium may also be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner.

10 입체 영상 시스템
100 시분할 방식의 입체 영상 디스플레이 장치
110 영상 처리부
120 깊이 정보 조절부
130 입체 영상 생성부
140 동기화부
150 디스플레이부
160 통신 인터페이스
200 입체 영상 안경 장치
211, 212 셔터드 글래스
220 통신 인터페이스부
230 셔터 제어부
240 입체감 설정부
241 안구 검출부
242 시각적 피로도 판정부
243 입체감 결정부
244 수동 설정부10 Stereoscopic Image System
100 time division stereoscopic image display device
110 image processing unit
120 depth information control unit
130 stereoscopic image generating unit
140 synchronization section
150 display unit
160 communication interface
200 stereoscopic glasses device
211, 212 Shuttered Glass
220 communication interface unit
230 shutter control unit
240 "
241 eye detector
242 Visual fatigue judgment
243 Dimensional determination section
244 Manual setting section

Claims (20)

시분할 방식의 입체 영상 디스플레이 장치 및 적어도 하나의 입체 영상 안경 장치를 포함하는 입체 영상 시스템으로서,
상기 입체 영상 디스플레이 장치는,
영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 입체감이 조절되는 시분할 입체 영상을 생성하고, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하도록 동작하고,
상기 입체 영상 안경 장치는,
상기 동기화 정보로부터 식별된 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하며, 사용자의 시각적 피로도에 따라 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작하는 것을 특징으로 하는 입체 영상 시스템.A stereoscopic image system including a time-division stereoscopic image display apparatus and at least one stereoscopic image spectacle apparatus,
The stereoscopic image display device includes:
Generating a time-division stereoscopic image in which a stereoscopic effect is adjusted based on at least one stereoscopic effect setting information received from the at least one stereoscopic image spectacle device, generating multi-view images including at least left and right images from the image data, Dividing the left and right images of the time-division stereoscopic image according to the synchronization information about the alternate time of the left and right images of the time-division stereoscopic image,
Wherein the stereoscopic image spectacle device comprises:
Dividing the time-division stereoscopic image identified from the synchronization information to block one of the left or right shuttered glasses and making the other one transparent, and outputting the stereoscopic effect setting information generated according to the visual fatigue of the user, To the image display device. 청구항 1에 있어서, 상기 입체 영상 디스플레이 장치는,
영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하고, 상기 다시점 영상들로부터 깊이 맵을 생성하며, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하고, 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하며, 상기 보상된 깊이 맵을 기초로 상기 다시점 영상들로부터 시분할 입체 영상을 생성하고, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하도록 동작하는 것을 특징으로 하는 입체 영상 시스템.The stereoscopic image display apparatus of claim 1,
The method of claim 1, further comprising: generating multi-view images including at least left and right images from the image data, generating depth maps from the multi-view images, And generating a compensated depth map by compensating the depth map according to the determined depth range, generating a time-division stereoscopic image from the multi-view images based on the compensated depth map, And the right and left images of the time-division stereoscopic image are alternately displayed on the screen in accordance with the synchronization information about the alternate time of the left and right images of the image. 청구항 1에 있어서, 상기 입체 영상 안경 장치는,
사용자의 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 생성된, 적어도 "입체감 없음" 설정을 포함하는 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작하는 것을 특징으로 하는 입체 영상 시스템.The stereoscopic image apparatus according to claim 1,
Dimensional setting information including at least a "no stereoscopic effect" setting generated in accordance with visual fatigue determined based on at least one of a user's eye blink frequency, eyelid ratio, or eyelid time is transmitted to the stereoscopic image display device Wherein the stereoscopic image display system operates. 청구항 3에 있어서, 상기 입체 영상 안경 장치는,
만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하고,
만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하도록 동작하는 것을 특징으로 하는 입체 영상 시스템.The stereoscopic image apparatus according to claim 3,
If the three-dimensional setting information is "no stereoscopic effect, " the left and right shuttered glasses are alternately blocked or made transparent according to the alternate time of the time-division stereoscopic image,
If the three-dimensional setting information is other than "no stereoscopic effect ", one of the left shuttered glass or the right shuttered glass is alternately blocked in accordance with the alternate time point of the time-division stereoscopic image Wherein the stereoscopic image display system operates. 청구항 1에 있어서, 상기 입체 영상 안경 장치는,
사용자의 선택에 의해 상기 입체감 설정 정보를 생성하도록 동작하는 것을 특징으로 하는 입체 영상 시스템.The stereoscopic image apparatus according to claim 1,
And generates the stereoscopic effect setting information by the user's selection. 영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하는 영상 처리부;
상기 다시점 영상들로부터 깊이 맵을 생성하고, 외부에서 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 결정된 깊이 범위에 따라 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 깊이 정보 조절부;
상기 보상된 깊이 맵을 기초로, 상기 좌영상 및 우영상을 포함하는 다시점 영상들로부터 시분할 입체 영상을 생성하는 입체 영상 생성부;
상기 시분할 입체 영상의 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보를 생성하는 동기화부; 및
상기 동기화 정보에 따라 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하는 디스플레이부를 포함하는 시분할 방식의 입체 영상 디스플레이 장치.An image processing unit for generating multi-view images including at least a left image and a right image from the image data;
A depth map is generated from the multi-view images, a depth range is determined based on at least one external sensed setting information, and a depth map is generated by compensating the depth map according to the determined depth range. A control unit;
A stereoscopic image generation unit for generating a time-division stereoscopic image from multi-view images including the left and right images based on the compensated depth map;
A synchronization unit for determining an alternate time point of the time-division stereoscopic image and generating synchronization information about an alternate time point; And
And a display unit for alternately displaying the left and right images of the time-division stereoscopic image on the screen according to the synchronization information. 청구항 6에 있어서, 상기 깊이 정보 조절부는,
상기 수신된 복수의 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하도록 동작하는 것을 특징으로 하는 시분할 방식의 입체 영상 디스플레이 장치.7. The apparatus of claim 6,
And determines a depth range based on the calculated three-dimensional effect by calculating one of an average value, a mode value, a maximum value, and a minimum value of the received plurality of three-dimensional setting information. 청구항 6에 있어서, 상기 깊이 정보 조절부는,
만약 입체감 설정 정보들 중에 "입체감 없음"에 상응하는 입체감 설정 정보들이 있는 경우에는, 상기 수신된 복수의 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하도록 동작하는 것을 특징으로 하는 시분할 방식의 입체 영상 디스플레이 장치.7. The apparatus of claim 6,
If there is the three-dimensional setting information corresponding to the "no stereoscopic feeling" among the three-dimensional setting information, the average value of the stereoscopic effect setting information other than the three-dimensional setting information corresponding to " And the depth range is determined on the basis of the calculated cubic sensation by calculating one of the mode, the maximum value, the maximum value, and the minimum value. 좌측 및 우측 셔터드 글래스들;
입체 영상 디스플레이 장치로부터 수신된 동기화 정보에서 식별된 시분할 입체 영상의 교번 시점에 따라, 상기 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하도록 제어하는 셔터 제어부; 및
사용자의 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정되는 시각적 피로도에 따라 생성한 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 입체감 설정부를 포함하는 입체 영상 안경 장치.Left and right shuttered glasses;
A shutter control unit for controlling one of the left or right shuttered glasses to be intercepted and the other to be transparent according to an alternate time point of the time-division stereoscopic image identified in the synchronization information received from the stereoscopic image display apparatus; And
And a stereoscopic effect setting unit that transmits the stereoscopic effect setting information generated according to the visual fatigue determined based on at least one of the frequency of blinking of the user's eyes, the eyelid ratio, or the eyelid time to the stereoscopic image display device. 청구항 9에 있어서, 상기 입체감 설정부는,
눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 생성된, 적어도 "입체감 없음" 설정을 포함하는 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하도록 동작하는 것을 특징으로 하는 입체 영상 안경 장치.The stereoscopic image generation apparatus according to claim 9,
To the stereoscopic image display device, stereoscopic effect setting information including at least a "no stereoscopic effect" setting, which is generated in accordance with the visual fatigue determined based on at least one of eye blink frequency, eyelid rate, Wherein the stereoscopic image is displayed on the display unit. 청구항 10에 있어서, 상기 셔터 제어부는,
만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하고,
만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하도록 동작하는 것을 특징으로 하는 입체 영상 안경 장치.11. The apparatus according to claim 10,
If the three-dimensional setting information is "no stereoscopic effect, " the left and right shuttered glasses are alternately blocked or made transparent according to the alternate time of the time-division stereoscopic image,
If the three-dimensional setting information is other than "no stereoscopic effect ", one of the left shuttered glass or the right shuttered glass is alternately blocked in accordance with the alternate time point of the time-division stereoscopic image Wherein the stereoscopic image spectacle lens system operates. 청구항 9에 있어서, 상기 입체감 설정부는,
사용자의 선택에 의해 상기 입체감 설정 정보를 생성하도록 동작하는 것을 특징으로 하는 입체 영상 안경 장치.The stereoscopic image generation apparatus according to claim 9,
And generates the stereoscopic effect setting information by a user's selection. 청구항 9에 있어서, 상기 입체감 설정부는,
사용자의 안구 방향을 향하도록 안경테에 부착된 이미지 센서를 포함하는 것을 특징으로 하는 입체 영상 안경 장치.The stereoscopic image generation apparatus according to claim 9,
And an image sensor attached to the spectacle frame so as to face the eyeball direction of the user. 시분할 방식의 입체 영상 디스플레이 장치 및 적어도 하나의 입체 영상 안경 장치를 포함하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법으로서,
상기 입체 영상 디스플레이 장치가, 영상 데이터로부터 적어도 좌영상 및 우영상을 포함하는 다시점 영상들을 생성하는 단계;
상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계;
상기 입체 영상 디스플레이 장치가, 상기 보상된 깊이 맵을 기초로, 상기 다시점 영상들로부터 시분할 입체 영상을 생성하는 단계;
상기 입체 영상 디스플레이 장치가, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하는 시점을 결정하고, 교번 시점에 관한 동기화 정보에 따라, 상기 시분할 입체 영상의 좌영상과 우영상을 교번하여 스크린에 표시하는 단계;
상기 입체 영상 안경 장치가, 상기 동기화 정보로부터 시분할 입체 영상의 교번 시점을 식별하고, 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하는 단계;
상기 입체 영상 안경 장치가, 사용자의 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.1. A stereoscopic effect adjustment method for a stereoscopic image for a stereoscopic image system including a time-division stereoscopic image display device and at least one stereoscopic image spectacle device,
Wherein the stereoscopic image display device comprises: generating multi-view images including at least a left image and a right image from the image data;
Wherein the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on at least one of the three-dimensional setting information received from the at least one stereoscopic image glasses apparatus, Generating a compensated depth map by compensating the depth map;
Generating a time-division stereoscopic image from the multi-view images based on the compensated depth map;
The stereoscopic image display apparatus determines a time when the left and right images of the time-division stereoscopic image are alternated and displays the left and right images of the time-division stereoscopic image on the screen in accordance with the synchronization information about the alternate time ;
Wherein the stereoscopic image glasses device identifies an alternate time point of the time-division stereoscopic image from the synchronization information, and blocks one of the left or right shuttered glasses according to an alternate time point of the time-division stereoscopic image and makes the other one transparent ;
Wherein the stereoscopic image spectacles apparatus transmits the stereoscopic effect setting information generated by a visual fatigue of a user to the stereoscopic image display apparatus. 청구항 14에 있어서, 상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계는,
상기 입체 영상 디스플레이 장치가, 상기 수신된 복수의 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 결정된 입체감에 기초하여 상기 깊이 정보를 결정하는 단계를 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.The stereoscopic image display apparatus according to claim 14, wherein the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on the at least one stereoscopic effect setting information received from the at least one stereoscopic image glasses apparatus, The step of compensating the depth map according to the determined depth range to generate a compensated depth map,
Wherein the stereoscopic image display device includes a step of determining the depth information based on a stereoscopic effect determined by a method of calculating one of an average value, a mode value, a maximum value, and a minimum value of the received plurality of stereoscopic effect setting information A method for adjusting stereoscopic effect of a stereoscopic image for a stereoscopic image system. 청구항 14에 있어서, 상기 입체 영상 디스플레이 장치가, 상기 다시점 영상들로부터 깊이 맵을 생성하고, 상기 적어도 하나의 입체 영상 안경 장치로부터 수신된 적어도 하나의 입체감 설정 정보를 기초로 깊이 범위를 결정하며, 상기 결정된 깊이 범위에 따라 상기 깊이 맵을 보상하여 보상된 깊이 맵을 생성하는 단계는,
상기 입체 영상 디스플레이 장치가, 만약 입체감 설정 정보들 중에 "입체감 없음"에 상응하는 입체감 설정 정보들이 있는 경우에는, 상기 수신된 복수의 입체감 설정 정보들 중에서 "입체감 없음"에 상응하는 입체감 설정 정보들을 제외한 나머지 입체감 설정 정보들의 평균값, 최빈값, 최고값 또는 최저값 중 하나를 산출하는 방법으로 산출된 입체감에 기초하여 깊이 범위를 결정하는 단계를 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.The stereoscopic image display apparatus according to claim 14, wherein the stereoscopic image display apparatus generates a depth map from the multi-view images, determines a depth range based on the at least one stereoscopic effect setting information received from the at least one stereoscopic image glasses apparatus, The step of compensating the depth map according to the determined depth range to generate a compensated depth map,
When the stereoscopic image display apparatus has stereoscopic effect setting information corresponding to "no stereoscopic effect" among the stereoscopic effect setting information, the stereoscopic effect setting information excluding the stereoscopic effect setting information corresponding to " Determining a depth range on the basis of the three-dimensional sensation calculated by calculating one of an average value, a mode value, a maximum value, and a minimum value of the three-dimensional sensed setting information; and determining a depth range of the stereoscopic image for the stereoscopic image system . 청구항 14에 있어서, 상기 입체 영상 안경 장치가, 사용자의 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는,
상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 따라 입체감 설정 정보를 생성하는 단계; 및
생성된 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함하며,
상기 입체감 설정 정보는 적어도 "입체감 없음" 설정을 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.15. The stereoscopic image display apparatus according to claim 14, wherein the stereoscopic image spectacle device transmits the stereoscopic effect setting information generated by the visual fatigue of the user to the stereoscopic image display device,
Generating stereoscopic feeling setting information according to the visual fatigue determined based on at least one of eye blink frequency, eyelid ratio, and eye-winking time; And
And transmitting the generated stereoscopic effect setting information to the stereoscopic image display device,
Wherein the stereoscopic effect setting information includes at least "no stereoscopic effect" setting. 청구항 17에 있어서, 상기 입체 영상 안경 장치가, 상기 동기화 정보로부터 시분할 입체 영상의 교번 시점을 식별하고, 상기 시분할 입체 영상의 교번 시점에 따라 좌측 또는 우측 셔터드 글래스들 중 어느 하나를 차단하고 다른 하나를 투명하게 하는 단계는,
상기 입체 영상 안경 장치가, 만약 입체감 설정 정보가 "입체감 없음"이면, 상기 시분할 입체 영상의 교번 시점에 따라 상기 좌측 및 우측 셔터드 글래스들을 함께 교번하여 차단하거나 투명하게 하는 단계; 및
상기 입체 영상 안경 장치가, 만약 입체감 설정 정보가 "입체감 없음"이 아닌 다른 설정인 경우에, 상기 시분할 입체 영상의 교번 시점에 따라, 상기 교번 시점에 맞춰 상기 좌측 셔터드 글래스 또는 우측 셔터드 글래스 중 어느 하나를 교번하여 차단하는 단계를 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.[Claim 17] The stereoscopic image apparatus of claim 17, wherein the stereoscopic image spectacle device identifies an alternate time point of the time-division stereoscopic image from the synchronization information, blocks one of the left or right shuttered glasses according to an alternate time point of the time- Wherein the step of:
If the stereoscopic effect setting information is "no stereoscopic effect, " the stereoscopic image spectacle device alternately blocks or makes the left and right shuttered glasses turn alternately according to an alternate time point of the time-division stereoscopic image; And
When the stereoscopic effect spectacle device is in a different setting than the "no stereoscopic feeling ", the stereoscopic vision spectacle device may be configured so that the left or right shuttered glass And blocking one of the plurality of stereoscopic images by the first stereoscopic image and the second stereoscopic image. 청구항 14에 있어서, 상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는
상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해, 또는 사용자의 선택에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계를 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.15. The stereoscopic image apparatus according to claim 14, wherein the stereoscopic image spectacles apparatus transmits the stereoscopic effect setting information generated by the visual fatigue determined based on at least one of an eye blink frequency, an eyelid ratio, The steps
The stereoscopic image spectacle device displays the stereoscopic effect setting information generated by the user's selection or the visual fatigue determined based on at least one of the frequency of blinking of the eyes, the eyelid ratio, And transmitting the stereoscopic image to the stereoscopic image capturing apparatus. 청구항 14에 있어서,
상기 입체 영상 안경 장치가, 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나에 기초하여 판정된 시각적 피로도에 의해 생성된 상기 입체감 설정 정보를 상기 입체 영상 디스플레이 장치로 전송하는 단계는,
상기 입체 영상 안경 장치가, 사용자의 안구 방향을 향하도록 안경테에 부착된 이미지 센서로부터 눈깜빡임 빈도, 눈꺼풀 비율, 또는 눈 감은 시간 중 적어도 어느 하나를 획득하는 단계를 포함하는 것을 특징으로 하는 입체 영상 시스템을 위한 입체 영상의 입체감 조절 방법.15. The method of claim 14,
Wherein the step of transmitting the stereoscopic effect setting information generated by the visual fatigue determined based on at least one of the blink frequency, the eyelid ratio, and the eye-winking time of the stereoscopic image glasses device to the stereoscopic image display device,
Wherein the stereoscopic image spectacle device includes a step of acquiring at least one of an eye blink frequency, an eyelid ratio, and a retracted time from an image sensor attached to an eyeglass frame so as to face the user's eyeball direction, A method for adjusting stereoscopic effect of a stereoscopic image.
KR1020140084820A 2014-07-07 2014-07-07 Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system KR101645795B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140084820A KR101645795B1 (en) 2014-07-07 2014-07-07 Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140084820A KR101645795B1 (en) 2014-07-07 2014-07-07 Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system

Publications (2)

Publication Number Publication Date
KR20160005878A true KR20160005878A (en) 2016-01-18
KR101645795B1 KR101645795B1 (en) 2016-08-16

Family

ID=55305604

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140084820A KR101645795B1 (en) 2014-07-07 2014-07-07 Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system

Country Status (1)

Country Link
KR (1) KR101645795B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0923451A (en) * 1995-07-05 1997-01-21 Sanyo Electric Co Ltd Sensitivity response controller
KR20130133520A (en) * 2012-05-29 2013-12-09 엘지디스플레이 주식회사 Method and apparatus for reducing visual fatigue of stereoscopic image display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0923451A (en) * 1995-07-05 1997-01-21 Sanyo Electric Co Ltd Sensitivity response controller
KR20130133520A (en) * 2012-05-29 2013-12-09 엘지디스플레이 주식회사 Method and apparatus for reducing visual fatigue of stereoscopic image display device

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
[1] 장성은 외, "깊이맵 변환을 이용한 3D 입체감 개선 방법" 방송공학회 논문지 2011년 제16권 제6호, pp. 916-926

Also Published As

Publication number Publication date
KR101645795B1 (en) 2016-08-16

Similar Documents

Publication Publication Date Title
CN108600733B (en) Naked eye 3D display method based on human eye tracking
JP5515301B2 (en) Image processing apparatus, program, image processing method, recording method, and recording medium
US20050190258A1 (en) 3-D imaging arrangements
WO2011108702A1 (en) Stereoscopic video display device and operation method of stereoscopic video display device
JP2011210027A (en) Image processing apparatus and method, and program
JP5148016B2 (en) 3D image providing apparatus and method
JP2011193460A (en) Method for adjusting 3d-image quality, 3d-display apparatus, 3d-glasses, and system for providing 3d-image
JP2012213633A (en) Target showing apparatus
KR20110114257A (en) 3-dimension display apparatus and method for setting display mode thereof, and system for providing 3d display
JP2014500674A (en) Method and system for 3D display with adaptive binocular differences
US20120099195A1 (en) Eyewear, three-dimensional image display system employing the same, and method of allowing viewing of image
KR20120139455A (en) Vision training apparatus based on 3d screen and training method of it
US20150070477A1 (en) Image processing device, image processing method, and program
KR20110137607A (en) Display apparatus and 3d image acquisition examination method thereof
JP2013128181A (en) Display device, display method, and display program
KR101320477B1 (en) Building internal navication apparatus and method for controlling distance and speed of camera
US20140347451A1 (en) Depth Adaptation for Multi-View System
KR20120070363A (en) Stereoscopic 3d display device and method of driving the same
KR101645795B1 (en) Stereoscopic glass and stereoscopic image display system capable of adjusting 3-dimensional sensation and method for adjusting 3-dimensional sensation for stereoscopic image display system
JP2013225745A (en) Stereoscopic video display system, stereoscopic video projection device, active shutter glasses, and parallax amount control method
JP5402070B2 (en) Image presentation system, image processing apparatus, program, and image presentation method
KR20110136326A (en) System for rendering of stereoscopic
KR20110116509A (en) Apparatus and system for viewing 3d image
JP2012255820A (en) Stereoscopic image displaying apparatus and stereoscopic image displaying method
KR101247501B1 (en) Stereopic 3 Dimension Display Device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)