KR100854122B1 - 가상음상정위 처리장치, 가상음상정위 처리방법 및 기록매체 - Google Patents

Abstract

재생음의 음상을 재생상황에 따라서 임의의 위치에 정위시킬 수 있는 음상정위 처리장치를 제공하는 것이며, 해결수단으로서, 음상정위 처리장치(1)는, DVD디스크(2)에서 재생음향신호 및 앵글선택신호(SA)를 재생하는 디코더(3)와, 앵글선택신호(SA)에 대해서 음상위치를 변경시키도록 지정을 하는 앵글선택 지정신호(SA')와 재생된 재생음향신호를, 앵글선택 지정신호(SA')에 의해 변경지정된 앵글선택신호(SA)에 의해 음상정위 위치를 변경시키는 처리를 하는 합성회로(4)와, 변경처리된 음상정위 위치에 음상을 정위시키도록 재생음을 출력하는 스피커(7, 8)를 갖추고, 앵글선택신호(SA)를 변경하는 지정에 의해, 임의의 위치에 음상을 정위시키도록 하였으므로, 청취자(9)가 선택한 앵글·모드에 따라서, 각 음상정위 위치도 적절히 설정되어서 재생음이 재생된다.

Description

가상음상정위 처리장치, 가상음상정위 처리방법 및 기록매체{Virtual sound image localizing device, virtual sound image localizing method and storage medium}

본 발명은, 예를 들면, 음악정보나 영상정보의 재생에 이용하기 적합한 가상음상정위 처리장치에 관한 것이다.

근래, 돌비·디지털(DOLBY DIGITAL(AC3))이나 dts 등의 멀티·채널의 디지털·서라운드방식으로 기록된 DVD(Digital Versatile Disc) 비디오 디스크가 널리 알려지게 되었다.

예를 들면, 전자의 AC3방식에서는, 전방 중앙채널(C), 전방 좌우채널(L/R), 후방 좌우 서라운드·채널(SL/SR)의 전범위(full range)의 5채널과, 저음 효과용만의 보조채널(SW)로 이루어지며, 각각의 채널에 대응하는 스피커를 청취자의 주위에 배치하여 효과적인 서라운드 재생음을 제공하도록 하고 있다.

그런데, 이 DVD비디오디스크의 특징적인 기능의 하나로, "멀티·앵글"로 불리는 것이 있다. 이것은, 사용자의 기호에 따라서 최대 9앵글까지 카메라·앵글 또는 뷰·앵글을 전환하는 것이 가능한 기능으로, 영화나 스포츠, 라이브 등의 영상을 복수의 카메라·앵글로 기록매체에 기록하고, 사용자 앵글을 자유로 선택하여 즐기는 기능이다.

이 멀티·앵글의 기능을 이용하면, 예를 들면, 뮤직·비디오에 있어서, 통상의 감상모드에 있어서의 재생영상과는 다르며, 보다 주목하고자 하는 기타리스트나 드러머 등의 연주자의 연주장면을 중심으로 감상할 수 있는 것이다.

그러나, 상술한 종래의 DVD 비디오 디스크의 재생에 있어서는, 상술한 멀티·앵글기능에 의해, 카메라·앵글(뷰·앵글)이 선택되었다 해도, 그것에 부수하는 음향신호나 영상신호 등은, 이것과는 무관하게 통상의 감상모드에 맞추어 재생될 뿐이므로, 청취자에 있어서는 감상하고자 하는 영상과 어울리지 않는 음상정위감이 되어, 매우 위화감이 있고, 재생품질이 저하한다는 단점이 있었다.

그래서, 본 발명은, 이러한 점에 감안하여 이루어진 것이며, 재생음의 음상을 재생상황에 따라서 임의의 위치에 정위시킬 수 있는 가상음상정위 처리장치를 제공하는 것을 과제로 한다.

또한, 본 발명에 있어서, 음원 또는 음원군이 정위하여 형성되는 음상에 대해서 청취자가 임하는 방향 또는 그 음원위치와 청취자 위치와의 상대적인 위치관계를 편의상 "앵글"로 칭하는 것으로 한다.

본 발명의 음상정위 처리장치는, 음원의 음향신호가 공급되어서, 음원의 음상정위 위치에 정위하도록 처리하는 음상정위 처리장치에 있어서, 청취자의 청취위치에 대한 음원의 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보를 변경시키도록 지정하는 정위정보 변경수단과, 음원의 음향신호에 대해서, 음상변경수단 에 의해 변경 지정된 음상정위 정보에 의거해서 음원의 음상정위 위치를 변경시키는 처리를 실시하여 재생출력을 얻는 음상정위 처리수단을 갖추는 것이다.

따라서 본 발명에 의하면, 이하의 작용을 한다.

음원에서 재생수단에 의해 재생된 재생신호를 디코더에 의해 디코드하고, 음상정위 선택정보, 각 채널의 재생음향신호를 출력한다.

음상정위 선택정보에 의해 음상정위 위치변경수단은 각 채널의 재생음향신호를 합성하여 각 채널의 합성음향신호를 출력한다.

여기서, 음상정위 위치변경수단에 대해서, 청취자의 조작에 의해 음상변경 지정수단은, 음상정위 선택정보에 대해서 앵글선택을 지정하는 변경 음상정위 선택정보를 공급한다.

이것에 의해, 변경 음상정위 선택정보는 음상정위 위치변경수단에 공급되고, 음상정위 위치변경수단에서 공급된 각 채널의 재생음향신호가, 청취자에 대해서 재생음상의 정위정보에 따른 각 음향신호가 되도록 각 채널의 재생음향신호의 합성비를 변경하여 각 채널의 합성음향신호를 출력한다.

이것에 의해, 각 채널의 스피커는, 영상신호에 따라서 재생음상의 정위위치가 변경된 각 채널의 합성음향신호에 의해 재생음을 방출한다. 청취자는, 재생음상의 정위위치 또는 방향이 변경된 스피커에 의한 재생음을 청취할 수 있다.

따라서, 본 발명의 음상정위 처리장치에 의하면, 청취자가 선택한 앵글·모드에 따라서, 각 음상정위 위치도 적절히 설정되어 재생음이 재생되므로, 재생된 음원영상위치와 적합한 보다 현장감이 넘치는 음향재생을 할 수 있다는 효과를 나타낸다.

또, 본 발명의 음상정위 처리장치는, 상술에 있어서, 정위정보 변경수단에 의한 변경처리는, 재생음향신호의 각 재생채널의 합성비율을 변경하므로, 스크린상의 음원영상위치가 청취자의 위치에서 좌, 중앙, 우의 각 채널에 대해서 음상정위 위치가 좌, 중앙, 우가 되도록 음상정위 위치가 변경되고, 또, 청취자의 위치에서 음상의 방사형으로 근접 또는 이격(離隔)하는 이동방향, 시계방향 또는 반시계방향으로의 회전의 이동방향, 좌우방향으로의 이동방향으로 음상위치가 이동되도록 합성처리 할 수 있다는 효과를 나타낸다.

또, 본 발명의 음상정위 처리장치는, 상술에 있어서, 음상정위 처리수단에 의한 변경처리는, 재생음향신호에 대해서, 가상 음원위치 및 스피커에서 청취자의 양 귀까지의 머리부 음향전달함수에 의거한 음상정위 처리에 있어서, 전자의 전달함수를 변경시키는 처리를 하므로, 청취자는 스크린에 의한 영상에 대응하여, 재생음상의 정위위치가 변경된 스피커에 의한 마치 다채널의 가상 스피커에 의해 재생되는 것과 같은 현장감이 풍부한 서라운드 재생음장에 의한 재생음을 청취할 수 있다는 효과가 있다.

또, 본 발명의 음상정위 처리장치는, 상술에 있어서, 정위정보 변경수단에 의해 변경 지정된 음상정위 정보를 재생음향신호의 재생시간 정보에 대응시켜서 편집하여 함께 기록하고, 기록된 음상정위 정보 및 재생시간 정보에 의거해서 재생음향신호의 재생을 행하므로, 청취자는 스스로 구성하는 카메라·앵글의 장면의 구성을 만들 수 있고, 그것을 반복해서 감상할 수 있고, 그때 재생음성도 카메라·앵글에 따라서, 마치 청취자가 이동하여 스크린상에 영출(映出)되는 음원영상위치에 마주 보는 것 같은 음상정위 위치의 정위감을 얻을 수 있다는 효과가 있다.

또, 본 발명의 음상정위 처리장치는, 상술에 있어서, 음상정위 처리수단은, 음원신호에 동반하여 공급되는 이 음원신호의 음상정위 위치 또는 방향을 나타내는 음상정위 정보에 대해서, 다른 음상위치에 정위하도록 변경을 가하고, 이 변경된 음상정위 정보에 의거해서 음상정위 위치를 변경시키는 처리를 하므로, 청취자는 스크린에 의한 영상의 음원위치에 대응하여, 재생음상의 정위위치가 지정되고, 또는 재생음상의 정위위치가 변경된 스피커에 의한 재생음을 청취할 수 있다는 효과가 있다.

또, 본 발명의 음상정위 처리방법에 의하면, 청취자의 청취위치에 대한 공급된 음상의 재생음상 정위위치를 나타내는 음상정위 정보를 변경시키도록 지정을 하고, 이 음원의 음향신호에 대해서, 이 변경 지정된 음상정위 정보에 의거해서 이 음원의 음상정위 위치를 변경시키는 처리를 실시하여 재생출력을 얻고, 임의의 위치에 음상을 정위시키도록 하였으므로, 청취자가 선택한 앵글·모드에 따라서, 각 음상정위 위치도 적절히 설정되어 재생음이 재생되므로, 재생된 음원영상 위치와 적합한 보다 현장감이 넘치는 음향재생을 할 수 있다는 효과가 있다.

또, 본 발명의 기록매체에 의하면, 청취자의 청취위치에 대한 음원의 재생음상 정위위치를 나타내는 음상정위 정보와, 이 음상정위 정보로 변경하는 재생시간 정보를 대응시켜서 기록하도록 하였으므로, 이 기록매체를 상술한 음상정위 처리장치에 장착하고, 재생음향신호가 공급되었을 때에, 재생음향신호에 동반하는 재생시간 정보와 이 기록매체에 기록되는 재생시간 정보가 일치한 타이밍에서 그 음상정위 정보에 근거한 음상정위 처리가 행해지고, 디폴트의 음상정위감과 다른 음상정위감을 재생음향신호에 맞추어 향수(享受)할 수 있다는 효과가 있다.

도 1은 본 실시형태에 적용되는 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 2는 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 3은 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 4는 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 5는 음상위치의 이동을 나타내는 도면이다.

도 6은 음원에 대한 음상의 정위를 나타내는 도면이다.

* 도면의 주요부분에 대한 부호의 설명

1, 11, 21, 31. 음상정위 처리장치 2. DVD디스크

3. 디코더 4. 합성회로

5. 리모콘 6. 스크린

7, 8. 스피커 9. 청취자

12. 가상음상정위 처리회로 22. 기록매체

SV. 영상신호 SA. 앵글선택신호

SA'. 앵글선택 지정신호 ST. 시간정보

SP. 음원위치정보

N1∼N6. 방사형에 근접 또는 격리하는 음상위치의 이동방향

R1∼R4. 시계방향 또는 반시계방향에의 회전의 음상위치의 이동방향

L1∼L5. 좌우방향에의 음상위치의 이동방향

61. 음원영상위치 V1. 좌음원영상위치

V2. 중앙음원영상위치 V3. 우음원영상위치

62. 음상정위 위치 S1. 좌음상 정위위치

S2. 중앙음상 정위위치 S3. 우음상 정위위치

본 실시형태의 음상정위 처리장치는, DVD디스크의 멀티·앵글기능에 대응시켜서 각 채널의 재생음향신호를 합성하여, 청취자가 재생화면의 앵글에 적합한 음상정위감을 얻을 수 있는 것이다.

도 1은, 본 실시형태에 적용되는 음상정위 처리장치의 구성을 나타내는 블록도이다.

음상정위 처리장치(1)는, DVD디스크(2)에서 도시하지 않은 광학픽업에 의해 독출된 재생신호를 디코드하여 영상신호(SV), 앵글선택신호(SA), 각 채널의 재생음향신호(C(중앙), L(좌), R(우), SL(좌후방), SR(우후방), SW(서브우퍼))를 출력하는 디코더(3)와, 앵글선택신호(SA)에 의해 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 합성하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력하는 합성회로(4)와, 디코더(3) 및 합성회로(4)에 대하여 앵글선택을 지정하는 앵글선택 지정신호(SA')를 공급하는 리모콘(리모트 커맨더)(5)과, 영상신호(SV)에 의한 영상을 영출하는 스크린(6)과, 각 채널의 합성음향신호(C', L', R', SL', SR', SW')에 의한 재생음을 방출하는 각 채널(C, L, R, SL, SR, SW)의 스피커(7, 8)(SW용 스피커는 도시하지 않는다)와, 스피커(7, 8)에 의한 재생음을 청취하는 동시에 스크린에 표시된 화상을 보는 청취자(9)로 구성된다. 또, 스피커(7, 8)를 대신하여 헤드폰을 이용하여도 좋다.

여기서, DVD디스크(2)는, 청취자(9)가 리모콘(5)에 의해 지정한 앵글선택 지정신호(SA')에 의해, 재생음상의 정위정보인 앵글선택신호(SA)에 대해서 앵글선택을 지정하고, 소망의 영상신호(SV)에 대해서 임의의 앵글·모드로 할 수 있도록 구성되어 있다. 상술한 재생음상의 정위정보는 단순히 위치정보 또는 방향정보로 표현할 수도 있다.

또, 합성회로(4)는, 각 채널의 재생음향신호(C, L, R, SL, SR, SW)가 앵글선택 지정신호(SA')에 의한 앵글선택에 의해 지정된 앵글·모드에 의하여, 청취자(9)에 대한 음상정위 위치가 상대적으로 변경되도록, 각 출력채널에의 합성비 또는 채널 할당(channel allocation)을 변경하여 얻어진 합성음향신호(C', L', R', SL', SR', SW')를 청취자(9)의 주위에 배치되는 각 채널(C, L, R, SL, SR, SW)의 스피커(7, 8)에 공급하는 기능을 가지고 있다.

또한, 통상은, 노멀·모드에 있어서 청취한 경우에 청취자(9)의 전방에 스크린(6) 또는 모니터가 배치되고, 그 전방 좌우 및 중앙에 L/R/C채널의 스피커(7)가 배치되고, 청취자(9)의 후방좌우에 SL/SR채널의 스피커가 배치된다. SW채널의 신호는 명확한 정위감을 나타내지 않은 저음역만의 신호이기 때문에, SW채널의 스 피커는 시청하는 방의 어느 위치에 배치되어도 좋다. 청취자(9)에 대한 재생음상의 정위정보로서는, 청취자(9)의 청취위치와 그 노멀·모드에 있어서의 L/R채널의 스피커(7) 등의 상대적인 위치관계를 기준으로 하여, 설정되는 앵글에 따라서 가상적인 각 음원의 음상정위 위치를 계산하고, 그 위치에 음상을 정위하도록 신호를 처리한다. 이 계산은, 예를 들면 좌표변환계산 등에 의해 행해지면 좋다.

또, 재생음상의 정위정보는, 극좌표로 나타내는 방위와 거리 또는 직교 좌표값으로 표현하는 것이 보다 정확한 음상정위 위치를 정하는 데에 바람직하나, 각 스피커의 배치위치나 청취자의 청취위치를 정확히 알기는 어려우므로, 평균적인 청취환경, 예를 들면, 가정용 기기를 사용한 평균적인 청취환경 등에서 각 스피커의 배치조건을 상정하고, 그 조건을 사용하여도 좋다. 혹은, 거리정보를 생략하고 방위정보만으로 가상음상 방향의 제어를 행하도록 하여도 좋다.

이와 같이 구성된 음상정위 처리장치의 동작을 이하에 설명한다.

DVD디스크(2)에서 도시하지 않은 광학픽업에 의해 독출된 재생신호를 디코더(3)가 디코드하여 영상신호(SV), 앵글선택신호(SA), 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 출력한다.

앵글선택신호(SA)에 의해 합성회로(4)는 각 채널의 재생음향신호(C, L, R, SL, SW)를 합성하여, 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

여기서, 디코더(3)에 대해서, 청취자(9)의 조작에 의해 리모콘(리모트 커맨더)(5)은, 앵글선택을 지정하는 앵글선택 지정신호(SA')를 공급한다.

이것에 의해, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')가 디코더(3)에 공급되고, 그 앵글·모드에 대응하는 카메라·앵글의 영상신호(SV)를 출력한다. 앵글·모드에 대응한 DVD디스크에는, 복수의 카메라·앵글(뷰·앵글)에 대응한 복수의 영상신호가 기록되어 있으므로, 이들의 복수의 영상신호 중 하나를 선택하여 영상신호(SV)로서 출력한다. 동시에, 앵글선택 지정신호(SA')에 대응하여 선택된 앵글·모드를 나타내는 앵글선택신호(SA)가 합성회로(4)에 공급되고, 디코더(3)에서 공급된 각 채널의 재생음향신호(C, L, R, SL, SR, SW)가, 청취자(9)에 대해서 재생음상의 정위정보에 따른 각 음향신호가 되도록 각 출력채널에의 재생음향신호(C, L, R, SL, SR, SW)의 합성비 혹은 채널 할당을 변경하여 각 채널의 합성음향신호(C', L', R'. SL', SR', SW')를 출력한다.

이것에 의해, 스크린(6)은 영상신호(SV)에 의한 영상을 영출하는 동시에, 각 채널(C, L, R, SL, SR, SW)의 스피커(7, 8)는, 영상신호(SV)에 따라서 재생음상의 정위위치가 변경된 각 채널의 합성음향신호(C', L', R'. SL'. SR', SW')에 의한 재생음을 방출한다. 청취자(9)는, 스크린에 의한 영상에 대응하여, 재생음상의 정위위치가 변경된 재생음을 스피커(7, 8)에 의해 청취할 수 있다.

또한, 통상은, DVD디스크에 디폴트의 앵글·모드로서 기록되는 카메라·앵글의 영상에 맞추어, 각 채널의 음향신호(C, L, R, SL, SR, SW)가 기록되어 있다. 따라서, 이 모드에서 변경하지 않을 때에는, 상술한 합성회로(4)는 입력되는 각 채널의 재생음향신호(C, L, R, SL, SR, SW)에 대해서 실질적으로 하등의 처리를 가하지 않고 출력하고, 각각 대응하는 각 채널(C, L, R, SL, SR, SW)의 스피커(7, 8)에 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 그대로 공급한다. 한편, 청취자(9)가 다른 앵글·모드를 선택하였을 때에는, 그 앵글로 촬영한 카메라가 음원 또는 음원군과 마주보는 위치나 방향으로, 마치 청취자(9)가 이동하여 음원 또는 음원군과 마주보는 것 같은 정위감을 얻도록, 합성회로(4)는 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 합성한다.

다음에, 구체적인 각 앵글·모드를 설명한다.

도 5는, 음상위치의 이동을 나타내는 도면이며, 도 6은, 음원에 대한 음상의 정위를 나타내는 도면이다.

우선, 제 1로, 라이브연주를 수록한 영상·음성신호의 경우를 예로서, 스크린(6) 상에 영출되는 스테이지 중앙에 접근하도록 한 앵글·모드에 대해서 설명한다.

이 경우, 합성회로(4)에 의해, 스크린(6) 상에 영출되는 스테이지 중앙에 대해서, 스피커(7)의 중앙위치(C)에 정위되는 보컬음성 등에 청취자(9)의 위치에서 도 5의 음상위치의 전방에의 이동방향(N1)에 나타내는 바와 같이 전방에 접근하도록, 전방 중앙(C)에 대한 채널의 재생음향신호(C)의 음량을 크게 하여 합성음향신호(C')로 하는 동시에, 전방 중앙(C)에 대한 채널의 재생음향신호(C)에 적절한 지연처리를 가해서 그 레벨을 감쇠시킨 후에 전방 좌우(L/R)에 대한 채널의 재생음향신호(L/R)에 더하여 합성음향신호(L'/R')로서 출력한다. 또, 전방 좌우(L/R)에 대한 채널의 음향신호(L/R)의 레벨을 감쇠시킨 후에, 후방 좌우(SL/SR)에 대한 채널의 음향신호(SL/SR)에 각각 더하여, 함성음향신호(SL'/SR')로서 출력하도록 하여도 좋다. 또한, 음향신호(SL/SR)의 레벨을 감쇠시켜도 좋다.

이 때, 합성회로(4)에 의해, 도 6의 스크린(6) 상의 음원영상위치(61)가, 중앙(V2)인 음원의 영상정위위치(62)는 중앙(S2) 그대로이지만, 좌우의 음원영상위치에 있던 음원은 보다 좌우로 넓어진 위치로 음상정위 위치가 변경된다.

이것에 의해, 스크린(6) 상에 영출되는 스테이지 중앙에 대하여, 스피커(7)의 중앙위치(C)에 정위되는 보컬음성 등에 청취자(9)의 위치에서, 도 5의 N1에 나타내는 바와 같이, 전방 중앙에 접근하도록, 음상정위감을 변경하여 효과적으로 음향신호의 재생을 행할 수 있다.

물론, 이 경우에, 합성회로(4)에 의해, 보다 실재감을 높이기 위해, 전방 중앙(C)에 대한 채널의 재생음향신호(C')의 중음역을 약간 강조하는 처리를 겸해서 실시하여도 좋다. 혹은, 재생음향신호(C')의 음량에 따른 라우드니스(loudness) 보정을 실시하여도 좋다.

여기서, 전방 좌우(L/R)에 대한 채널의 재생음향신호(L/R)는, 통상의 디폴트의 앵글·모드에서는, 예를 들면, 좌우 ±30°의 열린 각으로 배치되는 L/R채널의 스피커(7)에서 재생되지만, 이 앵글·모드일 때는, 보다 열린 정위감으로 하기 위해, 예를 들면, 전방 좌우(L/R)에 대한 채널의 재생음향신호(L/R)를, 서로 반대의 전방우좌(R/L)에 대한 채널의 재생음향신호(R/L)에 대해서 역상으로 그 레벨을 감쇠시켜서, 원래의 재생음향신호(L/R)에 더하고 합쳐서 합성음향신호(L'/R')로서 공급한다.

제 2로, 스크린(6) 상에 영출되는 스테이지 위쪽의 연주자를 위로 향하는 앵글·모드에 대하여 설명한다.

예를 들면, 스크린(6) 상에 영출되는 스테이지에 대해서, 위쪽(객석의 관객(audience)에서 보아, 무대의 우측을 말한다)에 기타 연주자가 있고, 중앙에 보컬, 아래쪽에 베이스 연주자가 있는 경우에, 상술한 카메라·앵글로 촬영한다. 이 경우, 통상의 앵글·모드에 맞추어 각 채널의 음향신호가 DVD디스크에 기록되어 있으므로, 스테이지 위쪽의 기타 연주자는 우전방(R)에 대한 채널의 음향신호(R)에, 중앙의 보컬은 전방중앙(C)에 대한 채널의 음향신호(C)에, 아래쪽의 베이스 연주자는 좌전방(L)에 대한 채널의 음향신호(L)에 각각 기록되어 있다.

이 앵글·모드가 선택된 경우, 합성회로(4)에 의해, 스테이지 위쪽의 기타 연주자의 재생음향신호(R)는 약간 음량이 크게 되어서 전방 중앙(C)에 대한 채널의 합성음향신호(C')에 출력되고, 중앙의 보컬의 재생음향신호(C)는 약간 음량이 작게 되어서 좌전방(L)에 대한 채널의 합성음향신호(L')에 출력되고, 아래쪽의 베이스 연주자의 재생음향신호(L)는 중앙의 보컬의 재생음향신호보다 더욱 음량이 작게 되어서 좌전방(L)에 대한 채널의 합성음향신호(L')에 각각 출력된다. 또, 서라운드 채널의 재생음향신호(SL/SR)의 일부를 우전방(R)에 대한 채널의 함성음향신호(R')에 출력하여도 좋다.

이 때, 합성회로(4)에 의해, 도 6의 스크린(6) 상의 음원영상위치(61)가 우(V3)였던 음원의 음상정위위치(62)는 중앙(S2)이 되도록 음상정위 위치가 변경된다.

이것에 의해, 스크린(6) 상에 영출되는 스테이지 위쪽의 연주자에 정위되는 연주음을, 청취자(9)의 위치에서 도 5의 N6에 나타내는 바와 같이 우전방측에 위로 향하도록, 음상정위감을 변경하여 효과적으로 음향신호의 재생을 행할 수 있다. 즉, 스테이지 위쪽의 기타 연주자가 스크린(6) 상의 중앙에 영출되는 동시에, 그 연주자는 청취자(9)의 정면 방향으로 음상정위하여 재생된다.

제 3에, 스크린(6) 상에 영출되는 회장(會場) 후방에서 스테이지 전체를 바라보도록 한 앵글·모드를 설명한다.

이 경우에는, 합성회로(4)에 의해, 전방 중앙(C)에 대한 채널의 재생음향신호(C)는 그대로 전방 중앙의 채널의 합성음향신호(C')로 출력하고, 전방 좌우(L/R)에 대한 채널의 재생음향신호(L/R)는 각각 전방 좌우의 채널의 합성음향신호(L'/R')에 출력하는 동시에 그 레벨을 감쇠시킨 후에 전방 중앙의 채널의 합성음향신호(C')에도 출력한다.

또, 합성회로(4)에 의해, 서라운드 채널의 재생음향신호(SL/SR)의 음량을 약간 크게 하여 후방 좌우에 대한 서라운드 채널의 합성음향신호(SL'/SR')에 출력하는 동시에, 그 일부를 전방 좌우의 채널의 합성음향신호(L'/R')에 출력하여도 좋다.

이 때, 합성회로(4)에 의해, 도 6의 스크린(6) 상의 음원영상위치(61)가 중앙(V2)인 음원은 음상정위위치(62)가 중앙(S2) 그대로이지만, 좌우의 음원 형상위치에 있던 음원은 보다 중앙에 접근한 위치로 음상정위 위치가 변경된다.

이것에 의해, 스크린(6) 상에 영출되는 스테이지 전체의 연주자를, 청취자(9)의 위치에서 보아 도 5의 음상의 중앙으로의 이동방향(L1, L3)에 나타내는 바와 같이 연주자의 넓어짐을 억제함으로써, 음상의 후방으로의 이동방향(N1, N2, N6)에 나타내는 바와 같이 연주회장 후방에서 스테이지 전체를 볼 수 있도록, 음상정위감을 변경하여 효과적으로 음향신호의 재생을 행할 수 있다.

도 2는 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 2의 음상정위 처리장치(11)가 도 1의 음상정위 처리장치(1)와 다른 점은 합성회로(4)의 후단에 가상음상정위 처리회로(12)를 설치하고, 스피커(7)를 전방 좌우(L/R)의 2채널로 한 점이다. 다른 구성은 도 1과 동일하므로 그 설명을 생략한다. 도 2에 있어서, 도 1에 대응하는 부분에는 동일한 부호를 붙이고 있다. 또한, 스피커(7)를 대신하여 청취자가 장착하는 헤드폰에 의해 재생하여도 좋다.

이와 같이 구성된 다른 음상정위 처리장치의 동작을 이하에 설명한다.

DVD디스크(2)에서 도시하지 않은 광학픽업에 의해 독출된 재생신호를 디코더(3)가 디코드하여 영상신호(SV), 앵글선택신호(SA), 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 출력한다.

앵글선택신호(SA)에 의해 합성회로(4)는, 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 합성하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

또한, 앵글선택신호(SA)에 의해 가상음상정위 처리회로(12)는 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를, 예를 들면 청취자(9)의 전방 좌우(L/R)에 배치된 스피커(7)에서 재생된 경우에 마치 청취자(9)의 주위에 배치된 C, L, R, SL, SR, SW의 5.1채널의 가상 스피커에 의해 재생되는 것과 같은 현장감이 풍부한 서라운드 재생음장을 재생하도록 처리한다.

가상음상정위 처리회로(12)는, 재생하는 음원의 음상정위 위치에서 청취자의 양 귀까지의 머리부 음향 전달함수(HRTF: Head Related Transfer Function)와 스피커(7)(L/R)에서 청취자의 양 귀까지의 머리부 음향 전달함수에 의거해서 행해지는 음상정위 처리를, 각 합성음향신호에 대해서 행한다. 앵글·모드가 변경되면, 청취자(9)와 이들의 음상정위 위치의 상대위치관계가 변화하므로, 이 전자의 머리부 음향전달함수를 변경하여 처리를 행함으로써, 앵글·모드에 대응한 음상정위감을 갖는 재생음이 얻어진다. 이 신호처리는, 예를 들면, 각 머리부 음향전달함수에 대응하는 임펄스·응답을 가지는 1조의 FIR필터로 행해지지만, 이들의 필터의 계수를 변경함으로써 소망의 전달함수를 얻는다.

여기서, 디코더(3)에 대해서, 청취자(9)의 조작에 의해 리모콘(리모트 커맨더)(5)은, 앵글선택을 지정하는 앵글선택 지정신호(SA')를 공급한다.

디코더(3)는, 공급된 앵글선택 지정신호(SA')에 의거해, 대응하는 앵글·모드의 영상신호(SV)를 출력하는 동시에, 대응하는 앵글선택신호(SA)를 합성회로(4) 및 가상음상정위 처리회로(12)에 공급한다. 또한, 앵글선택신호(SA)와 앵글선택 지정신호(SA')는 실질적으로 같은 작용을 하는 것이며, 리모콘(5)에서 디코더(3), 합성회로(4) 및 가상음상정위 처리회로(12)에 대해서, 직접 앵글선택 지정신호(SA')를 공급하도록 하여도 좋은 것은 물론이다.

이것에 의해, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지 정신호(SA')가 디코더(3)에 공급되어서, 그 앵글·모드에 대응하는 카메라·앵글의 영상신호(SV)를 출력한다. 동시에, 앵글선택신호(SA)는 합성회로(4)에 공급되고, 디코더(3)에서 공급된 각 채널의 재생음향신호(C, L, R, SL, SR, SW)가 청취자(9)에 대해서 재생음상의 정위정보에 따른 각 음향신호가 되도록 각 채널의 재생음향신호(C, L, R, SL, SR, SW)의 합성비를 변경하여 각 채널의 합성 음향신호(C', L', R'. SL'. SR'. SW')를 출력한다.

또한, 가상음상정위 처리회로(12)는, 합성회로(4)에서 공급된 각 채널의 합성음향신호(C', L', R', SL', SR', SW')에 대해서 음상정위 처리를 행하고, 상술한 5.1채널의 가상 스피커에 의해 재생되는 것과 같은 현장감이 풍부한 서라운드 재생음장을 재생하는 가상 음향신호(VL, VR)를 출력한다.

이것에 의해, 스크린(6)은 영상신호(SV)에 의한 영상을 영출하는 동시에, 각 채널(L, R)의 스피커(7)는, 영상신호(SV)에 따라서 재생음상의 정위위치가 변경된 각 채널의 합성음향신호(C', L', R', SL', SR', SW')에 대해서, 또한, 음상정위 처리를 행한 음향신호(VL, VR)에 의한 재생음을 방출한다. 청취자(9)는 스크린(6)에 의한 영상에 대응하여, 재생음상의 정위위치가 변경된 스피커(7)에 의한 상술한 5.1채널의 가상 스피커에 의해 재생되는 것과 같은 현장감이 풍부한 서브라인 재생음장에 의한 재생음을 청취할 수 있다.

상술한 도 2에 나타낸 음상정위 처리장치(11)에서는, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드에 의해 각 재생음향신호의 합성비를 변경한 후에, 이 음상정위 처리장치(11)에 공급된 각 합성음향신호에 대해서 음상정위 처리만을 실시하였지만, 이것에 한정되지 않고, 이 합성회로(4)에 있어서의 합성처리 및 음상정위 처리장치(11)에 있어서의 음상 정위처리를 동시에 행하여도 좋다. 이 경우는, 앵글선택신호(SA)는 가상음상정위 처리회로(12)에 공급되고, 가상음상정위 처리회로(12)는 선택된 앵글·모드에 대응한 재생음상 정위감이 얻어지도록, 각 재생음향신호에 대해서 음상정위 처리를 실시한다. 즉, 앵글 선택신호(SA)에 의거해서 각 재생음향신호(C, L, R, SL, SR, SW)의 재생음상의 정위위치를 계산하여 구하고, 그 정위위치에서 청취자의 양 귀까지의 머리부 음향전달함수에 의거해서 음상정위 처리를 행한다. 이 경우에는, 디코더에서 공급된 각 재생음향신호의 재생음상위치의 계산을 행하는 블록과, 이 구해진 음상정위 위치에 의거해서 음상정위 처리를 행하는 블록으로 구성된다. 또한, 이 머리부 음향 전달함수는 청취자의 정면에서 소정의 각도 마다의 데이터를 미리 메모리 내에 격납하여 두고, 구해진 각도에 따라서 독출하도록 하면 좋다. 이들의 신호처리는 DSP(Digital Signal Processor)등에 의해 소프트웨어로 실현되는 경우에는, 불가분의 구성으로 된다.

도 3은 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 3의 음상정위 처리장치(21)가 도 1의 음상정위 처리장치(1)와 다른 점은, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드와 앵글·모드를 선택한 시간정보(타이밍정보)(ST)를 기록하는 기록매체(22)를 설치한 점이다. 다른 구성은 도 1과 동일하므로 그 설명을 생략한다. 도 3에 있어서, 도 1에 대응하는 부분에는 동일한 부호를 붙이고 있다.

이와 같이 구성된 다른 음상정위 처리장치의 동작을 이하에 설명한다.

DVD디스크(2)에서 도시하지 않은 광학픽업에 의해 독출된 재생신호를 디코더(3)가 디코드하여 영상신호(SV), 앵글선택신호(SA), 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 출력한다.

앵글선택신호(SA)에 의해 합성회로(4)는 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 합성하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

여기서, 디코더(3)에 대해서, 청취자(9)의 조작에 의해 리모콘(리모트 커맨더)(5)은, 앵글선택을 지정하는 앵글선택 지정신호(SA')를 공급한다.

이것에 의해, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')가 디코더(3)에 공급되어서, 그 앵글·모드에 대응하는 카메라·앵글의 영상신호(SV)를 출력한다. 동시에, 앵글선택신호(SA)는 합성회로(4)에 공급되어, 디코더(3)에서 공급된 각 채널의 재생음향신호(C, L, R, SL, SR, SW)가 , 청취자(9)에 대해서 재생음상의 정위정보에 따른 각 음향신호가 되도록 각 출력채널에의 재생음향신호(C, L, R, SL, SR, SW)의 합성비 혹은 채널할당을 변경하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

또한, 앵글선택 지정신호(SA')는 기록매체(22)에 공급되어, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드와 그 앵글·모드를 선택한 시간정보(ST)가 기록된다. 여기서, 시간정보(ST)는 DVD디스크(2)에 기록되는 타임코드를 디코더(2)에서 디코드할 때에 독출하여 그대로 이용한다.

이 때, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드에 의해 상대적으로 변경되는 청취자(9)로부터의 음상정위 지정정보에 의거해서, 이 합성회로(4)에 있어서 각 재생음향신호에 대한 음상정위 처리가 행해진다.

이것에 의해, 스크린(6)은 영상신호(SV)에 의한 화상을 영출하는 동시에, 각 채널(L, R)의 스피커(7)는, 영상신호(SV)에 따라서 재생음상의 정위위치가 변경된 각 채널의 합성음향신호(C', L', R'. SL'. SR', SW')에 의한 재생음을 방출한다. 청취자(9)는 스크린(6)에 의한 영상에 대응하여, 재생음상의 정위위치가 변경된 스피커(7, 8)에 의한 재생음을 청취할 수 있다.

여기서, 또한, 청취자(9)가 멀티·앵글에 대응한, 예를 들면 영화가 기록된 DVD디스크(2)를 감상하고 있는 경우에, 통상의 앵글·모드로 시청하고 있을 때에 어느 장면에서는 별도의 앵글·모드를 선택하고자 하는 것으로 하면, 그 장면의 바뀔 때를 독출하고, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드를 변경하고, 그 변경한 앵글선택 지정신호(SA')를 기록하도록 지시하면, 그 장면의 바뀔 때를 나타내는 시간정보(ST) 및 변경된 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드를 이 기록매체(22)에 기록한다.

이 DVD디스크(2)의 재생시에는, DVD디스크(2)에서 제공되는 시간정보(ST)와 이 기록매체(22)에 기록된 시간정보(ST)를 비교하고, 일치하면 이것에 대응하여 기록매체(22)에 기록되는 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드에 디코더(3) 및 합성회로(4)가 자동적으로 변경되도록 된다.

물론, 앵글·모드가 변경되면, 도 1에 나타낸 음상정위 처리장치(1)와 동일 하게 그 카메라·앵글에 따라서 각 재생음향신호가 합성회로(4)에 의해 합성비가 변경되어서 채널 할당이 실시되고, 각 채널에 대응하는 스피커(7, 8)에 합성음향신호가 공급된다.

이와 같이 하는 것으로, 청취자(9)는 스스로 구성하는 카메라·앵글의 장면 구성을 작성할 수 있고, 그것을 반복하여 감상할 수 있고, 그때 재생음성도 카메라·앵글에 따라, 마치 청취자(9)가 이동하여 도 6에 나타내는 스크린(6) 상에 영출되는 음원영상위치(61)에 마주 보는 듯한 음상정위위치(62)의 정위감을 얻을 수 있다.

또한, 기록매체(22)로의 기록은 몇 번이라도 가능한 것으로 하면, 그 앵글구성에 불만이 있었던 경우에 다시 고치는 것이 가능하다. 기록매체(22)로서는, 반도체 메모리에 한정되지 않고, 예를 들면 VTR(Viedo Tape Recorder)테이프나 CD-R(Compact Disc Recordable) 등을 이용하여도 좋고, 또한, 영상을 제공하는 DVD디스크(2)의 적어도 일부가 기록가능하게 되어 있는 경우에, 그 DVD디스크(2) 자신에 기록하도록 하여도 좋다.

기록매체(22)에는, 시간정보(ST)와 이것에 대응하는 앵글선택 지정신호(SA')가 앵글을 변경하고자 하는 횟수에 상당하는 수만큼 기록할 수 있으면 좋으므로, 기록매체(22)의 기록용량은 작은 것으로 좋고, 이 음상정위 처리장치에 구비되는 메모리의 일부를 사용하여도 좋다.

또, 기록매체(22)에는, DVD디스크(2)를 식별하는 코드 또는 타이틀 등의 문자열도 동일하게 기록하는 것이 바람직하고, 이렇게 함으로써, 복수의 타이틀의 DVD디스크에 대해서 1개의 기록매체 내에 기록할 수 있다. 더욱이는, 기록조작을 식별하는 코드도 기록하도록 하면, 1개의 DVD디스크에 대해서 복수의 앵글선택 패턴으로 기록할 수 있고, 소위 "테이크 1", "테이크 2"라는 시행착오나 즐기는 방법이 가능하다.

또한, 도 3에 나타낸 음상정위 처리장치(21)에서는, 합성회로(4)에서 각 스피커(7, 8)에 각 채널의 합성음향신호를 출력하도록 하였으나, 이것에 한정되지 않고, 도 2에 나타내는 바와 같이, 가상음상정위 처리회로(12)를 부가하여 각 채널의 재생음향신호보다도 적은 채널의 스피커에 의한 재생을 행하여도 좋다.

도 4는 다른 음상정위 처리장치의 구성을 나타내는 블록도이다.

도 4의 음상정위 처리장치(31)가 도 1의 음상정위 처리장치(1)와 다른 점은, DVD디스크(2)에 의해 음원위치정보가 제공되는 점과, 도 3에 나타낸 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드와 앵글·모드를 선택한 시간정보(ST)를 기록하는 기록매체(22)를 설치한 점이다. 다른 구성은 도 1과 동일하므로 그 설명을 생략한다. 도 4에 있어서, 도 1 또는 도 3에 대응하는 부분에는 동일한 부호를 붙이고 있다.

이와 같이 구성된 다른 음상정위 처리장치의 동작을 이하에 설명한다.

DVD디스크(2)에서 도시하지 않은 광학픽업에 의해 독출된 재생신호를 디코더(3)가 디코드하여 영상신호(SV), 음원위치정보(SP), 앵글선택신호(SA), 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 출력한다.

음원위치정보(SP) 및 앵글선택신호(SA)에 의해 합성회로(4)는 각 채널의 재생음향신호(C, L, R, SL, SR, SW)를 합성하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

여기서, DVD디스크(2)에 기록되는 각 음원은 음원위치정보(SP)를 가지고 있고, 디코더(3)에 의해 각 채널의 재생음향신호(C, L, R, SL, SR, SW)에 대한 음원위치정보(SP)가 추출된다. 또, 음원위치정보(SP)는, 전 음원 중 적어도 주요한 음원에만 설치되도록 하여도 좋다. 예를 들면, 재생음향신호(SW)를 재생하는 스피커는, 방의 어느 곳에 배치되어도 좋으므로, 이 신호에 대해서는 온 한 위치정보를 생략하여도 좋다. 또, 신호(SL, SR)로 재생되는 음이 서라운드 음인 경우에는, 암묵(暗默)적으로 청취자에게 비스듬한 후방에 배치되는 것으로 해석되고, 이 경우에는, 음원위치정보는 생략할 수 있다. 환언하면, 음원위치정보가 생략된 채널의 음원은 기정(旣定)의 위치정보를 적용되도록 하여도 좋다. 또, 음원위치정보(SP)는, 도 6에 나타내는 스크린(6) 상의 음원영상위치(61) 등의 기준위치로부터의 음상정위위치(62)에서 나타내는 상대 좌표값이나, 도 5에 나타내는 음상위치의 이동정보 등이 포함되어도 좋다.

이 경우, 각 음원에 설치되는 음원위치정보(SP)에 따라서, 도 6의 스크린(6) 상의 음원영상위치(61)가 청취자(9)의 위치에서 보아 좌(V1), 중앙(V2), 우(V3)에 대하여 음상정위위치(62)가 좌(S1), 중앙(S2), 우(S3)가 되도록 음상정위 위치가 변경된다. 또, 도 5의 청취자(9)의 위치에서 음상의 방사형으로 근접 또는 격리하는 이동방향(N1∼N6), 시계방향 또는 반시계방향에의 회전의 이동방향(R1∼R4), 좌우방향에의 이동방향(L1∼L5)으로 음상위치가 이동된다.

또, 디코더(3)에 대해서, 청취자(9)의 조작에 의해 리모콘(리모트 커맨더)(5)은, 앵글선택을 지정하는 앵글선택 지정신호(SA')를 공급한다.

이것에 의해, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')가 디코더(3)에 공급되어서, 그 앵글·모드에 대응하는 카메라·앵글의 영상신호(SV)를 출력한다. 동시에, 음원위치정보(SP) 및 앵글선택신호(SA)는 합성회로(4)에 공급되고, 디코더(3)에서 공급된 각 채널의 재생음향신호(C, L, R, SL, SR, SW)가 청취자(9)에 대해서 재생음상의 정위정보에 따른 각 음향신호가 되도록 각 채널의 재생음향신호(C, L, R, SL, SR, SW)의 합성비를 변경하여 각 채널의 합성음향신호(C', L', R', SL', SR', SW')를 출력한다.

이것에 의해, 합성회로(4)에 의해, 각 재생음향신호에 대응하는 음원위치정보(SP) 및 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')에 의해, 청취자(9)가 본 각 음원의 상대위치가 계산되고, 이 상대위치에 대응하는 재생음향신호를 재생하도록, 각 스피커(7, 8)에 합성음향신호가 출력된다. 청취자(9)는 스크린에 의한 영상의 음원위치에 대응하여, 재생음상의 정위위치가 지정되고, 또는 재생음상의 정위위치가 변경된 스피커(7, 8)에 의한 재생음을 청취할 수 있다.

또한, 상술한 도 3과 동일하게, 앵글선택 지정신호(SA')는 기록매체(22)에 공급되어서, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드와 앵글·모드를 선택한 시간정보(타이밍정보)(ST)가 기록된다. 여기서, 시간정보(ST)는 DVD디스크(2)에 기록되는 타임코드를 디코더(2)에서 디코드할 때에 독출하여 그대로 이용한다.

이 때, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드 및 음원위치정보(SP)에 의해 상대적으로 변경되는 청취자(9)로부터의 음상정위 지정정보에 의거해서, 이 합성회로(4)에 있어서 각 음향신호에 대한 음상정위 처리가 행해진다.

이것에 의해, 스크린(6)은 영상신호(SV)에 의한 화상을 영출하는 동시에, 각 채널(C, L, R, SL, SR, SW)의 스피커(7, 8)는, 영상신호(SV)에 따라서 재생음상의 정위위치가 변경된 각 채널의 합성음향신호(C', L', R', SL', SR', SW')에 의한 재생음을 방출한다. 청취자(9)는 스크린(6)에 의한 영상에 대응하여, 재생음상의 정위위치가 변경된 스피커(7, 8)에 의한 재생음을 청취할 수 있다.

여기서, 또한, 청취자(9)기 멀티·앵글에 대응한, 예를 들면 영화가 기록된 DVD디스크(2)를 감상하고 있는 경우에, 통상의 앵글·모드로 청취하고 있을 때 어느 장면에서는 다른 앵글·모드를 선택하고자 하면, 그 장면의 바뀔 때를 독출하고, 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드를 변경하고, 그 변경한 앵글선택 지정신호(SA')를 기록하도록 지시하면, 그 장면의 바뀔 때를 나타내는 시간정보(ST) 및 변경된 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드를 이 기록매체(22)에 기록한다.

이 DVD디스크(2)의 재생시에는, DVD디스크(2)에서 제공되는 시간정보(ST)와 이 기록매체(22)에 기록된 시간정보(ST)를 비교하고, 일치하면 이것에 대응하여 기록매체(22)에 기록되는 앵글선택 지정신호(SA')에 의해 선택된 앵글·모드 및 DVD디스크(2)에서 제공되는 음원위치정보(SP)에 근거하여 디코더(3) 및 합성회로(4)가 자동적으로 변경되게 된다.

물론, 앵글·모드가 변경되면, 도 1에 나타낸 음상정위 처리장치(1)와 동일하게 그 카메라·앵글에 따라서 음향신호가 합성회로(4)에 의해 합성비가 변경되어서 채널 할당이 실시되고, 각 채널에 대응하는 스피커(7, 8)에 재생음향신호를 공급한다.

이와 같이 하는 것에서, 청취자(9)는 스스로 구성하는 카메라·앵글의 장면의 구성을 만들 수 있고, 그 것을 반복해서 감상할 수 있고, 그 때 재생음성도 카메라·앵글에 따라서, 마치 청취자(9)가 이동하여 도 6에서 나타내는 스크린(6) 상에 영출되는 음원영상위치(1)에 마주 보는 것과 같은 음상정위위치(62)의 정위감을 얻을 수 있다.

또한, 기록매체(22)로의 기록은 몇 번이라도 가능한 것으로 하면, 그 앵글 구성에 불만이었던 경우에 다시 고치는 것이 가능하다. 기록매체(22)로서는, 반도체 메모리에 한정되지 않고, 예를 들면 VTR테이프나 CD-R 등을 이용하여도 좋고, 또한, 영상을 제공하는 DVD디스크(2)의 적어도 일부가 기록 가능하게 되는 경우에, 그 DVD디스크(2) 자신에 기록하도록 하여도 좋다.

또, 도 3에 나타낸 음원정위 처리장치에 있어서의 기록매체(22)와 동일하게, 기록하는 정보량은 작으므로, 음상정위 처리장치에 구비되는 메모리의 일부를 사용하여도 좋다. 또한, 상술한 예와 동일하게, 기록매체(22)에 디스크 ID코드나 기록조작 ID코드를 기록하도록 하여도 좋다.

또한, 도 4에 나타낸 음상정위 처리장치(31)에서는, 합성회로(4)에서 각 스피커(7, 8)에 각 채널의 재생음향신호를 출력하도록 하였으나, 이것에 한정되지 않고, 도 2에 나타낸 바와 같이, 가상음상정위 처리회로(12)를 부가하여 각 채널의 각 재생음향신호보다도 적은 채널의 스피커에 의한 재생을 행하여도 좋다.

또한, 상술한 본 실시형태의 도 1∼도 4에 나타낸 음상정위 처리장치에서는, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')를 디코더(3)를 통하여 합성회로(4) 또는 가상음상정위 처리회로(12)에 공급하는 예를 나타내었으나, 이것에 한정되지 않고, 직접적으로, 합성회로(4) 또는 가상음상정위 처리회로(12)에 공급하도록 하여도 좋다. 예를 들면, 별체인 DVD플레이어 혹은 AV수신기에 디코더(3)가 내장되어 있는 경우에는, 본 실시형태의 음상정위 처리장치는 청취자(9)의 조작에 의해 선택된 앵글선택 지정신호(SA')를 합성회로(4) 또는 가상음상정위 처리회로(12)에 공급하도록 하여도 좋다. 이 경우라도, 선택된 앵글·모드에 대응하는 영상신호를 선택하기 위해 DVD플레이어 혹은 AV수신기에 내장되는 디코더(3)에, 이 앵글선택 지정신호(SA')가 공급되도록 한다. 어느 것이나, 청취자(9)에 의해 선택된 앵글·모드에 의해 변경되는 영상신호(SV) 및 재생음향신호를 생성하는 수단에 대해서 앵글선택 지정신호(SA')가 공급되는 구성이라면 좋다.

또, 앵글선택 지정신호(SA')는 리모콘(5)에 의해 공급되는 예를 나타내었지만, 이것에 한정되지 않고, 음상정위 처리장치에 구비되는 조작키 등의 입력수단에 의해 발생되어, 공급하도록 하여도 좋은 것은 물론이다.

이하에, 다른 적용 예를 설명한다.

위치정보를 가지는 음원을 공급하는 기록매체로서는, 다른 악곡데이터를 공 급하는 MIDI(Musical Instrument Digital Interface)음원, 비디오·게임 등이 있고, 상술한 DVD 비디오 디스크에 한정되지 않고, 이들에도 적용할 수 있다.

MIDI음원에서는, 제어변경정보 중 확장코드의 팬을 나타내는 제어번호(#10)가 스테레오 출력시의 음상의 정위를 지정한다. 이 제어번호(#10)의 값은 0이 좌, 64가 중앙, 127이 우가 되며, 좌우의 사이에서 자유로이 음상의 정위를 지정할 수 있다. 즉, 이 정보를 수반하여 악곡데이터가 공급되고, 이 값을 변경하는 것으로 음원정위위치를 변경할 수 있다.

본 실시형태에 적용한 경우, 이 MIDI데이터를 재생할 때에, 상술한 합성회로(4)에 의해, 청취자의 기호나 청취자의 청취위치에 의해 이 값을 변경하고, 변경된 음원 정위위치에 의해 음원의 재생음이 재생되도록 합성처리한다.

물론, 상술한 본 실시형태와 같이, 이 변경정보를 기록매체에 기록하고, 다음회 재생시에 재로드하여 이용하도록 하여도 좋다.

또, 이 변경정보를 기록한 기록매체를 MIDI음원의 기록매체와는 별도로 배포하도록 하여도 좋다.

통상의 MIDI음원에서는, 청취자(9)의 전방 좌우에 배치된 스피커에서 재생되지만, 상술한 합성회로(4)에 의해, 이 정보를 확장코드에 의해 확장하여 청취자의 주위 360°에 걸쳐서 음상이 정위할 수 있도록 합성처리하도록 하여도 좋다.

이 경우, 예를 들면, 청취자(9)에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')를 이용해서 상술한 합성회로(4)에 의해, 제어번호(#10)의 값은 64가 중앙(C)채널, 값 48이 좌(L)채널, 값 76이 우(R)채널, 값 21이 좌후방(SL)채널, 값 107이 우후방(SR)채널 등과 같이 재정의하도록 하여도 좋고, 혹은 이 위치정보인 제어번호(#10)의 각 값과 대응한 음원 정위위치의 각 채널로 변환하는 테이블을, 상술한 합성회로(4), 가상음상정위 처리회로(12) 또는 도시하지 않은 마이크로 컴퓨터로 구성되는 시스템·제어기에 설치되도록 구성하여 이들의 변환처리를 행하도록 하여도 좋다.

또, 비디오·게임기의 경우는, 재생신호에, 그 장면에 등장하는 캐릭터에 대하여 상술한 도 6에 나타내는 음원영상위치(61)를 나타내는 정보와 음상정위위치(62)를 나타내는 정보가 포함된다. 이 정위정보는, 플레이어의 게임·컨트롤러 등의 포인팅 디바이스에 의해 주요한 캐릭터의 위치를 변경하도록 주어진 지시에 따라 변경된다. 이 변경된 위치정보와, 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')에 근거하여, 캐릭터의 음상정위 위치가 결정되고, 상술한 합성회로(4)나 가상음상정위 처리회로(12)에 의해, 스크린(6) 상의 캐릭터의 위치나 움직임에 맞추어 적절한 음원영상위치(61)로 나타내는 정위위치에 의해 음상정위위치(62)로 나타내는 재생음이 재생된다. 상술한 비디오·게임기는, 인터넷을 통하여 인터랙티브(interactive)로 조작을 행하는 게임 소프트웨어에도 적용할 수 있는 것은 말할 것도 없다. 또, 이들 처리를 프로그램으로서 기술한 게임소프트로서 배포할 수도 있다.

또한, 본 실시형태를 TV회의 시스템에도 적용할 수 있다. 특히, 타지점의 쌍방향회의를 나타내는 멀티포인트에 있어서의 TV회의 시스템에 있어서, 도 6에 나타낸 스크린(6) 상의 화면의 임의의 음원영상위치(61)에 대화상대의 얼굴을 표시시 킨 경우, 상술한 합성회로(4)에 의해, 대화상대에 의해 선택된 앵글·모드를 나타내는 앵글선택 지정신호(SA')를 이용해서 변경정보를 더하고, 각각의 대화자의 도 6에 나타낸 음상정위위치(62)가 각각의 얼굴의 음원영상위치(61)에 대응하는 위치에 정위할 수 있도록 함으로써, 위화감 없이 회의에 집중할 수 있다.

상술한 본 실시형태의 음상정위 처리장치에 의하면, 청취자가 선택한 앵글·모드(뷰·모드)에 따라, 각 음상정위위치도 적절히 설정되어 재생음이 재생되므로, 재생된 음원영상위치와 적합한 보다 현장감 넘치는 음향재생을 할 수 있다. 또, 청취자가 시청하고 싶은 출연자나 음원을 주체로 하여 재생을 할 수 있고, 이용의 폭을 넓힐 수 있다.

또한, 재설정된 각 음원에 대한 새로운 음원위치정보에 따라서 음상정위 처리를 행하므로, 의도된 음상정위위치에 각 음원이 정위되고, 보다 재생화상의 위화감을 도모할 수 있다.

또, 변경한 앵글·모드와, 그것을 변경한 시간정보를 재생화상의 시간정보와 대응시켜 기록매체에 기록하고, 다음번의 재생시에 이 변경한 정보에 근거하여 재생신호를 재생할 수 있으므로, 자신의 기호에 따른 재생패턴을 만들 수 있다. 물론, 이것은 몇 번이라도 새로 만들 수 있으므로, 기록매체를 교환 가능하게 하면, 복수의 재생패턴을 만들 수 있다.

또한, 음원의 위치정보도 추출할 수 있는 음원 공급원이 되는 기록매체의 경우에는, 음원 위치정보도 포함하여 희망하는 앵글·모드에 있어서의 각 음원의 정위정보를 재구성함으로써, 재생화상과 가장 적합한 음향재생을 행할 수 있다.

또한, 상술한 적용예에 한정되지 않고, 재생음성의 위치정보를 변경할 수 있는 다른 전자기기에 적용할 수 있다.

본 발명은, DVD디스크의 멀티·앵글기능에 대응시켜 각 채널의 재생음향신호를 합성하고, 청취자가 재생화면의 앵글에 적합한 음상 정위감을 얻을 수 있는 음상정위 처리장치에 적용할 수 있다.

Claims (22)

1. 음원신호에 대해 미리 정해진 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여, 변경을 가하여 새로운 음상정위 정보를 제공하는 정위정보 변경수단과,

   상기 음원신호에 대하여, 상기 정위정보 변경수단에 의해 제공되는 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 음상정위 처리수단과,

   상기 정위정보 변경수단에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고, 또한, 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 기록조작을 식별하는 정보를 기록하는 기록수단을 갖추어 구성되고,

   상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
2. 제 1항에 있어서,

   상기 정위정보 변경수단은, 상기 미리 정해진 재생음상 정위위치 또는 방향으로 정위된 음원에 대하여 청취자가 향하는 앵글을 변경함으로써, 청취자로부터 본 상기 음원의 재생음상 정위위치 또는 방향을 변경하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
3. 제 1항에 있어서,

   상기 음상정위 처리수단은, 상기 음원신호의 적어도 2 이상의 출력채널로의 합성비율 또는 채널할당을 변경하는 합성회로로 구성된 것을 특징으로 하는 음상정위 처리장치.
4. 제 1항에 있어서,

   상기 음상정위 처리수단은, 상기 정위정보 변경수단에 의해 제공되는 상기 음원의 재생음상 정위위치에서 청취자의 양 귀까지의 머리부 음향전달함수에 근거하여 음상정위 처리를 실시하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
5. 제 1항에 있어서,

   상기 음상정위 처리수단은,

   상기 음원신호의, 적어도 2 이상의 출력 채널로의 합성비율 또는 채널할당을 변경하는 합성수단과,

   상기 합성수단에 의해 새롭게 정해진 재생음상 정위위치에서 청취자의 양 귀까지의 머리부 음향전달함수에 근거하여 음상정위 처리를 실시하는 신호처리수단을 갖추어 구성된 것을 특징으로 하는 음상정위 처리장치.
6. 삭제
7. 음원신호에 대해 미리 정해진 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여, 변경을 가하여 새로운 음상정위 정보를 제공하는 정위정보 변경수단과,

   상기 음원신호에 대하여, 상기 정위정보 변경수단에 의해 제공되는 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 음상정위 처리수단과,

   상기 정위정보 변경수단에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고, 또한, 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 또한, 음원을 식별하기 위한 음원식별정보와 기록조작을 식별하는 정보를 기록하는 기록수단을 갖추어 구성되고,

   상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
8. 삭제
9. 음원신호에 동반하여 공급되고, 이 음원신호의 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여 변경을 가하여 새로운 음상정위 정보를 제공하는 정위정보 변경수단과,

   상기 음원신호에 대하여, 상기 정위정보 변경수단에 의해 제공되는 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 음상정위 처리수단과,

   상기 정위정보 변경수단에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고, 또한, 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 기록조작을 식별하는 정보를 기록하는 기록수단을 갖추어 구성되고,

   상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
10. 제 9항에 있어서,

    상기 정위정보 변경수단은, 상기 미리 정해진 재생음상 정위위치 또는 방향으로 정위된 음원에 대하여 청취자가 향하는 앵글을 변경함으로써, 청취자로부터 본 상기 음원의 재생음상 정위위치 또는 방향을 변경하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
11. 제 9항에 있어서,

    상기 음상정위 처리수단은, 상기 음원신호의 적어도 2 이상의 출력채널로의 합성비율 또는 채널할당을 변경하는 합성회로로 구성된 것을 특징으로 하는 음상정위 처리장치.
12. 제 9항에 있어서,

    상기 음상정위 처리수단은, 상기 정위정보 변경수단에 의해 제공되는 상기 음원의 재생음상 정위위치에서 청취자의 양 귀까지의 머리부 음향전달함수에 근거하여 음상정위 처리를 실시하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
13. 제 9항에 있어서,

    상기 음상정위 처리수단은,

    상기 음원신호의, 적어도 2 이상의 출력채널로의 합성비율 또는 채널할당을 변경하는 합성수단과,

    상기 합성수단에 의해 새롭게 정해진 재생음상 정위위치에서 청취자의 양 귀까지의 머리부 음향전달함수에 근거하여 음상정위 처리를 실시하는 처리수단을 갖추어 구성된 것을 특징으로 하는 음상정위 처리장치.
14. 삭제
15. 음원신호에 동반하여 공급되고, 이 음원신호의 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여 변경을 가하여 새로운 음상정위 정보를 제공하는 정위정보 변경수단과,

    상기 음원신호에 대하여, 상기 정위정보 변경수단에 의해 제공되는 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 음상정위 처리수단과,

    상기 정위정보 변경수단에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고, 또한, 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 음원을 식별하기 위한 음원식별정보와 기록조작을 식별하는 정보를 기록하는 기록수단을 갖추어 구성되고,

    상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
16. 삭제
17. 복수의 영상신호 중 1개를 선택하여 재생영상출력을 얻는 영상선택수단과,

    상기 영상신호에 관련되어 공급되는 음원신호에 대해 미리 정해진 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여 변경을 가하여 새로운 음상정위 정보를 제공하는 정위정보 변경수단과,

    상기 영상선택수단에 있어서의 영상신호의 선택 및 상기 정위정보 변경수단에 있어서의 음상정위 정보의 변경을 제어하는 제어수단과,

    상기 음원신호에 대하여, 상기 정위정보 변경수단에 의해 제공되는 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 음상정위 처리수단과,

    상기 정위정보 변경수단에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고, 또한, 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 기록조작을 식별하는 정보를 기록하는 기록수단을 갖추어 구성되고,

    상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하도록 구성된 것을 특징으로 하는 음상정위 처리장치.
18. 음원신호에 대해 미리 정해진 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여 변경을 가하여 새로운 음상정위 정보를 제공하는 단계와,

    상기 음원신호에 대하여, 상기 제공된 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 단계와,

    상기 변경처리를 실시하는 단계에서 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록수단에 기록하는 단계와,

    상기 기록수단에 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 또한, 음원을 식별하기 위한 음원식별정보와 기록조작을 식별하는 정보를 기록하는 단계와,

    상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하는 단계를 포함하여 구성된 것을 특징으로 하는 음상정위 처리방법.
19. 제 18항에 있어서,

    상기 음상정위 정보를 변경하는 단계는, 상기 미리 정해진 재생음상 정위위치 또는 방향에 정위된 음원에 대하여 청취자가 향하는 앵글을 변경함으로써, 청취자가 본 상기 음원의 재생음상 정위위치 또는 방향을 변경하도록 구성된 것을 특징으로 하는 음상정위 처리방법.
20. 음원신호에 동반하여 공급되고, 이 음원신호의 재생음상 정위위치 또는 방향을 나타내는 음상정위 정보에 대하여 변경을 가하여 새로운 음상정위 정보를 제공하는 단계와,

    상기 음원신호에 대하여, 상기 제공된 음상정위 정보에 근거하여, 재생음상 정위위치 또는 방향을 변경시키는 처리를 실시하는 단계와,

    상기 변경처리를 실시하는 단계에 의해 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록수단에 기록하는 단계와,

    상기 기록수단에 상기 음상정위 정보 및 상기 재생시간 정보와 함께, 또한, 음원을 식별하기 위한 음원식별정보와 기록조작을 식별하는 정보를 기록하는 단계와,

    상기 기록수단에 기록된 상기 정보들에 근거하여 상기 음원신호의 처리 및 재생을 행하는 단계를 포함하여 구성된 것을 특징으로 하는 음상정위 처리방법.
21. 제 20항에 있어서,

    상기 음상정위 정보를 변경하는 단계는, 상기 미리 정해진 재생음상 정위위치 또는 방향으로 정위된 음원에 대하여 청취자가 향하는 앵글을 변경함으로써, 청취자로부터 본 상기 음원의 재생음상 정위위치 또는 방향을 변경하도록 구성된 것을 특징으로 하는 음상정위 처리방법.
22. 음원신호의 미리 정해진 재생음상 정위위치에 대하여 변경된 음상정위 정보와, 이 음상정위 정보가 변경된 재생시간 정보를 대응시켜 기록하고,

    상기 음상정위 정보 및 상기 재생시간 정보와 함께, 또한, 음원을 식별하기 위한 음원식별정보와 기록조작을 식별하는 정보가 기록된 것을 특징으로 하는 기록매체.

Images