KR20000076471A

KR20000076471A - 영상 신호로부터 움직임 제어 신호를 발생하기 위한 장치

Info

Publication number: KR20000076471A
Application number: KR1020000001964A
Authority: KR
Inventors: 콘도테쯔지로; 오쿠무라유지; 코쿠보테쯔시; 테시가와라사토시
Original assignee: 이데이 노부유끼; 소니 가부시끼 가이샤
Priority date: 1999-01-22
Filing date: 2000-01-17
Publication date: 2000-12-26
Also published as: US20030095601A1; CN1182485C; US20050157795A1; JP2000214755A; KR100749681B1; EP1026633A2; CN1262494A; EP1026633A3; US7031384B2; JP4672094B2; TW594610B; US7382830B2

Abstract

본 발명은 영상에 합친 움직임(motion)을 관객용 의자에 가할 때의 제어 신호를 용이하게 생성할 수 있도록 한다.

화상 처리 장치에 입력된 영상 신호는, 특징 정보 검출부에 의해 움직임 벡터가 검출되며, 그 움직임 벡터를 사용하여, 수평 성분, 수직 성분, 확대 성분 및 회전 성분을 구한다. 구해진 이들 성분으로부터, 특징 정보 처리부는 구동부에 공급하는 제어 신호를 생성한다.

Description

영상 신호로부터 움직임 제어 신호를 발생하기 위한 장치{Apparatus for generating a motion control signal from an image signal}

본 발명은 정보 처리에 관한 것이다.

관객이 영상을 감상하고 있을 때, 그 영상과 합쳐서, 관객이 앉아 있는 의자를 움직이게 함으로써, 현장감을 높이도록 한 장치가 있다. 이러한 장치에 대해 공급되는 의자를 움직이게 하기 위한 움직임 신호는 영상이 촬상되었을 때에, 동시에 각도 등을 검출하는 센서에 의해 얻어진 데이터로 생성되거나, 촬상된 영상을 사람이 관찰하여, 그 사람이 움직임을 예측하여 수작업에 의해 생성하고 있다.

상술한 장치에 있어서, 센서에 의해 의자의 움직임 신호를 생성할 경우, 움직임 신호를 생성하기 위한 데이터를 영상을 촬상할 때 동시에 기록해 둘 필요가 있기 때문에, 이미 촬상된 영상을 사용하여, 움직임 신호를 생성하지 못했었다.

또, 촬상된 영상을 사람이 관찰하여 움직임 신호를 생성할 경우, 수작업이 필요해져, 처리에 오랜 시간이 걸린다는 과제가 있었다.

본 발명은 이러한 상황에 비추어져 이루어진 것으로, 입력된 영상으로부터 움직임 신호를 생성하는 정보 처리 장치를 제공하는 것을 목적으로 한다.

도 1은 본 발명을 적용한 화상 처리 장치의 한 실시예의 구성을 도시하는 불록도.

도 2는 도 1의 특징 정보 검출부(11)의 구성을 도시하는 불록도.

도 3은 도 2의 메모리(24)에 기억되어 있는 패턴을 도시하는 도면.

도 4는 처리되는 화상을 도시하는 도면.

도 5는 산출되는 벡터를 설명하는 도면.

도 6은 도 1의 특징 정보 처리부(12)의 구성을 도시하는 불록도.

도 7은 구동부(3)의 측면도.

도 8은 구동부(3)의 상면도.

※도면의 주요한 부분에 대한 부호의 설명※

2: 화상 처리 장치, 11: 특징 정보 검출부

12: 특징 정보 처리부, 21: 지연부

22: 프레임 버퍼, 23: 판독부

24: 메모리, 25: 움직임 벡터 검출부

26: 특징 정보 연산부, 31: 가산기

32: 부호 반전기, 33: 지연기

34: HPF, 35: LPF

도 1은 본 발명을 적용한 화상 처리 장치의 한 실시예의 구성을 도시하는 불록도이다. 도시되어 있지 않은 비디오 테이프 레코더 등으로부터 공급되는 영상 신호는 표시부(1)와 화상 처리 장치(2)에 공급된다. 화상 처리 장치(2)는 구동부(3)를 구동시키기 위한 움직임 신호를 생성한다.

화상 처리 장치(2)는 특징 정보 검출부(11)와 특징 정보 처리부(12)로 구성되어 있다. 화상 처리 장치(2)에 입력된 신호는 특징 정보 검출부(11)에 입력되고, 후술하는 특징 정보가 검출되며, 특징 정보 처리부(12)에 출력된다. 특징 정보 처리부(12)는 입력된 특징 정보로부터, 구동부(3)에 공급하는 움직임 신호를 산출한다. 구동부(3)는 입력된 움직임 신호에 근거하여, 영상을 관찰하는 관찰자가 앉는 의자를 구동(움직임)한다. 이 점에 있어서는 나중에 후술한다.

도 2는 특징 정보 검출부(11)의 구성을 도시하는 불록도이다. 특징 정보 검출부(11)에 입력된 영상 신호는 지연부(21)에 의해 1프레임분 지연된 후 프레임 버퍼(22-1)에 공급됨과 동시에, 프레임 버퍼(22-2)에도 공급된다. 판독부(23-1), (23-2)은 메모리(24)에 기억되어 있는 소정의 패턴에 따라서, 각각 대응하는 프레임 버퍼(22-1), (22-2)로부터, 영상 신호를 판독하여, 움직임 벡터 검출부(25)에 출력한다.

움직임 벡터 검출부(25)는 공급된 영상 신호로부터 움직임 벡터를 검출하여, 특징 정보 연산부(26)에 출력한다. 특징 정보 연산부(26)는 입력된 움직임 벡터로부터 특징 정보를 연산한다.

다음으로, 도 2에 도시한 특징 정보 검출부(11)의 움직임에 대해서 설명한다. 시각(t)에 있어서, 특징 정보 검출부(11)에 입력된 영상 신호는 지연부(21)와 프레임 버퍼(22-2)에 공급된다. 프레임 버퍼(22-2)는 입력된 1프레임의 영상 신호를 기억한다. 지연부(21)는 영상 신호를 1프레임분만큼 지연하기 때문에, 시각(t)에 있어서, 프레임 버퍼(22-1)에는, 시각(t)보다 이전 시각(t-1)에 있어서의 영상 신호, 즉 시각(t)보다 1프레임 이전의 영상 신호가 기억되어 있다. 프레임 메모리(22-1)에 기억된 시각(t-1)에 있어서의 영상 신호는 판독부(23-1)에 의해, 프레임 메모리(22-2)에 기억된 시각(t)에 있어서의 영상 신호는 판독부(23-2)에 의해, 각각 판독된다.

판독부(23-1), (23-2)는 각각 대응하는 프레임 버퍼(22-1), (22-2)에 기억되어 있는 영상 신호 중, 메모리(24)에 기억되어 있는 패턴에 대응하는 부분의 영상 신호를 판독한다. 여기서, 메모리(24)에 기억되어 있는 패턴에 대해서, 도 3을 참조하여 설명한다.

도 3은 메모리(24)에 기억되어 있는 패턴의 일례를 도시하는 도면이다. 1프레임을 구성하는 화소 중에서, 움직임에 관계없는 부분, 예를 들면, 도 4에 도시한 바와 같은 자동차에 설치된 비디오 카메라에 의해 촬상된 영상 신호의 경우, 자동차의 본넷 부분 등은 움직임에 관계없는 영역이라 생각할 수 있기 때문에, 그 영역을 제거한 영역 중심에 위치하는 화소를 수속점(P)으로 한다. 수속점(P)을 중심으로 하여 상하 좌우에 위치한 대칭인 대표점(Q), 예를 들면, 25개(수속점을 포함한다)를 설정한다. 각 대표점(Q)마다 그 대표점(Q)이 중심에 위치하는 소정의 화소수로 이루어지는 참조 불록(B), 예를 들면, 33×33화소로 이루어지는 참조 불록(B)을 설정한다. 메모리(24)에는, 이러한 프레임의 화면 내에 있어서의 각 대표점(Q)의 좌표와, 참조 불록(B)의 크기와, 도시하고 있지 않지만 예를 들면 65×65화소로 이루어지는 탐색 불록의 크기가 패턴으로서 기억되어 있다.

판독부(23-1)는 프레임 버퍼(22-1)에 기억되어 있는 시각(t)에 있어서의 영상 신호 중, 메모리(24)에 기억되어 있는 상술한 패턴에 대응하는 화소 데이터, 즉, 대표점(Q)의 좌표와 참조 불록(B)의 크기를 바탕으로, 각 참조 불록(B) 내의 화소 데이터를 판독하여, 움직임 벡터 검출부(25)에 참조 불록의 데이터로서 출력한다. 마찬가지로, 판독부(23-2)는 프레임 버퍼(22-2)에 기억되어 있는 시각(t)에 있어서의 영상 신호 중, 메모리(24)에 기억되어 있는 패턴에 대응하는 화소 데이터를 판독하여, 움직임 벡터 검출부(25)에 탐색 불록의 데이터로서 출력한다.

움직임 벡터 검출부(25)는 입력된 참조 불록의 데이터와 탐색 불록의 데이터를 사용하여, 불록 매칭을 행함으로서, 각 대표점(Q)에 있어서의 움직임 벡터를 검출한다. 따라서, 이 예의 경우, 25개의 움직임 벡터가 검출된다.

또한, 본 실시예에서는, 움직임 신호를 생성하는 것을 목적으로 하고 있기 때문에 움직임 벡터를 모든 화소에 대해 검출할 필요가 없기 때문에, 25개의 움직임 벡터만을 구하도록 하고 있다. 이로써, 회로 규모의 삭감이나 처리 속도를 올릴 수 있다.

특징 정보 연산부(26)는 움직임 벡터 검출부(25)에 의해 검출된 25개의 움직임 벡터를 사용하여, 그 시각(t) 프레임 전체로서의 움직임의 수평 성분(u), 수직 성분(v), 확대 성분(v_zoom) 및 회전 성분(v_rot)의 합계(4) 성분을, 이하에 나타내는 식에 근거하여 산출한다.

수평 성분 u=(1/n)Σu_i··· (1)

수직 성분 v=(1/n)Σv_i··· (2)

확대 성분 v_zoom=(1/n)Σv_zoomi/d_i··· (3)

회전 성분 v_rot=(1/n)Σv_roti/d_i··· (4)

또한, 첨자인 i는 대표점(Q_i)에 붙여진 번호를 나타내며, 이 예에서는 1 내지 25까지 변화한다. 또, n은 대표점의 개수이기 때문에, 이 예에서는 25이다. 식 (1) 내지 식 (4)에 의해 구해지는 값은 25개의 움직임 벡터로부터 얻어지는 각 성분(u), (v), (v_zoom), (v_rot)의 평균치이다.

상술한 각 성분(u), (v), (v_zoom), (v_rot)의 관계를 도 5를 참조하여 설명한다. 처리 대상이 되어 있는 대표점(Q_i)의 움직임 벡터(T)의 수평 방향의 성분을 u_i라 하고, 수직 방향의 성분을 v_i라 한다. d_i는 수속점(P)에서 대표점(Q_i)까지의 거리를 나타내는 스칼라량이다. 또, (Px, Py)는 수속점(P)의 좌표를 나타내며, 이 좌표치를 기준으로 하여 좌표(Q_ix, Q_iy)의 대표점(Q_i)까지의 거리가 산출된다.

이 움직임 벡터(T) 성분(u_i, v_i)은 대표점(Q_i)을 원점으로 했을 때의 성분이다. 움직임 벡터(T)의 수속점(P)과 대표점(Q_i)을 연결하는 직선과 평행한 방향의 성분(v_zoomi)으로 하고, 수속점(P)과 대표점(Q_i)을 연결하는 직선과 직교하는 방향의 성분을 v_roti라 한다. 또, 수속점(P)과 대표점(Q_i)을 연결하는 직선과 움직임 벡터(T)가 이루는 각도를 θ라 한다. 이 때, v_zoomi와 v_roti는 다음 식에 따라서 구해진다.

v_zoomi=(u_i ²+v_i ²)^(1/2)COSθ ··· (5)

v_roti=(u_i ²+v_i ²)^(1/2)SINθ ··· (6)

또한, 여기서는, 각 성분을 구하는 데 25개의 움직임 벡터의 값을 평균적으로 사용하고 있지만, 화면상에 있어서의 위치 관계 등에 근거하여, 각 성분에 가중을 해도 된다.

특징 정보 연산부(26)는 움직임 벡터 검출부(25)로부터 출력된 움직임 벡터로부터, 식 (1) 내지 식 (4)을 사용하여, 특징 정보로서 4성분의 데이터(u), (v), (v_zoom), (v_rot)를 산출한다. 산출된 4성분의 데이터(u), (v), (v_zoom), (v_rot)는 특징 정보 처리부(12)(도 1)에 출력된다.

여기서, 예를 들면, 관객에 대해 자동차에 놓여 있는 느낌을 유사 체험시킬 경우, 어떠한 힘(움직임)을 관객이 앉아 있는 의자에 대해 가하면 될지를 생각한다. 자동차의 의자에 가해지는 힘에는, 자동차가 언덕 등의 경사가 있는 길을 달리고 있을 때의 노면의 전후 방향의 기울기를 표현하기 위한 힘, 울퉁불퉁한 길 위를 달리고 있을 때의 노면으로부터 받는 상하 방향의 진동을 표현하기 위한 힘, 경사진 노면을 달리고 있을 때의 노면의 좌우 방향의 기울기를 표현하기 위한 힘 등이 있다.

이들 힘은 영상을 촬상한 비디오 카메라가 탑재된 자동차에 대해 주어진 자극 중, 영상을 관찰하는 관객의 의자에 대해서도 물리적 의미가 동일한 형태로 자극을 줄 수 있는 힘으로, 여기서는 실자극이라 부른다. 이 실자극은 그 값을 적분해 가면 값이 제로가 되는 것이다.

이에 대해, 자동차 커브를 돌 때의 원심력을 표현하는 힘, 가속이나 감속일 때의 관성력을 표현하는 힘, 커브 시의 자동차 앞부분 흔들림을 표현하는 힘은 적분해 가도 값이 제로가 되지 않는 것이며, 의자의 이동 거리의 제한, 이동 방향의 제한 등으로부터, 자동차에 대해 주어진 자극과 물리적 의미가 동일한 형태로 주는 곤란한 자극으로, 여기서는, 대체 자극이라 부른다.

이하에, 상술한 실자극과 대체 자극에 관한 힘, 실제로 관객용 의자에 대해 가하는 움직임 신호의 성분 및 상술한 특징 정보 연산부(26)에 의해 연산된 4성분의 관계를 나타낸다.

이하에 나타내는 실자극 중, 노면 전후의 경사에 대한 움직임 신호는 움직임 신호 성분 pitch의 1기가 되며, 움직임 벡터의 수직 방향의 성분 중의 저주파기분으로 나타낼 수 있다. 여기서, 노면 경사는 느린 주기로 변한다고 생각할 수 있기 때문에 저주파 성분을 사용하고 있다.

노면으로부터 받는 진동은 수직 방향으로 주어진다고 생각할 수 있고, 또, 고주파라고 생각할 수 있기 때문에, 노면으로부터 받는 진동에 대한 움직임 신호는 움직임 벡터의 수직 방향의 성분 중의 고주파 성분을 사용하고 있다. 이 값은 움직임 신호 성분(z)이 된다.

노면의 좌우 기울기에 대한 움직임 신호는 움직임 신호 성분(roll)의 1기가 되며, 도 5로부터 분명한 바와 같이 회전 성분(Vroti)을 25개의 움직임 벡터분 가산한 값으로 나타낼 수 있다.

커브 시의 원심력에 대한 움직임 신호는 움직임 신호 성분(roll)의 1기가 되어 수평 성분(u)으로 나타난다.

가감속에 의한 관성력에 대한 움직임 신호는 움직임 신호 성분 pitch의 1기가 되며, 확대 성분(V_zoom)의 미분치의 저주파 성분으로 나타난다. 또한, 정수를 성분으로 하고 있는 것은, 가감속에 대해서는 민감한 움직임은 불필요하다고 생각할 수 있기 때문이다.

커브 시의 자동차의 앞부분 흔들림에 대한 움직임 신호는 움직임 신호 성분(yaw)이 되어 수평 성분(u)으로 나타난다. 또한, -u로 하고 있는 것은 커브 시의 원심력과 반대로 움직이기 때문이다.

실자극

표현되는 성분 움직임 신호 성분 4성분과의 관계

노면 전후의 기울기 pitch Σv의 저주파 성분

노면으로부터 받는 진동 z -Σv의 고주파 성분

노면의 좌우 기울기 roll -Σv_rot

대체 자극

표현되는 성분 움직임 신호 성분 4성분과의 관계

커브 시의 원심력 roll u

가감속에 의한 관성력 pitch dv_zoom/dt의 저주파 성분

커브 시의 자동차 앞부분 흔들림 yaw -u

특징 정보 처리부(12)는 상술한 관계를 사용하여, 구동부(3)(도 1)에 공급하는 움직임 신호를 생성한다. 도 6은 특징 정보 처리부(12)의 구성을 도시하는 불록도이다. 특징 정보 검출부(11)로부터 출력된 4성분 중, 회전 성분(v_rot)은 가산기(31-1)에, 수평 성분(u)은 가산기(31-2)와 부호 반전기(32-1)에, 수직 성분(v)은 가산기(31-3)에, 확대 성분(v_zoom)은 가산기(31-15)와 지연기(33-3)에 각각 입력된다. 가산기(31-1)에는 가산기(31-1)로부터 출력된 데이터가 지연기(33-1)에서 1클럭분 지연된 후, 피드백되어 입력된다. 마찬가지로, 가산기(31-3)에도 가산기(31-3)로부터 출력된 데이터가 지연기(33-2)에서 1클럭분 지연된 후, 피드백되어 입력된다.

지연기(33-1)로부터 출력된 데이터는 가산기(31-2)에 입력되어, 지연기(33-2)로부터 출력된 데이터는 부호 반전기(32-2)를 개재시켜 HPF(High Pass Filter)(34)에 출력됨과 동시에, LPF(Lowi Pass Filter)(35-1)를 개재시켜 가산기(31-4)에도 출력된다. 가산기(31-5)에 입력된 확대 성분(v_zoom)은 지연기(33-3)에 의해 1불록분 지연된 확대 성분(v_zoom)이 감산되어, LPF(35-2)를 개재시켜 가산기(31-4)에 입력된다.

다음으로, 특징 정보 처리부(12)가 행하는 움직임 신호 성분(roll), (yaw), (z) 및 pitch의 산출에 대해서 설명한다. 특징 정보 처리부(12)에 입력된 회전 성분(v_rot)은 가산기(31-1)에 입력된다. 가산기(31-1)는 시각(t)에 있어서 입력된 회전 성분(v_rot)과, 지연기(33-1)로부터 출력되는 이 프레임 이전의 시각(t-1)의 데이터를 가산한다. 가산기(31-1)는 이렇게 하여, 회전 성분(v_rot)을 누적 가산(적분)해 감으로서, 노면의 좌우 기울기를 표현하는 움직임 신호 성분(roll)(Σv_rot)을 산출한다. 그렇지만, 노면의 좌우 기울기를 표현하는 움직임 신호 성분(roll)은 -Σv_rot이기 때문에, 가산기(31-2)는 지연기(33-1)로부터 입력된 데이터의 부호를 반전한 데이터를 연산에 사용한다.

움직임 신호 성분(roll)[수평 성분(u)]은 커브 시의 원심력을 표현하는 데에도 사용된다. 그래서, 가산기(31-2)는 지연기(33-1)로부터 입력된 데이터의 부호를 반전한 데이터와, 수평 성분(u)을 가산함으로서(수평 성분(u)으로부터 지연기(33-1)의 출력을 감산함으로서), 구동부(3)에 공급하는 움직임 신호 성분(roll)을 산출한다.

커브 시의 자동차 앞부분 흔들림의 움직임 신호 성분(yaw)은 수평 성분(u)의 값을 반전함으로서 얻어지기 때문에, 특징 정보 처리부(12)는 입력된 수평 성분(u)의 값을 부호 반전기(32-1)에 의해, 부호를 반전시킴으로서 움직임 신호 성분(yaw)을 산출한다.

가산기(31-3)에는, 시각(t)에 있어서 입력된 수직 성분(v)과, 지연기(33-2)로부터 출력된 1프레임 시각(t-1)의 수직 성분(v)을 가산한다. 이렇게 하여, 가산기(31-3)에 있어서, 수직 성분(v)이 누적 가산(적분)된다. 그리고, 가산기(31-3)와 지연기(33-2)에 의해 누적 가산된 데이터는 부호 반전기(32-2)에 입력되고, 부호가 반전되며, 더욱이 HPF(34)에 의해, 고주파 성분만이 추출된다. 이렇게 하여, 노면으로부터 받는 진동을 표현하는 움직임 신호 성분(z)이 산출된다.

또, 지연기(33-2)로부터 출력된 데이터는 LPF(35-1)에도 출력되며, 저주파 성분이 추출된다. 이렇게 하여, 노면의 전후 기울기를 표현하는 움직임 신호 성분 pitch가 산출된다. 움직임 신호 성분 pitch는 가감속에 의한 관성력을 표현하는 움직임 신호 성분으로서도 사용된다. 그 때문에, LPF(35-1)로부터 출력된 움직임 신호 성분 pitch는 가산기(31-4)에 의해, 관성력을 표현하는 움직임 신호 성분 pitch가 가산된다.

관성력을 표현하는 움직임 신호 성분 pitch는 특징 정보 처리부(12)에 입력된 확대 성분(v_zoom)으로부터 산출된다. 특징 정보 처리부(12)에 입력된 확대 성분(v_zoom)은 가산기(31-5)와 지연기(33-3)에 입력된다. 가산기(31-5)에는 시각(t)에 있어서 입력된 확대 성분(v_zoomt)과, 지연기(33-3)에 의해 1프레임 지연된 시각(t-1)에 있어서의 확대 성분(v_zoomt-1)이 입력된다. 가산기(31-5)는 입력된 시각(t)에 있어서의 확대 성분(v_zoomt)에서, 시각(t-1)에 있어서의 확대 성분(V_zoomt-1)을 감산함으로서, 확대 성분(v_zoom)을 미분한다. 그리고, 가산기(31-5)로부터 출력된 값으로부터, LPF(35-2)에 의해, 저주파 성분이 추출됨으로서, 가감속에 의한 관성력을 표현하는 움직임 신호 성분 pitch가 산출된다.

가산기(31-4)에 의해, LPF(35-1)로부터 출력된 값과, LPF(35-2)로부터 출력된 값이 가산됨으로서, 구동부(3)에 공급되는 움직임 신호 성분 pitch가 산출된다.

구동부(3)의 일례를 도 7과 도 8에 도시한다. 도 7은 구동부(3)의 측면도이고, 도 8은 구동부(3)를 상면으로부터 본 도면이다. 구동부(3)는 6개의 액추에이터로서의 피스톤(41-1 내지 41-6)을 구비하고 있으며, 이들 피스톤에 의해 대좌(42)가 지탱되고 있다. 대좌(42)에는, 의자(43)가 고정되어 있으며, 이 의자(43) 상에 관객(44)이 앉도록 이루어져 있다.

피스톤(41-1 내지 41-6)은 각각의 중심 축을 따라 신축 운동을 할 수 있도록 되어 있다. 피스톤(41-1 내지 41-6)이 신축 운동을 함으로서, 대좌(42)가 움직이고, 더욱이 대좌(42)에 고정되어 있는 의자(43)가 움직인다. 피스톤(41-1 내지 41-6)을 제어하기 위한 신호는 상술한 바와 같이, 특징 정보 처리부(12)에 의해 생성되어 공급된다.

표 1은 구동기(3)에 의한 움직임의 구체예를 도시한 것이다. 이 표 1 중에서 상향 화살표는 피스톤이 연장되는 것을 나타내며, 하향 화살표는 피스톤이 수축되는 것을 나타낸다.

상술한 바와 같이 본 실시예에 있어서는, 움직임 신호 성분을 영상으로부터 얻어진 움직임으로부터 산출하도록 했기 때문에, 사람이 영상을 관찰함으로서 움직임 신호 성분을 결정하여, 입력해 두는 수고를 생략하는 것이 가능하다. 또, 센서 등을 사용함으로서 움직임 신호 성분을 생성하는 것이 이루어져 있지 않은 영상으로부터 움직임 신호 성분을 용이하게 생성하는 것이 가능하다.

또한, 본 실시예에 있어서는 움직임 벡터를 검출하도록 했지만, 움직임의 방향만 움직임의 량만을 검출하는 것 등도 애플리케이션에 따라서는 가능하다.

상술한 예에서는, 하드웨어에서의 예를 도시했지만, 본 발명의 움직임을 컴퓨터 제어 가능한 소프트웨어인 프로그램으로서 제공할 수도 있다.

이 프로그램은 자기 디스크, CD-ROM 등의 광 디스크, 자기 테이프 등의 정보 기록 매체나, 인터넷, 디지털 위성 등을 사용한 네트워크를 이용한 전송 매체 등의 기억 매체를 사용하여 컴퓨터 제어되는 정보 처리 장치에 대해 공급하면 된다.

이 프로그램이 도 1에 도시한 하드웨어에서의 실현예인 특징 정보 검출부(11), 특징 정보 처리부(12) 및 구동부(3)가 행하는 처리와 동일한 처리를 각각 행한다. 특징 정보 검출 스텝과, 특징 정보 처리 스텝과, 구동 스텝을 구비하며, 예를 들면 프레임마다 이들 스텝을 행하면 된다.

Claims

정보 처리 장치에 있어서,

영상 신호에 근거하여, 움직임에 관한 정보인 움직임 관련 신호를 검출하는 움직임 검출기, 및

상기 움직임 관련 신호에 근거하여, 움직임 제어 신호를 생성하는 생성기를 구비하는 정보 처리 장치.
제 1 항에 있어서,

상기 움직임 검출기는 상기 움직임 관련 신호로서 움직임 벡터를 검출하는 정보 처리 장치.
제 2 항에 있어서,

상기 움직임 검출기는 프레임 내의 미리 정해진 위치에 있는 여러 화소로 이루어지는 불록마다 1개의 움직임 벡터를 검출하는 정보 처리 장치.
제 2 항에 있어서,

상기 생성기는 상기 움직임 제어 신호로서, 상기 움직임 벡터에 근거하여, 수평 성분, 수직 성분, 확대 성분 및 회전 성분을 생성하는 정보 처리 장치.
제 1 항에 있어서,

상기 움직임 제어 신호에 근거하여, 오브젝트를 구동하는 구동기를 더 구비하는 정보 처리 장치.
제 5 항에 있어서,

상기 오브젝트로서 의자를 구비하며,

상기 구동기는 상기 의자를 움직이는 액추에이터를 구비하는 정보 처리 장치.
제 6 항에 있어서,

상기 영상 신호를 표시하는 표시기를 더 구비하는 정보 처리 장치.
제 1 항에 있어서,

상기 움직임 제어 신호는 다수의 성분을 포함하는 정보 처리 장치.
제 1 항에 있어서,

상기 움직임 검출기는 상기 영상 신호의 프레임 중, 미리 정해진 부분의 신호에 근거하여, 상기 움직임 관련 신호를 검출하는 정보 처리 장치.
정보 처리 방법에 있어서,

영상 신호에 근거하여, 움직임에 관한 정보인 움직임 관련 신호를 검출하는 스텝과, 상기 움직임 관련 신호에 근거하여, 움직임 제어 신호를 생성하는 스텝을 포함하는 정보 처리 방법.
제 10 항에 있어서,

상기 움직임 검출 스텝에서는, 상기 움직임 관련 신호로서 움직임 벡터가 검출되는 정보 처리 방법.
제 11 항에 있어서,

상기 움직임 검출 스텝에서는, 프레임 내의 미리 정해진 위치에 있는 여러 화소로 이루어지는 불록마다 1개의 움직임 벡터가 검출되는 정보 처리 방법.
제 11 항에 있어서,

상기 생성 스텝에서는, 상기 움직임 제어 신호로서, 상기 움직임 벡터에 근거하여, 수평 성분, 수직 성분, 확대 성분 및 회전 성분이 생성되는 정보 처리 방법.
제 10 항에 있어서,

상기 움직임 제어 신호에 근거하여, 오브젝트를 구동하는 스텝을 더 구비하는 정보 처리 방법.
제 10 항에 있어서,

상기 움직임 제어 신호는 다수의 성분을 포함하는 정보 처리 방법.
제 10 항에 있어서,

상기 움직임 검출 스텝에서는, 상기 영상 신호의 프레임 중, 미리 정해진 부분의 신호에 근거하여, 상기 움직임 관련 신호가 검출되는 정보 처리 방법.
컴퓨터 제어 가능한 프로그램을 기억하는 기억 매체에 있어서,

상기 프로그램은, 영상 신호에 근거하여, 움직임에 관한 정보인 움직임 관련 신호를 검출하는 스텝과, 상기 움직임 관련 신호에 근거하여, 움직임 제어 신호를 생성하는 스텝으로 이루어진 프로그램 기억 매체.
제 17 항에 있어서,

상기 움직임 검출 스텝에서는, 상기 움직임 관련 신호로서 움직임 벡터가 검출되는 프로그램 기억 매체.
제 18 항에 있어서,

상기 움직임 검출 스텝에서는, 프레임 내의 미리 정해진 위치에 있는 다수의 화소로 이루어지는 불록마다 1개의 움직임 벡터가 검출되는 프로그램 기억 매체.
제 18 항에 있어서,

상기 생성 스텝에서는, 상기 움직임 제어 신호로서, 상기 움직임 벡터에 근거하여, 수평 성분, 수직 성분, 확대 성분 및 회전 성분이 생성되는 프로그램 기억 매체.
제 17 항에 있어서,

상기 프로그램은 상기 움직임 제어 신호에 근거하여, 오브젝트를 구동하는 스텝을 더 구비하는 프로그램 기억 매체.
제 17 항에 있어서,

상기 움직임 제어 신호는 다수의 성분을 포함하는 프로그램 기억 매체.
제 17 항에 있어서,

상기 움직임 검출 스텝에서는, 상기 영상 신호의 프레임 중, 미리 정해진 부분의 신호에 근거하여, 상기 움직임 관련 신호가 검출되는 프로그램 기억 매체.