JP2003256842A - Device and method for detecting position of moving object - Google Patents

Device and method for detecting position of moving object

Info

Publication number
JP2003256842A
JP2003256842A JP2002050140A JP2002050140A JP2003256842A JP 2003256842 A JP2003256842 A JP 2003256842A JP 2002050140 A JP2002050140 A JP 2002050140A JP 2002050140 A JP2002050140 A JP 2002050140A JP 2003256842 A JP2003256842 A JP 2003256842A
Authority
JP
Japan
Prior art keywords
image
target object
moving body
comparison
body position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
JP2002050140A
Other languages
Japanese (ja)
Inventor
Shigeo Yago
栄郎 矢後
Nobuyuki Tokura
信之 戸倉
Tomohide Takano
友英 鷹野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OPTOWAVE LAB Inc
OPTOWAVE LABORATORY Inc
Original Assignee
OPTOWAVE LAB Inc
OPTOWAVE LABORATORY Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OPTOWAVE LAB Inc, OPTOWAVE LABORATORY Inc filed Critical OPTOWAVE LAB Inc
Priority to JP2002050140A priority Critical patent/JP2003256842A/en
Publication of JP2003256842A publication Critical patent/JP2003256842A/en
Ceased legal-status Critical Current

Links

Abstract

<P>PROBLEM TO BE SOLVED: To configure an inexpensive system by reducing the arithmetic quantity of the position detection of a moving object projected on a highly precise image obtained by photographing the scene of a whole lecture by a remote lecture system. <P>SOLUTION: A difference between an image and the temporally past image obtained by photographing the same range is calculated, and the changed position is defined as the movement destination of a moving object. In this case, only the pixel data of linearly arranged comparison points extracted from the image are compared to calculate the different so that the arithmetic quantity required for detecting the position of the moving object can be reduced. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、同一範囲を継続し
て撮影している画像について動体が存在しない背景の前
に存在する動体の位置を検出する技術に関する。本発明
は、画像情報を通信網を介して遠隔地に配信する遠隔講
義システムで講師の位置情報を検出する技術に利用す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technique for detecting the position of a moving body existing in front of a background where no moving body exists in images continuously photographed in the same range. INDUSTRIAL APPLICABILITY The present invention is used in a technique of detecting position information of a lecturer in a remote lecture system that delivers image information to a remote place via a communication network.

【0002】[0002]

【従来の技術】講師と受講者とを通信網を介して接続
し、画像・音声を配信する遠隔講義システムでは、講義
全体の風景を黒板の文字情報を読み取ることが可能な画
質で撮影した高精細画像情報を配信したり、あるいは受
講者端末において、音像定位を実現することなどにより
講義の臨場感を向上させるようにしている。
2. Description of the Related Art In a remote lecture system in which an instructor and a student are connected via a communication network and images and voices are distributed, the scenery of the entire lecture is photographed at a high image quality capable of reading the character information on the blackboard. By providing high-definition image information or realizing sound image localization at the student terminals, the presence of lectures is improved.

【0003】このような画像配信を行う遠隔講義システ
ムにおいて、通信に利用可能な帯域が十分に確保できる
とは限らないため、配信する情報量を低減する種々の手
法が採られている。例えば動きのある画像情報を画像処
理により抽出し、その動きのある画像情報のみを配信す
る技術が採用されている。
In such a remote lecture system for image distribution, since it is not always possible to secure a sufficient bandwidth available for communication, various techniques for reducing the amount of information to be distributed have been adopted. For example, a technique is adopted in which moving image information is extracted by image processing and only the moving image information is distributed.

【0004】遠隔講義システムにおいては、動きのある
部分、すなわち動体は、講師であることが多い。このた
め、遠隔講義システムのような画像配信システムでは、
動体である講師の位置を検出し、その位置情報を配信す
ることが研究されている。
In a remote lecture system, a moving part, that is, a moving body is often a lecturer. Therefore, in an image distribution system such as a remote lecture system,
Research has been conducted on detecting the position of a moving lecturer and delivering the position information.

【0005】このような動体の位置検出技術として、画
像情報の記録に高能率符号化であるJPEGなどの画像
フォーマットを用いて、被写体の変化に伴って画像の情
報量が変化することから動体を検出する手法がある。こ
の手法は発明者らの提案する特開平2001−2181
80号公報に示される画像配信システムにおいて用いら
れており、遠隔講義などにおいて、画像の配信先の端末
における音像定位に利用することで講義の臨場感の向上
を実現している。
As a technique for detecting the position of such a moving body, an image format such as JPEG which is highly efficient coding is used for recording image information, and the moving body is detected because the amount of information in the image changes as the subject changes. There is a detection method. This method is proposed by the inventors in Japanese Patent Laid-Open No. 2001-2181.
It is used in the image distribution system disclosed in Japanese Patent Publication No. 80, and in a remote lecture or the like, it is used for sound image localization at a terminal to which an image is distributed, thereby improving the realism of the lecture.

【0006】[0006]

【発明が解決しようとする課題】しかしながら、講師の
服装が背景と著しく異なるような画像でなければ、画像
の情報量が大きく変わらないため講師の位置検出精度が
あまり良くない問題がある。また、講師の動作による情
報量の変化と背景の黒板に書かれた文字による情報量変
化を区別することはできないため、背景の変化による情
報量変化を講師の動作による情報量変化と誤検出するこ
とがあった。
However, unless the clothes of the instructor are significantly different from the background, the instructor's position detection accuracy is not so good because the amount of information in the image does not change significantly. In addition, since it is impossible to distinguish the change in the amount of information due to the movement of the teacher and the change in the amount of information due to the characters written on the blackboard in the background, the change in the amount of information due to the change in the background is erroneously detected as the change in the amount of information due to the movement of the teacher. There was an occasion.

【0007】背景の文字を誤検出せずに講師のみ検出す
るには、画像情報に対してパターンマッチングなどの画
像処理を行う必要がある。しかし、講師の位置検出に利
用可能な時間はカメラにより次の画像が撮影されるまで
の間であり、この期間内において文字情報を読み取るこ
とが可能な画質で講義全体の風景を撮影した高精細画像
情報に対して画像処理を行うには処理能力の高い高価な
情報処理装置が必要であって、画像配信システムが高価
なものとなる問題がある。さらに、講師の位置情報から
音像定位を行う場合に、ステレオシステムには対応でき
るが、背景に奥行きがある場合に、より臨場感のある音
を発生するサラウンドシステムには対応できない問題が
ある。
In order to detect only the teacher without erroneously detecting background characters, it is necessary to perform image processing such as pattern matching on the image information. However, the time that can be used to detect the position of the instructor is until the next image is taken by the camera. In order to perform image processing on image information, an expensive information processing device with high processing capability is required, and there is a problem that the image distribution system becomes expensive. Furthermore, when performing sound image localization from the position information of the instructor, there is a problem that it can be applied to a stereo system, but cannot be applied to a surround system that generates more realistic sound when there is a depth in the background.

【0008】本発明は、このような背景に行われたもの
であり、本発明は、背景の中で動くような対象物体の位
置検出のための演算量を減少させ、位置検出に要する時
間を短縮できる動体の位置検出装置および方法を提供す
ることを目的とする。また、本発明は、背景に奥行きが
ある場合でも対象物体の位置を簡易に検出できる動体の
位置検出装置および方法を提供することを目的とする。
本発明は、黒板の文字情報を読み取ることが可能な画質
で講義全体の風景を撮影した高精細画像情報を受講者端
末に配信する遠隔講義システムに利用でき、安価な構成
で講師の位置情報を配信して、臨場感ある講義を行うこ
とができる動体位置検出装置および方法を提供すること
を目的とする。
The present invention has been made against such a background, and the present invention reduces the amount of calculation for detecting the position of a target object that moves in the background and reduces the time required for position detection. An object of the present invention is to provide a moving body position detection device and method that can be shortened. Another object of the present invention is to provide a moving object position detection apparatus and method capable of easily detecting the position of a target object even when the background has a depth.
INDUSTRIAL APPLICABILITY The present invention can be used in a remote lecture system that delivers high-definition image information of a scene of an entire lecture captured to a student terminal with an image quality capable of reading the character information on a blackboard, and the position information of the lecturer can be obtained with an inexpensive configuration. An object and an object of the present invention are to provide a moving body position detecting device and method capable of delivering and giving a realistic lecture.

【0009】[0009]

【課題を解決するための手段】本発明は、時間的に継続
した動体を含む画像を撮影するシステムにおいて、前撮
影画像と被写体に検出対象物体である動体が存在しない
背景画像とを比較用データとして用い、対象物体を検出
したいポイントを比較ポイントとしてその位置の画像デ
ータに比較処理を含む画像処理を行って対象物体の有無
を推定して対象物体の位置を決定する。
According to the present invention, in a system for capturing an image including a moving body that continues in time, a previously captured image and a background image in which a moving body which is an object to be detected does not exist in a subject are compared. The position of the target object is determined by estimating the presence or absence of the target object by performing image processing including comparison processing on the image data at that position with the point at which the target object is desired to be detected as the comparison point.

【0010】すなわち、本発明の第一の観点は、動体位
置検出装置にかかるもので、背景の前面にある位置可変
の対象物体を時系列で撮影する撮影手段と、この撮影さ
れた画像を時系列に蓄積する蓄積手段と、撮影された画
像と蓄積された画像とを比較して前記対象物体の位置を
検出する画像処理手段とを備え、前記画像処理手段は、
前記蓄積手段の画像について、画像内に前記対象物体に
少なくとも一つが重なるように配置された比較ポイント
の画素データを取り出す手段と、この取り出された画像
の比較ポイントの画素データと撮影された画像との比較
ポイントの画素データとを比較し、変化を検出した比較
ポイントの位置を前記対象物体の移動位置と判定する手
段とを含むことを特徴とする。
That is, a first aspect of the present invention relates to a moving body position detecting apparatus, which is a photographing means for photographing a position-changeable target object in front of a background in time series, and the photographed image. The image processing means includes an accumulating means for accumulating in series, and an image processing means for detecting a position of the target object by comparing a captured image and the accumulated image, and the image processing means.
With respect to the image of the accumulating unit, a unit for extracting pixel data of a comparison point arranged so that at least one overlaps with the target object in the image, and pixel data of the comparison point of the extracted image and a captured image. And comparing the pixel data of the comparison point with the pixel data of the comparison point, and determining the position of the comparison point where the change is detected as the moving position of the target object.

【0011】この本発明の原理を図1および5を用いて
説明する。背景画像20は事前に撮影して用意してお
く。そして図1に示す撮影範囲2に対して講師1の大き
さがおよそわかっているので、人物が画像内に写ってい
るとき、少なくとも1画素が人物像と重なるようによう
に比較ポイント5として画像内に複数の測定画素を設定
する。この比較ポイント5の測定画素について前の画像
と比較することで現在の講師の位置を推定する。これに
より、画像処理を行う範囲を画像全面から特定の比較ポ
イントの画素データにのみ限定することで、演算量が減
少し講師の位置検出に要する時間を短縮することが可能
となる。
The principle of the present invention will be described with reference to FIGS. The background image 20 is captured and prepared in advance. Since the size of the instructor 1 is approximately known for the shooting range 2 shown in FIG. 1, when the person is included in the image, the image is set as the comparison point 5 so that at least one pixel overlaps the person image. Set multiple measurement pixels inside. The current position of the instructor is estimated by comparing the measurement pixel at the comparison point 5 with the previous image. As a result, the range of image processing is limited to the pixel data of a specific comparison point from the entire surface of the image, so that the amount of calculation is reduced and the time required to detect the position of the instructor can be shortened.

【0012】また、本発明では、比較ポイントは、対象
物体のサイズ以下の間隔であって、この比較ポイントは
画像内に一以上の線状に配置されることが好ましい。
Further, in the present invention, it is preferable that the comparison points have an interval equal to or smaller than the size of the target object, and the comparison points are arranged in one or more lines in the image.

【0013】これは、講師1の大きさよりも、線状に並
んだ比較ポイントで切り取られる画像を小さくすること
である。すなわち、図1に示すように、横方向の比較ポ
イント5の間隔を講師1の横幅よりも小さく設定して、
縦方向については講師1が屈んだ場合を考慮して腰の高
さよりも小さく設定する。これにより、講師1の検出範
囲内において必ず比較ポイント5のいずれかが講師1に
重なることとなるので講師1を確実に検出できる。
This is to make the image cut out at the comparison points arranged linearly smaller than the size of the instructor 1. That is, as shown in FIG. 1, the distance between the comparison points 5 in the horizontal direction is set smaller than the width of the instructor 1,
The vertical direction is set smaller than the waist height in consideration of the case where the instructor 1 bends. As a result, any one of the comparison points 5 will always overlap the instructor 1 within the detection range of the instructor 1, so that the instructor 1 can be detected reliably.

【0014】また、本発明では、前記比較ポイントは、
前記対象物体の動きに沿って直線状に配置され、少なく
とも1本の線が前記対象物体と交差するように配置され
ることが好ましい。
In the present invention, the comparison point is
It is preferable that they are arranged linearly along the movement of the target object, and at least one line is arranged so as to intersect with the target object.

【0015】これは、図2に示されるように講師1の移
動方向に沿って動体位置検出ライン6を設定し、そのラ
イン上について比較ポイント5を設定することである。
遠隔講義システムのように撮影範囲が常に講義風景全体
のように固定である場合、撮影範囲2に写る講師1の写
る高さを推定できる。これを利用して、撮影範囲2全域
を講師1の位置検出対象とするのではなく、講師1の写
る高さより低い領域の1つ以上の高さに対して講師1の
位置検出を行うものである。また、講師1の移動方向
は、画面上は主に横方向であるから、横のラインに動体
位置検出ライン6を設定してそのライン上に画像比較ポ
イント5を設定する。このようにすることで、動体の検
出範囲を効率よく特定でき、動体位置検出に要する演算
量を軽減することができる。
This is to set the moving body position detection line 6 along the moving direction of the instructor 1 as shown in FIG. 2 and set the comparison point 5 on the line.
When the shooting range is always fixed like the entire lecture landscape as in the remote lecture system, the height of the instructor 1 in the shooting range 2 can be estimated. By using this, the position of the instructor 1 is detected for one or more heights in a region lower than the height in which the instructor 1 is imaged, rather than for the entire position of the imaging range 2 to be the position detection target of the instructor 1. is there. Further, since the moving direction of the instructor 1 is mainly in the horizontal direction on the screen, the moving body position detection line 6 is set on the horizontal line and the image comparison point 5 is set on the line. By doing so, the moving object detection range can be efficiently specified, and the amount of calculation required for moving object position detection can be reduced.

【0016】さらに、講師1は縦に長い物体として撮影
されるため、講師1の移動に対する画像情報の変化は縦
方向に現れる。このとき2つの異なる高さについて横方
向の同じ位置に画像情報の変化を検出することで、講師
1を縦に長く動く物体として検出することが可能とな
る。これにより2つの異なる高さの間隔を背景の黒板に
記入される文字よりも大きくすることで、文字と講師と
を区別して動体である講師を検出することが可能であ
る。
Further, since the teacher 1 is photographed as a vertically long object, the change in the image information due to the movement of the teacher 1 appears in the vertical direction. At this time, by detecting the change in the image information at the same position in the horizontal direction for the two different heights, it is possible to detect the instructor 1 as a vertically moving object. Thus, by making the interval between the two different heights larger than the letters written on the background blackboard, it is possible to distinguish the letters from the lecturer and detect the moving lecturer.

【0017】また、本発明では、対象物体と撮影手段と
の距離が離れるにしたがって、少なくとも1本の比較ポ
イントの線が対象物体と交差するように比較ポイントの
線の間隔が小さく設定されることが好ましい。
Further, in the present invention, the distance between the lines of the comparison points is set to be small so that at least one line of the comparison points intersects the target object as the distance between the target object and the photographing means increases. Is preferred.

【0018】これは、図3に示すように背景に奥行きが
あって撮影される講師1のサイズが変わる場合におい
て、講師1のサイズが小さく見える部分には観測する高
さの間隔を狭くする必要があることである。講師1の奥
行き方向の位置は、動体が検出された動体位置検出ライ
ン6の設定位置から推定することができる。この奥行き
き位置によって、サラウンドシステムが使用でき、臨場
感のある音を配信先で実現することができる。
This is because when the size of the instructor 1 to be photographed changes due to the depth of the background as shown in FIG. 3, it is necessary to narrow the observation height interval in the portion where the size of the instructor 1 appears small. Is there. The position of the instructor 1 in the depth direction can be estimated from the set position of the moving body position detection line 6 where the moving body is detected. With this depth position, a surround system can be used, and a sound with a realistic sensation can be realized at the delivery destination.

【0019】また、本発明では、動体の位置を判定する
手段は、時間的に一つ前の比較ポイントの画素データの
色または明るさの差を検出する手段を含むことが好まし
い。
Further, in the present invention, it is preferable that the means for determining the position of the moving body includes a means for detecting a difference in color or brightness of the pixel data at the immediately preceding comparison point.

【0020】これは、比較ポイント5における画素デー
タを、赤、青、緑の各成分または輝度、明度、彩度につ
いて比較して画像変化を検出するもので、比較ポイント
の画素データとしてこれらの情報を使用することができ
る。
This is to detect the image change by comparing the pixel data at the comparison point 5 with respect to each component of red, blue and green, or the luminance, brightness and saturation, and these information are used as the pixel data at the comparison point. Can be used.

【0021】また、本発明では、動体の位置を判定する
手段は、時間的に一つ前の比較ポイントの画素データの
色または明るさの差と時間的に2以上前の画素データと
の差を検出する手段を含むことが好ましい。
Further, according to the present invention, the means for determining the position of the moving body is the difference between the color or brightness of the pixel data of the comparison point immediately preceding in time and the difference of the pixel data two or more previous in time. It is preferable to include means for detecting

【0022】これは、図5に示すような、最新画像23
と前撮影画像22との差分情報と、前撮影画像22と前
々撮影画像21との差分情報について比較し、動体の位
置を検出しようとするものである。時間経過28ととも
に撮影されるとその際に生成される差分画像は、図5に
示すようになり、最新画像23と前撮影画像22の差分
画像26では、講師が移動したとき、文字4は消えるが
講師1の移動元と移動先の2点に画像変化が検出され
る。これだけでは、2点のうちどちらが移動先であるか
判断できないため、この結果とさらに前撮影画像22と
前々撮影画像21の差分画像との変化を検出する。これ
により、移動元の画像変化にフィルタリングされて、生
成された動体位置検出に利用する差分画像27により移
動先の画像変化のみが検出することができる。
This is the latest image 23 as shown in FIG.
The difference information between the previous captured image 22 and the previous captured image 22 is compared with the difference information between the previous captured image 22 and the pre-previous captured image 21 to detect the position of the moving body. The difference image generated at that time when taken with the passage of time 28 is as shown in FIG. 5, and in the difference image 26 between the latest image 23 and the previous taken image 22, the character 4 disappears when the lecturer moves. An image change is detected at two points of the source and destination of the lecturer 1. Since this alone cannot determine which of the two points is the destination, the change between this result and the difference image between the previous captured image 22 and the previous captured image 21 is detected. As a result, only the image change of the moving destination can be detected by the difference image 27 generated by filtering the image change of the moving source and used for detecting the moving body position.

【0023】また、本発明は、動体の位置を判定する手
段は、対象物体が写っていない背景画像データに対して
色または明るさの差を検出する手段を含むことが好まし
く、この背景画像データは対象物体が写っていないと判
定された最新の画像データであることが好ましい。
Further, in the present invention, the means for determining the position of the moving body preferably includes means for detecting a difference in color or brightness with respect to the background image data in which the target object is not captured. Is preferably the latest image data in which it is determined that the target object is not captured.

【0024】画像変化は、図5の最新画像23と動体が
写っていない背景画像20について差分画像を生成して
画像変化を検出する。背景画像20は、動体が存在しな
いと判断した画像でも最も新しいものを利用することが
望ましい。これにより、講義などで背景である黒板3に
文字が書かれた場合でも動体のみを差分情報として検出
することが可能となる効果がある。また、前撮影画像2
2と背景画像20の2枚の画像を比較画像として最新画
像23から動体を検出する際には、最新画像23と前撮
影画像22との差分画像26、最新画像23と背景画像
20との差分画像24が生成される。このとき講師1の
移動元と背景の文字4との画像変化がフィルタリングさ
れて動体位置検出に利用する差分画像が生成可能であ
り、動体の位置検出を行うことが可能となる。さらに、
背景に変化があった場合、例えばまわりの明るさが変わ
った場合であっても動体の位置検出精度が高くなる効果
がある。
As for the image change, a difference image is generated between the latest image 23 of FIG. 5 and the background image 20 in which the moving body is not shown, and the image change is detected. As the background image 20, it is desirable to use the latest image even if it is determined that there is no moving body. As a result, even if a character is written on the background blackboard 3 in a lecture or the like, it is possible to detect only the moving body as the difference information. Also, the previous captured image 2
When detecting a moving body from the latest image 23 using two images of 2 and the background image 20 as comparison images, a difference image 26 between the latest image 23 and the previous captured image 22 and a difference between the latest image 23 and the background image 20 are detected. Image 24 is generated. At this time, the image change between the moving source of the instructor 1 and the background character 4 can be filtered to generate a differential image used for detecting the moving body position, and the position of the moving body can be detected. further,
When the background changes, for example, even when the surrounding brightness changes, the position detection accuracy of the moving body is improved.

【0025】さらに、本発明は、対象物体と撮影手段と
の距離を、対象物体と交差する比較ポイントの数により
検出する手段を含むことができる。
Further, the present invention can include means for detecting the distance between the target object and the photographing means by the number of comparison points intersecting the target object.

【0026】これは、動体位置検出ライン6上において
変化が検出された比較ポイントの量から、奥行き方向の
位置を推定することである。図4に示すような撮影風景
において、近くの人7は遠くの人8よりも明らかに比較
ポイントと重なる量が多くなる。これにより、動体の奥
行き位置を検出できるので、配信先ではサラウンドシス
テムを利用して臨場感のある音を提供することができ
る。
This is to estimate the position in the depth direction from the amount of comparison points where the change is detected on the moving body position detection line 6. In the shooting landscape as shown in FIG. 4, the nearby person 7 obviously has a larger amount of overlap with the comparison point than the distant person 8. Accordingly, since the depth position of the moving body can be detected, it is possible to provide a realistic sound by using the surround system at the delivery destination.

【0027】さらに、本発明は、画像内の対象物体との
重なりが検出された比較ポイントの集合が2以上あり、
当該比較ポイントの集合のサイズが対象物体のサイズと
ほぼ等しい場合は、当該比較ポイントの集合の一つを一
つの対象物体の位置と判定し、2以上の対象物体の位置
を検出することが好ましい。
Further, according to the present invention, there are two or more sets of comparison points in which the overlap with the target object in the image is detected,
When the size of the set of comparison points is substantially equal to the size of the target object, it is preferable to determine one of the sets of comparison points as the position of one target object and detect the positions of two or more target objects. .

【0028】対象物体が複数ある場合であっても、対象
物体のサイズが既知であれば、対象物体と重なり、その
集合のサイズが対象物体のサイズとほぼ等しい場合に
は、比較ポイントの集合の一つを一つの対象物体と重な
ったものと見なすことができ、その比較ポイントの集合
の位置を対象物体の位置と判定することができる。例え
ば、比較ポイントの集合が対象物体の倍ある場合は、二
つの物体であると認識し、サイズが倍に満たない場合は
一つと認識する。また、画像内にOHP画面が含まれて
いる場合であっても、講師との大きさの違いからOHP
の画面を講師と誤認することはない。
Even if there are a plurality of target objects, if the size of the target object is known, it overlaps with the target object, and if the size of the set is substantially equal to the size of the target object, One can be regarded as overlapping with one target object, and the position of the set of the comparison points can be determined as the position of the target object. For example, if the set of comparison points is twice as large as the target object, it is recognized as two objects, and if the size is less than double, it is recognized as one. Even if an OHP screen is included in the image, the size of the OHP screen is different from that of the instructor.
There is no mistakenly recognizing the screen of as a teacher.

【0029】また、本発明の別の観点は、動体位置検出
方法にかかるものであり、背景の前面にある位置可変の
対象物体を時系列的で継続して撮影し、撮影された画像
データを時系列に蓄積し、蓄積された過去の画像データ
と撮影された画像データとから、画像内に線状に配置さ
れた比較ポイントの少なくとも一つと前記対象物体との
重なった位置の画素データを取り出し、この取り出した
画素データを比較して変化が検出されたときは、その変
化した比較ポイントの位置を前記対象物体の移動位置と
判定することを特徴とする。
Another aspect of the present invention relates to a moving body position detecting method, in which a variable position target object in front of the background is continuously photographed in time series, and the photographed image data is recorded. Pixel data at a position where at least one of the comparison points linearly arranged in the image and the target object are overlapped is extracted from the past image data and the captured image data that are accumulated in time series. When the extracted pixel data are compared and a change is detected, the position of the changed comparison point is determined as the moving position of the target object.

【0030】これにより、画像処理を行う範囲を特定の
比較ポイントの画素データに限定することで、動体検出
を行うための演算量を削減でき、また演算時間を短縮す
ることができる。
As a result, by limiting the range in which the image processing is performed to the pixel data of a specific comparison point, it is possible to reduce the amount of calculation for detecting a moving object and reduce the calculation time.

【0031】なお、本発明は、背景の前面にある位置可
変の対象物体を時系列で撮影する撮影手段が接続される
情報処理装置にインストールして、この情報処理装置を
撮影された画像を時系列に蓄積する蓄積手段と、撮影さ
れた画像と蓄積された画像とを比較して前記対象物体の
位置を検出する画像処理手段とを備え、前記画像処理手
段は、前記蓄積手段の画像について、画像内に前記対象
物体に少なくとも一つが重なるように配置された比較ポ
イントの画素データを取り出す手段と、この取り出され
た画像の比較ポイントの画素データと撮影された画像と
の比較ポイントの画素データとを比較し、変化を検出し
た比較ポイントの位置を前記対象物体の移動位置と判定
する手段とを含む動体位置検出装置として動作させるこ
とを特徴とする。このプログラムは、記録媒体あるいは
通信回線を介して提供することができる。
According to the present invention, the information processing apparatus is installed in an information processing apparatus to which a photographing means for time-sequentially photographing a variable-position target object in front of the background is connected, and the image taken by the information processing apparatus is recorded. An image processing unit that detects the position of the target object by comparing a captured image with an accumulated image, and the image processing unit, for the image of the accumulating unit, Means for extracting pixel data of a comparison point arranged so that at least one overlaps with the target object in the image, and pixel data of the comparison point of the extracted image and pixel data of the comparison point of the captured image, And means for determining the position of the comparison point at which the change is detected as the moving position of the target object to operate as a moving body position detecting device. This program can be provided via a recording medium or a communication line.

【0032】[0032]

【発明の実施の形態】以下図面を参照して本発明の実施
の態様を説明する。以下の実施例は、遠隔講義の画像配
信装置として本実施例の動体位置検出装置を使用する場
合の例である。
BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings. The following embodiment is an example in which the moving body position detecting device of this embodiment is used as an image distribution device for a remote lecture.

【0033】図6は、本発明の実施例の動体位置検出装
置16を含む遠隔講義システムの画像配信装置の構成を
示すものである。すなわち、被写体としての講師1を時
系列で継続して撮影するカメラ13と、このカメラ13
により撮影した画像を処理して講師1の位置を検出判定
する構成を含む動体位置検出装置16と、検出した講師
1の位置情報とともに撮影された画像を遠隔地の受講者
の端末に配信する配信装置17とを備えた構成である。
FIG. 6 shows the configuration of an image distribution device of a remote lecture system including the moving body position detecting device 16 according to the embodiment of the present invention. That is, the camera 13 that continuously photographs the instructor 1 as a subject in time series, and the camera 13
A moving body position detecting device 16 including a configuration for detecting and determining the position of the instructor 1 by processing the image captured by the device, and the distribution of delivering the captured image together with the detected position information of the instructor 1 to the terminal of the student at the remote place. And a device 17.

【0034】ここにおいて、本発明実施例の特徴とする
ところは、動体位置検出装置16はカメラ13で撮影さ
れた画像を時系列に蓄積する撮影画像記録部9と、この
撮影画像記録部9に蓄積された画像について、画像内に
検出すべき動体としての講師1に少なくとも一つが重な
るように配置された比較ポイント5の画素データを取り
出して、比較ポイント5の画素データで新しい画像と過
去の画像とを比較し変化を検出した比較ポイントの位置
を講師1の移動位置として判定する手段として、パター
ン比較部10、動体検出判定部11とを備えるところに
ある。
Here, the feature of the embodiment of the present invention is that the moving body position detecting device 16 has a photographed image recording unit 9 for accumulating images photographed by the camera 13 in time series, and this photographed image recording unit 9. From the accumulated images, the pixel data of the comparison point 5 arranged so that at least one overlaps with the instructor 1 as the moving body to be detected in the image is extracted, and the pixel data of the comparison point 5 is used for the new image and the past image. The pattern comparison unit 10 and the moving body detection determination unit 11 are provided as means for determining the position of the comparison point where the change is detected by comparing with the position as the moving position of the lecturer 1.

【0035】なお検出された講師1の位置情報は、撮影
された画像と検出された動体位置情報とを結合する画像
・動体検出情報結合部12を介して配信装置17に出力
される。
The detected position information of the instructor 1 is output to the distribution device 17 via the image / moving object detection information combining unit 12 that combines the photographed image and the detected moving object position information.

【0036】本実施例が適用される遠隔講義システムの
構成を図7に示す。
FIG. 7 shows the configuration of a remote lecture system to which this embodiment is applied.

【0037】講師1は黒板2の前に立って動いており、
それをカメラ13で時間的に継続して撮影する。この撮
影された画像は、先願である特願2000−02656
8のように、高精細静止画像でよいし、遠隔講義システ
ムで利用可能な動画像でもよい。また黒板3はホワイト
ボードやプロジェクタのスクリーンでもよい。
The teacher 1 is standing and moving in front of the blackboard 2,
The camera 13 continuously photographs it with time. This photographed image is a prior application, Japanese Patent Application No. 2000-02656.
A high-definition still image as shown in 8 or a moving image usable in a remote lecture system may be used. The blackboard 3 may be a whiteboard or a screen of a projector.

【0038】カメラ13で撮影した画像は動体位置検出
装置16で画像処理され、講師の発音を採取する無線式
のマイクロホン送信機14から音声信号の無線信号を受
信するマイクロホン受信機15の信号を処理し、動体位
置検出装置16の画像処理結果と結合して配信先に送出
する配信装置17と、インターネットあるいはLANな
どの通信網18と、この通信網18を介して配信装置1
7からの配信データを出力表示する受講者端末19とを
この遠隔講義システムは備えている。受講者端末19は
複数あってもよく、また配信装置17は、動体位置検出
装置16からの撮影画像信号および講師の位置情報と音
声情報とを受講者端末19に送り、受講者端末19は、
講師の位置情報に基づいて音像定位を行って出力し臨場
感ある遠隔講義を実演する。
The image photographed by the camera 13 is image-processed by the moving body position detecting device 16, and the signal of the microphone receiver 15 which receives the radio signal of the voice signal from the radio microphone transmitter 14 which collects the pronunciation of the instructor is processed. Then, the distribution device 17 that is combined with the image processing result of the moving body position detection device 16 and is sent to the distribution destination, the communication network 18 such as the Internet or a LAN, and the distribution device 1 via this communication network 18.
This remote lecture system is provided with a student terminal 19 that outputs and displays the distribution data from 7. There may be a plurality of student terminals 19, and the distribution device 17 sends the captured image signal from the moving body position detection device 16 and the position information and voice information of the instructor to the student terminal 19, and the student terminal 19
Sound image localization is performed based on the instructor's position information and output to demonstrate a realistic distance lecture.

【0039】次に、講師の位置検出を行う動体位置検出
の動作について図1ないし図7を参照して説明する。
Next, the moving body position detecting operation for detecting the position of the instructor will be described with reference to FIGS. 1 to 7.

【0040】カメラ13が撮影した画像は、撮影画像記
録部9に取り込まれる。撮影画像記録部9では、図5に
示される最新画像23と、一つ前に撮影した前撮影画像
22と、講師の写っていない背景画像20の3枚の画像
が少なくとも記録されている。この3枚の画像は、動体
の位置検出を行うために撮影が行われるごとに撮影画像
記録部9からパターン比較部10へ3枚の画像データを
入力する。また、配信用として最新画像23を画像・動
画検出情報結合部12へ入力する。
The image photographed by the camera 13 is taken into the photographed image recording section 9. In the captured image recording unit 9, at least three images, that is, the latest image 23 shown in FIG. 5, the previous captured image 22 captured immediately before, and the background image 20 in which the lecturer is not captured are recorded. For these three images, three image data are input from the photographed image recording unit 9 to the pattern comparison unit 10 every time photographing is performed to detect the position of the moving body. In addition, the latest image 23 for distribution is input to the image / moving image detection information combining unit 12.

【0041】パターン比較部10では事前に設定された
図2ないし4に示される動体位置検出ライン6の比較ポ
イント5の画素データについてその色あるいは明るさの
差分画像を生成する。比較ポイント5は図1のように、
線状、あるいは図2ないし4に示すように直線状に画像
内に設定すればよい。動体位置検出に利用する差分情報
は、図5の最新画像23と前撮影画像22との差分情報
ならびに最新画像23と背景画像20の差分情報の二つ
を生成する。この二つの差分情報について対応する比較
ポイントごとにその画素データを比較し、変化の小さい
値をその比較ポイントの最終的な差分情報とする。生成
された差分情報は差分情報から講師1の位置を判定する
動体検出判定部11に入力する。
The pattern comparison section 10 generates a difference image of the color or brightness of the pixel data of the comparison point 5 of the moving body position detection line 6 shown in FIGS. Comparison point 5 is as shown in Figure 1.
It may be set linearly or linearly in the image as shown in FIGS. As the difference information used for detecting the moving body position, two pieces of difference information, that is, the difference information between the latest image 23 and the previous captured image 22 and the difference information between the latest image 23 and the background image 20 in FIG. 5 are generated. The pixel data is compared for each of the corresponding comparison points with respect to the two pieces of difference information, and a value with a small change is set as the final difference information of the comparison point. The generated difference information is input to the moving body detection determination unit 11 that determines the position of the instructor 1 from the difference information.

【0042】差分情報を生成する際は、前撮影画像22
と前々撮影画像21、または背景画像20を比較用のサ
ンプル画像として用いてもよい。これにより、前撮影画
像22と前々撮影画像21との差分画像25および、背
景画像20と最新画像との差分画像24を用いること
で、移動元の画像変化を取り除いて、移動先の画像変化
のみ検出する。画像変化を検出するパラメータとして
は、色あるいは明るさの差を用いて、画像変化を判定す
る。
When the difference information is generated, the previously photographed image 22
The pre-previously captured image 21 or the background image 20 may be used as a sample image for comparison. Thus, by using the difference image 25 between the previous captured image 22 and the pre-previous captured image 21 and the difference image 24 between the background image 20 and the latest image, the change in the source image is removed, and the change in the destination image is removed. Only detect. As a parameter for detecting an image change, a difference in color or brightness is used to determine the image change.

【0043】動体検出判定部11で講師1がいると判断
された場合、動体位置検出結果は、画像・動体検出情報
結合部12に入力されて、最新画像23と結合された
後、配信装置17へ入力され、通信網18を介して受講
者端末19に配信される。ここで講師1が存在しないと
判断された場合は、背景画像20を更新するために撮影
画像記録部9に背景画像20の更新要求を行い、最新画
像23を背景画像20として記録する。また、最新画像
23は、更新することで次の撮影処理時に、前撮影画像
22としても利用される。また、講師1が写っていない
と判断された最新の画像がある場合は、その画像を背景
画像データ20として画像記録部9に更新しておく。
When the moving body detection / judgment unit 11 judges that there is the lecturer 1, the moving body position detection result is input to the image / moving body detection information combining unit 12 and is combined with the latest image 23, and then the distribution device 17 is provided. Is input to the student terminal 19 via the communication network 18. If it is determined that the instructor 1 does not exist, an update request for the background image 20 is made to the captured image recording unit 9 to update the background image 20, and the latest image 23 is recorded as the background image 20. Further, the latest image 23 is updated and is also used as the previous captured image 22 in the next capturing process. If there is a latest image in which it is determined that the instructor 1 is not shown, the image is updated in the image recording unit 9 as the background image data 20.

【0044】(実施例の変形例)図2に示すように、撮
影範囲2の中に黒板3があり、その中で講師1が移動す
る場合の遠隔講義の例では、背景の黒板3に文字4が記
入あるいは削除されたことを講師1の移動であると誤り
検出しないようにする必要がある。このためには、画像
情報の変化の有無だけではなく、パターンマッチングを
行い、講師1の移動により起こった画像情報の変化であ
るかを確認する必要がある。このパターンマッチング
は、二つの動体位置検出ライン6について動体位置検出
を行うことで可能となる。二つの動体位置検出ライン6
の間隔の大きさを文字4の大きさよりも広く設定すれ
ば、文字4は一つの動体位置検出ライン6にのみ画像情
報の変化として検出され、講師1は二つの動体位置検出
ライン6での画像変化として検出される。このため、各
比較ポイント5において二つの動体位置検出ライン6に
変化があるときは講師1の移動、一つの動体位置検出ラ
イン6にのみ変化があるときは文字4の記入または削除
と判断すればよい。これにより、複数の動体位置検出ラ
インを用いることで、講師1と文字4とを区別して検出
することができる。
(Modification of the Embodiment) As shown in FIG. 2, in the example of the remote lecture in which the blackboard 3 is in the shooting range 2 and the instructor 1 moves in the shooting range 2, characters are written on the blackboard 3 in the background. It is necessary not to detect the entry or deletion of item 4 as the movement of the instructor 1 by mistake. For this purpose, it is necessary to perform not only the presence / absence of the change in the image information but also the pattern matching to confirm whether or not the change in the image information occurs due to the movement of the teacher 1. This pattern matching can be performed by detecting the moving body position with respect to the two moving body position detection lines 6. Two moving object position detection lines 6
If the size of the interval is set to be wider than the size of the character 4, the character 4 is detected as a change in the image information only in one moving body position detection line 6, and the instructor 1 makes an image in the two moving body position detection lines 6. Detected as a change. Therefore, if it is determined that the teacher 1 moves when the two moving body position detection lines 6 change at each comparison point 5, and that the character 4 is entered or deleted when only one moving body position detection line 6 changes. Good. As a result, the instructor 1 and the character 4 can be detected separately by using the plurality of moving body position detection lines.

【0045】また、遠隔講義の撮影画像では講師1の移
動方向は、図2ないし4に示すように横方向であるか
ら、動体位置検出ラインは撮影画面に対して横方向であ
ることが望ましい。
Further, in the captured image of the remote lecture, the moving direction of the instructor 1 is the horizontal direction as shown in FIGS. 2 to 4. Therefore, it is desirable that the moving body position detection line is the horizontal direction with respect to the captured screen.

【0046】(実施例の変形)図3、図4に示すような
奥行きがある場所の監視システムとして利用することも
可能である。図3において、被写体としての対象物体と
カメラとの距離が遠くなるにしたがって比較ポイント列
(位置検出ライン6)の間が短くなるようにし、人物が
どこにいても必ず1本の動体位置検出ラインが人物と重
なるように配置する。これにより、横方向あるいは奥行
き方向に検出対象人物の位置を検出できる。また、図4
に示すように、動体位置検出ライン6上において変化が
検出された比較ポイントの数から、近くの人7は遠くの
人8よりも重なった比較ポイントの数が多くなるため、
画像情報に変化が検出される比較ポイントの数が多けれ
ばカメラの近くに存在しており、少なければ遠くに存在
すると判断する。これにより、画面の横方向および奥行
き方向について人物の位置を検出できる。
(Modification of Embodiment) It is also possible to use it as a monitoring system for a place having a depth as shown in FIGS. In FIG. 3, the distance between the comparison point rows (position detection lines 6) is shortened as the distance between the target object as a subject and the camera increases, so that no matter where the person is, one moving object position detection line is always Place it so that it overlaps with the person. As a result, the position of the detection target person can be detected in the horizontal direction or the depth direction. Also, FIG.
As shown in, the number of comparison points in which a change is detected on the moving body position detection line 6 is larger in the person 7 near the person than in the person 8 far away,
If the number of comparison points where the change in the image information is detected is large, it is determined that the comparison points exist near the camera, and if the number is small, it is determined that the comparison points are located far. As a result, the position of the person can be detected in the horizontal direction and the depth direction of the screen.

【0047】(実施例の変形)図8は、画像内に複数の
対象物体が存在するときの位置検出を説明する図であ
る。
(Modification of Embodiment) FIG. 8 is a diagram for explaining position detection when a plurality of target objects are present in an image.

【0048】講師1の他に補助者7が画面内にいたと
き、対象物体と重なる比較ポイント5の集合は二つでき
る。講師1と重なっている比較ポイント5の数は3個あ
り、また画像内に登場している補助者7と重なっている
比較ポイント5の数も3個であり、全体として画面内に
検出対象物体と重なっている比較ポイントの集合は二つ
ある。またその集合を構成する比較ポイントの数は3個
であるから、比較ポイントのサイズの集合が対象物体の
倍あり、かつ一つの集合のサイズは対象物体のサイズの
倍未満になるため、画像内の検出対象は二つであり、そ
れぞれの比較ポイントの集合位置を講師1、補助者7の
位置と判定することができる。また、画像内にOHP画
面が含まれている場合であっても、講師の大きさと違う
ため、比較ポイントの集合のサイズを判断することで、
OHPの変化を講師の位置の移動と誤認することもな
い。
When the assistant 7 in addition to the instructor 1 is on the screen, there can be two sets of comparison points 5 overlapping the target object. The number of comparison points 5 overlapping with the instructor 1 is three, and the number of comparison points 5 overlapping with the assistant 7 appearing in the image is also three. There are two sets of comparison points that overlap with. Further, since the number of comparison points constituting the set is three, the set of comparison point sizes is twice the size of the target object, and the size of one set is less than double the size of the target object. There are two detection targets, and it is possible to determine the collective position of the respective comparison points as the positions of the instructor 1 and the assistant 7. Even if the image includes an OHP screen, it is different from the size of the instructor. Therefore, by judging the size of the set of comparison points,
The change in OHP will not be mistaken for the movement of the teacher's position.

【0049】なお、本実施例は、汎用の情報処理装置に
インストールし、当該情報処理装置をカメラで撮影した
画像を処理することで、当該情報処理装置を図6に示す
撮影画像記録部9、パターン比較部10、動体検出判定
部11、画像・動体検出情報結合部12の機能を実現し
て動体位置検出装置16として機能させるプログラムと
しても実現できる。この場合、プログラムは、記録媒体
に記録され、あるいは通信回線を介して提供することが
できる。
In this embodiment, the information processing apparatus is installed in a general-purpose information processing apparatus, and an image captured by the information processing apparatus is processed. It can also be realized as a program that realizes the functions of the pattern comparison unit 10, the moving body detection determination unit 11, and the image / moving body detection information combining unit 12 to function as the moving body position detection device 16. In this case, the program can be recorded on a recording medium or provided via a communication line.

【0050】[0050]

【発明の効果】以上説明したように、本発明では従来な
ら高価な画像処理装置が必要な高精細画像の動体位置検
出も安価な情報処理装置で実現でき、また、動体の検出
精度を向上させることもできる。また、検出した講師の
位置情報を用いて、サラウンドシステムにも対応した臨
場感のある音声信号を配信先に伝送することができる。
本発明により安価で有りながら、高精細な画像により遠
隔講義を行うことができる遠隔講義システムを構築でき
る。
As described above, according to the present invention, a moving object position detection of a high-definition image, which conventionally requires an expensive image processing apparatus, can be realized by an inexpensive information processing apparatus, and the accuracy of moving object detection is improved. You can also Further, by using the detected position information of the instructor, it is possible to transmit a realistic audio signal compatible with the surround system to the distribution destination.
According to the present invention, it is possible to construct a distance learning system that is inexpensive and can perform distance learning with high-definition images.

【0051】さらに本発明の動体位置検出装置および方
法は、遠隔講義だけでなく、動体の位置を検出してそれ
を伝送先に伝送する監視システムやテレビ会議に利用で
きる。
Further, the moving body position detecting apparatus and method of the present invention can be used not only for remote lectures but also for a monitoring system or a video conference for detecting the position of a moving body and transmitting it to the transmission destination.

【図面の簡単な説明】[Brief description of drawings]

【図1】画像内の比較ポイントの配置例を示す図。FIG. 1 is a diagram showing an arrangement example of comparison points in an image.

【図2】画像内の比較ポイントが直線状に配置された例
を示す図。
FIG. 2 is a diagram showing an example in which comparison points in an image are linearly arranged.

【図3】奥行き方向に動体が移動可能なときにおける動
体位置検出ライン6の配置例を示す図。
FIG. 3 is a diagram showing an arrangement example of a moving body position detection line 6 when a moving body is movable in the depth direction.

【図4】奥行き方向に動体が移動可能なときにおける動
体位置検出ライン6の配置例を示す図。
FIG. 4 is a view showing an arrangement example of a moving body position detection line 6 when a moving body is movable in the depth direction.

【図5】時間軸上に配置された撮影画像と差分画像の例
を示す図。
FIG. 5 is a diagram showing an example of a captured image and a difference image arranged on a time axis.

【図6】本発明実施例の動体位置検出装置の構成を示す
ブロック図。
FIG. 6 is a block diagram showing the configuration of a moving body position detection device according to an embodiment of the present invention.

【図7】本発明実施例の遠隔講義システムの構成を示す
図。
FIG. 7 is a diagram showing a configuration of a remote lecture system according to an embodiment of the present invention.

【図8】複数の対象物体が画面内にある場合を示す図。FIG. 8 is a diagram showing a case where a plurality of target objects are present on the screen.

【符号の説明】[Explanation of symbols]

1 講師 2 撮影範囲 3 黒板 4 黒板上の文字 5 比較ポイント 6 動体位置検出ライン 7 補助者 9 撮影画像記録部 10 パターン比較部 11 動体検出判定部 12 画像・動体検出情報結合部 13 カメラ 14 マイクロホン送信機 15 マイクロホン受信機 16 動体位置検出装置 17 配信装置 18 通信網 19 受講者端末 20 背景画像 21 前々撮影画像 22 前撮影画像 23 最新画像 24 最新画像と背景画像との差分画像 25 前撮影画像と前々撮影画像との差分画像 26 最新画像と前撮影画像の差分画像 27 動体位置検出に利用する差分画像 28 時間経過 1 teacher 2 shooting range 3 blackboard 4 letters on the blackboard 5 comparison points 6 Moving object position detection line 7 assistant 9 Captured image recording section 10 pattern comparison section 11 Moving object detection determination unit 12 Image / moving object detection information combining section 13 cameras 14 microphone transmitter 15 microphone receiver 16 Moving object position detector 17 Delivery device 18 communication network 19 Student terminal 20 background images 21 Image taken before last 22 Previous image 23 latest image 24 Difference image between latest image and background image 25 Difference image between the previous and previous images 26 Difference image between latest image and previous image 27 Difference image used for moving object position detection 28 hours have passed

───────────────────────────────────────────────────── フロントページの続き (72)発明者 鷹野 友英 神奈川県横須賀市光の丘3番1号 株式会 社オプトウェーブ研究所内 Fターム(参考) 2C028 AA00 BB04 BD02 CA12 CA13 5C054 DA09 FC01 FC03 FC07 FC12 FC13 GA04 GB01 GB14 HA16 5L096 AA02 CA04 FA59 FA69 GA08 GA40 GA41 HA04    ─────────────────────────────────────────────────── ─── Continued front page    (72) Inventor Tomohide Takano             3-1, Hikarinooka, Yokosuka City, Kanagawa Stock Association             Company Optowave Research Center F term (reference) 2C028 AA00 BB04 BD02 CA12 CA13                 5C054 DA09 FC01 FC03 FC07 FC12                       FC13 GA04 GB01 GB14 HA16                 5L096 AA02 CA04 FA59 FA69 GA08                       GA40 GA41 HA04

Claims (11)

【特許請求の範囲】[Claims] 【請求項1】 背景の前面にある位置可変の対象物体を
時系列で撮影する撮影手段と、 この撮影された画像を時系列に蓄積する蓄積手段と、 撮影された画像と蓄積された画像とを比較して前記対象
物体の位置を検出する画像処理手段とを備え、 前記画像処理手段は、 前記蓄積された画像と撮影された画像について、画像内
に前記対象物体に少なくとも一つが重なるように配置さ
れた比較ポイントの画素データを取り出す手段と、 この取り出された画像の前記比較ポイントの画素データ
を比較し、変化を検出した比較ポイントの位置を前記対
象物体の移動位置と判定する手段とを含む動体位置検出
装置。
1. A photographing means for photographing a variable position target object in front of a background in time series, a accumulation means for accumulating the photographed images in time series, the photographed image and the accumulated image. And an image processing unit that detects the position of the target object by comparing the image processing unit and the image processing unit, so that at least one of the stored image and the captured image overlaps the target object in the image. Means for extracting the pixel data of the arranged comparison points and means for comparing the pixel data of the comparison points of the extracted image and determining the position of the comparison point where the change is detected as the moving position of the target object. A moving body position detecting device including.
【請求項2】 前記比較ポイントは、前記対象物体のサ
イズ以下の間隔であって、この比較ポイントは画像内に
一以上の線状に配置された請求項1記載の動体位置検出
装置。
2. The moving body position detecting apparatus according to claim 1, wherein the comparison points are arranged at intervals equal to or smaller than the size of the target object, and the comparison points are arranged in one or more lines in the image.
【請求項3】 前記比較ポイントは、前記対象物体の動
きに沿って直線状に配置され、少なくとも1本の線が前
記対象物体と交差するように配置された請求項2記載の
動体位置検出装置。
3. The moving body position detecting apparatus according to claim 2, wherein the comparison points are linearly arranged along the movement of the target object, and at least one line is arranged so as to intersect the target object. .
【請求項4】 前記対象物体と前記撮影手段との距離が
離れるにしたがって、少なくとも1本の前記比較ポイン
トの線が前記対象物体と交差するように前記比較ポイン
トの間隔が小さく設定された請求項2または3記載の動
体位置検出装置。
4. The distance between the comparison points is set to be small so that at least one line of the comparison points intersects the target object as the distance between the target object and the photographing means increases. 2. The moving body position detection device according to 2 or 3.
【請求項5】 前記判定する手段は、時間的に一つ前の
前記比較ポイントの画素データの色または明るさの差を
検出する手段を含む請求項1ないし4のいずれか記載の
動体位置検出装置。
5. The moving body position detection according to claim 1, wherein the determining means includes means for detecting a difference in color or brightness of pixel data of the comparison point immediately preceding in time. apparatus.
【請求項6】 前記判定する手段は、時間的に一つ前の
前記比較ポイントの画素データの色または明るさの差と
時間的に2以上前の画素データとの差を検出する手段を
含む請求項1ないし4のいずれか記載の動体位置検出装
置。
6. The determining means includes means for detecting a difference between a color or brightness difference of pixel data of the comparison point immediately preceding in time and pixel data two or more previous in time. The moving body position detecting device according to claim 1.
【請求項7】 前記判定する手段は、前記対象物体が写
っていない背景画像データに対して色または明るさの差
を検出する手段を含む請求項1ないし4のいずれか記載
の動体位置検出装置。
7. The moving body position detecting apparatus according to claim 1, wherein the determining means includes means for detecting a difference in color or brightness with respect to background image data in which the target object is not captured. .
【請求項8】 背景画像データは対象物体が写っていな
いと判定された最新の画像データである請求項7記載の
動体位置検出装置。
8. The moving body position detecting apparatus according to claim 7, wherein the background image data is the latest image data in which it is determined that the target object is not captured.
【請求項9】 前記対象物体と撮影手段との距離を、前
記対象物体と交差する比較ポイントの数により検出する
手段を含む請求項1ないし8のいずれか記載の動体位置
検出装置。
9. The moving body position detecting device according to claim 1, further comprising means for detecting a distance between the target object and the photographing means by the number of comparison points intersecting with the target object.
【請求項10】 画像内に前記対象物体との重なりが検
出された比較ポイントの集合が2以上あり、当該集合の
サイズが前記対象物体のサイズとほぼ等しい場合には、
当該比較ポイントの集合の一つを一つの対象物体の位置
と判定する手段を含む請求項1ないし9のいずれか記載
の動体位置検出装置。
10. When there are two or more sets of comparison points in which an overlap with the target object is detected in the image and the size of the set is substantially equal to the size of the target object,
10. The moving body position detecting apparatus according to claim 1, further comprising means for determining one of the sets of comparison points as a position of one target object.
【請求項11】 背景の前面にある位置可変の対象物体
を時系列的で継続して撮影し、 撮影された画像データを時系列に蓄積し、 蓄積された過去の画像データと撮影された画像データと
から、画像内に線状に配置された比較ポイントの少なく
とも一つと前記対象物体との重なった位置の画素データ
を取り出し、 この取り出した画素データを比較して変化が検出された
ときは、その変化した比較ポイントの位置を前記対象物
体の移動位置と判定する動体位置検出方法。
11. A variable-position target object in front of a background is continuously photographed in time series, the photographed image data is accumulated in time series, and accumulated past image data and photographed images are collected. From the data, pixel data at a position where at least one of the comparison points linearly arranged in the image and the target object overlap is extracted, and when a change is detected by comparing the extracted pixel data, A moving body position detecting method for determining the changed position of the comparison point as the moving position of the target object.
JP2002050140A 2002-02-26 2002-02-26 Device and method for detecting position of moving object Ceased JP2003256842A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002050140A JP2003256842A (en) 2002-02-26 2002-02-26 Device and method for detecting position of moving object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002050140A JP2003256842A (en) 2002-02-26 2002-02-26 Device and method for detecting position of moving object

Publications (1)

Publication Number Publication Date
JP2003256842A true JP2003256842A (en) 2003-09-12

Family

ID=28662470

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002050140A Ceased JP2003256842A (en) 2002-02-26 2002-02-26 Device and method for detecting position of moving object

Country Status (1)

Country Link
JP (1) JP2003256842A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006162692A (en) * 2004-12-02 2006-06-22 Hosei Univ Automatic lecture content creating system
JP2006186458A (en) * 2004-12-27 2006-07-13 Secom Co Ltd Image signal processor and sensing apparatus
JP2012213063A (en) * 2011-03-31 2012-11-01 Nec Corp Image processing device, image processing system, image processing method, and image processing program
US8582810B2 (en) 2009-01-28 2013-11-12 Bae Systems Plc Detecting potential changed objects in images

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006162692A (en) * 2004-12-02 2006-06-22 Hosei Univ Automatic lecture content creating system
JP2006186458A (en) * 2004-12-27 2006-07-13 Secom Co Ltd Image signal processor and sensing apparatus
US8582810B2 (en) 2009-01-28 2013-11-12 Bae Systems Plc Detecting potential changed objects in images
JP2012213063A (en) * 2011-03-31 2012-11-01 Nec Corp Image processing device, image processing system, image processing method, and image processing program

Similar Documents

Publication Publication Date Title
WO2017215295A1 (en) Camera parameter adjusting method, robotic camera, and system
CN106251334B (en) A kind of camera parameters method of adjustment, instructor in broadcasting&#39;s video camera and system
KR101231518B1 (en) Camera control apparatus, camera system, electronic conference system, and camera control method
JP4715909B2 (en) Image processing apparatus and method, image processing system, and image processing program
CN108307183A (en) Virtual scene method for visualizing and system
JP2007158680A (en) Tracking imaging apparatus and tracking imaging system utilizing it
JP2007019671A (en) Image communication system and image processing program
JP2011030063A (en) Video conference system, server apparatus, and video conference program
US20220199120A1 (en) Image processing device, image processing method, and image processing program
JP2005033570A (en) Method and system for providing mobile body image
WO2009119288A1 (en) Communication system and communication program
CN108563410B (en) Display control method and electronic equipment
JP2003256842A (en) Device and method for detecting position of moving object
KR101468347B1 (en) Method and arrangement for identifying virtual visual information in images
JP2006054830A (en) Image compression communication method and device
JP2008182321A (en) Image display system
JP2004289779A (en) Mobile body imaging method and mobile body imaging system
JP6857032B2 (en) Control device, system, control method of control device
CN109391769A (en) Control equipment, control method and storage medium
KR100472102B1 (en) Method and Device for Creating Paduk Record of Go
KR20180085432A (en) System for Performing Linkage Operation of Augmented Reality and Event in Association with Camera and Driving Method Thereof
JP2003179930A (en) Method and apparatus for extracting dynamic object
JPH09107561A (en) Automatic selection device of two cameras, method of automatic selection of two cameras and its application
KR102571677B1 (en) AI Studio for Online Lectures
JP5398359B2 (en) Information processing apparatus, imaging apparatus, and control method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040519

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060808

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061010

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061205

A045 Written measure of dismissal of application

Free format text: JAPANESE INTERMEDIATE CODE: A045

Effective date: 20070424