JP2021119686A5 - - Google Patents

Download PDF

Info

Publication number
JP2021119686A5
JP2021119686A5 JP2021071382A JP2021071382A JP2021119686A5 JP 2021119686 A5 JP2021119686 A5 JP 2021119686A5 JP 2021071382 A JP2021071382 A JP 2021071382A JP 2021071382 A JP2021071382 A JP 2021071382A JP 2021119686 A5 JP2021119686 A5 JP 2021119686A5
Authority
JP
Japan
Prior art keywords
image
person
camera work
specific person
trimming
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021071382A
Other languages
Japanese (ja)
Other versions
JP2021119686A (en
JP7261261B2 (en
Filing date
Publication date
Priority claimed from JP2019092321A external-priority patent/JP6873186B2/en
Application filed filed Critical
Priority to JP2021071382A priority Critical patent/JP7261261B2/en
Publication of JP2021119686A publication Critical patent/JP2021119686A/en
Publication of JP2021119686A5 publication Critical patent/JP2021119686A5/ja
Application granted granted Critical
Publication of JP7261261B2 publication Critical patent/JP7261261B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (13)

映像を取得する取得部と、
特定人物を指定する特定人物指定受付部と、
カメラワークを指定するカメラワーク指定受付部と、
前記映像中の人物を認識する人物認識部と、
前記映像を用いて、前記映像中の人物の骨格を判定する骨格判定部と、
前記人物認識部の認識結果を用いて前記映像中の特定人物を識別し、前記骨格判定部により判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の部位の前記映像上の位置関係を特定する人物特定部と、
前記特定人物の部位の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定するトリミングフレームサイズ決定部と、
前記特定人物の部位の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御するトリミングフレーム制御部と、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされたトリミング映像を、前記カメラワークに対応するカメラワーク映像として出力するトリミング部と
を有する映像処理装置。
The acquisition department that acquires the video and
A specific person designation reception department that specifies a specific person, and
Camerawork designation reception desk that specifies camerawork and
A person recognition unit that recognizes a person in the image,
A skeleton determination unit that determines the skeleton of a person in the image using the image,
A specific person in the image is identified by using the recognition result of the person recognition unit, and the skeleton of the specific person among the skeletons determined by the skeleton determination unit is used on the image of the part of the specific person. The person identification part that identifies the positional relationship and
Trimming frame size determination for determining the size of a trimming frame for trimming a part of the image using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work . Department and
Trimming that controls the position of the image of the trimming frame corresponding to the specified camera work by using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work. Frame control unit and
A trimming unit that trims the image in the trimming frame from the image and outputs the trimmed image as a camera work image corresponding to the camera work .
Video processing device with.
前記カメラワークに対応する構図が定められた構図情報が格納された構図情報記憶部を備える、
請求項1に記載の映像処理装置。
A composition information storage unit for storing composition information in which a composition corresponding to the camera work is defined is provided.
The video processing apparatus according to claim 1.
前記人物認識部又は前記骨格判定部の少なくともいずれかは、前記映像の解像度よりも低い解像度の映像を用いて、人物を認識し、又は、骨格を判定する
請求項1又は請求項2に記載の映像処理装置。
At least one of the person recognition unit and the skeleton determination unit recognizes a person or determines the skeleton by using an image having a resolution lower than the resolution of the image.
The video processing apparatus according to claim 1 or 2.
前記人物認識部は、前記特定人物の顔の向きを判定し、
前記トリミングフレーム制御部は、前記特定人物の顔の向きを考慮し、トリミングフレームの位置を制御する
請求項1から請求項3のいずれかに記載の映像処理装置。
The person recognition unit determines the orientation of the face of the specific person and determines the direction of the face of the specific person.
The trimming frame control unit controls the position of the trimming frame in consideration of the orientation of the face of the specific person.
The video processing apparatus according to any one of claims 1 to 3.
前記特定人物の部位の指定を受け付ける部位指定受付部を有する
請求項1から請求項4のいずれかに記載の映像処理装置。
It has a part designation reception part that accepts the designation of the part of the specific person.
The video processing apparatus according to any one of claims 1 to 4.
前記トリミング部から出力された映像を加工し、擬似的なフォーカスイン又はフォーカスアウトの映像を出力する映像加工部を有する
請求項1から請求項5のいずれかに記載の映像処理装置。
It has an image processing unit that processes the image output from the trimming unit and outputs a pseudo focus-in or focus-out image .
The video processing apparatus according to any one of claims 1 to 5.
前記カメラワーク映像に重畳する重畳画像を取得する重畳画像取得部と、
前記カメラワーク映像に重畳画像を重畳する重畳部と
を有する請求項1から請求項6のいずれかに記載の映像処理装置。
A superimposed image acquisition unit that acquires a superimposed image superimposed on the camera work image,
A superimposing portion that superimposes a superimposing image on the camera work image and
The video processing apparatus according to any one of claims 1 to 6.
少なくとも2以上の映像処理装置と、表示部と、スイッチング部とを有し、
前記映像処理装置は、
映像を取得する取得部と、
特定人物を指定する特定人物指定受付部と、
カメラワークを指定するカメラワーク指定受付部と、
前記映像中の人物を認識する人物認識部と、
前記映像を用いて、前記映像中の人物の骨格を判定する骨格判定部と、
前記人物認識部の認識結果を用いて前記映像中の特定人物を識別し、前記骨格判定部により判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の部位の映像上の位置関係を特定する人物特定部と、
前記特定人物の部位の映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定するトリミングフレームサイズ決定部と、
前記特定人物の部位の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御するトリミングフレーム制御部と、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされたトリミング映像を、前記カメラワークに対応するカメラワーク映像として出力するトリミング部と
を有し、
前記表示部は、
前記映像と、少なくとも二以上の前記カメラワーク映像とを表示し、
前記スイッチング部は、
少なくとも二以上の前記カメラワーク映像のうち、ユーザにより指定されたひとつのカメラワーク映像を出力する、
スイッチングシステム。
It has at least two or more video processing devices, a display unit, and a switching unit.
The video processing device
The acquisition department that acquires the video and
A specific person designation reception department that specifies a specific person, and
Camerawork designation reception desk that specifies camerawork and
A person recognition unit that recognizes a person in the image ,
A skeleton determination unit that determines the skeleton of a person in the image using the image,
A specific person in the image is identified by using the recognition result of the person recognition unit, and among the skeletons determined by the skeleton determination unit, the skeleton of the specific person is used to position the part of the specific person on the image . The person identification department that identifies the relationship and
A trimming frame size determination unit that determines the size of a trimming frame that trims a part of the image using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work . ,
Trimming that controls the position of the image of the trimming frame corresponding to the specified camera work by using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work. Frame control unit and
A trimming unit that trims the image in the trimming frame from the image and outputs the trimmed image as a camera work image corresponding to the camera work .
Have,
The display unit
Displaying the image and at least two or more of the camera work images ,
The switching unit is
Outputs one camera work image specified by the user out of at least two or more of the camera work images.
Switching system.
前記表示部は、ライン映像として出力されているカメラワーク映像と、他のカメラワーク映像と、を区別して表示する、
請求項8に記載のスイッチングシステム。
The display unit distinguishes between a camera work image output as a line image and another camera work image.
The switching system according to claim 8.
映像を取得する取得処理と、
特定人物の指定を受付ける特定人物指定受付処理と、
カメラワークの指定を受付けるカメラワーク指定受付処理と、
前記映像中の人物を認識する人物認識処理と、
前記映像を用いて、前記映像中の人物の骨格を判定する骨格判定処理と、
前記人物認識処理の認識結果を用いて前記映像中の特定人物を識別し、前記骨格判定処理により判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の部位の映像上の位置関係を特定する人物特定処理と、
前記特定人物の部位の映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定するトリミングフレームサイズ決定処理と、
前記特定人物の部位の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御するトリミングフレーム制御処理と、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされた映像を、前記指定されたカメラワークに対応するカメラワーク映像として出力するトリミング処理と
を、コンピュータに実行させるプログラム。
The acquisition process to acquire the video and
Specific person designation reception processing that accepts the designation of a specific person, and
Accepting camerawork designations Camerawork designation acceptance processing and
The person recognition process for recognizing the person in the image and
A skeleton determination process for determining the skeleton of a person in the image using the image, and
A specific person in the image is identified using the recognition result of the person recognition process, and the skeleton of the specific person among the skeletons determined by the skeleton determination process is used to position the part of the specific person on the image . Person identification process to identify the relationship and
Trimming frame size determination process for determining the size of a trimming frame for trimming a part of the image using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work . When,
The position of the image of the trimming frame corresponding to the specified camera work is controlled by using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work. Trimming frame control processing and
A program that causes a computer to perform a trimming process of trimming an image in the trimming frame from the image and outputting the trimmed image as a camera work image corresponding to the specified camera work .
映像を取得する取得処理と、
特定人物の指定を受付ける特定人物指定処理と、
カメラワークの指定を受付けるカメラワーク指定処理と、
前記映像中の人物を認識する人物認識処理と、
前記映像を用いて、前記映像中の人物の骨格を判定する骨格判定処理と、
前記人物認識処理の認識結果を用いて前記映像中の特定人物を識別し、前記骨格判定処理により判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の全身の映像上の位置関係を特定する人物特定処理と、
前記特定人物の全身の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報と、を用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定するトリミングフレームサイズ決定処理と、
前記特定人物の全身の映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御するトリミングフレーム制御処理と、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされた映像を、前記指定されたカメラワークに対応するカメラワーク映像として出力するトリミング処理と、
前記映像と、少なくとも二以上の特定人物又は少なくとも二以上のカメラワークに対応した少なくとも二以上のカメラワーク映像とを、表示する表示処理と
表示されている少なくとも二以上のカメラワーク映像のうち、ユーザにより指定されたひとつのカメラワーク映像を出力するスイッチング処理と
を、コンピュータに実行させるプログラム。
The acquisition process to acquire the video and
Specific person designation processing that accepts the designation of a specific person, and
Camera work designation processing that accepts camera work designation and
The person recognition process for recognizing the person in the image and
A skeleton determination process for determining the skeleton of a person in the image using the image, and
A specific person in the image is identified using the recognition result of the person recognition process, and the skeleton of the specific person among the skeletons determined by the skeleton determination process is used to position the whole body of the specific person on the image . Person identification process to identify the relationship and
Trimming frame size determination for determining the size of a trimming frame for trimming a part of the image using the positional relationship of the whole body of the specific person on the image and the composition information corresponding to the specified camera work. Processing and
Trimming that controls the position of the image of the trimming frame corresponding to the specified camera work by using the positional relationship on the image of the whole body of the specific person and the composition information corresponding to the specified camera work. Frame control processing and
A trimming process that trims the image in the trimming frame from the image and outputs the trimmed image as a camera work image corresponding to the specified camera work .
A user among at least two or more camerawork images displayed as a display process for displaying the above-mentioned image and at least two or more camerawork images corresponding to at least two or more specific persons or at least two or more camerawork. Switching process to output one camera work image specified by
A program that causes a computer to execute.
コンピュータは、
映像を取得し、
特定人物の指定を受付け、
カメラワークの指定を受付け、
前記映像中の人物を認識し、
前記映像を用いて、前記映像中の人物の骨格を判定し、
前記人物の認識結果を用いて前記映像中の特定人物を識別し、前記判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の部位の前記映像上の位置関係を特定し、
前記特定人物の部位の前記映像上の位置関係と、前記カメラワークに対応する構図情報と、を用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定し、
前記特定人物の部位の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報と、を用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御し、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされた映像を、前記指定されたカメラワークに対応するカメラワーク映像として出力する
映像処理方法。
Computer
Get the video ,
Accepting the designation of a specific person ,
Accepting camera work designation,
Recognize the person in the video
Using the video , the skeleton of the person in the video is determined.
The specific person in the image is identified by using the recognition result of the person, and the positional relationship of the part of the specific person on the image is specified by using the skeleton of the specific person among the determined skeletons.
The size of the trimming frame for trimming a part of the image is determined by using the positional relationship of the specific person's part on the image and the composition information corresponding to the camera work .
The position of the image of the trimming frame corresponding to the specified camera work is controlled by using the positional relationship of the specific person's part on the image and the composition information corresponding to the specified camera work. ,
The image in the trimming frame is trimmed from the image, and the trimmed image is output as a camera work image corresponding to the specified camera work .
Video processing method.
コンピュータは、
映像を取得し、
特定人物の指定を受付け、
カメラワークの指定を受付け、
前記映像中の人物を認識し、
前記映像を用いて、前記映像中の人物の骨格を判定し、
前記人物の認識結果を用いて前記映像中の特定人物を識別し、前記判定された骨格のうち前記特定人物の骨格を用いて、前記特定人物の全身の前記映像上の位置関係を特定し、
前記特定人物の全身の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報と、を用いて、前記映像の一部をトリミングするトリミングフレームのサイズを決定し、
前記特定人物の全身の前記映像上の位置関係と、前記指定されたカメラワークに対応する構図情報とを用いて、前記指定されたカメラワークに対応するトリミングフレームの前記映像の位置を制御し、
前記映像から前記トリミングフレーム内の映像をトリミングし、トリミングされた映像を、前記指定されたカメラワークに対応するカメラワーク映像として出力し、
前記映像と、少なくとも二以上の特定人物又は少なくとも二以上のカメラワークに対応する少なくとも二以上のカメラワーク映像とを、表示し、
表示されている少なくとも二以上のカメラワーク映像のうち、ユーザにより指定されたひとつのカメラワーク映像を出力する
スイッチング方法。
Computer
Get the video ,
Accepting the designation of a specific person ,
Accepting camera work designation,
Recognize the person in the video
Using the video , the skeleton of the person in the video is determined.
The specific person in the image is identified by using the recognition result of the person, and the positional relationship of the whole body of the specific person on the image is specified by using the skeleton of the specific person among the determined skeletons.
The size of the trimming frame for trimming a part of the image is determined by using the positional relationship of the whole body of the specific person on the image and the composition information corresponding to the specified camera work .
The position of the image of the trimming frame corresponding to the specified camera work is controlled by using the positional relationship of the whole body of the specific person on the image and the composition information corresponding to the specified camera work. ,
The image in the trimming frame is trimmed from the image, and the trimmed image is output as a camera work image corresponding to the specified camera work .
The image and at least two or more camera work images corresponding to at least two or more specific persons or at least two or more camera works are displayed.
Outputs one camerawork image specified by the user out of at least two or more displayed camerawork images.
Switching method.
JP2021071382A 2019-05-15 2021-04-20 Information processing device, switching system, program and method Active JP7261261B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021071382A JP7261261B2 (en) 2019-05-15 2021-04-20 Information processing device, switching system, program and method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019092321A JP6873186B2 (en) 2019-05-15 2019-05-15 Information processing equipment, switching systems, programs and methods
JP2021071382A JP7261261B2 (en) 2019-05-15 2021-04-20 Information processing device, switching system, program and method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019092321A Division JP6873186B2 (en) 2019-05-15 2019-05-15 Information processing equipment, switching systems, programs and methods

Publications (3)

Publication Number Publication Date
JP2021119686A JP2021119686A (en) 2021-08-12
JP2021119686A5 true JP2021119686A5 (en) 2022-07-21
JP7261261B2 JP7261261B2 (en) 2023-04-19

Family

ID=73221792

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019092321A Active JP6873186B2 (en) 2019-05-15 2019-05-15 Information processing equipment, switching systems, programs and methods
JP2021071382A Active JP7261261B2 (en) 2019-05-15 2021-04-20 Information processing device, switching system, program and method

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019092321A Active JP6873186B2 (en) 2019-05-15 2019-05-15 Information processing equipment, switching systems, programs and methods

Country Status (1)

Country Link
JP (2) JP6873186B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7362354B2 (en) * 2019-08-26 2023-10-17 キヤノン株式会社 Information processing device, inspection system and information processing method

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004274428A (en) * 2003-03-10 2004-09-30 Konica Minolta Holdings Inc Image processing method, image processor, recording medium and program
JP2005062320A (en) * 2003-08-08 2005-03-10 Konica Minolta Photo Imaging Inc Test-printed print, test-printed print forming system, and test-printed print forming method
JP2005244572A (en) * 2004-02-26 2005-09-08 Fuji Photo Film Co Ltd Method and apparatus for detecting defective trimming image, and program
JP4894712B2 (en) * 2007-10-17 2012-03-14 ソニー株式会社 Composition determination apparatus, composition determination method, and program
JP4869270B2 (en) * 2008-03-10 2012-02-08 三洋電機株式会社 Imaging apparatus and image reproduction apparatus
JP5910639B2 (en) * 2014-01-09 2016-04-27 株式会社メイクソフトウェア Image processing apparatus, image processing method, and computer program

Similar Documents

Publication Publication Date Title
JP4459788B2 (en) Facial feature matching device, facial feature matching method, and program
JP5423406B2 (en) Information processing apparatus, information processing system, and information processing method
JP6534292B2 (en) Head mounted display and control method of head mounted display
US11137824B2 (en) Physical input device in virtual reality
GB2536775A (en) Method and system for detecting that an object of interest has re-entered a field of view of an imaging device
TW200427968A (en) Image processing device
US20180220080A1 (en) Automated Digital Magnifier System With Hand Gesture Controls
US10924660B2 (en) Augmented reality markers in digital photography
JP2011203984A (en) Navigation device, navigation image generation method, and program
JP2011152593A (en) Robot operation device
JP2021119686A5 (en)
CN114332429A (en) Display method and device for augmented reality AR scene
CN113302907A (en) Photographing method, photographing device, photographing apparatus, and computer-readable storage medium
CN114930798A (en) Shooting object switching method and device, and image processing method and device
CN110246206B (en) Eyebrow penciling assisting method, device and system
JP6621565B2 (en) Display control apparatus, display control method, and program
WO2015072091A1 (en) Image processing device, image processing method, and program storage medium
CN110622501A (en) Image processing apparatus and electronic device
JP7261261B2 (en) Information processing device, switching system, program and method
CN113302908A (en) Control method, handheld cloud deck, system and computer readable storage medium
US20050105793A1 (en) Identifying a target region of a three-dimensional object from a two-dimensional image
JP5910639B2 (en) Image processing apparatus, image processing method, and computer program
US20180047169A1 (en) Method and apparatus for extracting object for sticker image
US20150042745A1 (en) File operation method and file operation apparatus for use in network video conference system
WO2017195646A1 (en) Work assistance device