JP7190919B2 - 画像解析システム - Google Patents

画像解析システム Download PDF

Info

Publication number
JP7190919B2
JP7190919B2 JP2019011646A JP2019011646A JP7190919B2 JP 7190919 B2 JP7190919 B2 JP 7190919B2 JP 2019011646 A JP2019011646 A JP 2019011646A JP 2019011646 A JP2019011646 A JP 2019011646A JP 7190919 B2 JP7190919 B2 JP 7190919B2
Authority
JP
Japan
Prior art keywords
sensor
processor
image
image analysis
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019011646A
Other languages
English (en)
Japanese (ja)
Other versions
JP2020119398A (ja
JP2020119398A5 (enExample
Inventor
公嘉 水野
俊行 黒崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Priority to JP2019011646A priority Critical patent/JP7190919B2/ja
Priority to PCT/JP2020/001715 priority patent/WO2020153298A1/ja
Priority to US17/423,935 priority patent/US12103162B2/en
Priority to CN202080009904.4A priority patent/CN113316505B/zh
Publication of JP2020119398A publication Critical patent/JP2020119398A/ja
Publication of JP2020119398A5 publication Critical patent/JP2020119398A5/ja
Application granted granted Critical
Publication of JP7190919B2 publication Critical patent/JP7190919B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a three-dimensional [3D] space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00—Manipulators not otherwise provided for
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30244—Camera pose

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)
  • Image Analysis (AREA)
JP2019011646A 2019-01-25 2019-01-25 画像解析システム Active JP7190919B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019011646A JP7190919B2 (ja) 2019-01-25 2019-01-25 画像解析システム
PCT/JP2020/001715 WO2020153298A1 (ja) 2019-01-25 2020-01-20 画像解析システム
US17/423,935 US12103162B2 (en) 2019-01-25 2020-01-20 Robotic device having an image analysis system
CN202080009904.4A CN113316505B (zh) 2019-01-25 2020-01-20 图像分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019011646A JP7190919B2 (ja) 2019-01-25 2019-01-25 画像解析システム

Publications (3)

Publication Number Publication Date
JP2020119398A JP2020119398A (ja) 2020-08-06
JP2020119398A5 JP2020119398A5 (enExample) 2021-05-06
JP7190919B2 true JP7190919B2 (ja) 2022-12-16

Family

ID=71735584

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019011646A Active JP7190919B2 (ja) 2019-01-25 2019-01-25 画像解析システム

Country Status (4)

Country Link
US (1) US12103162B2 (enExample)
JP (1) JP7190919B2 (enExample)
CN (1) CN113316505B (enExample)
WO (1) WO2020153298A1 (enExample)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117999578A (zh) * 2021-09-24 2024-05-07 索尼集团公司 信息处理系统、信息处理方法和程序

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003291084A (ja) 2002-03-28 2003-10-14 Toshiba Corp ロボット並びにロボットの視野制御装置及び方法
JP2004201085A (ja) 2002-12-19 2004-07-15 Hitachi Ltd 視覚情報処理装置および適用システム
WO2018159177A1 (en) 2017-02-28 2018-09-07 Mitsubishi Electric Corporation Vehicle automated parking system and method
JP2018529175A (ja) 2015-08-28 2018-10-04 インペリアル・カレッジ・オブ・サイエンス・テクノロジー・アンド・メディスン 多方向カメラを使用した空間のマッピング

Family Cites Families (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4163183A (en) 1975-10-28 1979-07-31 Unimation, Inc. Programmable automatic assembly system
US4370721A (en) 1980-09-02 1983-01-25 Cincinnati Milacron Inc. Method for modifying programmed positions by using a programmably controlled surface sensing element
JPS5822411A (ja) 1981-08-04 1983-02-09 Fanuc Ltd 工業用ロボツト制御方式
JPS62232006A (ja) 1986-04-02 1987-10-12 Yokogawa Electric Corp ロボツト・システム
US5579444A (en) 1987-08-28 1996-11-26 Axiom Bildverarbeitungssysteme Gmbh Adaptive vision-based controller
US4865791A (en) 1988-02-03 1989-09-12 The Excello Specialty Company Method of forming a surface protector with an expansible pocket
US4969108A (en) 1988-04-08 1990-11-06 Cincinnati Milacron Inc. Vision seam tracking method and apparatus for a manipulator
US5319443A (en) 1991-03-07 1994-06-07 Fanuc Ltd Detected position correcting method
JPH08150581A (ja) 1994-11-25 1996-06-11 Yaskawa Electric Corp ロボット制御装置
JPH08202679A (ja) * 1995-01-23 1996-08-09 Sony Corp ロボット
US6610917B2 (en) * 1998-05-15 2003-08-26 Lester F. Ludwig Activity indication, external source, and processing loop provisions for driven vibrating-element environments
JP2001322079A (ja) 2000-05-15 2001-11-20 Sony Corp 脚式移動ロボット及びその動作教示方法
US6442451B1 (en) 2000-12-28 2002-08-27 Robotic Workspace Technologies, Inc. Versatile robot control system
JP2002239952A (ja) 2001-02-21 2002-08-28 Sony Corp ロボット装置、ロボット装置の行動制御方法、プログラム及び記録媒体
US7076332B2 (en) 2002-01-18 2006-07-11 National Instruments Corporation System and method for invoking execution of a sequence of operations that includes motion control, machine vision, and data acquisition (DAQ) functionality
KR100877983B1 (ko) 2002-03-11 2009-01-12 주식회사 엘지이아이 로봇의 목표물 추종장치 및 방법
US7076322B2 (en) 2002-03-29 2006-07-11 National Instruments Corporation System and method for satisfying move constraints when performing a motion control sequence
CN1476963A (zh) 2002-06-17 2004-02-25 ������������ʽ���� 分布式控制系统和分布式控制方法
WO2004033159A1 (ja) 2002-10-11 2004-04-22 Fujitsu Limited ロボット制御アルゴリズム構築装置、ロボット制御アルゴリズム構築プログラム、ロボット制御装置、ロボット制御プログラム、およびロボット
JP4007899B2 (ja) * 2002-11-07 2007-11-14 オリンパス株式会社 運動検出装置
US6865441B2 (en) 2002-12-19 2005-03-08 National Instruments Corporation Parallel trajectory generation, interpolation, and control in a motion control application
US6804580B1 (en) 2003-04-03 2004-10-12 Kuka Roboter Gmbh Method and control system for controlling a plurality of robots
JP4587738B2 (ja) 2003-08-25 2010-11-24 ソニー株式会社 ロボット装置及びロボットの姿勢制御方法
JP4661074B2 (ja) 2004-04-07 2011-03-30 ソニー株式会社 情報処理システム、情報処理方法、並びにロボット装置
CN100480004C (zh) 2004-07-15 2009-04-22 上海交通大学 焊接机器人单目视觉传感器的手-眼关系快速标定方法
KR20070075957A (ko) 2006-01-17 2007-07-24 주식회사 로보스타 멀티 타스킹을 위한 타스크 기반 로봇 제어시스템
FR2896441B1 (fr) 2006-01-23 2009-07-03 Jerome Grosbois Procede et systeme permettant la prehension automatisee de piece(s)
JP2008183690A (ja) 2007-01-31 2008-08-14 Nachi Fujikoshi Corp ロボット制御装置及びロボット制御システム
AU2008353981B2 (en) 2008-04-02 2013-01-31 Irobot Corporation Robotics systems
JP5241626B2 (ja) 2009-06-18 2013-07-17 アイシン・エィ・ダブリュ工業株式会社 高耐熱性を有すロックアップクラッチ
JP4837116B2 (ja) 2010-03-05 2011-12-14 ファナック株式会社 視覚センサを備えたロボットシステム
JP5321532B2 (ja) 2010-04-28 2013-10-23 株式会社安川電機 ロボットキャリブレーション装置及びキャリブレーション方法
US9014848B2 (en) 2010-05-20 2015-04-21 Irobot Corporation Mobile robot system
JP5671281B2 (ja) * 2010-08-20 2015-02-18 キヤノン株式会社 位置姿勢計測装置、位置姿勢計測装置の制御方法及びプログラム
JP2013151045A (ja) 2012-01-25 2013-08-08 Toshiba Tec Corp 情報処理装置及びプログラム
EP2634670A1 (en) * 2012-03-01 2013-09-04 Asplund Data AB A data input device
JP5943676B2 (ja) 2012-03-30 2016-07-05 株式会社デンソーウェーブ ロボットの制御システム及びエンコーダシステム
CA2874101C (en) * 2012-05-30 2021-01-12 Ecole Polytechnique Federale De Lausanne (Epfl) Apparatus and method for restoring voluntary control of locomotion in neuromotor impairments
EP2994803A1 (en) 2013-05-10 2016-03-16 CNH Industrial America LLC Control architecture for multi-robot system
JP6261209B2 (ja) 2013-07-04 2018-01-17 キヤノン株式会社 複数の生産装置を備えるシステム
WO2015111261A1 (ja) 2014-01-21 2015-07-30 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
JP2014097572A (ja) 2014-02-28 2014-05-29 Seiko Epson Corp 把持ロボットおよび把持方法
EP3107069A4 (en) 2014-03-24 2017-10-04 Hitachi, Ltd. Object detection apparatus, object detection method, and mobile robot
US9931753B1 (en) * 2014-07-24 2018-04-03 Boston Dynamics, Inc. Methods and devices for automatic gait transition
JP6375810B2 (ja) 2014-09-16 2018-08-22 セイコーエプソン株式会社 画像処理装置、及びロボットシステム
JP6736257B2 (ja) * 2015-04-02 2020-08-05 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
KR102055317B1 (ko) 2015-08-25 2020-01-22 카와사키 주코교 카부시키 카이샤 로봇시스템
US10976343B2 (en) 2015-09-09 2021-04-13 Sony Corporation Sensor device, sensor system, and information processing device
KR102235166B1 (ko) 2015-09-21 2021-04-02 주식회사 레인보우로보틱스 실시간 로봇 시스템, 로봇 시스템 제어 장치 및 로봇 시스템 제어 방법
US10173324B2 (en) 2015-11-16 2019-01-08 Abb Schweiz Ag Facilitating robot positioning
JP6604831B2 (ja) * 2015-11-30 2019-11-13 キヤノン株式会社 画像処理装置、画像処理装置の制御方法及びプログラム
JP6714393B2 (ja) 2016-03-02 2020-06-24 キヤノン株式会社 計測装置、システム、計測方法、および物品の製造方法
US10241514B2 (en) * 2016-05-11 2019-03-26 Brain Corporation Systems and methods for initializing a robot to autonomously travel a trained route
JP6514166B2 (ja) 2016-09-16 2019-05-15 ファナック株式会社 ロボットの動作プログラムを学習する機械学習装置，ロボットシステムおよび機械学習方法
RU2647670C1 (ru) * 2016-09-27 2018-03-16 Общество с ограниченной ответственностью "Аби Девелопмент" Автоматизированные способы и системы выявления на изображениях, содержащих документы, фрагментов изображений для облегчения извлечения информации из выявленных содержащих документы фрагментов изображений
JP2018085575A (ja) 2016-11-21 2018-05-31 カシオ計算機株式会社 画像処理装置、解析システム、画像処理方法及びプログラム
CN108161931A (zh) 2016-12-07 2018-06-15 广州映博智能科技有限公司 基于视觉的工件自动识别及智能抓取系统
JP2018126796A (ja) 2017-02-06 2018-08-16 セイコーエプソン株式会社 制御装置、ロボットおよびロボットシステム
JP6880982B2 (ja) 2017-04-21 2021-06-02 セイコーエプソン株式会社 制御装置およびロボットシステム
US10621751B2 (en) 2017-06-16 2020-04-14 Seiko Epson Corporation Information processing device and computer program
WO2019073920A1 (ja) * 2017-10-12 2019-04-18 ソニー株式会社 情報処理装置、移動装置、および方法、並びにプログラム
CN108607819A (zh) 2018-04-25 2018-10-02 重庆邮电大学 物料分拣系统及方法
US10946528B2 (en) 2018-06-01 2021-03-16 Irepa International, LLC Autonomous companion mobile robot and system
JP6473917B1 (ja) 2018-06-22 2019-02-27 ソフトサーボシステムズ株式会社 モーション制御プログラム、モーション制御方法及びモーション制御装置
KR102258667B1 (ko) 2018-06-22 2021-06-01 소프트 서보 시스템즈 가부시키가이샤 모션 제어 프로그램, 모션 제어 방법 및 모션 제어 장치
EP3812855B1 (en) 2018-06-22 2024-01-17 Soft Servo Systems, Inc. Motion control program, motion control method, and motion control device
JP7309371B2 (ja) * 2019-01-25 2023-07-18 株式会社ソニー・インタラクティブエンタテインメント ロボット制御システム
JP7417356B2 (ja) * 2019-01-25 2024-01-18 株式会社ソニー・インタラクティブエンタテインメント ロボット制御システム
US12179337B2 (en) 2019-12-18 2024-12-31 Carla R. Gillett Modular robotic service vehicle
US11498211B2 (en) 2019-12-30 2022-11-15 Intrinsic Innovation Llc Composability framework for robotic control system
US11393434B2 (en) * 2020-07-09 2022-07-19 Industrial Technology Research Institute Method, processing device, and display system for information display
CN112043397B (zh) * 2020-10-08 2021-09-24 深圳市精锋医疗科技有限公司 手术机器人及其运动错误检测方法、检测装置
CN113524235B (zh) * 2021-07-15 2022-03-11 华中科技大学 一种面向动态交互的对象肢体时变刚度辨识方法及装置
US20230046365A1 (en) * 2021-08-12 2023-02-16 Hill-Rom Services, Inc. Techniques for three-dimensional analysis of spaces

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003291084A (ja) 2002-03-28 2003-10-14 Toshiba Corp ロボット並びにロボットの視野制御装置及び方法
JP2004201085A (ja) 2002-12-19 2004-07-15 Hitachi Ltd 視覚情報処理装置および適用システム
JP2018529175A (ja) 2015-08-28 2018-10-04 インペリアル・カレッジ・オブ・サイエンス・テクノロジー・アンド・メディスン 多方向カメラを使用した空間のマッピング
WO2018159177A1 (en) 2017-02-28 2018-09-07 Mitsubishi Electric Corporation Vehicle automated parking system and method

Also Published As

Publication number Publication date
US12103162B2 (en) 2024-10-01
JP2020119398A (ja) 2020-08-06
WO2020153298A1 (ja) 2020-07-30
US20220080603A1 (en) 2022-03-17
CN113316505A (zh) 2021-08-27
CN113316505B (zh) 2024-04-30

Similar Documents

Publication Publication Date Title
JP7309371B2 (ja) ロボット制御システム
JP7417356B2 (ja) ロボット制御システム
KR100898435B1 (ko) 로봇 장치 및 그 제어 방법
KR100941209B1 (ko) 로봇 장치, 얼굴 인식 방법 및 얼굴 인식 장치
KR101942167B1 (ko) 전방향 휠을 가지고 선형 예측 위치 및 속도 제어기를 기초한 휴머노이드 로봇
JP6496396B2 (ja) 線形予測位置及び速度コントローラに基づいた全方向車輪を有する人間型ロボット
JP6567563B2 (ja) 衝突回避および軌道復帰能力を有する人型ロボット
JP3714268B2 (ja) ロボット装置
JP4239635B2 (ja) ロボット装置、その動作制御方法、及びプログラム
JP2004298977A (ja) 行動制御装置、行動制御方法及び行動制御プログラム、並びに移動型ロボット装置
JP2003266349A (ja) 位置認識方法、その装置、そのプログラム、その記録媒体及び位置認識装置搭載型ロボット装置
JP2018151950A (ja) 情報処理装置、情報処理システム及びプログラム
Bolder et al. Visually guided whole body interaction
JP2004130427A (ja) ロボット装置及びロボット装置の動作制御方法
WO2020153298A1 (ja) 画像解析システム
CN115922731B (zh) 一种机器人的控制方法以及机器人
JP5539001B2 (ja) 制御装置
JP4193098B2 (ja) トラッキング装置、トラッキング装置のトラッキング方法及びロボット装置
JP5539000B2 (ja) 制御装置
WO2024203004A1 (ja) 自律移動体及び動作制御方法
JP2002205290A (ja) 脚式移動ロボットの制御装置及び制御方法
JP2004299006A (ja) ロボット装置及びロボット装置による顔認識状況の提示方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210325

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210325

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220729

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221206

R150 Certificate of patent or registration of utility model

Ref document number: 7190919

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150