JP7385826B2 - 動作分析装置、動作分析方法及び動作分析プログラム - Google Patents
動作分析装置、動作分析方法及び動作分析プログラム Download PDFInfo
- Publication number
- JP7385826B2 JP7385826B2 JP2019203039A JP2019203039A JP7385826B2 JP 7385826 B2 JP7385826 B2 JP 7385826B2 JP 2019203039 A JP2019203039 A JP 2019203039A JP 2019203039 A JP2019203039 A JP 2019203039A JP 7385826 B2 JP7385826 B2 JP 7385826B2
- Authority
- JP
- Japan
- Prior art keywords
- motion
- evaluation
- display
- data
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 title claims description 243
- 238000004458 analytical method Methods 0.000 title claims description 86
- 238000011156 evaluation Methods 0.000 claims description 97
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000003542 behavioural effect Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 26
- 230000008569 process Effects 0.000 description 19
- 230000009471 action Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- General Factory Administration (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
まず、図1を用いて、本発明が適用される場面の一例について説明する。図1は、本発明の実施形態に係る動作分析システム100の概要を示す図である。本実施形態に係る動作分析システム100は、作業領域Rにおいて実行される作業者の動作に関する動画を撮影するカメラ20と、作業者の手が所定の領域に出入りしたことを検出する光電センサ21と、所定の領域に加えられた圧力を測定する圧力センサ22とを備える。ここで、カメラ20により撮影される動画、光電センサ21により測定される信号及び圧力センサ22により測定される信号は、それぞれ本発明の時系列データの例である。本例の作業領域Rは、製造ライン全体を含む領域であるが、作業領域Rは、任意の領域であってよく、例えば所定の工程が行われる領域であったり、所定の要素動作が行われる領域であったりしてよい。ここで、要素動作とは、作業者により実行される一単位の動作であり、例えば、部品の把持、部品の運搬、部品の組み立て及び調整、組み立てた製品の収納といった動作を含む。
[機能構成]
図2は、本実施形態に係る動作分析装置10の機能ブロックを示す図である。動作分析装置10は、取得部11、解析部12、記憶部13、評価部14及び表示制御部15を備える。
取得部11は、作業者Aが行った作業に関し、作業者Aの複数の部位の動作に関する時系列データを取得する。時系列データは、カメラ20で撮影した動画、光電センサ21で測定した信号及び圧力センサ22で測定した信号を含む。
解析部12は、時系列データを解析し、要素動作の種類及び要素動作の開始時から終了時までの実行時間を表す動作データを生成する。要素動作の種類は、例えば、部品の把持、運搬、調整及び収納であるが、これら以外の種類の動作を含んでもよい。また、要素動作は、任意に設定されてよい。要素動作の開始時及び終了時は、時刻によって表されてもよいし、時系列データの開始時点からの経過時間で表されてもよい。
記憶部13は、解析部12により生成された動作データ13aを記憶する。記憶部13は、時系列データを記憶してもよい。
評価部14は、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価する。複数の部位に関する時系列データが、左手及び右手に関する時系列データを含む場合、評価部14は、要素動作が左手及び右手によって並行して実行されている場合に、高評価してよい。このように、左手及び右手を使って要素動作を並行して実行できている場合に高評価を与えることで、作業者がより短時間で作業を行えるように動機付けることができる。
表示制御部15は、異なる要素動作に対応する期間を区別して、評価を動作データと併せて表示部10fに表示するよう制御する。異なる要素動作に対応する期間を区別することは、異なる要素動作に対応する期間を異なる表示態様で表示させることを含む。評価を動作データと併せて表示することは、動作データを時系列順に表示し、その動作データが表す要素動作の実行タイミングに対応するように評価を表示することを含む。
図3は、本実施形態に係る動作分析装置10の物理的構成を示す図である。動作分析装置10は、演算部に相当するCPU(Central Processing Unit)10aと、記憶部に相当するRAM(Random Access Memory)10bと、記憶部に相当するROM(Read only Memory)10cと、通信部10dと、入力部10eと、表示部10fと、を有する。これらの各構成は、バスを介して相互にデータ送受信可能に接続される。なお、本例では動作分析装置10が一台のコンピュータで構成される場合について説明するが、動作分析装置10は、複数のコンピュータが組み合わされて実現されてもよい。また、図3で示す構成は一例であり、動作分析装置10はこれら以外の構成を有してもよいし、これらの構成のうち一部を有さなくてもよい。
図4は、本実施形態に係る動作分析装置10により生成される動作データを示す図である。同図では、左手の動作データD1及び右手の動作データD2の一例を示している。同図に記載したt1~t12という文字は、時系列順に並んだ時刻を示している。
は、以下の付記に記載した形態に限定されない。また、本発明の実施形態は、付記間の記
載を置換したり、組み合わせたりした形態であってもよい。
作業者が行った作業に関し、前記作業者の複数の部位の動作に関する時系列データを取得する取得部(11)と、
前記時系列データを解析し、要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部(12)と、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部(14)と、
異なる要素動作に対応する期間を区別して、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部(15)と、
を備える動作分析装置(10)。
前記複数の部位に関する時系列データは、左手及び右手に関する時系列データを含み、
前記評価部(14)は、前記要素動作が前記左手及び前記右手によって並行して実行されている場合に、高評価する、
付記1に記載の動作分析装置(10)。
前記評価部(14)は、前記複数の部位がいずれも前記作業に関する動作をしてない場合に、低評価する、
付記1又は2に記載の動作分析装置(10)。
前記表示制御部(15)は、前記評価を表すアイコンを前記動作データに沿って前記表示部に表示するよう制御する、
付記1から3のいずれか一項に記載の動作分析装置(10)。
前記表示制御部(15)は、前記評価に応じた異なる表示態様で前記動作データを前記表示部に表示するよう制御する、
付記1から3のいずれか一項に記載の動作分析装置(10)。
前記表示制御部(15)は、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
付記1から5のいずれか一項に記載の動作分析装置(10)。
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得することと、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価することと、
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御することと、
を含む動作分析方法。
動作分析装置(10)が備える演算部を、
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得する取得部(11)、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部(12)、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部(14)、及び
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部(15)、
として機能させる動作分析プログラム。
Claims (7)
- 作業者が行った作業に関し、前記作業者の複数の部位の動作に関する時系列データを取得する取得部と、
前記時系列データを解析し、要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部と、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部と、
異なる要素動作に対応する期間を区別して、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部と、
を備え、
前記表示制御部は、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
動作分析装置。 - 前記複数の部位に関する時系列データは、左手及び右手に関する時系列データを含み、
前記評価部は、前記要素動作が前記左手及び前記右手によって並行して実行されている場合に、高評価する、
請求項1に記載の動作分析装置。 - 前記評価部は、前記複数の部位がいずれも前記作業に関する動作をしてない場合に、低評価する、
請求項1又は2に記載の動作分析装置。 - 前記表示制御部は、前記評価を表すアイコンを前記動作データに沿って前記表示部に表示するよう制御する、
請求項1から3のいずれか一項に記載の動作分析装置。 - 前記表示制御部は、前記評価に応じた異なる表示態様で前記動作データを前記表示部に表示するよう制御する、
請求項1から3のいずれか一項に記載の動作分析装置。 - 一又は複数のコンピュータが、
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得することと、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価することと、
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御することと、
を含み、
前記制御することは、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
動作分析方法。 - 動作分析装置が備える演算部を、
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得する取得部、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部、及び
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部、
として機能させ、
前記表示制御部は、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
動作分析プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019203039A JP7385826B2 (ja) | 2019-11-08 | 2019-11-08 | 動作分析装置、動作分析方法及び動作分析プログラム |
CN202011089015.1A CN112784667A (zh) | 2019-11-08 | 2020-10-13 | 动作分析装置、动作分析方法及计算机可读取存储介质 |
US17/070,880 US11700450B2 (en) | 2019-11-08 | 2020-10-14 | Motion analysis device, motion analysis method for improving motions of operator |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019203039A JP7385826B2 (ja) | 2019-11-08 | 2019-11-08 | 動作分析装置、動作分析方法及び動作分析プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021077070A JP2021077070A (ja) | 2021-05-20 |
JP7385826B2 true JP7385826B2 (ja) | 2023-11-24 |
Family
ID=75750472
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019203039A Active JP7385826B2 (ja) | 2019-11-08 | 2019-11-08 | 動作分析装置、動作分析方法及び動作分析プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11700450B2 (ja) |
JP (1) | JP7385826B2 (ja) |
CN (1) | CN112784667A (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7339604B2 (ja) * | 2019-11-12 | 2023-09-06 | オムロン株式会社 | 動作認識装置、動作認識方法、動作認識プログラム及び動作認識システム |
JP2023140047A (ja) * | 2022-03-22 | 2023-10-04 | パナソニックIpマネジメント株式会社 | 作業分析装置および作業分析方法 |
JP2023140036A (ja) * | 2022-03-22 | 2023-10-04 | パナソニックIpマネジメント株式会社 | 作業分析装置および作業分析方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003006286A (ja) | 2001-06-19 | 2003-01-10 | Sharp Corp | 作業付加価値評価システム、作業付加価値評価方法及びその方法をコンピュータによって実現するためのプログラム |
JP2012073407A (ja) | 2010-09-29 | 2012-04-12 | Hitachi Cable Ltd | 光ファイバ端部加工方法および光ファイバ端部加工装置 |
JP2013116676A (ja) | 2011-12-02 | 2013-06-13 | Hitachi Ltd | 人流予測装置および方法 |
JP2015197847A (ja) | 2014-04-02 | 2015-11-09 | 富士電機株式会社 | 作業分析システム、作業分析方法、及び作業分析プログラム |
JP2018045512A (ja) | 2016-09-15 | 2018-03-22 | オムロン株式会社 | 作業性評価装置 |
JP2019101919A (ja) | 2017-12-06 | 2019-06-24 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラムおよび記憶媒体 |
JP2019114285A (ja) | 2017-12-24 | 2019-07-11 | Gva Tech株式会社 | 法律文書レビュープログラム、法律文書レビュー方法、及び法律文書レビューシステム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8560267B2 (en) * | 2009-09-15 | 2013-10-15 | Imetrikus, Inc. | Identifying one or more activities of an animate or inanimate object |
US9195532B2 (en) * | 2010-11-29 | 2015-11-24 | Nec Corporation | Display processing system, display processing method, and program |
CN105828894A (zh) * | 2013-12-27 | 2016-08-03 | 索尼公司 | 分析装置、记录介质及分析方法 |
JP6326701B2 (ja) * | 2014-11-04 | 2018-05-23 | 国立大学法人宇都宮大学 | 協調運動評価装置 |
JP6710644B2 (ja) * | 2017-01-05 | 2020-06-17 | 株式会社東芝 | 動作解析装置、動作解析方法およびプログラム |
JP6535778B1 (ja) | 2018-03-07 | 2019-06-26 | 社会福祉法人兵庫県社会福祉事業団 | 運動能力評価システム |
JP7385825B2 (ja) * | 2019-11-07 | 2023-11-24 | オムロン株式会社 | 動作分析装置、動作分析方法及び動作分析プログラム |
JP7421745B2 (ja) * | 2019-11-12 | 2024-01-25 | オムロン株式会社 | 動作分析装置、動作分析方法及び動作分析プログラム |
-
2019
- 2019-11-08 JP JP2019203039A patent/JP7385826B2/ja active Active
-
2020
- 2020-10-13 CN CN202011089015.1A patent/CN112784667A/zh active Pending
- 2020-10-14 US US17/070,880 patent/US11700450B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003006286A (ja) | 2001-06-19 | 2003-01-10 | Sharp Corp | 作業付加価値評価システム、作業付加価値評価方法及びその方法をコンピュータによって実現するためのプログラム |
JP2012073407A (ja) | 2010-09-29 | 2012-04-12 | Hitachi Cable Ltd | 光ファイバ端部加工方法および光ファイバ端部加工装置 |
JP2013116676A (ja) | 2011-12-02 | 2013-06-13 | Hitachi Ltd | 人流予測装置および方法 |
JP2015197847A (ja) | 2014-04-02 | 2015-11-09 | 富士電機株式会社 | 作業分析システム、作業分析方法、及び作業分析プログラム |
JP2018045512A (ja) | 2016-09-15 | 2018-03-22 | オムロン株式会社 | 作業性評価装置 |
JP2019101919A (ja) | 2017-12-06 | 2019-06-24 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラムおよび記憶媒体 |
JP2019114285A (ja) | 2017-12-24 | 2019-07-11 | Gva Tech株式会社 | 法律文書レビュープログラム、法律文書レビュー方法、及び法律文書レビューシステム |
Also Published As
Publication number | Publication date |
---|---|
CN112784667A (zh) | 2021-05-11 |
JP2021077070A (ja) | 2021-05-20 |
US11700450B2 (en) | 2023-07-11 |
US20210144303A1 (en) | 2021-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7385826B2 (ja) | 動作分析装置、動作分析方法及び動作分析プログラム | |
JP6244901B2 (ja) | グラフ表示制御装置、電子機器およびプログラム | |
JP6221323B2 (ja) | グラフ表示装置およびその制御プログラム | |
US10948902B2 (en) | Method and system for workload balancing of a production line | |
JP7393720B2 (ja) | 技能評価装置、技能評価方法及び技能評価プログラム | |
JP7385825B2 (ja) | 動作分析装置、動作分析方法及び動作分析プログラム | |
JP7421745B2 (ja) | 動作分析装置、動作分析方法及び動作分析プログラム | |
CN110490034B (zh) | 动作分析装置、动作分析方法、记录介质和动作分析系统 | |
JP7339604B2 (ja) | 動作認識装置、動作認識方法、動作認識プログラム及び動作認識システム | |
KR20160132834A (ko) | 프로그래머블 컨트롤러 시스템, 프로그래머블 컨트롤러 및 표시 장치 | |
JP5733269B2 (ja) | プログラム生成を支援する方法及びプログラム生成を支援する装置 | |
CN111415735A (zh) | 体外诊断设备的控制方法、装置、计算机设备和存储介质 | |
JP6112233B2 (ja) | エネルギー解析装置、エネルギー解析プログラム及び記録媒体 | |
JP7192914B2 (ja) | 計算装置、計算支援方法及びプログラム | |
CN102955763B (zh) | 显示方法和显示装置 | |
JP7404022B2 (ja) | プログラム生成装置及びプログラム生成方法 | |
JP5685995B2 (ja) | シミュレーション用データ生成システム、方法およびプログラム | |
CN112567401B (zh) | 动作分析装置、动作分析方法及其程序的记录媒体 | |
CN105426353A (zh) | 表生成装置、以及表生成方法 | |
Czerniak et al. | Analysis of different types of navigational structures for machine tool controlling | |
JPH04191958A (ja) | 多変数回帰分析装置 | |
JP4333266B2 (ja) | グラフ表示制御装置及びプログラム | |
CN116868211A (zh) | 信息处理装置及计算机程序 | |
JP2004252872A (ja) | 画面の操作性を評価するためのシステムおよび方法、プログラム、コンピュータ読み取り可能な記録媒体 | |
JP2004005288A (ja) | バッチ性能見積り方法及び装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220907 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230731 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231013 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231026 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7385826 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |