JP7421745B2 - 動作分析装置、動作分析方法及び動作分析プログラム - Google Patents
動作分析装置、動作分析方法及び動作分析プログラム Download PDFInfo
- Publication number
- JP7421745B2 JP7421745B2 JP2019204465A JP2019204465A JP7421745B2 JP 7421745 B2 JP7421745 B2 JP 7421745B2 JP 2019204465 A JP2019204465 A JP 2019204465A JP 2019204465 A JP2019204465 A JP 2019204465A JP 7421745 B2 JP7421745 B2 JP 7421745B2
- Authority
- JP
- Japan
- Prior art keywords
- time
- motion
- execution time
- chronological order
- series data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 title claims description 188
- 238000004458 analytical method Methods 0.000 title claims description 75
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000003542 behavioural effect Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 8
- 238000011156 evaluation Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000012447 hatching Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01L—MEASURING FORCE, STRESS, TORQUE, WORK, MECHANICAL POWER, MECHANICAL EFFICIENCY, OR FLUID PRESSURE
- G01L1/00—Measuring force or stress, in general
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
- G01V8/00—Prospecting or detecting by optical means
- G01V8/10—Detecting, e.g. by using light barriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
Description
・オブジェクトは、時系列順に並べる方向に一定の幅を有し、当該方向とは異なる方向の幅により実行時間を示す。
まず、図1を用いて、本発明が適用される場面の一例について説明する。図1は、本発明の実施形態に係る動作分析システム100の概要を示す図である。本実施形態に係る動作分析システム100は、作業領域Rにおいて実行される作業者の動作に関する動画を撮影するカメラ20と、作業者の手が所定の領域に出入りしたことを検出する光電センサ21と、所定の領域に加えられた圧力を測定する圧力センサ22とを備える。ここで、カメラ20により撮影される動画、光電センサ21により測定される信号及び圧力センサ22により測定される信号は、それぞれ本発明の時系列データの例である。本例の作業領域Rは、製造ライン全体を含む領域であるが、作業領域Rは、任意の領域であってよく、例えば所定の工程が行われる領域であったり、所定の要素動作が行われる領域であったりしてよい。ここで、要素動作とは、作業者により実行される一単位の動作であり、例えば、部品の把持、部品の運搬、部品の組み立て及び調整、組み立てた製品の収納といった動作を含む。
[機能構成]
図2は、本実施形態に係る動作分析装置10の機能ブロックを示す図である。動作分析装置10は、取得部11、解析部12、記憶部13及び表示制御部15を備える。
取得部11は、作業者Aが行った作業に関し、作業者Aの複数の部位の動作に関する時系列データを取得する。時系列データは、カメラ20で撮影した動画、光電センサ21で測定した信号及び圧力センサ22で測定した信号を含む。
解析部12は、時系列データを解析し、要素動作の種類及び要素動作の開始時から終了時までの実行時間を表す動作データを生成する。要素動作の種類は、例えば、部品の把持、運搬、調整及び収納であるが、これら以外の種類の動作を含んでもよい。また、要素動作は、任意に設定されてよい。要素動作の開始時及び終了時は、時刻によって表されてもよいし、時系列データの開始時点からの経過時間で表されてもよい。
記憶部13は、解析部12により生成された動作データ13aを記憶する。記憶部13は、時系列データを記憶してもよい。
表示制御部15は、複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、時系列データの時系列順に並べて表示部10fに表示するよう制御する。オブジェクトは、時系列順に並べる方向に一定の幅を有し、高さにより実行時間を示す。ここで、高さとは、時系列順に並べる方向と略直交する方向の高さである。より一般には、オブジェクトは、時系列順に並べる方向に一定の幅を有し、当該方向とは異なる方向の幅により実行時間を示してもよい。
図3は、本実施形態に係る動作分析装置10の物理的構成を示す図である。動作分析装置10は、演算部に相当するCPU(Central Processing Unit)10aと、記憶部に相当するRAM(Random Access Memory)10bと、記憶部に相当するROM(Read only Memory)10cと、通信部10dと、入力部10eと、表示部10fと、を有する。これらの各構成は、バスを介して相互にデータ送受信可能に接続される。なお、本例では動作分析装置10が一台のコンピュータで構成される場合について説明するが、動作分析装置10は、複数のコンピュータが組み合わされて実現されてもよい。また、図3で示す構成は一例であり、動作分析装置10はこれら以外の構成を有してもよいし、これらの構成のうち一部を有さなくてもよい。
図4は、本実施形態に係る動作分析装置10により生成される動作データを示す図である。同図では、左手の動作データD1及び右手の動作データD2の一例を示している。同図に記載したt1~t11という文字は、時系列順に並んだ時刻を示している。
は、以下の付記に記載した形態に限定されない。また、本発明の実施形態は、付記間の記
載を置換したり、組み合わせたりした形態であってもよい。
作業者が行った作業に関する時系列データを取得する取得部(11)と、
前記時系列データを解析し、要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部(12)と、
前記複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に並べて表示部に表示するよう制御する表示制御部(15)と、を備え、
前記オブジェクトは、時系列順に並べる方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析装置(10)。
前記表示制御部(15)は、前記複数の要素動作それぞれの種類及び実行時間を示す前記オブジェクト並びに基準となる複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、時系列順に並べて前記表示部に表示するよう制御する、
請求項1に記載の動作分析装置(10)。
前記表示制御部(15)は、前記作業者が前記複数の要素動作のいずれも行っていない時間を示すオブジェクトを、前記複数の要素動作それぞれの種類及び実行時間を示す前記オブジェクトと区別して前記表示部に表示するように制御する、
請求項1又は2に記載の動作分析装置(10)。
前記表示制御部(15)は、前記実行時間が所定時間を超える場合に、前記実行時間を示す方向に関して前記オブジェクトを折り返して前記表示部に表示するよう制御する、
請求項1から3のいずれか一項に記載の動作分析装置(10)。
作業者が行った作業に関する時系列データを取得することと、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、
前記複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に並べて表示部に表示するよう制御することと、を含み、
前記オブジェクトは、時系列順に並べる方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析方法。
動作分析装置(10)が備える演算部を、
作業者が行った作業に関する時系列データを取得する取得部(11)、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部(12)、及び
前記複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に並べて表示部に表示するよう制御する表示制御部(15)、として機能させ、
前記オブジェクトは、時系列順に並べる方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析プログラム。
Claims (6)
- 作業者が行った作業に関する時系列データを取得する取得部と、
前記時系列データを解析し、前記作業に含まれる要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部と、
複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に第一方向に並べて表示部に表示するよう制御する表示制御部と、を備え、
前記オブジェクトは、時系列順に並べる前記第一方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析装置。 - 前記表示制御部は、前記複数の要素動作それぞれの種類及び実行時間を示す前記オブジェクト並びに基準となる複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、時系列順に並べて前記表示部に表示するよう制御する、
請求項1に記載の動作分析装置。 - 前記表示制御部は、前記作業者が前記複数の要素動作のいずれも行っていない時間を示すオブジェクトを、前記複数の要素動作それぞれの種類及び実行時間を示す前記オブジェクトと区別して前記表示部に表示するように制御する、
請求項1又は2に記載の動作分析装置。 - 前記表示制御部は、前記実行時間が所定時間を超える場合に、前記実行時間を示す方向に関して前記オブジェクトを折り返して前記表示部に表示するよう制御する、
請求項1から3のいずれか一項に記載の動作分析装置。 - 一又は複数のコンピュータが、
作業者が行った作業に関する時系列データを取得することと、
前記時系列データを解析し、前記作業に含まれる要素動作の種類及び実行時間を表す動作データを生成することと、
複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に第一方向に並べて表示部に表示するよう制御することと、を含み、
前記オブジェクトは、時系列順に並べる前記第一方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析方法。 - 動作分析装置が備える演算部を、
作業者が行った作業に関する時系列データを取得する取得部、
前記時系列データを解析し、前記作業に含まれる要素動作の種類及び実行時間を表す動作データを生成する解析部、及び
複数の要素動作それぞれの種類及び実行時間を示すオブジェクトを、前記時系列データの時系列順に第一方向に並べて表示部に表示するよう制御する表示制御部、として機能させ、
前記オブジェクトは、時系列順に並べる前記第一方向に一定の幅を有し、高さにより前記実行時間を示す、
動作分析プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019204465A JP7421745B2 (ja) | 2019-11-12 | 2019-11-12 | 動作分析装置、動作分析方法及び動作分析プログラム |
CN202011084980.XA CN112861597A (zh) | 2019-11-12 | 2020-10-12 | 动作分析装置、动作分析方法以及存储介质 |
US17/070,900 US11436770B2 (en) | 2019-11-12 | 2020-10-14 | Motion analysis device, motion analysis method and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019204465A JP7421745B2 (ja) | 2019-11-12 | 2019-11-12 | 動作分析装置、動作分析方法及び動作分析プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021077186A JP2021077186A (ja) | 2021-05-20 |
JP7421745B2 true JP7421745B2 (ja) | 2024-01-25 |
Family
ID=75845469
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019204465A Active JP7421745B2 (ja) | 2019-11-12 | 2019-11-12 | 動作分析装置、動作分析方法及び動作分析プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11436770B2 (ja) |
JP (1) | JP7421745B2 (ja) |
CN (1) | CN112861597A (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7385826B2 (ja) * | 2019-11-08 | 2023-11-24 | オムロン株式会社 | 動作分析装置、動作分析方法及び動作分析プログラム |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001166681A (ja) | 1999-12-10 | 2001-06-22 | Honda Motor Co Ltd | 作業習熟支援装置 |
JP2003006286A (ja) | 2001-06-19 | 2003-01-10 | Sharp Corp | 作業付加価値評価システム、作業付加価値評価方法及びその方法をコンピュータによって実現するためのプログラム |
JP2004362043A (ja) | 2003-06-02 | 2004-12-24 | Fuji Xerox Co Ltd | プロジェクト管理システム |
JP2009160084A (ja) | 2007-12-28 | 2009-07-23 | Juki Corp | ミシンの作業分析装置 |
JP2011034234A (ja) | 2009-07-30 | 2011-02-17 | Kozo Keikaku Engineering Inc | 動作分析装置、動作分析方法及び動作分析プログラム |
JP2016087420A (ja) | 2014-11-04 | 2016-05-23 | 国立大学法人宇都宮大学 | 協調運動評価装置 |
JP2017010277A (ja) | 2015-06-22 | 2017-01-12 | 株式会社ブロードリーフ | 作業分析システム及び作業分析方法 |
JP2018026071A (ja) | 2016-08-12 | 2018-02-15 | 富士通株式会社 | 工程計画支援装置、工程計画支援方法および工程計画支援プログラム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6829516B2 (en) * | 2002-08-07 | 2004-12-07 | Kimberly-Clark Worlwide, Inc. | Combined information exchange systems and methods |
GB2432272A (en) * | 2005-06-30 | 2007-05-16 | Nokia Corp | Capture and deletion of audio data during image capture |
JP5589678B2 (ja) * | 2010-08-25 | 2014-09-17 | 富士ゼロックス株式会社 | 予測装置、予測システム、画像形成装置、媒体搬送装置及びプログラム |
DE112014001482B4 (de) * | 2013-03-15 | 2022-07-14 | Topcon Positioning Systems, Inc. | Überwachungs- und Steueranzeigesystem und -verfahren |
US10260996B2 (en) * | 2014-02-03 | 2019-04-16 | Fuji Corporation | Board production monitoring device and board production monitoring method |
-
2019
- 2019-11-12 JP JP2019204465A patent/JP7421745B2/ja active Active
-
2020
- 2020-10-12 CN CN202011084980.XA patent/CN112861597A/zh active Pending
- 2020-10-14 US US17/070,900 patent/US11436770B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001166681A (ja) | 1999-12-10 | 2001-06-22 | Honda Motor Co Ltd | 作業習熟支援装置 |
JP2003006286A (ja) | 2001-06-19 | 2003-01-10 | Sharp Corp | 作業付加価値評価システム、作業付加価値評価方法及びその方法をコンピュータによって実現するためのプログラム |
JP2004362043A (ja) | 2003-06-02 | 2004-12-24 | Fuji Xerox Co Ltd | プロジェクト管理システム |
JP2009160084A (ja) | 2007-12-28 | 2009-07-23 | Juki Corp | ミシンの作業分析装置 |
JP2011034234A (ja) | 2009-07-30 | 2011-02-17 | Kozo Keikaku Engineering Inc | 動作分析装置、動作分析方法及び動作分析プログラム |
JP2016087420A (ja) | 2014-11-04 | 2016-05-23 | 国立大学法人宇都宮大学 | 協調運動評価装置 |
JP2017010277A (ja) | 2015-06-22 | 2017-01-12 | 株式会社ブロードリーフ | 作業分析システム及び作業分析方法 |
JP2018026071A (ja) | 2016-08-12 | 2018-02-15 | 富士通株式会社 | 工程計画支援装置、工程計画支援方法および工程計画支援プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20210142536A1 (en) | 2021-05-13 |
JP2021077186A (ja) | 2021-05-20 |
CN112861597A (zh) | 2021-05-28 |
US11436770B2 (en) | 2022-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11700450B2 (en) | Motion analysis device, motion analysis method for improving motions of operator | |
WO2009116317A1 (ja) | 情報提示装置 | |
JP7393720B2 (ja) | 技能評価装置、技能評価方法及び技能評価プログラム | |
JP7421745B2 (ja) | 動作分析装置、動作分析方法及び動作分析プログラム | |
US8736613B2 (en) | Simplified graphical analysis of multiple data series | |
US10018983B2 (en) | PLC system and arithmetic-expression-data-creation supporting apparatus | |
CN110490034B (zh) | 动作分析装置、动作分析方法、记录介质和动作分析系统 | |
JP7385825B2 (ja) | 動作分析装置、動作分析方法及び動作分析プログラム | |
CN110674433A (zh) | 一种图表显示方法、存储介质及电子设备 | |
JP7061272B2 (ja) | 動作分析装置、動作分析方法、動作分析プログラム及び動作分析システム | |
JP5607556B2 (ja) | 情報処理装置およびその制御方法 | |
JP7339604B2 (ja) | 動作認識装置、動作認識方法、動作認識プログラム及び動作認識システム | |
KR20190062835A (ko) | 가상 공간의 인터랙션 분석 시스템 및 방법 | |
CN110362249B (zh) | 书写屏软件页面跳转的控制方法和装置 | |
Babicsné Horváth et al. | Comparison of digital human model-based ergonomic software using eye-tracking methodology–presenting pilot usability tests | |
DE102014019648A1 (de) | Datenverarbeitungsverfahren und elektronische Vorrichtung | |
WO2023181805A1 (ja) | 作業分析装置および作業分析方法 | |
WO2023181804A1 (ja) | 作業分析装置および作業分析方法 | |
JP7227772B2 (ja) | データアセット分析支援システムおよびデータ分析方法 | |
Koehler et al. | Trace induction for complete manufacturing process model discovery | |
JP2013235306A (ja) | プログラム生成を支援する方法及びプログラム生成を支援する装置 | |
JP4811600B2 (ja) | 在庫状況確認システム | |
JP3632687B2 (ja) | ユーザビリティ評価装置 | |
van Riet et al. | The Journal of Systems & Software | |
JP2008112427A (ja) | 販売計画支援装置および販売計画支援処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220907 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230731 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231215 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7421745 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |