JP7494470B2 - 建設機械の点検システム - Google Patents
建設機械の点検システム Download PDFInfo
- Publication number
- JP7494470B2 JP7494470B2 JP2020002727A JP2020002727A JP7494470B2 JP 7494470 B2 JP7494470 B2 JP 7494470B2 JP 2020002727 A JP2020002727 A JP 2020002727A JP 2020002727 A JP2020002727 A JP 2020002727A JP 7494470 B2 JP7494470 B2 JP 7494470B2
- Authority
- JP
- Japan
- Prior art keywords
- inspection
- construction machine
- camera
- image
- cameras
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007689 inspection Methods 0.000 title claims description 259
- 238000010276 construction Methods 0.000 title claims description 237
- 238000000034 method Methods 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 10
- 230000006870 function Effects 0.000 description 27
- 238000001514 detection method Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 13
- 230000005856 abnormality Effects 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 238000009434 installation Methods 0.000 description 2
- 239000003921 oil Substances 0.000 description 2
- 238000011179 visual inspection Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000010720 hydraulic oil Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/20—Drives; Control devices
- E02F9/2025—Particular purposes of control systems not otherwise provided for
- E02F9/205—Remotely operated machines, e.g. unmanned vehicles
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/267—Diagnosing or detecting failure of vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F3/00—Dredgers; Soil-shifting machines
- E02F3/04—Dredgers; Soil-shifting machines mechanically-driven
- E02F3/28—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
- E02F3/36—Component parts
- E02F3/42—Drives for dippers, buckets, dipper-arms or bucket-arms
- E02F3/43—Control of dipper or bucket position; Control of sequence of drive operations
- E02F3/435—Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M3/00—Investigating fluid-tightness of structures
- G01M3/38—Investigating fluid-tightness of structures by using light
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M5/00—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
- G01M5/0033—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings by determining damage, crack or wear
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M5/00—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings
- G01M5/0091—Investigating the elasticity of structures, e.g. deflection of bridges or air-craft wings by using electromagnetic excitation or detection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mining & Mineral Resources (AREA)
- Civil Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Structural Engineering (AREA)
- Component Parts Of Construction Machinery (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Description
該複数のカメラのそれぞれの撮影映像を受信可能に前記建設機械の外部に配置され、受信した撮影映像を表示可能な表示器を備える撮影映像処理部と、
前記建設機械の点検時に、少なくとも第1情報及び第2情報に基づいて、前記複数のカメラから、該建設機械の点検対象部位を撮影するためのカメラである点検用カメラを選定するカメラ選定部とを備え、
該第1情報は、前記建設機械と前記複数のカメラのそれぞれとの位置関係、又は、前記建設機械と前記複数のカメラのそれぞれの撮影可能領域との位置関係を示し、該第2情報は、前記建設機械における前記点検対象部位の位置を示し、
前記撮影映像処理部は、前記選定された点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像を受信して、該撮影映像を前記表示器に表示させ得るように構成されていることを特徴とする(第1発明の第1態様)。
また、前記カメラ選定部は、前記建設機械と前記複数のカメラのそれぞれとの位置関係、又は、前記建設機械と前記複数のカメラのそれぞれの撮影可能領域との位置関係を示す第1情報と、前記建設機械における前記点検対象部位の位置を示す第2情報とを取得し、少なくとも該第1情報及び該第2情報に基づいて前記点検用カメラを選定するように構成され得るため、上記第1情報及び第2情報に基づいて点検用カメラを選定することで、点検対象部位の画像を含む撮影映像を撮影し得る点検用カメラを適切に選定できる。
該複数のカメラのそれぞれの撮影映像を受信可能に前記建設機械の外部に配置され、受信した撮影映像を表示可能な表示器を備える撮影映像処理部と、
前記建設機械の点検時に、前記複数のカメラから、該建設機械の点検対象部位を撮影するためのカメラである点検用カメラを選定するカメラ選定部とを備え、
前記カメラ選定部は、前記複数のカメラのそれぞれの撮影映像を取得すると共に、当該それぞれの撮影映像から前記点検対象部位の画像を認識する画像認識処理を実行し、少なくとも該画像認識処理の結果に基づいて前記点検用カメラを選定するように構成され、
前記撮影映像処理部は、前記選定された点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像を受信して、該撮影映像を前記表示器に表示させ得るように構成されていることを特徴とする(第1発明の第2態様)。
これによれば、上記画像認識処理の結果に基づいて点検用カメラを選定することで、複数のカメラのうち、点検対象部位の適切な画像を実際に撮影し得るカメラを点検用カメラとして選定することができる。例えば、レンズの汚れや障害物等により、点検対象部位の画像を鮮明に撮影できないカメラが点検用カメラとして選定されてしまうのを防止できる。
Claims (8)
- 建設機械の配置環境に該建設機械の外観を撮影し得るように配置された複数のカメラと、
該複数のカメラのそれぞれの撮影映像を受信可能に前記建設機械の外部に配置され、受信した撮影映像を表示可能な表示器を備える撮影映像処理部と、
前記建設機械の点検時に、少なくとも第1情報及び第2情報に基づいて、前記複数のカメラから、前記建設機械の点検対象部位を撮影するためのカメラである点検用カメラを選定するカメラ選定部とを備え、
前記第1情報は、前記建設機械と前記複数のカメラのそれぞれとの位置関係、又は、前記建設機械と前記複数のカメラのそれぞれの撮影可能領域との位置関係を示す情報であり、かつ、前記第2情報は、前記建設機械における前記点検対象部位の位置を示す情報であり、
前記撮影映像処理部は、前記選定された点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像を受信して、該撮影映像を前記表示器に表示させ得るように構成されていることを特徴とする建設機械の点検システム。 - 建設機械の配置環境に該建設機械の外観を撮影し得るように配置された複数のカメラと、
該複数のカメラのそれぞれの撮影映像を受信可能に前記建設機械の外部に配置され、受信した撮影映像を表示可能な表示器を備える撮影映像処理部と、
前記建設機械の点検時に、前記複数のカメラから、該建設機械の点検対象部位を撮影するためのカメラである点検用カメラを選定するカメラ選定部とを備え、
前記カメラ選定部は、前記複数のカメラのそれぞれの撮影映像を取得すると共に、当該それぞれの撮影映像から前記点検対象部位の画像を認識する画像認識処理を実行し、少なくとも該画像認識処理の結果に基づいて前記点検用カメラを選定するように構成され、
前記撮影映像処理部は、前記選定された点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像を受信して、該撮影映像を前記表示器に表示させ得るように構成されていることを特徴とする建設機械の点検システム。 - 請求項1又は2記載の建設機械の点検システムにおいて、
前記複数のカメラは、前記建設機械の外部に配置されたカメラである外部カメラと、前記建設機械にあらかじめ搭載されているカメラである搭載カメラとを含むことを特徴とする建設機械の点検システム。 - 請求項1~3のいずれか1項に記載の建設機械の点検システムにおいて、
前記建設機械の点検対象部位は複数の部位であり、前記カメラ選定部は、当該複数の点検対象部位のそれぞれ毎に、前記点検用カメラを選定するように構成されていることを特徴とする建設機械の点検システム。 - 請求項1~4のいずれか1項に記載の建設機械の点検システムにおいて、
前記撮影映像処理部は、前記点検用カメラによる撮影映像を取得するとき、該点検用カメラの撮影方向と、該点検用カメラの撮影倍率と、前記建設機械の向きとのうちの少なくとも1つを変化させる機能をさらに有するように構成されていることを特徴とする建設機械の点検システム。 - 請求項1~5のいずれか1項に記載の建設機械の点検システムにおいて、
前記撮影映像処理部は、前記点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像に基づいて、該点検対象部位の状態を判定する機能と、該判定の結果を示す情報を、前記建設機械の点検時に前記表示器を視認する点検作業者に報知する機能とをさらに含むことを特徴とする建設機械の点検システム。 - 請求項6記載の建設機械の点検システムにおいて、
前記撮影映像処理部は、前記点検用カメラにより前記点検対象部位の画像を含むように撮影された撮影映像を前記表示器に表示させることと並行して、該表示器に前記判定の結果を示す情報を表示させるように構成されていることを特徴とする建設機械の点検システム。 - 請求項1~7のいずれか1項に記載の建設機械の点検システムにおいて、
前記カメラ選定部及び前記撮影映像処理部は、所定の点検開始条件が成立することに応じて、それぞれの処理を開始するように構成されていることを特徴とする建設機械の点検システム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020002727A JP7494470B2 (ja) | 2020-01-10 | 2020-01-10 | 建設機械の点検システム |
CN202180008444.8A CN114930809A (zh) | 2020-01-10 | 2021-01-07 | 工程机械的检测系统 |
US17/784,255 US12028653B2 (en) | 2020-01-10 | 2021-01-07 | Inspection system for construction machine |
PCT/JP2021/000300 WO2021141077A1 (ja) | 2020-01-10 | 2021-01-07 | 建設機械の点検システム |
EP21738498.1A EP4057624A4 (en) | 2020-01-10 | 2021-01-07 | INSPECTION SYSTEM FOR A CONSTRUCTION MACHINE |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020002727A JP7494470B2 (ja) | 2020-01-10 | 2020-01-10 | 建設機械の点検システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021111875A JP2021111875A (ja) | 2021-08-02 |
JP7494470B2 true JP7494470B2 (ja) | 2024-06-04 |
Family
ID=76788066
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020002727A Active JP7494470B2 (ja) | 2020-01-10 | 2020-01-10 | 建設機械の点検システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US12028653B2 (ja) |
EP (1) | EP4057624A4 (ja) |
JP (1) | JP7494470B2 (ja) |
CN (1) | CN114930809A (ja) |
WO (1) | WO2021141077A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117590779B (zh) * | 2023-11-10 | 2024-06-21 | 要务(深圳)科技有限公司 | 工程机械设备的智能辅助作业方法及装置 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010029613A1 (en) | 1998-03-19 | 2001-10-11 | Fernandez Dennis Sunga | Integrated network for monitoring remote objects |
JP2002522980A (ja) | 1998-08-07 | 2002-07-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 複数カメラシステム中の画像追跡 |
JP2004343322A (ja) | 2003-05-14 | 2004-12-02 | Nanno Construction Co Ltd | 車両の調査方法と装置 |
JP2005273470A (ja) | 2004-03-23 | 2005-10-06 | Clarion Co Ltd | 車両点検システム |
JP2006221311A (ja) | 2005-02-09 | 2006-08-24 | Hisao Doi | 自動車用業務見積り査定方法 |
JP2009068920A (ja) | 2007-09-11 | 2009-04-02 | Nissan Motor Co Ltd | カメラ調整方法およびカメラ調整システム |
JP2009105564A (ja) | 2007-10-22 | 2009-05-14 | Toshiba Denpa Products Kk | 航空機エンジン監視システム |
JP2013221303A (ja) | 2012-04-16 | 2013-10-28 | Hitachi Constr Mach Co Ltd | 建設機械の点検装置及びそれを用いた点検方法 |
JP2016053531A (ja) | 2014-09-04 | 2016-04-14 | 東日本旅客鉄道株式会社 | 車両検査システム |
US20190268571A1 (en) | 2018-02-28 | 2019-08-29 | Schlumberger Technology Corporation | CCTV System |
WO2019181923A1 (ja) | 2018-03-23 | 2019-09-26 | 住友重機械工業株式会社 | 建設機械の支援装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05143714A (ja) | 1991-07-04 | 1993-06-11 | Nishi Nippon Riyokaku Tetsudo Kk | 画像処理を利用した走行車両の異常監視方法及び異常監視システム |
JP3364419B2 (ja) * | 1997-10-29 | 2003-01-08 | 新キャタピラー三菱株式会社 | 遠隔無線操縦システム並びに遠隔操縦装置,移動式中継局及び無線移動式作業機械 |
JPH11298887A (ja) * | 1998-04-14 | 1999-10-29 | Matsushita Electric Ind Co Ltd | 着脱式車載カメラ |
JP4332027B2 (ja) * | 2003-12-25 | 2009-09-16 | キャタピラージャパン株式会社 | 表示器制御システム |
US10262411B2 (en) * | 2017-09-01 | 2019-04-16 | Deere & Company | Site scanning using a work machine with a camera |
KR20190045160A (ko) * | 2017-09-29 | 2019-05-02 | 히다찌 겐끼 가부시키가이샤 | 건설 기계의 점검 지원 시스템, 관리 서버 및 점검 리포트 작성 시스템 |
-
2020
- 2020-01-10 JP JP2020002727A patent/JP7494470B2/ja active Active
-
2021
- 2021-01-07 US US17/784,255 patent/US12028653B2/en active Active
- 2021-01-07 EP EP21738498.1A patent/EP4057624A4/en active Pending
- 2021-01-07 WO PCT/JP2021/000300 patent/WO2021141077A1/ja unknown
- 2021-01-07 CN CN202180008444.8A patent/CN114930809A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010029613A1 (en) | 1998-03-19 | 2001-10-11 | Fernandez Dennis Sunga | Integrated network for monitoring remote objects |
JP2002522980A (ja) | 1998-08-07 | 2002-07-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 複数カメラシステム中の画像追跡 |
JP2004343322A (ja) | 2003-05-14 | 2004-12-02 | Nanno Construction Co Ltd | 車両の調査方法と装置 |
JP2005273470A (ja) | 2004-03-23 | 2005-10-06 | Clarion Co Ltd | 車両点検システム |
JP2006221311A (ja) | 2005-02-09 | 2006-08-24 | Hisao Doi | 自動車用業務見積り査定方法 |
JP2009068920A (ja) | 2007-09-11 | 2009-04-02 | Nissan Motor Co Ltd | カメラ調整方法およびカメラ調整システム |
JP2009105564A (ja) | 2007-10-22 | 2009-05-14 | Toshiba Denpa Products Kk | 航空機エンジン監視システム |
JP2013221303A (ja) | 2012-04-16 | 2013-10-28 | Hitachi Constr Mach Co Ltd | 建設機械の点検装置及びそれを用いた点検方法 |
JP2016053531A (ja) | 2014-09-04 | 2016-04-14 | 東日本旅客鉄道株式会社 | 車両検査システム |
US20190268571A1 (en) | 2018-02-28 | 2019-08-29 | Schlumberger Technology Corporation | CCTV System |
WO2019181923A1 (ja) | 2018-03-23 | 2019-09-26 | 住友重機械工業株式会社 | 建設機械の支援装置 |
Also Published As
Publication number | Publication date |
---|---|
EP4057624A1 (en) | 2022-09-14 |
EP4057624A4 (en) | 2023-01-04 |
US12028653B2 (en) | 2024-07-02 |
WO2021141077A1 (ja) | 2021-07-15 |
JP2021111875A (ja) | 2021-08-02 |
CN114930809A (zh) | 2022-08-19 |
US20230043651A1 (en) | 2023-02-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20140111648A1 (en) | Device For Monitoring Area Around Working Machine | |
WO2021054417A1 (ja) | ショベル、ショベルの管理装置、ショベルの管理システム、ショベルの支援装置 | |
WO2019181923A1 (ja) | 建設機械の支援装置 | |
JP7494470B2 (ja) | 建設機械の点検システム | |
US20230023778A1 (en) | Work assisting server and work assisting system | |
CN115210434A (zh) | 作业辅助服务器、作业辅助方法 | |
JP2007016403A (ja) | 作業機械のカメラ制御装置 | |
US20210395981A1 (en) | Surrounding monitoring apparatus for work machine | |
US20220205224A1 (en) | Excavator and management apparatus for excavator | |
JP7508815B2 (ja) | 作業支援サーバ、作業支援方法 | |
JP3611394B2 (ja) | 作業機械のカメラ方向制御装置 | |
JPH1028265A (ja) | 遠隔操縦作業機械の作業現場モニタ装置 | |
WO2021054415A1 (ja) | ショベル | |
JP2021102902A (ja) | 建設機械の遠隔操縦システム | |
WO2023026568A1 (ja) | 遠隔操作システムおよび遠隔操作複合システム | |
WO2022070567A1 (ja) | 遠隔操作支援装置及び遠隔操作支援システム | |
JP2022152970A (ja) | ショベル、ショベルの管理システム | |
WO2021106280A1 (ja) | 作業支援サーバ、作業支援方法および作業支援システム | |
US20230370568A1 (en) | Control device for work machine | |
US20240141616A1 (en) | Remote operation assistance server and remote operation asistance system | |
US20220307224A1 (en) | Work support system and work support composite system | |
JP2023093109A (ja) | 建設機械、及び情報処理装置 | |
JP2024051364A (ja) | 作業機械の遠隔情報取得システム、及び遠隔情報取得システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240423 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240506 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7494470 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |