JPS59205298A - ロボツトの安全領域監視方法 - Google Patents

ロボツトの安全領域監視方法

Info

Publication number
JPS59205298A
JPS59205298A JP7818083A JP7818083A JPS59205298A JP S59205298 A JPS59205298 A JP S59205298A JP 7818083 A JP7818083 A JP 7818083A JP 7818083 A JP7818083 A JP 7818083A JP S59205298 A JPS59205298 A JP S59205298A
Authority
JP
Japan
Prior art keywords
robot
camera
arm
obstacles
obstacle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7818083A
Other languages
English (en)
Inventor
陽市 高木
裕 久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP7818083A priority Critical patent/JPS59205298A/ja
Publication of JPS59205298A publication Critical patent/JPS59205298A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔発明の利用分野〕 ロボットアームの動作域の監視に係り、特に該動作域を
画像として監視する方法に関する。
〔発明の背景〕
ロボットアームの動作安全域の監視方法として例えば該
アームに超音波送受信器を複数取付けて他のアームの接
近を検知し他のロボットのアームとの衝突全防止するな
どの方法がある。
1だ該ロボットの周辺に柵などを設けて不用意に人間が
立入ることを防止する方式もとられている。しかしなが
らティーチング時のオペレータの安全を考慮したものは
ない。前記超音波方式はお互いに超音波送受信器を備え
ていないといけないし、超音波の使用は、設備構成が高
価になると共に、障害物の形状、色あいを判定すること
ができない。また、ロボットの安全対策を考えるときは
、対人あるいは対障害物形状をも含めて検知できないと
、真の意味での安全対策にはならないという問題があっ
た。
またロボット装置は、作業能率を上げる為には、アーム
動作の高速化が必要である。その動作は、利用方法の多
様化と共に複雑化し、また、他設備との空間の共有、ロ
ボット動作空間への人間の侵入等の機会が益々増大して
きている。これらロボット動作空間への障害物の侵入は
、ロボット制御からみた時、突発的であり予測不可能で
ある。このような観点から、ロボット制御側に障害物検
知機能をもたせること以外によい対策が考えられないの
が現状である。
〔発明の目的〕
ロボットのアーム移動予定空間の障害物の有無を画像と
して検知し、ロボットの障害物との衝突を防止すること
にある。
〔発明の実施例〕
本発明の実施例について第1図、第2図により説明する
。ロボットアーム2は、ロボット1を中心に全方向に移
動するものとする。ロボットアーム2は、スケジューラ
3に従って任意の動きをするので、ロボットアーム2の
動作範囲41内に障害物や人間が入った場合衝突事故が
発生する危険がある。本発明は、ロボットの動作範囲の
空間に障害物が侵入した場合、ロボットが安全運動を行
いうるようにコントロールすることに特徴がある。
カメラ9は、ロボットアーム2の動作範囲41を常時撮
像し、ロボットの周辺環境データとして保存する。また
、カメラ7は、ロボットアーム2の動作方向を撮像し、
該空間40に障害物が存在するかどうかを監視するよう
にしている。以下、本発明の装置の詳細を第2図により
説明する。
ロボットアーム2の動作範囲41の撮像及びそのデータ
処理について説明する。環境データ処理部15は、カメ
ラの向き制御部17、カメラ操作部8を介してカメラ9
を領域41を常時スキャンし、画像入力部11により画
像メモリ13にカメラ9よりの入力画像を書き込む。画
像データの取込毎に環境データ処理部15は、該取込画
像データに対応する旧壌境データと比較を行い障害物が
検知された場合は、コンソール(、RTIOにその旨を
表示しオペレータに知らせる。オペレータは、旧環境デ
ータと新規データの差異が障害物によるか否かを判定し
、該CRTより入力する。環境データ処理機構は、障害
物でないと判定された場合は、環境データファイルを新
規入力データでおきかえを行う。このように環境データ
のおきかえを行う事により微少な環境変化(例えば、時
刻の進行と共に変化する明るさ)に対して有効である。
本処理の詳aI全第3図に流れ図にて示す。ロボット動
作範囲の障害物のない環境条件が常時更新されて環境デ
ータファイル19に記憶することができ障害物検知のだ
めの基礎データとして使用することができる。
次(・こロボットのアーム2とカメラ7の相互関係につ
いて述べる。ロボットアーム2は、ロボット動作スケジ
ューラ3の情報を基にロボット動作制御機構4を介して
コントロールされる。一方カメラ7は、ロボット動作ス
ケジューラ3からの情報を基にカメラ視覚追従部5、カ
メラ操作部6を介してコントロールされ、常時、アーム
2の動作方向の前方をスキャンするように仕組まれ画像
人力部12により画像データは画像メモリ14に書き込
まれる。画r象メモリ14に醤き込まれた画像データは
、障害物解析部16にとり込まれ、環境データファイル
19のデータと比較され、アーム2移動方向の空間に障
害物の有無を検知する。本処理の詳細を第4図に流れ図
で示す。このように本発明の装置は仕組まれているので
、ロボットアーム2の動作方向の空間に障害物が侵入す
ると直ちに検知でき、アーム2の運動を減速したり、ス
トップすることができる。
また、周辺の明るさが徐々に変化する場合には環境デー
タは、常時、カメラ9からの入力におきかえられるので
障害物検知に影響することはない。
次に障害空間ファイルの構造について記述する。
障害空間ファイルは、ロボット動作全領域を基盤状に細
分し、各基盤目をメモリの1ビツトを第5図(a)、 
(b)のように対応させる。(a)はロボット動作安全
領域、(b)は障害空間ファイルを示す。障害発生の基
盤目に相当するピントに′1”をセットするようにする
。このようになっているのでロボットを動作させる前に
進行しようとする空間の障害物有無を確認しつつ動作を
実行することが可能であり、ロボットアームが障害物と
衝突するごとき危険がなくなる。
次に環境データの構造について述べる。環境データは、
障害空間ファイルと全く同じようにロボット動作全領域
を基盤状に細分化し、各基盤目をメモリの8ビツトに@
6図(a)、 (b)のように対応させである。従って
各基盤目の画1象データを濃淡画像データとして格納す
ることができる。環境データは、このような構成である
からロボット動作全領域の安全状態における環境を濃淡
画像の形態で記憶することにより、カメラ入力の濃淡画
像と比較することによシ壌境変化を検知することが可能
である。この変化が、極めて低く全体的な明るさの変化
の場合には、室内明るさの変化と判断し、部分的な大き
な変化を生じた場合、その場所に障害物侵入したものと
判断するものとする。このようであるから本発明の装置
によりロボット自体で安全を確認しつつ動作を行うこと
ができるのである。
本発明の装置では、背景と同じ色彩の障害物が、ロボッ
ト障害物が入って釆た場合の対策として次のようなこと
を考える。バックとなる部分を色彩を変更できるように
しておく。たとえば、バックスクリーンを変えるとか、
バックのみの照明を変更するとかする。この変更は、周
期的に行えるようにして、環境条件データとしては、各
バックの環境条件毎に保有するようにするものとする。
このようにすることは容易に実現可能であり、しかも、
障害物が、どのようなもの(バックの色彩と同じであっ
てもよい)でも検知可能である。尚、バックの条件の変
更は周期的に行うが、その周期は、計算処理の速度によ
り決定される。周期があまり太きいときは障害物の侵入
に対して速やかな対応ができないので実用性がない。画
像処理の主要部をハード化し処理時間の高速化により大
略0.1〜0,2秒程度が現在の技術で容易に可能であ
るから、バックの変更周JjAは、o、2〜1.0秒程
度にとるのが適当である。このようKすれば、人間の視
覚程度の認識速度で障害物を検知し、ロボットは安全運
動できる。
ロボットアームに超音波を付けて周囲の障害物を検知す
る方式があるが、この場合、相手側の障害物が、複雑な
形状をしていること及びどのような位置にあるかわから
ないなどのため、超音波装置を数多くアームに付けなけ
ればならない。従つて超音波の設備が美大となる。これ
に比べて本発明の装置では、障害物の形状を直接とらえ
ることができるため、必要最小限のカメラを設けるだけ
で争足りる。たとえば、平面上で障害物を検知するだけ
で十分機能が足りる場合は、2台のカメラを設けるだけ
でよい。立体的に障害物をとらえたい時は、カメラをち
と2台増すことにより実現でき、設備費用も大したこと
はないことが容易に理解されよう。また、あと1台カメ
ラを増やし、障害物をズームアツプしてとらえることに
より障害物の位置をより高精度に把握することができる
この精度向上のだめのカメラは、適当なカメラ制御機構
を有し、障害物を自動的にシーン中にとらえるように仕
組んでおき、ズームアツプをくり返し、目的の精度にな
るまでズームアンプを行う。
このように本装置は仕組んであるので障害物を立体的に
認識すると共に、障害物の位置を高精度に検知すること
も可能である。このようにすることにより障害物に対す
る精密な操作をロボットから行うことも可能である。ま
た本装置は、障害物(9) をカラーの濃淡画像(例えば、8ビット/画素×3原色
)としてとらえるので、同一形状の障害物に対してもあ
らかじめ定められた周期で色調を変えることにより別々
に認識することが可能である。
これは童識的に障害物に色彩を施し、ロボット処理をそ
れに応じて異なる動作を行わさせることができる。本装
置は、障害物に、立体的に認識できるので、多関節ロボ
ッ)K適用することによシ動的な障害物に対して、うま
く多関節アームを曲げて、目的地点にアームをもってゆ
くことができる。
このような目的を果すために超音波による方式では、ア
ーム上に美大な数の超音波送受信装置を付けなければ実
現できないが、本装置では、わずかな台数のカメラ装置
で容易に実現できる。第7図に多関節ロボットに本発明
の装置を適用した1実施例を示す。1・はロボット、2
は、多関節アーム、42は障害物、43は、障害物投影
を示す。ここでは、障害物を平面としてとらえているが
、前に記述したように、カメラを増やすことにより物体
42は、立体的な位置としても検知できる。考え(10
) 方は、平面の場合と全く同じであるのでここでは省略し
である。
本発明の装置は、従来の超音波による方式に比べて以下
のような利点がある。
(1)簡便な設備で、障害物を立体的に認識することが
できる(超音波方式では、多数の超音波送受信機をアー
ムに加える必要があり美大な設備となる)。
(2)空間全体を障害物の有無で区分けできるので、ア
ーム動作を高速動作することができる(超音波の方式で
は、障害物とある程度近づかないと検知できないので、
アームの慣性を考える高速化に制限を加える必要がある
)。
(3)障害物位置と形状を立体的に認識できるので、ア
ーム動作路を最適化することができる(超音波の方式で
は、障害物を認識してはじめて動作路の修正をするしか
方法がない)。
(4)  障害物を形状以外に色彩により認識できるの
で、障害物の具体的な性質をも知ることができる(人間
か、その他の物体かの区別など)。
(11) 以上のように本発明の装置では、超音波の方式に比べて
多くの長所がある。本発明の装置では、このように、障
害物に関する詳細な情報を使って、目的に応じて、ロボ
ット全安全に制御することができる。
【図面の簡単な説明】
第1図は、本発明の使用例と機能の1例を、第2図は、
本発明の装置の詳細構造を、第3図、第4図は処理フロ
ーを、第5図、第6図はロボットの動作安全領域、障害
空間ファイルの説明図を、第7図は関節ロボットへの本
発明の適用例を示す。 1・・・ロボット、2・・・ロボットアーム、3・・・
ロボット動作スケジューラ、4・・・ロボット動作制御
部、5・・・カメラアーム追従部、6・・・カメラ操作
部、7・・・カメラ(アーム移動方向領域撮像用)、8
・・・カメラ操作部、9・・・カメラ(ロボット全動作
領域監視用)、10・・・コンソールCRT、11・・
・画像入力部、12・・・画像入力部、13・・・画像
メモ1ハ14・・・画像メモリ、15・・・環境データ
処理部、16・・・障害物解析部、17・・・カメラ向
制御部、(12) 18・・・障害空間ファイル、19・・・環境データフ
ァイル、20・・・ロボット動作スケジュー2、ロボッ
ト動作制御部間インターフェース、21・・・ロボット
、ロボット動作制御部間インターフェース、22・・・
ロボット動作スケジュー2、カメラアーム追従部間イン
ターフェース、23・・・カメラアーム追従部、カメラ
操作部間インターフェース、24・・・カメラアーム追
従部、画像入力部間インターフェース、25・・・環境
データ処理部、カメラ向制御部間インターフェース、2
6・・・カメラ向制御部、カメラ操作部間インターフェ
ース、27・・・障害空間ファイル、ロボット動作制御
部間インターフェース、28・・・環境データファイル
、障害物解析部間インターフェース5,29・・・障害
解析部、障害空間ファイル間インターフェース、30・
・・環境データ処理部、環境データファイル間インター
フェース、31・・・環境データ処理部、障害空間ファ
イル間インターフェース、32・・・環境データ処理部
、画像入力部間インターフェース、33・・・画像メモ
リ、障害物解析部間インターフェース、34・・・力(
13) メラ、画像入力部、35・・・カメラ操作部、画像入力
部間インターフェース、36・・・画像入力部、画像メ
モリ間インターフェース、37・・・画像入力部、画像
メモリ間インターフェース、40・・・ロボットアーム
動作方向エリア、41・・・ロボットアーム全(14) (b) 木イ!−月4 第 6  図

Claims (1)

    【特許請求の範囲】
  1. 1、 カメラによる撮像画像を利用してロボットの動作
    領域の監視をおこなう方法において、少なくとも第1の
    カメラでロボットアームの全動作領域を含む動作領域に
    ついて撮像し、他の第2のカメラで該ロボットアームを
    含む部分動作領域について撮像し、該第1のカメラによ
    る撮像データの色調をあらかじめ定めた周期で変更し、
    該第1.第2のカメラによる撮像データの差に基づいて
    障害物を検知することを特徴とするロボットの安全領域
    監視方法。
JP7818083A 1983-05-06 1983-05-06 ロボツトの安全領域監視方法 Pending JPS59205298A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP7818083A JPS59205298A (ja) 1983-05-06 1983-05-06 ロボツトの安全領域監視方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7818083A JPS59205298A (ja) 1983-05-06 1983-05-06 ロボツトの安全領域監視方法

Publications (1)

Publication Number Publication Date
JPS59205298A true JPS59205298A (ja) 1984-11-20

Family

ID=13654764

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7818083A Pending JPS59205298A (ja) 1983-05-06 1983-05-06 ロボツトの安全領域監視方法

Country Status (1)

Country Link
JP (1) JPS59205298A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012187641A (ja) * 2011-03-08 2012-10-04 Denso Wave Inc ロボット監視システム、及びロボット監視システムの異常判定方法
US8816874B2 (en) 2010-01-25 2014-08-26 Panasonic Corporation Danger presentation device, danger presentation system, danger presentation method and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8816874B2 (en) 2010-01-25 2014-08-26 Panasonic Corporation Danger presentation device, danger presentation system, danger presentation method and program
JP2012187641A (ja) * 2011-03-08 2012-10-04 Denso Wave Inc ロボット監視システム、及びロボット監視システムの異常判定方法

Similar Documents

Publication Publication Date Title
CN113557713B (zh) 情景感知监测
JP7058126B2 (ja) ロボット制御装置および自動組立システム
US6404455B1 (en) Method for tracking entering object and apparatus for tracking and monitoring entering object
US8731276B2 (en) Motion space presentation device and motion space presentation method
JP3043925B2 (ja) 移動物体検出判定装置
EP1981278A1 (en) Automatic tracking device and automatic tracking method
JP6900918B2 (ja) 学習装置及び学習方法
US12104946B2 (en) Optical fiber sensing system, action specifying apparatus, action specifying method, and computer readable medium
JP7464281B2 (ja) 光ファイバセンシングシステム、監視装置、監視方法、及びプログラム
JP2022548009A (ja) 物体移動システム
JP2010128727A (ja) 画像処理装置
JPH09331520A (ja) 自動追跡システム
JPWO2020095383A1 (ja) 監視システム、監視装置、監視方法、及びプログラム
RU2685996C1 (ru) Способ и система предиктивного избегания столкновения манипулятора с человеком
JP2021060784A (ja) 物体検知装置、システム、方法、及びプログラム
JPS59205298A (ja) ロボツトの安全領域監視方法
KR20230062175A (ko) 산업현장의 쓰러짐 감지 감시카메라 시스템 및 이의 동작 방법
JPS6334093A (ja) 視覚装置
JP6368503B2 (ja) 障害物監視システム及びプログラム
JP2024169573A (ja) クレーン用撮影システム及びプログラム
CN112396997A (zh) 一种光影沙盘智能交互系统
JPH0389103A (ja) 架空送電線障害物接近検知装置
WO2023162484A1 (ja) 情報処理装置及びプログラム
US20240231304A1 (en) Operation management device
CN114074320A (zh) 机器人控制方法及装置