最新it技術のプラント保修解体技術のプラント保修...
TRANSCRIPT
最新IT技術のプラント保修 解体最新IT技術のプラント保修・解体作業支援への応用の可能性作業支援への応用の可能性
京都大学大学院 エネルギ 科学研究科京都大学大学院 エネルギー科学研究科
石井 裕剛 ([email protected])
Outline
プラント運転・保修・解体の現状 拡張現実感技術 環境計測・認識技術 環境計測・認識技術 モバイルデバイス技術 作業効率化から人間強化へ 今後の展望
Kyoto UniversityKyoto University11
今後の展望
自己紹介
最近の主な研究テーマ
プ知的オフィス作業のプロダクティビティ維持・向上
環境配慮行動促進
拡張現実感のプラント解体作業支援への応用
拡張現実感関係の共同研究拡張現実感関係の共同研究
拡張現実感のプラント解体作業支援への応用(日本原子力研究開発機構)(日本原子力研究開発機構)
広域トラッキング技術の開発(ノルウェー・エネルギー技術研究所)(ノルウェー・エネルギー技術研究所)
Kyoto UniversityKyoto University22
本講演の概要
プラント運転・保修・解体の現状
拡張現実感技術
拡張現実感技術とは?
当研究室の過去の研究事例紹介
環境計測・認識技術環境計測 認識技術
RGB-Dカメラ、画像処理、点群処理等々
モバイルデバイス技術モバイルデバイス技術
HMD、タブレット等々
作業効率化から人間強化へ作業効率化から人間強化へ
今後の展望
Kyoto UniversityKyoto University33
プラント運転・保修・解体の現状
石油・ガス・化学・発電などのプラント
新規に設備投資をすることに限界
メンテナンスによる設備延命が必要
特に発電プラントは、
コスト削減が今まで以上に急務
さらに、
熟練者が減少熟練者が減少
そもそも働ける日本人が減ってきている
●人材が流動的●人材が流動的●少人数・非精鋭
厳しい条件下での運用になる
Kyoto UniversityKyoto University44
これまでのIT導入アプローチ
プラント運転
自動化が進展
保守・解体
メンテナンス情報・設備情報を電子化して一元管理
インターネット・イントラネットで遠隔連携や遠隔保守人間生活工学研究センター 石油プラント保守点検支援
東芝 遠隔運転保守サービス(e-TOPSTM) など
●これまでのIT化は、主に電子化・ネットワーク化●情報の共有 時間 場所の隔たりを埋める●情報の共有、時間・場所の隔たりを埋める
作業の効率化人間 能力増強が必要
これからは
Kyoto UniversityKyoto University55
作業の効率化人間の能力増強が必要
拡張現実感とは張
実世界映像
合成された映像
コンピュータ生成仮想物体
HMD等による参照
コンピュータで生成した仮想の物体や情報を、あたかも現実の世界に存在するかのように見せることで、現
Kyoto UniversityKyoto University66
も現実 世界 存在する う 見 る 、現実の世界を拡張する技術
拡張現実感とは
どの位置や方向から見ても、情報が現実世界のある定ま た位置に存在するように見える
張
ある定まった位置に存在するように見える
短時間で直観的に情報提供を行えるようにするためのインタフェ ス設計のアイデアの 種
Kyoto UniversityKyoto University
インタフェース設計のアイデアの一種
77
拡張現実感の採用により可能になること張
1. 現実世界における3次元的な位置や方向を分かりやすく示すことができる分かりやすく示すことができる作業対象物の発見支援、危険箇所の気づき支援
目的地までのナビゲ ション
2. 通常は見えないものを見えるようにできる
目的地までのナビゲーション
3 現実世界と仮想世界(3次元CADデ タ等)の間の3. 現実世界と仮想世界(3次元CADデータ等)の間の比較を容易にできる
Kyoto UniversityKyoto University88
3次元的な位置や方向の提示
作業対象物の発見支援
UP
HMD
紙のマニュアル 拡張現実感
○作業効率の向上○ヒ マンエラ の減少
Kyoto UniversityKyoto University99
○ヒューマンエラーの減少
3次元的な位置や方向の提示
危険箇所の気づき支援
目的地までのナビゲーション
危険箇所の表示
Kyoto UniversityKyoto University1010
作業現場までのナビゲーション危険箇所の表示
拡張現実感の採用により可能になること張
1. 現実世界における3次元的な位置や方向を分かりやすく示すことができる分かりやすく示すことができる作業対象物の発見支援、危険箇所の気づき支援
目的地までのナビゲ ション
2. 通常は見えないものを見えるようにできる
目的地までのナビゲーション
建築物設計案の可視化
放射線の可視化
3 現実世界と仮想世界(3次元CADデ タ等)の間の
物の透明化
3. 現実世界と仮想世界(3次元CADデータ等)の間の比較を容易にできる
Kyoto UniversityKyoto University1111
拡張現実感の採用により可能になること張
1. 現実世界における3次元的な位置や方向を分かりやすく示すことができる分かりやすく示すことができる作業対象物の発見支援、危険箇所の気づき支援
目的地までのナビゲ ション
2. 通常は見えないものを見えるようにできる
目的地までのナビゲーション
建築物設計案の可視化
放射線の可視化
3 現実世界と仮想世界(3次元CADデ タ等)の間の
物の透明化
3. 現実世界と仮想世界(3次元CADデータ等)の間の比較を容易にできる
Kyoto UniversityKyoto University1313
拡張現実感の採用により可能になること張
1. 現実世界における3次元的な位置や方向を分かりやすく示すことができる分かりやすく示すことができる作業対象物の発見支援、危険箇所の気づき支援
目的地までのナビゲ ション
2. 通常は見えないものを見えるようにできる
目的地までのナビゲーション
建築物設計案の可視化
放射線の可視化
3 現実世界と仮想世界(3次元CADデ タ等)の間の
物の透明化
3. 現実世界と仮想世界(3次元CADデータ等)の間の比較を容易にできる
Kyoto UniversityKyoto University1515
現場と管理データの間の異なっている箇所の発見支援
解体作業を実施する際の問題点
切断箇所のマーキング時
作業終了時 作業の反映マ キング時
正確な記録が 紙面からデ タベ面倒・難しい データベースへの
転載が面倒どこ切るの?切るの
作業業監督
指示書
Kyoto UniversityKyoto University1818
ARを用いた解体情報参照支援情 援
重畳画像重畳画像
カメラの映像カメラの映像
切断カメラ 断禁止箇
切断箇作
カメラ
3次元CADモデル
→箇所↓
箇所
解体対象機器
作業監督
小型パソコン
Kyoto UniversityKyoto University1919
3次元CADモデル
ARを用いた解体進捗記録支援
重畳画像
録
作業開始前の解体対象の状態解体対象の状態
解体対象の現状と3次元CADモデルとを3次元CADモデルとを比較し、異なっている箇所を電子ペンで指示所を電子 ンで指示
Kyoto UniversityKyoto University2020
解体作業計画を立てる際の問題点
足場・グリーンハウス設置位置決定
必要資材量の見積もり
作業内容の伝達ハウス設置位置決定 見積もり
この場所に足場を どのくらいのどうやこの場所に足場を
置いてあの場所に手が届く?
どのくらいの資材が必要?
どうやって説明する?
Kyoto UniversityKyoto University2323
ARを用いた解体作業計画立案支援 グリーンハウスや足場の設置を現場で視覚的に検討可能
(作業手順書や作業用要領書の作成を支援)
マーカマーカ板
マーカ板操作者
(作業手順書や作業用要領書の作成を支援)
(カメラ位置
推定用)
カ板
カメラ
解体作業現場
タブレットタブレットPC
三脚
タブレットPC画面上に表示される映像(足場の重畳表示)
システム
Kyoto UniversityKyoto University2424
三脚 システム操作者
環境計測・認識技術
● 拡張現実感等のアイデアは昔から存在● 重要な は● 重要なのはコンテンツ● 安価にContext awareにする技術が台頭
環境計測技術
RGB-DカメラRGB Dカメラ
レーザスキャナ
DTAMDTAM
環境認識技術環境認識技術
画像からの物体認識
点群からの物体認識
Kyoto UniversityKyoto University
点群からの物体認識
2626
RGB-D(RGB-Depth)カメラ( p )通常の赤・緑・青の色情報に加えて、各画素の奥行情報をリアルタイムに取得情報をリアルタイムに取得
Kyoto UniversityKyoto University2727
RGB-Dカメラが安価に
RGB-Dカメラ自体は昔から入手可能
但し高価(数百万円)
Microsoft Kinectの販売により安価に入手可能(数万円程度)
インタラクションの研究者が競ってRGB-Dカメラを用いインタラクションの研究者が競 て カ ラを用て研究
移動車・者に搭載することにより環境形状・色を取得移動車 者に搭載することにより環境形状 色を取得
Kyoto UniversityKyoto University2828
RGB-D SLAM
Kyoto UniversityKyoto University2929
Real-time appearance-based SLAM for RGB-D sensor (I3S CNRS, France)http://www.youtube.com/watch?v=pPVQB2EUUCk
GPU コンピューティング
高性能GPUの登場により計算能力が安価に
画像処理で高性能GPUが使えるようになった
アルゴリズムの処理速度
アルゴリズムの安定な実行に必要な処理速度>
リアルタイムで実行可能なアルゴリズムが増加
SLAM(Simultaneous Localization and Mapping)カメラ1台でカメラ自身の位置・方向の推測と環境の密な3次元点群の取得を実現
Kyoto UniversityKyoto University3131
DTAMマーカレス & 非平面状 & 同時に形状計測
カメラのみで3次元の形状情報をリアルタイムで計測カメラのみで3次元の形状情報をリアルタイムで計測
Kyoto UniversityKyoto University3232
http://www.youtube.com/watch?v=Df9WhgibCQAR. A. Newcombe, S. J. Lovegrove and A. J. Davison, Imperial College London, UK
画像や点群からの物体認識
Wonwoo Lee, Nohyoung Park, Woontack Woo :
Kyoto UniversityKyoto University3333
http://www.youtube.com/watch?v=TgnocccmS7UGwangju Institute of Science and Technology, Korea
フリー&オープンソースのライブラリ PCL(Point Cloud Library) VTK (Visualization Tool Kit) VTK (Visualization Tool Kit)
Kyoto UniversityKyoto University3434
PCL and ParaView Demonstration http://www.youtube.com/watch?v=BZBQXcBvHW0
モバイルデバイス
iPhone & iPad Google Glass
急速に普及(iPhoneは2007年6月 iPadは2010年4月)
試験的に専門家が用いるのと一般の人が大量に使い始めるの
急速に普及(iPhoneは2007年6月、iPadは2010年4月)
Google Glassは来春には販売の予定
Kyoto UniversityKyoto University3535
試験的に専門家が用いるのと 般の人が大量に使い始めるのとは大きく違う
つまり・・・
技術が成熟してきた
情報提示デバイスとしてiPadや超軽量HMD環境計測・認識技術が新しい段階を迎えようとしている
情報の取得・更新のタイムサイクル
環境モデリングの頻度・詳細度中長期サイクルでは今までも行われてきた
プラント設計時の設計情報、設備保守経歴情報
=> 準リアルタイム更新・手作業のため抜け落ちの危険性
点検時の現場映像点検時の現場映像
=> 蓄積のみ(つかえそうで使えない)
Kyoto UniversityKyoto University3636
これからの支援環境
情報の取得・更新が秒単位+状況理解が加わる
プラント運転 保守 解体のやり方が大きく変わる可能プラント運転・保守・解体のやり方が大きく変わる可能性がある
ガ状況依存ガイダンス
必要な時に必要な形で情報が提示される
「データベースを検索」という意識は無くなる?
Kyoto UniversityKyoto University3737
今後の展望展
日本では、
エンターテインメントへの応用が主
プラントの運転・保守・解体に本格的に利用しようとする動きが非常に少ないが非常に少ない情報漏えいを恐れてiPadの利用を禁止しているプラントもある
海外では、いくつかプロジェクトが動いている
M VAR (EU f d d j t)ManuVAR (EU-funded project) Leonardo da Vinci Projects (EU-funded project)
M t i F h f 等の企業 研究機関Metaio, Fraunhofer等の企業・研究機関
日本はどうすべきか?Kyoto UniversityKyoto University3838
日本はどうすべきか?