目次
1台のカメラで操作可能!Youtube動画でシステム学習

1台のカメラで操作可能!Youtube動画でシステム学習

研究チームが開発した新しい操作システムでは、1台のカメラで人の手とロボットアームを同期させることが可能。

特殊なグローブを装着したり、カメラを細かくセッティングしたりする必要はありません。

カメラの前であれば、ユーザーがどこに立っていても問題はなく、ただ自分の腕と指をいつものように動かすだけなのです。

動画から分かるように、ロボットアームはしっかりとユーザーの手の動きを反映して、モノをつかんだり離したりできていますね。

ケースの引き出しをスライドさせて、中の物を取り出すといった複雑な作業も可能とのこと。

人の手と同期して動きを再現する「ロボットアーム」が登場!
(画像=人間の手のように細かな操作が可能 / Credit:Deepak Pathak(Carnegie Mellon University)_Robotic Telekinesis:Learning a Robotic Hand Imitator by Watching Humans on Youtube、『ナゾロジー』より 引用)

この操作システムの斬新な特徴は、「操作と設備がシンプル」なだけではありません。

非常に簡単なシステム学習法を採用しているのです。

今回の操作システムでは、カメラに映る手の2次元画像を分析することで、ロボットアームが行うべき3次元の動きを導き出しています。

ところが人間とロボットの手では、形状・サイズ・構造が異なるので、1枚の画像だけでは上手に変換できません。

膨大な数の「人の手」の画像を分析し、システムに学習させなければいけないのです。

人の手と同期して動きを再現する「ロボットアーム」が登場!
(画像=YouTube動画で手の動きを学習させることに成功 / Credit:Deepak Pathak(Carnegie Mellon University)et al., arXiv(2022)、『ナゾロジー』より 引用)

研究チームは、高いコストをかけてそれら画像データを地道に集めるのではなく、YouTubeの動画を利用することにしました。

YouTubeにアップされているさまざまな「手の動画」でシステム学習させたのです。

実際、この方法により訓練されたシステムは、人間の手の動きを忠実に 再現できました。

この実例は、インターネットにあふれている共有動画の用い方について、新たな道を開くものとなるでしょう。

さて、今回開発されたロボットアーム操作システムは、「操作」の敷居を大きく下げるものとなりました。

さらに研究が進み、実用化できるなら、専門家ではない一般人が、カメラ1台をつかって世界中のどこからでもリモート操作できるようになるでしょう。


参考文献

Robotic Telekinesis: Learning a Robotic Hand Imitator by Watching Humans on Youtube

Robotic telekinesis: Allowing humans to remotely operate and train robotic hands

元論文

Robotic Telekinesis: Learning a Robotic Hand Imitator by Watching Humans on Youtube


提供元・ナゾロジー

【関連記事】
ウミウシに「セルフ斬首と胴体再生」の新行動を発見 生首から心臓まで再生できる(日本)
人間に必要な「1日の水分量」は、他の霊長類の半分だと判明! 森からの脱出に成功した要因か
深海の微生物は「自然に起こる水分解」からエネルギーを得ていた?! エイリアン発見につながる研究結果
「生体工学網膜」が失明治療に革命を起こす?
人工培養脳を「乳児の脳」まで生育することに成功