MIT、新しい物体でも何を見ているか把握しピックアップできるニューラルネットワークを用いたロボットアームシステム「DON」を発表
https://shiropen.com/seamless/dense-object-nets
ロボットは、あらかじめプログラムされた物体を拾い上げることはうまくいきますが、新しい物体に対しては困難します。
そこで、本論文では、ニューラルネットワークを用いて、ランダムな物体を視覚的に認識し把持できるロボットアームシステム「Dense Object Nets(DON)」を提案します。

ロボットは、新しい物体に対して、さまざまな角度からの目視検査後に物体のすべての点をマップして全体的な座標系であるビジュアルロードマップを生成します。
これにより、それまでに見たことがないにもかかわらずピックアップ作業を行うことを可能にします。

DONは、ラベル付きデータセットで事前に訓練されておらず、人の助けなしに物体を視覚的に構築することができます。

例えば、靴をピックアップする場合、かかとの上(物体の特定の場所)を掴んで作業することを覚えると、形状や色などが異なる新しい靴を見ても、靴と認識しかかとの上をうまくつかみピックアップすることができます。

また、DONは、物体を種類(靴、マグカップ、帽子など)で分類するだけでなく、種類内の具体的な特定まで識別することが可能で、例えば、靴山の中から特定の靴をピックアップすることも可能にします。
https://youtu.be/OplLXzxxmdA