還記得一個半月前火爆全網(wǎng)的鋼鐵俠機械臂Dummy嗎？

就是出自華為天才少年“稚暉君”之手，能給葡萄縫針的那個！

在廁所遠程遙控、實時完成！

這臺如同《鋼鐵俠》里一樣強悍的機械臂Dummy，讓不少業(yè)內(nèi)人士看完直呼好強，視頻一出，彈幕再次被網(wǎng)友刷瘋，紛紛表示：

之前的視頻中，Dummy機械臂實現(xiàn)了7種交互方式，不過這還不夠，時隔一個半月，稚暉君的「鋼鐵俠機械臂」系列又更新了！

▍加上AI視覺，2小時學(xué)會抓螺母

Dummy再次出現(xiàn)，又給我們帶來了什么驚喜呢？

這次，稚暉君用Dummy做了個AI視覺抓取demo，讓機械臂自己去抓取螺母。

將三個螺母放在白紙上，Dummy精準地識別到了螺母的位置，利用靈活的力反饋夾爪，抓取并放在目標(biāo)位置上。

好不容易放上去的螺母又被稚暉君拿下來了，行吧，那就再抓一次。

機械臂：“怎么又拿下來了？玩我是吧？”

稚暉君介紹，目前用Dummy做了個簡單的AI視覺抓取demo，從模型訓(xùn)練到部署只花了2個小時。

后面會把遷移學(xué)習(xí)功能加入上位機Dummy Studio中，最終想實現(xiàn)的效果就是，可以用少量數(shù)據(jù)標(biāo)注就自動生成端到端的模型來檢測自定義物品。

同時，可以用圖形化的方式調(diào)用各種算法模塊，配合后面的Dummy青春（低成本）版，大家應(yīng)該可以用來做很多有趣的事情。

▍表面上看起來是電子和機械，背后全是算法和數(shù)學(xué)

這款機械臂從里到外全部由稚暉君一人完成，耗時4個半月，其復(fù)雜與困難程度可想而知，光是結(jié)構(gòu)設(shè)計圖就畫了150個版本：

解決了機械臂的電機、驅(qū)動器、減速器三大硬件部分后，更重要的是它的“靈魂”——控制、算法和數(shù)學(xué)等。

控制器相當(dāng)于機械臂的「小腦」，用來操控機械臂的動作、來實現(xiàn)各種功能。

AI視覺算法相當(dāng)于讓機械臂“長了雙眼睛”，讓機械臂能夠看見、并操作需要完成的任務(wù)。

在交互上，稚暉君也有自己的想法，“我想要打造的機械臂，是具備多種交互方式的。”

機械臂實現(xiàn)了7種交互方式，從最簡單的USB串口命令控制機械臂：

到圖形化上位機傻瓜式拖拽交互：

再到AR，結(jié)合增強顯示技術(shù)，實現(xiàn)這樣的效果：

最炫酷的是坐在廁所里，就能利用手勢遠程操控機械臂給葡萄做一場手術(shù)！

正如視頻中稚暉君自己總結(jié)的那樣：“這個項目表面上看起來是電子和機械，其實背后全是算法和數(shù)學(xué)?！?/span>

網(wǎng)友開玩笑稱：

也不是沒有這個可能嘛。

【視頻鏈接】

https://www.bilibili.com/video/BV1xY41147oh