指揮機械手，以毫秒級速度，從60多種大小、長短、姿態(tài)都不同的黑色螺絲中精確抓出需要的那一顆，這得是怎樣的“火眼金睛”？8月11日，記者從兩江協(xié)同創(chuàng)新區(qū)獲悉，近日，明月湖畔的搖櫓船科技為客戶定制了特高壓行業(yè)首個基于3D視覺引導的螺絲上料系統(tǒng)，實現(xiàn)了新的突破。

突破的難點在哪？以前述的“抓螺絲”難題為例，無序擺放的螺絲，對圖像識別能力要求高；要從一大堆螺絲中抓出一顆，對機械手的抓取精確度要求高；并且，螺絲表面會反射大量光線，導致工業(yè)相機成像時產生光斑和眩光，干擾識精度和效率。

▲機械手正在抓取黑色螺絲。圖片來源：企業(yè)供圖

對這些難點，搖櫓船科技選擇一一擊破。

首先，為客戶配備高精度硬件——3D結構光相機，精確識圖。其次，配合自研的高精度手眼標定算法，讓機械臂和3D相機達成默契的“手眼配合”，0.2毫秒內找到所需的螺絲。

算法通過深度學習模型，能快速找到圖像里的所需螺絲，同時通過分割像素，使不同螺絲的輪廓特征更清楚，再配合姿態(tài)計算，算出所需的那一顆螺絲在一堆螺絲中的位置，準確抓取。

光是會“抓螺絲”還不夠。研發(fā)團隊在深耕應用場景時發(fā)現(xiàn)，無序抓取螺絲時，機械臂易與料框碰撞，造成損壞。不僅拖慢生產，還潛藏巨大的安全隱患。

搖櫓船科技對機械臂增加了姿態(tài)約束和智能閃避功能，既不讓機械臂亂動，又賦予它“眼觀六路”的能力，遇到障礙自動避讓，保障生產安全。

搖櫓船科技相關負責人表示，這一技術突破，解決了無序抓取在機器視覺領域的行業(yè)難題，還以全視場高精度引導、抗反光、防碰撞等領先技術，為智能制造打開了一個新場景。