《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 電子元件 > 業(yè)界動(dòng)態(tài) > 大聯(lián)大友尚集團(tuán)推出基于Intel產(chǎn)品的智能機(jī)械手臂視覺(jué)系統(tǒng)方案

大聯(lián)大友尚集團(tuán)推出基于Intel產(chǎn)品的智能機(jī)械手臂視覺(jué)系統(tǒng)方案

2021-11-03
來(lái)源:大聯(lián)大友尚

  2021年11月3日,致力于亞太地區(qū)市場(chǎng)的領(lǐng)先半導(dǎo)體元器件分銷(xiāo)商---大聯(lián)大控股宣布,其旗下友尚推出基于英特爾(Intel)NCS2神經(jīng)計(jì)算棒的視覺(jué)系統(tǒng)方案,適用于智能機(jī)械手臂。  

1.png

  圖示1-大聯(lián)大友尚基于Intel產(chǎn)品的智能機(jī)械手臂視覺(jué)系統(tǒng)方案的展示板圖

  機(jī)械手臂是一種能夠靈活代替人類(lèi)手和臂工作的機(jī)器,通常用以按固定程序抓取、搬運(yùn)物件或操作工具的自動(dòng)操作裝置。隨著機(jī)器視覺(jué)、AI等技術(shù)的不斷突破,智能機(jī)械手臂的發(fā)展也日益壯大。大聯(lián)大友尚基于Intel NCS2神經(jīng)計(jì)算棒的視覺(jué)系統(tǒng)方案,應(yīng)用于機(jī)械手臂中,可精準(zhǔn)識(shí)別物體,讓抓取、搬用等過(guò)程更加智能。

  

2.jpg

  圖示2-大聯(lián)大友尚基于Intel產(chǎn)品的智能機(jī)械手臂視覺(jué)系統(tǒng)方案的場(chǎng)景應(yīng)用圖

  本方案的核心原理是利用D435識(shí)別到彩色影像結(jié)合深度學(xué)習(xí)的物件定位算法YOLOv3找到物品位置(X,Y)。當(dāng)CPU算力不足時(shí),可使用Intel GPU或VPU(NCS2)加速計(jì)算,再通過(guò)D435識(shí)別到深度影像所對(duì)應(yīng)位置的深度(Z)信息,即可實(shí)現(xiàn)讓機(jī)械手臂正確地伸到正確的空間位置(XYZ)夾取并抓取物品。  

3.jpg

  圖示3-大聯(lián)大友尚基于Intel產(chǎn)品的智能機(jī)械手臂視覺(jué)系統(tǒng)方案的方塊圖

  Intel NCS2是一款具有神經(jīng)計(jì)算引擎的VPU(視覺(jué)處理單元),可提供比前一代產(chǎn)品高出八倍的性能。諸如Caffe,Tensor Flow或MXNet等深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)可以直接與NCS2上的OpenVINO工具包集成。并且這些機(jī)器學(xué)習(xí)框架還針對(duì)全新的深度神經(jīng)網(wǎng)絡(luò)(DNN)推理引擎進(jìn)行優(yōu)化。借助電腦和Intel NCS2,開(kāi)發(fā)人員可以快速啟動(dòng)AI和計(jì)算機(jī)視覺(jué)應(yīng)用的開(kāi)發(fā)。

  NCS2可在USB 3.0上運(yùn)行,不需要其他硬件,從而使用戶(hù)能夠?qū)⑵湓陔娔X上訓(xùn)練好的模型,無(wú)縫部署到各種邊緣設(shè)備而不需連網(wǎng)或連云。無(wú)論是開(kāi)發(fā)智能相機(jī),具有手勢(shì)識(shí)別功能的無(wú)人機(jī),工業(yè)機(jī)器人,還是下一代智能家居設(shè)備,NCS2都能為開(kāi)發(fā)人員提供快速原型所需的功能。

  核心技術(shù)優(yōu)勢(shì):

  Intel RealSense D435 camera:

  低成本的3D雙目深度相機(jī);

  提供完整SDK可以快速與系統(tǒng)整合;

  可快速掃瞄,提供點(diǎn)云資訊;

  可透過(guò)ROS整合開(kāi)發(fā)自主創(chuàng)新功能;

  智能化3D物件辨識(shí)。

  Intel OpenVino Toolkit:

  可最佳化訓(xùn)練好的模型;

  支援業(yè)界、學(xué)界常用的訓(xùn)練框架;

  可快速部屬到Intel的硬體平臺(tái)如CPU、GPU、VPU、FPGA;

  提供常用的預(yù)訓(xùn)練模型如SSD、YOLO等;

  提供C++與Python的應(yīng)用范例,縮短程式開(kāi)發(fā)周期。

  Intel Neural Compute Stick 2(Intel? NCS2):

  在英特爾Movidius Myriad X視覺(jué)處理單元(VPU)上提供卓越的每瓦每美元效能進(jìn)行構(gòu)建和擴(kuò)展;

  支援Windows 10,Ubuntu*或macOS*上快速開(kāi)發(fā);

  在通用框架和開(kāi)箱即用的范例應(yīng)用程式上進(jìn)行開(kāi)發(fā);

  在不需連云情況下進(jìn)行操作;

  在低成本的邊緣設(shè)備(例如Raspberry Pi*3和其他ARM*主機(jī)設(shè)備)端開(kāi)發(fā)原型。

  方案規(guī)格:

  3D相機(jī):Intel RealSense D435 Camera;

  作業(yè)系統(tǒng):Windows 10;

  Intel NUC Rugged Board with Core i3/i5 Processor;

  AI推論套件:Intel OpenVino Toolkit 2020.03;

  內(nèi)存:4GB以上;

  傳輸界面:USB 3.0;

  神經(jīng)計(jì)算棒:Intel Neural Compute Stick 2 (Intel  NCS2)。




圖片.jpg


本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點(diǎn)。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無(wú)法一一聯(lián)系確認(rèn)版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問(wèn)題,請(qǐng)及時(shí)通過(guò)電子郵件或電話通知我們,以便迅速采取適當(dāng)措施,避免給雙方造成不必要的經(jīng)濟(jì)損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。