基于Nios II的機(jī)器人視覺(jué)伺服控制器的研究與設(shè)計(jì)
Altera公司的Nios II處理器是可編程邏輯器件的軟核處理器。NiosII軟核處理器和存儲(chǔ)器、I/O接口等外設(shè)可嵌入到FPGA中,組成一個(gè)可編程單芯片系統(tǒng)(SOPC),大大降低了系統(tǒng)的成本、體積和功耗。適合網(wǎng)絡(luò)、電信、數(shù)據(jù)通信、嵌入式和消費(fèi)市場(chǎng)等各種嵌入式應(yīng)用場(chǎng)合。
本文提出一個(gè)基于Nios II處理器結(jié)構(gòu)的系統(tǒng)用于實(shí)現(xiàn)機(jī)器人實(shí)時(shí)運(yùn)動(dòng)檢測(cè)跟蹤,使用線(xiàn)性卡爾曼濾波器算法來(lái)快速完成運(yùn)動(dòng)估計(jì)及進(jìn)一步分析和校正,算法中的乘除利用MATLAB/DSP Builder生成的模塊作為Nios II處理器的自定義指令的設(shè)計(jì)方法。
機(jī)器人視覺(jué)伺服控制器的研究與設(shè)計(jì)
機(jī)器人視覺(jué)伺服控制就是用各種成像系統(tǒng)代替視覺(jué)器官作為輸入的敏感手段,并由高速處理器替代大腦完成相應(yīng)的處理和解釋?zhuān)漭^終研究目標(biāo)就是使機(jī)器人視覺(jué)伺服控制器能像人那樣通過(guò)視覺(jué)觀察和理解世界,具有自主適應(yīng)環(huán)境的能力,可依據(jù)視覺(jué)敏感和反饋,以某種程度的智能完成一定的任務(wù)。
系統(tǒng)硬件實(shí)現(xiàn)
基于SOPC的機(jī)器人視覺(jué)伺服控制器,主要由FPGA、存儲(chǔ)器和外設(shè)三個(gè)部分,如圖1所示。
攝像頭位置固定,它所能采集圖像的范圍稱(chēng)為視覺(jué)區(qū)域,調(diào)整攝像機(jī)使視覺(jué)區(qū)域覆蓋機(jī)器人的工作空間,即機(jī)器人要跟蹤的曲線(xiàn)在該視覺(jué)區(qū)域內(nèi)。利用攝像機(jī)采集圖像,而后系統(tǒng)對(duì)采集的圖像進(jìn)行處理,分析、提取出離散的采樣點(diǎn)序列,較后再根據(jù)采樣點(diǎn)序列規(guī)劃?rùn)C(jī)器人的運(yùn)動(dòng)路徑。其中,F(xiàn)PGA部分核心是Nios II處理器Core。在一般的嵌入式系統(tǒng)開(kāi)發(fā)中,當(dāng)需要新的外設(shè)模塊時(shí)往往需要在PCB上加入相應(yīng)的外設(shè)芯片或者換用更高檔的CPU,而SOPC設(shè)計(jì)可以同一個(gè)FPGA芯片內(nèi)加入相應(yīng)的外設(shè)模塊核,并通過(guò)在片上的Avalon總線(xiàn)與NiosⅡ處理器Core相連,因而不需要在PCB這個(gè)層面上作更多的修改。成像采集裝置從目標(biāo)對(duì)象場(chǎng)景中采集圖像序列,保存在SOPC的片外存儲(chǔ)器中,然后利用NiosⅡ處理器和定制的乘法、除法等DSP運(yùn)算指令來(lái)實(shí)現(xiàn)線(xiàn)形卡爾曼濾波器的算法,從而實(shí)現(xiàn)運(yùn)動(dòng)目標(biāo)的識(shí)別與跟蹤。
系統(tǒng)軟件的實(shí)現(xiàn)
離散線(xiàn)性卡爾曼濾波算法
線(xiàn)性卡爾曼濾波是美國(guó)工程師Kalman在線(xiàn)性較小方差估計(jì)的基礎(chǔ)上,提出的數(shù)學(xué)結(jié)構(gòu)上比較簡(jiǎn)單的較優(yōu)線(xiàn)性遞推濾波方法,具有計(jì)算量、存儲(chǔ)量低,實(shí)時(shí)性高的優(yōu)點(diǎn)。特別是經(jīng)歷了初始濾波的過(guò)渡狀態(tài)后,濾波效果非常好。
線(xiàn)性卡爾曼濾波基本算法如下:設(shè)一隨機(jī)動(dòng)態(tài)系統(tǒng),其數(shù)學(xué)模型為:
公式1中x(k)為系統(tǒng)狀態(tài)矢量,w(k)為系統(tǒng)噪音矢量,φ(k),Г(k)為系統(tǒng)矩陣,公式2中Z(k)為系統(tǒng)觀測(cè)矢量,H(k)為系統(tǒng)觀測(cè)矩陣,V(k)為系統(tǒng)觀測(cè)噪音矩陣。
關(guān)于系統(tǒng)的隨機(jī)性,本文假定,系統(tǒng)噪音和觀測(cè)噪音是不相關(guān)的零均值高斯白噪聲。隨機(jī)系統(tǒng)的狀態(tài)估計(jì)問(wèn)題,就是根據(jù)選定的估計(jì)準(zhǔn)則和獲取的測(cè)量信息對(duì)系統(tǒng)狀態(tài)進(jìn)行估計(jì),卡爾曼濾波的估計(jì)準(zhǔn)則是:
其中,即估計(jì)
是x(k)無(wú)偏和較小方差,根據(jù)這兩個(gè)準(zhǔn)則可推導(dǎo)出對(duì)系統(tǒng)的完整的濾波算法,即:
預(yù)測(cè)誤差方程為:
增益矩陣方程為:
濾波誤差方差陣為:
上述公式中I是單位矩陣,Q為w(k)自協(xié)方差方差陣,R為V(k)自協(xié)方差方差陣?柭鼮V波采用遞推算法,計(jì)算較優(yōu)濾波值時(shí),K(k+1)由P(k+1|k)來(lái)確定,P(k+1|k)由P(k)來(lái)確定,P(k+1)由P(k+1|k)和K(k+1)來(lái)確定,如此反復(fù)遞推運(yùn)算。
系統(tǒng)程序流程
本系統(tǒng)的主要功能是完成運(yùn)動(dòng)目標(biāo)的鎖定,并控制運(yùn)動(dòng)平臺(tái)對(duì)目標(biāo)進(jìn)行實(shí)時(shí)跟蹤。使用高性能NiosII處理器作為控制器控制著整個(gè)系統(tǒng)的實(shí)現(xiàn)流程和高效的線(xiàn)性卡爾曼濾波算法對(duì)目標(biāo)運(yùn)動(dòng)參數(shù)的估計(jì),有效地提高了圖像處理速度,實(shí)現(xiàn)了運(yùn)動(dòng)目標(biāo)的快速跟蹤。以下是系統(tǒng)流程:
1.系統(tǒng)初始化:由SOPC通過(guò)控制總線(xiàn)設(shè)置USB接口微型攝像頭工作模式,并初始化其主控程序變量。
2.確定運(yùn)動(dòng)區(qū)域:由Nios II處理器根據(jù)圖像序列鎖定運(yùn)動(dòng)物體,根據(jù)被跟蹤物體確定運(yùn)動(dòng)跟蹤區(qū)間,接下來(lái)的跟蹤操作都是在這個(gè)跟蹤窗口中進(jìn)行。
3.預(yù)測(cè)計(jì)算:利用線(xiàn)形卡爾曼濾波器方程進(jìn)行計(jì)算。
4.濾波:預(yù)測(cè)和濾波是相互作用的,即由濾波得到預(yù)測(cè)而由預(yù)測(cè)又可得到濾波。
5.輸出:SOPC發(fā)出控制信號(hào)給隨動(dòng)平臺(tái)。
該系統(tǒng)采用集成了Nios軟核處理器的Stratix高密度FPGA,控制器通過(guò)攝像頭記錄每一時(shí)刻運(yùn)動(dòng)目標(biāo)的位置和速度作為觀測(cè)值。然后按照公式(3)、(4)、(5)、(6)進(jìn)行較佳狀態(tài)估計(jì),得到每一時(shí)刻運(yùn)動(dòng)目標(biāo)的位置和速度的預(yù)測(cè)值。由于各種干擾因素的存在,經(jīng)過(guò)七八個(gè)時(shí)間段后預(yù)測(cè)位置與觀測(cè)位置相當(dāng)接近,即可實(shí)現(xiàn)準(zhǔn)確的狀態(tài)預(yù)測(cè)。
結(jié)語(yǔ)
本文建立了一套基于SOPC結(jié)構(gòu)的多關(guān)節(jié)機(jī)器人視覺(jué)伺服系統(tǒng),主要應(yīng)用線(xiàn)性卡爾曼濾波算法成功的預(yù)測(cè)了運(yùn)動(dòng)目標(biāo)的狀態(tài)參數(shù)功能是鎖定運(yùn)動(dòng)目標(biāo),實(shí)現(xiàn)對(duì)目標(biāo)進(jìn)行實(shí)時(shí)跟蹤。由于應(yīng)用卡爾曼濾波后極大地縮小了搜索空間,減少了系統(tǒng)的圖像處理時(shí)間,可以有效地提高系統(tǒng)的實(shí)時(shí)性,實(shí)現(xiàn)對(duì)運(yùn)動(dòng)目標(biāo)的快速跟蹤。
相關(guān)閱讀:
- ...2013/09/25 16:49·安森美半導(dǎo)體基于NCP1246和NCP4354低待機(jī)能耗電源適配器方案
- ...2013/03/27 10:10·基于NI PXI Express平臺(tái)的石油管復(fù)合擠毀試驗(yàn)機(jī)控制與數(shù)據(jù)采集系統(tǒng)搭建
- ...2012/08/13 15:04·基于NI CompactRIO的太陽(yáng)能熔爐智能化控制和數(shù)據(jù)采集系統(tǒng)
- ...2011/12/09 12:19·基于NI LabVIEW的自動(dòng)割草機(jī)
- ...2011/11/28 14:39·基于nRF2401的牲畜信息讀寫(xiě)器的研究
- ...2011/10/08 13:45·基于nRF905的LED屏無(wú)線(xiàn)通信設(shè)計(jì)與實(shí)現(xiàn)
- ...·圖文詳解汽車(chē)儀表板背后的車(chē)規(guī)級(jí)安全設(shè)計(jì)要求
- ...·使用有安全保障的閃存存儲(chǔ)構(gòu)建安全的汽車(chē)系統(tǒng)
- ...·反向偏置差分線(xiàn)性傳感器的較新進(jìn)展和應(yīng)用
- ...·艾德克斯測(cè)評(píng)某品牌智能插座——待機(jī)功耗篇
- ...·三線(xiàn)電阻式溫度檢測(cè)器測(cè)量系統(tǒng)中勵(lì)磁電流失配的影響(續(xù))
- ...·三線(xiàn)電阻式溫度檢測(cè)器測(cè)量系統(tǒng)中勵(lì)磁電流失配的影響
- ...·RTD測(cè)量系統(tǒng)中勵(lì)磁電流失配的影響
- ...·藍(lán)牙BR/EDR 和 Bluetooth Smart的十大重要區(qū)別
- ...·IoT網(wǎng)關(guān)平臺(tái)與應(yīng)用
- ...·增強(qiáng)版ARM DesignStart:通向定制化SoC的較快、較低風(fēng)險(xiǎn)之路
- ...·實(shí)體零售轉(zhuǎn)型O2O,倉(cāng)儲(chǔ)物流的智能化水平從何提升?
- ...·幾種車(chē)用LED驅(qū)動(dòng)方案的比較
- ...·藍(lán)牙配對(duì)第二篇:密鑰生成方法
- ...·中電瑞華推出領(lǐng)先的無(wú)線(xiàn)數(shù)據(jù)采集解決方案
- ...·安森美半導(dǎo)體配合市場(chǎng)趨勢(shì)的無(wú)線(xiàn)充電方案
- ...·安森美半導(dǎo)體配合汽車(chē)照明設(shè)計(jì)趨勢(shì)的解決方案
- ...· “芯創(chuàng)杯”首屆高校未來(lái)汽車(chē)人機(jī)交互設(shè)計(jì)大賽報(bào)名正式啟動(dòng)
- ...· 探秘第二屆衛(wèi)藍(lán)山鷹“創(chuàng)新·共享”試驗(yàn)技術(shù)論壇!
- ...· “2018中國(guó)半導(dǎo)體生態(tài)鏈大會(huì)”在江蘇省盱眙舉行
- ...· 新主題新規(guī)劃,CITE 2019瞭望智慧未來(lái)
- ...· 從汽車(chē)到工廠(chǎng),TI毫米波傳感器致力于創(chuàng)造更智能的世界
- ...· 意法半導(dǎo)體(ST)、Cinemo和Valens在CES 2018展上聯(lián)合演示汽車(chē)信息娛樂(lè)解決方案
- ...· 北京集成電路產(chǎn)業(yè)創(chuàng)新發(fā)展高峰論壇即將在京召開(kāi)
- ...· 三菱電機(jī)強(qiáng)勢(shì)出擊PCIM亞洲2017展
- ...· GPGPU國(guó)產(chǎn)替代:中國(guó)芯片產(chǎn)業(yè)的空白地帶
- ...· 物聯(lián)網(wǎng)產(chǎn)品設(shè)計(jì)中Wi-Fi連接的四個(gè)關(guān)鍵因素
- ...· 第三屆中國(guó)MEMS智能傳感器產(chǎn)業(yè)發(fā)展大會(huì)即將于蚌埠拉開(kāi)帷幕
- ...· IAIC專(zhuān)項(xiàng)賽演繹“中國(guó)芯“應(yīng)用創(chuàng)新,信息安全高峰論壇亮劍海寧
- ...· 智能控制有源鉗位反激
- ...· 解讀5G毫米波OTA 測(cè)試技術(shù)
- ...· 多個(gè)市場(chǎng)高速增長(zhǎng)推動(dòng)Molex加強(qiáng)汽車(chē)領(lǐng)域的發(fā)展
- ...· 中國(guó)綠色制造聯(lián)盟成立大會(huì)召開(kāi)在即 政產(chǎn)學(xué)研用共探綠色發(fā)展新模式
- ...· Efinix® 全力驅(qū)動(dòng)AI邊緣計(jì)算,成功推出Trion™ T20 FPGA樣品, 同時(shí)將產(chǎn)品擴(kuò)展到二十萬(wàn)邏輯單元的T200 FPGA
- ...· 英飛凌亮相進(jìn)博會(huì),引領(lǐng)智慧新生活
- ...· 三電產(chǎn)品開(kāi)發(fā)及測(cè)試研討會(huì)北汽新能源專(zhuān)場(chǎng)成功舉行
- ...· Manz亞智科技跨入半導(dǎo)體領(lǐng)域 為面板級(jí)扇出型封裝提供化學(xué)濕制程、涂布及激光應(yīng)用等生產(chǎn)設(shè)備解決方案
- ...· 中電瑞華BITRODE動(dòng)力電池測(cè)試系統(tǒng)順利交付北汽新能源
- ...· 中電瑞華FTF系列電池測(cè)試系統(tǒng)中標(biāo)北京新能源汽車(chē)股份有限公司
- ...· 中電瑞華大功率高壓能源反饋式負(fù)載系統(tǒng)成功交付中電熊貓
- ...· 中電瑞華國(guó)際在電動(dòng)汽車(chē)及關(guān)鍵部件測(cè)評(píng)研討會(huì)上演繹先進(jìn)測(cè)評(píng)技術(shù)
- ...· 數(shù)據(jù)采集終端系統(tǒng)設(shè)備
- ...· 簡(jiǎn)儀科技踏上新征程
- ...· 易靈思® 宣布 AEC-Q100 資質(zhì)認(rèn)證和汽車(chē)系列產(chǎn)品計(jì)劃
- ...· 易靈思® 宣布擴(kuò)充高性能 鈦金系列™ FPGA 產(chǎn)品 鈦金系列產(chǎn)品擴(kuò)充至包含 1M 邏輯單元的 FPGA
- ...· 易靈思® 宣布Trion® Titanium 在臺(tái)積電 (TSMC) 16納米工藝節(jié)點(diǎn)流片
- ...· TI杯2019年全國(guó)大學(xué)生電子設(shè)計(jì)競(jìng)賽頒獎(jiǎng)典禮在京舉行
- ...· BlackBerry QNX虛擬機(jī)獲得全球首個(gè)汽車(chē)安全完整性等級(jí)(ASIL) ‘D’認(rèn)證
- ...· 威馬汽車(chē)選擇BlackBerry助力下一代汽車(chē)