根據(jù)視覺(jué)模塊部署方式的不同,預(yù)標(biāo)定采用對(duì)應(yīng)的手眼標(biāo)定算法:對(duì)于“眼在手上”模式,需求解相機(jī)坐標(biāo)系相對(duì)于機(jī)械臂末端坐標(biāo)系的轉(zhuǎn)換矩陣(X矩陣),通過(guò)控制機(jī)械臂帶動(dòng)相機(jī)在不同姿態(tài)下拍攝固定于基座的標(biāo)定靶標(biāo)(如棋盤(pán)格、AprilTag二維碼靶標(biāo)),采集至少10組不同姿態(tài)的圖像數(shù)據(jù)與機(jī)械臂末端位姿數(shù)據(jù),基于AX=XB數(shù)學(xué)模型(A為機(jī)械臂末端兩次運(yùn)動(dòng)的位姿變換,B為相機(jī)兩次拍攝的靶標(biāo)位姿變換),結(jié)合最小二乘法求解轉(zhuǎn)換矩陣;對(duì)于“眼在手外”模式,需求解相機(jī)坐標(biāo)系相對(duì)于機(jī)械臂基座坐標(biāo)系的轉(zhuǎn)換矩陣,通過(guò)機(jī)械臂末端夾持標(biāo)定靶標(biāo)在不同位置姿態(tài)下運(yùn)動(dòng),相機(jī)固定拍攝靶標(biāo),同樣基于手眼標(biāo)定模型求解坐標(biāo)映射關(guān)系。預(yù)標(biāo)定完成后,需將校準(zhǔn)參數(shù)(轉(zhuǎn)換矩陣、相機(jī)內(nèi)參等)存儲(chǔ)至系統(tǒng),作為后續(xù)自動(dòng)校準(zhǔn)的基準(zhǔn)。其次是機(jī)械臂移動(dòng)后感知環(huán)節(jié),該環(huán)節(jié)的核心是實(shí)時(shí)檢測(cè)視覺(jué)姿勢(shì)是否偏移。當(dāng)機(jī)械臂完成移動(dòng)并到達(dá)目標(biāo)作業(yè)位后,系統(tǒng)自動(dòng)觸發(fā)視覺(jué)姿勢(shì)檢測(cè)流程:若采用標(biāo)定靶標(biāo)校準(zhǔn)方案,機(jī)械臂帶動(dòng)末端執(zhí)行器(或固定于場(chǎng)景的靶標(biāo))進(jìn)入相機(jī)視場(chǎng),相機(jī)自動(dòng)采集靶標(biāo)圖像;若采用無(wú)靶標(biāo)校準(zhǔn)方案,相機(jī)則采集作業(yè)場(chǎng)景中的固定特征點(diǎn)(如工件邊緣、設(shè)備定位孔等)圖像。同時(shí),機(jī)械臂運(yùn)動(dòng)狀態(tài)采集模塊同步獲取當(dāng)前末端理論位姿數(shù)據(jù),為后續(xù)偏差比對(duì)提供依據(jù)。視覺(jué)感知模塊對(duì)采集的圖像進(jìn)行預(yù)處理,通過(guò)圖像增強(qiáng)、噪聲過(guò)濾等算法提升圖像質(zhì)量,再采用特征提取算法(如SIFT、SURF、ORB算法)提取靶標(biāo)或場(chǎng)景特征點(diǎn)的圖像坐標(biāo),若為深度相機(jī)或雙目相機(jī),可直接獲取特征點(diǎn)的三維坐標(biāo)。再次是偏差求解環(huán)節(jié),通過(guò)比對(duì)視覺(jué)感知的實(shí)際姿勢(shì)與預(yù)標(biāo)定的基準(zhǔn)姿勢(shì),計(jì)算視覺(jué)姿勢(shì)的偏移量。具體實(shí)施中,核心算法處理模塊將當(dāng)前采集的特征點(diǎn)坐標(biāo)與預(yù)標(biāo)定階段存儲(chǔ)的基準(zhǔn)特征點(diǎn)坐標(biāo)進(jìn)行匹配,通過(guò)最小二乘法、RANSAC算法等消除匹配噪聲,求解出相機(jī)坐標(biāo)系相對(duì)于基準(zhǔn)坐標(biāo)系的旋轉(zhuǎn)偏移(ΔR)與平移偏移(ΔT);同時(shí),結(jié)合機(jī)械臂末端的理論位姿與視覺(jué)感知的實(shí)際位姿,通過(guò)運(yùn)動(dòng)學(xué)正解與逆解,計(jì)算出視覺(jué)姿勢(shì)偏移對(duì)應(yīng)的機(jī)械臂關(guān)節(jié)誤差補(bǔ)償量。對(duì)于動(dòng)態(tài)移動(dòng)場(chǎng)景,還可引入實(shí)時(shí)姿態(tài)估計(jì)算法,通過(guò)連續(xù)采集圖像序列,實(shí)現(xiàn)姿勢(shì)偏移的動(dòng)態(tài)追蹤與偏差預(yù)測(cè),提升校準(zhǔn)響應(yīng)速度。在精密場(chǎng)景中,還需融合溫度、振動(dòng)等環(huán)境傳感器數(shù)據(jù),對(duì)偏差量進(jìn)行環(huán)境補(bǔ)償,避免環(huán)境因素導(dǎo)致的校準(zhǔn)誤差。然后是動(dòng)態(tài)修正環(huán)節(jié),根據(jù)求解的偏移量,通過(guò)兩種方式實(shí)現(xiàn)視覺(jué)姿勢(shì)校準(zhǔn):一是軟件修正,核心算法處理模塊更新相機(jī)與機(jī)械臂、世界坐標(biāo)系的轉(zhuǎn)換矩陣,將視覺(jué)識(shí)別的目標(biāo)坐標(biāo)基于新的轉(zhuǎn)換矩陣進(jìn)行坐標(biāo)轉(zhuǎn)換,間接修正姿勢(shì)偏移,該方式適用于偏移量較小的場(chǎng)景,無(wú)需機(jī)械臂額外運(yùn)動(dòng),校準(zhǔn)效率高;二是硬件修正,若偏移量較大,系統(tǒng)通過(guò)執(zhí)行修正模塊驅(qū)動(dòng)機(jī)械臂末端進(jìn)行微姿態(tài)調(diào)整,根據(jù)偏差計(jì)算得到的關(guān)節(jié)補(bǔ)償量,控制各關(guān)節(jié)伺服電機(jī)進(jìn)行精準(zhǔn)運(yùn)動(dòng),帶動(dòng)末端視覺(jué)模塊回歸基準(zhǔn)姿勢(shì),調(diào)整完成后重新采集圖像驗(yàn)證校準(zhǔn)效果。在視覺(jué)-力控協(xié)同場(chǎng)景中,還可結(jié)合力傳感器的反饋數(shù)據(jù),當(dāng)視覺(jué)校準(zhǔn)完成后,通過(guò)力控調(diào)節(jié)確保機(jī)械臂末端與目標(biāo)的接觸力穩(wěn)定,進(jìn)一步提升協(xié)同精度。最后是閉環(huán)驗(yàn)證環(huán)節(jié),確保校準(zhǔn)效果滿足作業(yè)精度要求。
欲知詳情,請(qǐng)下載word文檔
下載文檔
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除( 郵箱:macysun@21ic.com )。
特朗普集團(tuán)近日取消了其新推出的T1智能手機(jī)“將在美國(guó)制造”的宣傳標(biāo)語(yǔ),此舉源于外界對(duì)這款手機(jī)能否以當(dāng)前定價(jià)在美國(guó)本土生產(chǎn)的質(zhì)疑。
關(guān)鍵字:
特朗普
蘋(píng)果
AI
美國(guó)總統(tǒng)特朗普在公開(kāi)場(chǎng)合表示,他已要求蘋(píng)果公司CEO蒂姆·庫(kù)克停止在印度建廠,矛頭直指該公司生產(chǎn)多元化的計(jì)劃。
關(guān)鍵字:
特朗普
蘋(píng)果
AI
4月10日消息,據(jù)媒體報(bào)道,美國(guó)總統(tǒng)特朗普宣布,美國(guó)對(duì)部分貿(mào)易伙伴暫停90天執(zhí)行新關(guān)稅政策,同時(shí)對(duì)中國(guó)的關(guān)稅提高到125%,該消息公布后蘋(píng)果股價(jià)飆升了15%。這次反彈使蘋(píng)果市值增加了4000多億美元,目前蘋(píng)果市值接近3萬(wàn)...
關(guān)鍵字:
特朗普
AI
人工智能
特斯拉
3月25日消息,據(jù)報(bào)道,當(dāng)?shù)貢r(shí)間3月20日,美國(guó)總統(tǒng)特朗普在社交媒體平臺(tái)“真實(shí)社交”上發(fā)文寫(xiě)道:“那些被抓到破壞特斯拉的人,將有很大可能被判入獄長(zhǎng)達(dá)20年,這包括資助(破壞特斯拉汽車(chē))者,我們正在尋找你。”
關(guān)鍵字:
特朗普
AI
人工智能
特斯拉
1月22日消息,剛剛,新任美國(guó)總統(tǒng)特朗普放出重磅消息,將全力支持美國(guó)AI發(fā)展。
關(guān)鍵字:
特朗普
AI
人工智能
特朗普先生有兩件事一定會(huì)載入史冊(cè),一個(gè)是筑墻,一個(gè)是挖坑。在美墨邊境筑墻的口號(hào)確保邊境安全,降低因非法移民引起的犯罪率過(guò)高問(wèn)題;在中美科技產(chǎn)業(yè)之間挖坑的口號(hào)也是安全,美國(guó)企業(yè)不得使用對(duì)美國(guó)國(guó)家安全構(gòu)成威脅的電信設(shè)備,總統(tǒng)...
關(guān)鍵字:
特朗普
孤立主義
科技產(chǎn)業(yè)
據(jù)路透社1月17日消息顯示,知情人士透露,特朗普已通知英特爾、鎧俠在內(nèi)的幾家華為供應(yīng)商,將要撤銷(xiāo)其對(duì)華為的出貨的部分許可證,同時(shí)將拒絕其他數(shù)十個(gè)向華為供貨的申請(qǐng)。據(jù)透露,共有4家公司的8份許可被撤銷(xiāo)。另外,相關(guān)公司收到撤...
關(guān)鍵字:
華為
芯片
特朗普
曾在2018年時(shí)被美國(guó)總統(tǒng)特朗普稱作“世界第八奇跡”的富士康集團(tuán)在美國(guó)威斯康星州投資建設(shè)的LCD顯示屏工廠項(xiàng)目,如今卻因?yàn)楦皇靠祵㈨?xiàng)目大幅縮水并拒絕簽訂新的合同而陷入了僵局。這也導(dǎo)致富士康無(wú)法從當(dāng)?shù)卣抢铽@得約40億美...
關(guān)鍵字:
特朗普
富士康
今年5月,因自己發(fā)布的推文被貼上“無(wú)確鑿依據(jù)”標(biāo)簽而與推特發(fā)生激烈爭(zhēng)執(zhí)后,美國(guó)總統(tǒng)特朗普簽署了一項(xiàng)行政令,下令要求重審《通信規(guī)范法》第230條。
關(guān)鍵字:
谷歌
facebook
特朗普
眾所周知,寄往白宮的所有郵件在到達(dá)白宮之前都會(huì)在他地進(jìn)行分類(lèi)和篩選。9月19日,根據(jù)美國(guó)相關(guān)執(zhí)法官員的通報(bào),本周早些時(shí)候,執(zhí)法人員截獲了一個(gè)寄給特朗普總統(tǒng)的包裹,該包裹內(nèi)包含蓖麻毒蛋白。
關(guān)鍵字:
美國(guó)
白宮
特朗普
本月14日,TikTok向美國(guó)政府提交解決方案。據(jù)媒體披露,美國(guó)甲骨文公司將為T(mén)ikTok提供云服務(wù),此舉不涉及TikTok出售,也不涉及其核心技術(shù)轉(zhuǎn)讓。
關(guān)鍵字:
特朗普
tiktok
甲骨文
14日,TikTok向美國(guó)政府提交解決方案。據(jù)媒體披露,美國(guó)甲骨文公司將為T(mén)ikTok提供云服務(wù),此舉不涉及TikTok出售,也不涉及其核心技術(shù)轉(zhuǎn)讓。
關(guān)鍵字:
特朗普
甲骨文
tiktok
甲骨文公司競(jìng)購(gòu)TikTok在美國(guó)業(yè)務(wù)一事得到了美國(guó)總統(tǒng)唐納德· 特朗普的支持 ,這家軟件制造商試圖破壞競(jìng)爭(zhēng)對(duì)手微軟公司牽頭的收購(gòu)談判,因此特朗普的支持而聲勢(shì)上漲。
特朗普周二在亞利桑那州的一次演講中
關(guān)鍵字:
特朗普
甲骨文
tiktok
競(jìng)購(gòu)
美國(guó)政府還在積極推動(dòng)美國(guó)公司收購(gòu)TikTok,微軟無(wú)疑是最有可能的買(mǎi)家,但不是唯一感興趣的。
據(jù)外媒報(bào)道,美國(guó)科技巨頭甲骨文(Oracle)將會(huì)參與競(jìng)購(gòu)TikTok,目前正在認(rèn)真考慮收購(gòu)TikTok在
關(guān)鍵字:
甲骨文
oracle
tiktok
特朗普
北京時(shí)間8月18日消息,今天美股漲跌不一,在特斯拉、英偉達(dá)等科技股推動(dòng)下,納指漲幅達(dá)到1%,再創(chuàng)歷史新高。截至收盤(pán),道指跌86.11點(diǎn),跌幅為0.31%,報(bào)收27844.91點(diǎn);標(biāo)普500指數(shù)漲9.1
關(guān)鍵字:
特朗普
阿里
京東
Facebook COO 謝麗爾 · 桑德伯格(Sheryl Sandberg)周二表示,該公司已經(jīng)做好準(zhǔn)備,將會(huì)刪除美國(guó)總統(tǒng)唐納德 · 特朗普(Donald Trump)可能發(fā)布的任何違反該公司標(biāo)準(zhǔn)
關(guān)鍵字:
facebook
特朗普
白宮周四要求美國(guó)最高法院推翻一項(xiàng)下級(jí)法院的裁決,該裁決稱,特朗普總統(tǒng)在推特上屏蔽批評(píng)人士的做法違反了憲法第一修正案。白宮的請(qǐng)求再次引發(fā)了一場(chǎng)關(guān)于總統(tǒng)使用社交媒體性質(zhì)的辯論。美國(guó)一家聯(lián)邦上訴法院去年裁定
關(guān)鍵字:
特朗普
twitter
8月9日消息 據(jù)報(bào)道,當(dāng)?shù)貢r(shí)間8月6日,特朗普政府發(fā)布了兩道針對(duì)中國(guó)科技公司的行政命令,在9月20日的最后期限之后,禁止美國(guó)與這些公司進(jìn)行交易。眼下的焦點(diǎn)大多集中在 TikTok 上,但針對(duì)微信的禁令
關(guān)鍵字:
影響
特朗普
禁令
能比
8月9日消息 據(jù)外媒報(bào)道,特朗普總統(tǒng)禁止微信的行政命令可能會(huì)對(duì)幾乎整個(gè)科技行業(yè)產(chǎn)生深遠(yuǎn)的影響,這主要是因?yàn)樵搼?yīng)用的母公司騰訊對(duì)拳頭等公司和其他美國(guó)品牌的投資,這一禁令也會(huì)對(duì)在中國(guó)根深蒂固的蘋(píng)果公司產(chǎn)生
關(guān)鍵字:
中國(guó)
特朗普
禁令
蘋(píng)果
對(duì)那些習(xí)慣使用Facebook、Instagram和Twitter來(lái)與家人保持聯(lián)系的美國(guó)人來(lái)說(shuō),特朗普總統(tǒng)近日對(duì)微信的禁令并不會(huì)給他們帶來(lái)太多不便。但對(duì)那些家在中國(guó)或者在中國(guó)有業(yè)務(wù)的人來(lái)說(shuō),這一禁令將
關(guān)鍵字:
特朗普
特朗普微信禁令