創(chuàng)澤機(jī)器人
CHUANGZE ROBOT
當(dāng)前位置:首頁 > 新聞資訊 > 機(jī)器人開發(fā) > 機(jī)器人的視覺傳感技術(shù),從二維圖像中理解和構(gòu)造出三維世界的真實(shí)模型

機(jī)器人的視覺傳感技術(shù),從二維圖像中理解和構(gòu)造出三維世界的真實(shí)模型

來源:視覺傳感技術(shù)     編輯:創(chuàng)澤   時(shí)間:2025/12/17   主題:其他 [加盟]

①視覺傳感系統(tǒng)組成 裝配過程中,機(jī)器人使用視覺傳感系統(tǒng)可以解決零件平面測(cè)量、 字符識(shí)別. (文字、條碼、符號(hào)等)、完善性檢測(cè)、表面檢測(cè)(裂紋、刻痕、紋理)和三維測(cè) 量。類似人的視覺系統(tǒng),機(jī)器人的視覺系統(tǒng)是通過圖像和距離等傳感器來獲取環(huán)境對(duì)象的圖像、顏色和距離等信息,然后傳遞給圖像處理器,利用計(jì)算機(jī)從二維圖像中理解和構(gòu)造出三維世界的真實(shí)模型。

圖6-27所示為機(jī)器人視覺傳感系統(tǒng)的原理。攝像機(jī)獲取環(huán)境對(duì)象的圖像,經(jīng) A/D 轉(zhuǎn) 換 器轉(zhuǎn)換成數(shù)字量,從而變成數(shù)字化圖形。通常一幅圖像劃分為512×512或者256×256,各 點(diǎn)亮度用8位二進(jìn)制表示,即可表示256個(gè)灰度。圖像輸入以后進(jìn)行各種處理、識(shí)別以及理解,另外通過距離測(cè)定器得到距離信息,經(jīng)過計(jì)算機(jī)處理得到物體的空間位置和方位;通過 彩色濾光片得到顏色信息。上述信息經(jīng)圖像處理器進(jìn)行處理,提取特征,處理的結(jié)果再輸出 到機(jī)器人,以控制它進(jìn)行動(dòng)作。另外,作為機(jī)器人的眼睛不但要對(duì)所得到的圖像進(jìn)行靜止處 理,而且要積極地?cái)U(kuò)大視野,根據(jù)所觀察的對(duì)象,改變眼睛的焦距和光圈。因此,機(jī)器人視 覺系統(tǒng)還應(yīng)具有調(diào)節(jié)焦距、光圈、放大倍數(shù)和攝像機(jī)角度的裝置。

②圖像處理過程 視覺系統(tǒng)先要做的工作是攝入實(shí)物對(duì)象的圖形,即解決攝像機(jī)的 圖像生成模型。包含兩個(gè)方面的內(nèi)容:一是攝像機(jī)的幾何模型,即實(shí)物對(duì)象從三維景物空間 轉(zhuǎn)換到二維圖像空間,關(guān)鍵是確定轉(zhuǎn)換的幾何關(guān)系;二是攝像機(jī)的光學(xué)模型,即攝像機(jī)的圖 像灰度與景物間的關(guān)系。由于圖像的灰度是攝像機(jī)的光學(xué)特性、物體表面的反射特性、照明 情況、景物中各物體的分布情況(產(chǎn)生重復(fù)反射照明)的綜合結(jié)果,所以從攝入的圖像分解 出各因素在此過程中所起的作用是不容易的。

視覺系統(tǒng)要對(duì)攝入的圖像進(jìn)行處理和分析。攝像機(jī)捕捉到的圖像不一定是圖像分析程序 可用的格式,有些需要進(jìn)行改善以消除噪聲,有些則需要簡(jiǎn)化,還有的需要增強(qiáng)、修改、分 割和濾波等。圖像處理指的就是對(duì)圖像進(jìn)行改善、簡(jiǎn)化、增強(qiáng)或者其他變換的程序和技術(shù)的 總稱。圖像分析是對(duì)一幅捕捉到的并經(jīng)過處理后的圖像進(jìn)行分析、從中提取圖像信息、辨識(shí) 或提取關(guān)于物體或周圍環(huán)境特征。

③Consight-I視覺系統(tǒng) 圖6-28所示 Consight-I視覺系統(tǒng),用于美國通用汽車公司的 制造裝置中,能在噪聲環(huán)境下利用視覺識(shí)別抓取工件。

該系統(tǒng)為了從零件的外形獲得準(zhǔn)確、穩(wěn)定的識(shí)別信息,巧妙地設(shè)置照明光,從傾斜方向 向傳送帶發(fā)送兩條窄條縫隙光,用安裝在傳送帶上方的固態(tài)線性傳感器攝取圖像,而且預(yù)先 把兩條縫隙光調(diào)整到剛好在傳送帶上重合的位置。這樣,當(dāng)傳送帶上沒有零件時(shí),縫隙光合 成了一條直線,可是當(dāng)零件隨傳送帶通過時(shí),縫隙光變成兩條線,其分開的距離同零件的厚 度成正比。由于光線的分離之處正好就是零件的邊界,所以利用零件在傳感器下通過的時(shí)間 就可以取出準(zhǔn)確的邊界信息。主計(jì)算機(jī)可處理裝在機(jī)器人工作位置上方的固態(tài)線性陣列攝像 機(jī)所檢測(cè)的工件,有關(guān)傳送帶速度的數(shù)據(jù)也送到計(jì)算機(jī)中處理。當(dāng)工件從視覺系統(tǒng)位置移動(dòng) 到機(jī)器人工作位置時(shí),計(jì)算機(jī)利用視覺和速度數(shù)據(jù)確定工件的位置、取向和形狀,并把這種 信息經(jīng)接口送到機(jī)器人控制器。根據(jù)這種信息,工件仍在傳送帶上移動(dòng)時(shí),機(jī)器人便能成功地接近和拾取工件。





機(jī)器人的工件識(shí)別傳感器:接觸識(shí)別、采樣式測(cè)量、鄰近探測(cè)、距離測(cè)量、機(jī)械視覺識(shí)別

接觸識(shí)別這種測(cè)量一般精度不高;采樣式測(cè)量如測(cè)量某一目標(biāo)的位置、方向和形狀;距離測(cè)量測(cè)量某一目標(biāo)到某一基準(zhǔn)點(diǎn)的距離;機(jī)械視覺識(shí)別測(cè)量某一目標(biāo)相對(duì)于一基準(zhǔn)點(diǎn)的位置方向和距離

機(jī)器人的柔性腕力傳感器:檢測(cè)末端執(zhí)行器所受外力/力矩的大小和方向

腕力傳感器安裝在機(jī)器人手臂和末端執(zhí)行器之間,更接近力的作用點(diǎn),準(zhǔn)確地檢測(cè)末端執(zhí)行器所受外力/力矩的大小和方向,為機(jī)器人提供力感信息,擴(kuò)展了機(jī)器人的作業(yè)能力

機(jī)器人位姿傳感器:6個(gè)電渦流傳感器組成的特定空間結(jié)構(gòu)

6個(gè)傳感器構(gòu)成三維測(cè)量坐標(biāo)系, 其中傳感器1、2、3對(duì)應(yīng)測(cè)量面 xOy, 傳感器4、5對(duì)應(yīng)測(cè)量面 xOz, 傳感器6對(duì)應(yīng)測(cè)量面 yOz 。 每個(gè)傳感器在坐標(biāo)系中的位置固定,這6個(gè)傳感器所標(biāo)定的測(cè)量范圍就是該測(cè)量系統(tǒng) 的測(cè)量范圍

機(jī)器人軌跡規(guī)劃的基本原理

以兩自由度機(jī)器人為例,將機(jī)器人操作臂兩個(gè)關(guān)節(jié)的運(yùn)動(dòng)用一個(gè)公共因子做歸一化處理,使其運(yùn)動(dòng)范圍較小的關(guān)節(jié)運(yùn)動(dòng)成 比例地減慢,這樣可使得兩個(gè)關(guān)節(jié)能夠同步開始和 同步結(jié)束運(yùn)動(dòng)

機(jī)器人操作臂動(dòng)力學(xué)方程系數(shù)的簡(jiǎn)化

機(jī)器人動(dòng)力學(xué)的顯式狀態(tài)方程,可用來分析和設(shè)計(jì)高級(jí)的關(guān)節(jié)變量空間的控制策略,給定力和力矩,用動(dòng)力學(xué)方程求解關(guān)節(jié)的加速度,再積分求得速度及廣義坐標(biāo)

WebSocket在實(shí)時(shí)對(duì)話中存在關(guān)鍵缺陷:數(shù)據(jù)包丟失或延遲,破壞對(duì)話流暢性

WebSocket 基于 TCP 協(xié)議,其可靠傳輸機(jī)制在實(shí)時(shí)媒體流中反而成為瓶頸,會(huì)導(dǎo)致單個(gè)數(shù)據(jù)包丟失或延遲時(shí),對(duì)于對(duì)話式 AI 需連續(xù)交互的場(chǎng)景,此問題會(huì)顯著破壞對(duì)話流暢性

機(jī)器人互動(dòng)如何做好上下文:短期記憶,固化和注入長(zhǎng)期記憶:

通過結(jié)構(gòu)化短期記憶+動(dòng)態(tài)長(zhǎng)期記憶注入,在保障兼容性的同時(shí),針對(duì)實(shí)時(shí)語音交互場(chǎng)景進(jìn)行深度優(yōu)化,并賦予開發(fā)者高度靈 活的上下文控制權(quán)限

機(jī)器人的動(dòng)力學(xué):拉格朗日法

拉格朗日函數(shù)L被定義為系統(tǒng)的動(dòng)能K 和勢(shì)能P 之差,即 L=K 一P 式中 K—— 機(jī)器人手臂的總動(dòng)能,P—— 機(jī)器人手臂的總勢(shì)能,機(jī)器人系統(tǒng)的拉格朗日方程為

機(jī)器人的自由度,直接影響到機(jī)器人的機(jī)動(dòng)性

自由度是機(jī)器人的一個(gè)重要技術(shù)指標(biāo),它是由機(jī)器人的結(jié)構(gòu)決定的,并直接影響到機(jī)器人的機(jī)動(dòng)性;機(jī)器人機(jī)械手的手臂具有三個(gè)自由度,其他的自由度數(shù)為末端執(zhí)行裝置所具有

機(jī)器人系統(tǒng)的結(jié)構(gòu):機(jī)械手、環(huán)境、任務(wù) 和控制器

機(jī)械手是具有傳動(dòng)執(zhí)行裝置的機(jī)械,它由臂、關(guān)節(jié)和末端執(zhí)行裝置(工具等)構(gòu)成,組合為一個(gè)互相連接和互相依賴的運(yùn)動(dòng)機(jī)構(gòu);機(jī)器人接收來自傳感器的信號(hào)產(chǎn)生出控制信號(hào)去驅(qū)動(dòng)機(jī)器人的各個(gè)關(guān)節(jié)

商用服務(wù)機(jī)器人控制系統(tǒng)的組成:任務(wù)規(guī)劃,動(dòng)作規(guī)劃,軌跡規(guī)劃

前臺(tái)接待機(jī)器人的控制系統(tǒng)由“任務(wù)規(guī)劃” “動(dòng)作規(guī)劃”“軌跡規(guī)劃”和基于模型的 “伺服控制”等多個(gè)層次組成,機(jī)器人針對(duì)各個(gè)任務(wù)進(jìn)行動(dòng)作分解,實(shí)現(xiàn)機(jī)器人的一系列動(dòng)作

智能交互機(jī)器人的主要部件選型參考方案:伺服電機(jī),減速機(jī)和減速齒輪,陀螺儀

伺服電機(jī)的轉(zhuǎn)動(dòng)速度、扭矩、反饋信號(hào)頻率和額定電壓等參數(shù)是整個(gè)機(jī)器人控制系統(tǒng)的決定性因素之一;減速機(jī)和減速齒輪降低電機(jī)的轉(zhuǎn)動(dòng)速度,加大輸出扭矩
資料獲取
機(jī)器人開發(fā)
== 資訊 ==
機(jī)器人的視覺傳感技術(shù),從二維圖像中理解和
機(jī)器人的工件識(shí)別傳感器:接觸識(shí)別、采樣式
機(jī)器人的柔性腕力傳感器:檢測(cè)末端執(zhí)行器所
機(jī)器人位姿傳感器:6個(gè)電渦流傳感器組成的
裝配機(jī)器人的系統(tǒng)組成:主體、驅(qū)動(dòng)系統(tǒng)和控
焊接機(jī)器人的傳感器系統(tǒng),測(cè)出焊口的位置和
點(diǎn)焊機(jī)器人的規(guī)格:持重100kg,最高速
機(jī)器人軌跡規(guī)劃的基本原理
機(jī)器人操作臂動(dòng)力學(xué)方程系數(shù)的簡(jiǎn)化
觸覺傳感器行業(yè)首次覆蓋:無觸不成手,觸覺
2025人形機(jī)器人產(chǎn)業(yè)鏈?zhǔn)袌?chǎng)洞察及方案介
把 AI 放到指數(shù)位—2025新思維
機(jī)器人如何鎖定目標(biāo)說話人:聲紋識(shí)別,空間
機(jī)器人語音交互的智能打斷的方式:發(fā)聲即打
多輪對(duì)話的基本原理:采用 RTC 技術(shù)低
== 機(jī)器人推薦 ==
迎賓講解服務(wù)機(jī)器人

服務(wù)機(jī)器人(迎賓、講解、導(dǎo)診...)

智能消毒機(jī)器人

智能消毒機(jī)器人

機(jī)器人開發(fā)平臺(tái)

機(jī)器人開發(fā)平臺(tái)


機(jī)器人底盤 Disinfection Robot 消毒機(jī)器人  講解機(jī)器人  迎賓機(jī)器人  移動(dòng)機(jī)器人底盤  商用機(jī)器人  智能垃圾站  智能服務(wù)機(jī)器人  大屏機(jī)器人  霧化消毒機(jī)器人  展廳機(jī)器人  服務(wù)機(jī)器人底盤  具身智能教育機(jī)器人  智能配送機(jī)器人  導(dǎo)覽機(jī)器人 
版權(quán)所有 創(chuàng)澤智能機(jī)器人集團(tuán)股份有限公司 運(yùn)營中心:北京 清華科技園九號(hào)樓5層 生產(chǎn)中心:山東日照太原路71號(hào)
銷售1:4006-935-088 銷售2:4006-937-088 客服電話: 4008-128-728