2022年8月22日-24日,VALSE 2022大會(huì)在天津國(guó)家會(huì)展中心正式舉辦。奧比中光作為金牌贊助商,以「見」機(jī)而行,「視」不可擋為主題亮相,憑借六足仿生機(jī)器人JetHexa、高精度三維人臉重建系統(tǒng)、三維視覺在線課程等產(chǎn)品及內(nèi)容,展示3D視覺感知在機(jī)器人、元宇宙等領(lǐng)域的創(chuàng)新應(yīng)用潛能,讓與會(huì)者一覽3D數(shù)字化世界的精彩。
六足仿生機(jī)器人燃爆現(xiàn)場(chǎng)
8月22日上午,六足仿生機(jī)器人JetHexa在VALSE 2022奧比中光展位亮相,憑借酷炫的外觀與3D視覺“慧眼”成為了現(xiàn)場(chǎng)焦點(diǎn),吸引眾多青年學(xué)子與開發(fā)者交流體驗(yàn)。JetHexa搭載了奧比中光DaBai DCW深度相機(jī)以及NVIDIA Jetson Nano、激光雷達(dá)等硬件,可實(shí)現(xiàn)精準(zhǔn)的建圖導(dǎo)航、動(dòng)態(tài)避障、路徑規(guī)劃、體感交互。
(資料圖片)
六足仿生機(jī)器人JetHexa成為VALSE現(xiàn)場(chǎng)焦點(diǎn)
3D視覺感知交互能力是機(jī)器人的“眼睛”。奧比中光的3D視覺傳感器可以幫助機(jī)器人高效完成人臉識(shí)別、距離感知、避障、導(dǎo)航等功能。奧比中光此次還展出了Orbbot S1移動(dòng)機(jī)器人、Orbbot Arm桌面機(jī)械臂系統(tǒng)等機(jī)器人開發(fā)相關(guān)套件,助力開發(fā)者打造機(jī)器人3D視覺應(yīng)用。
奧比中光展位吸引眾多學(xué)子圍觀
頂會(huì)論文分享:結(jié)合單目結(jié)構(gòu)光和雙目立體視覺的深度估計(jì)
8月23日下午,在VALSE大會(huì)Workshop上,奧比中光研究院三維重建組負(fù)責(zé)人徐玉華博士以《消費(fèi)級(jí)深度相機(jī)與應(yīng)用》為題發(fā)表演講,并分享其團(tuán)隊(duì)CVPR 2022論文成果《結(jié)合單目結(jié)構(gòu)光和雙目立體視覺的深度估計(jì)》(Depth Estimation by Combining Binocular Stereo and Monocular Structured-Light)。
奧比中光研究院徐玉華博士演講現(xiàn)場(chǎng)圖
在Workshop現(xiàn)場(chǎng),徐玉華博士從現(xiàn)有消費(fèi)級(jí)深度相機(jī)入手,對(duì)比了單目結(jié)構(gòu)光、被動(dòng)雙目、主動(dòng)雙目、ToF等不同技術(shù)方案的優(yōu)劣勢(shì),并分享了其在論文中提出的一種新型深度估計(jì)系統(tǒng):它由一個(gè)RGB相機(jī)、一個(gè)紅外相機(jī)和一個(gè)紅外散斑投影器組成。
徐玉華博士團(tuán)隊(duì)提出的全新深度相機(jī)設(shè)計(jì)思路
紅外相機(jī)可以同時(shí)接收紅外光(人眼不可見)和環(huán)境光(人眼可見)。紅外相機(jī)和紅外投影器可以構(gòu)成一個(gè)單目結(jié)構(gòu)光子系統(tǒng),而紅外相機(jī)和RGB相機(jī)又可以構(gòu)成一對(duì)雙目立體視覺子系統(tǒng)。
主動(dòng)的單目結(jié)構(gòu)光子系統(tǒng)對(duì)被動(dòng)雙目立體視覺子系統(tǒng)難以處理的弱紋理對(duì)象(如白墻)具有很好的魯棒性,而雙目子系統(tǒng)對(duì)于遠(yuǎn)距離物體和戶外場(chǎng)景具有較好的適應(yīng)性。因此,這兩種類型的深度估計(jì)子系統(tǒng)可以優(yōu)勢(shì)互補(bǔ)。通過將單目結(jié)構(gòu)光子系統(tǒng)獲得的初始深度圖融合到立體匹配網(wǎng)絡(luò)的代價(jià)空間(Cost Volume)中,可以獲得一個(gè)魯棒的深度估計(jì)系統(tǒng)。
深度估計(jì)流程
基于該原理,徐玉華博士團(tuán)隊(duì)構(gòu)建了一個(gè)原型系統(tǒng),并建立了一個(gè)新的立體視覺數(shù)據(jù)集,以驗(yàn)證新方法的有效性。測(cè)試結(jié)果表明,該系統(tǒng)的Bad2.0匹配誤差不到被動(dòng)立體視覺系統(tǒng)的1/3。
論文提出的深度相機(jī)的效果,與現(xiàn)有的主動(dòng)式深度傳感系統(tǒng)Intel D435相比,輸出的深度圖具有更好的完整性,并且深度圖和RGB圖像是逐像素天然對(duì)齊的。
與其他深度相機(jī)在室外對(duì)比
精度優(yōu)于0.15mm,重建元宇宙“數(shù)字人”
在演講中,徐玉華博士還展示了奧比中光專門為高精度人臉三維重建設(shè)計(jì)開發(fā)的消費(fèi)級(jí)深度相機(jī)Gemini Metric。由于采用了優(yōu)化的硬件和高精度立體匹配算法,Gemini Metric可實(shí)現(xiàn)高幾何精度、高保真紋理的三維人臉重建,精度優(yōu)于0.15mm,可滿足高質(zhì)量數(shù)字人創(chuàng)建、醫(yī)學(xué)美容整形等應(yīng)用。
由Gemini Metric生成的三維人臉模型
從入門到精通,奧比中光3D視覺課程上線
本次參展VALSE 2022,奧比中光3D視覺開發(fā)者社區(qū)現(xiàn)場(chǎng)帶來《三維視覺:原理與實(shí)踐》在線課程,為眾多學(xué)子、開發(fā)者開啟3D視覺世界大門。
該課程由奧比中光多位算法專家、資深算法工程師打造,系統(tǒng)地介紹了3D視覺的基本原理及應(yīng)用實(shí)踐。課程內(nèi)容涵蓋基礎(chǔ)二維圖像處理算法、深度學(xué)習(xí)方法、相機(jī)模型與標(biāo)定、雙目立體視覺、散斑結(jié)構(gòu)光、飛行時(shí)間法(ToF)等三維成像原理與算法、基于點(diǎn)云的三維重建算法、基于RGBD相機(jī)和LiDAR的SLAM算法、3D人臉識(shí)別算法、RGBD圖像分割算法、基于RGBD圖像人體姿態(tài)估計(jì)、ROS機(jī)器人小車實(shí)戰(zhàn)等,幫助學(xué)生、開發(fā)者在3D視覺領(lǐng)域?qū)崿F(xiàn)從入門到精通的進(jìn)階。
百度搜索“3D視覺開發(fā)者社區(qū)”進(jìn)入大講堂板塊,免費(fèi)學(xué)習(xí)全系列課程
3D視覺感知技術(shù)已經(jīng)深入大眾的生活。在智能手機(jī)上,3D視覺感知被用于支付、解鎖、照片美顏等。在移動(dòng)機(jī)器人和無人機(jī)上,3D視覺感知被用于避障、定位、導(dǎo)航。在智能汽車行業(yè),3D視覺感知被用于自動(dòng)駕駛、輔助駕駛。在AR/VR、元宇宙等領(lǐng)域,3D視覺感知被用于人機(jī)交互、內(nèi)容創(chuàng)作。
奧比中光是市場(chǎng)上為數(shù)不多能夠提供全套自主知識(shí)產(chǎn)權(quán)3D視覺感知產(chǎn)品的企業(yè),也是全球少數(shù)幾家全面布局六大3D視覺感知技術(shù)路線的公司。目前,奧比中光已經(jīng)構(gòu)建起“全棧式技術(shù)研發(fā)能力+全領(lǐng)域技術(shù)路線布局”的3D視覺感知技術(shù)體系,重點(diǎn)賦能生物識(shí)別、機(jī)器人、智能終端、智能汽車、智慧家庭、數(shù)字孿生、AR交互等應(yīng)用場(chǎng)景,為各行各業(yè)數(shù)字化智能化升級(jí)提供3D視覺感知技術(shù)支撐。
關(guān)鍵詞: 新聞資訊
關(guān)于我們 廣告服務(wù) 手機(jī)版 投訴文章:43522640@qq.com
Copyright (C) 1999-2020 www.w4vfr.cn 愛好者日?qǐng)?bào)網(wǎng) 版權(quán)所有 聯(lián)系網(wǎng)站:43522640@qq.com