
發(fā)布
注冊(cè)
/
登錄多傳感器時(shí)間同步方案
關(guān)注創(chuàng)建者:匿名 創(chuàng)建時(shí)間:2025-11-17

多傳感器時(shí)間同步方案的實(shí)例教程
</p><h1><strong>3)方案概述及科研價(jià)值</strong></h1><h3><strong>3.1方案概述</strong></h3><p><strong>多源異構(gòu)傳感器納秒級(jí)時(shí)間同步</strong>解決方案(簡(jiǎn)稱<strong>多傳感器時(shí)間同步方案</strong>)是一套基于<strong> XTSS 服務(wù)</strong>的完整時(shí)間同步體系:以 DATALynx ATX4 或 BRICK2 作為 PTP Grandmaster(主時(shí)鐘),通過 IEEE 1588 PTP 高精度協(xié)議<strong>抵消</strong>各傳感器獨(dú)立晶振的 ppm 級(jí)<strong>溫漂誤差</strong>;</p><p>同時(shí)借助 QX550、ProFrame3 等硬件<strong>直接對(duì)接傳感器物理層</strong>,在數(shù)據(jù)離開傳感器的瞬間完成時(shí)間戳記錄,規(guī)避‘滯后時(shí)間戳’問題;并通過硬件觸發(fā)替代軟件觸發(fā),減少操作系統(tǒng)調(diào)度抖動(dòng),最終構(gòu)建納秒級(jí)精度的統(tǒng)一時(shí)間基準(zhǔn),通過 ADTF/ROS 等軟件框架貫穿數(shù)據(jù)處理鏈路,實(shí)現(xiàn)從<strong>微秒級(jí)‘軟件對(duì)齊’</strong>到<strong>納秒級(jí)‘硬件同步’</strong>的工程跨越。
展開 01 引言
自動(dòng)駕駛車輛行駛過程中,多傳感器(相機(jī)、激光雷達(dá)等)采集的帶有精準(zhǔn)同步時(shí)間戳的數(shù)據(jù),是車輛實(shí)現(xiàn)高精度感知、定位、決策與規(guī)劃的核心前提。正因如此,在自動(dòng)駕駛數(shù)據(jù)采集系統(tǒng)中,傳感器與主控單元之間通常會(huì)采用(g) PTP 協(xié)議,以保障多傳感器的硬件時(shí)間同步。
然而和客戶對(duì)接過程中,客戶普遍反饋在實(shí)際開發(fā)過程中,要實(shí)現(xiàn)單個(gè)或多個(gè)傳感器與主控平臺(tái)的精準(zhǔn)時(shí)間同步,往往會(huì)面臨時(shí)間同步精度不足、多傳感器時(shí)間戳不統(tǒng)一、系統(tǒng)部署流程復(fù)雜、數(shù)據(jù)質(zhì)量難以管控等一系列問題。
康謀長(zhǎng)期致力于多傳感器數(shù)據(jù)采集方案開發(fā),在解決客戶問題的實(shí)踐中,積累了應(yīng)對(duì)上述時(shí)間同步問題的豐富經(jīng)驗(yàn)。本文針對(duì) PTP 時(shí)間同步協(xié)議在傳感器與主控平臺(tái)間的應(yīng)用,分享相關(guān)的實(shí)踐案例與技術(shù)經(jīng)驗(yàn),和大家一起討論學(xué)習(xí)。
02 相機(jī)與工控機(jī)時(shí)間同步
PTP時(shí)間同步體系
以相機(jī)和工控機(jī)實(shí)現(xiàn)PTP時(shí)間同步部署為例,相機(jī)采集端口采集用以太網(wǎng)接口(支持PTP),工控機(jī)對(duì)應(yīng)采用以太網(wǎng)接口(支持PTP),以此搭建基礎(chǔ)的同步硬件鏈路。此外,激光雷達(dá)通常采用車載以太網(wǎng)(支持 (g) PTP 協(xié)議)完成時(shí)間同步,其實(shí)現(xiàn)思路與部署邏輯和本案例中的相機(jī)方案同理。
PTP時(shí)間同步可以簡(jiǎn)單劃分為四層結(jié)構(gòu):
①硬件層:依托網(wǎng)卡 PHC(Precision Hardware Clock)硬件時(shí)鐘,在數(shù)據(jù)包收發(fā)的物理層 / 數(shù)據(jù)鏈路層邊界直接打上時(shí)間戳??梢?guī)避軟件協(xié)議棧的延遲干擾,為整個(gè)同步體系提供納秒級(jí)的硬件時(shí)間基準(zhǔn)。
②協(xié)議層:基于 IEEE 1588 PTP 協(xié)議,通過 Sync/Follow-Up 和 Delay_Req/Delay_Resp 兩組核心消息對(duì)實(shí)現(xiàn)主從同步。
展開 圖2:系統(tǒng)集成
三、數(shù)據(jù)采集
在BEV Camera數(shù)據(jù)采集方案中,難點(diǎn)在于如何同步多相機(jī)的采集動(dòng)作、確保數(shù)據(jù)的高精度時(shí)間同步以及高效傳輸。因此,在整個(gè)軟件方面,我們采用ROS+PEAK SDK方案進(jìn)行深度集成,實(shí)現(xiàn)了多相機(jī)的參數(shù)配置、數(shù)據(jù)采集與傳輸。
為了更靈活應(yīng)對(duì)實(shí)際采集環(huán)境需求,對(duì)相機(jī)(如曝光時(shí)間、幀率和分辨率等)參數(shù)進(jìn)行了統(tǒng)一管理和存儲(chǔ),這些參數(shù)可在節(jié)點(diǎn)啟動(dòng)時(shí)通過配置文件動(dòng)態(tài)加載,為相機(jī)的初始化提供了靈活性。
圖3:相機(jī)參數(shù)配置
為實(shí)現(xiàn)多相機(jī)的同步采集和高效傳輸,我們利用了ROS的多線程和節(jié)點(diǎn)管理功能。通過為每個(gè)相機(jī)創(chuàng)建獨(dú)立的采集線程,并啟動(dòng)采集循環(huán),確保了每個(gè)相機(jī)的采集過程獨(dú)立且高效。引入全局控制信號(hào)與信號(hào)處理機(jī)制,確保了統(tǒng)一管理所有相機(jī)的采集和同步結(jié)束狀態(tài)。
圖4:相機(jī)實(shí)時(shí)可視化
四、時(shí)間同步
為了實(shí)現(xiàn)多相機(jī)的時(shí)間同步,一般有兩種方式:軟時(shí)間同步和硬件時(shí)間同步。軟時(shí)間同步主要依賴于軟件層面的算法和協(xié)議來實(shí)現(xiàn)時(shí)間同步。其精度通常在微秒級(jí)別,適用于對(duì)時(shí)間同步精度要求不是較高的場(chǎng)景。
圖5:多相機(jī)軟件時(shí)間同步
為了應(yīng)對(duì)時(shí)間同步精度要求較高的采集場(chǎng)景,如自動(dòng)駕駛和高精度測(cè)量等。在BEV Camera數(shù)據(jù)采集方案中,進(jìn)一步支持相機(jī)進(jìn)行硬件時(shí)間同步。通過XTSS軟件可以有效管理數(shù)采平臺(tái)的時(shí)間同步功能,能夠快速輕便配備各個(gè)傳感器的時(shí)間同步配置。
圖6:XTSS 時(shí)間同步管理
通過GPS模塊提供高精度的時(shí)間基準(zhǔn),并利用支持硬件時(shí)間戳的以太網(wǎng)接口直接捕獲數(shù)據(jù)包的時(shí)間戳。其時(shí)間同步精度可以達(dá)到納秒級(jí)別,具備高穩(wěn)定性,不受軟件和網(wǎng)絡(luò)延遲影響。
展開 在傳感器配置上,該方案構(gòu)建了分層感知的傳感器配置體系,圍繞商用車遠(yuǎn)近場(chǎng)、全視角感知需求,構(gòu)建必選 + 強(qiáng)化 + 可選的傳感器配置體系。通過采用aiSim軟件對(duì)傳感器位姿和采集范圍進(jìn)行仿真,對(duì)傳感器配置布局可以快速有效驗(yàn)證合理性,降低調(diào)試成本。
(1)必選配置:含環(huán)視多相機(jī)、主 LiDAR、360° 毫米波雷達(dá)及雙天線 GNSS + 底盤 IMU,滿足基礎(chǔ)感知與定位;
(2)強(qiáng)化配置:增設(shè)盲區(qū)近場(chǎng) LiDAR、4D 毫米波雷達(dá),提升融合能力與抗干擾性;
(3)可選配置:在駕駛室增設(shè)第二 IMU,實(shí)現(xiàn)艙上傳感器運(yùn)動(dòng)補(bǔ)償與標(biāo)定保持。角模塊化設(shè)計(jì)將同側(cè)相機(jī)、LiDAR、雷達(dá)集成,減少設(shè)備相對(duì)運(yùn)動(dòng),保障標(biāo)定與時(shí)間同步精度。
在硬件架構(gòu)層面,該方案打造商用車級(jí)定制化硬件架構(gòu),以高同步、高帶寬、高可靠、高拓展為核心打造專屬硬件架構(gòu),適配復(fù)雜工況。基于 PTP 協(xié)議搭建高精度時(shí)間同步系統(tǒng),采用高帶寬存儲(chǔ)工控機(jī)搭載高性能 CPU,和專用采集與同步板卡,實(shí)現(xiàn)相機(jī)、LiDAR、雷達(dá)的精準(zhǔn)采集與時(shí)間打標(biāo);
在數(shù)據(jù)交互與導(dǎo)出環(huán)節(jié),硬件端配備萬兆以太網(wǎng)、USB3.0等高速接口,支持多塊大容量移動(dòng)硬盤備份插接,實(shí)現(xiàn)采集數(shù)據(jù)的快速導(dǎo)出與存儲(chǔ)。
2、多傳感器標(biāo)定與采集
高精度標(biāo)定是多傳感器數(shù)據(jù)有效融合的核心前提,更是為BEV模型空間對(duì)齊、跨模態(tài)融合提供精準(zhǔn)位姿基準(zhǔn)的關(guān)鍵。針對(duì)商用車多傳感器配置特點(diǎn),我們打造了全鏈路標(biāo)定流程,全面覆蓋相機(jī)內(nèi)參標(biāo)定、多傳感器外參標(biāo)定、多相機(jī)環(huán)視聯(lián)合標(biāo)定、LiDAR/雷達(dá)與相機(jī)聯(lián)合標(biāo)定等各類核心標(biāo)定場(chǎng)景,可實(shí)現(xiàn)所有傳感器空間位姿的精準(zhǔn)對(duì)齊,同時(shí)配套標(biāo)準(zhǔn)化標(biāo)定工具包,提升標(biāo)定效率與規(guī)范性。
展開 隨著自動(dòng)駕駛算法等級(jí)的不斷提高,各開發(fā)商的傳感器布置方案也越來越豐富,最典型的為多V、多R及多L的方案。而在對(duì)多種類,多數(shù)量的傳感器進(jìn)行物理模型仿真時(shí),會(huì)占用大量的計(jì)算資源和網(wǎng)絡(luò)通訊資源,同時(shí)仿真的效果還受到PCIe總線帶寬及顯卡的接口數(shù)量限制。
基于VTD的多物理傳感器自動(dòng)駕駛系統(tǒng)仿真方案,采用VTD的主從機(jī)布置方式,將VTD軟件安裝在主機(jī)Master上,從機(jī)slave上只安裝運(yùn)行VTD所需要的依賴,主機(jī)以mount的方式將仿真軟件映射在從機(jī)Slave相應(yīng)的位置。在主機(jī)中配置各類型傳感器運(yùn)行的顯卡平臺(tái),仿真開始時(shí),主機(jī)以ssh的方式將傳感器的計(jì)算任務(wù)下發(fā)到從機(jī)Slave的顯卡,以調(diào)用從機(jī)Slave的計(jì)算資源,達(dá)到仿真對(duì)速度的要求。各個(gè)計(jì)算機(jī)的顯卡將計(jì)算完成的數(shù)據(jù),分別通過HDMI和以太網(wǎng)的數(shù)據(jù),發(fā)送到視頻注入板(FPGA)或直接發(fā)送給被測(cè)系統(tǒng)SUT。從而在感知層實(shí)現(xiàn)全鏈路仿真。該系統(tǒng)可以滿足用戶:
01
同時(shí)進(jìn)行多路視頻數(shù)據(jù)的感知算法驗(yàn)證;
02
同時(shí)進(jìn)行多路激光雷達(dá)點(diǎn)云數(shù)據(jù)的仿真驗(yàn)證;
03
同時(shí)進(jìn)行多路毫米波雷達(dá)點(diǎn)云數(shù)據(jù)的仿真驗(yàn)證;
04
可進(jìn)行多V多R和多L的物理模型仿真驗(yàn)證;
05
可進(jìn)行行泊一體的算法仿真驗(yàn)證。
VTD方案優(yōu)勢(shì)
支持主從機(jī)的布置方式,合理分配計(jì)算資源;
主從機(jī)采用同一套仿真軟件,降低軟件成本;
根據(jù)顯卡的種類(圖形卡/計(jì)算卡)合理分配計(jì)算任務(wù);
從機(jī)數(shù)量可擴(kuò)展。
展開 
多傳感器時(shí)間同步方案的相關(guān)專題、標(biāo)簽、搜索
多傳感器時(shí)間同步方案的最新內(nèi)容
隨著自動(dòng)駕駛技術(shù)的迭代升級(jí),商用車ADAS的研發(fā)進(jìn)程已成為行業(yè)焦點(diǎn)。近期,在和眾多商用車ADAS研發(fā)客戶的溝通過程中,我們觀察到了一些被頻繁提到的客戶需求和場(chǎng)景痛點(diǎn),針對(duì)于此,本文為該類客戶量身定制了一套高性能商用車ADAS多傳感器數(shù)據(jù)采集方案。
本文將從客戶的實(shí)際痛點(diǎn)出發(fā),詳細(xì)拆解如何在復(fù)雜工況、多車型適配等需求下,實(shí)現(xiàn)高精度、多傳感器的數(shù)據(jù)融合與采集。
一、客戶需求與場(chǎng)景痛點(diǎn)
不同于乘用車
基于PTP,如何做好多傳感器微秒級(jí)時(shí)間同步?4個(gè)月前
03 結(jié)語
這套基于PTP協(xié)議的自動(dòng)駕駛多傳感器時(shí)間同步方案,在實(shí)施過程中,依托多網(wǎng)口 PHC 時(shí)鐘中轉(zhuǎn)同步架構(gòu)、phc2sys 工具校準(zhǔn)、實(shí)時(shí) PTP 狀態(tài)監(jiān)控及異常處理機(jī)制,實(shí)現(xiàn)了微秒級(jí)時(shí)間同步精度。
此外,通過 YAML 參數(shù)化配置、自動(dòng)化部署腳本與完整文檔體系,降低了技術(shù)門檻與部署難度,支持從單相機(jī)到多相機(jī)部署、對(duì)激光雷達(dá)等設(shè)備靈活擴(kuò)展能力。
高校科研多傳感器時(shí)間同步方案6個(gè)月前
</p><p>本文將拆解<strong>時(shí)間同步核心難題</strong>,介紹<strong>多傳感器時(shí)間同步方案</strong>概況與<strong>應(yīng)用價(jià)值</strong>,旨在幫助高校團(tuán)隊(duì)實(shí)現(xiàn)高質(zhì)量、可復(fù)現(xiàn)、省算力的多傳感器時(shí)間同步落地方案。
隨著自動(dòng)駕駛技術(shù)的快速發(fā)展,車輛準(zhǔn)確感知周圍環(huán)境的能力變得至關(guān)重要。BEV(Bird's-Eye-View,鳥瞰圖)感知技術(shù),以其獨(dú)特的視角和強(qiáng)大的數(shù)據(jù)處理能力,正成為自動(dòng)駕駛領(lǐng)域的一大研究熱點(diǎn)。
一、BEV感知技術(shù)概述
BEV感知技術(shù),是一種從鳥瞰圖視角(俯視圖)出發(fā)的環(huán)境感知方法。與傳統(tǒng)的正視圖相比,BEV視角具有尺度變化小、視角遮擋少的顯著優(yōu)勢(shì),有助于網(wǎng)絡(luò)對(duì)目標(biāo)特征的一致性表達(dá)。基于這樣的優(yōu)勢(shì)
隨著自動(dòng)駕駛算法等級(jí)的不斷提高,各開發(fā)商的傳感器布置方案也越來越豐富,最典型的為多V、多R及多L的方案。而在對(duì)多種類,多數(shù)量的傳感器進(jìn)行物理模型仿真時(shí),會(huì)占用大量的計(jì)算資源和網(wǎng)絡(luò)通訊資源,同時(shí)仿真的效果還受到PCIe總線帶寬及顯卡的接口數(shù)量限制。
基于VTD的多物理傳感器自動(dòng)駕駛系統(tǒng)仿真方案,采用VTD的主從機(jī)布置方式,將VTD軟件安裝在主機(jī)Master上,從機(jī)slave上只安裝運(yùn)行