在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

VX1161助力ADAS相機視頻回灌的基本過程

Vector維克多 ? 來源:Vector維克多 ? 作者:Vector China ? 2022-11-30 16:45 ? 次閱讀

自動駕駛汽車和高級駕駛輔助系統(ADAS)的開發和驗證是極其苛刻的過程,包括現實道路測試和詳盡的實驗室模擬。雖然真實世界的道路測試是發布汽車產品之前的最終步驟,但許多公司傾向于盡可能用現實的模擬或者記錄的真實世界數據來代替它,可控性更強,并普遍提高測試質量和驗證覆蓋率。

作為ADAS系統的主傳感器,相機應用的測試過程除了要驗證可用性和安全性外,在開發早期還要面臨大量的訓練過程來改進算法。這個過程需要用構建好的道路場景庫,即錄制好的大量視頻文件作為激勵,在實驗室環境回放視頻流給被測設備(DUT),通常是ADAS域控制器或者中央計算自動駕駛平臺。

視頻回灌功能極大地簡化了實驗室環境中的研發和測試。例如,計算機視覺系統可以在實驗室調試,根據特定的駕駛情況循環,無需額外的試駕。

1

技術要求

在回灌視頻時,ECU和相機斷開連接,需要一個特定的板卡來回放原始視頻數據,并且保證回放的準確度和精度。

VX1161是專為高帶寬數據采集和傳輸設計的可配置的多通道接口設備,其中面向Streaming應用的VX1161.5x系列板卡具有下述特點:

1.

支持廣泛的標準的攝像頭接口

通常ECU和相機之間是通過串行解串技術來傳輸視頻流,常見的串行解串協議有FPD-LINK III和GMSL2等。VX1161.5x系列具有多種型號的板卡可以接收、發送和路由不同協議的數據流,例如:

VX1161.51A 2xTAP TI954/TI953支持兩路FPD-LINK III協議的視頻流記錄和回放;

VX1161.51C 2xTAP MX9296A/MX9295A支持兩路GMSL2協議的視頻流記錄和回放。

2.

實時性和高帶寬

在有效地復現完整的測試車輛多攝像頭視頻系統和車載數據總線時,通常數據量可能高達幾個G,需要保證從讀取文件到傳輸數據的高帶寬,從而保證回放的時間準確度。

VX1161的10G以太網接口可以高效接收來自回灌工作站(Replay Station)的視頻流。

3.

同步性

VX1161板卡支持PTP同步功能,可以實現多通道的時間同步,同時其他支持PTP的總線設備也可以在一個時間域內同步回放,確保同步傳感器和總線數據回放,且抖動最小。

4.

模塊化

VX1161板卡均為模塊化設計,可根據使用需求靈活組合。同時VX1161板卡的回放API可以被CANoe的CAPL腳本調用,從而便于集成其它的系統測試過程。

2

視頻回灌原理

d84caa70-7088-11ed-8abf-dac502259ad0.png

圖2 視頻回灌原理

通過VX1161視頻回灌的基本過程如下:

1)

CANoe作為系統的主控軟件

負責控制CAPL腳本的編輯和執行;

2)

CAPL腳本調用Stream Provider動態鏈接庫中的API函數

負責加載視頻文件(MF4);

連接VX1161板卡;

控制VX1161板卡開始和停止回灌;

3)

VP75xx回灌工作站(Replay Station)

負責存儲和讀取視頻文件的視頻流;

通過10G以太網將視頻流輸出到視頻硬件板卡;

4)

VX1161作為視頻回灌硬件

負責接收來自VP75xx回灌工作站的視頻流;

接收來自CANoe的控制命令;

通過各個板卡的GMSL2或FPDLINKIII串行器傳輸視頻流到ECU接收端。

視頻回灌中的時間同步機制

在視頻回灌中,如果涉及以下場景通常需要設計同步機制:

1)

多通道的視頻同步回灌,例如自動泊車(APA)環視攝像頭;

2)

在回灌視頻的同時,回灌其他傳感器或者ECU系統記錄的數據,例如CAN總線數據等等。

VX1161在回灌時通常使用PTP同步機制(亦支持其它同步機制,如GPIO),VTSS(Vector Time Synchronization Service)同步服務確保連接在VP75xx上的多個設備可以同步到一個時間域,板卡的視頻流按照PTP時間進行回放,每幀的播放時間需要在Stream Provider中計算并發送給板卡。具體過程如下:

d875f0d8-7088-11ed-8abf-dac502259ad0.png

圖3 視頻回灌系統的同步連接

1)

PTP主時鐘提供整個仿真系統的時間。

所有設備作為PTP從節點(Slave)被同步,包括VX1161的所有板卡,VN56xx等支持PTP功能的以太網接口卡;

其他不支持PTP的板卡可通過同步線連接到VN56xx來實現硬線同步。

2)

在開始回灌時,CANoe通過CAPL腳本從支持PTP的接口卡(如VN56xx,VX1161.41A/B)獲取PTP時鐘

3)

CANoe調用并初始化Stream Provider。

4)

Stream Provider打開本地的視頻回灌文件并讀取圖像的時間戳,通過相對時間換算每一幀圖像的播放時間。

5)

VX1161.51板卡接收緩存圖像和播放時間,比較PTP時間和預設的播放時間,當到達播放時間時,圖像會按照CSI包送到串行器;ECU通過解串器接收視頻流。

以四路回放為例,CANoe在獲取當前的PTP時間后并沒有控制板卡立即回放,而是緩存圖像等待第一幀圖像時間對齊后同時回放。

在回放后的每一幀都是對齊的,因為:

所有圖像幀的第一幀啟動時間是相同的;

所有通道的文件里每幀時間是對齊的;

每一個板卡的通道都同步在一個PTP時間域,板卡是按照PTP絕對時間進行回放。

每一幀的實際回放時間就是由三部分累加產生的:

Presentation time = CANoe PTP time (start replay) + delay time + MDF frame time stamp

d8a3970e-7088-11ed-8abf-dac502259ad0.png

圖4 視頻回灌系統的同步時間

3

實例解析

d8c46970-7088-11ed-8abf-dac502259ad0.png

圖5 回灌系統的實例

本實例通過另外一組VX1161板卡來接收回灌數據,從而模擬ECU接收視頻流的過程,同時驗證回灌視頻的同步性。

在回灌系統中,設置VX1161.51板卡通道2和通道4為發送模式(TX only),并將其IP地址分別設為192.168.10.12和192.168.10.13,這樣可以回放4路視頻。這些通道都已集成CSI串行器,并配置相應的寄存器

與之對應的,設置VX1161.51板卡通道1和通道3為接收模式(RX only),并將其IP地址分別設為192.168.20.12和192.168.20.14的,這樣可以同時接收4路視頻。這些通道上都已集成CSI解串器,并配置相應的寄存器。

d8f62c58-7088-11ed-8abf-dac502259ad0.png

圖6 VX1161板卡的模式配置

d9273fe6-7088-11ed-8abf-dac502259ad0.png

圖7 CANoe的視頻回灌4路發送界面

在CANoe中通過Panel面板可以設置管理回灌板卡的IP和通道,并關聯回灌的視頻MF4文件。在點擊Group control Start/Stop時,CANoe會觸發相應的CAPL腳本控制板卡開始或停止回灌。

d963fdf0-7088-11ed-8abf-dac502259ad0.png

圖8 CANape接收4路回灌的視頻界面

與此同時,CANape可以同時接收4路視頻并預覽圖像,每個接收通道之間也是PTP同步的,這樣可以判斷每路視頻的幀同步的情況。






審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2552

    文章

    51288

    瀏覽量

    755160
  • ecu
    ecu
    +關注

    關注

    14

    文章

    890

    瀏覽量

    54603
  • adas
    +關注

    關注

    309

    文章

    2189

    瀏覽量

    208747
  • DUT
    DUT
    +關注

    關注

    0

    文章

    189

    瀏覽量

    12437

原文標題:VX1161助力ADAS相機視頻回灌

文章出處:【微信號:VectorChina,微信公眾號:Vector維克多】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    康謀分享 | 確保AD/ADAS系統的安全:避免數據泛濫的關鍵!

    如何實現數據的高效管理、解讀和正確分析,以避免數據泛濫的不利影響?掌握好“指標與算法”和“全面可視化分析工具”兩大關鍵要素,助力AD/ADAS系統開發、驗證和改進過程
    的頭像 發表于 11-13 09:54 ?3183次閱讀
    康謀分享 | 確保AD/<b class='flag-5'>ADAS</b>系統的安全:避免數據泛濫的關鍵!

    使用FPGA構建ADAS系統簡易過程

    之前已經介紹過《FPGA在汽車電子中應用-ADAS》,但是很多人留言說是沒有相關例程,應用不夠直觀,所以,今天他來了-使用FPGA制作一個便攜式 ADAS 系統(源碼開源)。
    的頭像 發表于 11-05 09:19 ?301次閱讀

    物聯網行業中封膠工藝--有機硅導熱封膠防水方案介紹

    有機硅導熱封硅膠一般可以分為兩類,一種A、B雙組份液體聚合物硅膠,一般稱為封硅膠或者封膠或者電子硅膠。
    的頭像 發表于 09-29 14:20 ?252次閱讀
    物聯網行業中<b class='flag-5'>灌</b>封膠工藝--有機硅導熱<b class='flag-5'>灌</b>封膠防水方案介紹

    LM5145在pre-bias啟機過程中的電壓反問題

    電子發燒友網站提供《LM5145在pre-bias啟機過程中的電壓反問題.pdf》資料免費下載
    發表于 09-27 10:19 ?0次下載
    LM5145在pre-bias啟機<b class='flag-5'>過程</b>中的電壓反<b class='flag-5'>灌</b>問題

    MXoptiCal-簡化精密測量-只需幾個步驟即可實現一致的目標測量#ADAS

    adas
    北匯信息POLELINK
    發布于 :2024年09月20日 10:16:32

    應用案例分享 | 智駕路試數據分析及 SiL/HiL 案例介紹

    本文將通過實際應用案例進行講解,通過軟件在環(SiL)和硬件在環(HiL)驗證,該系統能夠充分評估和優化算法性能,發揮數據價值。
    的頭像 發表于 09-13 14:45 ?1854次閱讀
    應用案例分享 | 智駕路試數據分析及 SiL/HiL <b class='flag-5'>回</b><b class='flag-5'>灌</b>案例介紹

    帶你走進智能駕駛數據系統

    本文重點介紹了目標級開環、閉環和傳感器級別開環的應用,以及感知閉環
    的頭像 發表于 09-11 16:52 ?1862次閱讀
    帶你走進智能駕駛數據<b class='flag-5'>回</b><b class='flag-5'>灌</b>系統

    友思特方案 多相機的完美閉環:proFRAME車載全景環視相機數采方案

    導讀 精準搜集車輛傳感器的 實時數據 是 ADAS系統 穩定運行的關鍵所在。 友思特 proFRAME 系統 可以同步采集輸入數據流并輸出處理,成為車載全景環視相機從圖像采集至分析結果輸出存儲的高效
    的頭像 發表于 08-22 15:12 ?478次閱讀
    友思特方案  多<b class='flag-5'>相機</b>的完美閉環:proFRAME車載全景環視<b class='flag-5'>相機</b>數采方案

    ADAS功能安全HiL仿真測試系統介紹#ADAS #VTHiL

    adas
    北匯信息POLELINK
    發布于 :2024年08月03日 20:07:34

    ADAS系統組成簡介#ADAS

    adas
    北匯信息POLELINK
    發布于 :2024年08月03日 20:05:37

    封膠為什么要分組?

    封膠是封裝電子元器件和線路板的關鍵材料,對于保護電子設備免受外界環境的侵害起著至關重要的作用。為了充分發揮其效能并滿足多樣化的應用需求,封膠通常會進行分組。下面我們來深入了解一下封膠為什么要
    的頭像 發表于 06-19 14:10 ?325次閱讀

    芯片封膠是什么?有哪些優點?

    、密封、封和涂覆保護,為電子產品的穩定運行提供了堅實保障。芯片封膠的優點主要體現在以下幾個方面:它具有高粘度特性。這使得封膠在封裝過程中能夠緊密貼合電子元器
    的頭像 發表于 04-18 13:56 ?1087次閱讀
    芯片<b class='flag-5'>灌</b>封膠是什么?有哪些優點?

    8路GMSL視頻注入的自動駕駛半實物仿真平臺

    8路GMSL視頻注入的自動駕駛半實物仿真平臺
    的頭像 發表于 04-17 11:33 ?906次閱讀
    8路GMSL<b class='flag-5'>視頻</b>注入<b class='flag-5'>回</b><b class='flag-5'>灌</b>的自動駕駛半實物仿真平臺

    電子膠封裝——成就高精度電子膠未來

    引言使用聚氨酯(PU)、硅膠或環氧樹脂進行電子封具有多重優勢:Moldex3D解決方案透過Moldex3D電子封仿真技術,可針對在過程中的流動應力進行模擬,并有效預測氣泡位置及
    的頭像 發表于 04-17 08:35 ?724次閱讀
    電子<b class='flag-5'>灌</b>膠封裝——成就高精度電子<b class='flag-5'>灌</b>膠未來
    主站蜘蛛池模板: 日韩一级特黄毛片在线看| 欧美日韩亚洲色图| 狠狠色色综合网站| 国色天香网在线| 69堂在线观看国产成人| 一色屋成人免费精品网站| 国产成人高清| 国产你懂的在线观看| 99综合色| 人人干干人人| 最新在线视频| 午夜性爽快| 亚洲三级视频在线观看| 色成网| 久久精品久| 一级特色黄大片| 美女好紧好大好爽12p| 视频在线观看网站| 美女扒开尿囗给男生桶爽| 一起射综合网| 国产乱子伦| 国产黄色在线| 一级特级女人18毛片免费视频| 婷婷五月五| 免费大片黄日本在线观看| 男人你懂的网站| 全国男人的天堂天堂网| 精品国产综合区久久久久99| 77788色淫视频免费观看| 免费在线黄色网址| 成人免费看黄网站yyy456| 伊人97在线| 免费一级毛片视频| 6969精品视频在线观看| 久操视频在线免费观看| 午夜爽视频| 日韩欧美高清一区| www日本黄色| 国产精品美女久久久久网站| 精品无码中出一区二区| 日本拍拍视频|