13412598543
技術文章
隨著智能駕駛技術的發展，端到端的解決方案被越來越多的開發者提及，各大汽車企業爭先恐后將端到端智駕方案部署到量產新車型上。過去，智能駕駛方案一直是按照感知、決策、規劃、控制這類規則驅動（rule-based）的模塊化方法推進，然而規則驅動的模塊化方案存在“規則難以窮舉、ODD邊界模糊、擴展與維護升級困難"等局限性。因此端到端的學習驅動（learning-based）方案應運而生。
端到端的方案具有很多顯而易見的優勢，首先，它具備較強的泛化能力，可以通過數據發現潛在規律，適應多樣化和復雜場景；其次，端到端可實現全面優化，學習驅動直接將輸入（如傳感器數據）映射到輸出（如車輛控制指令），避免了模塊化方案中的中間過程（如感知、決策和控制分離）可能導致的信息丟失或誤差累積；此外，端到端可持續學習和升級，模型可以通過在線學習或周期性訓練，不斷吸收新數據，從而適應動態變化的環境需求，如更新的道路法規、復雜的新場景等。
圖 1 自動駕駛傳統模塊化方案與端到端方案
可見，端到端智駕方案優勢非常明顯，但是對于仿真測試來說卻是“災難性的挑戰"。過去模塊化智駕方案中，感知與規控之間有顯性接口。無論是SIL仿真還是HIL仿真，可以輕松繞過感知模塊，直接對規控進行仿真測試（即使輸入合成的低置信度圖像或點云，也不對感知進行評測）。而端到端方案的到來，不再有所謂感知與規控接口，原有SIL或HIL仿真方案需要重構。面向端到端的智駕仿真必須從傳感器輸出數據切入，提供一種置信度高、一致性好、覆蓋率全面、故障注入便捷的全鏈路閉環仿真方案。
我們探索了一種有效的端到端智駕仿真解決方案，在仿真引擎和數據傳輸上進行了大幅優化，以應對端到端帶來的挑戰，整體框架如圖2所示。本方案充分利用了智能駕駛的中間件技術，將仿真引擎生成的傳感器原始數據（部分為結構化數據）直接傳遞給智駕應用層，繞過了傳感器硬件和驅動，縮短了仿真數據傳輸鏈路，規避了仿真系統開發過程帶來的復雜適配與調試工作。大大縮短開發周期的同時，還顯著降低了整個仿真系統的成本。
圖 2 基于軟件定義接口和中間件的閉環測試
方案核心架構基于aiSim仿真器，采用XIL架構，并提供開放靈活的API接口，滿足不同仿真測試需求。無論是傳感器模型、車輛動力學，還是場景構建，都有對應的功能模組來實現。
圖 3 aiSim XIL架構示意圖
aiSim Air引擎支持如Raster、Raytrace等多種渲染方案，并兼容3DGS/NeRF等技術，能夠在平衡渲染效率和置信度的同時，優化資源占用和數據傳輸效率。此外作為通過ISO 26262 ASIL D認證的仿真工具，aiSim能夠在不同傳感器和天氣條件下提供確定性和一致性。
圖 4 Raster和Raytrace渲染支持
圖 5 兼容三維重建場景
此外，我們采用了多種先進的場景構建方案，極大地增強了測試的靈活性和廣度。交互式圖形化場景編輯工具支持OpenScenario和aiSim自定義的AimScenario兩種場景格式，能夠逐幀回放編輯過程。
圖 6 圖形化場景編輯工具
高斯潑濺渲染器（GGSR）則可以在3D重建場景中動態插入物體，優化環境條件，減少偽影，修復鏡頭下的非一致性問題。
圖 7 非一致性修正
圖 8 三維重建場景天氣環境編輯
圖 9 任意視角下多模態效果圖
LogSim2WorldSim進一步通過云端自動化處理和分析原始數據，實現了基于EuroNCAP等法規場景的切片、預測試和回放功能。
圖 10 LogSim2WorldSim方案轉換流程
在完成場景構建后，通過VRU、建筑物、道路標志和天氣等動靜態元素，對場景的邊緣條件進行探索，確保端到端測試全面覆蓋。
圖 11 場景泛化方案
在傳感器仿真方面，通過物理級相機、激光雷達和毫米波雷達模型等豐富模型庫的支持，可以實現快速配置和參數調整。此外通過精準仿真HDR、高動態范圍、動態模糊、曝光等不同的視覺效應，能夠確保各種駕駛環境和天氣條件下的高保真度測試。
圖 12 相機模型鏡頭效應
圖 13 鏡頭不同曝光次數下HDR圖像
圖 14 不同天氣條件下鏡頭效果
激光雷達和毫米波雷達模型也能有效模擬不同天氣條件下的傳感器行為，為高效的多目標檢測和車道線檢測任務提供可靠數據支持。
圖 15 激光雷達BRDF材質反射
圖 16 雨雪天氣激光雷達點云輸出效應
圖 17 激光雷達點云置信度驗證
圖 18 毫米波雷達點云
我們還對采用此方案的仿真結果進行了詳細的驗證。例如，在車道線檢測任務中，aiSim仿真與真實世界數據之間的召回率一致，達到了98.45%的高準確率。多個目標檢測任務的測試結果也表明，仿真與實際表現高度契合，尤其在近距離目標的檢測中，召回率表現優異。
圖 19 置信度測試1：車道線檢測算法
圖 20 置信度測試2：多目標檢測
端到端智駕仿真方案還在多個測試環境中展現了出色的表現，包括實車靜態和動態測試、車輛模型與動力學模型的集成，支持FMU接口快速接入第三方動力學模型。
圖 21 動力學測量和建模
每次仿真結束后，系統會自動生成SQLite數據庫文件，方便進行深入的分析和數據挖掘，確保測試結果的全面性和準確性。
圖 22 測試結果可視化分析
隨著自動駕駛測試需求的日益復雜，基于aiSim為核心的端到端仿真方案憑借其易于擴展的特性，可以支持SiL/HiL等多種應用場景，并提供了與ROS2、Simulink、Matlab等系統的無縫集成。
圖 23 基于DMA視頻注入閉環測試方案及監測窗口
我們還嘗試探索了專為GNSS集成域控制器、決策功能快速測試等場景的測試方案，進一步提高了測試效率，降低了硬件成本。
圖 24 GNSS聯合仿真方案
本次介紹的端到端智駕仿真測試方案，以aiSim引擎和XIL架構為核心支撐，憑借其開放的接口設計、靈活的場景構建與測試功能，為自動駕駛技術的驗證與優化提供了強有力的支持。無論客戶面臨的是提升測試效率的迫切需求，還是降低成本的現實壓力，端到端智駕仿真測試方案都能幫助客戶輕松應對自動駕駛測試中的種種復雜挑戰，實現技術難題的快速解決。
關注微信