- rFpro與索尼合作開發高保真傳感器模型
- 來源：蓋世汽車 發表于 2023/5/22
蓋世汽車訊 據外媒報道，仿真軟件專家rFpro宣布與索尼半導體解決方案集團（Sony Semiconductor Solutions Corporation）合作開發集成到rFpro軟件中的高保真傳感器模型。此次合作將側重于提高仿真解決方案的保真度，以顯著減少在傳感器開發周期中收集物理數據的需求。
圖片來源：rFpro
此次合作將使ADAS和自動駕駛汽車的感知系統能夠在虛擬環境中開發、訓練和測試，從而助力加速開發。
rFpro運營總監Matt Daley表示：“在我們最近推出的光線追蹤技術和rFpro的多重曝光攝像頭技術的開發過程中，索尼半導體一直是我們重要的合作伙伴。且通過與索尼密切合作并將其傳感器模型集成到我們的技術中，我們已經能夠在仿真中實現高水平的相關性。因此，我們將共同幫助該行業減少對收集真實世界數據的依賴，降低成本和耗時。”
索尼半導體解決方案公司汽車業務部副總經理Kenji Onishi表示：“rFpro和索尼半導體解決方案之間的合作將為ADAS感知系統開發人員提供車規級End2End仿真管道。根據攝像頭系統中使用的圖像傳感器的內部架構，索尼已經準備了一個傳感器模型，以實現車規級保真度。”
圖片來源：rFpro
使用深度神經網絡開發的感知軟件和汽車圖像傳感器都是該管道的組成部分，并且變得更加復雜以滿足對更高ADAS功能和穩健性的需求，但這也給開發和驗證帶來了巨大壓力。車規級仿真是一種生成合成數據的工具，可作為上述問題的解決方案。
信號處理、LED閃爍緩解、光譜效應和圖像傳感器控制（例如運動模糊和滾動快門）是索尼傳感器模型實現的復制現象的一些示例。索尼在傳感器模型和渲染系統之間的接口非常有效率，可以快速運行高保真仿真。該接口在索尼的所有汽車圖像傳感器中也是通用的，使用戶能夠在新一代傳感器模型上市時快速過渡。
仿真使車輛系統能夠經受各種場景。天氣、時間、交通量和行人都可以獨立自動地控制和變化。rFpro已將場景中的所有內容都使用準確的材料特性進行物理建模，并且重新創建的路面高度精度在1毫米以內。
Daley補充說：“在仿真中，車輛每天可以行駛數千英里的高價值、高活動虛擬里程，且可以識別邊緣情況并快速生成新的迭代以運行傳感器系統。仿真使得測試無需現實世界中等待曝光的需要。在現實世界中，大部分行駛里程都相對平靜。”
索尼是rFpro合作開發其光線追蹤技術的合作伙伴。該技術使用多條光線準確捕捉現實世界的所有細微差別。作為一種多路徑技術，它可以可靠地仿真攝像頭周圍發生的大量反射。這對于低光場景或有多個光源以準確描繪反射和陰影的環境至關重要。
rFpro的光線追蹤應用于仿真場景中的每個元素，這些元素已經過物理建模以包含準確的材料屬性，以創建高保真度的圖像。由于這對計算要求很高，因此該技術可以實時解耦，且可以調整幀渲染速率以適應所需的細節級別。
圖片來源：rFpro
汽車行業使用的現代HDR（高動態范圍）攝像頭捕捉不同時間長度的多次曝光。例如每幀短、中、長曝光。為了準確地仿真這一點，rFpro引入了多重曝光攝像頭API，并與傳感器制造商的傳感器模型集成在一起，從而使傳感器模型能夠以與物理對應物完全相同的曝光時間對虛擬世界進行采樣。
Daley總結道：“通過rFpro渲染和索尼的傳感器模型管道，運動模糊、卷簾快門特性、濾色器特性和物理傳感器的信號處理都存在于仿真圖像中。新模型還允許在傳感器模型上復制圖像傳感器中的LED閃爍緩解功能，并在仿真中充分發揮作用。此外，該傳感器模型能夠與在rFpro的高保真資產和渲染系統上仿真的快速閃爍的LED光源進行交互，例如交通燈和車輛剎車燈。準確地復制這些現象對于實現與現實世界的高度關聯至關重要。”
- 如果本文收錄的圖片文字侵犯了您的權益，請及時與我們聯系，我們將在24內核實刪除，謝謝！
