EVLA: 물리적 근거를 갖춘 주행 추론 및 제어를 위한 전기 인식 멀티모달 어시스턴트

현대의 주행 보조를 위한 시각-언어 모델 (VLMs)은 일반적으로 차량 역학 (vehicle dynamics)을 블랙박스로 취급하며, 이로 인해 차량의 실시간 전기-기계적 상태에 대한 인식이 결여된 결정을 내리는 결과를 초래합니다. 이러한 격차를 해소하기 위해, 우리는 전기화된 파워트레인 상태(예: 모터 토크, 배터리 SOC)에 대한 실시간 인지와 멀티모달 장면 이해를 결합한 새로운 프레임워크인 Electro-Visual-Language Assistant (EVLA)를 소개합니다. 우리의 접근 방식은 두 가지 핵심 혁신을 특징으로 합니다. 첫째, 시각적, 텍스트적, 차량 상태 입력을 공유된 잠재 표현 (latent representation)으로 융합하고 공간적 에너지 비용을 모델링하기 위한 에너지 효율 필드 (Energy-Efficiency Field)로 보강된 통합 공동 상태 인코더 (Unified Co-State Encoder, UCSE)입니다. 둘째, 외부의 사고 사슬 (chain-of-thought) 프롬프팅을 물리적 제약 조건과 최적화 목표에 근거한 내부의 결정론적 추론 과정으로 대체하는 전기 인식 구조적 추론 체인 (Electro-aware Structured Reasoning Chain, ESRC)입니다. 물리 가이드 결합 손실 (physics-guided joint loss)을 통해 엔드 투 엔드 (end-to-end)로 학습된 EVLA는 문맥을 인식하고 에너지 최적화된 주행 결정을 생성하는 법을 배웁니다. 주행 QA 벤치마크에 대한 광범위한 평가는 EVLA가 강력한 미세 조정 (fine-tuned) VLM 베이스라인을 실질적으로 능가하며, 최종 점수를 +0.0871, 정확도를 +5.6% 향상시킴을 입증합니다. 절제 연구 (Ablation studies)는 각 구성 요소의 필요성을 검증하며, 효율성 분석은 EVLA가 다단계 파이프라인보다 36% 더 빠른 추론을 달성함을 보여줍니다. 본 연구는 차량 상태 인식과 구조적 물리 추론을 통합하는 것이 차세대 물리적 근거 기반 주행 보조 시스템을 개발하는 데 매우 중요하다는 점을 강조합니다.