엔비디아가 자율주행의 다음 단계는 단순한 인식이 아닌 상황 맥락과 교통 참여자 간 관계를 이해하는 ‘추론’ 능력에 달려있다고 강조했어요. 마르코 파보네 수석 디렉터는 ‘피지컬 AI를 위한 추론 모델’ 발표에서 언어적 이해와 물리적 행동을 연결하는 것이 중요하다고 설명했어요.
엔비디아는 자율주행 AI 플랫폼 ‘알파마요’를 개발하여 시각 정보, 언어 이해, 행동 생성을 결합하고, 차량의 판단 과정을 언어로 제시하여 사람이 확인할 수 있도록 했어요. 이를 통해 대형 모델의 추론 능력을 소형 모델에 학습시키는 ‘지식 증류’ 기술도 활용하고 있어요.
엔비디아는 자율주행 개발 생태계를 구축하여 개발사가 모델을 학습하고 검증할 수 있도록 지원하고 있으며, 자율주행 기술을 로봇 분야로 확장할 수 있을 것으로 기대하고 있어요. 다만, 단순히 LLM을 탑재하는 것이 아니라 안전 아키텍처 설계가 중요하다고 강조했어요.