확률적 모델에서 결정론적 보증으로: 안전필수 인공지능을 위한 전략 프레임워크
현대 인공지능의 지형은 현재 기술적 깊이에 대한 근본적 오해로 양분되어 있다. 이 균열의 한쪽에는 대규모 언어 모델(LLM) "래퍼"로 흔히 특징지어지며 신속한 배포와 대화적 유창성을 우선시하는 생성형 인터페이스 계층의 급속한 확산이 있다. 반대편에는 형식 검증, 센서 융합 회복탄력성, 결정론적 안전 아키텍처의 통합으로 정의되는 분야인 딥 AI 엔지니어링의 엄격한 규율이 있다. 이 전환을 헤쳐 가는 엔터프라이즈 리더에게 그 구분은 더 이상 학술적 문제에 그치지 않는다. 자율 시스템이 디지털 환경에서 고위험 물리적 배포로 이동하면서, 확률적 "래퍼 기반" 접근의 한계는 일련의 세간의 이목을 끈 실패로 드러났다.
Uber Advanced Technologies Group (ATG), GM Cruise, Tesla, Waymo와 관련된 사고는 본 분석을 위한 핵심 실증 데이터이다. 이러한 사건은 고립된 사고를 넘어 아키텍처적 취약성의 시스템적 지표이다. 2018년 템피 사망 사고 이후 Uber ATG와 관련된 $8.5 million 합의, 2023년 GM Cruise의 캘리포니아 운행 허가 취소, Tesla의 Full Self-Driving (FSD) 시스템에 대한 미국 도로교통안전국(NHTSA)의 진행 중인 조사는 모두 "인지-논리 격차(Perception-Logic Gap)"의 증상이다.1 본 보고서는 이러한 실패를 분석하여 안전필수 AI를 위한 새로운 패러다임을 확립한다—Veriprajna를 확률적 인터페이스의 촉진자가 아니라, 깊고 검증 가능한 자율성의 제공자로 위치시키는 패러다임이다.
확률적 인지의 아키텍처적 취약성: Uber ATG에서 얻은 교훈
2018년 3월 애리조나주 템피에서 Uber ATG 시험 차량이 관련된 충돌은 분류 취약성의 기초 사례 연구로 남아 있다. 당시 서사는 인간 안전 운전자의 주의 산만에 크게 초점을 맞췄지만, 미국 교통안전위원회(NTSB) 조사 결과는 소프트웨어가 물리 세계에 대한 안정적 표상을 유지하는 능력에서 훨씬 더 근본적인 실패를 드러냈다.3
분류 진동과 객체 영속성의 실패
Uber ATG 시스템은 보행자 Elaine Herzberg를 충돌 약 5.6초 전에 처음 등록했다.5 시속 43 mph의 속도에서 차량은 거의 378 feet 떨어져 있어, 표준 자동긴급제동(AEB) 시스템이 개입하기에 충분한 시간 창을 제공했다.7 그러나 시스템의 인지 논리는 "분류 진동"으로 특징지어졌다. 충돌 직전 수초 동안 소프트웨어는 보행자를 반복적으로 재분류했다—먼저 "미지 객체", 그다음 "차량", 마지막으로 "자전거"로.6
각 재분류는 단순한 레이블 변경이 아니라, 객체의 예측 궤적에 대한 리셋이었다. 시간적 일관성이 결여된 확률적 시스템에서 AI는 각 프레임 또는 프레임 군집을 거의 독립적인 사건으로 취급한다. 시스템이 객체에 대한 지속적 정체성에 정착하지 못했기 때문에, 너무 늦을 때까지 신뢰할 수 있는 경로 예측을 계산할 수 없었다. 시스템은 충돌 1.3초 전에야 긴급 제동이 필요하다고 판단했다—물리 법칙상 충돌이 불가피해진 시점이다.3
기술 부채와 안전 중복의 제거
Uber ATG 실패의 핵심 요소는 차량 고유 안전 시스템의 의도적 비활성화였다. "불규칙한 차량 거동"을 방지하고 자율 시스템에 더 부드러운 승차감을 제공하기 위해, Uber는 Volvo XC90의 공장 장착 충돌 회피 및 AEB 기능을 비활성화했다.4 엔지니어링 팀은 고신뢰 개입에 대해 아직 검증되지 않은 독점적 개발 시스템에 전적으로 의존하기로 했다.
| 실패 구성요소 | 기술 메커니즘 | 전략적 함의 |
|---|---|---|
| 인지 파이프라인 | 분류 진동 (미지 -> 차량 -> 자전거) | 객체 영속성 상실은 경로 예측을 무력화한다.6 |
| 논리 억제 | Volvo 공장 AEB의 수동 비활성화 | 실험적 코드를 위해 하드코딩된 안전 계층을 제거.4 |
| HMI 인터페이스 | 주의가 산만한 인간 모니터에 대한 과도한 의존 | "자동화 안주"를 고려하지 못함.3 |
| 예측 엔진 | 동적 행위자에 대한 정적 궤적 가정 | 비표준 보행자 횡단을 모델링하지 못함.5 |
이 의사결정 과정은 AI 개발의 위험한 경향을 보여준다: 확률적 모델에서의 "부드러운" 성능을 위해 결정론적 안전 계층을 희생하는 것이다. 2018년 충돌에 대한 $8.5 million 합의는 법적 책임만이 아니라, 자동 운전 시스템의 "기능적 한계"를 관리하지 못한 실패를 반영한다.4 Veriprajna가 주창하는 딥 AI 엔지니어링은 이 위계에 반대하며, 인지 계층이 실험적 정책에 의해 무효화될 수 없는 형식 제약에 묶이는 "안전 우선" 아키텍처를 옹호한다.
오진과 충돌 후 논리의 실패: Cruise 2023 위기
2023년 10월, 샌프란시스코의 GM Cruise 로보택시가 보행자를 들이받은 뒤 20 feet를 끌고 가, 캘리포니아에서 회사의 무인 운행이 전면 중단되었다.9 이 사고는 초기 충돌 회피 문제를 넘어 "충돌 후 추론"의 영역으로 이동했다—전형적인 LLM 래퍼와 단순 인지 API가 완전히 실패하는 영역이다.
전면 압과 대 측면 충돌의 오류
Cruise 사고는 제3자에 의해 시작되었다: 인간이 운전하는 Nissan이 보행자를 들이받아, 그녀를 Cruise 차량의 경로로 밀어 넣었다.9 Cruise 차량은 보행자를 들이받은 뒤 처음에는 정지했다. 그러나 시스템의 "충격 감지" 논리가 충분히 세밀하지 않아 충돌을 오진했다. 보행자가 차량 아래에 끼여 있었음에도, 시스템의 센서는 전면 압과를 인식하지 못하고 사건을 측면 충돌로 분류했다.1
이 오진은 사전 프로그래밍된 "최소위험상태(MRC)" 기동을 촉발했다. 시스템은 교통 차단을 피하기 위해 측면 충돌 후 도로 옆으로 이동하도록 설계되어 있었다.11 인지 계층이 충돌 후 보행자를 "잊어버렸기" 때문에, 차량은 약 7 mph로 피해자를 20 feet 끌며 갓길로 이동하기 시작했다.9 끌림은 차량이 "과도한 휠 슬립"을 감지했을 때만 중단되었으며, 시스템은 이를 인간 장애물이 아니라 기계적 결함으로 해석했다.11
기술적 요건으로서의 투명성
Cruise 실패는 기술적 실패인 만큼 조직적 실패이기도 했다. 조사 결과 고위 경영진이 "부정확한 미디어 서사를 바로잡는 데 집착"했고, 끌림에 관해 규제 당국에 투명하지 못했다.9 Cruise 직원들은 DMV와의 회의에서 "영상이 스스로 말하게 두었다"고 인정했으며, 인터넷 연결 문제로 영상의 "끌림" 부분이 재생되지 않는 경우가 많다는 것을 알고 있었다.9
이는 딥 AI 컨설팅의 핵심 교훈을 강조한다: 자율 시스템의 안전은 그 투명성과 분리될 수 없다. Veriprajna의 접근은 "설명 가능한 안전 감사"의 개발을 강조한다. AI가 내리는 모든 결정, 특히 충돌 후 결정이 규제 당국이 실시간으로 감사할 수 있는 변조 방지 결정론적 형식으로 기록되는 것이다. NHTSA에 허위 보고서를 제출한 데 대한 후속 $500,000 형사 벌금은 AI 안전을 엔지니어링 문제가 아닌 마케팅 문제로 취급하는 높은 비용을 강조한다.1
"비전 온리" 딜레마와 확률적 센싱의 한계: Tesla FSD
Tesla의 Full Self-Driving (FSD) 시스템은 대규모 규제 조사의 중심에 있으며, NHTSA는 2024년과 2025년 사이 충돌에 대해 40건 이상의 조사를 개시했다.2 이러한 조사, 특히 PE24-031 및 PE25-012로 식별된 조사는 시스템의 "능력 극장(Capability Theater)"에서의 실패에 초점을 맞춘다—맑은 조건에서는 최적 성능이지만 환경적 "엣지 케이스" 앞에서 붕괴하는 현상이다.13
환경 민감도와 신호 비준수
NHTSA 조사는 Tesla의 비전 온리 시스템이 기본 교통안전법을 준수하지 못하는 구체적 패턴을 식별했다:
- 교통 신호 실패: 18건의 개별 민원에서 FSD 활성화 차량이 적색등에서 정지를 유지하지 못하거나 신호 상태를 전혀 탐지하지 못했다.12
- 역주행 기동: 시스템이 대향 차로에 진입하거나 직진 전용 차로에서 회전을 실행하여, 명확한 노면 표시와 표지를 무시하는 것이 관찰되었다.2
- 저시정 포화: 2023년의 중대한 치명 충돌은 "젖은 아스팔트 위의 태양 글레어" 상태에서 발생했으며, 시스템이 보행자를 탐지하지 못했다.14
Tesla가 LiDAR와 레이더를 배제하는 "비전 온리" 아키텍처에 의존하는 것은 "센서 포화"에 대한 근본적 취약성을 만든다. 안개, 먼지, 또는 공중 잔해 조건에서 광학 신호 대 잡음비는 안전 주행에 필요한 임계값 아래로 떨어진다.13 Tesla가 2D 이미지로부터 세계의 3D 기하를 예측하기 위해 "점유 네트워크"를 활용하지만, NHTSA 보고서는 이러한 예측이 여전히 1차 안전 계층으로 사용하기에는 너무 확률적임을 시사한다.15
주행 환경의 형식화
Tesla 실패 모델을 넘어서기 위해, 딥 AI 엔지니어링은 "위험 기반 엔벨로프"를 활용한다. 모호한 "기능" 대신, 시스템은 명시적 운영설계영역(ODD)을 정의해야 한다. "글레어 포화 비율" 또는 "안개 후방산란 지수"가 검증된 임계값을 초과하면, 시스템은 페일세이프 전환을 개시해야 한다.14
| 조사된 실패 모드 | 빈도/영향 | 기술적 원인 |
|---|---|---|
| 적색등 비준수 | 18건 이상 민원 | 비전 스택의 신호 상태 탐지 실패.12 |
| 차선 표시 위반 | 4건 이상 SGO 보고 | 회전 전용 대 직진 차로를 구분하지 못함.12 |
| 저시정 충돌 | 사망 (2023-2024) | 광학 센서 포화 (글레어/안개/먼지).13 |
| 대향 차로 진입 | 2건 SGO 보고 | 차로 기하의 3D 재구성 실패.12 |
Veriprajna의 철학은 자율성이 "최선을 다하는" 소프트웨어 위에 구축될 수 없다는 것이다. 2025년 NHTSA 조사의 영향을 받는 2.9 million대의 차량은 차량군 전반의 위험을 나타내며, 이는 인지 시스템의 신뢰 수준이 결정론적 지점 아래로 떨어질 때 AI가 고위험 결정을 내리지 못하게 하는 소프트웨어 잠금인 "보증 게이트"의 구현을 통해서만 완화될 수 있다.2
다중 에이전트 교착과 사회기술적 회복탄력성: Waymo 경험
Waymo는 종종 안전의 벤치마크로 간주되며, 인간 운전자보다 현저히 낮은 부상률로 56 million miles 이상을 주행했다.17 그러나 시스템이 확장되면서 새로운 실패 유형을 마주했다: "사회기술적 마찰." 이는 AI가 어떻게 주행하는지만이 아니라, 복잡하고 종종 적대적인 인간 사회 환경과 어떻게 상호작용하는지를 포함한다.
교차로 차단과 통신 실패
2025년 로스앤젤레스 정전 동안, 수십 대의 Waymo 로보택시가 일련의 어두운 교차로에서 멈췄다. 어두운 신호를 사거리 정지로 취급하도록 프로그래밍된 "Waymo Driver"는 "원격 지원" 요청의 집중된 급증에 압도되었다.18 차량들이 서로 효과적으로 통신하지 못했기 때문에, 로보택시가 다른 로보택시를 막아 중앙 지휘 센터가 해결할 수 없는 적체를 만드는 "다중 에이전트 교착" 상태에 진입했다.18
이 실패는 "독립성 함정"을 부각한다—자율 차량이 더 넓은 조율 시스템 없이 단독 에이전트로서 안전하게 운행할 수 있다는 가정이다.18 딥 AI 엔지니어링은 무선 통신의 상실과, 차량군이 교착을 자율적으로 해결할 수 있게 하는 "V2V"(Vehicle-to-Vehicle) 및 "V2I"(Vehicle-to-Infrastructure) 프로토콜의 필요성을 고려해야 한다.20
"위험 탈출 모드"의 필요성
자율 운행에 대한 가장 중요한 신흥 위협은 아마도 대중의 공격성이다. 2025년 초, 로스앤젤레스 시민 소요 동안 여러 Waymo 차량이 군중에 의해 공격당했으며, 시위대가 타이어를 베고 차량에 불을 질렀다.21 "수동적 안전"을 위해 프로그래밍된 차량은 사람들로 둘러싸이면 단순히 정지했다.
이는 "위험 탈출 모드"의 제안된 개발로 이어졌다. 이러한 시스템은 360도 센서 스위트를 사용해 "악의적 인간 공격성"을 탐지하고 차량의 지시를 "수동적 순응"에서 "능동적 탈출"로 전환할 것이다.21 차량이 위해를 가하도록 프로그래밍되어서는 안 되지만, 딥 AI 제공자들은 승객을 보호하고 불안정한 상황에서 탈출하기 위해 인도 주행이나 적색등 통과와 같은 경미한 교통 위반을 범할 수 있어야 한다고 주장한다.21 이는 AI의 "윤리 엔진"에 대한 근본적 재고를 요구한다—LLM 래퍼의 역량을 훨씬 넘어선 과제이다.
기술적 해법: 조감도(BEV)와 점유 네트워크
Uber와 Cruise 사례에서 나타난 추적 실패를 해결하기 위해, 산업은 조감도(BEV) 인지로 전환하고 있다. 표준 카메라별 시스템은 개별 이미지를 처리하여 "스티칭" 중 데이터 손실을 초래한다. 대조적으로, BEV 인지는 다중 시점 카메라와 LiDAR 데이터를 통합된 하향식 3D 격자로 변환한다.22
점유 네트워크 vs. 표준 센서 융합
전통적 센서 융합은 2D 픽셀을 3D 점에 "매칭"하려 하며, 이는 계산 비용이 크고 투영 오류에 취약하다. Veriprajna는 "점유 네트워크"를 옹호한다—3D 볼륨의 모든 복셀의 "점유 확률"을 예측하는 아키텍처이다.16
- 객체 영속성: 점유 네트워크가 "레이블"만이 아니라 볼륨을 추적하기 때문에, 시스템은 객체가 보행자인지 자전거인지 결정할 수 없어도 공간이 점유되어 있음을 안다. 이는 Uber ATG의 분류 전환을 막았을 것이다.16
- 기하 충실도: 점유 네트워크는 2D BEV 맵이 종종 무시하는 수직 구조와 도로 잔해를 포착한다. 이는 Cruise 차량이 충돌 후 기동 중 차대 아래의 보행자를 "보게" 했을 것이다.16
- 시공간 일관성: "BEVFormer" 아키텍처를 사용하여, 시스템은 "시간적 자기주의"를 통해 일시적 가림 동안에도 객체가 어디에 있었는지 기억할 수 있다 (예: 주차된 트럭 뒤를 걷는 보행자).24
이 모델에서 Transformer 아키텍처는 대화 도구가 아니라, 이질적 데이터를 단일한 "공유 캔버스"로 융합하는 공간 추론 엔진으로 기능한다.23 이것이 딥 AI 엔지니어링이다: 주행의 근본적 물리 문제를 해결하기 위해 최전선 아키텍처를 사용하는 것이다.
형식 검증: 고보증 AI를 위한 Veriprajna 표준
"래퍼"와 "솔루션"을 가르는 가장 중요한 차별점은 형식 방법의 적용이다. 전통적 소프트웨어 테스트는 "블랙박스" 시나리오에 의존한다; 시스템이 N개의 테스트를 통과하면 안전한 것으로 가정된다. 그러나 안전필수 시스템에서는 정확성에 대한 수학적 증명을 요구한다.
SMT 솔버와 네트워크 수준 추론
Marabou와 α,β-CROWN 같은 도구는 엔지니어가 심층 신경망의 속성을 검증할 수 있게 한다. 네트워크를 조각별 선형 제약의 집합으로 표현함으로써, 안전하지 않은 출력으로 이어질 수 있는 어떤 입력이 존재하는지를 판정할 수 있다.25
"안전 속성"은 다음과 같이 정의될 수 있다:
"저시정" 범위 내의 모든 입력 x에 대해, 출력 y(제동 명령)는 결코 k보다 작아서는 안 된다.
Marabou와 같은 SMT 솔버가 "반례"를 반환하면, AI를 실패하게 만들 구체적이고 종종 지각하기 어려운 섭동을 식별한 것이다. 이를 통해 Veriprajna는 학습 단계에서 모델을 "강화"할 수 있으며, 이 과정을 "검증 인식 학습"이라 한다.28
검증 가능성을 위한 가지치기
형식 검증의 주요 과제는 "차원의 저주"이다. 대규모 네트워크는 현재 솔버가 철저히 분석하기에 너무 복잡하다. Veriprajna는 "뉴런 가지치기"를 통해 이를 해결한다. 모델의 정확도에 기여하지 않는 중복 뉴런과 비선형성을 제거함으로써, 성능을 희생하지 않으면서 수학적으로 검증하기 더 쉬운 "가지치기된 모델"을 산출한다.29
| 검증 기법 | 방법론 | 이점 |
|---|---|---|
| 경계 조임 | 뉴런 활성화 범위의 기호적 분석 | SMT 솔버의 탐색 공간을 축소한다.25 |
| 도달가능성 분석 | 입력 집합에 대한 모든 도달 가능 출력의 집합을 계산 | AI가 "안전 폴리토프" 내에 머물 것을 보장한다.28 |
| 조각별 선형 근사 | 복잡한 활성화를 ReLU 기반 세그먼트로 대체 | 건전하고 완전한 검증 증명을 가능하게 한다.27 |
| 형식 안전 필터 | 검증된 기준선에 대한 AI 명령의 런타임 모니터링 | 주 AI가 비합리적으로 행동할 경우 "안전 복구"를 제공한다.31 |
규제 지평: SOTIF와 ISO/PAS 8800
엔터프라이즈에게 신흥 국제 표준 준수는 더 이상 선택이 아니다. 지형은 "자발적 자기평가"에서 계층화된 안전 프레임워크에 대한 의무적 준수로 이동했다.5
ISO 26262 vs. ISO 21448 (SOTIF)
ISO 26262가 "기능 안전"(예: 센서 고장이나 칩 단락)을 다루지만, AI의 고유한 한계를 설명할 수는 없다.34 이 공백은 "의도된 기능의 안전(SOTIF)" 표준인 ISO 21448로 채워진다. SOTIF는 시스템이 프로그래밍된 대로 정확히 작동하지만 "미지/불안전" 환경을 만날 때 발생하는 위험을 다루도록 특별히 설계되었다.34
Veriprajna 참여의 목표는 고객 AI 시스템의 "기지/안전" 사분면을 최대화하는 것이다. 이는 다음을 포함한다:
- 위험 및 리스크 분석(HARA): 폭우 속 센서 오해석과 같은 비고장 위험을 식별.36
- 유발 조건 식별: 인지 오류로 이어지는 환경 상태를 체계적으로 매핑.36
- V&V(검증 및 확인): 공공 도로에서 시험하기에 너무 위험한 엣지 케이스를 "주입"하기 위해 고정밀 시뮬레이션을 사용.36
ISO/PAS 8800: AI 통합의 미래
2024년 말 현재, ISO/PAS 8800은 "도로 차량 AI의 기능 안전"을 위한 주요 표준이 되었다.37 이는 "데이터 획득"부터 "배포 후 모니터링"까지 AI 수명주기 관리를 위한 최초의 글로벌 가이드라인을 제공한다.33 Veriprajna는 고객의 아키텍처가 EU AI Act와 NIST AI Risk Management Framework와 같은 글로벌 AI 거버넌스 표준의 증가하는 엄격성에 대해 준수할 뿐 아니라 "미래 대비"되도록 보장한다.33
전략적 전진 경로: Veriprajna의 딥 AI 사명
"래퍼" 문화에서 "딥 AI" 문화로의 전환은 확률적 희망에서 결정론적 보증으로의 여정이다. $8.5 million Uber 합의, Cruise 운행 중단, 40건 이상의 Tesla 조사는 AI를 포기할 이유가 아니라, 올바르게 엔지니어링할 이유이다.
Veriprajna의 컨설팅 모델은 본 보고서에서 식별된 구체적 실패 모드를 다루는 세 기둥 위에 구축된다:
- 인지 회복탄력성: 클라이언트를 카메라별 2D 인지에서 Transformer 기반 BEV 점유 네트워크로 이동시켜 객체 영속성과 추적 안정성을 보장.16
- 검증된 의사결정: SMT 기반 형식 검증을 구현하여 AI 구동 제어 아키텍처가 핵심 안전 속성을 결코 위반하지 않음을 증명.25
- 사회기술적 강화: 시민 소요와 다중 에이전트 교착의 현실을 관리하기 위한 정교한 "탈출 모드"와 V2X 통신 프레임워크 개발.18
단일 데이터 침해의 글로벌 비용이 $4.44 million에 달하고 자율 사망의 비용이 법적·운영적 손해로 수천만 달러에 진입하는 상황에서, "값싼" 래퍼는 엔터프라이즈가 저지를 수 있는 가장 비싼 실수가 된다.14 Veriprajna는 실험실에서만 작동하는 것이 아니라 세계에서 견디는 AI를 구축하는 데 필요한 딥 엔지니어링 전문성을 제공한다.
현대 엔터프라이즈의 선택은 분명하다: 확률적 블랙박스를 계속 래핑하고 불가피한 여파를 관리하거나, Veriprajna와 파트너십하여 검증 가능한 고보증 자율성의 미래를 설계하는 것이다. 확률적 AI의 시대는 끝나고 있다; 딥 AI 엔지니어링의 시대가 시작되었다.
인용 문헌
- Cruise Admits To Submitting A False Report To Influence A Federal Investigation And Agrees To Pay $500000 - Department of Justice, 2026년 2월 9일 접속, https://www.justice.gov/usao-ndca/pr/cruise-admits-submitting-false-report-influence-federal-investigation-and-agrees-pay
- NHTSA Opens Probe into 2.9M Teslas Over FSD Violations - Autobody News, 2026년 2월 9일 접속, https://www.autobodynews.com/news/nhtsa-opens-probe-into-2-9m-teslas-over-fsd-violations
- HWY18MH010.aspx - NTSB, 2026년 2월 9일 접속, https://www.ntsb.gov/investigations/Pages/HWY18MH010.aspx
- NTSB Shares Investigation Findings and Recommendations Regarding March 2018 Uber ATG Fatality | Eckert Seamans, 2026년 2월 9일 접속, https://www.eckertseamans.com/legal-updates/ntsb-shares-investigation-findings-and-recommendations-regarding-march-2018-uber-atg-fatality
- H-19-047 - Accident Data - NTSB, 2026년 2월 9일 접속, https://data.ntsb.gov/carol-main-public/sr-details/H-19-047
- NTSB releases preliminary report on fatal Uber self-driving car crash - Metro Magazine, 2026년 2월 9일 접속, https://www.metro-magazine.com/news/ntsb-releases-preliminary-report-on-fatal-uber-self-driving-car-crash
- Death of Elaine Herzberg - Wikipedia, 2026년 2월 9일 접속, https://en.wikipedia.org/wiki/Death_of_Elaine_Herzberg
- New Details Emerge Regarding Uber Self-Driving Vehicle Accident in Tempe, Arizona, 2026년 2월 9일 접속, https://schwedlawfirm.com/blog/new-details-emerge-regarding-uber-self-driving-vehicle-accident/
- A Root Cause Analysis of a Self-Driving Car Dragging a Pedestrian, 2026년 2월 9일 접속, https://www.computer.org/csdl/magazine/co/2024/11/10720344/215PD0vqgTe
- Notes on Cruise's pedestrian accident - Dan Luu, 2026년 2월 9일 접속, https://danluu.com/cruise-report/
- Lessons from the Cruise Robotaxi Pedestrian Dragging Mishap, 2026년 2월 9일 접속, http://users.ece.cmu.edu/~koopman/pubs/Koopman2024_CruiseMishap_IEEEReliabilityMagazine.pdf
- Office of Defects Investigation (ODI) Resume - nhtsa, 2026년 2월 9일 접속, https://static.nhtsa.gov/odi/inv/2025/INOA-PE25012-19171.pdf
- US regulators launch investigation into self-driving Teslas after series of crashes, 2026년 2월 9일 접속, https://www.theguardian.com/technology/2025/oct/09/tesla-cars-self-driving-us-regulators-investigation
- Tesla FSD Safety Issues: NHTSA Probes & AI Driving Future (Part 6) - PRIZ Guru, 2026년 2월 9일 접속, https://www.priz.guru/tesla-fsd-safety-issues-nhtsa-probes-ai-driving-future-part-6/
- AI & Robotics | Tesla, 2026년 2월 9일 접속, https://www.tesla.com/AI
- A Survey on Occupancy Perception for Autonomous Driving: The Information Fusion Perspective - arXiv, 2026년 2월 9일 접속, https://arxiv.org/html/2405.05173v2
- New Study: Waymo is reducing serious crashes and making streets safer for those most at risk, 2026년 2월 9일 접속, https://waymo.com/blog/2025/05/waymo-making-streets-safer-for-vru
- On Waymo's Traffic Jams - Stanford Center for Internet and Society, 2026년 2월 9일 접속, https://cyberlaw.stanford.edu/blog/2025/12/on-waymos-traffic-jams/
- Self-driving cars may create more traffic congestion than they solve, expert says - KJZZ, 2026년 2월 9일 접속, https://www.kjzz.org/the-show/2026-01-07/self-driving-cars-may-create-more-traffic-congestion-than-they-solve-expert-says
- A Systematic Literature Review on Vehicular Collaborative Perception – A Computer Vision Perspective - arXiv, 2026년 2월 9일 접속, https://arxiv.org/html/2504.04631v2
- When Robotaxis Get Attacked: Do Waymo Cars Need a 'Danger Escape Mode'?, 2026년 2월 9일 접속, https://aragonresearch.com/robotaxis-attack-waymo-cars-danger-escape-mode/
- MIC-BEV: Multi-Infrastructure Camera Bird's-Eye-View Transformer with Relation-Aware Fusion for 3D Object Detection - arXiv, 2026년 2월 9일 접속, https://arxiv.org/html/2510.24688v1
- [AV Vol.3] BEVFusion: Unifying Vision in Autonomous Driving Systems - Medium, 2026년 2월 9일 접속, https://medium.com/demistify/av-vol-3-bevfusion-unifying-vision-in-autonomous-driving-systems-b2190f877c9b
- A Transformer-based Temporal Feature Fusion Approach for Autonomous Driving BEV Perception | Request PDF - ResearchGate, 2026년 2월 9일 접속, https://www.researchgate.net/publication/395804054_A_Transformer-based_Temporal_Feature_Fusion_Approach_for_Autonomous_Driving_BEV_Perception
- The Marabou Framework for Verification and Analysis of Deep Neural Networks - Stanford Center for AI Safety, 2026년 2월 9일 접속, https://aisafety.stanford.edu/marabou/MarabouCAV2019.pdf
- Marabou 2.0: A Versatile Formal Analyzer of Neural Networks - arXiv, 2026년 2월 9일 접속, https://arxiv.org/html/2401.14461v1
- Marabou 2.0: A Versatile Formal Analyzer of Neural Networks - Stanford CS Theory, 2026년 2월 9일 접속, https://theory.stanford.edu/~barrett/pubs/WIZ+24.pdf
- Creating a Formally Verified Neural Network for Autonomous Navigation: An Experience Report - CSE CGI Server, 2026년 2월 9일 접속, https://cgi.cse.unsw.edu.au/~eptcs/paper.cgi?FMAS2024.12.pdf
- Verification of Neural Networks for Safety and Security-critical Domains - CEUR-WS.org, 2026년 2월 9일 접속, https://ceur-ws.org/Vol-3345/paper10_RiCeRCa3.pdf
- Formal Verification of Neural Networks for Safety-Critical Tasks in Deep Reinforcement Learning, 2026년 2월 9일 접속, https://proceedings.mlr.press/v161/corsi21a/corsi21a.pdf
- Formal Methods for Trustworthy AI-based Autonomous Systems - NII Shonan Meeting, 2026년 2월 9일 접속, https://shonan.nii.ac.jp/docs/No.178.pdf
- Formal Verification of Neural Networks-Based Control Architecture for Safety-Critical Autonomous Systems - Frontiers, 2026년 2월 9일 접속, https://www.frontiersin.org/research-topics/74336/formal-verification-of-neural-networks-based-control-architecture-for-safety-critical-autonomous-systems
- Implementing Responsible AI for Automotive Vehicle Safety - LHP Engineering Solutions, 2026년 2월 9일 접속, https://www.lhpes.com/blog/implementing-responsible-ai-for-automotive-vehicle-safety
- Functional Safety vs. SOTIF: What Is the Difference and Where Do They Overlap? - MES, 2026년 2월 9일 접속, https://model-engineers.com/en/blog/functional-safety-vs-sotif-differences-overlaps/
- The Necessity of a Holistic Safety Evaluation Framework for AI-Based Automation Features, 2026년 2월 9일 접속, https://arxiv.org/html/2602.05157v1
- What is SOTIF? (ISO 21448) - Visure Solutions, 2026년 2월 9일 접속, https://visuresolutions.com/automotive/iso-21448/
- Safety-Related Systems in Road Vehicles with Artificial Intelligence Are Addressed in ISO/PAS 8800:2024 | UL Solutions, 2026년 2월 9일 접속, https://www.ul.com/sis/blog/safety-related-systems-road-vehicles-artificial-intelligence-are-addressed-isopas-88002024
- ISO 26262, SOTIF and simulation | Applied Intuition, 2026년 2월 9일 접속, https://www.appliedintuition.com/blog/iso26262-sotif-simulation
- Introducing ISO/PAS 8800 – Functional Safety for AI in Road Vehicles | SGS Georgia, 2026년 2월 9일 접속, https://www.sgs.com/en-ge/news/2025/04/safeguards-04625-introducing-iso-pas-8800-functional-safety-for-ai-in-road-vehicles
- NIST vs ISO - Compare AI Frameworks - ModelOp, 2026년 2월 9일 접속, https://www.modelop.com/ai-governance/ai-regulations-standards/nist-vs-iso
- AI Safety vs AI Security in LLM Applications: What Teams Must Know - Promptfoo, 2026년 2월 9일 접속, https://www.promptfoo.dev/blog/ai-safety-vs-security/
시각적이고 인터랙티브한 경험을 원하시나요?
이 백서의 핵심 결과, 통계, 아키텍처를 탐색 가능한 섹션과 데이터 시각화가 포함된 인터랙티브 형식으로 살펴보세요.
자주 묻는 질문
기술적 관점에서 Uber ATG 자율주행 차량 사망 사고의 원인은 무엇인가?
Uber ATG 시스템은 충돌 5.6초 전, 378 feet 거리에서 보행자를 처음 탐지했으나 분류 진동을 겪으며 보행자를 미지 객체, 차량, 자전거로 반복 재분류했다. 각 재분류는 예측 궤적을 리셋했고, 시스템은 충돌 1.3초 전에야 긴급 제동이 필요하다고 판단했다. 또한 Uber는 Volvo XC90의 공장 충돌 회피 및 AEB 시스템을 비활성화했다.
SMT 솔버는 신경망 안전 속성을 어떻게 형식 검증하는가?
Marabou와 같은 SMT 솔버는 신경망을 조각별 선형 제약으로 표현하고, 안전하지 않은 출력을 생성할 수 있는 입력이 존재하는지를 판정한다. 예를 들어 안전 속성은 저시정 범위 내의 모든 입력에 대해 제동 명령이 최소 임계값을 초과해야 한다고 요구할 수 있다. 솔버가 반례를 찾으면 엔지니어는 검증 인식 학습과 뉴런 가지치기를 통해 모델을 강화할 수 있다.
BEV 점유 네트워크란 무엇이며 자율주행 차량 실패를 어떻게 방지하는가?
조감도(BEV) 점유 네트워크는 레이블이 붙은 객체를 추적하는 대신 3D 볼륨의 모든 복셀에 대한 점유 확률을 예측한다. 이는 시스템이 객체를 분류할 수 없어도 객체 영속성을 보장하여 Uber ATG의 분류 전환을 방지한다. 2D 맵이 놓치는 수직 구조를 포착하며, BEVFormer 아키텍처는 시간적 자기주의를 사용해 가림 동안 시공간 일관성을 유지한다.
확신을 가지고 AI를 구축하세요.
차세대 엔터프라이즈 AI 구축에 깊은 경험을 갖춘 팀과 협업하세요. 신뢰할 수 있는 AI 전략을 설계하고 구축하며 배포할 수 있도록 지원해 드리겠습니다.
Veriprajna 딥테크 컨설팅 은(는) 헬스케어, 금융, 규제 분야를 위한 안전 필수 AI 시스템 구축을 전문으로 합니다. 당사의 아키텍처는 확립된 프로토콜에 따라 검증되며 포괄적인 규정 준수 문서를 갖추고 있습니다.