추정된 개선에서 릴리스 경계까지 핫픽스 추적
여기에 표시된 모든 플릿, 매니페스트, 버전 라벨 및 기록은 합성 데이터입니다. 이러한 실제 캡처 화면은 캐시된 모델 보조 프로파일, 200회 Monte Carlo 반복 및 시드 1234를 사용합니다. 모델링된 권고안은 실행된 펌웨어 릴리스나 현장 안전성에 대한 독립적인 증거가 아닙니다.
실행 사례: 훨씬 낮은 추정치, 동일한 NO-GO
88,000개 엔드포인트로 생성된 Plano Water 모집단에서 시작합니다. 스냅샷은 86,078개에 대해 점수를 산정하고 원격 측정이 불충분한 1,922개를 제외합니다. 동일한 모집단 및 정책에 대해 초기 배터리 최적화 매니페스트와 돌입 전류 제한 핫픽스를 비교하여, 개선 사항과 잔여 릴리스 경계를 별도로 점검할 수 있도록 합니다.
1. 릴리스 라벨을 신뢰하기 전에 동작 추정치 검토
초기 캐시된 프로파일은 모뎀 기준 전류 120 mA와 플래시 쓰기 중 추가 전류 100 mA를 추정합니다. 리셋 후 복구 확률은 0.02입니다. 핫픽스 프로파일은 이러한 입력을 기준 100 mA, 추가 전류 10 mA, 복구 확률 0.96으로 변경합니다. 이는 변경 로그 기반 추정치이며 하드웨어에서 측정된 전류나 펌웨어 바이너리 분석 결과가 아닙니다.
| 프로파일 입력 | 초기 매니페스트 | 핫픽스 매니페스트 |
|---|---|---|
| 기준 모뎀 전류 | 120 mA | 100 mA |
| 추가 플래시 쓰기 전류 | 100 mA | 10 mA |
| 리셋 후 재등록 확률 | 0.02 | 0.96 |
| 쓰기 증폭 | 0.018 | 0.004 |
| 프로파일 신뢰도 토큰 | High | High |
생성된 모집단의 배터리 충전량 중앙값은 69.0%이고 연수 중앙값은 4.4년입니다. 가정된 전압 강하 모델에서 단자 전압이 3.30 V 아래로 떨어지면 플래시 쓰기가 리셋을 유발할 수 있으며, 무선 통신 복구 실패 및 플래시 손상이 모델링된 장애의 원인이 됩니다. 높은 신뢰도 토큰이 이러한 입력에 대한 보정된 확실성을 입증하지는 않습니다.
2. 상한 구간을 선언된 경계와 비교
초기 후보는 63,883건의 장애(점수 산정 엔드포인트의 74.22%)를 예측합니다. 핫픽스는 예측치를 2,449건(2.85%)으로 낮춥니다. 이는 대폭적인 모델링 개선이지만 게이트는 상한 구간을 먼저 확인합니다. 3,531을 86,078로 나누면 약 4.10%로, 구성된 3.0% 하드 블록보다 여전히 높습니다. 따라서 평균이 3.0% 미만임에도 불구하고 NO-GO를 반환합니다.
핫픽스의 90% 모델링 카운트 구간은 1,536부터 3,531까지입니다. 이는 보장된 현장 범위가 아니라 이러한 입력 조건에서 시뮬레이션된 결과의 분포를 설명합니다. 실무 검토의 차이는 “이전 후보보다 나은지”와 “선언된 릴리스 경계 내부인지”에 있으며, 이 예시는 전자만 충족합니다.
3. 동작 프로파일 유지 및 모집단 변경
동일한 핫픽스 동작 추정치가 생성된 Hill Country Electric Co-op 모집단에서는 GO를 생성합니다. Plano의 69.0%, 4.4년, 13.4%와 비교하여, 이 모집단의 배터리 충전량 중앙값은 83.5%, 연수 중앙값은 2.8년, 약한 무선 신호 비중은 2.3%입니다. 이 비교는 펌웨어 추정치가 점수 산정 대상 모집단의 상태와 분리될 수 없는 이유를 보여줍니다.
| 합성 케이스 | 점수 산정 / 제외 | 평균 모델링 장애 수 | 90% 카운트 구간 | 상한 비율 | 평결 |
|---|---|---|---|---|---|
| Plano, 초기 매니페스트 | 86,078 / 1,922 | 63,883 (74.22%) | 59,894 ~ 67,395 | 78.30% | NO-GO |
| Plano, 핫픽스 | 86,078 / 1,922 | 2,449 (2.85%) | 1,536 ~ 3,531 | 4.10% | NO-GO |
| 협동조합(Co-op), 동일 핫픽스 프로파일 | 118,222 / 1,778 | 24 (0.02%) | 17 ~ 33 | 0.03% | 점수 산정 엔드포인트 대상 GO |
| 협동조합(Co-op), 축소 매니페스트 | 118,222 / 1,778 | 54 (0.05%) | 39 ~ 75 | 0.06% | STAGED-CANARY |
GO 판정은 제외된 1,778개 협동조합 엔드포인트를 포괄하지 않으며, OTA 작업을 승인하거나 동일한 이미지가 다른 벤더의 하드웨어와 호환됨을 입증하지도 않습니다. 우리는 여러 제조업체에 걸쳐 이미지를 배포하는 것이 아니라, 생성된 상태 분포 전반에서 추정된 쓰기 동작을 비교하는 것입니다.
4. 낮은 추정치가 적절한 펌웨어 증거를 대신할 수는 없습니다
협동조합 모집단에 대한 축소 매니페스트 케이스는 39~75 카운트 구간과 0.06% 상한 비율로 단 54건의 장애만을 예측합니다. 하지만 프로파일 신뢰도가 낮기 때문에 두 번째 정책 분기가 GO를 차단하고 STAGED-CANARY를 권고합니다. 이는 핫픽스의 0.96 및 0.004 대신 복구 확률 0.50, 쓰기 증폭 0.008을 적용한 별도의 프로파일입니다.
non-GO 권고안은 500개 엔드포인트의 최저 모델링 위험 코호트, 72시간 대기 및 배포 확대 전 신규 관측 원격 측정 데이터를 제안하며, 구성된 관측 장애율 조건은 0.1% 미만입니다. 앱은 해당 카나리를 실행하지 않습니다. 또한 건강한 선별 코호트가 존재한다고 해서 성능이 저하되었거나 제외된 모집단의 안전성이 입증되는 것은 아닙니다.
5. 제외 사항과 결정 근거 보존
아래의 초기 케이스 HTML 기록은 권고안이 합성 스냅샷, 코호트 분류, 제외 항목 및 자문 메모를 어떻게 유지하는지 보여줍니다. 원격 측정이 누락된 1,922개 엔드포인트는 예측 분모 외부에 유지되며 수동 검토가 권장됩니다. 기록을 내보낸다고 해서 검토가 완료되거나 이들이 정상 상태로 묵인 처리되는 것은 아닙니다.
내보내기에는 프로파일 입력, 예측 및 구간, 정책 임계값, 시드 및 타임스탬프도 보존됩니다. 식별자는 잘린 SHA-256 콘텐츠 해시이며, 운영자 서명은 대기 중이고 펌웨어 해시는 합성 플레이스홀더입니다. 이러한 필드는 생성된 결정을 점검 가능하게 만들지만 서명된 승인, 규정 준수 인증서 또는 불변의 감사 보관소를 의미하지는 않습니다.
검토가 필요한 제어 항목을 숨기지 않고 벤치마크 읽기
완료된 화면은 고정된 120개 시나리오 합성 평가의 3가지 측정 항목과 2가지 현재 프로파일 회귀 제어 항목을 결합합니다. 각 평가 시나리오는 20,000개의 완전 관측 생성 엔드포인트와 80회의 시뮬레이터 반복, 시드 2026을 사용합니다. 생성된 정답(ground truth)은 독립적인 유틸리티 데이터 세트가 아니라 새로운 노이즈가 추가된 동일한 가정 메커니즘에서 도출됩니다.
| 검사 항목 | 관측된 결과 | 범위 및 해석 |
|---|---|---|
| 구간 커버리지 | 86.7%, PASS | 명목 90% 구간; 구성된 통과 하한 기준은 80%입니다. 명목 목표는 충족되지 않았습니다. |
| 안전하지 않은 롤아웃 재현율 | 74/74 = 1.000, PASS | 위험으로 라벨링된 74개 시나리오가 모두 이 고정 실행에서 차단되었습니다. 구성된 하한 기준은 0.95입니다. |
| 릴리스 게이트 정밀도 | 74/87 = 0.851, PASS | 차단된 87개 시나리오 중 74개가 위험으로 라벨링되었습니다. 구성된 하한 기준은 0.80입니다. |
| 초기 Plano 회귀 | NO-GO, PASS | 현재 초기 프로파일은 구성된 NO-GO 목표를 충족합니다. |
| Plano 핫픽스 제어 | NO-GO, REVIEW | 현재 핫픽스는 구성된 GO 목표를 충족하지 못합니다. |
위험은 1.0%를 초과하는 생성 장애율로 라벨링되며, NO-GO와 STAGED-CANARY 모두 차단된 것으로 간주됩니다. 평가는 이 고정 합성 실행 내에서 진양성 74건, 위양성 13건, 진음성 33건, 위음성 0건을 기록합니다. 4개의 통과 검사와 1개의 검토 필요 항목은 입력에 민감한 불일치를 드러내며, 완벽한 정확도, 독립적 검증 또는 보편적 방지를 확립하지는 않습니다.
