합성 기만의 시대에 신뢰의 아키텍처: Arup 딥페이크 침해 사건에서 얻는 교훈과 딥 AI 주권으로의 전환

현대 기업은 현재 기업 거버넌스의 확립된 프로토콜을 겨냥한 생성형 인공지능의 급속한 무기화로 특징지어지는 근본적인 진정성 위기를 헤쳐 나가고 있습니다. 2024년 2월, 다국적 엔지니어링 기업 Arup은 홍콩 사무소가 현재까지 기록된 가장 정교한 딥페이크 기반 작전 중 하나를 통해 $25.6 million(HK 200 million)을 사취당하며 이 위기의 초점이 되었습니다.1 이 사건은 단순한 전통적 사이버보안의 실패가 아니라, 인간 심리와 시각·청각 단서에 부여된 본질적 신뢰를 악용하는 방법론인 "기술 강화 소셜 엔지니어링"의 결정적 개념 증명이었습니다.4 고충실도 AI를 이용해 최고재무책임자(CFO)와 경영진 전체를 실시간 화상회의에서 사칭함으로써, 공격자는 다중 인증, 내부 재무 통제, 그리고 인간의 직관을 성공적으로 우회했습니다.1

Arup 사기 사건은 전 세계 조직에 전략적 변곡점으로 작용합니다. 이는 비즈니스 프로세스를 공개 제3자 AI API에 연결하는 얇은 소프트웨어 인터페이스인 "LLM 래퍼"에 대한 현재의 의존이 현대 기업의 보안과 주권 요구에 근본적으로 부적절함을 보여줍니다.7 초현실적 합성 미디어를 생성하는 비용과 기술적 장벽이 계속 급락함에 따라, 전통적인 "경계 방어" 모델은 붕괴하고 있습니다.1 본 보고서는 Arup 침해의 포렌식 세부사항, 실시간 딥페이크의 기술적 진화, 그리고 딥 AI로의 전환에 대한 아키텍처적 당위—즉 조직 자체의 보안 인프라 내에 주권적이고 비공개적이며 뉴로-심볼릭한 AI 시스템을 배포하는 것—을 분석합니다.7

포렌식 재구성: $25 Million 사기의 해부

Arup을 겨냥한 작전은 전통적 네트워크 침입보다 정찰과 심리적 조작을 우선시한 다단계 캠페인이었습니다.1 조사에 따르면 사건 내내 Arup의 디지털 인프라는 온전히 유지되었으며, 악성코드, 자격 증명 탈취, 또는 무단 데이터베이스 접근의 증거는 없었습니다.4 대신 공격자는 대상 직원이 진실과 합리적으로 구분할 수 없는 현실을 제조함으로써 회사의 운영 논리를 훼손했습니다.4

1단계: 정찰과 자료 수집

공격에 사용된 딥페이크의 효과는 고품질 학습 데이터에 기반했습니다.2 공격자는 주로 YouTube, 컨퍼런스 발표, 기업 회의에서 Arup 임원의 공개적으로 이용 가능한 영상·음성 자료를 수개월에 걸쳐 수집했습니다.2 이 자료로 가해자는 임원의 외모뿐 아니라 특정 말투, 억양, 고유한 미세 표정까지 복제할 수 있는 생성적 적대 신경망(GAN)과 신경 음성 합성 모델을 학습시킬 수 있었습니다.1 이 수준의 준비는 포렌식 전문가가 "고충실도 합성 트윈"이라 부르는 것의 생성을 가능하게 했으며, 이는 업무 환경에서 동료의 검증을 견디도록 설계되었습니다.1

2단계: 스피어 피싱 미끼와 서사 구축

침해는 2024년 1월, 런던 기반 CFO로부터 온 것처럼 보이는 스피어 피싱 이메일로 시작되었습니다.1 이메일은 "기밀 거래"에 대한 지원을 요청했으며, 이는 비즈니스 이메일 침해(BEC) 사기에서 흔한 서사이지만 여기서는 전문적 어조와 정확한 내부 맥락으로 보강되었습니다.2 홍콩 재무 부서의 직원은 처음에 이메일에 회의적이었지만, 공격자는 이 의심을 무력화하기 위해 이차적이고 더 강력한 사회적 증명의 층을 활용했습니다.1

사건 단계 공격자의 조치 기술적 / 심리적 메커니즘
초기 접촉 CFO로부터의 "비밀" 이체에 관한 위조 이메일 1 권위 활용과 긴급성 2
고조 다자 화상회의 초대 1 사회적 증명과 인지된 투명성 4
검증 여러 딥페이크된 고위 임원의 등장 2 회의감을 압도하기 위한 위계의 시각화 1
실행 특정 계좌로 자금을 이체하라는 지시 1 "실시간" 환경에서의 직접적 위계 명령 3
발견 영국 본사와의 거래 후 후속 확인 1 표준 재무 감사 추적 2

3단계: 합성 화상회의

Arup 침해의 결정적 순간은 화상 통화였습니다.1 단일 음성 클론이나 저해상도 영상 클립에 의존했던 이전 딥페이크 사기와 달리, 이 공격은 여러 AI 생성 참가자가 있는 실시간·상호작용 환경을 특징으로 했습니다.2 직원은 친숙한 얼굴들—동료와 상급자들—이 정당한 논의에 참여하는 것처럼 보이는 회의에 접속했습니다.1 이 환경적 맥락은 "비대칭 전쟁"의 한 형태로, 공격자가 조직 구조를 아는 정도가 직원이 기술의 한계를 아는 정도보다 더 큽니다.4

통화 중 딥페이크된 CFO는 직원에게 총액 약 $25.6 million에 이르는 15건의 개별 이체를 실행하도록 지시했습니다.1 이 자금은 홍콩에 소재한 다섯 개의 서로 다른 은행 계좌로 분산되었습니다.1 직원은 회의의 시각·청각 증거에 설득되어 따랐습니다.1 사기는 직원이 영국의 실제 CFO 사무소에 후속 확인을 했을 때야 비로소 발견되었으며, 그제야 회사는 그러한 회의가 열린 적도, 자금이 승인된 적도 없음을 깨달았습니다.1

실시간 생성형 사기의 기술적 진화

Arup 사건은 연구 실험실에서 정교한 사이버범죄 조직의 손으로 넘어온 첨단 AI 방법론의 수렴으로 가능해졌습니다.1 위협을 이해하려면 사용된 두 가지 주요 모델 유형인 생성적 적대 신경망(GAN)과 확산 모델에 대한 분석이 필요합니다.1

영상 합성에서의 생성적 적대 신경망(GAN)

GAN은 사실적인 얼굴과 음성을 생성하는 능력에서 획기적 돌파구를 나타냅니다.1 GAN은 두 개의 경쟁하는 신경망, 즉 generator(생성기)와 discriminator(판별기)로 구성됩니다.1 생성기는 실제 이미지나 영상을 참조점으로 삼아 콘텐츠를 만들고, 판별기는 콘텐츠가 AI로 생성되었는지 탐지하려 합니다.1 수백만 회의 반복을 통해 이 모델들은 서로를 "학습"시키며, 생성기는 판별기—그리고 확장하여 인간의 눈—이 현실과 구분할 수 없는 이미지를 만드는 데 점점 능숙해집니다.1 Arup 사례에서 GAN은 공격자의 웹캠 피드를 가로채 CFO의 초현실적 마스크로 프레임 단위로 교체하는 실시간 "페이스 스와핑"을 가능하게 했습니다.11

확산 모델과 시간적 일관성

확산 모델은 이미지에 "노이즈"(무작위 데이터)를 추가한 뒤, AI가 그 과정을 역으로 수행해 노이즈로부터 선명한 이미지를 재구성하도록 학습시키는 방식으로 작동합니다.1 이 접근은 GAN이 때로 어려움을 겪는 고해상도의 미묘한 질감과 조명 생성에 뛰어납니다.1 영상에 적용될 때 확산 모델은 "시간적 일관성"을 보장합니다—즉 AI 생성 얼굴이 움직임 중에 깜빡이거나 왜곡되지 않습니다.11 이 일관성은 실시간 상호작용 중 현실의 환상을 유지하는 데 결정적이며, 인간 지각은 하위 딥페이크 기술과 관련된 미묘한 "글리치"에 매우 민감하기 때문입니다.11

인젝션 공격: 물리 계층의 우회

Arup 사건에서 핵심적인 기술적 세부사항은 단순한 "프레젠테이션 공격"이 아니라 "비디오 인젝션"의 사용입니다.15

  1. 프레젠테이션 공격: 공격자가 실제 웹캠 앞에 고해상도 화면(태블릿 또는 모니터)을 듭니다.15 이들은 깊이, 픽셀 수준 반사, 물리적 테두리의 존재를 분석하는 라이브니스 검사를 통해 종종 탐지됩니다.15
  2. 인젝션 공격: 이 방법은 가상 카메라 소프트웨어 또는 중간자(MITM) 전술을 이용해 합성 비디오 패킷을 회의 소프트웨어의 데이터 스트림에 직접 주입합니다.10 애플리케이션(Zoom, Teams 등)은 이 디지털 스트림을 물리 하드웨어 장치에서 도착하는 것처럼 취급합니다.17
공격 유형 전달 방법 탐지 난이도
프레젠테이션 (2D/3D) 보통; 깊이/질감 이상이 종종 존재 18 중등; 깊이/질감 이상이 종종 존재 15
페이스 스와핑 (실시간) 라이브 웹캠 위의 GAN/확산 소프트웨어 12 높음; 시간적 분석 필요 11
비디오 인젝션 극단적; 시스템 수준 무결성 검사 필요 20 극심; 시스템 수준 무결성 검사 필요 17
신경 음성 클로닝 오디오 스트림을 합성 음성으로 교체 2 매우 높음; 생체 스펙트로그램 분석 필요 16

연구에 따르면 신원 확인 제공자를 겨냥한 인젝션 공격은 2023년에 255% 증가했고, "페이스 스왑" 공격은 704% 상승했습니다.24 이는 사이버범죄자가 쉽게 탐지되는 물리적 위조에서 벗어나 전통적 라이브니스 검사를 무력화하는 디지털 수준 조작으로 이동하고 있음을 시사합니다.21

왜 "LLM 래퍼" 패러다임이 엔터프라이즈에서 실패하는가

많은 조직이 생성형 AI를 서둘러 도입하면서 OpenAI의 GPT-4나 Anthropic의 Claude 같은 공개 API 위에 구축된 얇은 소프트웨어 계층인 "래퍼"에 의존해 왔습니다.7 저위험 작업에는 기능적이지만, 이 모델은 Arup 침해와 같은 사건을 더 쉽게 만드는 시스템적 취약성을 도입합니다.7 Veriprajna는 래퍼의 시대가 엔터프라이즈급 보안과 양립할 수 없는 세 가지 주요 이유를 주장합니다: 데이터 유출(egress), 맥락적 추론의 부재, 그리고 "비체화된 자문가" 문제입니다.7

공개 API의 보안 연극

래퍼 기반 배포에서 조직의 가장 민감한 데이터—재무 스프레드시트, 내부 메모, 임원 커뮤니케이션—는 제3자 클라우드에서 처리되기 위해 기업 경계를 떠나야 합니다.7 제공자가 데이터로 학습하지 않겠다고 약속하더라도, 외부 환경에 데이터가 존재한다는 사실 자체가 미국 CLOUD Act, 불투명한 하위 처리자 관계, 그리고 잠재적 모델 기반 유출에 대한 취약성을 만듭니다.9 더욱이 래퍼는 "프롬프트 인젝션"에 매우 취약하며, 사용자(또는 공격자)가 모델의 안전 가드레일을 무시하고 무단 행동을 수행하도록 속이는 입력을 조작할 수 있습니다.8

맥락과 신뢰성의 격차

LLM은 결정론적이지 않고 확률적입니다.8 이들은 기업 현실에 대한 근거 있는 이해가 아니라 학습 데이터의 통계적 상관관계에 기반해 가장 가능성 높은 "다음 토큰"을 예측합니다.8 이는 "신뢰성 격차"로 이어지며, AI 에이전트가 할인을 약속하거나, 수수료를 면제하거나, 회사에는 법적 구속력이 있지만 사실적으로는 틀린 방식으로 정책을 해석할 수 있습니다.8 고위험 환경에서 래퍼는 조직의 독점 데이터베이스라는 "그라운드 트루스"에 대해 자체 출력을 검증하는 본질적 능력이 없습니다.7

"비체화 자문가"와 활성 절벽

Arup과 같은 산업·엔지니어링 기업에서 "비체화 자문가" 한계는 특히 위험합니다.25 텍스트 기반 LLM 래퍼는 그럴듯하게 들리는 조언을 생성할 수 있지만, 물리적 또는 생물학적 안전을 검증할 통합 피드백 루프가 없습니다.25 의약화학이나 구조공학에서 공식이나 하중 지지 계산의 미미한 변화—"활성 절벽(activity cliff)"—은 결과에서 불균형적으로 큰 변화로 이어질 수 있습니다(예: 안전한 화합물에서 치사 독소로).25 의미적 거리에 따라 작동하고 물리 법칙에 따르지 않는 래퍼는 이러한 임계적 편차를 식별하는 데 악명 높게 취약합니다.25

딥 AI: 주권 지능을 위한 Veriprajna의 프레임워크

Veriprajna는 래퍼의 구축자가 아니라, 기업의 주권과 신뢰성을 회복하도록 설계된 아키텍처인 딥 AI 솔루션의 제공자로 자리매김합니다.7 이 프레임워크는 "서비스로서의 AI"에서 "인프라로서의 AI"로 전환합니다.7

기둥 I: 인프라 소유권과 프라이빗 엔터프라이즈 LLM

딥 AI의 기초는 조직 자체의 가상 사설 클라우드(VPC) 또는 온프레미스 Kubernetes 클러스터 내에 프라이빗 엔터프라이즈 LLM을 배포하는 것입니다.7 Veriprajna는 vLLM이나 TGI 같은 기술을 사용하는 완전한 추론 스택을 클라이언트가 통제하는 하드웨어에 직접 배포합니다.7 이는 "주권 지능"이 경계를 절대 떠나지 않도록 보장하며, 국제 데이터 이전 위험과 제3자 보존 정책에 대한 면역을 달성합니다.9

기둥 II: RBAC 인식 검색을 갖춘 프라이빗 RAG 2.0

딥 AI는 내부 보안과 네이티브로 통합된 검색 증강 생성(RAG)을 통해 회사를 위한 "의미적 두뇌"를 구축합니다.7 일반 RAG 시스템과 달리, Veriprajna의 아키텍처는 역할 기반 접근 제어(RBAC)를 인식합니다.7 직원이 SharePoint에서 특정 문서를 볼 권한이 없다면, AI 시스템은 그 질문에 답하기 위해 해당 문서를 검색하지 않습니다.7 이는 AI 인터페이스를 통한 내부 권한 상승과 데이터 유출을 방지합니다.7

기둥 III: 뉴로-심볼릭 "샌드위치" 아키텍처

신뢰성 격차를 메우기 위해 Veriprajna는 "뉴로-심볼릭 샌드위치"를 옹호합니다.8 이 설계는 창의적 신경망(LLM)을 결정론적·심볼릭 논리의 두 계층 사이에 감쌉니다.8

  • 하단 계층(입력 논리): 사용자 프롬프트를 전처리하여 모델에 도달하기 전에 입력을 정제하고 인젝션 공격을 방지합니다.8
  • 중간 계층(신경망): 언어 이해와 추론 능력을 제공합니다.8
  • 상단 계층(심볼릭 가드): 모델의 의도를 가로채 경직하고 사전 정의된 함수를 통해 실행합니다(예: SQL 데이터베이스 또는 ERP 조회).8

이는 AI 에이전트가 가격이나 승인 상태를 보고할 때 토큰 확률에 기반해 값을 예측하는 것이 아니라 데이터베이스에서 결정론적 값을 검색하도록 보장합니다.8

기능 공개 LLM 래퍼 Veriprajna 딥 AI 솔루션
데이터 레지던시 공유 퍼블릭 클라우드; 데이터 유출(egress) 7 클라이언트 VPC 내부 완전 상주 7
추론 모델 순수 확률적 8 뉴로-심볼릭(신경 + 결정론적) 8
보안 맥락 일반/공개 데이터 7 프라이빗 코퍼스; RBAC 인식 7
커스터마이징 프롬프트 엔지니어링만 7 전체 파인튜닝(LoRA/CPT) 7
취약성 프롬프트 인젝션에 취약 8 다층 논리 가드 8

새로운 다중 인증: 생체인식과 행동 지능

Arup 사례에서 시각적 "확인"의 실패는 디지털 상호작용에서 신원을 검증하는 새로운 패러다임을 필요로 합니다.4 Veriprajna의 접근은 현재 생성 모델이 실시간으로 위조하기가 현저히 더 어려운 멀티모달 신호를 통합합니다.23

생리학적 신호 검증

고급 딥페이크 탐지는 이제 얼굴 색의 "심박 유도" 변화 분석을 포함합니다.14 Intel의 FakeCatcher 같은 기술은 인간 눈에는 보이지 않는 이러한 미세 신호를 모니터링하여 참가자가 기능하는 심혈관계를 가진 살아있는 인간임을 검증합니다.23 합성 영상에서는 이러한 신호가 통상 부재하거나 시각적 움직임과 시간적으로 불일치합니다.11

행동 생체인식: "조용한" 수호자

얼굴은 교체되고 목소리는 복제될 수 있지만, 개인이 기술과 상호작용하는 신경생물학적 패턴은 고유하며 위조가 거의 불가능합니다.29

  • 키스트로크 역학: 타이핑의 속도, 리듬, 압력은 개인에게 고유한 인식 가능한 "케이던스"를 만듭니다.30
  • 마우스 및 터치스크린 행동: 마우스 움직임의 빈도와 유연성, 또는 모바일 기기에서의 특정 스와이프 속도와 압력은 봇이나 사칭자가 모방하기 어려운 행동 프로필을 구축합니다.29
  • 인지 행동: 행동 생체인식은 사용자가 강압이나 협박 하에 행동하는지 탐지할 수 있으며, 이는 종종 망설임이나 정상 내비게이션 패턴으로부터의 편차로 나타납니다.31

고위 임원에 대한 행동 기준선을 구축함으로써, 조직은 화상 통화 중 "지속적 인증"을 구현할 수 있습니다.31 통화상의 "CFO"가 이례적 거래를 요청하기 시작하는 동시에 타이핑이나 내비게이션 행동이 과거 프로필에서 벗어나면, 시스템은 수동 검토를 위해 상호작용을 자동으로 플래그할 수 있습니다.29

암호학적 출처와 콘텐츠 자격증명

단순히 위조물을 탐지하는 것을 넘어, 기업은 진본을 검증하는 쪽으로 전환해야 합니다.35 C2PA(콘텐츠 출처 및 진정성 연합, Coalition for Content Provenance and Authenticity) 표준은 영상 캡처 순간에 암호학적 메타데이터를 임베딩할 수 있게 합니다.23 이는 소스의 장치, 시간, 위치를 문서화하는 미디어의 "변조 증거" 이력을 만듭니다.35 Microsoft Teams나 Zoom 통화의 비디오 피드에 이러한 자격증명이 없다면, 서명되지 않은 소프트웨어 패키지와 같은 수준의 의심으로 취급할 수 있습니다.35

법적·규제적·거버넌스 함의

Arup의 재정적 손실은 빙산의 일각이며, 이 사건은 기업 책임과 리더십의 수탁자 의무에 광범위한 함의를 갖습니다.2

CIO와 CTO의 수탁자 의무

딥페이크 기반 사기의 여파로, CIO와 CTO는 점점 더 높은 주의 기준을 요구받습니다.38 기업 임원으로서 이들은 "위험 신호"를 식별하고 캘리포니아 소비자 개인정보보호법(CCPA)이나 EU AI Act가 요구하는 것과 같은 "합리적 보안 절차"를 구현할 수탁자 의무가 있습니다.38 딥페이크 인식 통제를 구현하지 못하면, 회사가 주주나 고객으로부터 과실로 제소될 경우 임원에게 개인적 책임이 따를 수 있습니다.38

"사칭자 규칙"과 손실의 배분

전신 이체 사기에 대한 사법 지침은 종종 "사칭자 규칙(Impostor Rule)"을 따르며, 이는 손실이 사기를 방지할 최선의 위치에 있던 당사자가 부담해야 한다고 규정합니다.41 Arup 사례에서 직원이 속았음에도, 고액 거래에 대한 다채널 검증을 구현하지 못한 회사의 실패가 주요 실패 지점으로 볼 수 있습니다.4 법원은 특정 위험에 대해 직원을 경고하지 않거나 필요한 기술 안전장치를 제공하지 못한 고용주를 점점 더 과실로 판단하고 있습니다.37

국제 표준 준수

이러한 위험을 완화하려면 조직은 생체인식 및 AI 보안에 대한 신흥 글로벌 표준에 운영을 정렬해야 합니다:

  • ISO/IEC 30107-3: 프레젠테이션 공격 탐지(PAD)의 국제 벤치마크.42 레벨 2 또는 3 인증은 실리콘 마스크와 AI 딥페이크 같은 고도 위조에 대한 시스템의 회복력을 입증합니다.15
  • NIST AI 위험 관리 프레임워크(RMF): AI 특화 위험을 식별하고 완화하기 위한 구조화된 4단계 프로세스—Govern, Map, Measure, Manage—를 제공합니다.39
  • CEN/TS 18099: "인젝션 공격" 탐지를 위한 최초의 전용 표준으로, 화상회의 스트림 보안에 결정적입니다.15

엔터프라이즈 회복탄력성을 위한 전략 로드맵(2025-2026)

Arup 사건은 인증의 한 형태로서 "눈과 귀"의 실패였습니다.4 재발을 방지하기 위해 Veriprajna는 사람, 프로세스, 그리고 진정성이라는 개념 자체를 방어하는 데 중심을 둔 다층 회복탄력성 전략을 권고합니다.4

1단계: "권한 부여된 회의주의" 문화 확립

조직은 "즉시 준수" 문화에서 "먼저 검증" 마인드로 전환해야 합니다.4 여기에는 고위 리더십에서 온 것처럼 보이는 요청이라도 의심스러운 요청에 이의를 제기하는 직원을 보상하는 것이 포함됩니다.4 교육은 정적 피싱 이메일을 넘어, 직원에게 기술을 탈신비화하기 위해 영상·음성 플랫폼에서의 실시간 시뮬레이션 딥페이크 공격까지 포함해야 합니다.4

2단계: 의무적 대역외 검증 구현

화상회의는 더 이상 금융 거래에서 신원 인증의 "황금 표준"이 될 수 없습니다.4 고위험 또는 고액 지시는 독립적인 대역외 확인을 요구해야 합니다:

  • 직접 통화: 사전 검증된 전화번호 또는 암호화 메시징 플랫폼(예: Signal)을 통한 검증.4
  • 사전 합의된 검증 코드: 인증 키를 공유하기 위해 이차적이고 비디지털 채널을 사용.4
  • 이중 승인: 원래 화상통화에 참여하지 않은 두 번째 승인자를 요구.4

3단계: 주권 딥 AI 인프라로 전환

기업은 퍼블릭 클라우드에서 데이터와 지능을 되찾아야 합니다.7 클라이언트 통제 VPC 내의 프라이빗 엔터프라이즈 LLM으로의 전환은 민감한 맥락이 안전하게 유지되도록 보장합니다.7 이는 단순한 보안 조치가 아니라, 클라이언트에게 명확히 귀속되는 맞춤형 모델 자산의 생성을 가능하게 하는 경쟁 우위이기도 합니다.7

4단계: 멀티모달 라이브니스 및 탐지 도구 배포

Zoom과 Microsoft Teams 같은 협업 도구에 엔터프라이즈급 딥페이크 탐지를 통합하십시오.10 이러한 도구는 비동기 입술 움직임, 불일치하는 조명, 또는 생리학적 신호의 부재와 같은 AI 조작의 징후에 대해 각 프레임과 오디오 패킷을 실시간으로 분석해야 합니다.12

결론: 신뢰의 새로운 개척지

2024년 2월의 Arup 사기 사건은 "비공식 내부 인증" 시대의 종말을 알리는 경종이었습니다.4 CFO의 얼굴과 음성이 $15와 45분의 노력으로 완벽하게 위조될 수 있을 때, 전통적 신뢰의 신호는 깨집니다.5 엔터프라이즈 회복탄력성의 미래는 생물학적·행동적·아키텍처적 방어의 층을 통해 "합성 트윈"과 살아있는 인간을 구별하는 능력에 달려 있을 것입니다.4

Veriprajna는 LLM 래퍼의 취약한 세계에서 벗어나 견고하고 주권적인 딥 AI의 세계로 전환할 것을 옹호합니다.7 인프라 소유권, 뉴로-심볼릭 신뢰성, 행동 지능을 결합함으로써, 조직은 생성형 사기의 고조되는 위협에 회복탄력적인 "신뢰의 아키텍처"를 구축할 수 있습니다.7 $25 million의 손실은 이 교훈을 위해 치른 높은 대가였지만, 차세대 엔터프라이즈 보안—진정성이 시각과 청각만이 아니라 물리와 논리로 검증되는 보안—의 청사진을 제공합니다.4

회복탄력성 구성 요소 실행 가능한 목표 원하는 결과
사람 행동 교육 및 시뮬레이션 4 "실시간" 소셜 엔지니어링에 대한 저항 4
프로세스 다채널 대역외 확인 4 단일 지점 실패의 무력화 4
데이터 프라이빗 VPC 기반 LLM 및 RAG 2.0 7 완전한 주권과 데이터 프라이버시 7
기술 실시간 라이브니스 및 생리학적 분석 18 GAN 및 인젝션 공격의 격퇴 17
거버넌스 NIST AI RMF 및 ISO 30107과의 정렬 43 규제 및 수탁자 위험의 감소 38

앞으로 몇 년 동안, 합성 세계에서 신원과 의도를 검증하는 능력은 디지털 시대의 결정적 요구사항이 될 것입니다.20 Arup 침해는 무행동의 비용이 더 이상 가설적 위험이 아니라 $25 million의 현실임을 증명합니다.1 지금 주권 딥 AI 아키텍처를 구현하기 위해 행동하는 조직은 자본을 보호할 뿐 아니라 가장 자산한 자산—커뮤니케이션의 무결성과 이해관계자의 신뢰—도 확보할 것입니다.4


참고 문헌

  1. Arup Deekfake Scam Forensic Analysis – Cyber - University of Hawai'i–West O'ahu, 2026년 2월 9일 열람, https://westoahu.hawaii.edu/cyber/forensics-weekly-executive-summmaries/arup-deekfake-scam-forensic-analysis/
  2. Arup Deepfake: How An AI-Generated Deepfake Stole $25M, 2026년 2월 9일 열람, https://purplesec.us/breach-report/arup-deepfake/
  3. Incident 634: Alleged Deepfake CFO Scam Reportedly Costs Multinational Engineering Firm Arup $25 Million, 2026년 2월 9일 열람, https://cdn.lawreportgroup.com/acuris/files/ACR-New/AI%20Incidents%20%E2%80%A2%20Incident%20634_%20Alleged%20Deepfake%20CFO%20Scam%20Reportedly%20Costs%20Multinational%20Engineering%20Firm%20Arup%20%2425%20Million.pdf
  4. The Arup Deepfake Fraud - PRMIA, 2026년 2월 9일 열람, https://prmia.org/common/Uploaded%20files/eCyber/PRMIA%20Case%20study%20-%20ARUP.pdf
  5. Cybercrime: Lessons learned from a $25m deepfake attack - The World Economic Forum, 2026년 2월 9일 열람, https://www.weforum.org/stories/2025/02/deepfake-ai-cybercrime-arup/
  6. $25 Million Deepfake Scam: The Ultimate Con? - Trustpair, 2026년 2월 9일 열람, https://trustpair.com/blog/25-million-deepfake-scam-the-ultimate-con/
  7. The Illusion of Control: Securing Enterprise AI with Private LLMs - Veriprajna, 2026년 2월 9일 열람, https://Veriprajna.com/technical-whitepapers/enterprise-ai-security-private-llms
  8. The Authorized Signatory Problem: Why Enterprise AI Demands a Neuro-Symbolic "Sandwich" Architecture - Veriprajna, 2026년 2월 9일 열람, https://Veriprajna.com/technical-whitepapers/authorized-signatory-problem-neuro-symbolic-ai
  9. The Illusion of Control: Shadow AI & Private Enterprise LLMs | Veriprajna, 2026년 2월 9일 열람, https://Veriprajna.com/whitepapers/illusion-of-control-shadow-ai-private-enterprise-llms
  10. Deepsight: World's Most Accurate Deepfake Detection - Incode, 2026년 2월 9일 열람, https://www.incode.com/platform/deepsight
  11. The Sentinel's Dilemma: An In-Depth Analysis of Real-Time Deepfake Detection Services in the Era of Generative AI Fraud | Uplatz Blog, 2026년 2월 9일 열람, https://uplatz.com/blog/the-sentinels-dilemma-an-in-depth-analysis-of-real-time-deepfake-detection-services-in-the-era-of-generative-ai-fraud/
  12. Deepfake Video Call Security: How to Spot and Stop Scams, 2026년 2월 9일 열람, https://www.adaptivesecurity.com/blog/deepfake-video-call-security-guide
  13. DeepFake Detection for Human Face Images and Videos: A Survey - Monash, 2026년 2월 9일 열람, https://researchmgt.monash.edu/ws/portalfiles/portal/570474609/560518436_oa.pdf
  14. Securing Social Media Against Deepfakes using Identity, Behavioral, and Geometric Signatures - arXiv, 2026년 2월 9일 열람, https://arxiv.org/pdf/2412.05487?
  15. Deepfake Presentation & Injection Attacks: Risks in ID Authentication, 2026년 2월 9일 열람, https://risk.lexisnexis.com/global/en/insights-resources/article/deepfake-duo-presentation-injection-attacks
  16. Deepfake Detection: What is Phishing 3.0 and How Can You Prepare? - Ironscales, 2026년 2월 9일 열람, https://ironscales.com/blog/deepfake-detection-what-is-phishing-3.0-and-how-can-you-prepare
  17. Virtual camera detection: Catching video injection attacks in remote biometric systems, 2026년 2월 9일 열람, https://arxiv.org/html/2512.10653v1
  18. Liveness detection: protect yourself against fraud - Veridas, 2026년 2월 9일 열람, https://veridas.com/en/liveness-detection/
  19. Facial Liveness Detection: How It Works & Why It Matters - Mitek Systems, 2026년 2월 9일 열람, https://www.miteksystems.com/blog/facial-liveness-detection
  20. Unmasking Cybercrime: Strengthening Digital Identity Verification against Deepfakes - World Economic Forum, 2026년 2월 9일 열람, https://reports.weforum.org/docs/WEF_Unmasking_Cybercrime_Strengthening_Digital_Identity_Verification_against_Deepfakes_2026.pdf
  21. Native Virtual Camera Attacks: The Invisible Threat to Remote Identity Verification | iProov, 2026년 2월 9일 열람, https://www.iproov.com/blog/native-virtual-camera-attacks-invisible-threat-biometric-solution
  22. Cyber Risks Associated with Deepfakes - Monetary Authority of Singapore, 2026년 2월 9일 열람, https://www.mas.gov.sg/-/media/mas-media-library/regulation/circulars/trpd/cyber-risks-associated-with-deepfakes.pdf
  23. What Tools Can Detect Deepfakes in Live Meetings? - Resemble AI, 2026년 2월 9일 열람, https://www.resemble.ai/deepfake-detection-tools-live-video-calls/
  24. Deepfake Attacks: How they Work and How to Stop Them - Nametag, 2026년 2월 9일 열람, https://getnametag.com/newsroom/deepfake-attacks-how-they-work-how-to-stop-them
  25. Structural AI Safety: Latent Space Governance in Bio-Design - Veriprajna, 2026년 2월 9일 열람, https://Veriprajna.com/technical-whitepapers/bio-design-ai-safety-latent-space
  26. Cognitive Armor: Robustness Against Adversarial AI - Veriprajna, 2026년 2월 9일 열람, https://Veriprajna.com/technical-whitepapers/adversarial-ai-defense-cognitive-armor
  27. How to Use Large Language Models (LLMs) with Enterprise and Sensitive Data, 2026년 2월 9일 열람, https://www.startupsoft.com/llm-sensitive-data-best-practices-guide/
  28. What Is LLM (Large Language Model) Security? | Starter Guide - Palo Alto Networks, 2026년 2월 9일 열람, https://www.paloaltonetworks.com/cyberpedia/what-is-llm-security
  29. What is Behavioral Biometrics - LexisNexis Risk Solutions, 2026년 2월 9일 열람, https://risk.lexisnexis.com/insights-resources/article/what-is-behavioral-biometrics
  30. What is Behavioral Biometrics? - OneSpan, 2026년 2월 9일 열람, https://www.onespan.com/topics/behavioral-biometrics
  31. Behavioral Biometrics: The Game-Changer in Fighting Synthetic Identity Fraud - Innovify, 2026년 2월 9일 열람, https://innovify.com/insights/behavioral-biometrics-fraud-detection/
  32. What is Behavioral Biometrics? | IBM, 2026년 2월 9일 열람, https://www.ibm.com/think/topics/behavioral-biometrics
  33. Continuous Behavioral Biometric Authentication for Secure Metaverse Workspaces in Digital Environments - MDPI, 2026년 2월 9일 열람, https://www.mdpi.com/2079-8954/13/7/588
  34. What Is Behavioral Biometrics? - BioCatch, 2026년 2월 9일 열람, https://www.biocatch.com/blog/what-is-behavioral-biometrics
  35. Unmasking the Fakes: How AI is Powering Deepfake Detection and Video Authentication | by Nunsi Shiaki | Rectlabs Inc | Medium, 2026년 2월 9일 열람, https://medium.com/rectlabs/unmasking-the-fakes-how-ai-is-powering-deepfake-detection-and-video-authentication-999fe4a0f5ff
  36. NIST: Reducing Risks Posed by Synthetic Content An Overview of Technical Approaches to Digital Content Transparency - AI Governance Library, 2026년 2월 9일 열람, https://www.aigl.blog/nist-reducing-risks-posed-by-synthetic-content-an-overview-of-technical-approaches-to-digital-content-transparency/
  37. Who Is Liable In A Workplace Deepfake Fraud Incident? - - Saunders Law, 2026년 2월 9일 열람, https://www.saunders.co.uk/news/who-is-liable-in-a-workplace-deepfake-fraud-incident/
  38. Deepfakes: Why Legal Liability Now Lies with the CIO, 2026년 2월 9일 열람, https://nationalcioreview.com/articles-insights/information-security/deepfakes-why-legal-liability-now-lies-with-the-cio/
  39. NIST AI RMF 2025 Updates: What You Need to Know About the Latest Framework Changes, 2026년 2월 9일 열람, https://www.ispartnersllc.com/blog/nist-ai-rmf-2025-updates-what-you-need-to-know-about-the-latest-framework-changes/
  40. The State of Information Security Report 2025 | Resilience, Compliance & AI - ISMS.online, 2026년 2월 9일 열람, https://www.isms.online/the-state-of-information-security-report-2025/
  41. Lawyer Liability for Wire Transfer Fraud - American Bar Association, 2026년 2월 9일 열람, https://www.americanbar.org/groups/tort_trial_insurance_practice/resources/brief/2025-spring/lawyer-liability-wire-transfer-fraud/
  42. How to Choose a Liveness Solution That Actually Works? - Oz Forensics, 2026년 2월 9일 열람, https://www.ozforensics.com/id/blog/articles/how-to-choose-a-liveness-solution-that-actually-works
  43. Biometric Security Guide : Understanding ISO/IEC 30107 Standards - Pacific Certifications, 2026년 2월 9일 열람, https://blog.pacificcert.com/biometric-security-guide-understanding-iso-iec-30107/
  44. ISO/IEC 30107 (Biometric Presentation Attack Detection) - DuckDuckGoose AI, 2026년 2월 9일 열람, https://www.duckduckgoose.ai/glossary/iso-iec-30107--biometric-presentation-attack-detection
  45. Identy.io Facial Biometric Technology Receives NIST ISO 30107-3 Level 2 PAD Certification with Perfect Score, 2026년 2월 9일 열람, https://www.identy.io/identy-io-facial-biometric-technology-receives-nist-iso-30107-3-level-2-pad-certification-with-perfect-score/
  46. AI Risk Management Framework - NIST, 2026년 2월 9일 열람, https://www.nist.gov/itl/ai-risk-management-framework
  47. US Expands Artificial Intelligence Guidance with NIST AI Risk Management Framework, 2026년 2월 9일 열람, https://cdp.cooley.com/us-expands-artificial-intelligence-guidance-with-nist-ai-risk-management-framework/
  48. iProov Shows Deepfake Resilience Under NIST Digital ID Rules - AI-Tech Park, 2026년 2월 9일 열람, https://ai-techpark.com/iproov-shows-deepfake-resilience-under-nist-digital-id-rules/
  49. Building Deepfake-Resilient Conferencing Procedures - Reality Defender, 2026년 2월 9일 열람, https://www.realitydefender.com/insights/building-deepfake-resilient-conferencing-procedures
  50. Deepfake Doppelgangers: Scammers Hijack Zoom Calls To Drain Bitcoin Wallets, 2026년 2월 9일 열람, https://cyberpress.org/deepfake-zoom-scams-drain-wallets/
  51. Deepfake Attacks Hit Two-Thirds of Businesses - Infosecurity Magazine, 2026년 2월 9일 열람, https://www.infosecurity-magazine.com/news/deepfake-attacks-hit-twothirds-of/

시각적이고 인터랙티브한 경험을 원하시나요?

이 백서의 핵심 결과, 통계, 아키텍처를 탐색 가능한 섹션과 데이터 시각화가 포함된 인터랙티브 형식으로 살펴보세요.

인터랙티브 버전 보기
자주 묻는 질문

자주 묻는 질문

공격자들은 어떻게 딥페이크를 이용해 Arup에서 $25.6 million을 훔쳤는가?

2024년 2월, 공격자들은 YouTube, 컨퍼런스, 기업 회의의 공개 영상을 수개월에 걸쳐 수집해 임원의 외모, 말투, 미세 표정을 '고충실도 합성 트윈'으로 복제할 수 있는 GAN을 학습시켰습니다. 가짜 CFO의 스피어 피싱 이메일이 초기 회의감을 불러일으킨 뒤, 직원은 여러 고위 임원의 딥페이크 버전이 실시간·상호작용 논의에 참여하는 다자 화상회의에 초대되었습니다. 친숙한 얼굴과 목소리를 보고 들은 직원은 홍콩의 다섯 은행 계좌로 총 $25.6 million에 이르는 15건의 개별 이체를 실행했습니다. 사기는 영국의 실제 CFO와의 거래 후 후속 확인을 통해서야 발견되었습니다.

왜 전통적 사이버보안이 Arup 딥페이크 침해를 막지 못했는가?

사건 내내 Arup의 디지털 인프라는 온전히 온전했으며 악성코드, 자격 증명 탈취, 무단 데이터베이스 접근의 증거는 없었습니다. 공격은 순전히 인지적이었으며, '기술 강화 소셜 엔지니어링'을 통해 시각·청각 단서에 대한 인간의 신뢰를 악용했습니다. 전통적 경계 방어, 방화벽, 다중 인증은 네트워크 침입을 막도록 설계되었을 뿐, 화상통화 참가자의 신원을 인증하도록 설계되지 않았습니다. 공격자는 진실과 구분할 수 없는 현실을 제조해 회사의 운영 논리를 훼손했으며, 엔터프라이즈 경계가 이제 네트워크가 아니라 인지 기반임을 보여주었습니다.

다중 인지 인증이란 무엇이며 딥페이크 공격을 어떻게 방어하는가?

다중 인지 인증은 전통적 시청각 신뢰를 넘어 딥페이크가 복제할 수 없는 검증 채널을 도입합니다. 여기에는 별도 보안 채널을 통한 대역외 신원 확인, GAN 아티팩트와 시간적 불일치를 분석하는 실시간 합성 미디어 탐지, 딥페이크 모델이 예측할 수 없는 즉흥 행동을 요구하는 챌린지-응답 프로토콜, 거래 요청을 조직 정책과 승인 위계와 교차 참조하는 뉴로-심볼릭 검증 계층이 포함됩니다. 이 계층적 접근은 시각·음성 인증이 무너지더라도 거래가 독립적 인지 검증을 여전히 요구하도록 보장합니다.

확신을 가지고 AI를 구축하세요.

차세대 엔터프라이즈 AI 구축에 깊은 경험을 갖춘 팀과 협업하세요. 신뢰할 수 있는 AI 전략을 설계하고 구축하며 배포할 수 있도록 지원해 드리겠습니다.

Veriprajna 딥테크 컨설팅 은(는) 헬스케어, 금융, 규제 분야를 위한 안전 필수 AI 시스템 구축을 전문으로 합니다. 당사의 아키텍처는 확립된 프로토콜에 따라 검증되며 포괄적인 규정 준수 문서를 갖추고 있습니다.