대화형 엔진을 둘러싼 출처 게이트

날조된 인용문은 독자가 보기 전에 잡혀 보류됩니다.

퍼블리셔가 자체 아카이브에서 독자에게 답하는 순간, 그 답변은 퍼블리셔의 책임이 되며, 시스템이 생성하는 내용에는 Section 230 면책이 없습니다. The Standards Desk는 대화형 엔진을 둘러싼 계층입니다. 게시되는 모든 문장을 실제 아카이브 구절에 근거화하고, 모든 인용문을 원문 그대로 검증하며, 입증할 수 없는 것은 독자가 아니라 스탠더드 데스크로 넘기고, 답변마다 원클릭 감사 영수증을 남깁니다.

0

자동 통과될 수 있는 근거 없는 답변

결정론적 게이트 불변식, 유닛 테스트로 검증됨

6/10

평가 세트에서 사람의 개입 없이 게시됨

자동 통과 3건 + 문장 가지치기 3건 (이 평가 세트의 결과)

200

합성 아카이브 기사, 2014년부터 2025년까지

Riverbend Ledger 코퍼스, 전부 합성, 13년

이것은 실행 가능한 데모입니다. Riverbend Ledger, Mayor Reyes, 그리고 모든 기사는 합성으로 표시되어 있으며, 실제 계정은 없습니다. 결정론적 정책 게이트, 원문 인용 규칙, 통과한 13개 테스트는 실제입니다.

퍼블리셔는 독자에게 답하고, 모든 답변을 책임지도록 내몰리고 있습니다

검증 없는 물량은 발행인이 한 번도 하지 않은 발언을 내보내는 바로 그 방식입니다.

검색은 더 이상 독자를 기사로 보내지 않습니다. AI Overviews는 이제 Google 검색의 48%에 나타납니다(theStacc via Search Engine Land, 2026). 퍼블리셔 검색 트래픽은 2025년 11월까지 전년 대비 33% 감소했으며 2029년까지 약 43% 추가 하락이 예상됩니다(Reuters Institute Trends 2026). Daily Mail은 링크 위에 AI Overview가 떴을 때 데스크톱 클릭률이 89% 하락했다고 측정했습니다. 압박은 발행인 명의로, 아카이브에서, 독자에게 직접 답하는 것입니다.

문제는 그 답변을 생성하는 순간 시작됩니다. 자체 시스템이 자체 아카이브에서 만드는 콘텐츠에는 Section 230 면책이 없습니다. 여러분이 책임집니다. Washington Post는 2025년 말 Ask The Post AI 프로젝트가 인용문을 날조하고, 출처를 잘못 귀속하며, 논평을 신문의 사설 입장인 것처럼 끼워 넣은 팟캐스트를 내보냈을 때 이를 구체적으로 보여 주었고, 그 실패는 스탠더드 에디터의 Slack이 유출되면서 드러났습니다(Semafor, 2025). 기술적 근본 원인은 인용 검증 단계의 부재였습니다.

더 강한 모델이 이것을 고치지 않습니다. 법원은 모델이 얼마나 확신했는지를 신경 쓰지 않고, 인용문이 실제인지와 아카이브가 정말로 그렇게 말했는지를 신경 쓰기 때문에, 작성기가 잘못된 점검 지점입니다. 지속 가능한 답은 모든 주장을 아카이브에 근거화하고, 인용문을 원문 그대로 강제하며, 뒷받침할 수 없는 것에 정직한 별도의 계층입니다.

The Standards Desk의 작동 방식

보증을 담는 부분은 결정론적 Python입니다. 에이전트는 자문합니다. 게이트가 결정합니다.

독자 질문은 실시간과 오프라인으로 6단계 파이프라인을 거칩니다. 시간 계획기가 질문을 시간 창으로 분해하고, 하이브리드 검색기(BM25와 로컬 임베딩)가 후보 구절을 가져오며, 커버리지 하한은 점수 임계값을 넘는 것이 없으면 유보하고, 답변기는 인라인 [S#] 인용과 함께 엄격히 근거화된 답변을 쓰며, 결정론적 원문 인용 확인이 인용된 모든 문자열을 인용된 출처와 대조하고, 출처 감사기가 주장마다 채점하며, 결정론적 정책 게이트가 하나의 결정을 내립니다. 모든 단계는 자체 지연 시간을 스트리밍하는 콘솔에서 켜지므로, 아무것도 블랙박스가 아닙니다.

6단계 파이프라인 콘솔이 있는 Riverbend Ledger 독자 위젯: 시간 계획기가 3개 시간 창으로 분해, 아카이브에서 10개 구절 검색, 근거화된 답변기가 6개 주장을 작성, 원문 인용 확인이 5 of 5 인용문을 원문으로 판정, 출처 감사기가 6 of 6 주장을 지지로 판정, 정책 게이트가 Auto clear를 읽고, AUTO-CLEARED FOR PUBLICATION 배너로 끝남.
6단계 파이프라인은 질문마다 실행됩니다: 계획, 검색, 근거화, 원문 인용 확인, 출처 감사, 정책 게이트. 에이전트는 자문하고, 코드가 결정합니다.

두 엔진, 의도적으로 분리

자문하는 세 에이전트

시간 계획기, 답변기, 출처 감사기는 주장별 타입 판정을 갖는 세 Pydantic AI 에이전트입니다. 공급자 교체가 가능하며(기본값 claude-opus-4-8), 같은 파이프라인은 키 없이 결정론적 오프라인 스텁이나 키 없는 로컬 Claude 브리지를 통해 끝까지 실행되므로, 게이트는 어느 쪽이든 동작합니다.

결정하는 코드

신뢰 경계는 에이전트 바깥에 있습니다. 원문 인용 규칙, 인용된 출처 텍스트에 대한 정확한 문자열 일치, 정책 게이트는 순수 Python입니다. 게시 안전성은 LLM의 자기 보고에 의존하지 않습니다. 구매자에게 필요한 것은 모델의 주장이 아니라 입증 가능하고 감사 가능한 결정이기 때문입니다.

답변당 네 가지 게이트 결정 중 하나

모든 답변은 정확히 하나의 결정으로 귀결됩니다. 게시하는 두 결정은 답변이 완전히 근거화되었을 때만 게시하며, 게시하지 않는 두 결정은 그 이유를 정직하게 밝힙니다.

게이트 결정 의미 결정 주체
AUTO-CLEARED FOR PUBLICATION 모든 주장이 근거화되고, 모든 인용문이 원문이며, 커버리지가 하한 위 결정론적 정책 게이트, 사람의 개입 없음
PUBLISHED AFTER PRUNING 뒷받침되지 않은 문장이 제거되고 남은 근거화된 답변이 통과 결정론적, 사람의 개입 없이 게시된 것으로 집계됨
HELD FOR STANDARDS-DESK REVIEW 날조되었거나 원문이 아닌 인용문, 또는 뒷받침되지 않은 주장 결정론적, 독자에게서 차단되어 큐로 전달됨
OUTSIDE COVERAGE 검색이 점수 하한 위를 하나도 통과시키지 않음 결정론적, 추측이 아니라 정직한 유보

게이트 불변식과 감사 영수증

결정론적이고 유닛 테스트로 검증된 단 하나의 보증은 게이트 불변식입니다. 검증할 수 없는 인용문이나 뒷받침되지 않은 주장이 있는 답변은 결코 자동 통과되지 않습니다. 그 위에, 한 번의 클릭으로 답변마다 JSON 감사 영수증을 내보내며, 질의, 분해된 하위 질문, article id·date·url이 있는 검색된 출처, 게시된 답변, 증거 구절이 있는 주장별 판정, 인용문별 원문 확인, 게이트 결정과 이유, 엔진과 모델, UTC 타임스탬프를 기록합니다. 대시보드의 킬 스위치는 백엔드를 살려 둔 채 독자 위젯을 일시 중지합니다.

독자 질문 세 가지, 정직한 결과 세 가지

아래의 모든 이미지는 실행 중인 앱의 스크린샷이며, 합성 Riverbend Ledger 아카이브 위에서 라이브 파이프라인이 만든 것입니다. 퍼블리셔, 시장, 기사는 합성으로 표시되어 있습니다.

벡터 RAG 위젯이 답할 수 없는 13년 질문, 게시에 통과됨

Mayor Reyes의 도심 밀도 조례에 대한 입장이 2014년부터 2025년까지 어떻게 바뀌었는지 묻자, 시간 계획기는 질문을 시간 창으로 나누고 답변기는 연대기 서사를 조립합니다. 2014년의 "I will not trade Riverbend's character for towers"부터 2025년의 "I changed my mind, and I'd do it again"까지입니다. 모든 문장은 인라인 [S#] 인용을 달고, 모든 인용문은 원문 확인을 통과하며, 커버리지는 하한을 넘고, 게이트는 AUTO-CLEARED FOR PUBLICATION을 읽습니다. 이것이 단일 구절 위젯이 만들 수 없는 종단적 종합입니다.

독자 위젯이 Mayor Reyes의 2014년부터 2025년까지 입장 변화를 추적하는 연대기적이고 완전히 인용된 답변을 보여 주며, 각 문장에 인라인 S-number 인용과 날짜가 있는 출처의 Grounded To 패널이 있고, 초록색 AUTO-CLEARED FOR PUBLICATION 배너 아래입니다.
13년에 걸쳐 종합된 연대기적이고 완전히 인용된 답변. 모든 주장이 근거화되고 모든 인용문이 원문이기 때문에 자동 통과되었습니다.

모든 문장은 날짜가 있는 아카이브 구절로 추적됩니다

Grounded To 패널은 장식이 아닙니다. 각 [S#]는 그것이 나온 실제 아카이브 구절과 날짜, 아카이브 참조로 해석되므로, 편집자는 게시 전에 어떤 문장 뒤의 출처든 읽을 수 있습니다. 예를 들어 2019년 인용은 Reyes가 이전 입장을 뒤집고 "Our downtown has to grow up, not just out."라고 말한 실제 기사를 엽니다. 근거화가 답변을 유창할 뿐 아니라 방어 가능하게 만듭니다.

독자 위젯의 Grounded To와 Sources 패널. 인용 S1이 펼쳐져 Mayor Reyes가 반대했던 도심 밀도 조치를 지지한 전체 아카이브 구절을 보여 주며, 날짜는 2019-06-24이고 아카이브 참조가 있습니다.
각 인용은 실제의, 날짜가 있는 아카이브 구절로 열립니다. 게시된 모든 주장은 그릴듯한 것이 아니라 근거화되어 있습니다.

인용 함정: 날조된 인용문이 잡혀 독자에게서 보류됨

Mayor Reyes가 개발업자에게 강변 필지에 대해 무엇을 약속했는지 묻자, 아카이브에는 그런 약속이 없습니다(한 기사는 그 필지가 "was not on the agenda"라고 적습니다). 답변기는 바닐라 RAG 모델과 똑같이 꾸며내어 "We're committed to moving riverfront parcel forward for the developers."라는 문장을 날조합니다. 원문 인용 확인은 그 문자열이 인용된 어떤 출처에도 없음을 찾고, 주장 근거화 커버리지는 50%에 머물며, 게이트는 답변 전체를 붙잡습니다. 독자는 HELD FOR STANDARDS-DESK REVIEW, not shown to readers만 봅니다. 이것이 게시 전에 막힌 Washington Post 실패입니다.

강변 필지 질문에 대한 독자 위젯. 정책 게이트가 Review를 읽고 빨간색 HELD FOR STANDARDS-DESK REVIEW, not shown to readers 배너가 있으며, 작성된 답변은 보류되고 Export Audit Receipt JSON 버튼이 있습니다.
날조된 인용문이 게이트를 Review로 몰고, 답변은 게시된 뒤 나중에 정정되는 대신 독자에게서 보류됩니다.

스탠더드 데스크가 보는 것: 주장별 출처와 빨간색으로 표시된 인용문

The Standards Desk 대시보드에서 보류된 답변은 주장별로 감사됩니다. 한 주장은 Supported, 한 주장은 Partial뿐이며, 문제의 인용문은 인용된 어떤 출처에도 NOT verbatim(날조되었거나 오인용)으로 빨간색 표시됩니다. 게이트 결정과 그 50% 커버리지가 기록되고, 답변은 보류된 초안과 내보낼 수 있는 JSON 영수증과 함께 검토 큐에 들어갑니다. 문제의 구간이 강조되어 편집자는 정확히 무엇을 고쳐야 하는지 알며, 그동안 독자에게는 아무것도 닿지 않았습니다.

강변 필지 답변에 대한 The Standards Desk 대시보드 출처 감사: 50% 주장 근거화 커버리지에서 review인 게이트 결정, Supported와 Partial로 표시된 주장별 출처, 어떤 출처에도 NOT verbatim인 인용문을 빨간색으로 표시하는 원문 인용 확인, 보류된 초안과 Receipt JSON 링크가 있는 검토 큐.
대시보드는 답변이 보류된 이유를 보여 줍니다: 주장별 판정, 빨간색의 원문 인용 확인, 내보낼 수 있는 영수증이 있는 검토 큐.

아카이브에 답이 없으면, 추측하는 대신 유보합니다

Riverbend의 2026년 대중교통 예산을 묻자, 검색은 점수 하한 위를 아무것도 찾지 못합니다(최고 관련도 0.12, 하한 0.1784). 그래서 파이프라인은 답변기를 완전히 건너뛰고 게이트는 OUTSIDE COVERAGE를 반환합니다. 독자에게는 자신만만한 추측 대신 "I don't have anything in this archive that answers that,"라고 분명히 말합니다. 정직한 유보는 모델의 실패가 아니라 게이트의 기능입니다.

2026년 교통 예산 질문에 대한 독자 위젯. 파이프라인 콘솔은 근거화된 답변기, 원문 인용 확인, 출처 감사기가 모두 skipped임을 보여 주고, 정책 게이트는 관련도 0.12가 하한 0.1784 아래인 Outside coverage를 읽으며, 독자에게는 OUTSIDE COVERAGE, not guessing 메시지가 있습니다.
점수 하한을 넘는 것이 없으므로 답변기는 건너뛰어지고, 독자는 허세 대신 정직한 유보를 받습니다.

스탠더드 데스크가 운영할 수 있는 거버넌스: 킬 스위치

하나의 토글이 백엔드를 살려 둔 채 독자 위젯을 일시 중지하므로, 편집자는 속보나 사고 중에 아카이브를 내리지 않고 새로운 독자 답변을 즉시 멈출 수 있습니다. 답변별 감사 영수증과 결합하면, 이것이 스탠더드 데스크가 실제로 필요로 하는 운영 가능한 거버넌스 면입니다. 프론트를 멈추고, 증거를 남기고, 큐를 검토하십시오.

Veriprajna Building True Intelligence 헤더가 있는 전체 앱. Reader widget paused 체크박스가 켜져 있고, Paused by the standards desk, the reader widget is offline, new reader questions are not being answered라는 호박색 안내가 있으며, 파이프라인과 감사 영수증은 계속 보입니다.
킬 스위치는 백엔드와 감사 추적을 살려 둔 채 독자 답변을 즉시 일시 중지합니다.

바닐라 RAG 위젯 대 The Standards Desk

The Standards Desk는 또 하나의 대화형 엔진이 아닙니다. 발행인 명의로 게시해도 안전한 것을 결정하는 계층입니다.

차원 바닐라 벡터 RAG 위젯 The Standards Desk 출처 게이트
날조된 인용문 잡지 못한 채 발행인 명의로 나감 원문 문자열 일치로 잡혀, 독자에게서 보류됨
뒷받침되지 않은 주장 사실로 게시됨 가지치기되거나, 답변 전체가 보류되며, 커버리지가 측정됨
여러 해에 걸친 질문 단일 구절 답변 또는 없음 시간 창에 걸쳐 계획되고, 인용과 함께 연대기로 조립됨
아카이브에 아무것도 없음 자신만만한 추측 OUTSIDE COVERAGE, 정직한 유보
게시를 누가 결정하는가 모델의 확신 순수 Python의 결정론적 정책 게이트
감사 추적 없음 답변당 원클릭 JSON 영수증

이 데모가 하지 않는 것

  • ✓ 챗봇도, 검색 엔진도, Google·Perplexity·FT·Bloomberg의 경쟁자도 아닙니다. 퍼블리셔 자체 대화형 엔진을 둘러싼 출처 게이트입니다.
  • ✓ 완벽한 종합이나 환각을 하지 않는다고 주장하지 않습니다. 답변기는 꾸며낼 수 있으며, 인용 함정이 바로 그것을 보여 줍니다. 가치는 독자가 보기 전에 게이트가 그것을 잡는다는 점입니다.
  • ✓ 평가 수치(10 of 10 버킷, 6 of 10 게시, 200개 기사, 13개 테스트)는 표시된 10개 질의 세트에서 이 구축된 데모의 범위이지, 열린 세계에 대한 보증이 아닙니다. 근거 없는 답변이 자동 통과되지 않는다는 게이트 불변식만이 결정론적이고 유닛 테스트로 검증된 보증입니다. 60 / 20 / 20 분할은 이 평가 세트의 결과이지, 보편적인 결과가 아닙니다.
  • ✓ Riverbend Ledger, Mayor Reyes, 조례, 모든 기사는 합성으로 표시되어 있습니다. 실제 퍼블리셔 데이터도 실제 계정도 없으며, 코퍼스 인용문이 원문 확인의 진실 출처입니다.
  • ✓ 일부는 스텁이며 그렇게 이름 붙여져 있습니다. 프로덕션 개체 해석은 사전 해석된 픽스처이고, 시간 지식 그래프는 날짜와 개체 태그 및 계획기로 시연되며, CMS 동기화는 Arc XP 픽스처이고, 킬 스위치는 로컬 플래그를 기반으로 합니다. 후순위: OCR과 마이크로필름 수집, 라이브 아카이브 위의 전체 GraphRAG, 라이선싱 및 수익 대시보드, Intelligence 등급 가격, 음성 답변, 사이트 임베드 강화.
  • ✓ 고객, 추천사, ROI, 달러 절감 수치는 없습니다. 아직 존재하지 않습니다. 이것은 메커니즘을 입증하며, 배포가 아닙니다.

퍼블리셔가 실제로 묻는 질문

이것이 챗봇인가요, 아니면 아카이브를 위한 검색 엔진인가요?

어느 쪽도 아닙니다. The Standards Desk는 아카이브 위에서 이미 운영하는 어떤 대화형 엔진이든 감싸는 출처 게이트입니다. Google, Perplexity, 또는 뉴스룸 검색창과 경쟁하지 않습니다. 하는 일은 결정론적으로, 어떤 생성된 답변이 발행인 명의로 게시해도 안전한지, 어떤 답변이 뒷받침되지 않은 문장을 가지치기하는지, 어떤 답변이 사람을 위해 보류되는지를 결정하고, 어느 쪽이든 감사 영수증을 남기는 것입니다.

모델은 여전히 꾸며낼 수 있습니다. 정확히 무엇을 막나요?

답변기는 꾸며낼 수 있고, 실제로 꾸며냅니다. 우리의 인용 함정 예시는 바닐라 RAG 위젯이 게시했을 인용문을 날조하는 모습을 보여 줍니다. The Standards Desk가 막는 것은 그 답변이 독자에게 닿는 것입니다. 모든 인용문은 인용된 출처와 원문 대조되고 모든 주장은 실제 구절에 대해 채점되므로, 날조된 인용문이나 뒷받침되지 않은 주장은 정정 이후가 아니라 게시 전에 잡혀 스탠더드 데스크로 넘어갑니다.

AI가 발행인 명의로 게시하는 것은 무엇이든 우리가 책임집니다. 이것이 그 위험을 어떻게 줄이나요?

자체 시스템이 자체 아카이브에서 생성하는 콘텐츠에는 Section 230 면책이 없으므로, 날조된 인용문은 제3자의 책임이 아니라 여러분의 책임입니다. 게이트는 검증할 수 없는 인용문이나 뒷받침되지 않은 주장이 있는 답변을 결코 자동 통과시키지 않으며, 모든 주장과 그 인용된 출처 및 판정, 모든 원문 인용 확인을 기록한 JSON 감사 영수증을 내보냅니다. 입증할 수 있는 답변을 게시하거나, 아예 게시하지 않은 것입니다.

더 나은 모델이면 이것이 불필요해지나요?

아니요. 게시해도 안전한지는 모델의 속성이 아니라 거버넌스의 속성이기 때문입니다. 명예훼손 원고는 모델이 얼마나 확신했는지를 신경 쓰지 않습니다. 인용문이 실제인지와 아카이브가 정말로 그렇게 말했는지를 신경 씁니다. 모든 주장을 근거화하고, 인용문을 원문 그대로 강제하며, 정직하게 유보하는 지속 가능한 가치는 어떤 모델 품질에서도 성립하며, 그래서 원문 인용 규칙과 정책 게이트는 에이전트 바깥의 순수 Python에 있습니다.

이것이 실제 신문 아카이브에서 돌아가나요, 아니면 데모인가요?

메커니즘을 입증하는 실행 가능한 데모이지, 배포가 아닙니다. Riverbend Ledger, Mayor Reyes, 2014년부터 2025년까지의 기사 200개는 합성으로 표시되어 있으며, 실제 퍼블리셔 데이터도 실제 계정도 없습니다. 실제인 것: 결정론적 게이트, 원문 인용 규칙, 시간 계획, 검색, 통과한 13개 테스트는 표시된 그대로 완전히 오프라인으로 실행됩니다. 프로덕션 개체 해석, 시간 지식 그래프, CMS 동기화는 픽스처로 스텁되어 있으며 그렇게 이름 붙여져 있습니다.

감사 영수증에는 실제로 무엇이 들어 있고, 얼마나 빨리 뽑아낼 수 있나요?

한 번의 클릭으로 답변마다 JSON 영수증을 내보냅니다. 질의, 분해된 하위 질문, article id·date·url이 있는 검색된 출처, 게시된 답변, 주장·인용된 출처·판정·증거 구절의 주장별 기록, 인용문·원문 일치·출처의 인용문별 기록, 게이트 결정과 이유, 엔진과 모델, UTC 타임스탬프입니다. 수동 세션 감사가 재구성하는 데 한 시간이 걸릴 수 있는 것을 수초 만에 내보냅니다.

기술 연구

이 데모를 뒷받침하는 연구 — 아키텍처, 검증 설계, 엔터프라이즈 청사진.

AI로 아카이브를 독자 앞에 내놓으시나요?

출처 게이트가 어려운 부분입니다. 우리가 그것을 구축합니다.

뉴스룸이 한 번도 하지 않은 발언을 게시하지 않고 아카이브에서 독자에게 답하는 방법을 고민 중이라면, 어떻게 생각하고 계신지 진심으로 듣고 싶습니다. 문제는 업계 전반의 것이고, 답도 그럴 것입니다.

출처 평가

  • ✓ 대화형 AI가 검증할 수 없는 인용문을 게시할 수 있는 지점을 매핑
  • ✓ 아카이브에 대한 근거화, 원문 인용, 커버리지 규칙을 정의
  • ✓ 스탠더드 데스크 검토 라우팅과 유보 임계값을 설계
  • ✓ 편집 및 법무 팀이 필요로 하는 감사 영수증을 명세

계층을 구축하기

  • ✓ 순수 Python의 결정론적 정책 게이트와 원문 인용 규칙
  • ✓ 주장별 출처가 있는 근거화된 종단적 답변
  • ✓ 정직한 유보와 스탠더드 데스크 검토 큐
  • ✓ 모델 교체 가능, 답변당 JSON 감사 영수증
소셜

다른 채널에도 게시됨