세 가지 반복적 실패 모드와 타입드 그래프 기반 증거 저장소 설계

커뮤니티는 provenance와 시간 기반 기록을 결합한 접근이 현실적 문제를 직접 겨냥한다고 평가했다. 많은 참가자가 증거 기반 기권과 derived_from 방식의 신뢰 상한이 실전 환경에서 허위 확신을 줄이는 데 효과적일 것으로 보았으며 구현 복잡성과 조회 비용 증가를 우려했다. 일부는 MCP server와 JSONL export/import 같은 무락인 설계가 도입 장벽을 낮출 수 있다고 언급했고, 다른 사용자는 대규모 시스템에서의 파티셔닝 전략과 인덱싱 비용을 검증할 필요가 있다고 지적했다.

• 기록 저장 시에는 각 에피소드에 명확한 타임스탬프와 출처 메타데이터를 함께 저장해야 한다는 점이 제시됐다. 회수 파티셔닝을 시간, 타입, 출처 필터 순으로 구성하면 오래된 정보와 낮은 품질 출처를 우선 배제할 수 있고, 이는 증거 기반 기권 빈도를 낮추는 데 도움이 된다. 또한 JSONL 형식의 export/import를 구현하면 저장소를 다른 시스템으로 이식할 때 데이터 호환성 문제를 최소화할 수 있다.
• 응답 생성 전에 selfcheck 절차를 도입해 회수된 에피소드의 내부 일관성(예: 상충하는 진술 존재 여부)과 provenance 일치 여부를 점검하도록 권장되었다. derived_from 엣지로 신뢰 상한을 두면 혼합 출처 인용 시 과도한 신뢰 승인을 억제할 수 있고, 이 규칙은 evidence-grounded abstention과 결합해 허위 확신을 줄이는 데 기여한다. 마지막으로 Store/Complete 경계에 대한 명시적 설계를 통해 부분적 저장과 완전 저장의 트레이드오프를 운영적으로 관리해야 한다.

타입드 그래프(Typed Graph)

— 노드와 에지에 명확한 유형을 부여해 사건과 주장의 관계를 표기하는 데이터 구조로, 이 글에서는 시간표시된 에피소드와 출처 유형을 함께 저장해 증거의 출처·유형·연관관계를 질의할 수 있게 하는 저장소 역할을 한다. 쿼리 시에는 타입 필터와 날짜 범위를 조합해 관련 증거만 선택할 수 있으며, provenance 기반 신뢰도 평가에 핵심적이다.

서드파티 주장 엣지(Third_Party_Claim)

— 외부 출처의 진술을 가리키는 에지 유형으로, 원문 텍스트를 단순 복제한 링크가 아니라 '주장'이라는 성격을 명시해 처리된다. 이 엣지는 원문 출처와의 관계를 유지하면서 신뢰도 산정에서 다른 유형과 구분되므로 필터링이 아니라 증거의 성격을 보존하는 방식으로 작동한다.

증거 기반 기권 게이트(Evidence-Grounded Abstention)

— 모델 출력 단계에서 입력에 충분한 검증 가능한 근거가 없을 때 응답을 회피하도록 하는 결정절차로, 회수된 에피소드의 provenance와 일관성 점수에 기반해 작동한다. 게이트는 신뢰 임계값 아래일 경우 모델이 '모름'이나 추가 검증 요청을 반환하도록 강제해 허위 확신을 줄인다.