Foresight Learning을 활용한 공급망 중단 예측

전통적인 공급망 지표는 지연되는 경우가 많지만, 뉴스는 지정학적 긴장이나 노동 분쟁 같은 전조 현상을 실시간으로 포착한다. 이 논문은 LLM을 활용해 비정형 뉴스 텍스트에서 미래의 공급망 위기 확률을 정확하게 계산하는 방법론을 제시하여 기업의 선제적 의사결정을 돕는다.

공급망 관리는 미래의 불확실성을 관리하는 일이지만, 기존의 수치 데이터는 이미 발생한 일을 기록하는 '후행 지표'인 경우가 많다. 반면 뉴스는 '선행 신호'를 담고 있지만, 텍스트라는 비정형 데이터 특성상 이를 정교한 확률 값으로 변환하기 어렵다는 한계가 있었다.

이 논문은 LLM이 텍스트의 맥락을 이해하는 능력을 활용하되, 단순히 요약하는 수준을 넘어 실제 발생한 결과(Ground Truth)를 보상(Reward)으로 사용하는 Foresight Learning 기법을 도입했다. 즉, 모델이 뉴스를 읽고 "다음 달에 중단이 발생할 확률이 30%다"라고 예측하면, 실제 결과와 비교해 예측의 정확도와 확률적 신뢰도를 동시에 높이도록 학습시킨다.

이 과정에서 모델은 명시적인 지시 없이도 스스로 '기저율(Base rate)'을 고려하거나 뉴스 속의 단서를 미래 결과와 연결 짓는 고도화된 추론 능력을 갖추게 된다. 결과적으로 단순한 텍스트 분류를 넘어, 의사결정에 즉시 활용 가능한 수준의 정교한 확률 신호를 생성할 수 있게 된다.

Foresight Learning 프레임워크를 기반으로 하며, 특정 시점 t까지의 뉴스 컨텍스트와 현재 지표 값을 입력받아 t+1 시점의 중단 발생 확률 P(y=1|news, e)을 추정한다. 중단 이벤트는 공급망 중단 지수(SDI)의 월간 변화량이 과거 표준편차 이상 증가하는 경우로 정의했다.

모델 아키텍처는 오픈소스 모델인 GPT-OSS-120B를 기반으로 하며, 효율적인 학습을 위해 LoRA(Low-Rank Adaptation, rank=32)를 적용했다. 학습 목적 함수는 GRPO 스타일의 강화학습을 사용하며, 실제 결과에 따른 로그 스코어(Log Score)를 보상으로 설정하여 정확도와 캘리브레이션을 동시에 최적화한다.

보상 함수 r = y log p + (1-y) log(1-p)는 모델이 예측한 확률 p가 실제 결과 y와 일치할수록 높은 점수를 주도록 설계되었다. [실제 결과 y와 예측 확률 p를 입력으로] → [로그 가능도 연산을 수행해] → [보상 값 r을 얻고] → [이 값이 클수록 모델의 예측이 실제 발생 빈도와 잘 일치함을 의미]하는 방식이다.

제안된 모델은 Brier score 0.0791을 기록하여 GPT-5(0.1203)와 GPT-OSS-120B(0.1433) 베이스라인을 크게 앞질렀다. 특히 Brier Skill Score(BSS) 기준으로는 역사적 평균치 대비 16.9%의 개선을 보인 반면, GPT-5는 오히려 마이너스 성능을 기록했다.

캘리브레이션 성능(ECE) 측면에서 0.0525를 달성하여 베이스 모델(0.1740) 대비 약 70%의 오류 감소를 보였다. 이는 모델이 출력하는 확률 값이 실제 사건 발생 빈도와 매우 밀접하게 일치함을 의미하며, 신뢰도 높은 의사결정 지원이 가능함을 시사한다.

상위 10% 고신뢰도 예측의 정확도를 나타내는 Precision@10%에서도 0.3478을 기록하여 GPT-5(0.0870) 대비 약 4배 높은 정밀도를 보였다. 또한 학습 후 모델은 기저율 앵커링(Base rate anchoring), 통계적 모델링 등 구조화된 확률 추론 행동을 더 빈번하게 수행하는 것으로 나타났다.

GPT-OSS-120B 디코더 전용 트랜스포머를 기반으로 LoRA 파인튜닝을 수행했다. 입력 데이터는 타임스탬프가 찍힌 뉴스 기사 텍스트와 수치형 공급망 중단 지수(SDI)를 자연어 프롬프트 형태로 결합하여 구성했다.

학습 시 'Look-ahead bias'를 방지하기 위해 예측 시점 이후의 데이터는 철저히 마스킹 처리했다. 레이블링은 미래 시점의 SDI 변화량을 기준으로 이진화하여 생성했다.

강화학습 알고리즘으로 GRPO(Group Relative Policy Optimization) 스타일의 목적 함수를 사용하여 모델의 출력 확률뿐만 아니라 그에 수반되는 추론 과정(Reasoning trace)까지 최적화 대상에 포함시켰다.

추론 행동 분석 결과, 학습된 모델은 단순 요약을 넘어 'Random Walk' 모델을 가정한 정량적 추론이나 기저율과의 비교를 통한 확률 업데이트 등 고도화된 베이지안 업데이트 패턴을 보였다.

뉴스 기사와 실제 공급망 중단 사이의 관계가 노이즈가 많고 불완전하다는 점이 성능의 상한선으로 작용한다. 또한 현재는 1개월 앞의 이진 이벤트 예측에 국한되어 있으며, 2022년 이후의 데이터로만 한정되어 있어 장기적인 분포 변화에 대한 강건성 검증이 필요하다.