본문으로 건너뛰기

AI 그림에 저자가 없을 때

데이터셋이 커질수록 생성 이미지와 특정 학습 사례의 연결이 약해진다는 연구 결과가 나왔다

이 요약은 AI가 원문을 분석해 생성했습니다. 정확한 내용은 원문 기준으로 확인하세요.

TL;DR

생성형 AI 이미지의 출처를 특정 학습 데이터에 귀속하려는 시도는 데이터셋이 커질수록 한계에 부딪힐 수 있다. MIT CSAIL 연구진은 데이터를 여러 조각으로 나눈 diffusion ensemble에서 특정 이미지를 본 구성 요소만 끄는 방식으로 재학습 없는 반사실 모델을 만들었고, 일반 모델과 비슷한 이미지 품질을 확보했다. 256개부터 160,000개가 넘는 이미지로 실험한 결과, 데이터셋이 커질수록 특정 이미지·작가·인물을 제거해도 출력 변화가 작아지는 attribution decay가 일관되게 나타났다. 이 결과는 생성물의 복제 여부와 저작권을 판단할 때 데이터 귀속만으로는 부족할 수 있음을 뜻하지만, 같은 현상이 대규모 언어 모델에서도 발생하는지는 아직 남아 있다.

섹션별 상세

01
생성형 AI가 만든 초상화에 어떤 학습 이미지의 기여가 들어갔는지는 저작권과 보상 문제의 핵심 쟁점이다. MIT CSAIL 연구진은 대규모 데이터셋으로 학습한 모델에서는 특정 이미지 하나뿐 아니라 한 작가의 모든 이미지나 특정 인물의 사진을 제거해도 출력이 거의 달라지지 않는 경우가 많다고 밝혔다. 출력이 변하지 않는다면 해당 데이터가 그 결과에 책임이 있다고 보기 어렵다는 점에서, 문제는 추적 기술의 부족보다 학습 데이터와 출력 사이의 연결 자체가 약해지는 데 있다.
02
기존 귀속 연구는 특정 이미지를 제외한 모델을 처음부터 다시 학습하기 어려워 데이터의 영향력을 근사값으로 계산했다. 연구진은 데이터를 여러 조각으로 나누고 각 조각을 본 작은 구성 요소들을 결합하는 diffusion ensemble을 구축해, 특정 이미지를 본 구성 요소만 끄는 방식으로 재학습 없는 반사실 모델을 만들었다. 이 절차는 추정치가 아니라 실제 입력과 그 입력의 영향을 함께 제거한 결과를 제공하므로, 개별 학습 사례가 출력에 미친 변화를 직접 비교할 수 있게 한다.
03
연구진은 같은 데이터로 학습한 24개의 일반 diffusion 모델과 ensemble을 비교했으며, 표준 평가에서 생성 이미지 품질은 대체로 비슷했다. 데이터가 적을 때 ensemble 성능은 낮았지만 학습 데이터가 늘어날수록 일반 단일 모델보다 더 잘 확장되는 양상이 나타났다. 따라서 이 구조는 특정 데이터의 영향력을 정확히 끊는 기능뿐 아니라 대규모 학습에서 데이터 효율성을 높일 가능성도 보였다.
왼쪽의 큰 회화풍 인물 이미지와 오른쪽·아래쪽에 반복 배치된 다수의 유사한 얼굴 생성 결과를 비교한 이미지다.
Infographic큰 기준 이미지 옆의 격자에는 744명의 작가가 포함된 공개 도메인 학습 데이터에서 한 작가씩 제외했을 때 생성됐을 법한 결과가 배열돼 있다. 개별 작가를 제거해도 얼굴 이미지가 크게 달라지지 않는다는 연구의 counterfactual 실험과, 대규모 학습에서 개별 데이터의 영향이 희미해지는 현상을 시각적으로 연결한다.
04
연구진은 256개 이미지부터 160,000개가 넘는 이미지까지 일곱 개 공개 컬렉션에서 학습한 24개 ensemble을 대상으로 각 출력의 반사실 세계를 만들었다. 원본 출력과 가장 크게 달라진 대체 출력 사이의 거리를 측정한 결과, 데이터셋이 커질수록 한 학습 사례가 만들 수 있는 최대 변화인 counterfactual radius가 역멱법칙에 따라 작아졌다. 픽셀 단위 차이와 의미 단위 차이 모두에서 같은 패턴이 나왔고, 데이터 제거 비율 고정, 텍스트 프롬프트, 클래스 조건, 네 가지 유사도 지표와 1,282개 소규모 재학습 실험에서도 결과가 유지됐다.
05
이 결과는 생성 이미지가 인터넷의 특정 저작물에서 파생됐는지를 귀속만으로 판단하기 어려울 수 있음을 뜻한다. David Gifford는 기업이 개별 인물이나 이미지의 파생물을 만들지 않았다고 주장하려면 이러한 삭제 기술을 활용해 비귀속 출력을 입증할 필요가 있다고 봤다. 다만 이번 연구는 diffusion 모델에 한정됐으며, 저작권 분쟁의 중심에 있는 대규모 언어 모델에서도 같은 쇠퇴가 나타나는지는 아직 확인되지 않았다.

용어 해설

귀속 쇠퇴(Attribution Decay)
생성 모델의 학습 데이터가 커질수록 특정 학습 사례 하나가 개별 출력에 미치는 영향이 줄어드는 현상이다. 연구진은 이미지를 하나씩 제거해도 출력이 거의 변하지 않는지를 직접 확인하고, 결과와 데이터 사이의 책임·저작권 연결이 약해지는 과정을 이 개념으로 표현했다.
반사실 모델(Counterfactual Model)
특정 데이터가 학습에 전혀 포함되지 않았을 때 모델이 어떤 출력을 냈을지 계산하는 모델이다. 이 연구에서는 해당 이미지를 본 구성 요소만 끄는 방식으로 재학습 없이 대체 모델을 만들고, 원래 출력과 비교해 데이터의 실제 영향력을 측정했다.
절제 실험(Ablation)
시스템의 특정 구성 요소나 입력을 제거한 뒤 결과가 어떻게 달라지는지 비교하는 방법이다. 연구진은 diffusion ensemble에서 특정 이미지를 본 하위 모델을 끄고, 소규모 데이터에서는 1,282개 모델을 별도로 재학습해 같은 현상이 나타나는지 교차 검증했다.
Diffusion 모델(Diffusion Model)
노이즈를 점진적으로 제거하며 이미지를 생성하는 모델 계열이다. 이 연구는 공개 이미지 데이터셋으로 학습한 diffusion 모델에서 특정 이미지·작가·인물의 사진을 제거했을 때 생성 결과가 얼마나 달라지는지 측정했으며, 이 계열은 시청각 미디어 생성과 단백질 구조 모델링에도 활용된다.

기술

  • Diffusion models
  • diffusion ensemble

활용 사례

  • 생성 이미지의 학습 데이터 영향력 측정
  • 특정 작가나 인물의 데이터 영향 제거
  • AI 생성물의 저작권 귀속 판단 보조
  • 비귀속 생성 출력 검증
AI 분석 전체 내용 보기

AI 요약 · 북마크 · 개인 피드 설정 — 무료

출처 · 인용 안내

원문 발행 2026. 08. 19.수집 2026. 08. 19.출처 타입 RSS

인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.