본문으로 건너뛰기
AI Trends
피드
트렌딩
커뮤니티
공지
로그인
피드
트렌딩
커뮤니티
공지
커먼 크롤 (common-crawl) 용어 설명 | AI Trends
common-crawl
커먼 크롤
중급
웹상의 방대한 데이터를 수집하여 공개하는 비영리 프로젝트로, 대규모 언어 모델 학습을 위한 기초 데이터셋으로 널리 쓰인다.
비슷한 개념
fineweb
corpus
data-scraping
llm-knowledge-base
training-corpus
multilingual-llm
data-curation
continual-pre-training
← 용어 사전 전체 보기