Memex: Claude를 활용해 스스로 구축하고 유지되는 개인용 AI 위키

섹션별 상세

기존 RAG의 일회성 정보 소비 구조는 지식의 축적과 종합적인 이해를 방해하는 병목이었다. Memex는 LLM이 지속적으로 마크다운 파일을 생성하고 수정하는 영구적인 위키 구조를 도입하여 이 문제를 해결했다. 새로운 정보가 들어올 때마다 엔티티 페이지를 갱신하고 주제 요약을 수정하며 기존 데이터와의 모순을 자동으로 식별한다. 이를 통해 열 번째 대화가 첫 번째 대화보다 더 깊은 맥락을 이해하는 복리형 지식 구조가 형성된다.

시스템은 원시 소스, LLM 생성 위키, 구조 스키마의 세 가지 레이어로 구성되어 작동한다. 사용자가 문서를 주입(Ingest)하면 LLM은 파일 도구(Read, Write, Edit, Grep)를 사용해 위키 레이어를 직접 편집하고 인덱스를 갱신한다. 쿼리 시에는 축적된 위키 데이터를 바탕으로 답변을 생성하며, 유용한 답변은 다시 새로운 위키 페이지로 저장된다. 정기적인 린트(Lint) 작업을 통해 고립된 페이지나 오래된 주장을 찾아내어 지식의 무결성을 유지한다.

bash

sudo memex serve
memex create my-wiki --name "My Knowledge Base"
memex login my-wiki
memex ingest my-wiki paper.pdf notes.md article.html
memex query my-wiki "What are the key themes across these documents?"

Memex 서버를 실행하고 위키 생성, 인증, 데이터 주입 및 쿼리를 수행하는 기본 CLI 명령어 예시

근거

LLM은 Read, Write, Edit, Glob, Grep과 같은 표준 파일 도구를 사용하여 위키를 관리한다. — What Memex does 섹션

보안과 확장성을 위해 리눅스 마운트 네임스페이스 기술을 활용한 격리된 실행 환경을 제공한다. Claude는 지정된 작업 공간(/workspace) 외의 호스트 파일 시스템이나 다른 위키 데이터에 접근할 수 없어 안전하다. MCP(Model Context Protocol) 서버 연동을 지원하여 Notion이나 Google Drive 같은 외부 API 기반 소스도 위키의 일부로 통합할 수 있다. 사용자는 .claude.md 파일을 수정하여 특정 도메인에 맞는 위키 작성 규칙과 관례를 LLM에게 직접 지시할 수 있다.

json

{
  "mcpServers": {
    "notion": {
      "command": "npx",
      "args": ["-y", "@notionhq/mcp-server"],
      "env": {
        "NOTION_API_KEY": "secret_..."
      }
    }
  }
}

MCP 서버 설정을 통해 Notion과 같은 외부 데이터 소스를 연결하는 구성 예시

근거

Memex는 리눅스 마운트 네임스페이스를 사용하여 Claude가 지정된 작업 공간 외의 파일에 접근하지 못하도록 격리한다. — Why Memex - Safe by default 섹션

용어 해설

검색 증강 생성(RAG): — 외부 지식 소스에서 관련 정보를 검색하여 LLM의 응답에 활용하는 기술이다. 실시간 데이터 반영에 유리하지만, 세션 간 지식 축적이나 종합적인 이해가 부족하다는 한계가 있다.
마운트 네임스페이스(Mount Namespace): — 리눅스 커널에서 프로세스별로 파일 시스템 마운트 지점을 격리하는 기능이다. 이를 통해 특정 프로세스가 전체 시스템 파일에 접근하지 못하도록 보안 경계를 설정할 수 있다.
모델 컨텍스트 프로토콜(MCP): — AI 모델이 외부 데이터 소스나 도구와 표준화된 방식으로 통신할 수 있게 하는 프로토콜이다. Notion, Google Drive 등 다양한 앱의 데이터를 LLM이 직접 읽고 활용할 수 있게 돕는다.
복리형 지식(Compounding Knowledge): — 새로운 정보가 추가될 때마다 기존 지식과 연결되고 수정되며 점진적으로 깊어지는 지식 구조를 의미한다. 단순 저장을 넘어 지식 간의 교차 참조와 모순 해결을 통해 가치가 증폭된다.

기술

Claude
TypeScript
Node.js
MCP
SQLite

활용 사례

연구 논문 요약 및 교차 참조 시스템
비즈니스 인텔리전스 및 고객 신호 분석
개인 학습 노트 및 프로젝트 아카이빙

언급된 리소스

GitHubMemex GitHub Repository