본문으로 건너뛰기

트렌딩 - GitHub 인기 레포 & HuggingFace 모델

Soju06/codex-lb

Python2 / 0

여러 ChatGPT/Codex 계정을 풀로 묶어 요청을 분배하고 계정별 토큰·비용을 대시보드에서 추적하는 OpenAI 호환 프록시이자 로드밸런서이다.

TL;DR

Codex LB는 여러 ChatGPT/Codex 계정을 하나의 풀로 묶어 요청을 분배하고 계정별 토큰과 비용을 대시보드에서 실시간으로 추적하는 OpenAI 호환 프록시이자 로드밸런서이다. 들어오는 요청은 선택한 라우팅 전략(capacity weighted, usage weighted, relative availability 등)에 따라 특정 계정으로 프록시되며 API 키 기반 접근 제어와 모델 허용 목록, WebSocket 스트리밍 호환을 통해 기존 Codex/OpenAI 클라이언트와 투명하게 연동된다. Docker·Helm·Kubernetes 배포와 SQLite 기본 백엔드를 제공하고 PostgreSQL을 선택해 확장할 수 있으며 최초 기동 시 로그에 출력되는 부트스트랩 토큰으로 초기 비밀번호를 설정할 수 있다. 운영자가 계정 소진 위험을 줄이고 비용 가시성을 확보하려는 환경에서 유용하지만 원문에서 권장하는 정책 준수와 계정 사용 패턴 관리 없이 무작정 대량 트래픽을 보낼 경우 계정 안전을 보장하지는 않는다.

핵심 포인트

  • OpenAI/Codex 호환 엔드포인트와 Responses API 및 WebSocket 스트리밍 호환을 동시에 제공하여 기존 클라이언트를 투명하게 재사용할 수 있다.
  • 대시보드에서 계정별 토큰·비용·28일 트렌드를 시각화하고 API 키별 모델·토큰·비용 제한을 한곳에서 관리할 수 있다.
  • 여러 라우팅 전략을 내장하여 용량 기반, 사용 기반, 상대 가용성 등 상황에 맞는 분배 정책을 선택할 수 있다.
  • Docker 단일 인스턴스부터 Helm 기반 Kubernetes 배포까지 다양한 운영 환경을 공식 문서로 지원한다.

이미지 분석

대시보드 스크린샷으로 요청 수, 토큰 사용량, 비용, 오류율과 계정별 잔여 토큰을 시각화한 패널을 보여준다.
이미지는 상단에 7일간 요청·토큰·비용·에러율을 그래프 형태로 배치하고 중앙에는 Primary/Secondary 잔여량을 도넛 차트로 표시해 계정 풀의 용량 분포를 한눈에 확인하게 한다. 하단의 계정 카드들은 각 계정의 Primary/Secondary 사용률과 활성 상태를 표시하여 운영자가 어떤 계정이 주로 사용되는지, 어떤 계정에 여유가 있는지 즉시 파악할 수 있도록 구성되어 있다.
계정 관리 화면 스크린샷으로 좌측에 계정 목록을 두고 우측에 선택한 계정의 사용량 추세와 토큰 상태를 보여준다.
이미지는 특정 계정을 선택했을 때 Primary와 Secondary 잔여량을 수평 바로 표시하고 요청 로그 합계와 7일 트렌드 라인 차트를 통해 시간에 따른 사용 패턴을 시각화하는 방식을 보여준다. 또한 토큰 상태 섹션에서 Access/Refresh/ID 토큰의 상태를 나열하여 계정 인증 상태와 만료 여부를 빠르게 확인할 수 있게 구성되어 있다.
설정 화면 스크린샷으로 테마, 라우팅, 임포트, 인증, API 키 및 방화벽 관련 구성 옵션을 나열한다.
이미지에는 라우팅 전략 선택, sticky threads 토글, 대시보드 인증 모드와 TOTP 설정, API 키 관리 테이블과 만료/상태 열이 포함되어 있어 운영자가 배포 환경에 맞춰 인증·라우팅·보안 정책을 세밀하게 조절할 수 있음을 보여준다. 또한 방화벽 섹션이 있음을 통해 외부 접근 제어를 UI에서 직접 관리할 수 있도록 설계된 점이 확인된다.
로그인 화면 스크린샷으로 대시보드 초기 로그인 폼과 비밀번호 입력 필드를 보여준다.
이미지는 대시보드의 인증 흐름을 보여주며 첫 기동 시 부트스트랩 토큰으로 초기 비밀번호를 설정하는 워크플로가 UI로 연결될 것을 암시한다. 단순한 로그인 폼은 로컬 접근이나 trusted header 모드와 함께 사용할 수 있는 여러 인증 모드를 전제로 설계되었음을 시사한다.

2.3k

STARS

353

FORKS

+204

TRENDING

2

조회수

watchers 2.3kopen issues 60MIT License

관련 토론

아직 관련 토론이 없습니다.

댓글

댓글을 작성하려면 로그인이 필요합니다.