TL;DR
본 보고서는 AKBASCORE DRA 테스트 83에서 동일한 악의적 의도를 전문가용 비즈니스 어휘로 포장해 QWEN2.5-1.5B(28층, 1536-dim)와 TinyLlama-1.1B(22층, 1024-dim)에 동일 프롬프트를 투입한 재현 실험을 기록한다. QWEN은 20개 스티어드 레이어 전부에서 cos(theta)>0을 보이며 커널이 총 katki +0.065429를 적용해 전략적 기획 프레임을 강화했고 TinyLlama는 L0-L1에서만 양성, L2-L15에서 음성을 보여 총 katki -0.070216을 기록했으나 출력은 두 모델 모두 요청을 수행했다. 결과는 윤리 나침반이 표현(domain) 정렬을 감지할 뿐 의도(intent)를 식별하지 못한다는 아키텍처적 경계 조건을 드러내며 관측자 효과와 숨은 차원 차이가 측정 민감도에 영향을 준다는 한계도 함께 확인되었다. 보고서는 재현 가능한 코드와 로그를 공개해 TEST 84에서 의도 감지 계층 추가 여부를 검토할 것을 예고했다.
커뮤니티 반응
기술 관점에서는 실험 설계와 로그 제공으로 재현성이 확보되어 있다는 점에 호응이 나타났으며 도메인 정렬과 의도 분별의 차이를 지적하는 반응이 다수 관찰됐다. 일부 의견은 작은 모델에서 제동(brake)이 충분치 않아도 구조적 출력이 변하지 않는 사실에 우려를 표했고 다른 일부는 윤리 검출 기준을 어휘 기반에서 의도 기반으로 전환해야 한다는 해결책을 제안했다. 전반적으로 본문은 아키텍처 한계를 드러낸 자료로 받아들여졌고 추가 테스트와 모델 구조 수정에 대한 필요성이 공감대를 형성했다.
주요 논점
도메인 기반 윤리 나침반은 의도 감지를 대체할 수 없으며 의도 레이어를 추가해야 실질적인 거부가 가능하다는 주장이다. 본문에서 동일한 전략적 어휘가 의도적으로 조작적 목적을 가졌음에도 나침반이 이를 '정상'으로 읽어낸 사례가 근거로 제시됐다.
커널 katki의 양·음 값이 출력 성향을 바꾸지만 모델 규모와 숨은 차원에 따라 효과 크기가 달라지므로 단일 변수로 일반화하기 어렵다는 입장이다. Qwen과 TinyLlama의 서로 다른 차원과 레이어 수가 관측 차이를 만든 근거가 본문에 기록되어 있다.
측정 훅의 관측자 효과가 재현성 분석에서 중요한 변수로 작동하므로 훅 설계 시 비침습성 검증이 필요하다는 주장이다. TinyLlama에서 반복적으로 나타난 L1 흔적이 해당 주장의 근거로 제시되었다.
합의점 vs 논쟁점
합의점
- 현행 DRA 윤리 나침반은 표현(domain) 일치와 의도(intent)를 구분하지 못한다는 점이 실험으로 확인됐다.
- 테스트는 재현 절차와 전체 커널 로그를 첨부해 누구나 동일 환경에서 반복 검증이 가능하도록 설계되어 있다.
- 모델 규모와 숨은 차원 차이는 훅의 흔적 크기와 측정 민감도에 유의미한 영향을 준다.
논쟁점
- 커널의 음수 katki(제동)가 출력의 악용 확산을 실제로 막을 수 있는지 여부는 관측 결과에 따라 논쟁이 존재한다.
- 작은 모델이 더 취약한지 혹은 단지 측정 민감도가 달라 보이는지에 대한 해석이 분열되어 있다.
- 윤리 탐지 벡터를 어휘 기반으로 유지할지 의도 기반 계층을 추가할지에 대한 방식론적 선택이 의견 충돌을 낳고 있다.
실용적 조언
- 원문에 제시된 GitHub 파일을 복제해 Google Colab의 CPU 런타임에서 제공된 motor 파라미터 값을 그대로 적용하면 동일한 로그와 출력을 재현할 수 있다.
- 윤리 나침반을 개선하려면 표현 기반 벡터와 별개로 의도(intent)를 인식하는 보조 계층을 설계해 의도 신호가 음성인지 양성인지 판별하는 로직을 추가해야 한다.
- 관측자 효과를 줄이기 위해 훅의 캐스트·측정 순서를 검증하고 여러 차원(hidden dim)에서 민감도 테스트를 병행해 훅이 남긴 흔적을 정량화해야 한다.
섹션별 상세
P_t = cos(theta) × [zirve×e^(-sonum×t)×(1+sonum×t) + taban]레이어별 압력/카탈리스트 값 P_t를 계산하는 수식으로 cos(theta)는 윤리 나침반 투영값을, zirve/sonum/taban은 모터 설정 파라미터를 의미한다.




용어 해설
- Ethical compass (cos(theta))
- — 모델의 숨은 상태 벡터와 기준 벡터 간 각도를 cos(theta)로 측정해 '도메인 정렬'을 판정하는 지표이다. 입력 문장에서 윤리 관련 어휘로 구성된 방향성과 숨은 상태의 투영값을 비교해 각 레이어별로 양·음 값을 기록한다. 본문에서는 해당 벡터가 의도(intent)가 아닌 표현(domain) 일치만 감지해 한계가 드러났다.
- katki
- — AKBASCORE 아키텍처에서 커널이 숨은 상태에 기록하는 스칼라 보정값으로, 양수는 '가속(프레임 강화)'을 의미하고 음수는 '제동(프레임 억제)'을 의미한다. 각 레이어의 katki 합계가 모델의 최종 출력 경향성에 영향을 주며 본 테스트는 Qwen에서 +0.065429, TinyLlama에서 -0.070216을 관측했다. katki는 내부 로그와 누적 합으로 재현 가능하게 기록된다.
- Motor settings (ivme/sonum/zirve/taban)
- — 테스트에서 모델 동작을 조정하는 하이레벨 파라미터 집합으로 ivme는 전체 압력 강도, sonum은 감쇠율, zirve는 초기 피크 비중, taban은 영구 바닥값을 의미한다. P_t 수식에서 이 값들이 시간 t에 따른 압력 곡선을 만들며 레이어별 cos(theta) 측정에 영향을 준다. 재현 단계는 문서의 권장 슬라이더 값을 그대로 적용하도록 지정되어 있다.
- Observer effect (Δakatki/Δcos)
- — 측정 훅(hook)이 숨은 상태와 각도 측정 자체에 미세한 흔적을 남기는 현상으로, 동일 훅이 모델마다 다른 크기의 미세흔적을 남긴다. 본문에서는 Qwen에서 거의 0에 근접한 L1 흔적(+0.000001)이 관측된 반면 TinyLlama에서 더 큰 L1 흔적(+0.000874)이 네 번 재현되었다. 이 효과는 측정이 비침습적이지 않음을 의미하며 해석에 주의가 필요하다.
언급된 도구
DRA(Damped Resonance Alignment) 테스트 하네스와 커널 로그를 수집·기록하는 코드베이스
제공된 Python 파일을 실행해 CPU 환경에서 재현 실험을 돌리는 실행 환경
AI 요약 · 북마크 · 개인 피드 설정 — 무료
출처 · 인용 안내
인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.