Apostate 엔진 개발 현황 공유
요약
Apostate 엔진 개발 현황을 공유하며, 강력한 거부 방향 목표를 위해 단순 직교 투영 대신 사각 투영 방식을 구현했다고 설명합니다. 향후 의도된 행동 변화와 KL 보존을 위해 전단 매핑 추가를 고려 중이며, 정식 출시 시 더 발전할 것이라고 예고했습니다.
핵심 포인트
- Apostate 엔진 개발이 진행 중입니다.
- 직교 투영의 경직성을 극복하기 위해 사각 투영을 구현했습니다.
- KL 보존 및 행동 변화를 위해 전단 매핑 추가를 고려합니다.
저는 abliteration engine인 Apostate 작업을 계속하고 있습니다.
한 가지 알게 된 것은, 가장 강력한 거부 방향을 목표로 할 때 단순 직교 투영(orthogonal projection)이 너무 경직적일 수 있다는 것입니다. 그래서 저는 더 유연한 접근 방식인 사각 투영(oblique projection)을 구현했습니다. 다음으로는 의도된 행동 변화를 달성하면서 KL을 더 잘 보존하기 위해 전단 매핑(shear mapping) 추가를 고려하고 있습니다.
프로젝트를 팔로우해 주신 모든 분들께 감사드립니다. Apostate는 정식 출시 시점에는 훨씬 강력해질 것입니다.
(문법 오류로 인해 재게시)
제출자: /u/AccountAntique9327
[링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/LocalLLaMA의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0