Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
© 2026 Molayo
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.

Qwen3.6-35B-A3B 모델을 기반으로 아첨(Sycophancy) 현상을 억제하기 위한 전체 미세 조정(Full Finetune) 모델을 개발했습니다. 군사 지휘 통제 센터와 같이 객관적이고 냉철한 판단이 필요한 환경을 위해 설계되었습니다.

Qwen3.6-35B-A3B MoE 모델을 기반으로 구축된 사이버 보안 특화 에이전트 모델 TitusLLM-v1을 공개합니다. 50만 개 이상의 데이터셋과 LoRA 미세 조정을 통해 SOC 운영 및 탐지 엔지니어링 등 보안 시나리오에 최적화된 성능을 제공합니다.

새로운 사이버 보안 특화 모델인 Titus-CybersecurityLLM이 mlx 및 gguf 형식으로 출시됩니다. 이 모델은 Qwen3.6-35B-A3B를 기반으로 약 4B 파라미터를 파인튜닝하여 설계되었습니다.
Qwen 3.7-max가 Opus 4.7 및 GPT-5.5를 상대로 진행된 에이전트 작업 테스트에서 우수한 성능을 기록했습니다. 테트리스 봇 작성 및 자기 개선 능력을 평가하는 벤치마크를 통해 모델의 성능을 비교했습니다.
Zhipu AI의 플래그십 모델인 GLM-5.1-HighSpeed가 출시되었습니다. 이 모델은 모델 크기를 줄이지 않고도 초당 400 토큰이라는 압도적인 추론 속도를 구현하여 LLM API의 새로운 성능 기준을 제시합니다.
Qwen3.5-LiveTranslate는 3,500개 이상의 언어 쌍을 지원하는 차세대 실시간 통역 모델입니다. 초저지연 성능과 시각적 문맥 파악, 실시간 음성 복제 기능을 통해 언어 장벽을 혁신적으로 해소하는 것을 목표로 합니다.
Composer 2.5 및 Opus 4.7 모델의 최적 사용 사례와 보고서 품질 출력에 대한 벤치마크 결과를 다룹니다. 해당 데이터는 AlicanKiraz0의 보고서를 인용하여 모델의 성능을 비교합니다.
GPT-5.5 Extended Pro를 활용하여 프로젝트 분석 보고서와 액션 플랜을 생성한 실험 결과입니다. Composer 2.5 Fast 모델을 사용했을 때 66K의 컨텍스트를 소모하며 약 0.5~1.5달러의 비용과 3~4분의 시간이 소요되었습니다.
새로운 LLM인 Sardaukar-Anti-sycophancyLLM의 출시 예고와 함께 학습 방식이 공개되었습니다. 이 모델은 직접 구축한 데이터셋을 활용하여 SFT 및 GRPO 파인튜닝 과정을 거쳤으며, 이달 말에 실제 답변 예시가 공유될 예정입니다.
이 기술 기사는 토큰 수준 인덱싱에 대한 레이어 커버리지가 정확히 64개 레이어의 토큰 수준에서 이루어질 것임을 명시합니다. 또한, 활성화(activations)를 'Teacher-forced' 데이터셋 텍스트로 추출하는 방법을 설명하며, 이는 시스템, 사용자, 어시스턴트 채팅 템플릿을 활용한 단일 순전파(forward pass)를 통해 구현될 예정입니다.
본 기사는 Qwen이 발표한 Qwen-Scope SAE 모델을 활용하여 기존의 지도 미세 조정(SFT) 데이터셋들을 분석할 계획을 설명합니다. 이 분석을 통해 다양한 측면에서 언어 모델의 성능과 특성을 비교할 수 있습니다. 구체적으로는 터키어 답변의 품질, 안전성 및 환각 여부, 아첨 정도와 진실 추구 경향, 그리고 탈옥(Jailbreaking)에 취약한 답변 등을 중점적으로 분석할 예정입니다.
Qwen-Scope는 새로운 모델이 아니라, 기존 Qwen3 및 Qwen3.5 모델의 내부 구조를 분석하고 이해하기 위해 공개된 Sparse Autoencoder(SAE) 가중치입니다. 이 모듈은 Qwen의 hidden layer에 통합되어 모델의 내부 표현을 해석 가능하게 만들고, 분리되고 낮은 반복성을 갖도록 돕는 것이 주된 목적입니다.
본 기술 기사는 Qwen-Scope라는 도구를 사용하여 SAE(Sparse Autoencoder) 모델로부터 파생된 특정 대규모 언어 모델(LLM) 버전들(SAE-Res-Qwen3.5-27B-W80K-L0_50 및 W80K-L0_100)을 대상으로 SFT(Supervised Fine-Tuning) 훈련 데이터셋에 대한 심층적인 분석 계획을 설명합니다. 구체적으로, 전체 데이터셋 행에 대해 선택된 레이어들에서 활성화 지문(activation fingerprint)을 추출하고, 이를 기반으로 클러스터링, 이상치 탐지 및 커버리지 분석을 수행할 예정입니다.
TL;DR: 다가오는 LLM 연구의 가장 중요한 화두 중 하나는 '반-종속성 (Anti-sycophancy)'입니다. 이는 모델이 사용자의 의견을 단순히 기쁘게 하거나 동의하기 위해 무조건적으로 찬성하는 행동을 억제하는 것을 의미합니다. 사용자가 LLM을 일상생활에 깊이 통합해 나가는 과정에서, 모델의 지나친 순응적 태도는 신뢰성과 유용성을 해칠 수 있습니다. 따라서 향후 연구는 모델이 객관적인 조언을 제공하면서도 사용자의 편향을 교정할 수 있는 능력을 어떻게 강화할지 집중적으로 탐구해야 합니다.