Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
본 페이지의 콘텐츠는 AI가 공개된 소스를 기반으로 자동 수집·요약·번역한 것입니다. 원 저작권은 각 원저작자에게 있으며, 각 게시물의 “원문 바로가기” 링크를 통해 원문을 확인할 수 있습니다. 저작권자의 삭제 요청이 있을 경우 신속히 조치합니다.
OpenCode가 사이버 공격을 겪는 과정에서, 방어 목적으로 사용되던 최첨단 모델들이 안전 가드레일(safety guardrails) 작동으로 인해 공격 에이전트와의 대결을 거부하는 문제가 발생했습니다. 이는 AI 시스템의 보안 및 방어 메커니즘 설계 시 '안전성'과 '방어력' 사이의 근본적인 취약점을 보여줍니다.
TRL 라이브러리 v1.16이 AWS Trainium을 지원하며 LLM 미세 조정 옵션을 확장했습니다. 이를 통해 TorchNeuron으로 비전-언어 모델(VLM) 학습이 가능해졌습니다. 또한, Trainium2에서 향상된 시퀀스 길이 처리 기능을 활용하여 최대 2배 빠른 학습 속도를 얻을 수 있습니다.
이 글은 새로운 모델의 성능을 이전 Carbon 및 Evo2와 비교하며, DNA 성능에 대한 참고 사항을 제공합니다. 다만, 새 모델이 오직 160B DNA 토큰으로만 학습되어 기존 1T 토큰 기반 모델 대비 성능 포화도가 낮다는 점을 유의해야 합니다.
본 글은 모델의 혁신 가능성을 강조하며, 특히 sub-100B 규모에서도 뛰어난 성과를 낼 수 있음을 보여줍니다. Eureka가 Flint을 학습하는 과정의 시간 지평(time-horizon) 차트를 언급하며, 이는 'Recursive' 기능이 제대로 작동함을 입증하는 핵심 증거로 제시됩니다.
Carbon-X는 DNA 데이터와 자연어를 결합하여 대화형 인터페이스를 제공하는 새로운 AI 모델입니다. 사용자는 마치 ChatGPT처럼 복잡한 생물학적 질문을 던지고, 이에 대해 상호작용하며 정보를 얻을 수 있습니다. 이는 생명과학 분야의 연구 방식에 혁신을 가져올 것으로 기대됩니다.
글쓴이는 다음 주 SF에서 열리는 COLM 컨퍼런스에 참석하며, 다중 에이전트 시스템의 테스트 시간 통신/협업, math 2.0, 오픈 정렬 등의 주제로 논의할 예정입니다. 특히 여러 환경(harnesses)에서 모델 성능 차이가 발생하는 문제를 해결하기 위해, 환경 자체 내에서 RL로 모델을 훈련시키는 방법을 제안하는 기술 자료를 공유했습니다.
Hugging Face Journal Club에서 분석한 Kimi K3 기술 보고서에 따르면, 최첨단 성능은 특정 비법보다는 증류, RL 스케줄링, 양자화 등 복합적인 알고리즘과 인프라의 최적화 결과입니다. 전문가 학습 후 멀티 티처 OPD를 통한 증류와 추론 노력을 학습 가능한 능력으로 다루는 방식이 핵심입니다.
비동기적 온라인 정책 증류(Async OPD)를 통해 생성과 학습을 분리하여 처리량을 약 2배 개선한 연구를 소개합니다. 로컬 몬테카를로 샘플링과 중요도 보정을 사용하여 데이터 신선도 저하 문제를 해결하고 수학 분야에서 높은 성능을 입증했습니다.
Hugging Face가 이론 물리학 문제 해결을 위해 구축한 멀티 에이전트 스캐폴드인 'Physics Intern'을 소개합니다. 이 시스템은 CritPt 벤치마크에서 SOTA를 기록했으며, Codex 및 Claude Code와 연동 가능한 기술 세트로 구성되어 있습니다.
Guilherme과 Hynek이 데이터 정제 경험을 바탕으로 로보틱스 분야에 진출합니다. 이들은 FineWeb, FineTranslations 등 지저분하고 비정형적인 데이터를 모델 학습용 '황금 같은' 데이터로 변환해 온 전문성을 보유하고 있습니다.
Carbon 모델에 추측 디코딩(Speculative Decoding) 기술이 도입되어 llama.cpp를 통한 DNA 서열 생성 속도가 2~3배 향상되었습니다. 이를 통해 대규모 게놈 데이터를 로컬 환경에서 더욱 효율적으로 처리할 수 있습니다.
Carbon 기술 보고서가 bioRxiv에 공개되었습니다. 이 보고서는 완전히 개방적이고 효율적인 DNA 모델을 훈련하기 위한 상세한 방법론과 레시피를 제공합니다.
새롭게 출시된 Gemini 3.5 Flash를 물리학 연구용 에이전트 프레임워크인 Physics-Intern에 적용한 실험 결과입니다. 실험 결과, 기존 Gemini 3.1 Pro를 사용했을 때보다 Physics-Intern의 문제 해결 성능이 13.1%에서 22.9%로 크게 향상되었습니다.
장기적 과제(long-horizon tasks)의 최신 진전 사항과 강화학습(RL) 학습 및 환경에 관한 오픈 소스 커뮤니티의 트렌드를 요약한 발표 자료입니다. 특히 에이전트 활용 사례에 강화학습을 적용하는 방법과 오픈 소스 생태계가 직면한 근본적인 과제들을 다룹니다.
모델 학습 능력이 고도화될수록 이를 검증하기 위한 평가(Evals) 작업에 소요되는 시간이 비례하여 증가하는 현상을 '모델 트레이너의 저주'라고 정의합니다.
생성형 DNA 설계를 위한 고효율 파운데이션 모델인 Carbon을 공개했습니다. Carbon-3B 모델은 기존 DNA 모델들과 대등한 성능을 유지하면서도 추론 속도를 275배 이상 혁신적으로 개선했습니다.
llama.cpp가 Qwen3.6 모델 제품군을 지원하기 위해 MTP(Multi-Token Prediction) 기능을 추가했습니다. 이번 업데이트는 일반적인 하드웨어 환경에서 로컬 AI 추론 성능을 획기적으로 향상시키는 중요한 이정표가 될 것으로 기대됩니다.
Hugging Face에 Late-interaction retrieval의 성능을 개선하는 새로운 커널인 MaxSim이 출시되었습니다. 이 커널은 Metal의 simdgroup_matrix 및 WMMA를 활용한 타일링 스코어링 방식을 통해 기존 방식 대비 3~5배의 속도 향상을 제공합니다.
코딩을 강화학습(RL) 태스크로 다루는 것이 주목받고 있으며, RL 코딩 환경에 대한 이해가 중요해지고 있습니다. 모델 자체를 구현하는 것보다도 주변 인프라와 시스템 구축이 더 큰 난관입니다.
huggingface/ml-intern 프로젝트의 Pull Request #228에서 Lewis Tunstall이 CLI(Command Line Interface)를 통해 로컬 모델을 지원하는 기능을 추가했습니다. 이 업데이트는 사용자가 터미널 환경에서 직접 모델 관련 작업을 수행할 수 있도록 하여 접근성과 편의성을 높입니다.