본문으로 건너뛰기

© 2026 Molayo

llama.cpp헤드라인2026. 06. 09. 22:37

vulkan: 행렬-행렬 곱셈 및 Flash Attention에 `v_dot2_f32_f16` 지원 추가 ([#24123](https://git

요약

llama.cpp 프로젝트가 Vulkan API를 활용하여 행렬-행렬 곱셈 및 Flash Attention 기능에 `v_dot2_f32_f16` 지원을 추가했습니다. 이는 다양한 플랫폼(macOS, Linux, Android 등)에서 최적화된 성능을 제공하며, 여러 아키텍처와 백엔드(CPU, GPU, NPU)를 포괄합니다.

핵심 포인트

  • Vulkan API 기반의 행렬 연산 가속 지원 추가
  • Flash Attention 및 행렬-행렬 곱셈 기능 개선
  • macOS Apple Silicon, Linux 등 다중 플랫폼 최적화 제공

vulkan: 행렬-행렬 곱셈 및 Flash Attention에 v_dot2_f32_f16 지원 추가 (#24123)

  • vulkan: valve fp16 dot2 확장에 대한 지원 추가

  • dot2 경로 선택을 위해 매크로 사용

  • 기능에 대해 적절하게 확인

  • 전처리기 분기를 줄이기 위해 dot_product 추상화 추가

macOS/iOS:

Linux:

Android:

Android:

Windows:

openEuler:

  • DISABLED
  • openEuler x86 (310p)
  • openEuler x86 (910b, ACL Graph)
  • openEuler aarch64 (310p)
  • openEuler aarch64 (910b, ACL Graph)

UI:

AI 자동 생성 콘텐츠

본 콘텐츠는 llama.cpp Releases의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기
0

댓글

0