llama-graph에서 NVFP4 엣지 케이스(edge-cases) 수정 및 제한 (#24331)

• b4 lora의 역양자화(dequant) 및 편향 추가(bias add)에 필요한 post-GEMM MUL 이동

#23484 참조:

1. lora의 경우, 잔차(residuals)를 수행하기 전에 완전히 역양자화된(fully dequantized) 값을 사용해야 한다고 가정하지만, 이는 LORA가 어떻게 생성되었는지에 따라 달라집니다. 문헌에 따르면 LORA는 post-mul(곱셈 후)이지만 pre-bias add(편향 추가 전)에 발생합니다 #8332
2. ModelOPT의 경우, bias-add는 완전히 역양자화된 값(fully-dequantized values)에서 수행되어야 합니다.

• NVFP4에 대한 build_ffn을 지원되는 조합으로 제한

macOS/iOS:

• macOS Apple Silicon (arm64)
• macOS Apple Silicon (arm64, KleidiAI 활성화) 비활성화됨(DISABLED)
• macOS Intel (x64)
• iOS XCFramework

Linux:

<strong>Linux:</strong>

• Ubuntu x64 (CPU)
• Ubuntu arm64 (CPU)
• Ubuntu s390x (CPU)
• Ubuntu x64 (Vulkan)
• Ubuntu arm64 (Vulkan)
• Ubuntu x64 (ROCm 7.2)
• Ubuntu x64 (OpenVINO)
• Ubuntu x64 (SYCL FP32)
• Ubuntu x64 (SYCL FP16)

<strong>Android:</strong>

• Android arm64 (CPU)

<strong>Windows:</strong>

<strong>Windows:</strong>

• Windows x64 (CPU)
• Windows arm64 (CPU)
• Windows x64 (CUDA 12) - CUDA 12.4 DLLs
• Windows x64 (CUDA 13) - CUDA 13.3 DLLs
• Windows x64 (Vulkan)
• Windows x64 (SYCL)
• Windows x64 (HIP)

openEuler:

• DISABLED
• openEuler x86 (310p)
• openEuler x86 (910b, ACL Graph)
• openEuler aarch64 (310p)
• openEuler aarch64 (910b, ACL Graph)

UI:

• UI