Neural Super Sampling (NSS) 출시!

Arm 에서 출시한 차세대 AI 기반 업스케일링 솔루션인 Neural Super Sampling (NSS) 가 그래픽 및 게임 개발자를 위해 오늘 실험을 시작할 수 있도록 출시되었습니다!

NSS 는 Arm Neural Technology 를 통해 향후 모바일 장치에서 실시간 성능을 위한 것으로 설계되었습니다. 그러나 지연 시간은 GPU 구성, 해상도 및 사용 사례와 같은 구현 요인에 따라 달라집니다. 아래 Enchanted Castle 데모 비디오에서 NSS 는 GPU 작업 부하를 50 퍼센트 감소시켰습니다. 모델은 지속성 성능 설정에서 4ms 만에 540p 에서 렌더링하고 1080p 로 업스케일했습니다.

Neural Super Sampling (NSS) 는 Arm 이 개발한 실시간 시간적(super temporal) 업스케일링을 위한 매개변수 예측 모델로, 모바일 GPU 의 Neural Accelerators (NX) 상에서 실행을 최적화하여 저비용 컴퓨팅으로 고해상도 렌더링을 가능하게 합니다. NSS 는 저해상도 시간적 입력으로부터 고품질 출력 프레임을 재구성함으로써 작동합니다. NSS 는 모바일 게임, XR 및 기타 전력 제한 그래픽 사용 사례에 특히 적합합니다.

오늘 NSS 모델을 시작하세요.

더 깊이 들어가려면 다음 리소스를 확인하세요:

💻 Technical Blog: How Neural Super Sampling works**📃 White Paper:Building for Tomorrow: Try Neural Super Sampling Today with the Unreal Plugin & ML extensions for Vulkan📲 Technical Blog:**Experiment with NSS

Neural Graphics Dataset 을 확인하세요: 신경(super) 업스케일링 알고리즘을 훈련, 검증 및 테스트하기 위해 필요한 참조 이미지 및 이미지 시퀀션과 함께 해당 운동, 깊이 및 기타 데이터를 포함합니다.

현재 버전의 데이터셋은 Neural Super Sampling 에 대한 제한된 데이터로 구성되며, NSS 모델 개발 흐름이 어떻게 작동하는지 보여줍니다. 이 흐름은 아직 완전한 모델 (re) 훈련을 위한 포괄적인 데이터셋을 제공하지는 않지만, Arm 은 향후 Neural Graphics Model Gym 에서 모델을 훈련 및 재훈련에 사용할 콘텐츠 캡처 및 변환을 위한 도구를 제공할 예정입니다.

NSS 는 Unreal Engine 에 두 개의 플러그인을 통해 통합되었습니다: NSS Plugin for Unreal® Engine 과 Unreal® NNE Plugin for ML extensions for Vulkan.

Unreal® Engine 에서 NSS 를 사용하는 단계별 지침은 학습 경로에서 확인하세요:

Quickstart with ML extensions for Vulkan®: ML extensions for Vulkan® Quickstart GuideQuickstart with Unreal: Neural Super Sampling Quickstart Guide for NSS integration into Unreal Engine