EmbeddingGemma 2의 비전 타워를 이용한 이미지-텍스트 검색을 WebGPU 환경의 브라우저에서 실행

EmbeddingGemma 2가 이번 주에 출시되었습니다. 이 모델은 이미지를 텍스트와 하나의 768차원 공간으로 매핑하므로, 사진을 설명하는 방식으로 검색할 수 있습니다. 저는 이 모델의 텍스트 및 비전 타워를 TypeScript 기반의 WebGPU 추론 라이브러리인 ruNNtime에 포팅하여, 검색이 브라우저 내 GPU에서 완전히 실행되는 작은 사진 갤러리를 만들었습니다. ruNNtime은 또한 다른 많은 비전 관련 모델들을 지원하며, 다음 소스에서 인터랙티브 문서(interactive docs)를 통해 사용해 볼 수 있습니다: https://github.com/software-mansion/runntime /u/FinancialAd1961 제출