sgl-project memiliki kehadiran publik yang signifikan di GitHub dengan berbagai repositori yang berfokus pada pengembangan model bahasa dan sistem pemrosesan multimodal. Beberapa repositori yang menonjol termasuk sglang, mini-sglang, dan SpecForge, yang dibangun menggunakan bahasa pemrograman seperti Python, Go, dan C++. Ini menunjukkan komitmen organisasi dalam menyediakan alat dan sumber daya untuk penelitian dan pengembangan di bidang ini.
SGLang is a high-performance serving framework for large language models and multimodal models.
A compact implementation of SGLang, designed to demystify the complexities of modern LLM serving systems.
Train speculative decoding models effortlessly and port them smoothly to SGLang serving.
Materials for learning SGLang
SGLang Omni: High-Performance Multi-Stage Pipeline Framework for Omni Models
Genai-bench is a powerful benchmark tool designed for comprehensive token-level performance evaluation of large language model (LLM) serving systems.
JAX backend for SGL
A workload for deploying LLM inference services on Kubernetes
SGLang kernel library for NPU
This is the documentation repository for SGLang. It is auto-generated from https://github.com/sgl-project/sglang
DeepGEMM: clean and efficient FP8 GEMM kernels with fine-grained scaling
SGLang kernel library for Intel XPU
SGLang Kernel Wheel Index
Fast and memory-efficient exact attention
SGLang wheels for multiple platforms
Cookbook of SGLang - Recipe
Tidak ada deskripsi yang diberikan untuk repositori ini.
Tidak ada deskripsi yang diberikan untuk repositori ini.
Tidak ada deskripsi yang diberikan untuk repositori ini.
Fast Hadamard transform in CUDA, with a PyTorch interface
Tidak ada deskripsi yang diberikan untuk repositori ini.
Tidak ada deskripsi yang diberikan untuk repositori ini.
Tidak ada deskripsi yang diberikan untuk repositori ini.
The test files for SGLang.
FlashMLA: Efficient Multi-head Latent Attention Kernels
Tidak ada deskripsi yang diberikan untuk repositori ini.
sgl-project membangun berbagai alat dan kerangka kerja untuk pemodelan bahasa dan pemrosesan multimodal. Proyek-proyek seperti sglang dan mini-sglang bertujuan untuk menyederhanakan penggunaan model bahasa besar dalam aplikasi praktis.
sgl-project menggunakan beberapa bahasa pemrograman termasuk Python, Go, C++, Jupyter Notebook, dan Cuda. Bahasa-bahasa ini mendukung pengembangan repositori mereka yang berfokus pada pemodelan bahasa dan infrastruktur terkait.
Ya, semua repositori sgl-project di GitHub bersifat publik. Ini memungkinkan pengembang dan peneliti lain untuk mengakses, mempelajari, dan berkontribusi pada proyek-proyek yang tersedia.
Pantau sgl-project dengan RepoGuard dan dapatkan pemberitahuan saat repositori publik baru muncul.
Pantau akun ini