ai.doge.tg 繁體 AI 情報 最新 專案 搜尋 Telegram ↗

Lightseek 開源 TokenSpeed:極速 LLM 推論引擎

工具 1 個來源 · 2 天前
為何重要

該專案標籤涵蓋了近期的 Blackwell 架構與多種主流 LLM,顯示其推論引擎可能針對不同模型與硬體架構進行了深度最佳化。

GitHub 新興專案 tokenspeed 旨在打造一個近乎光速的 LLM 推論引擎,目前以 Python 撰寫並累積超過 1,434 顆星星。專案主題涵蓋 Blackwell、DeepSeek、GPT-OSS、Kimi、Minimax 與 Nemotron 等多種架構與模型。

lightseekTokenSpeedLLMDeepSeekPythonBlackwell

來源 · 1 篇報導

首發 GitHub 新興專案 — LLM github.com 21:13