NVIDIA/TensorRT-LLM

★14,843Python🇺🇸 北米発NOASSERTION⑂ 2,831Issue 657更新 2026年10月17日

TensorRT LLM provides users with an easy-to-use Python API to define Large Language Models (LLMs) and supports state-of-the-art optimizations to perform inference efficiently on NVIDIA GPUs. TensorRT LLM also contains components to create Python and C++ runtimes that orchestrate the inference execution in a performant way.

NVIDIA製、GPU最適化LLM推論エンジン — NVIDIA GPU上でLLMを高速推論するためのライブラリです。専用カーネルや効率的なランタイムにより、PythonからLLMを定義しつつ最新の最適化を適用でき、Blackwell世代GPUやMoEモデルにも対応。大規模サービング用途で性能を追求するエンジニアに向いています。

LLM・機械学習blackwellcudallm-servingmoepytorch

指標

相対成長率(7日)+0%規模に対する直近7日の伸び
加速度+112%前週からの増加ペースの変化
注目度スコア433指標を0〜100に揃えて合成

指標の定義はこのサイトについて を参照。

star推移とtrending掲載(直近30日)

初掲載+13★/日デイリー
2026/9/192026/10/18

帯は trending に載った日(濃いほど上位)

日別の掲載順位を表で見る(1日)
日付デイリー
2026年9月20日
python 5位 +14

リポジトリ作成 2023/8/16・trending 初掲載 2026/9/20

同じカテゴリの注目リポジトリ(LLM・機械学習)

LLM・機械学習 の全リポジトリを見る →

cuda 内の順位

#リポジトリ★
1vllm-project/vllm94,008
2debpalash/VoiceStudio73,379
3jamiepine/voicebox57,865
4sgl-project/sglang37,256
5bendlang/bend23,754
6tracel-ai/burn16,125
7vosen/ZLUDA15,096
8NVIDIA/TensorRT-LLM14,843
9NVIDIA/cuda-rust3,732
10SemiAnalysisAI/InferenceX1,871

cuda の全リポジトリを見る →

週間まとめをメールで受け取る

毎週月曜に、前週に伸びたリポジトリと国内外での話題の広がりをメールでお届けします。配信はいつでも停止できます。 取り扱いはプライバシーと広告方針をご覧ください。