MiniCPM4エッジシリーズ - 0.5B & 8B バリアント |8T/1Tトークン - トレーニング可能なスパースInfLLM-v2のアテンション→各トークンは、128K ctxで他のトークンの~5%に注意を向けます。 - FP8パイプライン+マルチトークン予測。UltraClean/UltraChat-v2データ - BitCPM三元クオンツ(-1/0/+1、~90%のウェイトドロップ)、Eagle投機的ヘッドによる高速デコード(vLLM / FRSpec)のドラフトアヘッド - Jetson AGX Orin: Qwen3-8B よりも ~7× 高速で、128K の「干し草の山の針」の取り出しが強力 - Apache-2.0 (英語) スモルを考える HFの: TRです。