Mistral AIMistral AI

Pixtral 12B

現行
4.5Kダウンロード688いいねSep 2024公開日131K トークンコンテキストApache 2.0ライセンス57 良好品質

Pixtral 12B (12B parameters) requires approximately 11.6 GB of VRAM with Q4_K_M quantization. For the best balance of quality and speed, we recommend hardware with at least 14 GB of VRAM.

はじめに

— コピー&ペーストでローカル実行

Copy-paste commands to run Pixtral 12B on your machine.

Run

ollama run pixtral

Quick specs

Parameters12B
Architecturedense
Context131K tokens
Modalitytext+vision
Min RAM4.7 GB
Rec. RAM7.3 GB (Q4_K_M)
LicenseApache 2.0
FamilyPixtral
Vision Chat

About this model

The Pixtral-12B-2409 is a Multimodal Model of 12B parameters plus a 400M parameter vision encoder.

  • Natively multimodal, trained with interleaved image and text data
  • 12B parameter Multimodal Decoder + 400M parameter Vision Encoder
  • Supports variable image sizes
  • Leading performance in its weight class on multimodal tasks
  • Maintains state-of-the-art performance on text-only benchmarks

関連モデル

あなたのハードウェア

検出中...

おすすめ

最適なハードウェア

Pixtral 12Bのおすすめ

このモデルを実行

量子化オプション

量子化レベル別VRAM推定値

No hardware detected — fit column shows raw VRAM estimates

QuantBitsVRAMQualityFit
Q2_K
2
4.7 GB
Low
Q3_K_S
3
5.9 GB
Low
NVFP4
4
6.7 GB
Medium
Q4_K_M
4
7.3 GB
Medium
Q5_K_M
5
8.6 GB
High
Q6_K
6
9.8 GB
High
Q8_0
8
12.8 GB
Very High
F16
16
24.6 GB
Maximum

Quality benchmarks

Pixtral 12B benchmark scores

Benchmark verified

Coding

SWE-bench Verified
HumanEval+72.0%
Aider Polyglot
LiveCodeBench

General

Chatbot Arena
IFEval61.3%

Source: official · 2024-09-17

ハードウェア互換性

全ハードウェアの適合度推定

カリキュレーターを開く

Computing compatibility...

メモリ内訳

Reference: RTX 2060 6GB

Weights7.3 GB
KV Cache2.4 GB
Runtime1.2 GB
Headroom0.6 GB

よくある質問

FAQ — Pixtral 12B

関連項目