Ggml-org

embeddinggemma 300M

利用可能なデータが限られています — 一部のスペックが不完全または推定値の可能性があります。
389.6Kダウンロード22いいね0K トークンコンテキストUnknownライセンス5 入門品質

embeddinggemma 300M (0.30000001192092896B parameters) requires approximately 2.1 GB of VRAM with Q6_K quantization. For the best balance of quality and speed, we recommend hardware with at least 3 GB of VRAM.

はじめに

— コピー&ペーストでローカル実行

Copy-paste commands to run embeddinggemma 300M on your machine.

Run

docker run --rm -it ghcr.io/ggerganov/llama.cpp:full \ --hf-repo "ggml-org/embeddinggemma-300M-GGUF" \ --hf-file "embeddinggemma-300M-GGUF-Q6_K.gguf" \ -c 4096 -ngl 99

Quick specs

Parameters0.3B
Architecturedense
Context0K tokens
Modalitytext
Min RAM0.1 GB
Rec. RAM0.2 GB (Q6_K)
LicenseUnknown
FamilyGemma
Chat

関連モデル

あなたのハードウェア

検出中...

おすすめ

最適なハードウェア

embeddinggemma 300Mのおすすめ

このモデルを実行

量子化オプション

量子化レベル別VRAM推定値

No hardware detected — fit column shows raw VRAM estimates

QuantBitsVRAMQualityFit
Q2_K
2
0.1 GB
Low
Q3_K_S
3
0.1 GB
Low
NVFP4
4
0.2 GB
Medium
Q4_K_M
4
0.2 GB
Medium
Q5_K_M
5
0.2 GB
High
Q6_K
6
0.2 GB
High
Q8_0
8
0.3 GB
Very High
F16
16
0.6 GB
Maximum

ハードウェア互換性

全ハードウェアの適合度推定

カリキュレーターを開く

Computing compatibility...

メモリ内訳

Reference: RTX 2060 6GB

Weights0.2 GB
KV Cache0.1 GB
Runtime1.2 GB
Headroom0.6 GB

よくある質問

FAQ — embeddinggemma 300M

関連項目