Mistral 7B on a 16 GB Mac with Ollama

Ollama Modelfile to run Mistral 7B Instruct locally on a 16 GB Mac: Q4 quantization, 8k context, concise answers in English.

Modelfile

FROM mistral:7b-instruct-q4_K_M
PARAMETER num_ctx 8192
PARAMETER temperature 0.3
SYSTEM """You are a helpful assistant. Answer in clear, concise English.
If you don't know, say so."""

Commande de lancement

ollama create mistral-en -f Modelfile && ollama run mistral-en

Coût estimé

Tokens d'entrée par appel : ≈ 191

Coût d'entrée seulement, sans la réponse du modèle. Prix publics des fournisseurs (Mistral AI, DeepSeek, OpenAI, Anthropic), tarif standard en dollars converti en euros au taux BCE du 29 septembre 2026. Estimation : 1 token ≈ 3,6 caractères.

Identifiant

contextetech--mistral-7b-ollama-mac-16gb

Type

Configs d'inférence

Fichier

Modelfile

Format

MODELFILE

Taille

184 octets

Encodage

UTF-8

Tokens estimés

≈ 51

Langue

Anglais

Licence

MIT

Usage commercial

Autorisé

Données personnelles

Aucune

Version

1.0

Publié le

2 octobre 2026 à 21:54

Mis à jour le

2 octobre 2026 à 21:54

Stockage

en base

Utilisations

0

J'aime

0

Modelfile

FROM mistral:7b-instruct-q4_K_M
PARAMETER num_ctx 8192
PARAMETER temperature 0.3
SYSTEM """You are a helpful assistant. Answer in clear, concise English.
If you don't know, say so."""

Commande de lancement

ollama create mistral-en -f Modelfile && ollama run mistral-en

Créer le modèle (Ollama)

# enregistrez le Modelfile, puis :
ollama create mistral-7b-ollama-mac-16gb -f Modelfile
ollama run mistral-7b-ollama-mac-16gb