Aktuell

KI & LLM News

KI & Lokale LLMs – Daily Digest 2. November 2026

Mistral AI hat Mistral Large 4 (Le Chonk) als Open Weights veröffentlicht – ein europäisches 1-Billionen-Parameter-Modell für lokale Inferenz. Parallel dazu senkt NVIDIA mit dem DGX Spark 64GB die…

Ein Thema, das mir in letzter Zeit häufiger begegnet: Unternehmen fragen mich, ob sie jetzt auf lokale KI setzen sollen oder noch auf die Cloud warten. Die Antwort wird immer klarer – und der Grund liegt nicht nur im Datenschutz. Mistral hat mit Le Chonk ein 1-Billionen-Parameter-Modell als Open Weights veröffentlicht, das in Europa trainiert wurde und für Coding-Aufgaben konkurrenzfähig ist. Gleichzeitig sinkt die Einstiegshürde: Ein NVIDIA DGX Spark mit 64GB kostet jetzt $4.999. Die Infrastruktur für lokale KI wird alltagstauglich – und das schneller als viele erwartet haben.

Harald Bertram, Inhaber und Gründer von BusinessBeyond.de

Mistral Large 4 (Le Chonk): Europas größtes Open-Weight-Modell ist da

Mistral AI hat am 29. Oktober die Open-Weights-Version von Mistral Large 4 veröffentlicht – ein Modell, das intern "Le Chonk" genannt wird und mit 1 Billion Gesamtparametern (52 Milliarden aktiv pro Token) sowie einem Kontextfenster von einer Million Token zu den größten jemals als Open Weights veröffentlichten Modellen gehört. Das Mixture-of-Experts-Modell wurde in europäischen Rechenzentren auf rund 3.800 NVIDIA Grace Blackwell GPUs trainiert und ist unter der Mistral Ecosystem Open-Weight License verfügbar – einer modifizierten MIT-Lizenz, die kommerzielle Nutzung erlaubt, aber für Model-as-a-Service-Angebote eine separate Lizenz erfordert. Die Benchmark-Ergebnisse sind gemischt: Mistral behauptet eine führende Position im agentic Coding mit 41% auf Terminal-Bench 4.0 und führt auf Cognition's FrontierCode 2.0 mit 19,7%. Unabhängige Teststellen wie Artificial Analysis und Vals.ai zeigen jedoch niedrigere Werte (24,7% bzw. 26,3% auf Terminal-Bench), was auf unterschiedliche Testharnesses zurückzuführen sein könnte. Was aber unbestritten ist: Das Modell hat die Kosten pro Task um 47% gesenkt und läuft 35 Minuten schneller als die Preview-Version – ein signifikanter Effizienzgewinn für produktive Einsätze. Für Unternehmen bedeutet dies: Zum ersten Mal steht ein europäisches Frontier-Modell zur lokalen Inferenz bereit, das sowohl datenschutzrechtlich vorteilhaft ist (keine Datenübertragung in die USA) als auch wirtschaftlich attraktiv durch den Token-Effizienzgewinn. Die Verfügbarkeit auf Hugging Face und die Unterstützung durch llama.cpp und Ollama machen die Integration straightforward.

Cloud-Frontier: Gemini 4 Carbon und GPT-6.1 Terra setzen neue Maßstäbe

Während die Open-Weight-Szene mit Le Chonk aufhorchen lässt, haben auch die großen Cloud-Anbieter ihre Flaggschiffe aktualisiert. Google hat am 28. Oktober Gemini 4 Carbon veröffentlicht, das mit einem BenchLeader Index-Score von 68,9 bereits in den Top 10 aller Modelle rangiert – und das bei $8 pro Million Token. Das Modell wurde von unabhängigen Teststellen bewertet und hat sich schnell etabliert. OpenAI folgte am 26. Oktober mit GPT-6.1 Terra, einem auf Effizienz und visuelles Reasoning optimierten Modell mit 1,05 Millionen Token Kontextfenster. Bei $2 pro Million Token positioniert es sich als kosteneffiziente Option für Alltagsaufgaben wie Dokumenteninterpretation, Formularausfüllen und technische Zeichnungen lesen. Der BenchLeader Score von 65,2 (Platz 18) zeigt solide Performance, wenn auch nicht auf dem Niveau der absoluten Spitzenmodelle. Die strategische Bedeutung dieser Releases liegt in der Preisdifferenzierung: OpenAI bietet mit Terra ein günstiges Einsteigermodell an, während Google mit Carbon direkt im Premium-Segment ansetzt. Für Unternehmen bedeutet dies mehr Wahlmöglichkeiten – und damit mehr Druck auf die Preise aller Anbieter.

Inferenz-Tools: Ollama integriert Liquid AIs Edge-Modelle

Ollama hat mit Version 0.40.12 (veröffentlicht am 27. Oktober) die LFM3-Modellfamilie von Liquid AI integriert – einschließlich des 1,7-Billionen-Parameter-Textmodells lfm3 mit 256K-Token-Kontext und der Vision-Variante lfm3-vl. Damit stehen die Edge-fähigen Modelle von Liquid AI direkt über Ollama zur Verfügung, was die lokale Inferenz auf Geräten mit begrenzten Ressourcen weiter erleichtert. Diese Entwicklung ist Teil eines größeren Trends: Die Inferenz-Runtimes werden immer besser darin, eine Vielzahl von Modellarchitekturen zu unterstützen – von kleinen Edge-Modellen bis hin zu großen Mixture-of-Experts-Systemen wie Mistral Large 4. Für Unternehmen bedeutet dies weniger Integrationsaufwand und mehr Flexibilität bei der Modellauswahl.

Hardware: NVIDIA senkt die Einstiegshürde für lokale KI

NVIDIA hat am 23. Oktober eine 64GB-Variante des DGX Spark mit GB10-Chip (Blackwell-Architektur) für $4.999 verfügbar gemacht – Systeme von Acer, ASUS, Dell, Gigabyte, HP und MSI sind bereits im Handel. Die 64GB-Konfiguration bietet die gleiche CPU/GPU-Leistung wie das 128GB-Modell (ab rund $7.000) und ist für Modelle bis zu Qwen 3.8 27B ausreichend. Der Preisanstieg gegenüber dem ursprünglichen 128GB-Modell (~$4.000 vor einem Jahr) wird durch die angespannte Speichermarkt-Situation erklärt – DDR-Chips sind knapp und teuer geworden. Gleichzeitig zeigt der Markt eine interessante Entwicklung: Gebraucht RTX 3090 (24GB) liegen bei rund $650 und bieten damit das beste VRAM-per-Dollar-Verhältnis für lokale KI-Anwendungen. Zwei gebrauchte RTX 3090 für insgesamt ~$1.300 ermöglichen 48GB VRAM via Tensor Parallelism – genug für 70B-Modelle bei Q4-Quantisierung. Für Unternehmen, die in lokale KI investieren möchten, bedeutet dies: Die Einstiegshürde ist gesunken, aber die Preise für High-End-Hardware sind gestiegen. Eine sorgfältige Hardware-Planung ist wichtiger denn je.

Chinesische KI-Modelle: Internationaler Einsatz freigegeben

China hat am 23. Oktober DeepSeek und MiniMax unter neuen Exportregeln für den internationalen Einsatz freigegeben – eine wichtige Entwicklung, die Bedenken über den globalen Zugang zu chinesischen Modellen reduziert. Zwischen April und September 2026 haben acht der zehn führenden chinesischen Modellfamilien herunterladbare Gewichte veröffentlicht: DeepSeek, Qwen, GLM, Kimi, MiniMax, Tencent Hunyuan, Huawei openPangu und Xiaomi MiMo. Diese Entwicklung ist für die Open-Weight-Szene von großer Bedeutung: Chinesische Labs setzen zunehmend den Takt für offene KI-Modelle, mit Kontextfenstern von einer Million Token und API-Preisen deutlich unter denen der US-Frontier-Modelle. Für Unternehmen bedeutet dies mehr Wettbewerb – und damit bessere Preise und Leistung.

Fazit & Ausblick

Die Entwicklung der letzten Tage zeigt eine klare Tendenz: Die Kluft zwischen Cloud-Frontier und Open-Weight-Modellen schließt sich weiter. Mit Mistral Large 4 als europäischem Open-Weight-Leitmodell, günstigerer Hardware wie dem DGX Spark 64GB und der Freigabe chinesischer Modelle für den internationalen Einsatz haben Unternehmen jetzt mehr Optionen denn je – sowohl für lokale als auch für Cloud-basierte KI-Lösungen. Für die Praxis bedeutet dies: Hybride Architekturen werden zum Standard. Sensible Daten werden lokal verarbeitet (mit Modellen wie Le Chonk oder Qwen 3.8), während rechenintensive Aufgaben an Cloud-Frontier-Modelle delegiert werden können. Die Kostenkontrolle verbessert sich durch den Wettbewerb, und die datenschutzrechtlichen Anforderungen des EU AI Act lassen sich mit lokalen Open-Weight-Lösungen besser erfüllen als mit Black-Box-Cloud-APIs. Die kommenden Wochen werden spannend: Die unabhängigen Benchmark-Ergebnisse für Mistral Large 4 werden sich weiter verfestigen, und weitere Inferenz-Runtimes werden das Modell unterstützen. Unternehmen, die jetzt in lokale KI-Infrastruktur investieren, positionieren sich optimal für die Anforderungen der nächsten Jahre.

Alle Quellen (12)

  1. Mistral Large 4 (Le Chonk) is now open weight
    Kategorie: lokale-llms
  2. Welcome Le Chonk: Mistral Large 4 on Hugging Face
    Kategorie: lokale-llms
  3. Mistral's Large 4 open weights arrive with a 1-point coding lead over GLM-5.3
    Kategorie: lokale-llms
  4. Introducing GPT-6.1 Terra
    Kategorie: ki-allgemein
  5. New AI model releases (Nov 2026): this week, ranked
    Kategorie: ki-allgemein
  6. LLM News Today (November 2026) – AI Model Releases
    Kategorie: ki-allgemein
  7. Ollama changelog — v0.40.12, Oct 27, 2026
    Kategorie: inferenz-tools
  8. NVIDIA DGX Spark 64GB Gives Developers More Ways to Build and Run Local AI Agents
    Kategorie: hardware
  9. Nvidia introduces 64GB DGX Spark to throw local AI fans a lifeline
    Kategorie: hardware
  10. Nvidia's DGX Spark becomes more expensive despite halved RAM
    Kategorie: hardware
  11. China Clears DeepSeek, MiniMax for Overseas AI Rollout
    Kategorie: ki-allgemein
  12. Chinese AI models in October 2026: state of play
    Kategorie: ki-allgemein