Zum Inhalt springen
AI ConnectPowered by VELENTIS
KI-generiert1 Min.

Amazon SageMaker Inference führt GPU-Partitionierung mit NVIDIA MIG ein

Amazon SageMaker Inference unterstützt nun NVIDIA Multi-Instance GPU (MIG), um GPUs zu partitionieren und verschiedene Modelle isoliert auf einem Beschleuniger zu betreiben.

Dieser Beitrag wurde KI-generiert und automatisch veröffentlicht. Einordnung, Kennzeichnung und alle Quellen am Beitragsende.

(KI-generiertes Symbolbild: Gemini / AI Connect)

Amazon Web Services erweitert die Funktionalität für Machine-Learning-Endpunkte. Wie das Unternehmen mitteilt, unterstützt die Plattform nun eine gezielte Aufteilung von Beschleunigerkarten. Durch diese Neuerung wird ein einzelner Grafikprozessor in hardwareisolierte Segmente gegliedert, wodurch Sie entweder verschiedene Modelle parallel oder jeweils passende Teilbereiche modernerer Chipsätze ansprechen können.

Die technische Umsetzung und Platzierung erfolgt über zwei optionale Schnittstellen-Felder, die eine Zuordnung von genau einem Modell je Partition ermöglichen. Zudem verweist der Anbieter auf interne Leistungsmessungen, bei denen die partitionierten Einheiten mit einer vollständigen älteren GPU verglichen wurden. Damit zielt das Verfahren darauf ab, die Auslastung der Hardware-Ressourcen bei der Bereitstellung von Modellen zu optimieren.

Was heißt das für Sie?

Für Entwickler und Unternehmen bedeutet die Neuerung vor allem eine potenziell effizientere Ressourcennutzung bei der Modellbereitstellung. Anstatt für kleinere Arbeitslasten jeweils dedizierte Beschleuniger zu buchen, können Sie moderne GPUs nun bedarfsgerecht aufteilen und isoliert belegen. Das kann dabei helfen, die laufenden Infrastrukturkosten im Cloud-Betrieb gezielter zu steuern.

Belege

Solide belegt
46/100
  • Amazon SageMaker Inference unterstützt ab sofort GPU-Partitionierung mit NVIDIA Multi-Instance GPU (MIG).

    eine Quelle
    Zitat

    „Amazon SageMaker Inference now supports GPU partitioning with NVIDIA Multi-Instance GPU (MIG)“

  • Die Technologie unterteilt eine GPU in hardwareisolierte Partitionen.

    eine Quelle
    Zitat

    „divides one GPU into hardware-isolated partitions“

  • Nutzer können in jeder Partition ein anderes Modell ausführen oder einen passenden Teil eines neueren Beschleunigers verwenden.

    eine Quelle
    Zitat

    „run a different model in each or take a right-sized fraction of a newer accelerator“

  • Über zwei optionale API-Felder lässt sich jeweils ein Modell pro Partition platzieren.

    eine Quelle
    Zitat

    „two optional API fields place one model per partition“

  • Es wurden Messungen im Vergleich zu einer ganzen älteren GPU durchgeführt.

    eine Quelle
    Zitat

    „what we measured against a whole older GPU“

Der Beleg-Score wird berechnet, nicht handgesetzt: aus Vertrauensgrad, Quellenzahl und dem Anteil verifizierter Aussagen.

Quelle & Transparenz

Stand: 06. November 2026

KI-generiertKI-generiert: automatisiert aus geprüften Quellen erstellt und technisch qualitätsgesichert (Quellen-, Zitat- und Zahlenabgleich); keine menschliche Einzelfreigabe vor Veröffentlichung

Quellen
1
Verifizierte Aussagen
0 / 5
Beleg-Score
46Solide belegt

Wollen Sie das umsetzen?

Wir vermitteln Ihnen passende KI-Anbieter aus der DACH-Region, kostenlos und unverbindlich.

Wie geht's weiter?