AI/ML

FP8 (8-bit Floating Point)

Definition

FP8 ist ein 8-bit-Gleitkommaformat, das 2022 von NVIDIA, AMD und ARM gemeinsam spezifiziert wurde. Es bietet hoehere Praezision als INT8 bei gleichem Speicherbedarf. Die RTX 50-Serie unterstuetzt FP4 und FP8 nativ fuer maximale AI-Performance.

Beispiel

FP8-Training kann die Geschwindigkeit gegenueber BF16 verdoppeln.