RU

Каталог из 83 форматов с плавающей точкой, который сам себя проверяет

Если вы ловили расхождение точности между двумя реализациями одной сети, то знаете это чувство: один matmul на двух устройствах даёт разные числа, и н…

числовые форматыfloating pointFP8bfloat16GoldenFloatIEEE 754квантизацияRTLpositмашинная точность
Habr
RU

Линейка для чисел: как я собрал каталог из 83 форматов с плавающей точкой — и почему он всё время «не сходится»

Любой, кто дебажил несовпадение точности между двумя реализациями нейросети, знает это чувство: один и тот же matmul на двух устройствах даёт разный р…

числовые форматыfloating pointGoldenFloatbfloat16FP8P3109RTLквантизациямашинное обучениечисла с плавающей точкой
Habr