Vlákno názorů k článku
Vyšla Julia 1.9 od Pavel Tišnovský - Podpora float16 je fajn, pro IP se to...

Podpora float16 je fajn, pro IP se to bude hodit. Btw už má Julia podporu pro bfloat16, který je ještě praktičtější (ML)?

10. 5. 2023, 13:24 editováno autorem komentáře

Je na to jakýsi doplněk:

https://github.com/JuliaMath/BFloat16s.jl

Akorát FP16 jede nativně asi jen na některých ARMech, jinak se řeší softwarově.

Třeba x86 má jen instrukce pro konverzi na float a zpět. Nejsem si jistý, nakolik by se nativní výpočty v 16b vůbec vyplatily.

na FP16 je v avx-512 podpora az v poslednim cpu - Sapphire Rapids

Asi nevyplatily, leda v AVX-512 u novějších CPU (můj předpotopní Tiger Lake FP16 v AVX-512 nemá).

výpočty se asi nevyplatí (kromě AVX-512 s BF18 nebo FP16 setem - ale kdo z nás to má že?), ale spíš pro ukládání třeba právě obrazových dat s velkou dynamikou.

Já mám FP16 v ARMu, ale vlastně jsem to nikdy nepotřeboval.