fp16半精度浮点数

fp16是IEEE 754标准定义的16位半精度浮点格式，由1位符号位、5位指数位和10位尾数位组成。与32位的fp32相比，每个数值占用的内存减半，因此被用于AI模型的训练和推理。与另一种16位格式bf16相比，fp16的数值范围较窄，但尾数位更多，精度更高。

本条目依据AIPOST的文章与广为人知的事实整理。如有错误，请通过更正请求告诉我们。