キャリブレーション(calibration)とは、モデルが出力した確率値が実際の結果の頻度とどの程度一致しているかを指す。たとえば、あるモデルが確率0.8を割り当てた事例のうち実際に約80%が正解であれば、そのモデルはよく較正されている。正誤の割合だけを見る正解率と異なり、キャリブレーションは確率値そのものの信頼性を扱う。
分類モデルの確率出力をしきい値と比較して自動処理か人間によるレビューかを決めるシステムで重要になる。キャリブレーションはモデルごとに異なるため、あるモデルで決めたしきい値を別のモデルにそのまま持ち込むことはできず、通常は正解付きの評価データで測定する。計測分野では、測定機器の目盛りを基準値に合わせる作業を指す。