A正解
公平性メトリクス
正解。公平性メトリクスは、集団間で予測結果が公平かどうかを数値で測る指標の総称です(例: 集団間の正解率の差など)。バイアスの定量的な評価に使います。
ある企業が、与信モデルの公平性レビューの結果を、経営層や監査人へ定量的に報告する形式を決めています。モデルの予測結果が、集団間で公平かどうかを数値で測るために使う指標を総称して何と呼びますか。
公平性を数値で測る指標の総称を選ぶ問題。
公平性メトリクス
正解。公平性メトリクスは、集団間で予測結果が公平かどうかを数値で測る指標の総称です(例: 集団間の正解率の差など)。バイアスの定量的な評価に使います。
精度メトリクス
精度メトリクス(正解率・F1 スコアなど)は、モデルの予測がどれだけ当たっているかを測る指標です。
全体の性能の話であり、集団間の公平さを測る指標の総称ではないため不正解です。
回帰メトリクス
回帰メトリクス(RMSE など)は、数値予測の誤差を測る指標です。
予測誤差の話であり、集団間の公平さの指標ではないため不正解です。
ドリフトメトリクス
ドリフトメトリクスは、入力データの分布が学習時からどれだけずれたかを測る指標です。
運用中の変化の話であり、集団間の公平さの指標ではないため不正解です。
正解の『公平性メトリクス(フェアネス指標)』を押さえます。
・集団間で予測結果が公平かどうかを数値で測る指標の総称(例: 集団間の正解率や陽性率の差)。
・バイアスを定量的に評価でき、SageMaker Clarify などで算出できる。