جواب «All Tracks: Is It Fair to Every Group?» چالش 6 از جلسهی 79
سؤال
برای همهی مسیرها. RESULTS نتیجهی آزمون است همراه با گروه هر نمونه (مثلاً نقاشیهای گروه ما و کلاس دیگر). تابع by_group(results) دقت هر گروه را (درصد) برگرداند. برای هر گروه <group>: <right>/<n> = <pct>% چاپ کن، بعد فاصلهی بیشترین و کمترین درصد، و اگر فاصله بیشتر از 20 واحد درصد بود، warning: the model is much worse for <group>. خروجی:other class: 5/8 = 62%our group: 9/10 = 90%gap 28 pointswarning: the model is much worse for other class
راهنما
دو دیکشنری بشمار: total[g] و right[g]؛ بعد {g: 100 * right[g] / total[g] for g in total}. برای چاپ تعداد هم لازمشان داری، پس میتوانی (right, n) هم برگردانی. فاصله: max(...) - min(...)؛ بدترین گروه: min(acc, key=acc.get).
یک جواب درست
RESULTS = [ # (group, was the model right?)
("our group", True), ("our group", True), ("our group", True), ("our group", True), ("our group", True),
("our group", True), ("our group", True), ("our group", True), ("our group", True), ("our group", False),
("other class", True), ("other class", False), ("other class", True), ("other class", False),
("other class", True), ("other class", False), ("other class", True), ("other class", True),
]
def by_group(results):
total, right = {}, {}
for group, ok in results:
total[group] = total.get(group, 0) + 1
right[group] = right.get(group, 0) + ok
return {g: (right[g], total[g], 100 * right[g] / total[g]) for g in total}
acc = by_group(RESULTS)
for group in sorted(acc):
r, n, pct = acc[group]
print(f"{group}: {r}/{n} = {pct:.0f}%")
pcts = {g: acc[g][2] for g in acc}
gap = max(pcts.values()) - min(pcts.values())
print(f"gap {gap:.0f} points")
if gap > 20:
print("warning: the model is much worse for", min(pcts, key=pcts.get))
اول خودت امتحان کن؛ جوابهای دیگر هم قبول است. برگرد و خودت حلش کن