Один із методів, який допоможе оцінити прогнози моделі на предмет об’єктивності, – це порівняння коефіцієнта вступу для групи більшості й групи меншості. Якщо обидва коефіцієнти вступу рівні, тоді прогнози моделі свідчать про демографічну рівність, тобто шанс студента бути прийнятим в університет не залежить від групи населення.
Припустімо, що модель вступу приймає 16 кандидатів із групи більшості й 4 з групи меншості. Рішення моделі відповідають принципу демографічної рівності, оскільки коефіцієнт прийняття кандидатів із групи як більшості, так і меншості становить 20%.
У таблиці, наведеній нижче, указано кількість відхилених і прийнятих кандидатів із рисунка 2.
Група більшості | Група меншості | |
---|---|---|
Прийняті | 16 | 4 |
Відхилені | 64 | 16 |
Коефіцієнт прийняття | 20% | 20% |
Вправа. Перевірте свою інтуїцію
Приймальна комісія університету вирішує, чи використовувати демографічну рівність як показник оцінювання об’єктивності для своєї моделі. Їй потрібні ваші поради щодо переваг і недоліків цього підходу. Визначте одну перевагу й один недолік оцінювання прогнозів моделі за допомогою показника демографічної рівності.
Прочитайте розділ Переваги й недоліки, наведений нижче, щоб дізнатися про основні плюси й мінуси показника демографічної рівності.
Переваги й недоліки
Основна перевага принципу демографічної рівності для нашого прикладу про вступ полягає в тому, що він гарантує, що групи більшості й меншості буде представлено в класі прийнятих студентів у тій же пропорції, що й у пулі кандидатів. Тобто якщо 80% кандидатів із пулу абітурієнтів належать до групи більшості й 20% – до групи меншості, принцип демографічної рівності гарантує, що в групі вступників також буде 80% студентів із групи більшості й 20% із групи меншості.
Проте принцип демографічної рівності має один суттєвий недолік: він не враховує розподіл прогнозів для кожної групи населення (кількість студентів, класифікованих як кваліфіковані, як порівняти з некваліфікованими), коли оцінює того, як слід розподілити 20 місць для вступників.
Повернімося до складу нашого пулу кандидатів. Однак цього разу ми класифікуватимемо кандидатів не лише за групою населення, а й за тим, яку оцінку модель дала кожному кандидату: "кваліфікований" чи "некваліфікований".
У таблиці, наведеній нижче, указано кількість відхилених і прийнятих кандидатів із рисунка 3.
Група більшості | Група меншості | |||
---|---|---|---|---|
Прийняті | Відхилені | Прийняті | Відхилені | |
Кваліфіковані | 16 | 19 | 4 | 11 |
Некваліфіковані | 0 | 45 | 0 | 5 |
Тепер підрахуймо коефіцієнти прийняття кваліфікованих студентів для обох груп.
Попри те, що обидві групи мають загальний коефіцієнт прийняття 20%, що відповідає принципу демографічної рівності, коефіцієнт прийняття для кваліфікованих студентів із групи більшості становить 46%, а для кваліфікованих студентів із групи меншості – лише 27%.
Якщо розподіл значень важливої мітки (наприклад, такої як "кваліфікований") суттєво відрізняється для обох груп, принцип демографічної рівності може не бути оптимальним для оцінки об’єктивності. У наступному розділі ми розглянемо інший показник об’єктивності, рівність можливостей, який враховує ці відмінності.