Краткий ликбез по ML метрикам и их связи с бизнес-метриками

Павел Филонов, Data Science Manager в Kaspersky Важным шагом в Data Science является налаживание общего языка с бизнесом и одна из хороших возможностей для этого - научиться сопоставлять *метрики бизнеса и ML моделей*. На примере задачи сортировки инцидентов на ложные и истинные, рассмотрим какими метриками могут оперировать DS, а какие важны для бизнеса, раскроем смысл таких терминов как FP, TP, Precision, Recall, ROC-AUC и как их можно пересчитать в бизнес-метрики.