FGV — Auditor de Controle Externo - Área Administrativa - Ciência de Dados — Ciência de dados e tecnologia — 2024

Enunciado

Modelos de aprendizagem de máquina são, em geral, avaliados com métricas que indicam os quão poderosos e relevantes eles são. Entre exemplos de métricas de avaliação utilizadas para modelos de classificação binária, podemos citar: • Taxa de precisão (razão entre verdadeiros positivos e o total dos verdadeiros positivos e falsos positivos); • Taxa de sensibilidade (razão entre verdadeiros positivos e o total dos verdadeiros positivos e falsos negativos, também conhecida por recall); e • Escore F1 (F1-score, também chamado de F-measure), que relaciona as taxas de precisão e de sensibilidade. Suponha a existência de um modelo de classificação binária cuja taxa de precisão é de 90,00% e cuja taxa de sensibilidade é de 75,00%. Utilize aproximação de duas casas decimais. O escore F1 referente a esse modelo é

Alternativas

  1. A)

    41,42%.

  2. B)

    81,82%.

  3. C)

    82,15%.

  4. D)

    82,50%.

  5. E)

    82,84%.

Gabarito e comentário

Resposta correta: B

Gabarito definitivo da FGV: alternativa B. O F1 é a média harmônica de precisão e sensibilidade: 2PR/(P+R). Com P=0,90 e R=0,75, resulta 1,35/1,65=0,81818, ou 81,82%.

Questões relacionadas