Cebraspe 2024 · Avaliação de Políticas Públicas

Question

Tendo em vista o conceito de contrafactual nas avaliações de
impacto, julgue os itens que se seguem.
Em uma avaliação de impacto experimental de um programa
que oferece cursos de qualificação profissional para jovens
de 18 a 24 anos de idade, o contrafactual pode ser
diretamente observado por meio da comparação entre a taxa
de desemprego observada entre os indivíduos que se
inscreveram nos cursos oferecidos (grupo de tratamento) e
aqueles que, mesmo sendo elegíveis, deixaram de se
inscrever (grupo de controle).

C) Certo
E) Errado

Accepted Answer

Gabarito oficial: Errado. O item está **errado** porque confunde um grupo de comparação qualquer com um **contrafactual válido**. Em avaliação de impacto, o contrafactual é a situação hipotética que mostraria o que teria acontecido com os beneficiários **caso eles não tivessem recebido o tratamento**. O problema central é que esse resultado não pode ser observado diretamente para as mesmas pessoas ao mesmo tempo: ou o jovem fez o curso, ou não fez.

Em avaliações **experimentais**, o contrafactual é estimado por meio de **alocação aleatória** entre grupo de tratamento e grupo de controle. A aleatorização busca garantir que, em média, os grupos sejam semelhantes em características observáveis e não observáveis, de modo que a diferença posterior nos resultados possa ser atribuída ao programa. Portanto, o contrafactual não é “diretamente observado”; ele é **construído ou estimado** a partir de um grupo de controle adequadamente formado.

A comparação proposta no item é problemática porque separa quem **se inscreveu voluntariamente** de quem, embora elegível, **não se inscreveu**. Essa diferença pode refletir fatores como motivação, escolaridade, disponibilidade de tempo, interesse em qualificação, rede de apoio ou necessidade econômica. Isso gera **viés de seleção**: os inscritos podem ser sistematicamente diferentes dos não inscritos antes mesmo do programa começar.

Assim, a taxa de desemprego dos não inscritos não representa necessariamente o que teria acontecido com os inscritos caso eles não tivessem feito o curso. Para a Cebraspe, a chave está em perceber que o contrafactual, especialmente em avaliação de impacto, exige uma estratégia metodológica capaz de isolar o efeito causal do programa. Sem aleatorização ou outro método robusto de identificação causal, a simples comparação entre inscritos e não inscritos não fornece um contrafactual válido.

Avaliação de Políticas Públicas — Cebraspe 2024

Mais questões de Avaliação de Políticas Públicas

Fonte