Desenvolvendo uma comunidade global para avaliação de impacto: Cursos online do J-PAL

Este é o terceiro artigo em uma série ilustrando histórias de como os cursos de treinamento do J-PAL construíram novas parcerias de política e pesquisa e fortaleceram as já existentes para promover a tomada de decisões baseada em evidências. O primeiro artigo da série destaca dois exemplos significativos de participantes do curso Avaliando Programas Sociais do J-PAL, e o segundo artigo mostra como cursos personalizados fortaleceram parcerias governamentais na Indonésia e no Egito.

Os cursos online do J-PAL ampliam o alcance de nossos materiais de treinamento em avaliação de impacto para públicos em todo o mundo e permitem que participantes acessem o conteúdo de acordo com sua própria agenda. Estas ofertas incluem o curso online Avaliando Programas Sociais, que reflete o conteúdo do nosso treinamento presencial. Através de uma série de módulos integrados e interativos, o curso fornece à participantes uma compreensão profunda sobre avaliações aleatorizadas e como elas são projetadas em contextos reais. Participantes mergulham em palestras de professores e professoras afiliados e equipe sênior do J-PAL, estudos de caso baseados em projetos de pesquisa da rede J-PAL e oportunidades de compartilhar ideias e colaborar por meio do fórum de discussão do curso.

Atualmente, o J-PAL oferece a versão online do curso Avaliando Programas Sociais em inglês, espanhol e português, com planos de adicionar conteúdo em francês no futuro. Cada curso é gratuito, com a opção de obter um certificado de conclusão mediante uma pequena taxa, aberto a qualquer pessoa e normalmente tem duração de vários meses. Desde o lançamento do primeiro desses cursos online em 2014, a cada ano incorporamos conteúdos melhorados e atualizados para refletir os desenvolvimentos no campo e o feedback de participantes sobre o que é mais útil em seu trabalho.

Esses cursos atingiram dezenas de milhares de pessoas de 181 países desde seu lançamento. Mais de 11.000 participantes receberam certificados de conclusão, e a comunidade global do curso continua a crescer. Este artigo se aprofunda em três exemplos de como esses cursos online ajudaram participantes ao redor do mundo a fortalecer a cultura do uso de evidências em suas organizações e informar avaliações reais.

Aplicando lições à avaliação de programas educacionais nas Filipinas

Juvhan Rebangcos se inscreveu no curso online Avaliando Programas Sociais em 2022 para construir uma comunidade de prática de monitoramento e avaliação no Teach for the Philippines (TFP), onde ele é gerente de avaliação de dados e impacto, apoiando a missão da organização de garantir que todas as crianças filipinas se beneficiem de uma educação de alta qualidade. Ele observou que o aprendizado do curso o equipou "com o know-how de estimar impacto social, que é fundamental para medir e validar os resultados de estudantes", e que as melhores práticas do mundo real compartilhadas ao longo do curso são especialmente aplicáveis ao trabalho dele e de seus colegas.

O TFP conduziu um pequeno estudo piloto para testar o programa modular online da organização, voltado para alfabetização e aritmética remediativas, durante a pandemia da Covid-19. Depois que Juvhan concluiu o curso Avaliando Programas Sociais online, ele utilizou o que aprendeu no curso para refinar o design da avaliação, abordar desafios como desistência e baixa frequência, e expandir o tamanho da amostra para a próxima avaliação do TFP, testando o impacto da implementação do mesmo programa com aprendizado presencial. Ele lembra que recorrer ao curso foi sua bússola ao gerenciar o estudo no início deste ano e também forneceu novas ideias para futuras avaliações do impacto do TFP.

Ele diz: "Daqui para frente, sabemos que avaliações aleatorizadas serão uma opção preferencial sempre que estivermos testando um piloto, buscando inovações no programa ou validando resultados. Além dos resultados que poderemos usar no futuro, podemos aprender muito com nossa experiência ao conduzi-las." Juvhan planeja continuar a aplicar lições do curso para fortalecer a cultura de uso de evidências em sua organização.

“O curso me preparou para projetar configurações experimentais, lidar com possíveis ameaças à pesquisa e navegar pela ética de nossas atividades de pesquisa. Mais importante ainda, minha experiência no curso me ajudou a criar histórias informadas por dados, baseadas em evidências e convincentes para demonstrar o impacto eventual de nosso trabalho como organização.”
- Juvhan Rebangcos, Gerente de Avaliação de Dados e Impacto, Teach for the Philippines

Democratizando o conhecimento para informar a tomada de decisão em toda a América Latina

O escritório do J-PAL para América Latina e Caribe (J-PAL LAC) tem dois cursos online em espanhol e português com objetivo de democratizar o acesso a estudantes na região. O "Evaluación de Impacto de Programas Sociales", oferecido em espanhol, é liderado pelo diretor científico da J-PAL LAC, Francisco Gallego. O "Avaliação de Impacto de Programas e Políticas Sociais" é oferecido em português, em parceria com a Escola Nacional de Administração Pública (ENAP). Os cursos online do J-PAL LAC fortalecem a formação para parceiros de língua espanhola e portuguesa, ajudando participantes a se envolverem com evidências para mudanças políticas impactantes e fomentando uma cultura de evidência e avaliação. Estudantes passados destacaram o valor prático do material para o design, implementação e avaliação de programas na região, bem como a eficaz combinação de teoria e prática. Os cursos também servem como uma introdução ao trabalho do J-PAL e um ponto de partida para futuras parcerias.

Virgílio Pires, auditor fiscal do Ministério do Trabalho, conectou-se com o J-PAL para explorar oportunidades de avaliação após concluir o curso em 2021. Isso levou a uma parceria com os pesquisadores afiliados do J-PAL, Jeanne LaFortune e José Tessada, em uma avaliação aleatorizada medindo o impacto das intervenções de segurança do trabalhador, com apoio da Iniciativa de Empregos e Oportunidades do J-PAL LAC no Brasil. A avaliação está estudando o possível efeito do treinamento de segurança virtual em relação a inspeções de segurança presenciais no bem-estar de trabalhadores e trabalhadoras no setor de manufatura brasileiro, além de investigar a relação custo-benefício de visitas tradicionais presenciais em comparação com treinamentos virtuais menos onerosos.

"O curso foi crucial para despertar meu interesse na avaliação de políticas públicas. A partir deste curso, percebi que é possível realizar uma avaliação de impacto de projetos em inspeção do trabalho... Assim, surgiu nossa proposta de realizar uma avaliação focada na prevenção de acidentes e doenças relacionadas ao trabalho. Além de fornecer conhecimento sobre [avaliação de impacto], o curso também me apresentou ao trabalho do J-PAL, do qual eu não tinha conhecimento anterior. Tivemos a sorte de apresentar o projeto ao J-PAL, e a [pesquisadora afiliada do J-PAL] Jeanne Lafortune aceitou porque estava alinhado com tópicos de pesquisa que ela já estava explorando."
                                   - Virgílio Pires, Auditor Fiscal do Ministério do Trabalho 

Direções Futuras: Personalizando o aprendizado híbrido para parcerias de treinamento Francófono

Em 2022, o J-PAL Europa desenvolveu uma versão em francês do curso online Avaliando Programas Sociais em parceria com o Laboratório de Emprego do Marrocos para um treinamento híbrido com parceiros governamentais no Marrocos. O desenvolvimento do curso foi liderado pelo Diretor de Treinamento do J-PAL Europa, Ilf Bencheikh, juntamente com os pesquisadores afiliados J-PAL, Elise Huillery, William Parienté e Roland Rathelot. O curso, "Evaluer les Programmes Sociaux", foi usado pela primeira vez em um formato híbrido com o Tribunal de Contas Marroquino no início de 2023. Cerca de trinta pessoas seguiram os módulos do curso online por um período de três semanas. Após concluir o curso online, elas participaram de três sessões presenciais de meio dia, onde exploraram determinados aspectos com mais profundidade, interagiram com a equipe de ensino e obtiveram respostas para suas perguntas. Essa parceria demonstra o potencial de cursos híbridos personalizados, que combinam a acessibilidade do aprendizado assíncrono para módulos fundamentais com conteúdo presencial personalizado para um setor, área geográfica ou nível de detalhe técnico específico.

Embora "Evaluer les Programmes Sociaux" ainda não esteja aberto ao público geral, a equipe do J-PAL Europa continua personalizando e incorporando o material do curso em parcerias de treinamento, com eventos futuros planejados na Costa do Marfim. Esperamos incorporar estes conteúdos em cursos online abertos do J-PAL no futuro.

Outro novo curso online, baseado no "Avaliando Programas Sociais" e cuidadosamente projetado para as necessidades de formuladores e formuladoras de políticas educacionais e profissionais na França, está atualmente sendo desenvolvido pela equipe de Inovação, Dados e Experimentos em Educação do J-PAL Europa. O curso será lançado nos próximos meses e se juntará ao conjunto de cursos do J-PAL, marcando uma nova área de inovação em cursos online personalizados para apoiar a avaliação de impacto e o uso de evidências por região e setor - acompanhe nossa página de cursos online para atualizações uma vez que o curso estiver disponível. 

Junte-se a uma comunidade global de práticas

Spencer Obiero, um estudante do Bates College de Nairobi, Quênia, que completou o curso online "Avaliando Programas Sociais" do J-PAL no início deste ano, disse que o curso o lembrou de uma clássica equipe de super-heróis: “Eu gosto de como diferentes professores, como os super-heróis da Marvel, Os Vingadores, foram reunidos para ensinar este curso. É incrível!"

Cursos online, como filmes de super-heróis, reunem um grande elenco com origens diversas para enfrentar problemas críticos e complexos. Com o curso online "Avaliando Programas Sociais", o J-PAL combina expertise regional a uma rede mundial para apoiar o trabalho de formuladores e formuladoras de políticas, profissionais e gerentes de programas em entender e medir impacto. No entanto, o cerne dos cursos online do J-PAL é o grupo dedicado de estudantes que continuamente compartilham seus pensamentos e experiências de diferentes contextos, aprimorando os cursos - e o aprendizado da comunidade - com suas ideias.

Tem interesse em se inscrever para um dos cursos online do J-PAL? "Avaliando Programas Sociais" estará aberto para inscrições até 1 de dezembro na plataforma online MITx, e você pode visitar nossa página de cursos online para ver a lista completa de nossos próximos cursos. Para se aprofundar ainda mais em tópicos de economia e análise de dados, considere se inscrever em um dos cursos semestrais do nosso programa MicroMasters em Dados, Economia e Design de Políticas.