Meta-Evaluation of the Impact Assessment Reports of the Minas Comunica II Program. 2022 Cycle
DOI:
https://doi.org/10.36517/aval.v13i.96490Keywords:
Meta-Evaluation of Public Policies, Impact Assessment Reports of the Minas Comunica II Program, Utility CategoryAbstract
The evaluation of public policies is an essential tool for improving government management, ensuring transparency, and guiding evidence-based decisions. Meta-evaluation aims to assess the quality of evaluations carried out, ensuring that they meet technical criteria and serve the interests of stakeholders. The objective of this study was to conduct a meta-evaluation of the Impact Assessment Reports of the Minas Comunica II Program, a component of the Annual Report on Commitment to Public Value in Minas Gerais – 2022 Cycle. The methodology adopted was based on the standards of the “Utility” category defined by the Joint Committee on Standards for Educational Evaluation (JCSEE), using a checklist to verify the degree of compliance with the standards. Although the evaluation has strengths, there are still weaknesses in meeting social demands and in explaining values and purposes. The study reinforces the importance of meta-evaluation as a tool for improving evaluation practices in the public sector.
References
AGUIAR, Nádia Maria Costa Bastos de. de. Meta-avaliação: caminhos para o aperfeiçoamento de práticas avaliativas no Sistema de Ensino Naval. Rio de Janeiro, 2013. Tese (Doutorado em Educação) - Faculdade de Educação, Universidade Federal do Rio de Janeiro, Rio de Janeiro, 2013.
ALVIRA, Francisco Martín. Metodología de evaluación de programas. Madrid: Centro de investigaciones sociológicas. 2002.
ARRETCHE, Marta Teresa da Silva. Uma contribuição para fazermos avaliações menos ingênuas. In: BARREIRA, M. C. R.; CARVALHO, M. C. B. de (Orgs.). Tendências e perspectivas na avaliação de políticas sociais. São Paulo: IEE/PUC-SP, 2001.
BELLONI, Isaura; MAGALHÃES, Heitor de; SOUZA, Luiz Carlos de. Metodologia de avaliação de políticas públicas: uma experiência em educação profissional. 4. ed. São Paulo: Cortez, 2001
CAVALCANTI, Paula Arcoverde. Sistematizando e comparando os enfoques de avaliação e de análise de políticas públicas: uma contribuição para a área social. 2007. 301 f. Tese (Doutorado em Educação) – Faculdade de Educação da Universidade Estadual de Campinas, Campinas, 2007.
DIENER, Ed. Subjective well-being in cross-cultural perspective. Em G. Hector (Ed.), Key issues in cross-cultural psychology: selected papers from the Twelfth International Congress of the International Association for Cross-Cultural Psychology. San Diego: Academic Press, 1996.
ELLIOT, Ligia Gomes. Meta-avaliação: das abordagens às possibilidades de aplicação. Ensaio: Avaliação e Políticas Públicas em Educação, Rio de Janeiro, v. 19, n. 73, p. 1-23, out. 2011.
GARCIA, José Carlos. Avaliação e aprendizagem na educação superior. Estudos em Avaliação Educacional, 20 (43), 201-213. 2009.
JOINT COMMITTEE ON STANDARDS FOR EDUCATIONAL EVALUATION - JCSEE. Checklist of the program evaluation standards statements. 2018. Disponível em: https://wmich.edu/evaluation/checklists. Acesso em 10 abr. 2024.
LETICHEVSKY, Ana Carolina et al. La Categoría precisión en la meta-evaluación: aspectos prácticos y teóricos en un nuevo enfoque. Ensaio: aval. pol. públ. educ., Rio de Janeiro, v. 13, n. 47, p. 255-268, jun. 2005. Disponível em: http://educa.fcc.org.br/scielo.php?script=sci_arttext&pid=S0104-40362005000200008&lng=pt&nrm=iso. acessos em 04 mar. 2024
MINAS GERAIS. Fundação Joao Pinheiro (FJP). Primeiro Relatório Anual de Compromisso com o Valor Público de Minas Gerais - Avaliação de Políticas Públicas Ciclo 2022. SAPP-MG, NIMA-FJP, CGE-MG. 2023a
MINAS GERAIS. Fundação Joao Pinheiro (FJP). Avaliação de Impacto - Minas Comunica II. Sumário Executivo. SAPP-MG, NIMA-FJP, CGE-MG, Equipo de técnica de avaliação. 2023b
MINAS GERAIS. Fundação Joao Pinheiro (FJP). Avaliação de Impacto - Minas Comunica II. Relatório Final. SAPP-MG, NIMA-FJP, CGE-MG, Equipo de técnica de avaliação, 2023c
SCRIVEN, Michael. Evaluation thesaurus (4th ed.). Sage Publications, Inc. 199.
SCRIVEN, Michael. Key evaluation checklist. Evaluation Checklist Project, p. 01-22, 2007.
SCRIVEN, Michael. Key evaluation checklist. Retrieved January 22, 2009, from the Western Michigan University, 2007. Disponível em: http://www.wmich.edu/evalctr/checklists/ kec_feb07.pdf. Acesso em: 08 mar. 2024.
SECCHI, Leonardo S. Políticas Públicas: conceitos, esquemas de análise, casos práticos. 2° Ed. São Paulo: Cengage Learning. 2013.
STUFFLEBEAM, Daniel Leroy.; SHINKFIELD, Anthony L. Evaluación sistemática: guía teórica y práctica. Trad. Carlos Losilla. Barcelona: Paidós, 1987.
STUFFLEBEAM, Daniel Leroy. Meta-Evaluation. Journal Of Multidisciplinary Evaluation, Kalamazoo, EUA, v. 7, n. 15, p. 99-158, fev. 2011. Originally published as Papes #3, Occasional Paper Series, December, 1974.
STUFFLEBEAM, Daniel Leroy Meta-Evaluation. Journal Of Multidisciplinary Evaluation, Kalamazoo, EUA, v. 7, n. 15, p. 99-158, fev. 2011. Originally published as Papes #3, Occasional Paper Series, December, 1974.
WEISS, Carol Hirschon. Evaluating: methods for studying programs and policies. New Jersey: Prentice Hall - Englewood Clifs, 1998.
WORTHEN Blaine Robert. SANDERS James R. Program Evaluation: Alternative Approaches and Practical Guides. Editora Longman Pub Group; 2ª edição Capa comum 558 páginas. 1997.
YARBROUGH, Daniel B. et al. (orgs.). The program evaluation standards: a guide for evaluators and evaluation use. 3ª Ed. Los Angeles: SAGE, 2011.
Downloads
Published
Issue
Section
License
Copyright (c) 2026 Julio Alfredo Racchumi Romero
This work is licensed under a Creative Commons Attribution-NonCommercial 4.0 International License.
