Abordagem multicritério para avaliação do programa “Município Agro – Ranking Paulista”

Abstract

O Programa Cidadania no Campo: Município Agro – Ranking Paulista, desenvolvido pela Secretaria de Agricultura e Abastecimento do Estado de São Paulo, constitui uma política pública voltada à promoção do desenvolvimento rural sustentável, por meio da classificação, certificação e premiação dos municípios paulistas. O sistema de avaliação baseia-se em um conjunto multidimensional de critérios, envolvendo diretivas, capacitações e ações proativas, com pontuações atribuídas por diferentes avaliadores, o que confere complexidade ao processo, especialmente diante de possíveis inconsistências e subjetividades. Nesse contexto, o presente estudo tem como objetivo analisar a robustez, a convergência e a sensibilidade do ranking oficial do ciclo 2023/2024, bem como avaliar sua adequação por meio da aplicação de métodos de tomada de decisão multicritério. A pesquisa caracteriza-se como aplicada, de abordagem quantitativa, com natureza descritiva e exploratória, utilizando dados secundários de caráter documental. Foram empregados os métodos CRITIC, TOPSIS e PROMETHEE II, considerando cenários com 10 diretivas e com 13 variáveis. Os resultados indicaram elevada convergência entre o ranking oficial e os rankings multicritério, especialmente quando mantidos os pesos institucionais do programa. As correlações ordinais de Spearman e Kendall evidenciaram forte preservação da hierarquia global dos municípios, enquanto as análises TopK demonstraram estabilidade entre os municípios mais bem posicionados. Como contribuição, a pesquisa demonstra a aplicabilidade de métodos multicritério e métricas de robustez na avaliação de políticas públicas territoriais. Entre as limitações, destacam-se a utilização de dados de um único ciclo avaliativo e a predominância de análises quantitativas. Para estudos futuros, recomenda-se a realização de análises longitudinais e a integração de abordagens qualitativas e técnicas de Inteligência Artificial. Conclui-se que o programa apresenta consistência metodológica, embora sensível às escolhas de critérios, pesos e métodos de agregação.

The Cidadania no Campo Program: Município Agro – Ranking Paulista, developed by the São Paulo State Secretariat of Agriculture and Supply, is a public policy designed to foster sustainable rural development through the evaluation, certification, and recognition of municipalities in the State of São Paulo. The ranking system is based on a multidimensional set of guidelines and evaluation criteria, whose methodological complexity requires analytical approaches capable of assessing its robustness, stability, and sensitivity. In this context, this study aimed to evaluate the adequacy and impact of the program's ranking system through the integrated application of Multi-Criteria Decision Analysis (MCDA) methods, examining the convergence between the official ranking and alternative rankings, as well as the effects of different aggregation methods and weighting schemes. This applied research adopted a quantitative, descriptive, and exploratory approach based on documentary data from the 2023/2024 evaluation cycle. For the analysis, a computational framework was developed in Python to generate rankings using the CRITIC, TOPSIS, and PROMETHEE II methods. The results revealed a high degree of convergence between the official ranking and the MCDAbased rankings, particularly when the program's institutional weights were preserved. Spearman's and Kendall's rank correlation coefficients indicated strong preservation of the municipalities' hierarchy, while Top-K analyses confirmed high stability among the highestranked municipalities. However, changes in criteria weights and aggregation methods produced significant reclassifications, particularly among municipalities occupying intermediate ranking positions. As a contribution, this study demonstrates the applicability of MCDA to the evaluation of complex public policies and presents a replicable methodological framework for the analysis of governmental ranking systems. It is concluded that the Município Agro Program exhibits high methodological consistency, although its ranking is sensitive to weighting and aggregation choices, highlighting opportunities to strengthen transparency and evidence-based decision-making.