Sistema Fuzzy para Avaliação de Desempenho de Programas de Governo
Data
2018
Autores
Título da Revista
ISSN da Revista
Título de Volume
Editor
Instituto de Tecnologia
Resumo
Este trabalho implementou um Sistema Fuzzy de Avaliação de Programas de Governo, avaliação do tipo mid-term, apresentando melhorias em relação ao sistema atual, denominado de Sistema de Controle Preventivo – Monitoramento e Avaliação de Programas (SICONP-MAP), no trato de pontos de singularidade e nebulosidade, com potencial possibilidade de tratamento de incompletude. A modelagem foi implementada nas plataformas JuzzyOnline e RProject, onde ambas avaliaram o Programa “Segurança pela Paz” e apresentaram 99.99% de similaridade, 0.101914 para a máxima diferença dos valores residuais, 0.003688 para a mediana, e 0.035 de desvio padrão. Estas métricas comprovaram não haver diferenças entre as implementações com nível de significância menor do que 0.1%, onde infere-se que a modelagem é robusta. Ratificada a robustez comparou-se o resultado da implementação com o SICONP-MAP, onde o Sistema Fuzzy apresentou acurácia de 88.88%, correspondendo a 24 de 27 ações avaliadas em conformidade à realidade, contra 44.44% de acurácia do SICONP-MAP associadas a 12 ações com avaliações aderentes à realidade. Considerando que o Sistema Fuzzy aponta a distribuição das ações estratificadas no domínio da avaliação, ou seja, a característica de desempenho do Programa com base nas ações, procedeu-se observando a distribuição da despesa realizada no domínio da avaliação, e em seguida verificou-se em que medida a primeira distribuição explica a distribuição da despesa. As sequências apresentaram 94.82% de similaridade, 0.029291 para a máxima diferença dos valores residuais, 0.008312 para a mediana, e 0.007549 de desvio padrão, confirmando uma significância menor que 0.1%. Apesar da alta correlação, a métrica da despesa, a qual aponta para a qualidade do gasto, evidenciou o risco de classificar 43,64% da despesa como alto desempenho, cujas ações estavam inseridas como suspeitas de “Falha de Planejamento”. A implementação pode ser estendida a todas as esferas de governo, aplicando-se diretamente a qualquer Programa que não apresente incompletude, caso contrário faz-se necessário o pré-tratamento dos dados.
Abstract
This work implemented a Fuzzy System of Evaluation of Government Programs, evaluation of the mid-term type, presenting improvements in relation to the current system, called Preventive Control System - Monitoring and Evaluation of Programs (SICONP-MAP), in the treatment of points of singularity and cloudiness, with potential possibility of incompleteness treatment. The modeling was implemented in the JuzzyOnline and RProject platforms, where both evaluated the "Security for Peace" Program and presented 99.99% similarity, 0.101914 for the maximum difference of the residual values, 0.003688 for the median, and 0.035 for the standard deviation. These metrics showed that there were no differences between the implementations with a level of significance lower than 0.1%, where it is inferred that the modeling is robust. Robustness was compared with SICONP-MAP, where the Fuzzy System presented an accuracy of 88.88%, corresponding to 24 of 27 actions evaluated according to reality, against 44.44% of SICONP's accuracy associated with 12 actions with assessments adhering to reality. Considering that the Fuzzy System points out the distribution of stratified actions in the field of evaluation, i.e., the performance characteristic of the Program based on actions, it was observed the distribution of the expenditure realized in the field of evaluation, and then it was verified to what extent the first distribution explains the distribution of the expense. The sequences presented 94.82% similarity, 0.029291 for the maximum difference of the residual values, 0.008312 for the median, and 0.007549 of standard deviation, confirming a significance lower than 0.1%. Despite the high correlation, the metric of the expense, which points to the quality of the expenditure, evidenced the risk of classifying 43.64% of the expenditure as high performance whose actions were included as suspected of "Planning Failure". The implementation can be extended to all spheres of government, applying directly to any Program that does not present incompleteness, otherwise, it is necessary to pre-treat the data.
Descrição
Palavras-chave
Engenharia de Produção, Simulação por Computador, Política Pública, Avaliação de Programas, Sistemas Difusos
Citação
PEREIRA, Olavo Gomes. Sistema Fuzzy para Avaliação de Desempenho de Programas de Governo. 2018. Dissertação (Mestrado Profissional) – Universidade Federal do Pará, Instituto de Tecnologia, Programa de Pós-Graduação em Engenharia de Processos, 2018.