PAES, UMA CLASSIFICADOR DE EDITAIS LICITATÓRIOS SEGUNDO CRITÉRIOS DE SUSTENTABILIDADE

Resumo

O presente trabalho tem por objetivo propor um analisador e classificador de editais de compras públicas sustentáveis, denominado PAES (Proposta de Analisador de Editais Sustentáveis). A sua performance será comparada com o desempenho do modelo de linguagem Gemini em diferentes configurações. Como estudo de caso foram utilizados vinte cinco editais de aquisição de materiais elétricos, área de elevada relevância para a sustentabilidade devido ao seu impacto no consumo energético e na geração de resíduos. A metodologia de avaliação consistiu na definição de um Padrão Ouro, contra o qual foram avaliadas as notas geradas tanto pelo PAES quanto pelo Gemini. O PAES atribui notas aos editais com base em dez critérios de sustentabilidade ponderados por pesos previamente definidos (eficiência energética, normas técnicas, certificações, resíduos, responsabilidade social, entre outros). Para mensuração da performance, utilizaram-se métricas contínuas de erro (MAE e RMSE) e métricas de classificação (Precisão, Recall, Acurácia e F1-score). Os resultados indicaram que o PAES apresentou desempenho consistentemente superior, com valores constantes de MAE (0,125) e RMSE (0,156), independentemente do número de editais analisados. Em contraste, o Gemini demonstrou degradação de desempenho à medida que a quantidade de documentos aumentou, além de maior variabilidade entre cenários. Nas métricas de classificação, o PAES alcançou F1-score de 0,8462, superando significativamente as variantes do Gemini, que oscilaram entre 0 e 0,5263. Conclui-se que o PAES oferece maior robustez, previsibilidade e auditabilidade, características fundamentais para a aplicação de inteligência artificial em auditoria e controle de contratações públicas.