Sprint 17 – Triagem Inteligente

Período: 09/01/2023 – 26/01/2023

Começamos o ano de 2023 a todo vapor, já planejando a Sprint 17. Traçamos o objetivo de entregar uma versão funcional do sistema para treinamento e uso do LABI FERVO (Laboratório de Inovação – JFPE) e aprimorar o uso de Inteligência Artificial na seleção de classes com base nas petições já separadas e validadas com o auxílio da equipe do laboratório.

Aprimoramos os modelos de ML (Machine Learning) com as petições revisadas e validadas, tivemos também o incremento de mais algumas petições aumentando a nossa base de dados.

A figura a seguir mostra a relação de assuntos (e quantidade de petições) que estão sendo mapeados pelo modelo.

Após testes e verificações de acurácia, validação cruzada e AUC, optamos por fazer o deploy, nesta versão da ferramenta, usando o Classificador RandomForest que se mantém com bons resultados. A escolha do modelo RandomForest foi devido analisar também a validação cruzada, que dentre os modelos, foi o que apresentou mais equilíbrio, com uma média maior que os demais e desvio padrão bem baixo. Isso significa que o modelo é mais estável e tem uma menor tendência a estar enviesado.

Como forma de comparação, neste quadro podemos observar o desempenho dos outros modelos:

Realizamos novas reuniões com a equipe do laboratório para apresentar a nova versão da ferramenta, já contando com melhorias no front-end. E equipe ficou responsável por testar a ferramenta e fazer anotações da experiência, para apontar possíveis falhas na captura de informações e/ou sugestões de melhorias. Essas anotações foram disponibilizadas e já consolidadas com alguns ajustes verificados que ajudarão a melhorar o nosso código, especialmente na captura da Justiça Gratuita e Pedido de Tutela antecipada/urgência.

Finalizamos a Sprint com a expectativa de que os nossos próximos passos no avanço do projeto, sejam:

• Integração com PJe 2x para comparação dos polos;
• Experiência do usuário em outras seccionais;
• Incremento de novas classes para o treinamento (nova versão ML).