uma Inteligência Artificial feminista de monitoramento legislativo

A QuitérIA é uma ferramenta digital de inteligência artificial feminista projetada para analisar, classificar e avaliar proposições legislativas (PLs) com foco nas questões de gênero e direitos das meninas, mulheres e pessoas LGBTQIAPN+. Ela oferece um monitoramento legislativo automatizado e qualificado, que não só identifica PLs, mas também os categoriza e avalia, permitindo uma análise mais precisa e ágil da movimentação legislativa sobre gênero. Esse é o jeito AzMina de transformar a opacidade legislativa em transparência, compartilhando análises essenciais à compreensão do campo no Brasil.

Nossa ferramenta de IA utiliza Processamento de Linguagem Natural (PLN) para coletar, classificar e avaliar os projetos de lei em tramitação no Congresso Nacional, focando em temas como violência contra a mulher, direitos sexuais e reprodutivos e igualdade de gênero. O objetivo é permitir que qualquer pessoa tenha acesso a informações qualificadas e transparentes. De modo especial, auxiliar o trabalho de jornalistas, profissionais de pesquisa, organizações sociais e ativistas dos direitos humanos.

Como funciona?

A QuitérIA foi desenvolvida para automatizar o processo de monitoramento legislativo, com um foco específico na classificação de PLs que abordam direitos das meninas, mulheres, e pessoas LGBTQIAPN+.

Coleta automatizada

A coleta diária de dados das proposições legislativas é feita automaticamente pelo raspador Elas no Congresso usando as APIs da Câmara dos Deputados e do Senado Federal, a partir de palavras-chave relacionadas a gênero e raça. A cada 24h, o bot coleta informações como título, autor, ementa e status, armazenando-as em arquivos CSV de acesso aberto para uso posterior.

Modelos utilizados

A QuitérIA é baseada em um Large Language Model (LLM) ajustado para o contexto legislativo brasileiro e os temas de gênero. O processo de treinamento da IA foi realizado com base em dados rotulados manualmente com a colaboração de organizações da sociedade civil ligadas aos direitos de gênero, provenientes de mais de 1.600 projetos de lei, com abordagem feminista interseccional.

Confira aqui todas as organizações que participaram da anotação de dados.

Os principais modelos utilizados na QuitérIA são:

  • Modelo Congretimbau – Baseado na arquitetura BERT e adaptado para o português, é o modelo de maior desempenho da QuitérIA, alcançando um F1-score de 0.79. Este modelo foi ajustado para classificar PLs com alta precisão em relação a temas como gênero, violência contra a mulher, direitos sexuais e reprodutivos e maternidade.
  • Modelos baseados em BERT e Transformer – A QuitérIA também utiliza modelos como o BERTimbau e o DeBERTina, ambos adaptados para a língua portuguesa, para garantir a precisão na análise de ementas e textos de PLs.

Categorização e Avaliação

A QuitérIA classifica PLs em temas e, em seguida, avalia a desfavorabilidade de cada um, atribuindo uma pontuação de 0 a 1, onde 0 significa totalmente favorável e 1 significa totalmente desfavorável aos direitos das meninas, mulheres e pessoas LGBTQIAPN+.

A metodologia para avaliar a desfavorabilidade é baseada nos seguintes critérios:

  1. Análise de ementas e inteiro teor, quando disponível: A IA lê as ementas e o texto completo de cada proposição para identificar os pontos que promovem ou prejudicam os direitos dos grupos envolvidos.
  2. Avaliação de impacto: como foi treinado a partir do trabalho humano, o modelo também usa a compreensão do impacto de cada proposição nos direitos de gênero, considerando a diversidade de experiências das mulheres, como raça, classe social, identidade de gênero, orientação sexual, entre outras.

Validação humana

Embora a classificação e avaliação dos PLs sejam feitas pela QuitérIA, é crucial que os resultados passem por validação humana, como previsto na política de uso de IA d'AzMina, para garantir que a IA esteja alinhada à nossa missão. A equipe do Instituto AzMina, ao lado de XX organizações parceiras, revisa os resultados e ajusta os parâmetros da IA, garantindo que a ferramenta evolua em consonância com os desafios contemporâneos.

Além disso, o processo de aprendizado contínuo da QuitérIA prevê retreinamentos periódicos. A cada ciclo de análise, novas proposições são avaliadas, e a IA é atualizada com as correções e ajustes feitos pela equipe humana.

Desempenho

A QuitérIA tem alcançado resultados significativos de precisão e acuracidade. A tabela abaixo mostra as métricas de desempenho do modelo de avaliação de desfavorabilidade:

Precisão Sensibilidade Índice F1 Amostra
Dignidade Sexual 0,94 0,88 0,91 17
Direitos Sexuais e Reprodutivos 0,89 0,84 0,86 19
Direitos Sociais 0,61 0,58 0,59 19
Economia 0,78 0,50 0,61 14
Feminicídio 0,67 0,80 0,73 5
Gênero 0,81 1,00 0,90 13
Maternidade 0,70 0,74 0,72 19
Politica 1,00 0,88 0,93 8
Violência Contra a Mulher 0,86 0,93 0,89 54
Acurácia 0,82 168
Média macro 0,81 0,79 0,79 168
Média ponderada 0,82 0,82 0,81 168

Código-fonte da QuitérIA

  • Explore a ferramenta: Acesse o painel da QuitérIA para visualizar os dados dos projetos de lei e obter análises automatizadas.
  • Contribua com o código: O código-fonte da QuitérIA está disponível no GitHub, permitindo que você participe do aprimoramento da ferramenta.

Uma proposta da revista azmina, CC BY-NC-ND 2.0