Raio-X de IA em Produção
Metodologia
O Raio-X mede se a empresa consegue colocar e manter IA funcionando na operação. Por isso pergunta o que existe hoje, em evidências concretas, e não o quanto a empresa acredita em IA.
Regras de pontuação
- 1.Cada resposta vale de 1 a 5, conforme a situação descrita na opção escolhida.
- 2."Não sei" vale 1: o que ninguém sabe se existe, na prática não está funcionando.
- 3."Não se aplica" fica fora da média e só é aceito em perguntas onde faz sentido.
- 4.A nota de cada dimensão é a média das respostas dela, incluindo as perguntas do setor e das áreas.
- 5.A nota geral é a média das 8 dimensões, limitada a 1 ponto acima da menor nota entre Dados e sistemas, Controle de qualidade e Segurança.
- 6.O nível é a nota geral arredondada, de 1 a 5.
Por que o limite? Uma empresa com IA em cinco áreas, mas sem controle de qualidade ou sem acesso confiável às informações, não está em nível avançado: está acumulando risco. O limite impede que avanços em uma frente escondam a falta de base.
Os 8 níveis
Resultado para o negócio
Processos escolhidos com dono e resultado medido.
Dados e sistemas
A IA consegue usar as informações dos sistemas, com qualidade e permissão.
Construção das soluções
Como as soluções de IA são feitas e organizadas.
Controle de qualidade
Testes antes de mudar, tratamento de erros e revisão humana.
Acompanhamento no dia a dia
Registros, custo, alertas e capacidade de voltar atrás.
Segurança
Proteção das informações e contra comandos maliciosos.
Regras e LGPD
Regras de uso, lista dos usos, riscos e conformidade com a LGPD.
Equipe e diretoria
Quem cuida da IA e como a diretoria participa.
Os 5 níveis
Exploração
Uso individual de ferramentas, sem processo nem dados da empresa.
Experimentos
Pilotos e provas de conceito; dados copiados à mão; qualidade não medida.
Primeiro em produção
Ao menos um sistema de IA na operação, integrado, com dono e registro.
Operação gerenciada
Vários sistemas em produção, com testes, monitoramento, custo acompanhado e política.
Escala
IA em processos críticos de várias áreas, com regras claras e resultado medido.
Referências
NIST AI Risk Management Framework
As dimensões Regras e LGPD, Resultado para o negócio, Controle de qualidade e Acompanhamento no dia a dia correspondem às funções Govern, Map, Measure e Manage.
ISO/IEC 42001:2023
Sistema de gestão de IA: liderança, dados, operação e melhoria contínua aparecem em Equipe e diretoria, Dados e sistemas, Acompanhamento no dia a dia e Regras e LGPD.
LGPD e PL 2338/2023
Base legal, avaliação de impacto, revisão humana e classificação de risco aparecem em Regras e LGPD e em Segurança.
As referências indicam correspondência de temas. O Raio-X não é auditoria nem certificação.
Limites
É uma autoavaliação: depende de quem responde. Respostas de pessoas diferentes da mesma empresa podem divergir, e isso já é um achado. O relatório usa IA para redigir o texto a partir da nota, nunca para calculá-la.