O que é um piloto de IA e o que aprende com os seus casos reais

Ver uma aplicação a funcionar com os seus casos reais não é o mesmo que ler uma especificação bem documentada e estruturada. Um piloto de IA é isso: a base da aplicação que se vai construir, testada com o que de facto chega à sua empresa, sem substituir ainda a sua forma de trabalhar. A diferença aparece quando se vê algo que ninguém tinha previsto.

A resposta curta: um piloto de IA, ou prova de conceito, é uma versão delimitada da aplicação que se testa com os casos reais da sua empresa, sem passar a produção, para validar o produto antes de o desenvolver. Serve para afinar os requisitos: surgem coisas que julgava necessárias e já não são, e outras novas que ninguém tinha previsto. Se não convencer, o projeto pára aí.

Em que se distingue um piloto de uma demonstração preparada e da produção?

Os três veem-se num ecrã e servem para coisas diferentes:

Um piloto não é uma versão pequena da aplicação final que já se usa. Também não é uma demonstração para confirmar o que já pensávamos: o seu valor está em mostrar o que a especificação não podia saber.

O que se descobre ao testar com casos reais?

Uma especificação escrita antes de ver algo a funcionar descreve como achamos que trabalhamos. O piloto confronta-a com como trabalhamos de verdade. Nos pilotos da Tecnea costuma acontecer que:

• Há coisas que julgávamos necessárias e já não são. Um passo, um campo, um relatório ou uma ligação a outro sistema que pareciam imprescindíveis e que, vistos com casos reais, não acrescentam nada. Cada um que se tira torna o desenvolvimento mais barato.
• Surgem coisas novas. Casos que não estavam na lista, documentos que chegam de outra forma, regras que se aplicam sem estarem escritas em lado nenhum. É melhor encontrá-las agora do que a meio do desenvolvimento.
• Vê-se onde está de facto o trabalho. Com frequência, a parte que mais tempo consome não é a que se indicou ao início.
• Decide-se o que uma pessoa revê. Com casos reais vê-se o que a IA resolve bem, em que hesita e o que convém que alguém confirme, e com que critério.
• Afinam-se o âmbito e o preço do que vem a seguir. Com o que se aprendeu, a fase seguinte fecha-se com menos incerteza.

Sete formas de aproveitar um piloto

1. Escolha um processo que doa de verdade e indique quem responde por ele. Um processo com princípio e fim claros e volume suficiente. Se não fizer perder tempo ou dinheiro todas as semanas, o que aprender não compensará.
2. Decida antes o que quer aprender e que número o faria continuar. Quanto tem de baixar o custo por caso, ou quanto tem de subir o que se conclui por semana. Sem um número fixado antes, decide-se com o que se espera ver (como medi-lo).
3. Traga casos reais, com as suas exceções. O piloto testa-se com uma cópia dos seus documentos e dados, não com uma amostra limpa. Pergunte antes quem os tem e quem dá o acesso: é a causa mais frequente de atraso.
4. Reúna casos com a resposta conhecida. Como orientação, de trinta a cem casos reais, misturando os fáceis com os difíceis, com a resposta correta anotada sem olhar para o que diz a IA. Assim mede-se se acerta, sem depender da impressão de ninguém.
5. Que o teste quem usa o processo todos os dias. A informática dá os acessos e a segurança, mas o critério sobre se o resultado serve cabe a quem o usa, que é quem pode dizer o que sobra e o que falta. A supervisão humana tem níveis, e convém testar o que vai ser preciso.
6. Cuide dos dados pessoais também no piloto. Trabalha-se sobre uma cópia e, se houver dados pessoais ou sensíveis, decide-se antes quais se pseudonimizam (substituem-se por identificadores para que o modelo não veja quem é quem), onde se tratam e com que fornecedores há contrato. Mais em permissões de um agente de IA.
7. Feche com uma decisão e uma lista. Uma decisão: construir o que se aprendeu, ajustar o piloto ou parar. E uma lista do que entra, do que sai e do que se adia, que é o material de partida do desenvolvimento.

Erros frequentes

• Esperar de um piloto o que corresponde à produção. Não está integrado em todos os seus sistemas nem pensado para o uso diário de toda a equipa: isso chega com a implementação.
• Testar só com os casos que correm bem. Os que ficam de fora são justamente os que consomem horas hoje, e os que mais ensinam.
• Querer que acerte tudo à primeira. Ver onde falha faz parte do que se compra: indica o que rever, o que reforçar e o que convém deixar de fora.
• Não anotar o que se aprendeu. Se o que sai do piloto não se traduz em mudanças na lista de requisitos, fez-se uma demonstração cara.
• Não ter ninguém do negócio envolvido. Sem uma pessoa que use o processo, o piloto avalia-se com opiniões.

O que acontece depois do piloto

O piloto termina com uma decisão, e há três resultados possíveis: passar ao desenvolvimento com o âmbito já afinado, ajustar a abordagem e repetir o necessário, ou parar. Na Tecnea o projeto avança por fases com preço fechado em cada uma: a primeira conversa de 30 minutos não se cobra, o piloto (prova de conceito) faz-se em duas a quatro semanas e a partir de 850 €, e só depois se fecha o âmbito do desenvolvimento (o que inclui cada valor e quanto demora cada fase, em espanhol). Para escolher com quem o fazer, os critérios para avaliar um fornecedor de IA incluem o que deve ficar por escrito.

Perguntas frequentes

O que é um piloto de IA?

É uma versão delimitada da aplicação que se vai construir, testada com os casos reais da sua empresa e sem passar a produção. Também se chama prova de conceito. Serve para validar o produto e afinar os requisitos antes de investir no desenvolvimento completo.

Em que se distingue de uma demonstração?

Uma demonstração costuma usar documentos limpos e o caso que corre bem. Um piloto usa os seus casos reais, também os difíceis, e por isso mostra o que a especificação não podia saber: o que sobra, o que falta e onde está o trabalho de verdade.

Quanto dura e quanto custa um piloto?

Na Tecnea, entre duas e quatro semanas e a partir de 850 €, com a primeira conversa gratuita. Se se prolongar muito mais, costuma ser porque o âmbito é demasiado grande ou porque os dados não estavam prontos. Os valores de cada fase estão em quanto custa uma aplicação com IA.

Com que dados se faz?

Com uma cópia de documentos e dados reais da sua empresa, incluindo as exceções. Os dados pessoais ou sensíveis tratam-se com cuidado desde o início: decide-se quais se pseudonimizam e onde se tratam.

O que acontece se o piloto não convencer?

O projeto pára e não se comprou o desenvolvimento completo. É um resultado válido e barato: sabe-se antes de investir. Vê-se o que falhou (os dados, os casos de teste, a ideia) e decide-se se se ajusta ou se se pára.

Quem deve participar na empresa?

A pessoa que responde pelo processo e quem o usa todos os dias, com o apoio da informática para acessos e segurança. Para ver o que acontece se a IA se enganar (em espanhol), convém que participem desde o início.

Se tem um processo candidato a piloto, diga-nos qual é.

Este artigo é informativo. A Tecnea desenvolve aplicações à medida com IA e faz pilotos pagos, por isso temos interesse em que experimente e, se compensar, encomende o desenvolvimento. O que se descreve é como trabalhamos nós, não provém de um estudo externo, e cada empresa terá as suas próprias perguntas conforme o seu processo e o seu setor.

Fontes

1. Regulamento (UE) 2016/679, Regulamento Geral sobre a Proteção de Dados: eur-lex.europa.eu
2. Regulamento (UE) 2024/1689, Regulamento da Inteligência Artificial (AI Act): eur-lex.europa.eu
3. Tecnea, quanto demora um projeto de IA e casos de sucesso, em espanhol e português.