Artigo
IA na sua infraestrutura: o que testar no piloto
Imagine que os funcionários passam parte do dia buscando respostas em instruções internas e explicando essas respostas aos colegas. Você quer passar uma parte desse trabalho para a IA e manter os documentos dentro da empresa. O piloto precisa esclarecer três pontos: se o modelo resolve a tarefa, quanto tempo leva para conferir as respostas e quem vai manter a solução.
Comece com uma tarefa
Escolha um trabalho cujo resultado possa ser conferido. Por exemplo, um assistente que encontre uma resposta em um manual e mostre o trecho relevante. Ou que extraia campos de um documento recebido para um funcionário comparar com o original. Nos dois casos, os dados de entrada, o resultado esperado e os possíveis erros ficam claros.
Vamos usar como exemplo um assistente para consultar instruções internas. É uma forma de preparar o piloto. Na Avenex, começamos pela discussão de uma tarefa específica e testamos a solução com dados reais da empresa.
Reúna documentos e perguntas reais
Separe os documentos que os funcionários usam hoje. Junte perguntas reais e respostas escritas por um especialista, com referências aos trechos relevantes. Reserve parte dos exemplos para testar depois da configuração. Assim, será possível ver o que acontece com perguntas que o desenvolvedor não preparou previamente.
Inclua também casos difíceis: uma instrução antiga ao lado da nova, uma pergunta sem detalhes suficientes ou um documento que não contém a resposta. Esses casos ajudam a perceber quando o assistente afirma com segurança algo que a fonte não sustenta.
- Pergunta comum: a resposta está nas instruções em vigor.
- Faltam detalhes: o assistente precisa pedir um esclarecimento.
- Não há resposta: o assistente deve dizer isso claramente.
- Documento desatualizado: confira qual versão a resposta cita.
Defina o que conta como um bom resultado
Combine a forma de avaliação antes de começar. Um especialista confere se a resposta está correta, se a referência a sustenta e quanto precisou ser corrigido manualmente. Registre à parte os erros que tornam a resposta inutilizável: uma regra inventada, um prazo errado ou uma referência a outro documento.
Compare o processo inteiro com o trabalho habitual do funcionário: buscar, ler, responder e conferir. Gerar rapidamente só ajuda se as correções não consumirem todo o tempo economizado. Escolha um limite de qualidade adequado à tarefa; não existe uma porcentagem universal de respostas corretas.
- A pergunta e o documento usado para conferir a resposta.
- A resposta do assistente e a referência à fonte.
- O que o especialista corrigiu ou rejeitou.
- O tempo para obter a resposta e terminar a conferência.
Onde ficam os dados e quem pode acessá-los
Se os documentos precisam permanecer dentro da empresa, registre essa condição junto com a lista de conexões externas permitidas. Confira todo o caminho dos dados: envio de documentos, processamento, histórico e registros de erros. Chamar a solução de ‘local’ não resolve essas questões.
Defina as permissões: quais instruções cada funcionário pode ler e quais respostas pode receber. No piloto, deixe o envio de e-mails, a alteração de registros e outras ações de trabalho com as pessoas. Com a Avenex, é possível discutir a instalação na rede do cliente e a transferência da solução para a equipe de TI dele.
O que decidir depois do piloto
Analise os erros, o tempo gasto na conferência e o custo de manter a solução. Se o resultado atender à necessidade, defina quem atualizará os documentos, verificará as respostas após uma troca de modelo e tratará os relatos dos funcionários. Se for preciso corrigir demais, reduza o escopo da tarefa ou adie a entrada em operação.
O resultado do piloto pode caber em uma página: o que foi testado, quais exemplos foram usados, onde a solução errou e o que foi decidido para a próxima etapa. Isso dá à equipe uma base concreta para seguir.
Vamos conversar sobre seu projeto
Para a primeira conversa, basta descrever a tarefa, separar alguns documentos de exemplo que você tenha permissão para compartilhar e informar as restrições sobre os dados. Explique como os funcionários fazem esse trabalho hoje e o que querem simplificar. Esse pode ser o começo de um piloto com a Avenex.
Conversar sobre um piloto →