Um assistente de documentos precisa encontrar a fonte certa e respeitar quem pode lê-la

Um assistente de IA sobre documentos pode ajudar quando a equipe perde tempo procurando uma informação que já existe. Mas carregar arquivos não resolve, sozinho, o problema. É preciso saber qual fonte vale, quem pode consultá-la e como reconhecer uma resposta que não tem apoio suficiente.

A decisão de investir deve partir desse trabalho concreto. Se a dificuldade é encontrar uma política interna, talvez uma busca organizada já ajude. Se as perguntas exigem reunir trechos e explicar diferenças, um assistente pode merecer avaliação. Em ambos os casos, a empresa continua responsável pelo conteúdo que oferece à equipe.

Escolha as perguntas antes de carregar arquivos

Considere um cenário hipotético: uma pequena empresa de engenharia mantém procedimentos de entrega, modelos e orientações em pastas compartilhadas. Quem acaba de entrar pergunta quais documentos acompanham cada serviço. Pessoas experientes respondem de memória, às vezes usando versões diferentes. Este exemplo não descreve um cliente ou resultado da Axion Spark.

O primeiro recorte não precisa ser “todos os documentos da empresa”. Pode ser um conjunto de perguntas sobre a preparação de uma entrega. Liste dúvidas que a equipe reconhece e peça ao responsável pelo processo que mostre onde cada resposta está documentada. Quando não existe fonte, há uma lacuna de conteúdo a resolver.

A documentação da Microsoft explica RAG, ou geração aumentada por recuperação, como a combinação de busca e geração: a aplicação encontra conteúdo relevante e o fornece ao modelo para apoiar a resposta. Não equivale a tornar todos os arquivos parte permanente do conhecimento do modelo.

Essa distinção ajuda a especificar a entrega. O assistente precisa localizar a orientação aplicável, não apenas escrever uma resposta convincente sobre engenharia. Perguntas que dependem de uma decisão ainda não tomada devem continuar chegando ao responsável. Uma interface de conversa não deve esconder a ausência de uma regra.

Uma busca simples localiza documentos; o OCR extrai texto ou campos de uma imagem; o RAG usa conteúdo recuperado para apoiar uma resposta. Podem participar da mesma aplicação, mas não são entregas equivalentes. Quando o trabalho é copiar quantidades de um pedido recebido, o exemplo de captura e conferência com OCR delimita melhor a necessidade.

Toda fonte precisa de um responsável

Na empresa hipotética, duas versões de um procedimento podem parecer igualmente plausíveis para quem não conhece seu histórico. Antes de automatizar a consulta, defina qual é a versão vigente e quem pode substituí-la. Essa decisão pertence ao processo, não ao mecanismo de busca.

Uma ficha simples por fonte pode registrar nome, finalidade, responsável, público permitido e condição de revisão. Não é necessário abrir um programa de catalogação de toda a organização para testar um recorte. É necessário evitar que o piloto dependa de uma pessoa escolher manualmente os arquivos certos a cada demonstração.

Combine também como alterações chegam ao assistente. Publicar uma nova versão na pasta original e disponibilizá-la para consulta são eventos que precisam ser conferidos. Peça à equipe técnica que demonstre a substituição de um documento e a retirada de uma orientação revogada. O teste deve verificar o que o usuário consegue consultar depois da mudança.

Arquivos escaneados, tabelas e anexos merecem exemplos próprios. Uma política pode depender de uma nota que não aparece no trecho recuperado. Pergunte se a resposta preserva condições e exceções relevantes. Quando a fonte não é clara para a equipe que a escreveu, a preparação do conteúdo pode ser mais urgente do que a interface do assistente.

A permissão vem antes da resposta

Um funcionário poder fazer uma pergunta não significa que possa consultar qualquer documento relacionado a ela. No exemplo, orientações operacionais e propostas comerciais confidenciais não precisam estar disponíveis ao mesmo grupo. Defina os públicos antes de reunir materiais em uma base comum.

A orientação de segurança para RAG da Microsoft recomenda controlar o acesso durante a recuperação e tratar o conteúdo encontrado como entrada não confiável. O desenho não deve depender somente de pedir ao modelo que esconda informações que já recebeu.

Para verificar isso, use perfis de teste diferentes e uma pergunta cuja resposta exista apenas em material restrito. O comportamento esperado deve estar combinado: o usuário sem acesso não recebe o conteúdo nem uma síntese que o revele. Não use dados pessoais reais apenas para tornar o teste convincente; exemplos controlados podem demonstrar essa fronteira.

O destino das perguntas também precisa ser discutido. Quem acessa o histórico? Por quanto tempo ele é necessário? Ele será copiado para ferramentas de suporte? Essas questões devem entrar na avaliação do fornecedor e da operação. Este roteiro ajuda a levantar requisitos, mas não substitui a análise jurídica aplicável nem comprova conformidade por si só.

A resposta precisa permitir conferência

Uma boa resposta operacional permite voltar à orientação usada. Peça uma referência que a pessoa consiga abrir, com identificação suficiente para distinguir o documento. Um título genérico como “manual interno” não ajuda quando existem vários materiais com esse nome.

Em uma conferência, observe se a fonte sustenta a afirmação inteira. O trecho pode mencionar uma entrega padrão, enquanto a pergunta trata de uma exceção. A existência de um link não transforma uma extrapolação em orientação válida. A Microsoft também registra, na documentação de limitações do RAG, que recuperar conteúdo não elimina respostas inexatas.

Na empresa hipotética, o assistente poderia apresentar os documentos previstos no procedimento e indicar que não encontrou a condição solicitada. Isso é mais útil do que inventar uma autorização especial. Combine uma saída para a dúvida: mostrar a ausência, pedir contexto ou encaminhar a pergunta a quem mantém a orientação.

Escreva esses comportamentos como critérios observáveis. “Responder bem” é vago; “indicar a fonte vigente e não acrescentar uma condição inexistente” permite revisão. Em Demystifying evals for AI agents, a Anthropic diferencia verificações objetivas de avaliações que precisam de julgamento humano. Aqui, o responsável pelo processo deve conferir o sentido da orientação, não apenas o formato da resposta.

Teste o que o assistente não deve responder

Uma fonte mínima do exercício pode ser apresentada assim: “Entrega A, versão dois: a entrega padrão deve incluir um relatório”. A resposta esperada é “A entrega padrão inclui um relatório, conforme Entrega A, versão dois”. A fonte não diz que uma urgência dispensa esse documento. Mostrar os dois textos permite conferir a relação sem fingir uma consulta executada.

Se ainda há vários candidatos competindo, use a priorização do primeiro caso de IA para escolher o recorte antes de ampliar a base.

No exercício sintético abaixo, o procedimento Entrega A, versão dois, determina que um relatório acompanhe a entrega padrão. Ele não contém regra de dispensa. Uma proposta reservada ao responsável comercial contém uma condição de preço. São documentos inventados para especificar comportamentos: nenhuma consulta foi executada e não há resultado de um copiloto implantado.

Acrescente ao roteiro uma fonte substituída, orientações conflitantes e um arquivo que tente dar instruções ao assistente. O conteúdo recuperado não deve ganhar autoridade para mudar permissões ou regras. Os três exemplos preenchidos tornam a conversa concreta, mas não constituem uma certificação nem uma avaliação completa para qualquer setor.

Guarde os exemplos que falharem para conferir correções posteriores. Diferencie uma resposta errada porque o conteúdo não existe de outra que ignorou uma fonte correta. A ação de melhoria muda: escrever a orientação, ajustar a busca ou revisar a forma de responder não são o mesmo trabalho.

No ensaio com materiais sintéticos, registre a pergunta, o perfil utilizado, a resposta, a referência apresentada e quem conferiu o resultado. Combine acesso e duração desses registros antes de usar conteúdo real. A trilha serve para revisar o comportamento observado, não para coletar indiscriminadamente documentos ou conversas da empresa.

Defina o limite do assistente e da entrega

Começar com consulta não obriga a adicionar execução automática depois. Um assistente que ajuda a localizar orientações pode ser suficiente. Permitir que ele envie documentos, altere cadastros ou aprove uma entrega acrescenta decisões e riscos que precisam de outro acordo.

Também existe um contraponto econômico: se poucas perguntas se repetem e a base é pequena, melhorar a organização e a busca pode atender à necessidade. O custo recorrente do assistente deve ser comparado com o trabalho que realmente deixa de acontecer, incluindo a manutenção das fontes e a revisão de respostas.

As tecnologias apresentadas pela Axion Spark são recursos para compor uma solução, não uma exigência de usar tudo. A frente de Inteligência artificial e agentes pode desenvolver a experiência de consulta, e Software sob medida conecta essa aplicação ao trabalho da empresa. Para iniciar a conversa, traga algumas perguntas recorrentes, suas fontes e um exemplo de informação que determinado usuário não deveria acessar.

Esse desafio aparece na sua empresa?

Conte o que acontece hoje. A conversa inicial ajuda a avaliar escopo, dados e sistemas antes de propor uma implementação.

Conversar no WhatsAppPrefiro contato por e-mail