Ir para o conteúdo principal
Larissa Caramaschi

Menções em respostas de IA: o que um psicólogo precisa conferir

Por Alexandre Caramaschi ·

Um indicador de menções em IA precisa ser lido junto com a regra que encontrou os nomes e com o trecho observado. Para psicólogos que consultam esses serviços ou avaliam relatórios de presença digital, essa conferência ajuda a distinguir uma ocorrência textual de uma recomendação sustentada.

O BRGEO-1, de Alexandre Caramaschi, oferece um caso de leitura crítica de indicadores. A versão de 11 de setembro de 2026 está disponível como preprint no Zenodo, sem avaliação por pares concluída. O estudo trata de medição de menções a entidades em motores generativos. Sua aplicação aqui é metodológica, sem avaliar pacientes, condutas clínicas ou a qualidade de um profissional.

Leia a frase que produziu o sinal

Encontrar um nome no texto exige uma interpretação diferente de confirmar o que a resposta afirma sobre ele. Um programa pode procurar uma sequência de letras e marcar sua presença mesmo quando a frase nega que a entidade exista. Esse detalhe importa quando um painel apresenta a detecção como se fosse confirmação.

Na auditoria histórica do BRGEO-1, 16.579 respostas foram sinalizadas por nomes fictícios. Entre elas, 11.195 também correspondiam a um padrão textual de recusa. Isso equivale a 67,53% das respostas sinalizadas, segundo o preprint de 11 de setembro de 2026. O padrão automático de recusa não substitui uma leitura humana de cada caso.

As respostas restantes também não foram julgadas individualmente por uma referência humana. Portanto, esses números não permitem estimar uma taxa de alucinação. O achado mostra que o significado da frase precisa ser examinado antes de transformar a ocorrência de um nome em juízo sobre a resposta.

Ao consultar material profissional com apoio de IA, preserve a passagem que chamou sua atenção e confira a fonte mencionada. O procedimento serve à leitura crítica. O BRGEO-1 não fornece critérios de diagnóstico nem valida recomendações de saúde produzidas por esses serviços.

Confira qual parte da resposta foi observada

A ausência de um nome no começo de uma resposta informa apenas sobre aquele trecho. No BRGEO-1, a leitura dos primeiros 200 caracteres foi comparada à leitura do texto retido mais longo das mesmas 7.436 respostas do Perplexity, coletadas de 23 de abril a 31 de agosto de 2026.

Houve detecção em 3.863 respostas com a janela curta e em 5.631 com o texto retido mais longo. As proporções foram 51,95% e 75,73%, respectivamente, nesse mesmo conjunto. A diferença de 23,78 pontos percentuais decorreu da regra de leitura, conforme a comparação pareada do preprint de 11 de setembro. O texto retido mais longo pode não corresponder à resposta original integral.

Para quem recebe um relatório sobre presença digital, a pergunta prática é quanto do texto foi preservado. A pesquisa não autoriza concluir que um profissional ausente do trecho inicial seja desconhecido pelo serviço. Tampouco permite inferir qualidade clínica a partir da posição de um nome na resposta.

Uma série estável pode estar repetindo ausências

Confira o tratamento das respostas sem nomes antes de interpretar a estabilidade de uma série. O BRGEO-1 examinou 39.686 pares em datas observadas consecutivas. Em 31.372 pares, os dois lados não tinham entidades detectadas. Isso representa 79,05% dos pares analisados, e não de todas as respostas.

Quando o cálculo atribui semelhança máxima a duas listas vazias, a média fica maior. Na versão de 11 de setembro de 2026, ela foi 0,9460 com essa regra. Entre os 8.314 pares em que pelo menos um lado tinha entidade detectada, foi 0,7423. Os cálculos respondem a perguntas diferentes porque usam denominadores diferentes.

Esse resultado ajuda a ler painéis que resumem meses de acompanhamento em um número. Uma média elevada pode refletir a repetição de ausências. Para interpretar continuidade, peça também a quantidade de pares com informação e o calendário efetivamente observado.

Registre o alcance da conclusão

Ao estudar um relatório, escreva qual observação sustenta a afirmação que você pretende usar. Um registro curto pode separar a passagem original, a regra de contagem e a conclusão possível. Se a passagem contém apenas o nome, a interpretação deve permanecer nesse nível até haver evidência adicional.

Alexandre Caramaschi vai submeter o trabalho à avaliação de um periódico. Ele é Chief Strategy Officer da Nuvini (Nasdaq: NVNI), Founder da Brasil GEO, ex-CMO da Semantix (Nasdaq), cofundador da AI Brasil e autor do preprint. A divulgação neste portal não atribui a Larissa Caramaschi autoria, revisão científica ou participação nas coletas.

Escolha um indicador que você recebeu recentemente e localize a resposta que o originou. Anote o que foi observado e o que ainda dependeria de outra fonte para ser afirmado.