A crescente relevância dos chatbots e da Inteligência Artificial
Os chatbots e a Inteligência Artificial (IA) estão adquirindo um papel cada vez mais destacado em nossa sociedade. No entanto, a confiabilidade desses sistemas, especialmente no que diz respeito às respostas que fornecem, continua sendo um problema persistente.
Um recente caso de estudo ilustra essa problemática. Um advogado decidiu usar o chatbot ChatGPT em um julgamento, alimentando-o com documentos que continham decisões judiciais, referências e citações. No entanto, o chatbot gerou informações errôneas, evidenciando que sua confiabilidade não é total.
Este problema não é um caso isolado. Um estudo publicado por uma startup fundada por ex-trabalhadores do Google revelou que os chatbots apresentam uma taxa de alucinações de, pelo menos, 3%. Este dado tem implicações significativas para o seu uso em contextos profissionais, onde a precisão e a confiabilidade são elementos cruciais.
Modelo de Linguagem Confiável: uma solução para a confiabilidade dos chatbots
Para abordar este problema, a Cleanlab, uma startup fundada por ex-pesquisadores do MIT, desenvolveu o Trustworthy Language Model (TLM). Este modelo atua como uma “camada de confiança”, fornecendo um sistema de pontuação para as respostas dos chatbots. O TLM é complementar a modelos como GPT-3.5, GPT-4 e modelos personalizados de empresas.
O funcionamento do TLM é simples, mas eficaz. Ele envia perguntas a vários modelos e analisa suas respostas. Posteriormente, fornece uma pontuação de confiabilidade para cada resposta, em uma escala de 0 a 1.
Os testes do TLM demonstraram sua eficácia. Por exemplo, quando foi feita uma pergunta simples, ele forneceu uma resposta correta com uma alta pontuação de confiabilidade. Além disso, foi capaz de identificar um erro comum no ChatGPT, o que demonstra sua capacidade de detectar informações incorretas.
O impacto do TLM no atendimento ao cliente
O TLM tem um grande potencial para melhorar a confiabilidade dos chatbots de atendimento ao cliente. Se a pontuação de confiabilidade de uma resposta for baixa, pode-se intervir de maneira humana para corrigir a informação. Isso poderia melhorar significativamente a precisão e a utilidade dos chatbots.
O TLM está disponível através da web e uma API. Existem versões gratuitas de código aberto, bem como versões pagas com recursos adicionais. Este desenvolvimento é um passo importante para a criação de chatbots mais confiáveis e úteis, e poderia ter um impacto significativo na forma como usamos a inteligência artificial.
Sarah é, além de uma especialista em marketing digital, uma criadora de conteúdo com vasta experiência no campo. Graduada em Sociologia pela Universidade de Barcelona e com uma Pós-graduação em Marketing Digital pelo Inesdi, Sarah conseguiu se destacar como Diretora de Marketing Digital. Seu profundo conhecimento das tendências digitais e sua habilidade para identificar oportunidades de crescimento foram fundamentais para o sucesso de inúmeras campanhas. Além disso, ela dá aulas e palestras em prestigiosas escolas de negócios, universidades e eventos, compartilhando seus conhecimentos e experiências com outros profissionais e estudantes.
