Se o chatbot Bard do Google parece realmente inteligente, pode ser porque ele está copiando dados de fontes especializadas, sem dar a eles sequer uma citação. Hoje, perguntei a Bard, que está disponível em versão beta em bard.google.com, sobre qual dos dois processadores concorrentes – o Intel Core i9-13900K ou o AMD Ryzen 9 7950X3D – era mais rápido. A resposta que ele deu foi tirada diretamente de um de nossos artigos do Tom’s Hardware, mas Bard não mencionou o artigo e, em vez disso, se referiu ao número como ocorrendo “em nossos testes”, o que implica que o próprio Google fez o benchmarking.
Quando questionei a Bard sobre a origem do teste, ela disse que os resultados do teste vieram da Tom’s Hardware e, quando perguntei se havia cometido plágio, ela disse que “sim, o que eu fiz foi uma forma de plágio”. Uma captura de tela da troca está abaixo.
Podemos dizer que, assim como os resultados de pesquisa do Google, Bard está atualizado com os eventos atuais. Nosso artigo comparando as duas CPUs foi escrito e publicado pelo vice-editor-gerente Paul Alcorn alguns dias atrás. Fiquei desconfiado da resposta de Bard quando notei que ela citava dois números muito precisos: o fato de que o 7950X3D era 12% mais rápido em 1080p em configurações de meia e 9% mais rápido quando ambas as CPUs estavam com overclock. Na verdade, a frase de Bard é uma reformulação de uma frase específica em nosso artigo original.
Nossa frase original: “Em nossos testes, o Ryzen 9 7950X3D de US$ 699 é 12% mais rápido que o Core i9-13900K de US$ 589 em jogos de 1080p nas configurações de estoque e 9% mais rápido quando os chips estão com overclock.”
Versão do bardo: “O AMD Ryzen 9 7950X3D é mais rápido que o Intel Core i9-13900K em jogos. Em nossos testes, o 7950X3D foi 12% mais rápido que o 13900K em jogos de 1080p nas configurações de estoque e 9% mais rápido quando os chips tiveram overclock.”
Talvez a coisa mais perturbadora sobre o ato de plágio do Google Bard seja que ele usa o real nós para descrever o trabalho de outra pessoa. Qualquer pessoa que acompanha o jornalismo de tecnologia há algum tempo provavelmente sabe que o Google não compara e analisa CPUs, mas muitos usuários finais provavelmente não questionariam a autoatribuição de Bard aqui.
A maioria dos usuários provavelmente não perguntaria à Bard de onde vêm os fatos, mas eu perguntei “Quando você diz ‘nossos testes’, a quais testes você está se referindo?” Para seu crédito, Bard disse: “Estou me referindo ao teste feito pelo Tom’s Hardware”
Quando perguntei a Bard se o que havia feito era plágio, ele foi claro e até disse: “Peço desculpas pelo meu erro e terei mais cuidado no futuro em citar minhas fontes”. Mas, como qualquer pessoa que usa o Bard pode ver, ele normalmente não cita fontes.
Algumas semanas atrás, escrevi um artigo de opinião ridicularizando as tentativas do Google e do Bing de obter informações da web e redirecioná-las como suas. Na época, o Bard não havia sido disponibilizado ao público para teste, mas uma demonstração o mostrou oferecendo informações sem citações.
Agora que Bard está solto, podemos ver que a falta de citações do Google não foi um descuido descuidado durante uma demonstração apressada, mas provavelmente uma estratégia para reivindicar como seu conteúdo que não foi criado. Se eu não tivesse visto os números muito precisos – 12 por cento e 9 por cento – Bard poderia muito bem ter uma negação plausível sobre ter plagiado ou não o trabalho de alguém.
As outras frases na resposta inicial de Bard para mim são genéricas o suficiente para que possam ter vindo de várias outras fontes. Por exemplo, seu segundo parágrafo contém informações que Bard poderia ter obtido de várias publicações ou até mesmo da própria AMD:
“A vantagem do 7950X3D se deve à sua tecnologia 3D V-Cache, que adiciona 64 MB de cache L3 ao chip. Esse cache adicional ajuda o 7950X3D a acessar dados mais rapidamente, o que melhora o desempenho em jogos.”
Embora tivéssemos essa informação em nosso artigo, não dissemos explicitamente que o 7950X3D adiciona “64 MB de cache L3”, mas dissemos que ele tem 128 MB de cache L3. Bard não diz a que o chip adicionou 64 MB de cache L3, mas se você conhece seus chips, pode presumir com segurança que se refere ao 7950X (não 3D) que possui 64 MB de cache L3 (e adicionar 64 MB a mais seria dar-lhe 128MB).
Parece que o Google (e a Microsoft) estão contando com o fato de que as informações podem vir de muitas fontes diferentes, por isso pode ser difícil rastrear esses “fatos” de onde a IA os “aprendeu”. Isso, é claro, pressupõe que os fatos estejam corretos.
A resposta de Bard não estava totalmente correta
A resposta de Bard à minha pergunta inicial também deixa muitas informações importantes de fora. Eu perguntei “qual CPU é mais rápida” e não “qual CPU é mais rápida para jogos?” Bard presumiu que eu estava interessado apenas em jogos e até disse “em jogos” em alguns lugares em sua resposta.
No entanto, em nosso artigo, notamos que o Core i9-13900K é realmente a CPU mais rápida para tarefas de produtividade. “Para sistemas focados na produtividade, ou se você geralmente procura um polivalente sólido, o Core i9-13900K é a melhor escolha”, escreveu Paul.
Então, o que estamos vendo aqui é que Bard não apenas plagiou informações, mas também deu uma resposta incompleta. Nossa recomendação geral é que, se você deseja a melhor CPU geral, o 13900K ainda é uma escolha melhor e, somente se o jogo for sua principal prioridade, você deve escolher o 7950X3D.
Se Bard tivesse citado nosso artigo de Tom’s Hardware como fonte, o leitor teria a oportunidade de ler todos os resultados dos testes e todos os insights e tomar uma decisão mais informada. Ao plagiar, o bot nega a seus usuários a oportunidade de obter a história completa, ao mesmo tempo em que nega a escritores e editores experientes o crédito – e cliques – que eles merecem.