La BBC ha publicado un trabajo para mostrar cómo distintos softs de Inteligencia Artificial (IA) muestran a sus publicaciones cuando se consulta por un tema. El trabajo titulado “Representation of BBC News content in AI Assistants” (“Representación de BBC Noticias en los ocntenidos de los asistentes de IA”) muestra las respuestas a noticias según los softs ChatGPT, Copilot, Gemini y Perplexity.

Un cuerpo periodistas devaluó las respuestas de los softs. Los resultados fueron que un 51% de las respuestas mostraron un tema significativo; un 19% registraron errores en los hechos e incluso en los datos; y un 13% modificaron lo contenido en la fuente original o no la publicaron .

Perplexity y Copilot fueron los softs que más levantaron temas en general de la BBC, aunque Gemini fue quien registró más en temas significativos.

En cuanto a lo correcto de la respuesta de los softs Perplexity y Gemini encabezaron el ránking aunque fue el segundo el que mejor desempeño tuvo en temas significativos.

Gemini fue el soft que mejor fundamentó en fuentes las respuestas que emitió.

Con relación a la imparcialidad en la respuesta Gemini se destaca nuevamente en los temas significativos. En materia de discernir entre opinión y hechos, Copilot tuvo el mejor desempeño. En el caso de los editoriales, a grandes rasgos fue Copilot quien se comportó mejor. Gemini ofreció el mejor contexto para comprender una noticia por parte de alguien que no conociía el tema.