Le meilleur chatbot du monde sur Facebook est désormais disponible gratuitement

Le nouveau mélangeur de chatbot de Facebook est censé faire celaquitte même Meena de Google.

Si vous appelez un chatbot « Blender » en Allemagne, ce ne serait pas un compliment, mais ce serait correct. Après tout, le bot essaie de faire semblant d’être humain de toutes ses forces. Le nouveau chatbot de Facebook devrait particulièrement bien réussir.

L’expression anglaise Blender ne signifie pas le prétendant, mais le mélangeur. Le nom convient: le département d’IA de Facebook FAIR a utilisé 1,5 milliard de commentaires Reddit publiquement disponibles pour la formation du bot à l’IA. Le bot a appris les bases de la conversation sur la base de cette base de données.

Le modèle de l’IA a ensuite été affiné: les chercheurs ont formé l’IA avec des ensembles de données supplémentaires pour les réactions émotionnelles, des dialogues basés sur l’information avec des connaissances wiki et des dialogues entre deux personnes pour plus de caractère. Dans les tests, ils ont expérimenté différents modèles et orientations.

Facebook Blender contre Google Meena

Les chercheurs ont comparé les performances de Blender à Meena, un chatbot que Google a introduit fin janvier et qui, selon Google, a établi une nouvelle norme dans la culture du dialogue machine à l’époque.

En comparaison directe, Facebook prétend être en avance: le modèle de langage généré avec 9,4 millions de paramètres est plus de trois fois plus grand que Meenas avec 2,6 millions de paramètres.

Les dialogues sur des sujets tels que la cuisine, la musique, les films, les animaux de compagnie ou le yoga ont été plutôt bien accueillis par les premiers testeurs: jusqu’à 75% d’entre eux ont jugé les conversations avec Blender plus intéressantes et réalistes que le chatbot Meena de Google, qui, selon Google, n’a à peine effectué que des tests. se classe derrière les qualités d’un interlocuteur humain et surpasse clairement les chatbos précédents.

Le test A / B, dans lequel les chercheurs de Facebook ont ​​eu une conversation chatbot contre un partenaire de conversation humain, est particulièrement intéressant: Jusqu’à 49% des testeurs ont évalué le dialogue informatique soumis comme plus humain.

Si tout se passe bien, des conversations réalistes sont possibles avec Blender. Mais les limites sont toujours serrées. Image: Facebook

Si tout se passe bien, des conversations réalistes sont possibles avec Blender. Mais les limites sont serrées. Image: Facebook

Le bot de Facebook hallucine les faits

Malgré les progrès, les chercheurs de Facebook voient encore beaucoup de travail vers des «agents de dialogue vraiment intelligents». En fait, la culture de conversation de Blender a des problèmes fondamentaux qui sont directement liés aux données de formation.

Le bot a tendance à être phraséologique, répète les déclarations de l’interlocuteur et pose ses propres questions, se contredit et oublie les déclarations. Si vous approfondissez un sujet, le bot génère de fausses déclarations.

Parfois, Blender répète des déclarations, se contredit ou invente des choses. Image: Facebook

Parfois, Blender répète des déclarations, se contredit ou invente des choses. Image: Facebook

Blender ne se souvient pas non plus des conversations précédentes – Donc, si vous parliez au bot en continu, les conversations deviendraient rapidement ennuyeuses et non pertinentes. De plus, le bot ne peut pas apprendre de concepts par le biais de conversations et ne peut pas utiliser la réalité comme base pour des conversations.

Les modèles d’IA, les descriptions et la publication scientifique sur Blender sont disponibles ici en open source.

Source: Facebook

En savoir plus sur l’intelligence artificielle:

stable2

Le meilleur chatbot du monde sur Facebook est désormais disponible gratuitement Dernière modification: 4 mai 2020 par Matthias Bastian

Vous aimerez aussi...

Laisser un commentaire

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *