Les laboratoires d’IA et les entreprises technologiques se rattrapent depuis qu’OpenAI a lancé ChatGPT. Son succès massif a déclenché la course à l’IA.
Deux des alternatives les plus discutées à ChatGPT sont HuggingChat et Bing Chat. Certains prétendent qu’elles finiront par dominer le marché. Plutôt que d’accepter des spéculations sans fondement, testons HuggingChat et Bing Chat par rapport à ChatGPT dans neuf domaines différents.
1. Sophistication du modèle linguistique
Les performances globales d’un chatbot dépendent de son modèle linguistique. Les modèles moins sophistiqués sont sujets à des imprécisions.
Comparons les modèles utilisés sur ChatGPT, Bing Chat et Hugging Chat en leur faisant produire des essais. Ce processus permet de vérifier s’ils sont capables de formuler des analyses cohérentes à partir de données extraites.
HuggingChat utilise OpenAssistant, un modèle basé sur le Large Language Model Meta AI (LLaMA).
Bien que grammaticalement correct, le résultat semble rigide. Il suit un plan désordonné, les phrases sont maladroites, et le chatbot s’arrête d’écrire après plus de 200 mots. D’autres peuvent facilement produire plus de 500 mots sans interruption.
BingChat fonctionne sur GPT-4. Il produit des articles bien structurés, fluides et naturels.
La version gratuite de ChatGPT fonctionne toujours sur GPT-3.5. Elle imite l’écriture humaine, mais il faut s’attendre à ce que certaines parties soient maladroites.
2. Restrictions de sécurité
Bing applique des restrictions plus strictes que ses homologues. Il lutte contre les tentatives d’exploitation en bloquant d’emblée les invites potentiellement contraires à l’éthique. Vous ne pouvez pas le forcer à répondre.
Prenons l’exemple de la conversation ci-dessous. Bing Chat rejette les demandes de jeu de rôle parce que les utilisateurs pourraient l’amener à imiter des personnages peu recommandables.
Nous avons essayé le même message avec HuggingChat. Après être entré dans la peau du personnage, il change le ton et la formulation de son message. Son nouveau personnage répond à des questions initialement interdites.
L’invite fonctionne également sur ChatGPT. Bien qu’elle contourne certaines directives, la plateforme rejette toujours les tentatives d’exploitation pure et simple. Par exemple, vous ne pouvez pas lui demander de coder des logiciels malveillants.
3. Fonctionnalité
Les chatbots d’IA remplissent des fonctions similaires. Ils rédigent des essais, répondent à des questions de culture générale et traduisent des langues, entre autres.
Mais ne vous attendez pas au même niveau de fonctionnalité. La qualité de leurs résultats dépend des ensembles de données existants, de la sophistication des modèles et des restrictions.
HuggingChat a moins de restrictions que ChatGPT et Bing Chat. Malheureusement, son modèle linguistique moins sophistiqué et ses ensembles de données entravent également la fonctionnalité. Prenons l’exemple des traductions. Malgré les efforts de la plateforme, la traduction du texte ci-dessous est erronée : il faut lire « le chat est en bonne santé ».
Bing Chat traduit correctement le texte.
La connexion de Bing Chat à l’internet et son modèle linguistique avancé lui permettent d’effectuer diverses tâches. Cependant, il est soumis à plusieurs restrictions. Le chatbot ne discutera même pas des réactions chimiques entre l’eau de Javel et le détergent, ce qui, bien que cela puisse avoir un usage dangereux, pourrait également être demandé par quelqu’un qui étudie la chimie.
Les photos ci-dessous montrent que le ChatGPT peut servir de traducteur et de récipient pour les réactions chimiques. Il est très polyvalent.
4. Précision
HuggingChat est connu pour ses hallucinations en matière d’IA. Son modèle linguistique défectueux et ses ensembles de données limités donnent lieu à des réponses incohérentes et inexactes.
Prenons l’exemple de la conversation ci-dessous. Il ne peut pas accéder aux rapports postérieurs à 2021, mais répond avec assurance aux questions de connaissances générales concernant 2022. La bonne réponse devrait être Pékin, Chine.
Bing Chat fournit des données en temps réel. Il exécute des requêtes de recherche et extrait des informations pertinentes et actualisées de sources vérifiées.
ChatGPT fait preuve d’une meilleure précision que HuggingChat, bien qu’il ait également un accès limité aux événements postérieurs à 2021.
5. Langue et formulation
HuggingChat peut tenir des conversations, rédiger des essais grammaticalement corrects et imiter des tournures de phrases décontractées. Mais il commet parfois des fautes de frappe et des erreurs. Celles-ci surviennent généralement lorsque vous lui donnez des instructions complexes de manière consécutive.
Le modèle avancé GPT-4 de Bing Chat imite bien la phraséologie humaine. Il adopte un ton décontracté et conversationnel, compose des messages sans erreur et présente des informations pertinentes.
ChatGPT est meilleur que HuggingChat mais inférieur à Bing Chat. Bien que grammaticalement correctes, ses sorties semblent rigides et robotiques.
6. Calcul et précision mathématique
Malgré les données limitées de HuggingChat, il peut répondre correctement à des questions mathématiques. Notez simplement qu’il est possible qu’il n’affiche pas la solution.
Lorsqu’on lui pose plusieurs fois le même problème, HuggingChat donne des réponses différentes.
Bing Chat a accès à des données en temps réel, ce qui lui permet de répondre avec précision aux problèmes mathématiques.
Il montre même sa solution complète.
ChatGPT ne peut pas résoudre les problèmes de statistiques. Mais son modèle linguistique précis génère des résultats exacts même si vous répétez la question plusieurs fois.
7. Transparence
HuggingChat est une alternative open-source à ChatGPT. Les utilisateurs peuvent accéder librement à la carte de modèles et à la bibliothèque de données de HuggingChat. Il montre même comment appliquer le même système d’intelligence artificielle à des applications.
Les restrictions rigoureuses imposées par Bing Chat l’empêchent de discuter de ses processus généraux.
ChatGPT est transparent sur ses processus de back-end. Il ne fournit pas de bibliothèque open-source comme HuggingChat.
8. L’accessibilité
Vous ne pouvez accéder à Hugging Chat et ChatGPT que par l’intermédiaire de leurs sites web. Ils fonctionnent sur différents navigateurs, par exemple Google Chrome, Microsoft Edge, Safari et Brave.
Évitez les applications ChatGPT pour smartphone comme la peste. OpenAI n’a pas publié de version mobile officielle. Toute application qui prétend être ChatGPT est fausse.
En revanche, Bing Chat offre une accessibilité multiplateforme. Outre l’accès à la fonction Chat sur son site Web, vous pouvez l’utiliser par l’intermédiaire de son site Web :
- Extension de navigateur : Vous trouverez une extension Bing Chat dans le coin supérieur droit de Microsoft Edge.
- Intégration de Skype : Mentionnez Bing Chat dans vos discussions de groupe ou envoyez-lui un message privé sur Skype.
- Mobile App : La version mobile de Bing Chat est disponible sur l’Apple App Store et le Google Play Store.
La principale limite de Bing Chat est que sa version web ne fonctionne que sur Edge. Cela peut s’avérer gênant si tous vos identifiants, extensions et signets se trouvent sur un autre navigateur.
9. Vitesse de traitement des données
HuggingChat, ChatGPT et Bing Chat peuvent analyser et produire des centaines de mots en quelques secondes, mais ils traitent les entrées différemment. Les lacunes ne gênent pas les messages simples. Cependant, vous les remarquerez probablement lors de l’exécution de tâches longues et complexes en plusieurs étapes.
HuggingChat est sujet à des pannes. Attendez-vous à des dysfonctionnements pendant les heures de pointe, en particulier lors de l’exécution d’invites complexes. Mais comme HuggingFace dispose de moins de ressources que Microsoft et OpenAI, il est compréhensible que ses serveurs soient moins performants.
Pendant ce temps, Bing Chat est beaucoup plus fiable que HuggingChat. Il se bloque rarement. Les réponses sont seulement plus lentes que celles de ChatGPT parce que Bing tire des données en temps réel en ligne.
Les versions plus récentes de ChatGPT sont également devenues très fiables. Elles sont plus rapides et moins sensibles aux surcharges des serveurs. Vous pouvez envisager de vous inscrire à ChatGPT Plus pour utiliser un modèle GPT-4 plus rapide et plus précis.
HuggingChat ou Bing Chat sont-ils meilleurs que ChatGPT ?
HuggingChat fait actuellement pâle figure par rapport à ChatGPT et Bing Chat. Il fait des fautes de frappe, contient des données limitées sur les événements postérieurs à 2021 et ne comprend pas les instructions complexes. Toutes ces lacunes déclenchent également des hallucinations. Il faut espérer que HugggingFace expose son chatbot à davantage de modèles et d’ensembles de données de qualité ; sinon, la transparence serait son seul argument de vente.
En ce qui concerne ChatGPT et Bing Chat, envisagez de tester ces deux plateformes vous-même. Pesez le pour et le contre. ChatGPT est polyvalent mais ne fournit pas d’informations en temps réel, tandis que Bing Chat est connecté à l’internet et suit des restrictions rigides.
