Google a donné la priorité à l’évaluation des réponses rapides des chatbots plutôt qu’à l’évaluation de la qualité des résultats de recherche, du moins pour certains de ses contractuels, depuis janvier, rapporte Insider.
Pourquoi nous nous soucions. Google consacre actuellement beaucoup de ressources à Bard et à d’autres initiatives d’IA. La recherche reste son produit principal – et sa principale source de revenus – il est donc intéressant d’apprendre que Google est si fortement investi dans Bard qu’ils auraient retiré des ressources de l’évaluation des résultats de recherche, ce qui pourrait potentiellement avoir un impact sur la qualité.
Examen des invites de l’IA, pas de recherche. Les évaluateurs reçoivent une invite de l’utilisateur (par exemple, une question, une déclaration ou une instruction), ainsi que deux réponses possibles générées par un chatbot IA (le nom « Bard » n’a pas été utilisé). Les évaluateurs ont été chargés de choisir la meilleure réponse.
Mais. Les évaluateurs se retrouvent à deviner plutôt qu’à évaluer et à vérifier les réponses du chatbot. C’est parce que certains évaluateurs ont déclaré qu’ils n’avaient pas assez de temps pour rechercher quelle réponse était la meilleure, en particulier sur des sujets techniques ou complexes qu’ils ne connaissent peut-être pas, selon Insider.
Voilà pour EEAT. Les évaluateurs de Google disposent d’un temps spécifique pour accomplir leurs tâches, qui varie de 60 secondes à plusieurs minutes.
- « Trois heures de recherche pour effectuer une tâche de 60 secondes, c’est un excellent moyen de définir le problème auquel nous sommes confrontés en ce moment », a déclaré un évaluateur à Insider.
Rechercher des évaluateurs de qualité. Google emploie des évaluateurs humains depuis au moins 2005, les chargeant d’évaluer la qualité des pages, des sites Web et des résultats de recherche, à l’aide d’un ensemble complet de directives. Google a toujours dit que les commentaires des évaluateurs n’avaient pas d’impact direct sur les classements de recherche organiques, mais leurs commentaires pourraient être utilisés pour évaluer les changements.
Les Googleurs ont également été invités à aider à améliorer Bard. Google a demandé à ses employés de passer 2 à 4 heures à tester Bard, à réécrire les réponses ou à fournir d’autres formes de commentaires, comme nous l’avons signalé en février.
Lisez le rapport Insider (avertissement : paywall). Les sous-traitants de Google disent qu’ils n’ont pas assez de temps pour vérifier les bonnes réponses du chatbot IA de l’entreprise et finissent par deviner via Thomas Maxwell.
