Acolad
Commander Communiquer

Déploiement rapide de l’évaluation des légendes générées par l’IA dans 45 langues

Lorsque votre outil de génération de légendes par l’IA est prêt à être déployé à l’international, comment garantir que votre modèle offre une qualité optimale dans toutes les langues? Acolad a mis en place un processus d’évaluation personnalisé en seulement deux semaines. Voici la raison.

Industrie et services

À propos du client
Un fournisseur mondial de logiciels créatifs qui développe des outils fondés sur l’intelligence artificielle destinés aux marchés mondiaux grand public et professionnels.

Alors que l’entreprise étendait à l’international sa fonctionnalité de légendes d’images par l’IA à l’échelle internationale, elle devait valider la qualité des résultats dans des dizaines de langues.

Le défi

S’assurer que vos légendes générées par l’IA transmettent correctement le sens dans 45 langues

Une légende peut être grammaticalement correcte tout en passant complètement à côté du sens. Une référence culturelle qui ne passe pas, une expression idiomatique utilisée dans un registre inapproprié, une description du contenu visuel qu'un locuteur natif ne formulerait jamais ainsi : voilà le genre d’erreurs qui nuisent à la crédibilité du produit sur un marché, et qui sont invisibles pour quiconque ne parle pas cette langue.

Lancer un produit sans données validées sur la qualité des légendes revenait à risquer des erreurs qui n’auraient émergé qu’une fois le produit accessible à l’international.

Il y avait un deuxième risque : la gouvernance. Les données d’évaluation recueillies selon des grilles d’évaluation incohérentes dans 45 langues ne sont pas comparables, et des données incohérentes ne peuvent pas permettre d’améliorer le modèle. La valeur de l’évaluation dépendait entièrement du fait que chaque évaluateur applique les mêmes critères.

person editing video on two monitors

« Découvrir après le lancement que vos légendes générées par l’IA ne fonctionnent pas sur un marché est très différent de le découvrir avant. Le coût — sur le plan de la réputation comme sur le plan qu’opérationnel — n’est pas comparable. C’est pourquoi l’évaluation doit avoir lieu avant que le produit n’atteigne les utilisateurs, et non après. »

 

Jennifer Nacinelli, responsable du programme de données sur l’IA, Acolad

Alimentez votre IA avec des données multilingues de haute qualité et à grande échelle

Acolad fournit des ensembles de données ciblés, précis et fiables pour assurer le meilleur rendement possible en matière d’intelligence artificielle et d’apprentissage automatique.

Découvrez nos services de données
square-62
La solution

Un programme d’évaluation multilingue complet – conçu et exécuté en deux semaines

Acolad a élaboré des lignes directrices et des grilles d’évaluation personnalisées pour cette mission, en conseillant le client sur les critères de qualité et les spécificités culturelles propres à chaque langue et région. Chaque évaluateur :

  • était un locuteur natif, pas un apprenant avancé;

  • était informé des dimensions précises de la qualité qui importent pour les légendes visuelles générées par l’IA;

  • appliquait des critères d’évaluation cohérents, et non son intuition linguistique personnelle.

Toutes les interactions avec les évaluateurs ont été gérées par l’entremise d’un point de contact unique, garantissant ainsi la cohérence des consignes et des contrôle de qualité sur l’ensemble du projet.

La livraison a été échelonnée en fonction des marchés prioritaires du client :

  • Semaine 1 : 10 langues prioritaires (français, italien, allemand, espagnol et un ensemble de langues asiatiques)

  • Semaine 2 : les 35 langues restantes

La gestion des flux de travaux s’est articulée autour des processus existants du client, via des flux de travaux basés sur Excel, afin d’éviter la charge liée à l’intégration de la plateforme et de garantir au client une visibilité constante sur la répartition des évaluateurs et les points de contrôle qualité tout au long du processus.

Les résultats en bref

45 langues

Évaluées en tenant compte des nuances culturelles

Prêt pour le lancement

Légendage par l’IA livré rapidement

Risques réduits au minimum

Pour l’expansion mondiale des nouveaux outils de génération de légendes par l’IA

Les résultats

Lancement mondial d’un outil de génération de légendes par l’IA sans les tracas liés à la qualité

Les 45 langues ont été livrées en deux semaines. Le client a reçu des évaluations précises sur le plan linguistique et adaptées sur le plan culturel, produites par des locuteurs natifs qui appliquent des critères cohérents sur l’ensemble des marchés visés.

Au lieu de procéder à un déploiement international sur la base d’hypothèses, l’équipe produit disposait de preuves validées par des humains sur les performances de l’outil de génération de légendes par l’IA et sur les points nécessitant des ajustements avant le lancement. C’est là toute la différence entre une décision de déploiement fondée sur les données et une décision réactive.

Cette mission a permis à Acolad de s’imposer comme le partenaire privilégié du client pour les projets d’évaluation de l’IA à grande échelle, ce qui a été confirmé par la poursuite de notre collaboration après la livraison initiale.

freelancer-avatars-centered 1

Vous cherchez des services d’évaluation des données d’IA fiables à grande échelle?

Contactez-nous