Choisissez des tâches représentatives. Mesurez plus qu’une réponse. Continuez à apprendre après la sortie.
Choisissez des tâches représentatives
Un ensemble d'évaluation doit refléter la variété réelle des entrées, les demandes ambiguës et les conditions d'échec connues. Des exemples simples peuvent à eux seuls masquer les lacunes rencontrées par les utilisateurs.
Mesurer plus qu'une réponse
Examinez l’utilisation de la source, le comportement des outils, la latence et les chemins d’escalade ainsi que la qualité des réponses. Le flux de travail complet détermine si le produit est utile.
Continuez à apprendre après la sortie
Recueillez des commentaires structurés et examinez les modèles d’échec avec un propriétaire. Les modifications apportées aux invites, à la récupération ou aux modèles doivent être testées par rapport aux mêmes tâches significatives.
