Macha
Évaluation continue

Notez chaque conversation, pas seulement les évidentes.

Chaque conversation gérée par votre agent est notée par rapport à ses propres instructions. Voyez exactement quelle règle a été suivie et laquelle a glissé, au moment où elle glisse.

Note pour conv_6a5a1206 · @refundAgent à l'instant
Instructions suivies Oui

L'agent a récupéré le ticket, vérifié l'historique de commandes du client et vérifié la fenêtre de remboursement avant de répondre.

Suivie

Confirmez toujours les détails de commande du client avant de citer la politique.

Il a proposé un remboursement sans demander le motif du retour, ce que les instructions exigent.

Non suivie

Avant d'approuver un remboursement, demandez au client le motif du retour.

Ticket 8421 · réponse de remboursement

Oui · a suivi la vérification de politique de remboursement

2m

Ticket 8420 · question d'expédition

Partiellement · a sauté le lien de suivi

4m

Ticket 8419 · demande de retour

Oui · a demandé le motif du retour

7m

Ticket 8418 · escalade

Non · a manqué l'étape de transfert

11m

Notez chaque conversation.

  • Oui / Partiellement / Non

    Un verdict clair sur chaque conversation avec une justification écrite.

  • Gratuit avec chaque plan

    L'évaluation continue tourne sur chaque conversation, sans coût supplémentaire.

  • Notée contre la bonne version

    Jugée contre les instructions qui étaient en ligne au moment de la conversation, pas ce que vous avez édité depuis.

Le juge cite la règle exacte.

  • Citations textuelles

    Quand une règle est citée, elle est citée directement depuis vos instructions. Pas de paraphrase.

  • Suivie, non suivie, ambiguë

    Chaque règle référencée par le juge est étiquetée, vous voyez d'un coup d'œil ce qui a tenu et ce qui a glissé.

  • Lisez ça comme une revue, pas une note

    Règle + raisonnement ensemble, ainsi un relecteur sait exactement pourquoi une décision était bonne ou mauvaise.

Pourquoi · @wismoAgent · ticket 8421

A lu le ticket, puis est allé directement à la consultation de commande Shopify comme demandé.

Suivie

Pour chaque question d'expédition, consultez la commande avant de répondre.

A inclus le lien de suivi et la fenêtre de livraison dans le même message.

Suivie

Partagez l'URL de suivi et la fenêtre de livraison estimée dans la même réponse.

Le seul faux pas : a laissé le statut du ticket ouvert alors que en attente aurait été plus précis.

Non suivie

Si le client attend encore la livraison, mettez le ticket en attente avant de répondre.

Suivez l'adhérence dans le temps.

Chaque conversation notée contribue à un score d'adhérence glissant. Quand il bouge, vous savez exactement quelle règle a commencé à glisser.

Score d'adhérence

86%

↑ 4% vs semaine dernière
Oui 312
Partiellement 48
Non 11

30 derniers jours

@refundAgent
371 conversations évaluées
Jun 18Jun 25Jul 2Jul 9Today

Règle qui échoue le plus · 22 conversations

Avant d'approuver un remboursement, demandez au client la raison du retour.

A commencé à glisser le 2 juillet. Revenir au modèle précédent sur l'échantillon l'a rétabli en un jour.

Construit avec Claude Code

Étendez-le avec un agent de code.

L'évaluation continue est un signal en direct que vous pouvez brancher à ce qui vient après. Un résumé nocturne. Un ping Slack quand l'adhérence chute. Un rapport hebdomadaire pour votre équipe.

Donnez votre clé API Macha à Claude Code ou Codex et il pourra lire la forme de vos évaluations et construire le workflow que vous avez en tête, sans que vous écriviez la plomberie.

Créer avec Claude Code et Codex
Slack

#qualite-support

Bot d'évals Macha · 9h00

Adhérence hebdomadaire pour @refundAgent

Oui

312

Partiellement

48

Non

11

Faux pas principal : « demander motif du retour », 22 conversations.

Comment chaque note atterrit

Conversation

@refundAgent

A appelé get_ticket, vérifié l'historique de commandes, envoyé la réponse.

1

La conversation se termine

Chat, autonome, embed ou transfert. Au moment où l'exécution se termine, la note se lance en arrière-plan.

Y
Suivie
N
Non suivie
Juge GPT-5
2

Le juge note

Le juge lit la trace complète et cite la règle exacte qui a été suivie et celle exacte qui a glissé.

Score glissant
Règle qui échoue le plus
Alertes de dérive
3

Regardez l'adhérence bouger

Un score glissant, la règle qui échoue le plus et les alertes de dérive. Tout requêtable, tout exportable.

Questions sur l'évaluation.

Tout ce que vous devez savoir sur la notation de chaque conversation gérée par votre agent.

Chaque conversation gérée par votre agent est notée par un juge LLM contre ses propres instructions. Le juge choisit un verdict (Oui, Partiellement ou Non), cite les règles exactes qu'il a vues suivies ou glissées, et stocke chaque jugement comme un enregistrement que vous pouvez interroger, grouper et exporter.
Non. L'évaluation continue est incluse gratuitement dans chaque plan, y compris les essais. Les jugements ne consomment aucun de vos crédits, vous pouvez donc la laisser active sur chaque agent, chaque conversation, sans surveiller le compteur.
Le juge lit la trace complète d'une conversation terminée, puis répond à une question : l'agent a-t-il suivi ses propres instructions ? Il note contre les instructions qui étaient en direct au moment de la conversation, cite la règle textuellement et étiquette chaque règle citée comme suivie, non suivie ou ambiguë.
Le juge et son schéma sont verrouillés pour que les résultats soient comparables entre agents et dans le temps. Ce que vous personnalisez, ce sont les instructions de l'agent lui-même. Chaque règle que vous écrivez est une règle contre laquelle le juge notera dans les futures conversations. Si vous voulez une variante par équipe ou par workflow, vous pouvez aussi lancer vos propres études manuelles à côté de l'évaluation continue.
Non. La note tourne après la fin de la conversation, en fire-and-forget, en arrière-plan. Votre agent répond au client sans attendre le juge, et le jugement atterrit tout seul une fois l'exécution terminée.
Zendesk
5,0 sur Zendesk Marketplace

Adoré par les équipes de support du monde entier

Découvrez ce que les équipes de support disent de Macha AI.

The application seems excellent to me! We are still testing, and we need support for some details and they were extremely efficient too!

Daniela Costa

Daniela Costa

Head of Support, Seabra

Macha has been a great addition to our support toolkit. It generates clear, well-organized responses that fit naturally into our workflow. One feature we particularly appreciate is its ability to automatically reply in the same language as the ticket.

Marius F

Marius F

Support Head, Zentana

We've been using Macha for a little while now and it's been really great addition so far! It's powerful, convenient, and makes getting work done a lot easier for our agents.

Alexander Wedén

Alexander Wedén

Head of Support

Support team is very helpful and responsive. Really enjoy how lightweight this is within Zendesk itself vs other more intrusive tools.

Cathleen Wright

Cathleen Wright

Zendesk Admin, Cortex IO

So far it's pretty good! Our queries are a little nuanced, so we can't always use it, but it's got enough utility for us. It can even incorporate our bilingual country with greetings in a second language.

Jae Oliver

Jae Oliver

Head of Support, Wise

Really enjoying using Macha, it has made a noticeable difference to our support team in a short amount of time. I really like the ticket summary feature, saves us a lot of time.

Harry Jackson

Harry Jackson

Head of Support, Crumb

Macha AI is a great addition to my workspace! It's powerful, convenient, and it really makes productivity so much easier for our agents!

Dave G

Dave G

Head of Support, Cyber Power Systems

Very impressed! AI integration for Zendesk has certainly come a long way and Macha seems to set the standard for now. This will for sure save lot of time in our support team.

Pauli Juel

Pauli Juel

Head of CS, Dokument24

Macha has been working great for us so far! The auto-responses are accurate and our resolution time has dropped significantly.

Lana T

Lana T

Zendesk Admin, Swotzy

Macha AI is a great addition. The knowledge base feature means our agents always have the right answers at their fingertips.

Mischa Wolf

Mischa Wolf

Head of Support, Topi

We're enjoying this integration so far. It's made our support team more efficient and our customers get faster responses.

Paula G

Paula G

Head of Customer Support, Xly Studio

The team enjoys using it. It saves considerable time on common questions and the integration options are excellent.

Kilian Leister

Kilian Leister

Support Head, Didriksons

Prêt à booster votre équipe avec l'IA ?

Démarrez en quelques minutes. Connectez vos outils, configurez vos agents et laissez l'IA s'occuper du reste.

500 crédits gratuits · sans limite de temps, sans carte de crédit