NouveauTestez en A/B modèles LLM et prompts sur de vrais utilisateurs

Des tests A/B que vos marketeurs lancent seuls. Des flags auxquels vos développeurs se fient.

Un seul outil pour toute l’équipe : un éditeur visuel pour le marketing, des SDK web, mobile et serveur pour les développeurs. Consultez vos résultats chaque jour sans vous laisser berner, laissez les guardrails arrêter un test qui fait baisser le chiffre d’affaires, et servez le tout depuis votre propre domaine : les bloqueurs de publicité ne faussent plus vos données.

  • Gratuit jusqu’à 25 000 visiteurs testés par mois
  • Offres payantes dès 49 $ par mois
  • Sans carte bancaire
  • Votre domaine, vos données
app.liftcanary.com/experiments/one-page-checkout

Experiment · Production

One-page checkout

Running · day 14

One page wins on Purchases: +12.1% conversion, 99.2% significance.

LiftAlways-valid intervalday 1 → 14
+20%+10%0%+12.1%
VariationVisitorsConversionLift
Baseline24,8124.12%—
One page24,7904.62%+12.1%
Checkout errors holdingPage load time holding

Une seule plateforme pour tout ce que vous livrez

  • N’importe quel site web
  • React et Next.js
  • Applications mobiles
  • Serveurs
  • Boutiques en ligne
  • Applications LLM

Produit

Tout ce qu’il faut pour livrer en toute confiance

Déployez progressivement, testez chaque idée et sachez en quelques jours ce qui a vraiment fait bouger vos chiffres. Un seul SDK, un seul tableau de bord, pour le marketing comme pour la tech.

Feature flags et déploiements progressifs

Activez une fonctionnalité pour 5 % des utilisateurs, un seul pays ou vos bêta-testeurs. Revenez en arrière en un clic : vos serveurs sont à jour en moins d’une seconde, sans redéploiement.

new_checkoutActivé
  • Interne100%
  • Bêta-testeurs100%
  • France25%
  • Tout le monde0%

Tests A/B, multivariés et split URL

Testez des variantes dans le code, plusieurs parties d’une page à la fois avec le résultat de chacune, ou envoyez la moitié de vos visiteurs vers une page repensée.

shop.com/checkout

  • /checkout50%
  • /checkout-v250%

Des objectifs sans code

Comptez les visites de page, les clics, les envois de formulaire et la profondeur de défilement depuis le tableau de bord. Un événement personnalisé tient en une ligne.

  • Visite de page/checkout/success
  • Clic#add-to-cart
  • Profondeur de défilement50 % de /blog/*

Des guardrails qui stoppent les mauvaises versions

Choisissez ce qui ne doit jamais se dégrader : erreurs, temps de chargement, coût, chiffre d’affaires. Si une variante dégrade significativement l’un de ces guardrails (métriques de garde-fou), LiftCanary vous alerte, ou arrête le test et maintient tout le monde sur la version sûre.

Temps de chargement

−4.2%

Respecté

Erreurs de paiement

+212%

Arrêt automatique · version d’origine rétablie

Des résultats à consulter quand vous voulez

Grâce à des statistiques toujours valides, regardez toutes les heures sans vous leurrer, ou fixez la durée à l’avance et il vous faut environ 40 % de visiteurs en moins. Percentiles pour la vitesse, plafonds des valeurs extrêmes pour le chiffre d’affaires, contrôle de la répartition du trafic intégré.

  • Achats+12.1%
  • Ajouts au panier+4.3%
  • Revenu par visiteur+9.4%

Consulté 40 foisToujours valide

Conçu pour être vu, pas bloqué

Servez le SDK et les événements depuis votre propre domaine. Les bloqueurs de publicité ne distinguent plus vos tests de votre site : vos données restent complètes.

  • cdn.testing-tool.com/sdk.jsBloqué
  • shop.com/_sk/sdk/v1/liftcanary.jsChargé

Des bandits qui envoient le trafic au gagnant

Pendant le test, le trafic se déplace vers la variante qui gagne : moins de visiteurs voient une perdante. Chaque variante garde au moins 5 %, et chaque visiteur garde la version qu’il a vue en premier.

Trafic actuelChance d’être la meilleure

  • Bouton gris9%4%
  • Vert, plus grand86%95%
  • Barre fixe5%1%

Des holdouts qui font le total

Gardez une petite part des visiteurs hors de tous les tests et de chaque gagnant mis en production, et voyez ce que valent tous vos tests réunis.

Achats

  • Exclus · 5 %4.5%
  • Tous les autres5.6%

+24% grâce à tout ce que vous avez lancé

Sans code

Modifiez vos pages sans attendre un développeur

Pointez, cliquez et modifiez votre site en ligne. Testez la modification face à l’original, ou affichez-la pour une audience sous forme de personnalisation. Vos développeurs n’ajoutent la balise qu’une seule fois.

  • Éditeur visuel

    Cliquez sur n’importe quel élément pour changer son texte, ses couleurs, ses liens ou ses images, le déplacer, le masquer ou ajouter un bandeau.

  • Tests multivariés, split URL, multipages et A/A

    Testez ensemble le titre, l’image et le bouton, envoyez les visiteurs vers une page repensée, testez tout le tunnel de commande ou vérifiez votre configuration.

  • Personnalisations et campagnes

    Montrez une modification à une seule audience, et laissez-la démarrer et s’arrêter toute seule.

  • Application Shopify

    S’installe sans toucher au code du thème et compte le panier, le paiement et les achats comme objectifs.

  • Aucun clignotement

    Vos visiteurs ne voient jamais la page d’origine se transformer en variante : le script garde la page masquée jusqu’à ce que la modification soit appliquée, 1,5 s au maximum.

Voir tout ce que permet l’éditeur (doc en anglais)

Objectifs de revenus

Désignez les gagnants selon l’argent vraiment encaissé.

Connectez Stripe, Paddle ou Chargebee, ou votre boutique ikas ou WooCommerce. Essais, abonnements, paiements, résiliations et commandes payées arrivent directement du système qui a encaissé le paiement, de serveur à serveur, et comptent comme objectifs pour le visiteur qui a vu votre test : des semaines plus tard s’il le faut, et nets des remboursements. Rien n’est deviné depuis une page de remerciement.

Abonnements

Depuis votre outil de facturation

Objectifs

  • Essai démarré(un gagnant le fait monter)
  • Devenu abonné payant(un gagnant le fait monter)
  • Revenus d’abonnement(un gagnant le fait monter)
  • Abonnement résilié(un gagnant le fait baisser)

Un visiteur, depuis Stripe

  1. Stripe Checkout

    Visiteur retrouvé

    Jour 0
  2. Essai démarré

    billing.trial_started

    Jour 0
  3. Devenu abonné payant

    billing.subscribed

    Jour 14
  4. Paiement · +49,00 $

    billing.revenue

    Jour 14

Payé après la fin du test ? Compté quand même, comme conversion tardive.

Commandes de la boutique

Depuis votre boutique

Objectifs

  • Commande payée(un gagnant le fait monter)
  • Revenus de la boutique(un gagnant le fait monter)
  • Commande annulée ou remboursée(un gagnant le fait baisser)

Une commande payée par virement

  1. Commande passée

    Pas encore payée, donc pas comptée

    Jour 0
  2. Commande payée

    store.order_paid

    Jour 2
  3. Total de la commande · +120,00 €

    store.revenue

    Jour 2
  4. Remboursement partiel · −40,00 €

    store.revenue

    Jour 9

Revenus comptés pour ce visiteur : 80,00 €. La page de remerciement annonçait 120,00 €.

Ce qu’une page de remerciement ne peut pas savoir

Une page voit la confirmation de commande, et rien après. Le système qui a encaissé le paiement sait ce que l’argent est devenu.

Ce qui s’est passéCompté sur la pageEnvoyé par votre outil de facturation ou votre boutique
Un virement jamais payéUne ventePas compté
Un paiement à la livraison refusé à la porteUne venteUne commande annulée
Une commande remboursée une semaine plus tardRevenu completRemboursement déduit
Un essai qui devient payant deux semaines plus tardJamais vuUn abonné payant

Les objectifs de page, comme les achats, comptent toujours ce qui se passe sur la page. Ceux-ci comptent ce que devient l’argent.

  • Peu ou pas de code

    Le snippet transmet l’identifiant du visiteur aux Payment Links, grilles tarifaires et boutons d’achat de Stripe, à Paddle.js et à Chargebee.js. ikas se connecte avec une application privée, WooCommerce avec notre extension WordPress.

  • Impossible à falsifier depuis une page

    Seuls les appels vérifiés avec le secret de votre outil de facturation ou de votre boutique peuvent envoyer ces objectifs. La clé SDK de vos pages ne le peut pas : personne ne peut ajouter un paiement qui n’a jamais eu lieu.

  • Une seule personne, de la visite au renouvellement

    Les paiements retrouvent le visiteur malgré l’inscription ou un changement d’appareil, renouvellements et remboursements des mois plus tard compris. Noms, e-mails et données de carte ne sont jamais conservés.

Les objectifs de revenus sont inclus dans tous les forfaits payants.Voir les tarifs

Comment les paiements retrouvent le visiteur (en anglais)
Expérimentations IA

Les évals vous disent qu’un modèle est bon. Les expérimentations, qu’il est meilleur pour vos utilisateurs.

Les évals hors ligne ne vous diront pas si un nouveau modèle, un nouveau prompt ou une autre température satisfait mieux vos clients, convertit mieux ou coûte moins cher. Placez deux configurations face à de vrais utilisateurs, mesurez côte à côte qualité, rapidité, coût et impact business, puis déployez la gagnante en toute confiance.

Compatible avec tous les fournisseurs de modèles : LiftCanary vous fournit la configuration et enregistre les résultats.

Actuel50%

model
"gpt-large"
temperature
0.7
prompt
Tu es un agent du support client de {{brand}}. Réponds en {{language}}…

Challenger50%

model
"gpt-small"
temperature
0.3
prompt
Réponds en {{language}} en 3 phrases maximum. Ajoute le lien vers l’article d’aide…

Bot de support · 14 jours · 18 240 utilisateurs

Le challenger l’emporte
MétriqueActuelChallengerÉcart
Latence par appel1 204 ms800 ms−33,6 %
Coût par appel$0,0072$0,0006−91,7 %
Réponses notées 👍30,2 %33,9 %+12,3 %
Utilisateurs ayant eu une erreur9,1 %9,4 %+3 %

Guardrail sur les erreurs respecté : aucun changement significatif

  • Changez de modèle sans redéployer

    Modèle, prompt et paramètres vivent dans LiftCanary sous forme d’AI config. Modifiez-les, déployez-les sur 10 %, revenez en arrière en un clic.

  • Coût et latence, à chaque appel

    Chaque appel enregistre sa latence, ses tokens et son coût. Voyez ce qu’un modèle moins cher vous fait vraiment économiser, et ce qu’il vous coûte en qualité.

  • Mesurez ce que ressentent vos utilisateurs

    Pouces levés ou baissés, nouvelles tentatives, transferts vers un humain : chaque signal utilisateur devient un objectif, aux côtés de vos métriques business.

  • Sûr par défaut

    Des guardrails sur les erreurs et les retours ramènent tout le monde sur le modèle actuel dès qu’un challenger commence à nuire.

Comment ça marche

De l’idée au résultat prouvé, en trois étapes

  1. 1

    Ajoutez une balise

    Collez une balise script, ou installez le SDK React, React Native ou Node. Servez-le depuis votre propre domaine en quelques minutes.

    <script src="/_sk/sdk/v1/liftcanary.js"
      data-sdk-key="pk_…"></script>
  2. 2

    Créez un flag ou un test

    Choisissez une audience, répartissez le trafic, puis définissez l’objectif qui désignera le gagnant et les guardrails qui ne doivent pas céder.

    Audience
    France · mobile
    Trafic
    50 / 50
    Objectif
    Achats
    Guardrail
    Erreurs de paiement
  3. 3

    Déployez la variante gagnante

    Suivez les résultats en direct. Quand une variante l’emporte, déployez-la pour tous en un clic. Si elle pénalise vos résultats, le test s’arrête tout seul.

    Page unique+12,1 % · gagnante

    Déployer à 100 %

Parcourez-le pas à pas dans la visite guidée

Pour les développeurs

Quelques lignes de code. Aucun clignotement.

Les flags sont évalués sur l’appareil en quelques microsecondes, sans appel réseau par flag. Sur le web, la page n’attend que la première décision, 1,5 s au maximum, et une panne de notre côté ne fait jamais tomber votre application.

  • Décisions prises localement à partir d’un datafile en cache : aucun appel réseau par flag
  • Les kill switches atteignent vos serveurs (Node.js, Python, Go, Java, Ruby, .NET) en une seconde environ, grâce aux mises à jour en direct
  • Même répartition sur le web, le mobile et le serveur : chaque utilisateur voit la même variante partout
  • SDK typés, journal d’audit de chaque modification et accès par rôles
  • Fonctionne hors ligne sur mobile ; les événements sont envoyés par lots et renvoyés en cas d’échec
Lire la documentation (en anglais)
1<!-- One tag. Flags, tests and auto-tracked goals. -->
2<script src="https://your-domain.com/_sk/sdk/v1/liftcanary.js"
3 data-sdk-key="pk_live_…"></script>
4
5// Anywhere in your code
6if (liftcanary.isEnabled("new_checkout")) {
7 showOnePageCheckout();
8}
9liftcanary.track("purchase", { value: 129.90 });

Des statistiques fiables

Consultez vos résultats aussi souvent que vous le voulez

La plupart des outils partent du principe que vous ne regardez le résultat qu’une fois, à la fin. Personne ne fait ça. LiftCanary utilise des statistiques séquentielles toujours valides, corrigées pour les variantes multiples : consulter chaque jour ne transforme jamais du bruit en faux gagnant. Et CUPED retire le bruit que les visiteurs apportent avec eux, pour vous permettre de décider plus tôt. Vous pouvez fixer la durée à l’avance ? Un test planifié demande alors environ 40 % de visiteurs en moins, et désigne quand même tôt un gagnant net.

de faux gagnants après 40 consultations des résultats

0,9 %

de faux gagnants après 40 consultations des résultats

Un test classique consulté aussi souvent désigne un faux gagnant environ 30 % du temps.

utilisateurs par variante pour repérer des erreurs multipliées par 4

~300

utilisateurs par variante pour repérer des erreurs multipliées par 4

Les guardrails détectent les fortes régressions en quelques heures, pas en quelques semaines.

de bruit en moins sur le revenu par visiteur avec CUPED

80 %

de bruit en moins sur le revenu par visiteur avec CUPED

Ce que les visiteurs ont fait dans les 14 jours précédant le test explique en partie ce qu’ils font pendant : à trafic égal, la réponse est plus nette. Les nouveaux visiteurs en profitent moins.

Simulations : 1 000 tests A/A avec 40 consultations chacun ; 300 exécutions sur un taux d’erreur de référence de 10 % ; 300 exécutions sur le revenu par visiteur avec 30 % d’acheteurs récurrents. Méthodes : mSPRT (Johari, Pekelis & Walsh, 2017) et CUPED (Deng, Xu, Kohavi & Walker, 2013).

Combien de temps durera votre test ? Calculez-le avec le calculateur

Vos données

Les données de vos visiteurs restent les vôtres

Pour les équipes soumises au RGPD ou à la KVKK turque : testez sur votre propre domaine, gardez les événements dans votre propre infrastructure si besoin, et ne conservez que le nécessaire, aussi longtemps que nécessaire.

  • Votre domaine

    Le script et les événements passent par un chemin de votre propre site. Les navigateurs de vos visiteurs ne voient que des requêtes first-party, et les bloqueurs de publicité laissent vos tests tranquilles.

  • Votre infrastructure, si vous le souhaitez

    En déploiement hybride, les événements restent dans un plan de données que vous exploitez, et LiftCanary ne reçoit que des totaux par variante. Avec Enterprise, vous pouvez aussi héberger vous-même l’intégralité de LiftCanary.

  • Consentement et demandes, c’est intégré

    Attendez le consentement grâce à un seul attribut sur la balise. Pas de cookies tiers, aucune adresse IP stockée avec les événements, et les données d’un visiteur supprimées sur simple demande.

  • Des résultats qui survivent aux données brutes

    Les événements bruts sont supprimés au bout de 400 jours. Une expérimentation terminée conserve ses résultats sous forme de totaux : définitifs, inchangés, et toujours là des années plus tard.

FAQ

Vos questions, nos réponses

Une autre question ? Écrivez-nous.

Les bloqueurs de publicité vont-ils fausser mes tests ?

Pas si vous servez LiftCanary depuis votre propre domaine. Le SDK et les événements passent par un chemin de votre site : les bloqueurs n’y voient que du trafic first-party. Le guide de configuration (en anglais) se suit en quelques minutes.

Mes pages clignotent-elles pendant le chargement d’une variante ?

Non. Les flags sont évalués sur l’appareil, sans appel réseau par décision. Sur le web, l’option anti-clignotement du script masque la page jusqu’à ce que la variante soit appliquée (1,5 s au maximum, même si le script est bloqué) : vos visiteurs ne voient jamais l’original se transformer en variante.

Le marketing peut-il s’en servir sans développeur ?

Oui. Une fois la balise ajoutée, modifiez vos pages dans l’éditeur visuel, lancez des tests split URL, programmez des personnalisations pour une audience, et comptez visites de page, clics, envois de formulaire et profondeur de défilement comme objectifs, le tout depuis le tableau de bord. Connectez Stripe, Paddle ou Chargebee, ou votre boutique ikas ou WooCommerce, et les paiements et commandes comptent aussi comme objectifs. Sur Shopify, l’application ajoute la balise pour vous.

Puis-je quitter l’outil de test que j’utilise aujourd’hui ?

Oui, et sans tout migrer d’un coup. Ajoutez la balise LiftCanary à côté de celle de votre outil actuel, créez vos prochains tests dans l’éditeur visuel ou sous forme de flags, puis retirez l’ancien script une fois son dernier test terminé. Évitez seulement de tester la même page avec les deux outils en même temps : chacun fausserait les résultats de l’autre. Il n’y a pas encore d’import automatique : si vous avez beaucoup de tests à migrer, écrivez-nous et nous vous aiderons.

Comment savoir si un résultat est réel ?

Chaque objectif affiche l’amélioration, son intervalle de confiance et sa significativité par rapport au niveau de confiance que vous avez choisi. Les statistiques restent valides quelle que soit la fréquence de vos consultations, et un contrôle de la répartition du trafic vous avertit quand les données ne sont pas fiables.

Que se passe-t-il si un test dégrade mes métriques ?

Ajoutez des guardrails, comme les erreurs, le temps de chargement ou le chiffre d’affaires. Si une variante en dégrade un de façon significative, LiftCanary vous alerte, ou arrête le test et remet tout le monde sur la version de référence, selon votre choix.

Dois-je changer ma façon d’appeler mon LLM ?

À peine. Lisez le modèle, le prompt et les paramètres de l’expérimentation avec aiConfig, et encapsulez l’appel dans measureLLM pour enregistrer latence, tokens, coût et erreurs, en Node.js comme en Python. Cela fonctionne avec n’importe quel fournisseur, puisque c’est toujours votre code qui fait l’appel.

Est-ce que ça marche pour les applications mobiles ?

Oui. Le SDK React Native met le datafile en cache sur l’appareil et fonctionne hors ligne, et un utilisateur voit la même variante sur le web, le mobile et le serveur.

Où sont stockées les données de mes visiteurs ?

Sur LiftCanary Cloud, dans notre base de données analytique, sur des serveurs situés en Allemagne (UE) ; elles sont supprimées 400 jours après leur collecte, et les expérimentations terminées conservent leurs résultats sous forme de totaux. En déploiement hybride, les événements restent dans un plan de données que vous exploitez et nous ne recevons que des totaux. Le déploiement hybride comme l’hébergement complet de LiftCanary chez vous sont disponibles avec Enterprise.

Votre prochaine version pourrait être la meilleure. Prouvez-le.

Commencez gratuitement, ajoutez une balise et lancez votre première expérimentation dès aujourd’hui.