Aller au contenu principal

Construire des systèmes en lesquels les gens ont confiance

Aux enjeux d’exploitation, on se fie à la constance, pas à l’inédit.

Illuminated arched bridge at dusk with Mount Fuji beyond

On n’accorde pas sa confiance à un système parce qu’il est inédit.

On la lui accorde parce qu’il se tient.

Le virement passe. Le dossier est encore là le lendemain. Un chiffre, on peut le justifier. Le train entre en gare. Le message arrive à qui il faut. Et quand ça casse, quelqu’un peut dire ce qui s’est passé.

La confiance ne se décrète pas. Elle s’épaissit, à force de réussites banales, répétées.

C’est une mauvaise nouvelle pour beaucoup d’équipes produit. L’inédit se montre. On peut le mettre sur une scène. La constance, elle, n’a pas de démonstration : on la remarque surtout le jour où elle manque.

Un système dont on se sert vraiment se juge moins à ses plus beaux jours qu’à ses plus laids.

Une interface brillante ne rachète pas des données perdues. Un modèle d’IA raffiné ne rachète pas une décision dont on ne peut retracer l’origine. Automatiser n’inspire personne si, le moment venu, personne ne sait reprendre la main.

Les systèmes auxquels on peut se fier se reconnaissent à quelques traits. Ils disent jusqu’où ils vont. Quand ils tombent, on le voit : ils ne se taisent pas. Les gestes qui comptent se relisent. Les traces restent lisibles. L’humain garde une prise réelle, pas un décor. Ils ne changent pas de nature sans prévenir. Et des gens, quelque part, acceptent d’en porter l’exploitation.

Cela n’oblige pas à la lenteur, ni au conservatisme, ni à l’immobilité. Cela oblige à faire évoluer la machine sans casser le crédit qu’on lui fait.

L’intelligence artificielle rend l’exigence plus nette. Un système probabiliste vaut souvent précisément parce qu’il vit avec l’incertitude. Encore faut-il que l’incertitude du modèle ne se transforme pas en flou sur qui répond de quoi.

Qui s’en sert doit savoir quand c’est une IA qui parle. Qui l’exploite doit savoir quelle version a produit tel résultat. Les actes lourds de conséquences se regardent avant d’être tenus pour faits. On mesure ce que le système réussit dans le travail réel, pas seulement sur un banc d’essai. Un incident doit servir à améliorer la machine, pas à s’évaporer dans un fil fermé.

Les produits techniques les plus durs finissent par ne plus donner l’impression d’innover. Ils donnent l’impression de tenir.

Ce n’est pas un recul de l’ambition. C’est le moment où une invention passe dans l’infrastructure.

On fait confiance à un système quand on peut s’y appuyer sans s’endormir, le comprendre sans en être spécialiste, et le contester sans se voir fermer la porte du processus.

La nouveauté peut décider quelqu’un à essayer. C’est la constance qui donne une raison de rester.