À sa cinquième tentative de création d’un tableau de bord pour la maison d’un rédacteur de How-To Geek, Codex a repensé la manière de choisir une commande. Au lieu de chercher le bouton correspondant à une tâche précise, le rédacteur pouvait tracer un chemin à l’écran et choisir ainsi, d’un seul geste, la pièce, l’appareil et l’action à effectuer.

Comment un geste devient une commande

Le rédacteur a pris l’exemple de la lampe du bureau pour illustrer le fonctionnement de l’interface. Si l’on commence le tracé sur le bureau, une sélection d’appareils de cette pièce apparaît dans la colonne suivante. Si l’on prolonge le trait en passant par la lampe, les actions possibles s’affichent dans la dernière colonne. Les choix dépendent de l’état de la lampe : l’interface peut, par exemple, proposer de l’éteindre ou de régler sa luminosité à 20 %. On peut aussi accéder de là à l’ensemble des commandes d’éclairage.

Sur ordinateur, le rédacteur traçait le chemin à la souris ou au pavé tactile ; sur téléphone, il le traçait du doigt. Il a trouvé le geste intuitif, sans pour autant se prononcer sur son utilisation du tableau de bord à long terme. Il restait tout aussi mesuré sur la nouveauté de l’idée : il ne l’avait encore jamais vue dans Home Assistant, ce qui ne voulait pas dire que personne d’autre ne l’avait mise en pratique.

Pourquoi les premières versions ne répondaient pas à la demande

La demande initiale fixait un critère précis pour le choix des commandes, mais laissait toute latitude quant à leur présentation. Codex devait examiner les appareils, les entités et les automatisations de la maison, puis ne retenir que les appareils que le rédacteur commandait régulièrement à la main. Celui-ci lui avait accordé un accès assez large via l’outil Model Context Protocol de Home Assistant, qui permet aussi bien la lecture que l’écriture. Il a souligné la contrepartie en matière de confidentialité : cet accès peut exposer de nombreuses informations sur le foyer à un outil qui traite les données dans le cloud.

Ce qui retenait l’attention de Codex n’était pas forcément ce qui nécessitait une commande manuelle. Le rédacteur avait mis en place des automatisations élaborées pour surveiller et réduire le risque de moisissures dans sa maison ancienne et humide. Dans sa première version, Codex a consacré une grande partie du tableau de bord à ce risque. La deuxième mettait l’accent sur ce que les différentes automatisations s’apprêtaient à faire. Une troisième gardait bien en vue deux commandes souvent utilisées le soir — celles de la lampe de chevet et de la couverture chauffante —, mais affichait à côté une liste de problèmes non résolus. Pour le rédacteur, cela ressemblait encore davantage à un écran de suivi qu’à une interface de commande.

Invité à aller au-delà des cartes à boutons, Codex s’est inspiré de l’appareil photo. Un obturateur encadrait les images de la sonnette vidéo, tandis que différents objectifs permettaient d’afficher les commandes d’éclairage, de chauffage ou de son. Le rédacteur lui reprochait de changer de thème lorsqu’on passait d’un objectif à l’autre sans modifier fondamentalement la façon d’utiliser les commandes. Son quota d’utilisation de Codex étant presque épuisé, il a demandé une dernière version. L’interface de tracé ainsi obtenue répondait précisément à cette objection : la pièce choisie, puis l’appareil par lequel passait le trait, déterminaient les actions auxquelles le rédacteur pouvait ensuite accéder.