Fonctionnalité d’enregistrement dans l’espace de travail de conception qui capture automatiquement les interactions de l’utilisateur avec les applications de bureau pour créer des workflows automatisés. L’enregistreur capture les clics, les frappes clavier, la saisie de données et les informations visuelles et contextuelles sous forme d’écrans et de pas.

Type d’action de bureau dans laquelle l’agent IA détermine dynamiquement les étapes requises pour accomplir une tâche en fonction d’un objectif de haut niveau que vous fournissez dans la configuration de l’outil. Contrairement aux actions de bureau de chemin définies, les actions de bureau de chemin adaptatif ne suivent pas une séquence fixe d’étapes. Au lieu de cela, l’agent IA vérifie l’état actuel de la page Web et ajuste son approche au moment de l’exécution. Étant donné que les étapes sont déterminées dynamiquement, les résultats peuvent varier d’une exécution à l’autre.

Exemple : examen d’un incident ouvert et acheminement en fonction de son niveau de priorité actuel, où les étapes suivantes dépendent de la valeur que l’agent IA trouve sur la page.

Ensemble d’instructions et d’outils pour les grands modèles de langage (LLM) dans Studio d’agents IA qui peuvent traiter les entrées en langage naturel, générer des plans d’exécution et exécuter des actions de bureau de manière autonome ou semi-autonome.

ServiceNow interface de plateforme pour la création, la gestion, le test et l’activation d’agents IA. Les actions de bureau sont publiées en tant qu’outils Studio d'agents IA que les agents IA peuvent utiliser pendant l’exécution.

Point de référence sur un écran capturé qui aide l’automatisation à identifier et à interagir avec les éléments d’interface utilisateur à proximité. Pendant l’exécution, le système utilise la vision par ordinateur pour localiser l’ancrage, puis identifie les éléments de l’interface utilisateur à une distance relative de celui-ci. Les ancrages améliorent la stabilité et la précision des étapes lorsque l’emplacement de l’élément cible peut changer ou lorsque la disposition de l’interface utilisateur varie d’une session à l’autre.

Méthode de création d’actions de bureau en enregistrant les interactions de l’utilisateur avec les applications de bureau à l’aide de l’enregistreur d’action. L’enregistreur capture les clics, les frappes et la saisie de données, ainsi que des informations visuelles et contextuelles.

Type d’action de bureau qui utilise des connecteurs prédéfinis pour interagir avec les applications et les composants système en arrière-plan sans interaction avec l’interface utilisateur. Les applications prises en charge sont , Microsoft Excel, Microsoft OutlookMicrosoft Word, PDF, PowerShell, SQL, SSH et Actions système. Les actions de bureau de la tâche en arrière-plan ne peuvent pas être créées par des utilisateurs.

Niveau de précision requis pour faire correspondre une image capturée avant que le système n’effectue une étape. Une valeur de 1 définit une correspondance de 100 %, tandis que 0,5 définit une correspondance de 50 %. La valeur par défaut est 0,95 (correspondance à 95 %).

Automatisation réutilisable qui définit la façon dont les agents IA interagissent avec les applications de bureau et Web. Les actions de bureau se composent d’écrans, d’ancres et d’étapes. Il en existe deux types : la tâche à l’écran et la tâche en arrière-plan. Pour cette action de bureau, vous concevez une séquence fixe d’étapes dans l’application Actions d'agents IA d'ordinateur Windows . L’agent IA exécute ces étapes dans l’ordre que vous avez spécifié, sans déviation. Les actions de bureau de chemin défini prennent en charge à la fois les applications de bureau et les applications Web, et ne nécessitent pas Google Chrome ni une extension de navigateur.

Utilisez des actions de bureau de chemin défini pour les tâches qui suivent la même séquence à chaque fois et qui impliquent des interactions d’interface utilisateur prévisibles. Contraste avec les actions de bureau de chemin adaptatif.

Exemple : Saisie automatique des données d’expédition dans une application de gestion des expéditions à l’aide d’une structure de formulaire fixe qui ne change pas entre les exécutions.

Environnement interactif sans code dans Bureau agentique pour la création, la configuration, la gestion et le test d’actions de bureau. L’espace de travail fournit un canevas visuel dans lequel vous pouvez concevoir des workflows d’automatisation multi-écrans qui capturent les processus business dans différentes applications. Accessible aux utilisateurs disposant du rôle d’administrateur d’agent IA (sn_aia.admin).

Enregistrement qui stocke l’association entre une action de bureau et l’application de bureau avec laquelle elle interagit. Stocké dans la table Application d’action de bureau [sn_desktop_core_action_application].

Environnement virtuel au sein de l’espace de travail d’exécution où les automatisations s’exécutent indépendamment de la session de bureau principale. Vous pouvez surveiller l’exécution des actions de bureau et la façon dont elles interagissent avec les applications de bureau tout en continuant à travailler sur d’autres tâches.

Session isolée Windows dans l’espace de travail d’exécution où les actions de bureau s’exécutent. La session de bureau se lance automatiquement lorsque vous testez une action de bureau ou déclenchez une automatisation à partir du Now Assist panneau.

État actuel d’une automatisation dans l’espace de travail d’exécution. Les états comprennent Prêt, Initié, En cours d’exécution, Réussite, Échec et Annulé.

Session de bureau isolée où des actions de bureau s’exécutent pendant le test ou l’exécution de l’agent IA. Cet espace de travail se lance automatiquement lorsque vous testez une action de bureau à partir de l’espace de travail Conception ou que vous déclenchez une automatisation à partir du Now Assist panneau. Vous n’ouvrez pas directement l’espace de travail d’exécution.

Méthode de création d’actions de bureau en effectuant des captures d’écran, en insérant des ancres et en définissant des étapes individuellement plutôt qu’en enregistrant automatiquement les interactions.

ServiceNow Interface à partir de laquelle les utilisateurs déclenchent des automatisations d’agent IA. Lorsque vous fournissez des instructions via le Now Assist panneau, l’agent IA sélectionne et exécute les actions de bureau appropriées dans l’espace de travail d’exécution. Accessible aux utilisateurs disposant du rôle d’utilisateur de Now Assist panneau (now_assist_panel_user).

Type d’action de bureau qui simule des interactions humaines avec des éléments d’interface utilisateur sur des applications clientes lourdes, des systèmes hérités ou des applications SaaS sans API. Les interactions incluent le clic sur les boutons, la saisie de texte et la sélection dans les menus. Les actions de bureau à l’écran sont créées et gérées dans l’espace de travail de conception.

Enregistrement créé par un administrateur d’agent IA qui stocke un nom de référence pour les informations d’identification telles que les noms d’utilisateur ou les mots de passe. Les agents IA accèdent à ces enregistrements pendant l’exécution de l’action de bureau pour récupérer les valeurs sensibles en toute sécurité. Actuellement pris en charge uniquement pour les actions de bureau du connecteur SSH, tâche en arrière-plan.

Enregistrement enfant sous un enregistrement de paramètre qui stocke la valeur d’informations d’identification réelle, telle qu’un nom d’utilisateur ou un mot de passe, pour un utilisateur spécifique. Un seul enregistrement de valeur de paramètre peut être créé par utilisateur pour chaque enregistrement de paramètre.

Image capturée d’une fenêtre d’application dans une action de bureau. Les écrans représentent les états de l’application par lesquels l’automatisation passe pendant l’exécution. Chaque écran contient un ou plusieurs ancrages et étapes associées.

Fonction d’affichage dans l’espace de travail d’exécution qui adapte automatiquement la session de bureau à l’affichage. Comprend deux options :

• Ajuster à la fenêtre : adapte la session pour qu’elle s’adapte à l’espace de travail d’exécution.
• Résolution d’origine : affiche la session à sa résolution native avec des barres de défilement si nécessaire.

Interaction individuelle au sein d’une action de bureau, comme cliquer sur un bouton, saisir du texte ou extraire des données. Les marches sont positionnées par rapport à un ancrage.

• Les types d’étapes d’entrée incluent Définir le texte, Cliquer, Clic de souris et Envoyer des touches.
• Les types d’étapes de sortie incluent Obtenir le texte, Obtenir la table et Lire le texte OCR.

Options de contrôle manuel dans l’espace de travail Exécution. Étape Transfère le contrôle à l’utilisateur pour une saisie manuelle telle que la saisie d’un OTP ou d’un CAPTCHA. Sortir renvoie le contrôle à l’agent IA pour continuer l’automatisation.

Action de bureau qui a été activée et ajoutée à un agent IA dans Studio d'agents IA. Les outils fournissent aux agents IA la possibilité d’effectuer des tâches spécifiques pendant l’exécution. Un agent IA sélectionne un outil en fonction de son nom et de sa description.