데스크톱 애플리케이션과의 사용자 상호작용을 자동으로 캡처하여 자동화된 워크플로우를 생성하는 디자인 작업 공간의 기록 기능입니다. 레코더는 클릭, 키 입력, 데이터 입력, 시각 및 상황 정보를 화면과 단계로 캡처합니다.

AI 에이전트가 도구 구성에 제공하는 개략적인 목표를 기반으로 작업을 완료하는 데 필요한 단계를 동적으로 결정하는 데스크톱 작업 유형입니다. 정의된 경로 데스크톱 작업과 달리 적응형 경로 데스크톱 작업은 고정된 단계 시퀀스를 따르지 않습니다. 대신 AI 에이전트는 웹 페이지의 현재 상태를 확인하고 런타임에 접근 방식을 조정합니다. 단계는 동적으로 결정되므로 동일한 작업을 실행하면 결과가 다를 수 있습니다.

예: 미해결 인시던트를 검토하고 현재 우선순위 수준에 따라 라우팅합니다. 다음 단계는 AI 에이전트가 페이지에서 찾은 값에 따라 달라집니다.

자연어 입력을 처리하고, 실행 계획을 생성하고, 데스크톱 작업을 자율적 또는 반자율적으로 실행할 수 있는 AI 에이전트 스튜디오의 대규모 언어 모델(LLM) 지침 및 도구 세트입니다.

ServiceNow AI 에이전트를 생성, 관리, 테스트 및 활성화하기 위한 플랫폼 인터페이스입니다. 데스크톱 작업은 AI 에이전트가 실행 중에 사용할 수 있는 도구로 게시됩니다 AI 에이전트 스튜디오 .

자동화가 근처의 UI 요소를 식별하고 상호 작용하는 데 도움이 되는 캡처된 화면의 참조점입니다. 실행하는 동안 시스템은 컴퓨터 비전을 사용하여 앵커를 찾은 다음 상대적인 거리에 있는 UI 요소를 식별합니다. 앵커는 대상 요소 위치가 이동하거나 UI 레이아웃이 세션에 따라 다를 때 단계의 안정성과 정확성을 개선합니다.

작업 레코더를 사용하여 데스크톱 애플리케이션과 사용자 상호작용을 기록하여 데스크톱 작업을 생성하는 방법입니다. 레코더는 시각적 및 상황별 정보와 함께 클릭, 키 입력 및 데이터 입력을 캡처합니다.

미리 빌드된 커넥터를 사용하여 UI 상호작용 없이 백그라운드에서 애플리케이션 및 시스템 구성요소와 상호작용하는 데스크톱 작업의 유형입니다. 지원되는 애플리케이션으로는 , Microsoft Outlook, , Microsoft WordPDF, PowerShell, SQL, SSH 및 시스템 작업이 있습니다Microsoft Excel. 백그라운드 작업 데스크톱 작업은 사용자가 생성할 수 없습니다.

시스템이 단계를 수행하기 전에 캡처한 이미지를 일치시키는 데 필요한 정확도 수준입니다. 값 1은 100% 일치를 정의하고 0.5는 50% 일치를 정의합니다. 기본값은 0.95(95% 일치)입니다.

AI 에이전트가 데스크톱 및 웹 애플리케이션과 상호 작용하는 방식을 정의하는 재사용 가능한 자동화입니다. 데스크톱 작업은 화면, 앵커 및 단계로 구성됩니다. 화면 작업과 백그라운드 작업의 두 가지 유형이 있습니다. 이 데스크톱 작업의 경우 애플리케이션에서 고정된 단계 시퀀스를 설계합니다.AI 데스크톱 작업 Windows AI 에이전트는 편차 없이 지정한 순서대로 이러한 단계를 실행합니다. 정의된 경로 데스크톱 작업은 데스크톱 애플리케이션과 웹 기반 애플리케이션을 모두 지원하며 Google Chrome 또는 브라우저 확장이 필요하지 않습니다.

매번 동일한 시퀀스를 따르고 예측 가능한 UI 상호작용을 수반하는 작업에 대해 정의된 경로 데스크톱 작업을 사용합니다. 적응형 경로 데스크톱 작업과 대조됩니다.

예: 실행 간에 변경되지 않는 고정 양식 구조를 사용하여 배송 관리 애플리케이션에 배송 데이터를 자동으로 입력합니다.

데스크톱 작업을 생성, 구성, 관리 및 테스트하기 위한 에이전틱 데스크톱 내의 대화형 노코드 환경입니다. 작업 공간은 다양한 애플리케이션의 비즈니스 프로세스를 캡처하는 다중 화면 자동화 워크플로우를 설계할 수 있는 시각적 캔버스를 제공합니다. AI 에이전트 관리자(sn_aia.admin) 역할을 가진 사용자가 액세스할 수 있습니다.

데스크톱 작업과 상호작용하는 데스크톱 애플리케이션 간의 연결을 저장하는 기록입니다. 데스크톱 작업 애플리케이션 [sn_desktop_core_action_application] 테이블에 저장됩니다.

자동화가 메인 데스크톱 세션과 격리되어 실행되는 실행 작업 공간 내의 가상 환경입니다. 다른 작업을 계속 수행하면서 데스크톱 작업의 실행과 데스크톱 애플리케이션의 상호작용을 모니터링할 수 있습니다.

데스크톱 작업이 실행되는 실행 작업 공간 내의 격리된 Windows 세션입니다. 데스크톱 작업을 테스트하거나 패널에서 자동화를 트리거하면 데스크톱 세션이 자동으로 시작됩니다.Now Assist

실행 작업 공간에서 자동화의 현재 상태입니다. 상태에는 준비, 시작됨, 실행 중, 성공, 실패 및 취소됨이 포함됩니다.

테스트 또는 AI 에이전트 실행 중에 데스크톱 작업이 실행되는 격리된 데스크톱 세션입니다. 이 작업 공간은 디자인 작업 공간에서 데스크톱 작업을 테스트하거나 패널에서 자동화를 트리거할 때 자동으로 시작됩니다 Now Assist . 실행 작업 공간을 직접 열지 않습니다.

상호작용을 자동으로 기록하지 않고 화면 캡처를 수행하고, 앵커를 삽입하고, 단계를 개별적으로 정의하여 데스크톱 작업을 생성하는 방법입니다.

ServiceNow 사용자가 AI 에이전트 자동화를 트리거하는 인터페이스입니다. 패널을 Now Assist 통해 지침을 제공하면 AI 에이전트가 실행 작업 공간에서 적절한 데스크톱 작업을 선택하고 실행합니다. 패널 사용자(now_assist_panel_user) 역할을 가진 Now Assist 사용자가 액세스할 수 있습니다.

API 없이 씩 클라이언트 애플리케이션, 레거시 시스템 또는 SaaS 애플리케이션에서 UI 요소와 사람의 상호작용을 시뮬레이션하는 데스크톱 작업의 유형입니다. 상호작용에는 버튼 클릭, 텍스트 입력, 메뉴에서 선택 등이 포함됩니다. 화면 데스크톱 작업은 디자인 작업 공간에서 생성 및 관리됩니다.

사용자 이름 또는 암호와 같은 자격 증명에 대한 참조 이름을 저장하는 AI 에이전트 관리자가 생성한 기록입니다. AI 에이전트는 데스크톱 작업 실행 중에 이러한 기록에 액세스하여 중요한 값을 안전하게 검색합니다. 현재 SSH 커넥터, 백그라운드 작업 데스크톱 작업에 대해서만 지원됩니다.

특정 사용자에 대한 사용자 이름 또는 암호와 같은 실제 자격 증명 값을 저장하는 매개변수 기록 아래의 하위 기록입니다. 각 매개변수 기록에 대해 사용자당 하나의 매개변수 값 기록만 생성할 수 있습니다.

데스크톱 작업 내 애플리케이션 창의 캡처 이미지입니다. 화면은 실행 중에 자동화가 통과하는 애플리케이션 상태를 나타냅니다. 각 화면에는 하나 이상의 앵커와 관련 단계가 포함되어 있습니다.

데스크톱 세션을 디스플레이에 맞게 자동으로 조정하는 실행 작업 공간의 디스플레이 기능입니다. 다음 두 가지 옵션이 포함되어 있습니다.

• 창에 맞추기: 실행 작업 공간에 맞게 세션의 크기를 조정합니다.
• 원래 해상도: 필요한 경우 스크롤 막대와 함께 세션을 기본 해상도로 표시합니다.

버튼 클릭, 텍스트 입력 또는 데이터 추출과 같은 데스크톱 작업 내의 개별 상호작용입니다. 계단은 앵커를 기준으로 배치됩니다.

• 입력 단계 유형에는 텍스트 설정, 클릭, 마우스 클릭 및 보내기 키가 포함됩니다.
• 출력 단계 유형에는 텍스트 가져오기, 테이블 가져오기 및 OCR 읽기 텍스트가 포함됩니다.

실행 작업 공간의 수동 제어 옵션. 단계는 OTP 또는 CAPTCHA 입력과 같은 수동 입력을 위해 제어를 사용자에게 전송합니다. 아웃 단계는 자동화를 계속하기 위해 AI 에이전트에 통제권을 반환합니다.

에서 활성화되어 AI 에이전트 AI 에이전트 스튜디오에 추가된 데스크톱 작업입니다. 도구는 AI 에이전트에게 실행 중에 특정 작업을 완료할 수 있는 기능을 제공합니다. AI 에이전트는 이름과 설명을 기준으로 도구를 선택합니다.