AI 에이전트 대시보드: 운영 건강을 나타내는 6개의 신호

AI 에이전트 대시보드는 토큰 차트를 그리기 전에 하나의 운영 질문에 대답해야 합니다: 이 실행이 지금 주의가 필요합니까? 가장 작은 유용한 행은 6 개의 신호를 결합합니다 정해진 순서로 적용하여 조용한 승인 기다림은 정지장과 바쁜 재시험 루프가 건강한 작업으로 오해되지 않도록하십시오. 지연시간, 모델 통화, 도구 통화, 토큰, 비용 및 추적을 유지하십시오. 그들은 귀중한 진단 증거입니다. 그 자체로 계획된 경기가 시작되었는지, 보고서는 변경되었는지, 승인이 기다리고 있는지, 또는 약속된 결과물이 존재하는지 증명하지 않습니다. 차트의 벽이 아닌 국가 행으로 시작하세요. LLM 애플리케이션 래시보드에 대한 합리적인 기본값은 서비스 텔레메트리입니다. 예를 들어 Sentry의 공식 AI 에이전트 대시보드는 에이전트 실행, LLM 호출, 기간, 모델 사용, 토큰, 도구 호출, 오류 및 추적 세부 사항을 포함합니다. 이 패널들은 이 실행 안에서 무슨 일이 일어났는지 그리고 어떤 의존성이 느려지고 비용이 많이 들었는지에 대한 답을 제공합니다. 20개의 자율주행 또는 일정한 운행에 직면한 사업자는 어느 쪽을 열어야 하는가에 대한 이전 결정이 있습니다. 콤팩트 상태 행은 다음과 같이 대답할 수 있습니다. 현장 예제 지원하는 결정 에이전트 및 작업 흐름 researcher / weekly brief 어떤 작업이 영향을 받나요? 국가 waiting:human approval 개입, 노트링, 또는 인내심이 필요합니까? 증거 연령 collector 14s ago 판례는 신선한 자료에 근거한가? 마지막 유용한 발전 3 sources added, 4m ago 그 결과물이 움직이고, 단순히 과정이 아닌가요? 다음 예상되는 사건 approval by owner 다음으로 무슨 일이 일어날까요? 결과 확인 brief.md schema: pending 완전이 믿을 수 있기 전에 무엇이 진실되어야 하는가? 국가는 증거에 근거한 판결입니다. 랜타임의 마지막 상태 문자열의 복사본이 아닙니다. 결정적인 증거를 그 옆으로 놓아라. 진전 창이 없는 스터크는 의견입니다. 심장 박동이 신선하게 유지되는 동안 13분 동안 원천 설정 변경이 없습니다. 이 분리에는 외부 에이전트 시스템에서 유용한 선례가 있습니다. 쿠버네티스는 시작, 활력 및 준비도를 하나의 탐사선으로 붕괴시키지 않습니다. 왜냐하면 올바른 반응은 다르기 때문입니다. 시작을 기다리는 것, 진정한 활력 장애 후 다시 시작하거나 작업량이 준비되지 않은 상태에서 라우팅 트래픽을 중지합니다. 그 문서들은 또한 잘 설계되지 않은 생명성 탐사선이 캐스케이드 실패를 일으킬 수 있다고 경고합니다. 에이전트 패시보드는 동일한 제어 문제를 가지고 있습니다. 라벨은 다음의 올바른 행동을 암시하는 경우에만 안전합니다. 6개의 신호를 수집하고 아래의 6개의 신호는 콤팩트한 건강 계약입니다. 실행 기록에 필드로 저장하거나 실행 시간 사건에서 계산할 수 있습니다. 각각 시간표, 출처 및 사용할 수 없는 상태가 필요합니다. 1. 컬렉터 신선함 데시보드에서 마지막으로 실행시간을 달성하거나 신뢰할 수 있는 이벤트를 수신했을 때를 기록하십시오. 수집기가 노후하다면, 오래된 심장 박동과 진전을 해석하기 전에 실행을 unreachable 또는 uncertain 로 분류하십시오. 그렇지 않으면 연결이 끊어진 호스트는 평화롭게 비활성하게 보일 수 있습니다. 수집 순서로 연결된 임계값을 사용하세요. 120초의 신선함 제한은 예를 들어 1분짜리 설문조사자에게 합리적입니다. 시간마다 동기화되는 작업에서는 말도 안 됩니다. 관찰 된 연령과 구성된 한계를 모두 표시합니다. 2. 시간표 예상되는 시작, 실제 시작, 시간 구역, 승낙 창 및 스케줄러 정책을 저장합니다. 런이 없는 것은 그 필드 없이 거의 의미가 없습니다. 스케줄러가 일시 중지되거나, 초복 정책은 의도적으로 시작을 건너뛰거나, 재체창은 놓친 작업을 연기할 수 있습니다. 템포럴의 스케줄 문서는 이러한 구별을 구체화합니다. 스케줄은 일시 중지될 수 있습니다. 겹치는 정책은 점프, 버퍼, 취소, 종료 또는 동시 실행을 허용할 수 있습니다. 재치 અપ 윈도우는 중단 후에 실행되는 놓친 동작을 결정합니다. 다른 런타임들은 다른 이름을 사용하지만, 패시보드는 여전히 격차를 설명하는 정책을 보존해야 합니다. 3. 심장 박동 활동 심장 박동은 최근 접촉 또는 실행 활동이 있음을 증명합니다. 접근할 수 없는 실행시간과 라이브 프로세스를 분리하는 데 유용합니다. 발전 시계를 앞장서는 안 됩니다. 이벤트를 좁히기 위해: heartbeat at , source , 그리고 아마도 단조적으로 증가하는 순서. 그 순서 가 계속 변화 하기 때문 에 달리는 것 을 건강 한 것 이라고 말 하지 마십시오. 4. 유익 한 발전 작업에 대한 특정 델타를 정의하십시오. 코딩 에이전트는 패치 소화가 변경되거나 합격 테스트 수를 증가시킬 수 있습니다. 연구 에이전트는 접근가능한 원본을 추가하거나 브리프를 스키마 비효율에서 스키마 비효율로 옮길 수 있습니다. 지원 에이전트가 약속된 티켓을 만들 수도 있습니다. 진전 기록에는 last progress at , 델타의 작은 설명과 검증기 버전이 필요합니다. 단계 완료과 같은 모호한 카운터를 피하십시오. 5. 기다림 의존성 정당한 대기 상태를 명시적으로 나타냅니다: human approval , credential , rate limit , external job , 또는 다른 이름의 의존성. 소유자, 요청된 행동, 그리고 알려진 경우의 마지막 날짜를 추가하십시오. 이 필드는 동작을 변경합니다. 승인을 기다리고 있는 경주에서는 허가받은 사람에게 로우팅이 필요합니다. 다시 시작하는 것이 아닙니다. 금전적 제한을 기다리는 데는 인내심이 필요할 수 있습니다. 실종된 자격증은 비밀이 다시보드에 노출되지 않고도 공급할 수 있는 사람이 필요합니다. 6. 결과 확인 경기가 시작되기 전에 완공 전제를 작성하십시오. 예를 들어: report exists, parses, and contains two reachable primary sources ; pull request exists and named checks pass ; ticket ID was returned and can be fetched ; scheduled export contains the expected date partition . declared complete 를 outcome verified 에서 분리 보관합니다. 두 번째는 true , false , 또는 unavailable , 검증기 및 검사 시간을 포함합니다. 성공한 명령은 활동이다. 의도된 유물은 결과입니다. 우선 순위 1개를 적용한다. 패시보드는 가능한 모든 경고를 같은 줄에 쌓아두지 않아야 합니다. 가장 안전하고 가장 설명적인 상태를 먼저 평가하십시오. 1. 구석기 수집기 → unreachable 2. 예상되는 시작은 그 크레이스 윈도우를 넘어 missed schedule ; 3. 이름의 의존성 → waiting:<dependency 4. 검증된 결과 없이 완전하다고 선언된 → false success 5. 신선한 심장 박동과 노후화, 진전이 0% → stuck 6. 확인된 결과 → complete 7. 긍정적인 진행 델타 → working 8. 충분한 증거가 없거나 모순된 증거 → uncertain 그 주문은 제품 결정이고 자연 법칙이 아닙니다. 여전히 독립적인 세 개의 경고를 허용하는 것보다 더 낫습니다. 동일한 연결이 끊어진 실행이 동시에 갇혀 있고 늦어지고 결과를 놓치고 있다고 주장합니다. 조사에 필요한 기본 신호를 보존하지만, 사업자에게 1개의 기본 상태와 다음 단계의 행동을 부여합니다. 이 장비는 6개의 경우를 명시적인 예제 제한에 따라 테스트합니다. 120초의 컬렉터 신선함, 300초의 스케줄 그레이스, 60초의 심장 박동 신선함, 그리고 600초의 진행 타임아웃. Node.js 20 또는 최신 버전으로 실행하세요: 정확한 출력은: 가장 중요한 쌍은 approval wait 와 retry loop 입니다. 둘 다 신선한 심장 박동이 있고, 진전이 없는 델타가 있고, 오래된 진전이 있습니다. 이름 붙여진 의존성은 첫 번째 합법적인 대기기를 만듭니다. 의존성의 부재는 두 번째 기간이 종료된 후 고정된 후보로 만듭니다. false success 사건은 최근 진행되고 완료 주장이 있지만, 결과 검증자는 거짓이기 때문에 완료 주장은 신뢰를 얻지 못합니다. 판례의 뒷부분에 진단이 붙어 상태 행이 열 가치가 있는 실행을 식별하면 세부 시각이 이유를 설명할 수 있습니다. 이를 기획하는 것은 실패한 전환을 중심으로 하는 것이 아니라 가장 쉽게 기획할 수 있는 텔레메트리 소스를 중심으로 하는 것입니다. missed schedule 에 대해 스케줄 표현, 시간 구역, 활성화 된 상태, 예상 및 실제 시작, 중복 정책 및 최근 실행 역사 표시. waiting 의 경우, 의존성, 소유자, 요청된 권한, 연령 및 제한된 상기 조치를 표시하십시오. stuck 의 경우 진전 증거와 반복된 도구 서명과 함께 심장 박동 순서를 표시하십시오. false success 에 대해 실패한 예측과 함께 완료 주장을 표시하십시오. 그리고 추적, 지연, 토큰, 비용, 모델, 도구 패널을 추가합니다. 고정된 실행에 첨부된 토큰 스피크는 실행될 수 있다. 검증된 결과에 첨부된 동일한 스피크는 사고가 아닌 비용 검토 항목이 될 수 있다. 도구 호출 반복은 정지기를 설명할 수 있지만 동일한 호출은 작업의 진행 증거가 변화하는 것을 멈추기 전까지는 루프의 증거가 아닙니다. 사유관계를 위한 시간표를 사용하세요: 이 견해 는 조용 한 시간 을 이해할 수 있게 해 준다. 또한 모든 알레르트에 증거 연령을 알려줍니다. 12시03분 이후에 어댑터가 보고를 중단하면, 패시보드는 영원히 녹색 상태를 유지하기 보다는 unreachable 또는 uncertain 로 이동해야 합니다. 임계값과 데이터 수집을 제품 한계로 취급한다 고치는 생산 기준이 아닌 반사 예제 집합입니다. 파일이 변경되지 않은 10분은 심도있는 분석에 정상적이기도 하고 1분 대기업 노동자에게는 재앙이 될 수도 있습니다. 워크플로우에 따라 창을 캘리버하고, 판례 옆에 있는 구성을 기록하세요. 진보는 가장 어려운 신호입니다. 소화, 줄 수, 상태 코드, 테스트 결과 또는 스키마 검사와 같은 결정적 증거를 선호합니다. 결과가 질적일 때, 버전된 평가자는 증거를 기여할 수 있지만, 그 점수는 불확실합니다. unavailable 를 실제 상태로 유지하십시오. 실종된 증거를 건강한 것으로 변환하지 마십시오. 건강 증진을 위해 필요한 최소한의 금액을 수집하십시오. 국가 행은 일반적으로 명령, 응답, 비밀, 원자 도구 사용 부하 또는 절대적인 지역 경로가 필요하지 않습니다. 불투명한 실행 식별자, 시간표, 작은 카운터, 검증자 결과 및 편집된 의존성 클래스는 첫 번째 결정을 이끌 수 있습니다. 더 풍부한 흔적은 별도의 저장 및 액세스 규칙을 가질 수 있습니다. 마지막으로, 원자 상태를 되돌릴 수 없는 자동화로 직접 연결하지 마십시오. 쿠버네테스의 생명성 경고는 여기에 관련되어 있습니다. 과도하게 자신감 있는 건강 검사가 회복을 악화시킬 수 있습니다. 래시보드는 제한된 재시험, 일시 중지 또는 상기제를 추천할 수 있지만, 그 행위는 권위, 재시험, 시간 및 비용 제한을 존중해야 하며, 문제는 유용한 진보 또는 예상된 결과가 관찰된 후에야 해결되어야 합니다. Sidewisp가 들어맞는 곳 Sidewisp의 제품 방향은 사람들이 이미 실행하고 있는 에이전트들에 대한 건강 관점입니다. 접근성, 유용한 진보, 메모리 및 도구 접근성, 결과 증거, 비용 신호 및 명시적인 승인 경계를 가진 통제된 복구. 그것은 실행 시간, 스케줄러, 모델 게이트웨이 또는 원시 추적 시스템을 대체하는 것이 아닙니다. 그 설명은 제품 방향이고 일반적으로 사용할 수 있는 모니터링의 주장이 아닙니다. Sidewisp는 현재 비공개 프리뷰 단계입니다. 공개 사이트, 인터랙티브 시범 및 기사 시스템은 실시간입니다. 생산 에이전트 건강 수집, 런타임 어댑터, 자동 복구, 크론 관리 및 토큰 비용 분석은 일반적으로 배송되지 않습니다. 이 6 신호 대시보드 계약이 당신이 해결해야 할 운영 문제와 일치한다면 개인 미리보기에 참여하십시오. 주요 출처 경비자 AI 에이전트 대시보드 런, LLM 호출, 기간, 모델, 토큰, 도구, 오류 및 추적에 대한 공식 필드. 쿠버네테스 활력, 준비 및 시작 탐사 건강 검사, 반응, 임계량 및 실패 경고의 공식 분리. 시간적 일정은 공식 스케줄, 일시 중지, 겹치는 것, 追赶 및 실패 정책의 의미론