How to Test Your Agents on Real Tasks With Harbor - Xander Song, Arize AI

핵심 요약

• ```json { "content_type": "ai", "executive_brief": "Harbor는 에이전트를 현실적인 작업과 데이터로 평가하기 위한 오픈 소스 프레임워크입니다. 이를 통해 Docker 환경에서 작업을 정의하고, 검증자(verifier)를 통해 성공 여부를 확인하며, 에이전트 변경 사항에 대한 피드백을 얻을 수 있습니다. Arize AI 팀은 Harbor와 Phoenix를 결합하여 프롬프트 변경이 SQL 도구 사용을 유도하고 도구 호출을 줄이는 효과를 실험하고 그 결과를 시각화하는 데 활용합니다.", "bullet_points": [ { "text": "Harbor는 자연어 지침으로 에이전트에게 현실적인 작업을 맡기고, 격리된 샌드박스 환경에서 데이터를 사용하여 에이전트의 행동을 검증하는 프레임워크입니다. 검증자는 작업별로 정의되며, 에이전트가 의도한 부작용을 생성했는지 확인하고 보상을 반환합니다.", "start_sec