핵심 요약 Vercel Sandbox에서 Harbor 기반 평가를 실행할 수 있게 됐습니다. Terminal-Bench를 포함해 Harbor 레지스트리의 SWE-bench, tau3-bench, OSWorld 같은 벤치마크를 --env vercel로 실행하면 각 trial이 격리된 Firecracker microVM에서 동작합니다.
주요 변경 Harbor 0.22.0 이상이 필요하며, 각 평가 작업의 네트워크 정책은 VM 외부의 Sandbox 방화벽에서 적용됩니다. 선택적으로 자격 증명을 outbound 요청에 주입할 수 있어 비밀값이 Sandbox 내부로 들어가지 않도록 구성할 수 있습니다. Vercel AI Gateway와 함께 사용하면 동일한 평가 명령에서 모델만 바꿔 여러 제공자의 모델을 비교할 수 있습니다. 공식 원문에는 별도의 GA·Beta·Preview 상태가 명시되지 않았습니다.
개발자 영향 로컬 장비의 병렬 처리 한계 없이 격리된 환경에서 에이전트·모델 벤치마크를 병렬 실행하기 쉬워졌습니다. 특히 Terminal-Bench나 SWE-bench 계열 평가를 반복하는 팀은 Vercel Sandbox를 Harbor 실행 환경으로 직접 사용할 수 있습니다.
발표 시각(KST) 2026년 9월 17일 · 세부 시각 미공개
새 글 받아보기
RSS 리더에서 BlogFlow의 새 글을 확인할 수 있습니다.