참고팁Reddit
대규모 테스트 스위트 사용 시 에이전트 비용 절감 전략
에이전트 기반 테스트로 인한 비용 부담을 줄이기 위한 CI 러너 최적화 및 워크플로우 운영 팁.
요약
한 개발자가 다수의 AI 에이전트와 Playwright, Chromium 등을 활용한 정밀한 테스트 환경을 구축하면서 월 20만 러너-분(runner-minutes)을 사용하는 CI 비용 문제에 직면했습니다. 특히 매 PR마다 시각적 검수를 위해 모든 페이지를 렌더링하고 스크린샷을 GitHub Artifacts에 업로드한 뒤, ChatGPT MCP GitHub 커넥터를 통해 시각적 검사를 수행하는 과정에서 테스트 시간이 60분까지 소요되고 있습니다. 기존에 제공되는 무료 러너-분만으로는 한계가 있어 비용 부담이 커지자, 현재는 일부 워크로드를 GitHub 호스팅 러너에서 외부로 이전하는 등 비용 최적화 방안을 모색 중입니다. 대규모 테스트 스위트를 운영하는 실무자들 사이에서 CI 비용 효율화와 테스트 속도 개선이 중요한 과제로 떠오르고 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 How are you managing Cl costs with very large test suites?
원문 보기 ↗