테스트 프레임워크 & 자동화 테스트 도구: 2026년 추천

Playwright는 단일 API로 Chromium, Firefox, WebKit을 제어하는 웹 테스트 및 자동화 프레임워크입니다.

DevTools Protocol 또는 WebDriver BiDi를 통해 Chrome이나 Firefox를 제어하는 고수준 API를 제공하며, 기본적으로 헤드리스 모드로 실행되는 JavaScript 라이브러리입니다.

React, Vue, Angular, Svelte 등을 지원하며 UI 컴포넌트를 격리된 환경에서 만들고 문서화하고 테스트하는 프런트엔드 워크숍입니다.

Go로 작성된 셀프 호스팅 올인원 소프트웨어 개발 서비스로, Git 호스팅, 코드 리뷰, 이슈, 패키지 및 CI/CD를 제공합니다.

코드 호스팅, CI/CD 파이프라인, Gitspaces 개발 환경, 아티팩트 레지스트리를 통합한 셀프 호스팅 가능한 오픈소스 개발자 플랫폼입니다.

구조화된 접근성 스냅샷을 통해 LLM 클라이언트가 Playwright로 실제 브라우저를 제어하도록 하는 Model Context Protocol 서버입니다.

LLM 애플리케이션을 추적·평가·프롬프트 관리·디버깅하는 오픈소스 엔지니어링 플랫폼으로, 자체 호스팅할 수 있습니다.

AI 어시스턴트가 저장소를 읽고 이슈와 pull request를 관리하며 GitHub Actions를 다루도록 하는 GitHub 공식 MCP 서버입니다.

Git 저장소, 파일, stdin에서 하드코딩된 비밀번호·API 키·토큰을 탐지하는 CLI 도구입니다.

에이전트, LLM 앱, ML 모델의 디버깅·평가·모니터링·최적화를 지원하는 오픈소스 AI 엔지니어링 플랫폼입니다.

계정이나 인증 토큰 없이 로컬에서 AWS 서비스를 실행할 수 있는 무료 오픈소스 AWS 에뮬레이터입니다.

선언형 설정과 CI/CD 연동을 제공하는 프롬프트 평가 및 LLM 앱 레드팀 테스트용 CLI·라이브러리입니다.

GitLab Community Edition은 Git 저장소, 코드 리뷰, CI/CD, 이슈 추적을 관리하는 Ruby on Rails 기반의 자체 호스팅 웹 앱입니다.

Git 저장소에 정의된 상태로 Kubernetes 애플리케이션을 동기화하는 선언형 GitOps 지속적 배포 도구입니다.

AI 에이전트 추적, LLM 출력 평가, 프롬프트 관리, 프로덕션 모니터링을 위한 오픈소스 LLM 옵저버빌리티 및 평가 플랫폼입니다.

사용자 관점에서 컴포넌트를 조회하고 상호작용하는 가벼운 React DOM 테스트 유틸리티입니다.

Pytest와 비슷한 방식으로 RAG, 에이전트, 챗봇, 음성 에이전트 등을 평가하는 메트릭을 제공하는 오픈소스 Python 프레임워크입니다.

eBPF로 실제 트래픽을 기록해 테스트와 데이터 모의 객체로 재생하는 오픈소스 API·통합 테스트 도구로, 코드 변경이 필요 없습니다.

정규식이나 AST 대신 코드와 유사한 패턴으로 버그를 찾고 코딩 표준을 적용하는 빠른 오픈소스 정적 분석 CLI입니다.

로컬, CI, 클라우드에서 컨테이너로 코드베이스를 빌드·테스트·배포하는 프로그래밍 가능한 자동화 엔진입니다.

일관된 상태 관리와 조합 가능한 기능, 사이드 이펙트 제어, 강력한 테스트 지원을 제공하는 Apple 플랫폼 앱 개발용 Swift 라이브러리입니다.

작은 테스트부터 애플리케이션과 라이브러리의 복잡한 기능 테스트까지 쉽게 작성할 수 있는 Python 테스트 프레임워크입니다.

수십 가지 표준 학술 벤치마크에서 언어 모델의 few-shot 평가를 실행하는 통합 프레임워크입니다.

AI 코딩 어시스턴트와 테스트 스위트를 위한 자연어 기반 Android 자동화. 실제 기기와 에뮬레이터에서 실행

LLM 애플리케이션과 에이전트의 추적, 평가, 디버깅을 위한 오픈 소스 자체 호스팅 AI 옵저버빌리티 플랫폼입니다.

자연어로 테스트 목표를 설명하고 에이전트로 앱을 조작하는 웹·모바일 앱용 E2E 테스트 프레임워크입니다.

프로젝트의 버그, 취약점, 유지보수 문제를 검사하고 CI 파이프라인에 Quality Gates를 적용하는 자체 호스팅 코드 품질·보안 플랫폼입니다.

LLM 애플리케이션 구축, 학습, 서빙, 평가 및 모니터링에 쓰이는 오픈소스 라이브러리 120여 개를 카테고리별로 정리한 목록입니다.

Ethereum 스마트 컨트랙트 개발을 위한 Rust 기반 툴킷으로, Forge, Cast, Anvil, Chisel을 통해 EVM 체인을 빌드, 테스트하고 상호작용할 수 있습니다.

프롬프트 인젝션, 데이터 유출, 탈옥, 유해 출력 등의 실패 유형을 탐지하는 오픈 소스 커맨드라인 LLM 스캐너입니다.

PR과 이슈에서 Claude Code를 실행해 질문에 답하고, 변경 사항을 리뷰하며, 코드를 구현하는 GitHub Action입니다.

웹 애플리케이션과 기타 서비스의 부하 및 성능을 측정하는 오픈 소스 Java 애플리케이션입니다.

스마트 컨트랙트와 dapp을 컴파일하고 배포·테스트·디버깅하기 위한 Ethereum 개발 환경입니다.

100개 이상의 데이터셋과 다양한 모델 제공자 및 추론 백엔드를 지원하는 오픈소스 LLM 평가 통합 플랫폼입니다.

TypeScript, Tailwind CSS v4, 테스트, 린트, 선택적 AWS 배포 인프라를 갖춘 프로덕션용 Next.js 15 스타터 템플릿입니다.

파일과 디렉터리를 감시하다 변경이 감지되면 명령을 실행하는 독립형 CLI 도구입니다.

Vite, Vitest, Oxlint, Oxfmt, Rolldown, tsdown을 하나의 `vp` CLI로 묶고 런타임과 패키지 매니저까지 관리하는 통합 웹 개발 도구체인입니다.

여러 테스트 프레임워크와 CI/CD 시스템의 결과를 명확한 그래픽 HTML 리포트로 변환하는 다국어 테스트 리포팅 도구입니다.

기존 CI 파이프라인에서 Terraform과 OpenTofu를 실행하고, pull request 댓글로 plan과 apply를 수행하는 오픈소스 IaC 오케스트레이션 도구입니다.

벤치마크에서 LLM, VLM, AIGC 모델을 평가하고 추론 성능을 부하 테스트하며 결과를 대시보드에서 확인할 수 있는 맞춤형 프레임워크입니다.

두 이미지의 픽셀 차이를 비교해 diff 이미지를 만드는 고속 SIMD 최적화 CLI 도구이자 Node.js 라이브러리입니다.

코딩 에이전트가 테스트와 여러 단계의 웹 작업을 위한 Playwright 자동화 스크립트를 작성하고 실행하게 해주는 Agent Skill입니다.

DBLab Engine은 개발, 테스트, CI/CD 파이프라인용 PostgreSQL 데이터베이스의 경량 클론과 브랜치를 만듭니다.

회사와 직무별로 정리한 실제 DevOps, SRE 및 클라우드 엔지니어링 면접 질문 모음

Spring Boot 4.x 및 Java 21 이상 앱을 모범 사례에 따라 만들도록 Claude를 안내하는 skills와 agents를 묶은 Claude Code 플러그인입니다.

LLM 애플리케이션 출력을 테스트하는 사전 구성 및 사용자 지정 평가기를 제공하는 Python·TypeScript 라이브러리로, LLM-as-judge 채점을 지원합니다.

Gherkin feature 파일을 자동화된 브라우저 E2E, API, 보안, 접근성 및 시각 테스트로 변환하는 오픈 소스 AI 테스트 에이전트입니다.

vCluster로 Kubernetes 클러스터를 Docker 컨테이너로 실행하고, 일시 중지·재개와 기본 제공 로드 밸런서를 지원하는 KinD 경량 대안입니다.

AI 에이전트가 테스트 계획 우선 워크플로, 검증 관문, 증거 보고서로 코드를 입증하게 하는 코딩 에이전트 스킬입니다.

Windows와 macOS를 지원하며 기기 목록, 셸 명령, 텍스트 입력, 스크린샷, 가상 디스플레이를 제공하는 Android 앱 테스트용 데스크톱 GUI

LLM 에이전트의 도구 사용을 평가하는 상태 기반 대화형 벤치마크로, 사용자 시뮬레이터와 마일스톤 기반 채점 기능을 제공합니다.

ADB, USB 케이블, 루팅 없이 코드로 실제 Android 휴대폰을 제어해 앱 테스트, 반복 작업, 폰팜, AI 에이전트에 활용하세요.