logo

큐밋 인사이트 - QA 아웃소싱

QA KPI, 어떻게 준비할까? 기능부터 테스트자동까지, A사의 사례

2026.11.04

내년 QA KPI, 어떻게 준비할까?

기능부터 자동화 테스트까지, A사의 사례

내년 QA KPI는 우리 회사의 QA가 어느 단계에 있느냐에 따라 달라집니다. 기능 QA로 품질과 체계를 먼저 다지는 단계가 있고, 그 자산으로 테스트 자동화를 넓히는 단계가 있습니다. 어느 단계든 KPI의 핵심은 같습니다. 운영 문제를 해결하고, QA를 효율화하고, 비용을 줄이는 것입니다.


연말 QA KPI, 담당자는 무엇이 막막할까요?

"다른 회사는 QA KPI를 어떻게 잡을까?"

회사마다 QA를 도입한 시기와 조직이 달라 다른 회사의 KPI를 그대로 가져오기는 어렵습니다. 먼저 우리 회사가 어느 단계인지 알아야 합니다.

"얼마를 잡아야 하지?"

요즘 기능 테스트 인력 비용이 얼마인지, 자동화를 한다면 자동화 엔지니어와 솔루션 비용, 구축 기간은 어느 정도인지 감이 잘 오지 않습니다.


1단계 QA 품질 높이기: 기능 QA와 함께 체계 만들기

✅️지금 상황: QA 전담 인력이 없어 개발자나 기획자가 직접 확인하거나, 전담 인력은 있지만 전문 인력과 함께 품질을 한 단계 높이고 싶은 경우입니다.

✅️KPI 카테고리 예시

KPI 카테고리

목적

이렇게 확인해요

QA 표준 프로세스

QA 조직 성숙도 확보

배포 전 검증 단계를 정하고 지키는지

TC 자산화

QA 생산성 증가

핵심 기능 테스트 케이스를 만들고 다시 쓰는지

결함 관리 체계

품질 가시화 → 고객 신뢰 확보

결함 등록·처리 기준과 심각도별 현황

테스트 범위 체계화

QA 업무 범위 확대

기능·호환성 등 검증 범위가 문서로 정리됐는지

품질 리포팅 체계

QA 리더의 전략적 역할 강화

정기 품질 리포트를 경영진과 공유하는지

QA 성숙도 모델

QA 조직 레벨 상승

우리 QA 수준을 평가하고 다음 목표를 정하는지


✅️이 단계에서 전문 QA 아웃소싱을 활용한다면

QA 전문 인력이 검증 프로세스를 설계하고, 테스트 케이스를 작성해 자산으로 남기고, 결함 관리 기준을 함께 만듭니다. 채용 없이 필요한 기간과 인원만 투입할 수 있어, 위 KPI 중 표준 프로세스, TC 자산화, 결함 관리 같은 기본 항목을 1년 안에 갖추기 좋습니다. 시작하는 방법은 큐밋 QA 아웃소싱 가이드에 정리해 두었습니다.


2단계 테스트 자동화로 넓히기: 오픈소스·솔루션 활용하기

✅️지금 상황: 기능 테스트 프로세스와 테스트 케이스가 쌓여 있습니다. 그런데 배포할수록 원래 되던 기능을 다시 확인하는 회귀 테스트는 늘지만, 배포 일정 안에 다 확인할 시간은 부족합니다. 그래서 배포 뒤 기존 기능 일부가 동작하지 않는 일이 생깁니다.

✅️KPI 카테고리 예시

KPI 카테고리

목적

자동화 대상 선정(PoC)

효과가 큰 곳부터 투자

자동화 스크립트 자산화

자동화 생산성 증가

회귀 테스트 자동 실행

배포 뒤 결함 감소 → 운영 안정

자동화 결과 리포팅

품질 가시화

자동화 유지보수 체계

시스템이 바뀌어도 계속 쓰는 자동화, 최소한의 유지보수

반복 검증 공수 절감

QA 효율화·비용 절감


✅️이 단계에서 테스트 자동화를 구축한다면

솔루션을 도입하든 오픈소스로 구축하든 순서는 같습니다. 테스트 케이스와 시나리오를 먼저 만들고, 그것을 바탕으로 자동화 스크립트를 작성하고, 시스템이 바뀌면 유지보수합니다. 그래서 1단계 자산 없이 자동화부터 시작하면 구축이 막히고, 전체를 만들기 전에는 작게 먼저 해 보는 PoC(개념 검증)로 가능 범위를 확인합니다. 수동 테스트와 자동화를 나눠 쓰는 기준은 QA 수동 테스트 vs 자동화 테스트를 참고하세요.


내년 QA 예산은 어떤 기준으로 잡나요?

QA 예산은 기능 테스트든 자동화든 엔지니어 등급과 투입 기간(M/M, 1명이 1개월 일하는 양)으로 산정합니다. 계산 방법은 공수산정 가이드에서 볼 수 있습니다.

  1. 1단계: 1년 이상 운영할 계획이라면, 우리 서비스와 도메인에 맞는 엔지니어 구성으로 작게 시작해 범위를 넓혀 가는 방법이 있습니다. 큐밋 매니저가 맞는 구성을 함께 검토합니다. 내년에 프로젝트 단위로 일정 기간 운영해 볼 계획이라면, 기획서를 바탕으로 AI 공수산정(베타)에서 필요한 규모와 인원을 먼저 가늠해 볼 수 있습니다
  2. 2단계: 처음부터 전체를 구축하기보다, 주요 기능부터 검증한 뒤 시작하는 편이 비용과 위험을 줄입니다. 솔루션 도입과 오픈소스 구축 견적을 함께 받아 비교하고, 자동화 엔지니어는 스크립트 개발·유지보수를 맡아 기능 테스트보다 단가가 높다는 점도 감안합니다

이때 받는 견적은 예산 검토용 예상 견적이고, 최종 견적은 PoC 결과와 자동화 범위를 확인한 뒤 정해집니다.


[A사 사례] 기능 테스트 1년, PoC로 내년 자동화 KPI를 세우기까지

*A사: 500명 이상 규모의 중견기업

✅️배경

  1. A사는 올해 큐밋을 통해 처음 QA를 도입했습니다. 계획은 처음부터 두 단계였습니다. 올해는 기능 테스트 프로세스와 테스트 자산을 만들고, 내년에는 그 자산으로 핵심 기능을 자동화하는 것입니다
  2. 기능 테스트 엔지니어 2명이 영업·ERP 시스템의 업무 전체 흐름과 매주 들어오는 변경 요청을 검증했습니다
  3. 운영상 가장 큰 이슈는 배포 뒤 기존에 잘 되던 기능 일부가 동작하지 않는 일이었습니다


✅️큐밋의 기술 검증 및 수행 범위

구분

A사 PoC 내용

대상

고객사와 협의한 주요 업무 프로세스 2개, 테스트 케이스 20건

수행 방향

오픈소스 Playwright 기반으로 4일 동안 20건을 자동화한 뒤 기술 검증 결과 보고

확인 사항

20건마다 자동화할 수 있는지 확인. 그중 4건은 테스트 계정 권한이 있어야 자동화 가능

제외 범위

배포 과정과 자동으로 연결하는 일(CI/CD)

향후 진행

대상 업무 영역과 테스트 유형을 최종 정하고, 올해 ERP 업그레이드 범위를 파악한 뒤 구축


보고서는 담당자와 함께 보완해 C레벨 보고용으로 정리했고, 솔루션 도입안과 오픈소스 구축안의 예산 검토용 견적도 함께 전달했습니다. 큐밋은 "지금 전체를 구축하지는 말자"고 제안했습니다. 지금 화면 기준으로 만들면 업그레이드 뒤 스크립트를 다시 고쳐야 해서 비용 낭비로 이어질 수 있기 때문입니다.


✅️ 결과: PoC 결과를 내년 QA KPI의 근거로 활용

시점

운영 인력

올해

기능 테스트 엔지니어 2명

내년 KPI

기능 테스트 엔지니어 1명 유지 + 자동화 엔지니어 2명 (총 3명)

자동화 구축 완료 후

기능 테스트와 자동화 유지보수를 함께 맡는 1명 (계획)


자동화는 구축하는 동안 투자가 늘지만, 구축이 끝나면 운영 인력을 줄이는 방향으로 계획했습니다. 구축 뒤 구성은 진행 상황에 따라 바뀔 수 있습니다. 1년 동안 쌓은 테스트 케이스와 업무 이해가 있어 PoC를 4일 만에 끝낼 수 있었습니다.


정리

  1. QA KPI의 핵심은 운영 문제 해결, QA 효율화, 비용 절감입니다
  2. 1단계는 프로세스·TC·결함 관리 같은 기반을, 2단계는 회귀 테스트 자동화를 KPI로 잡습니다
  3. 자동화를 KPI에 넣을 때는 우리 시스템에서 확인한 PoC 결과가 가장 설득력 있는 근거입니다

자주 묻는 질문

Q. 기능 QA 단계에서는 KPI를 무엇으로 잡나요?

A. 자동화보다 표준 프로세스, 테스트 케이스, 결함 관리 같은 품질의 기반을 먼저 잡거나 고도화하는 것을 권합니다.

Q. 테스트 케이스가 없어도 자동화 PoC를 할 수 있나요?

A. 어렵습니다. 자동화 스크립트는 테스트 케이스와 시나리오를 바탕으로 작성하기 때문입니다.

Q. PoC를 하면 바로 전체 구축을 해야 하나요?

A. 아닙니다. PoC는 가능 여부를 확인하는 단계이고, 구축 시점은 시스템 변경 일정과 예산에 맞춰 정할 수 있습니다.


함께 보면 좋은 글

  1. QA 수동 테스트 vs 테스트자동화, 언제 무엇을 선택해야 할까?
  2. 국내 QA 아웃소싱, 테스트 자동화 업체 선정 가이드
  3. [구축사례] 반복되는 결함, QA 자동화 PoC와 도입 사례

내년 QA KPI, 우리 회사 단계부터 함께 검토해 보세요

업체가 따로 연락하지 않고, 큐밋 매니저 한 명과만 이야기하면 됩니다.

  1. 우리 시스템에서 자동화가 되는지 PoC로 먼저 확인하고 싶다면 → 매니저와 PoC 상담하기
  2. 6개월 이상 맡길 기능 테스트·자동화 운영 업체를 찾는다면 → 큐밋 셀렉트로 상담하기
  3. 짧은 기간의 기능 테스트 견적부터 보고 싶다면 → 무료 비교 견적 요청하기