메뉴

최고의 자동화 테스트 도구를 선택하는 방법 (전체 가이드)

how choose best automation testing tool

문제를 제거하기 위해 도구를 사용해보십시오

이 튜토리얼에서는 쉽게 참조 할 수 있도록 테스트 자동화 도구 비교 매트릭스를 사용하여 테스트 자동화 도구 선택 기준 및 체크리스트를 다루었습니다.

프로젝트에 가장 적합한 자동화 도구 선택에 대한 A-Z 가이드 :

이것은 4입니다일테스트 자동화 튜토리얼 시리즈의 튜토리얼. 이 페이지에서이 시리즈에 게시 된 모든 기사를 확인하십시오 : => 프로젝트에서 자동화 테스트를 시작하기위한 궁극적 인 가이드

테스트 자동화 도구 선택은 조직에서 자동화를 시작하기 전에 가장 중요한 단계 중 하나입니다.

이 도구는 전체 자동화 작업에 큰 영향을 미치기 때문에 중요합니다. 도구가 훌륭하고 필요한 기능을 제공하면 자동화가 더 쉽고 효과적입니다.

자동화 도구를 선택할 때 고려해야 할 많은 기준이 있습니다. 그들 중 일부는 이전 기사 중 하나에서 논의했습니다. 여기에서는 테스트 자동화 도구를 선택할 때 고려해야 할 가장 중요한 측면을 나열했습니다.

테스트 자동화 도구 선택 기준 체크리스트

학습 내용 :

자동화 된 테스트가 솔루션입니까?

저는 제 경력에서 많은 프로젝트를 수행했습니다. 같은 프로젝트에서 1 년 이상 작업하면 일부 작업을 자동화해야한다는 느낌이 강하게 시작됩니다. 프로젝트 관리에서 지금까지 고려하지 않았다면 프로젝트에 자동화 테스트를 도입 할 생각을 시작합니다.

1 년이면 누구나 프로젝트의 내용을 알 수있는 충분한 시간입니다. 한번 프로젝트 기능을 자세히 알고 있으면 자동화해야 할 반복 작업을 쉽게 결정할 수 있습니다.

약간 테스터도 지루해 동일한 반복 작업을 반복해서 수행하고 테스트 자동화에 대한 필요성을 강하게 느끼기 시작합니다.

그 말은 즉시 자동화 테스트를 시작해야한다는 의미입니까?

기필코 아니다!

자동화가 솔루션인지 결정하기 전에 작업해야하는 많은 기준이 있습니다. .

자동화 된 테스트

테스트 자동화는 언제 의미가 있습니까?

  • 반복 테스트가 많을 때
  • 회귀 테스트를 자주 반복하는 경우
  • 필요할 때 많은 수의 사용자 시뮬레이션 응용 프로그램 리소스를 사용하는 사람
  • AUT의 UI가 비교적 안정적인 경우
  • BVT 케이스가 많은 경우
  • 중요한 기능에 대해 수동 테스트 실행에만 의존 할 수없는 경우

추가 읽기 :

좋은 자동화 도구에 시간과 돈을 투자 할 적절한시기라는 것을 알게되면 필요에 맞는 최상의 자동화 도구를 찾을 수 있습니다.

프로젝트를위한 자동화 도구를 선택하는 방법은 무엇입니까?

자동화 테스트의 성공은 올바른 테스트 도구의 선택에 크게 좌우됩니다. 시장에서 사용 가능한 관련 자동화 도구를 평가하려면 많은 시간이 걸립니다. 그러나 이것은 장기적으로 프로젝트에 도움이 될 일회성 운동입니다.

내 프로젝트를 위해 자동화 도구를 검토하고 선택할 기회가 거의 없었습니다. 테스트 요구 사항과 비용 제한을 관리해야했기 때문에 작업이 어려웠지만 경험할만한 가치가있었습니다.

테스트 도구를 선택하기 전에 고려해야 할 기준은 다음과 같습니다.

테스트 자동화 도구 평가 기준

1) 자동화 작업에 할당하는 데 필요한 숙련 된 리소스가 있습니까?

2) 예산은 얼마입니까?

삼) 도구가 테스트 요구 사항을 충족합니까? 사용중인 프로젝트 환경과 기술에 적합합니까? 코드에 사용 된 모든 도구와 개체를 지원합니까? 때로는 응용 프로그램에서 사용되는 개체를 식별하는 도구의 기능이 없기 때문에 작은 테스트에 멈출 수 있습니다.

위의 세 가지 요소가 도구를 선택하는 데 가장 중요하다고 생각합니다.

4) 이 도구는 결정을 내리기 전에 평가할 수 있도록 무료 평가판을 제공합니까? 또한이 도구에는 평가판에서 사용할 수있는 모든 기능이 있습니까?

5) 현재 도구 버전이 안정적입니까? 공급 업체 회사는 우수한 고객 지원과 온라인 도움말 리소스 및 사용 설명서를 갖추고 있습니까?

6) 도구 학습 곡선은 어떻습니까? 학습 시간이 목표에 적합합니까?

7) 프로젝트 요구 사항만을위한 자동화 도구를 원하십니까? 아니면 회사의 모든 프로젝트에 대한 공통 도구를 찾고 있습니까? 프로젝트에서 대부분의 코딩 언어를 지원하는 도구를 선택하면 좋은 선택이 될 것입니다.

groovy 스크립트를 사용하여 soapui에서 데이터 기반 테스트

8) 어떤 테스트 유형을 지원합니까? 최대 테스트 유형 (단위, 기능, 회귀 등)을 지원하는 도구가 항상 더 나은 선택입니다.경고– 모든 테스트 유형을 지원한다고해서 도구를 선택하지 마십시오. 또한 도구가 복잡한 요구 사항을 자동화 할 수있을만큼 강력해야합니다.

9) 이 도구는 테스트 스크립트를 만들고 유지하기위한 쉬운 인터페이스를 지원합니까? 녹음 된 스크립트를 편집 할 수있는 기능이있는 녹음 및 재생 도구가 좋은 솔루션이 될 수 있습니다.

10) 복잡한 작업을 수행 할 수있는 간단한 인터페이스이지만 강력한 기능을 제공합니까?

열한) 복잡한 테스트 또는 부하 테스트에 대한 입력 테스트 데이터를 제공하는 것이 얼마나 쉬운가요? Excel, XML, 텍스트 파일 등과 같은 다양한 데이터 파일에서 테스트 데이터 입력을 지원하는 도구는 테스터의 자동화에 큰 도움이 될 것입니다.

12) 그래픽 인터페이스로 강력한보고 기능을 제공합니까? 명확하고 간결한 보고서는 항상 테스트 결과를 신속하게 마무리하는 데 도움이됩니다.

13) 프로젝트 계획과 같은 다른 테스트 도구와 잘 통합됩니까? 테스트 관리 도구 ?

다음과 같은 다른 기준을 고려할 수도 있습니다.

14) 도구 공급 업체 환불 정책

열 다섯) 도구에 대한 기존 고객 리뷰

16) 공급 업체가 초기 교육을 제공합니까?

팁 : 요구 사항 수집은 올바른 도구를 선택하는 가장 중요한 단계입니다. 요구 사항을 필수 기능 카테고리, 보유 기능 카테고리, 필수 기능 카테고리로 분류해야합니다. 이렇게하면 도구를 빠르게 평가하는 데 도움이됩니다. 모든 자동화 요구 사항을 지원할 수있는 도구는 이미 시장에서 찾을 수 없습니다.

최고의 자동화 도구 :

HP QTP / UFT 및 Selenium 현재 사용 가능한 가장 인기있는 두 가지 기능 테스트 옵션입니다. QTP / UFT는 다양한 코딩 언어 및 플랫폼에서 지원되는 최고의 기능 테스트 도구 인 반면 Selenium은 최고의 오픈 소스 기능 웹 테스트 도구입니다.

TOP 도구 목록은이 기사를 참조하십시오.

2020 년 상위 20 개 최고의 자동화 테스트 도구 (종합 목록)

다음 기사에서는 수동 및 자동화 테스트 문제 .

테스트 자동화 도구 선택 기준 및 체크리스트

최고의 자동화 테스트 도구를 선택하기 전에 물어볼 10 가지 질문

조직에 맞는 자동화 도구를 선택해야하는 상황이 발생할 때마다 다음 질문을하십시오.

질문 1: 자동화 도구에 대한 귀사의 예산은 얼마입니까?

제 생각에는 이것은 자동화 도구를 선택할 때 고려해야 할 가장 중요한 사항입니다.

찾는 이유 QTP / UFT 라이선스를 구매할 수 없을 때 조사해 보시겠습니까? QTP 도구의 가격은 약 $ 8000 (대략)입니다. 조직에서 라이선스를 구매할 수 있고 확인 된 경우 평가판을 다운로드하고 피벗 자동화 프로젝트를 만들어 기능을 테스트해야합니다. 그렇지 않으면 연구에 시간을 소비해서는 안됩니다. (회사의 라이브 프로젝트에서 QTP를 사용하려는 경우이 시나리오에 대해 이야기하고 있습니다. 학습 목적으로 다운로드하는 경우 평가판을 다운로드해도됩니다.)

질문 # 2: 도구의 실제 가격은 얼마입니까?

다음은 자동화 도구의 가격입니다. 라이선스 가격뿐만 아니라 추가 기능 가격 (필요한 경우), 지원 비용, 교육 비용 및 업그레이드 비용도 있습니다.

먼저 라이센스에 대해 이야기합시다.

a) 라이센스 유형 :

.eps 파일을 여는 방법

다음과 같은 유형의 라이선스가 있습니다.

1) 노드 고정 사용자 라이선스.

노드 잠금 사용자 라이센스는 회사 네트워크의 단일 물리적 컴퓨터에서 사용할 테스트 자동화 도구를 지원합니다. 라이선스가 허여 된 컴퓨터에서 한 번에 하나의 도구 인스턴스 만 실행할 수 있습니다. 이 라이센스는 일반적으로 컴퓨터의 호스트 이름에 바인딩됩니다.

2) 동시 유동 사용자 라이선스

유동 사용자 라이센스는 다른 컴퓨터간에 공유 할 수 있지만 한 번에 하나의 컴퓨터에서만 사용할 수 있습니다. 컴퓨터 이름이나 다른 것에 바인딩되지 않고 대신 라이선스 관리자 (서버에 설치됨)를 사용하여 다른 컴퓨터에서 동일한 라이선스를 관리합니다.

기본적으로 Node-Locked 라이센스를 사용하면 하나의 컴퓨터에 도구를 설치하고 제거한 다음 다른 컴퓨터에 다시 설치할 자유가 없습니다. 그러나 유동 사용자 라이센스를 사용하면 그렇게 할 수 있습니다.

3) 런타임 라이선스

위에서 언급 한 두 가지 유형의 라이센스는 일반적으로 스크립트를 '개발'하기 위해 구입합니다. 그래서 이것이“개발”라이선스입니다. 다른 컴퓨터에서 스크립트를 실행하려면 각 컴퓨터에 대한 '실행'또는 '런타임'라이센스가 있어야합니다.

예:

예를 들어, 테스터가 동일한 시스템에서 테스트 케이스를 개발하고 실행해야하는 경우 하나의 개발 라이센스로 충분합니다.

그러나 한 대의 컴퓨터에서 개발하고 세 대의 서로 다른 가상 또는 물리적 컴퓨터에서 테스트 사례를 실행해야하는 경우 '개발'라이선스 1 개와 런타임 라이선스 3 개를 구입해야합니다.

일부 공급 업체는 무료 런타임 라이선스 (Like Coded UI)를 제공하고 일부는 가격으로 제공합니다 (예 : Test Complete, Ranorex 등). 따라서 모든 것은 공급 업체에 따라 다릅니다.

4) 오픈 소스 라이선스

상용 도구를 사용하고 비용을 지불하거나 오픈 소스 도구를 사용하는 것은 회사의 선택입니다.

상업용 도구는 비용이 많이 들지만 많은 지원을 제공하고 많은 교육 자료가 제공되어 사용하기 쉽습니다. 상용 도구는 일반적으로 '모든 요구 사항에 맞는 하나의 도구'입니다. 오픈 소스 도구는 무료이지만 일반적으로 배우기가 더 어렵습니다. 공식적인 지원은 거의 없지만 다른 포럼을 방문하여 솔루션을 찾을 수 있습니다. 오픈 소스 솔루션은 일반적으로 특정 요구를위한 것입니다.

b) 지원, 업그레이드 및 교육 비용 :

지원, 교육 및 업그레이드 비용에 대해서는 회사 담당자에게 전화해야 할 수 있습니다. 일부 회사는 라이센스 대량 구매에 대해 특별 할인을 제공하므로 때때로이 정보가 웹 사이트에 명확하게 언급되지 않습니다. 전화 나 이메일을 통해서만 정보를 얻을 수 있습니다.

질문 # 3: 도구가 애플리케이션이 실행되는 운영 체제 / 브라우저 또는 장치를 지원합니까?

이 질문은 일반적으로 사용중인 응용 프로그램 유형에 따라 다릅니다.

a) 데스크탑 기반의 경우 :

데스크톱 응용 프로그램에서 작업하는 경우 해당 응용 프로그램을 테스트 할 운영 체제 수에 대해 설명해야합니다. 데스크톱 기반 응용 프로그램에서 작업 중이었고 Windows 7 및 Windows 8.1에서 테스트하고 싶었습니다. 그래서 둘 다 지원하기 때문에 코딩 된 UI를 선택했습니다.

b) 브라우저 기반 인 경우

웹 애플리케이션에서 작업하는 경우이 애플리케이션을 테스트 할 브라우저 수에 대해 간략히 설명해야합니다. FireFox, Chrome 및 IE에서 테스트 케이스를 실행하고 싶었습니다. 이 모든 브라우저를 지원하기 때문에 웹 애플리케이션에 셀레늄을 선택했습니다. 선택한 도구가 필요한 브라우저의 이전 버전과 최신 버전을 모두 지원해야합니다.

c) 모바일 기반 인 경우

모바일 애플리케이션에서 작업하는 경우 테스트 케이스를 실행해야하는 모바일 운영 체제를 알아야합니다. 애플리케이션이 Android와 IOS 모두에서 실행되는 경우 도구가이를 지원해야합니다. Selenium에는 Android, IOS, Windows Phone 및 BlackBerry에서 스크립트를 실행하기위한 별도의 드라이버가 있습니다. 각 모바일 OS에 대해 별도의 도구를 사용할 수도 있습니다. Android 용 Robotium, IOS 및 Android 용 Appium 및 Windows Phone 앱용 CodedUI가 있습니다.

다시 말하지만 이것은 오픈 소스와 상업용의 논쟁으로 이어집니다. 보시다시피 별도의 오픈 소스가 있습니다. 웹 기반 테스트 도구 , 모바일 기반 및 데스크탑 기반 애플리케이션. 그러나 테스트 완료, Ranorex 또는 Test Studio와 같은 상용 도구를 사용하는 경우 세 가지 유형 (모바일, 데스크톱 및 브라우저 기반 애플리케이션)을 모두 테스트 할 수 있습니다. 따라서 상용 도구의 경우 웹, 데스크톱 및 모바일 응용 프로그램을 테스트하기 위해 하나의 도구 만 배우면됩니다.

질문 # 4: 도구가 응용 프로그램에 사용되는 기술 및 타사 컨트롤을 지원합니까?

이것은 도구를 선택하는 동안 매우 중요한 측면입니다. 애플리케이션에서 어떤 기술이 사용되고 있는지 직접 알아야합니다. 개발자에게 문의하고이를 적어 두십시오. 웹 애플리케이션에서 HTML 5 또는 SilverLight를 사용하는 경우이를 지원하는 자동화 도구가 많지 않다는 점에 유의하십시오. 도구가 이러한 기술에 대한 지원을 요구하는 경우 해당 도구의 평가판을 다운로드하고 응용 프로그램에서 다른 개체를 식별 해보십시오. 도구가 그들을 식별하지 못하면 그들의 주장은 거짓입니다. 그 활동은 이후의 불행에서 당신을 구할 것입니다.

테스트 자동화 도구 비교 매트릭스 :

다음 표는 라이선스 가격 및 다양한 기술에 대한 지원과 관련하여 다양한 도구를 비교합니다. (이 차트를 다른 도구 간의 비교를 만드는 방법에 대한 학습 연습으로 사용해야하지만 제공된 데이터의 정확성은 100 %가 아닙니다)

(확대하려면 이미지를 클릭하십시오)

자동화 도구 비용

Y = 지원됨, N = 지원되지 않음, U = 알 수 없음

질문 # 5: 도구가 지원하는 언어는 몇 개입니까? 이러한 언어에 대한 숙련 된 리소스가 있습니까?

도구를 배우는 것은 한 측면입니다. 언어를 배우는 것은 또 다른 측면입니다. Java에 대한 전문 지식이있는 리소스가 있고 도구가 Java를 지원하지 않는 경우 새 언어를 배우는 시간이 자동화 작업에 추가됩니다.

또 다른 측면은 제품이 Java로 빌드 된 경우 Java 전문가 인 개발자 팀이 있어야한다는 것입니다. 이러한 개발자는 언어 관련 문제와 관련하여 자동화 팀을 도울 수도 있습니다. 리소스에 익숙한 언어를 제공하는 도구를 선택하는 것이 중요하며 리소스에 대한 학습 곡선을 최소화하는 데 도움이됩니다.

그만큼 셀레늄 WebDriver C #, Java, Python, Ruby 및 JavaScript와 같은 여러 언어로 스크립트 작성을 제공합니다. TestComplete는 또한 VBScript, JScript, DelphiScript, C ++ Script 및 C # Script와 같은 여러 스크립팅 언어로 스크립트 작성을 제공합니다.

질문 # 6: 도구가 다른 데이터 소스에 대한 연결을 지원합니까?

키워드 기반 또는 데이터 기반과 같은 자동화 프레임 워크를 사용하는 경우 도구를 모든 데이터 소스에 연결할 수 있어야합니다. 이 도구가 다른 데이터 소스와의 연결을 쉽게 제공한다면 매우 유용 할 것입니다.

CSV 파일, Excel 파일, XML 파일 및 데이터베이스와 같은 일반적인 데이터 소스에 대한 지원을 참조하십시오. 도구에 이러한 항목이 있으면 사용하는 것이 좋습니다.

질문 # 7: 자동화 도구의보고 메커니즘은 어떻습니까?

스크립트를 실행하면 통과하거나 실패합니다. 패스의 경우 기간 및 환경 정보 외에는 필요한 정보가 많지 않습니다. 그러나 실패 할 경우 실패에 대한 포괄적 인 보고서가 필요합니다. 보고서는 스크립트가 정확히 어느 단계에서 실패했는지 알려줍니다. 실패 순간의 스냅 샷은 추가적인 이점이 될 것입니다.

또한이 보고서는 이해 관계자와 공유 할 수 있도록 다른 형식으로 내 보내야합니다. 많은 도구에서 이러한 옵션이 기본 제공되며 일부 도구에서는 보고서를 포괄적으로 만드는 방법이 있습니다. 이 도구의 평가판을 다운로드 할 때주의해야 할 또 다른 사항입니다. 장애에 대한 포괄적 인 보고서를 제공하는 경우 조직에 가장 적합합니다.

질문 # 8: 도구를 테스트 케이스 및 버그 관리 저장소와 통합 할 수 있습니까?

조직에서 이미 테스트 사례를 사용 중이거나 버그 관리 도구 . 기업은 자동화 된 도구가 기존 테스트 사례 관리 도구와 통합되어 전체 애플리케이션 수명주기가 적절하게 관리되기를 원합니다. 테스트 자동화 도구를 선택하는 동안에도이 측면을 확인해야합니다.

QTP는 QLM, 코딩 된 UI 지원 TFS TestComplete는 QAComplete를 지원합니다. 일부 오픈 소스 도구는 기존 오픈 소스 테스트 관리 도구와의 통합을 지원합니다. 그것은 모두 조직이 실제로 사용하는 것에 달려 있습니다.

질문 # 9: 도구에 대한 공식 기술 지원은 어떻게됩니까?

여기서는 상업용 도구에 대해서만 이야기합니다. 상용 도구를 선택할 때 지원 측면이 매우 중요합니다. 웹 사이트에 제공된 교육 자료를 참조하십시오. 웹 사이트에 비디오와 튜토리얼이 포함되어 있습니까? 웹 사이트에 질문을 할 수있는 공식 포럼이 있습니까? 평가판을 다운로드하고 포럼에서 질문을 촬영하고 답변을받는 날을 확인하세요. 통화 지원을 제공합니까?

위의 질문은 도구에 많은 돈을 지출하고 있기 때문에 매번 질문해야합니다. 도구가 잘 지원되지 않는 경우 구입하지 마십시오.

질문 # 10: 볼만한 기술적 측면

다음과 같은 몇 가지 다른 기술적 측면도 볼 수 있습니다.

a) 기록 및 재생 지원

테스트 자동화에서 권장되는 접근 방식은 아니지만 도구가있는 것이 좋습니다. 도구의 학습 프로세스를 단순화하고 쉬운 시나리오를 쉽게 자동화 할 수 있습니다.

b) 다양한 객체 인식 방법 및 객체 매핑 지원

다른 방법으로 동일한 개체를 선택하는 것은 다양해야합니다. 일부 물체는 인식하기 어렵습니다. 따라서 다양한 선택 방법이 항상 도움이됩니다.예를 들면, 셀레늄은 ID, 이름, 클래스, 링크 테스트, XPATH , CSS 선택기 및 JavaScript. 여기에 대한 자습서가 있습니다. QTP가 객체를 고유하게 식별하는 방법 . 하나의 선택 방법이 작동하지 않는 경우 항상 도움이되는 다양한 다른 방법을 선택할 수 있습니다.

마찬가지로 개체 저장소에 이러한 개체를 올바르게 매핑하는 옵션이 있어야합니다. 이 저장소는 쉽게 업데이트하고 관리 할 수 ​​있어야합니다. Selenium에는 객체 매핑에 대한 기본 지원이 없습니다.

c) 다른 체크 포인트 또는 어설 션 지원.

체크 포인트 또는 어설 션을 기반으로 테스트 케이스가 통과 또는 실패했습니다. 도구에 예상 결과를 확인하는 다양한 방법이있는 경우 유용합니다. QTP에는 다음과 같은 다양한 체크 포인트가 있습니다. 표준 , 비트 맵 , 표 , XML, 데이터베이스 및 파일 내용 체크 포인트.

d) 복구 시나리오 처리.

테스트 케이스가 실패하고 실행을 계속하려는 경우 도구가 쉽게 지원합니까? 도구에서 복구 시나리오를 관리하기 쉬운 경우 결함없이 테스트 케이스를 실행할 수 있습니다. 밤에 테스트 케이스를 실행할 수 있으며 아침에 실패한 테스트 케이스와 통과 한 테스트 케이스를 나타내는 결과를 얻을 수 있습니다. 이는 실패한 테스트 케이스의 복구를 도구로 쉽게 관리 할 수있는 경우에만 발생합니다. 그렇지 않으면 복구 시나리오를 처리하는 데 상당한 자동화 노력이 낭비됩니다. 보다 QTP에서 복구 시나리오 관리 .

C ++에서 iomanip은 무엇입니까

결론

좋은 도구 나 나쁜 도구는 없다는 것을 항상 기억하십시오. 그것은 모두 귀하의 요구 사항과 제품 특성에 달려 있습니다.

Selenium은 가장 널리 사용되는 자동화 도구 일 수 있지만 제품이 데스크톱 기반 인 경우이 도구는 유용하지 않습니다. 먼저 제품을 이해 한 다음이 자습서에 언급 된 지침을 사용하여 요구 사항과 일치하는 적절한 도구를 검색하십시오.

올바른 자동화 도구 선택은 성공적인 자동화에 중요한 역할을합니다.

다음 튜토리얼 –이 시리즈의 다음 튜토리얼은 '예제를 포함한 스크립트 개발 및 자동화 프레임 워크'입니다. 다시 확인 이 페이지의이 시리즈의 모든 자습서 .

올바른 자동화 도구를 선택하는 방법에 대한 질문 / 의견을 아래에 게시하십시오.

이전 튜토리얼 # 3 | 다음 튜토리얼 # 5

추천 도서

^