TTA 3자검증 결과서 양식 검토

QA 대상

TTA 3자검증 결과서

고객사

Selvas AI

고객 요구사항

1. 검증 결과서 활용 가능성 여부 확인
2. 검증 결과서 내 미흡한 부분 추가/수정

실적

1. 검증 결과서 활용 방안 확인
   
2. TTA추가 요청 사항 반영 산출물 도출

QA 내역

DioVoice는 SelvasAI가 보유하고 있는 음성 인식기술과 통번역 기술을 결합한 제품으로 일반적인 통번역 제품과는 차별화된 각 여행지 별 고유 지명, 특산품, 축제, 관광지, 버스·지하철 노선 등과 관련한 특화 서비스를 제공하여 보다 편리하게 여행과 관광을 즐길 수 있도록 활용성을 한층 강화한 제품입니다.

<한,영,일 언어간 통번역이 가능한 DioVoice, 관광에 특화>

이번 QA는 고객사 요구사항 수행과 TTA추가 요구사항을 반영하여 결과서의 추후 활용 방안과 결과서 내에 누락된 항목들에 대해 추가를 진행하여 보다 활용도가 높은 결과서를 도출하는 것을 목표로 진행되었습니다.

| 평가 준비 및 내용

먼저 고객사와 TTA추가 요구 사항을 분석하여 카테고리 별 항목화를 진행합니다.

그 결과

- UI 기능과 예외처리 기능에 대한 항목

- 다양한 언어 환경에 대한 항목

- Online 환경에서 실사용에 대한 항목

등을 항목화하였습니다.

또한, 추후 활용 방안을 위한 검증 결과서 분석도 함께 진행했습니다.

<TTA에서 전달받은 TestCase 중 일부 발췌>

그 결과

- 테스트에 사용된 문장이 TC에 병기되어 있어 추후 테스트 담당자가 변경되어도 동일 테스트 반복에 용이한 점

- 품질 특성을 기능성, 사용성, 신뢰성, 유지보수성, 이식성 등의 상세한 분류를 하여 TC가 작성된 점

- 통번역 검증 항목에 있어 연령별, 성별, 발화자 국적별 등의 상세화가 되어 있는 점

- 사용성 테스트 부분이 상세화 되어 있는 점

등이 추후 이와 같은 QA를 진행 시 참고하여 활용가능하다는 점을 도출했습니다.

또한, 보완되어야 할 점으로는

<TTA에서 전달받은 검증 결과서 중 일부 발췌>

결함 리포트에서

- TC와 검증 결과서의 추적성이 확보되어 있지 않아 어느 TC 항목에서 검출된 결함인지 확인이 어려움

- 결함 설명에 결함 재현경로가 매우 간략화되어 있어, 개발자 및 다른 검증자가 동일 상황을 재현하기에 어려움

- 결함 설명만 존재하고 요구사항과 시나리오에 기반한 수정 후 기대 동작에 대한 내용이 없음

- 결함 재현빈도와 특정 단말 결함의 경우 단말 환경(모델, OS버전 등)에 대한 기술이 없음

이러한 활용 가능 항목과 보완이 필요한 항목을 도출 후 다음 항목을 추가했습니다.

1. TC항목을 품질 특성에 따라 분류 및 상세화 진행
2. TC내 테스트 문장 병기
3. TC 내 사용성 평가 항목을 성별/연령/국적 별 분류 및 상세화 진행
4. 검증 결과서 내 결함 내역에 TC ID를 병기하여 추적성 확보
5. 결함 내용에 재현경로 상세화 및 필요시 결함 발생 이미지 삽입
6. 수정 후 기대 동작에 대한 기입
7. 결함 발생 환경에 대한 기입
8. 결함 발생 일자 또는 결함 발생 릴리즈 버전 기입

위와 같은 항목을 추가하여 한층 보완된 신규 TC와 검증 결과서를 다음과 같이 작성하여 고객사에게 전달하였으며, 고객사는 매우 만족스러운 결과물을 얻을 수 있었습니다.

대규모 프로젝트/ 비교, 검증 테스트 / 그 외 프로젝트 QA에 대한 QA Service 지원 및 기타 관련 아웃소싱 업무가 필요한 경우 아래 연락처나 이메일로 연락 주시면 성실히 대응 하겠습니다. 

---

Contact US

Address

서울특별시 금천구 가산디지털1로 19 
대륭테크노타운 18차 20층

2018.12.27 | 지도 크게 보기 ©  NAVER Corp.

Phone
02-6190-7296

E-mail
qa_partner@infrawaretech.com

Homepage
http://infrawaretech-qa.tistory.com/