Fail률 감소 목표 집요하게 달성하기 — Android UI 자동화

간단 소개

29CM Android 앱 UI 자동화 실패율 감소를 위한 다양한 시도와 해결 과정을 담고 있으며, 구조 리팩토링, 코드 수정 등을 통해 개선했습니다.

AI Summary

Android UI 자동화 실패율 감소 노력
- 29CM QA팀은 Android UI 자동화 과정에서 높은 실패율을 겪었으며, UI 변경, Window handler 문제, CI/CD 파이프라인 실행 시 오류 등 다양한 원인을 파악했습니다.
- UI 변경으로 인한 path 오류는 path를 수정하거나 개발팀에 재빌드를 요청하여 해결했지만, 근본적인 예방책은 아니었습니다.
Window Handler 문제 해결
- Webview 전환 시 Window handler가 올바르게 전환되지 않는 문제가 발생하여, 핸들러 전환 시도, 시나리오 분리 후 앱 재실행 등 다양한 방법을 시도했습니다.
- 대대적인 구조 리팩토링을 통해 각 시나리오별 종속성을 없애고, 앱 재실행으로 핸들러 히스토리를 삭제하여 문제를 해결했습니다.
CI/CD 파이프라인 실행 시 오류 해결
- 로컬에서는 정상 실행되지만 파이프라인에서 실패하는 문제를 해결하기 위해, 파이프라인 실행 시나리오를 분석하고, 코드 실행 속도를 조절하는 방식으로 개선했습니다.
- STF를 활용하여 여러 단계에 걸쳐 문제 발생 지점을 확인하고 수정하여 fail률을 현저히 낮추었습니다.