CI 빌드 오류의 원인 분석에서 해결까지의 여정

간단 소개

LINE Plus의 CI/CD 환경에서 발생한 빌드 오류 문제 해결 과정을 분석하고, 로그 증가가 빌드 속도에 미치는 영향을 검증합니다.

AI Summary

CI/CD 환경 문제 발생 및 원인 분석
- LINE Plus MPR팀의 CI/CD 환경에서 빌드 실패율 증가, 원인 파악에 어려움 발생
- Jenkins, Gradle, Develocity, Elasticsearch, Logstash, Kibana, Grafana 등 다양한 도구 사용
- 로그 분석 결과, Gradle 데몬 종료 메시지 발견, Jenkins와 Develocity의 타임스탬프 불일치 확인
문제 해결 과정 및 원인 규명
- 로그 레벨 조정(-q 옵션)을 통해 오류 메시지만 출력하도록 변경, 빌드 스캔 정보 출력되도록 수정
- 로그 증가 원인 분석 결과, Gradle 서브 프로젝트 수 증가(10개 → 334개), 각 서브 프로젝트의 로그 양 증가(400줄 → 23000줄) 확인
- 더미 로그 생성 및 파이프라인 테스트를 통해 로그 양 증가가 타임스탬프 불일치 및 빌드 지연의 원인임을 검증
결론 및 시사점
- 표준 입출력으로 로그를 보여주는 CI 환경에서 로그 양이 많아지면 빌드 속도에 영향
- 불필요한 로그 출력을 줄이는 것이 중요하며, 로그 레벨 옵션을 적절히 사용해야 함
- 문제 해결을 위해 문제를 분할하고 각 부분을 해결하는 접근 방식이 효과적