M365Con 2027 – 무료 온라인 컨퍼런스 · 11–22 Jan 2027 · 120 sessions→ m365con.net

블로그 · Mirko Peters

자동화된 브라우저 테스트에서 테스트 자격 증명과 비밀 정보 관리

By · · Updated

자동화된 브라우저 테스트의 비밀 정보는 코드, 트레이스, 비디오, 로그를 통해 유출됩니다. 비밀번호를 저장소 밖에 두는 방법, 테스트 계정의 범위를 제한하는 방법, 아티팩트를 정리하는 방법을 알아봅니다.

Automatically translated with AI from the original post. Read the English original

자동화된 브라우저 테스트의 비밀 정보는 테스트가 로그인하는 데 필요한 비밀번호, 토큰, API 키, 세션 쿠키를 말하며, 대부분의 팀이 예상하는 것보다 더 많은 곳에서 유출됩니다. 이를 올바르게 다루는 것은 테스트 자동화의 기본이며, 브라우저 자동화 전반에서도 마찬가지입니다. 이 가이드는 실제 시스템에 로그인하는 엔드 투 엔드 테스트용 브라우저 테스트를 작성하거나 관리하는 테스트 자동화 엔지니어를 위한 것입니다. 비밀 정보가 유출되는 곳, 코드와 저장소 밖에 보관하는 방법, 접근 권한을 제한한 테스트 계정 설정, 로그인 상태를 안전하게 재사용하는 방법, 다단계 인증 처리 방법을 다룹니다. 가상의 수치를 사용한 실습 예시로 빠른 점검 방법도 보여 드립니다.

핵심 포인트

  • 브라우저 테스트의 비밀 정보는 테스트 코드 외에도 여러 곳에서 유출됩니다. 트레이스, 스크린샷, 비디오, 콘솔 로그, HAR 파일, 저장된 로그인 상태에 모두 토큰이나 비밀번호가 포함될 수 있습니다.
  • 테스트 파일에 비밀번호를 하드코딩하지 마십시오. 로컬에서는 환경 변수에서 불러오고, 파이프라인에서는 CI 플랫폼의 시크릿 저장소에서 불러오십시오.
  • 저장된 브라우저 상태 파일에는 살아 있는 세션 쿠키가 포함될 수 있으며, 이를 이용하면 테스트 계정을 사칭할 수 있습니다. 따라서 이 파일을 모든 저장소에서 제외하십시오.
  • 전용 테스트 계정을 사용하고, 역할별로 하나씩 두십시오. 공유 데이터를 변경하는 병렬 실행이라면 워커마다 하나씩 두고, 각 계정에는 해당 테스트에 필요한 권한만 부여하십시오.
  • 아티팩트가 러너를 벗어나기 전에 정리하고, 보고서를 읽을 수 있는 사람을 제한하며, 테스트 전용 로그인 바로 가기는 운영 환경에 두지 마십시오.

자동화된 브라우저 테스트에서 비밀 정보가 유출되는 곳

가장 분명한 유출 경로는 테스트 스크립트에 직접 입력된 비밀번호입니다. 덜 눈에 띄는 유출 경로는 테스트 실행으로 생성되는 파일입니다. Currents의 Playwright에서 데이터 유출 피하기 글은 이러한 위험을 정리하고 있으며, 실행을 비슷한 방식으로 기록하는 다른 도구에도 같은 원리가 적용됩니다:

  • 트레이스. 트레이스에는 원시 인증 헤더, 베어러 토큰, 쿠키 값, 페이지 스냅숏, 네트워크 트래픽에서 확인된 개인 정보가 포함될 수 있습니다. 해당 글은 트레이스를 가장 심각한 위험으로 평가합니다.
  • 스크린샷. 테스트가 값을 입력하는 동안 그 값이 보일 수 있으며, 알림에 토큰이 표시될 수도 있습니다.
  • 비디오. 비디오는 테스트 전체 동안 화면 전체를 녹화하므로, 자동 채우기된 비밀번호와 관리자 페이지에 표시된 토큰도 함께 기록됩니다.
  • 콘솔 로그와 첨부 파일. 콘솔 출력은 재시도할 때마다 반복되며, 첨부된 API 응답에는 토큰이나 개인 정보가 포함될 수 있습니다.
  • 리포터 및 단계 출력. 단계 이름에 환경 값이 포함되면 CI 로그와 HTML 보고서에 그대로 표시됩니다.
  • HAR 파일. 이 네트워크 기록에는 요청 및 응답 헤더와 본문이 포함되며, 여기에 자격 증명이 들어 있을 수 있습니다.
  • 저장된 로그인 상태. 상태 파일에는 살아 있는 세션 쿠키와 토큰이 들어 있으며, 아무도 무시 설정을 하지 않으면 Git에 올라갈 수 있습니다.

이 글은 또한 CI의 비밀 값 마스킹이 로그 출력만 가리며, 인코딩되거나 잘리거나 다른 텍스트와 결합된 값은 놓친다고 경고합니다. 마스킹은 안전망일 뿐 해결책이 아닙니다.

비밀번호를 코드와 저장소 밖에 두기

TestDino의 Playwright 인증 가이드는 명확합니다. 테스트 파일에 비밀번호를 하드코딩하지 마십시오. CI 실행에 대한 조언은 다른 프레임워크에서 흔히 쓰이는 방식과도 일치합니다.

  1. 환경 변수를 사용하십시오. 로컬에서는 버전 관리에서 제외된 환경 파일에 비밀번호를 저장하십시오. CI에서는 공급자의 비밀 관리 기능을 사용하고, 프로세스 환경에서 값을 읽어 오십시오.
  2. 파일을 무시 목록에 추가하십시오. 첫 커밋 전에 환경 파일 패턴을 무시 목록에 추가하고, 변수 이름만 나열한 자리 표시자 파일만 커밋하십시오.
  3. 파이프라인이 우선하도록 하십시오. Currents는 CI에서 주입된 값이 로컬 파일의 값보다 우선하도록 환경 로더를 구성할 것을 권장합니다.
  4. 규모가 큰 팀에서는 비밀 관리자를 사용하십시오. 이러한 보안 모범 사례는 규모가 커져도 잘 적용되며, Currents는 CI 기본 비밀 기능과 Vault, AWS Secrets Manager, Google Cloud Secret Manager 같은 외부 관리자를 언급합니다. 또한 워크로드 ID를 통한 수명이 짧은 토큰과, 실행에 필요한 비밀 경로에만 범위를 제한한 러너 권한을 권장합니다.
  5. 단계 이름은 고정하십시오. 단계 제목에 비밀 값을 쓰지 마십시오. 고정된 레이블을 사용하십시오.

이미 비밀 값이 커밋되었다면 노출된 것으로 간주하십시오. 값을 변경한 다음 기록을 정리하십시오. 이후 커밋에서 파일을 삭제해도 기록에서는 제거되지 않습니다.

최소 권한이 적용된 전용 테스트 계정을 사용하십시오

테스트 계정도 실제 계정이므로 다른 계정과 같은 주의가 필요합니다. 로그인을 자동화하면 실제 시스템에 대한 접근도 자동화되므로, 모든 테스트 환경에서 각 계정이 접근할 수 있는 범위를 검증하십시오. 최소 권한 원칙이 적용됩니다. 각 계정에는 테스트에 필요한 접근 권한만 부여하고, 그 이상은 주지 마십시오.

  • 개인 계정은 사용하지 마십시오. 전용 로그인은 사람의 접근 권한에 영향을 주지 않고 비활성화, 교체 또는 감사할 수 있습니다.
  • 역할마다 계정 하나씩 두십시오. 테스트에서 관리자와 일반 사용자가 볼 수 있는 항목을 확인한다면, 각 역할마다 별도의 계정이 필요합니다. TestDino는 이를 다중 역할 테스트의 요구 사항으로 제시합니다.
  • 테스트가 공유 데이터를 변경한다면 병렬 작업자마다 계정 하나씩 두십시오. 로그인에 관한 Playwright 문서가 이를 설명합니다. 공유 계정 하나는 테스트들이 서로 영향을 주지 않고 동시에 실행될 수 있을 때만 작동합니다. 그렇지 않다면 각 병렬 작업자에게 별도의 계정이 필요합니다. TestDino는 작업자 인덱스로 계정을 선택하는 방법을 설명합니다.
  • 프로덕션 접근은 최소한으로 제한하십시오. 테스트가 실제 운영 시스템에 접근한다면, 해당 로그인은 격리되어야 하며 청구 데이터나 고객 데이터에 접근할 수 없어야 합니다.
  • 소유자와 만료 기한을 정하십시오. 각 계정의 소유자와 비밀번호를 검토하는 시기를 기록하십시오. 이는 출처의 내용이 아니라 저희의 자체 권고입니다.

아무도 소유하지 않은 로그인은 그 로그인을 만든 테스트보다 오래 남고, 목적이 사라진 뒤에도 오랫동안 유효하게 남습니다.

로그인 상태를 노출하지 않고 재사용하십시오

테스트 데이터와 로그인 상태는 서로 다르지만, 둘 다 보호가 필요합니다. 테스트마다 화면을 통해 로그인하면 느리고, 모든 자동화 테스트가 로그인 절차에 종속됩니다. 인증에 관한 Playwright 문서는 일반적인 패턴을 설명합니다. 설정 단계에서 한 번 로그인하고 브라우저 상태를 파일에 저장하면, 테스트는 그 상태에서 시작합니다. 문서는 안전 수칙도 제시합니다.

  • 상태 파일용 폴더를 만들고 무시 파일에 추가하십시오. 문서도 정확히 이렇게 하라고 권장합니다.
  • 이 파일을 자격 증명으로 취급하십시오. 문서의 경고 문구에 따르면 파일에는 본인 또는 테스트 계정을 가장하는 데 악용될 수 있는 민감한 쿠키와 헤더가 포함될 수 있으며, 비공개 또는 공개 저장소에 이러한 파일을 커밋하지 말 것을 강력히 권고합니다.
  • 상태가 만료되면 저장된 상태를 삭제하고, 실행 간에 유지할 필요가 없다면 출력 폴더에 기록하십시오.
  • 애플리케이션이 API를 통한 로그인을 지원한다면, 인터페이스를 직접 조작하는 것보다 더 쉽고 빠를 수 있습니다. 이때 생성된 상태도 같은 방식으로 저장합니다.

Currents는 정리 단계를 추가할 것을 권장합니다. 로그인 픽스처의 정리(teardown) 단계에서 쿠키를 지우고, CI 아티팩트를 읽을 수 있는 사람을 제한하십시오.

다단계 인증과 테스트 전용 우회 방법

다단계 인증은 자동화를 더 어렵게 만들며, 그것이 바로 다단계 인증의 목적입니다. TestDino는 테스트 계정을 위한 몇 가지 방법을 제안합니다. 인증 앱의 코드라면 설정 스크립트에서 라이브러리를 사용해 코드를 생성합니다. SMS나 이메일 코드라면 스테이징 환경의 테스트 계정에 대해 다단계 로그인을 비활성화하거나, 테스트 전용 경로를 사용합니다.

테스트 전용 우회 경로는 실제 위험 요소입니다. TestDino에 따르면 이 경로는 환경 변수 확인으로 보호해야 하며, 프로덕션에는 절대 배포하지 말아야 합니다. 로그인을 건너뛰는 모든 우회 방법은 별도의 검토가 필요한 보안 기능으로 취급해야 합니다.

실제 로그인이 필요한 테스트 시나리오 선택하기

모든 테스트 케이스에 실시간 로그인이 필요한 것은 아닙니다. 테스트 전략의 일부로, 실제 브라우저에서 실제 로그인 페이지를 사용하는 엔드 투 엔드 테스트 시나리오를 한두 개만 유지하고, 나머지 기능 테스트는 저장된 상태에서 시작하거나 API 테스트에서처럼 API를 통한 로그인으로 시작하는 방식을 권장합니다. 이렇게 하면 비밀 정보를 입력하는 횟수를 줄이고, 테스트 실행 속도를 높이며, 로그인 흐름도 그대로 검증할 수 있습니다.

페이지 객체 모델 클래스나 공유 픽스처처럼 한 곳에 로그인 단계를 모아 두십시오. 그러면 로그인 페이지나 비밀 정보를 읽는 방식이 바뀌더라도 자동화 스크립트 하나만 수정하면 됩니다. 로그인 단계를 모든 테스트에 복사해 넣는다면 이는 흔한 유출 원인이 되며, 페이지가 바뀔 때 불안정한 테스트가 생길 가능성도 높아집니다.

자동화가 사용하지 않는 계정으로 로그인 화면에 대한 수동 테스트와 탐색적 테스트를 진행하십시오. 계정을 공유하면 잠금이 발생하고 감사 추적이 불명확해지기 때문입니다. 같은 병렬 실행에 작은 보안 테스트 점검을 추가하십시오. 예를 들어 보고서에서 토큰을 검색하는 방식입니다. 어떤 자동화 도구를 선택하든 비밀 정보에 관한 규칙은 달라지지 않습니다.

예시: 30분 감사

아래 수치는 가상의 예시입니다.

한 팀이 회귀 테스트의 일환으로 브라우저 테스트 90개를 실행하고, 테스트 저장소에서 비밀 정보를 점검합니다. 감사는 30분이 걸렸고 다섯 가지 문제를 찾아냈습니다.

  1. 테스트 도우미 파일에 기록된 비밀번호 두 개
  2. 무시 목록에 없는 저장된 로그인 상태 파일 폴더
  3. 모든 테스트를 기록하는 추적 설정, 그리고 모든 직원이 열 수 있는 보고서 아티팩트
  4. 병렬 작업자 8개가 모두 사용하는 계정 하나로 인해 테스트 두 개가 무작위로 실패함
  5. 한 테스트가 여전히 사용하고 있는 전직 테스터의 개인 계정

수정에는 하루가 걸렸습니다. 비밀번호는 CI 비밀 저장소로 옮기고 기존 값은 변경했습니다. 상태 폴더는 무시 목록에 추가하고 이력에서 삭제했습니다. 추적은 실패한 테스트에 대해서만 보관하도록 바꾸었고, 보고서 접근 권한은 QA 그룹으로 좁혔습니다. 각 병렬 작업자에게 고유한 계정을 부여하자 무작위 실패가 사라졌습니다. 개인 계정은 담당자가 지정된 전용 계정으로 교체했습니다. 팀은 같은 감사를 분기마다 정기적으로 실시하기로 했습니다.

흔한 실수

  • "당장만 쓰려고" 비밀번호를 코드에 하드코딩하기. 이 값은 이력에 영원히 남습니다.
  • 저장된 로그인 상태를 커밋하기. 이 파일은 계정의 비밀번호처럼 작동합니다.
  • CI 로그 마스킹을 맹신하기. 인코딩되었거나 일부만 포함된 값은 놓치며, 추적이나 비디오에는 아무 효과가 없습니다.
  • 모든 것을 기록하기. 비디오, 전체 추적, 공개된 보고서는 비밀 정보를 더 많은 사람에게 퍼뜨립니다.
  • 병렬 작업자들이 하나의 로그인을 공유하기. 무작위 실패와 불명확한 감사 추적을 모두 일으킵니다.
  • 프로덕션에 남아 있는 테스트 전용 우회 경로를 잊기. 환경 변수로 보호하고 정기적으로 검토하십시오.

소프트웨어가 도움이 되는 방식

CI 플랫폼의 비밀 저장소와, 저장소에 기능이 있다면 비밀 정보 검사 기능부터 시작하십시오. 비밀 관리자는 저장된 값을 암호화할 수도 있으며, 여러 팀이 로그인을 공유하기 시작하면 접근 권한, 교체, 로깅을 한곳에서 관리할 수 있어 유용합니다. 테스트 프레임워크 설정으로 무엇을 기록할지 제어할 수 있고, 작은 스크립트로 아티팩트에서 민감한 헤더를 제거할 수도 있습니다. 설정한 CI 환경에 맞는 자동화 테스트 도구를 선택하고, 정리 작업은 샘플 실행에서 검증한 뒤에 신뢰하십시오. 이 원칙은 Selenium, Cypress, Playwright, Python 테스트 스위트에서도 동일하게 적용되며, 웹 애플리케이션을 호출하는 API 테스트뿐 아니라 UI 테스트에도 똑같이 적용됩니다.

다음 단계

오늘 테스트 저장소를 열고 비밀번호, 토큰, 저장된 상태 파일을 검색하십시오. 찾아낸 비밀 정보는 모두 CI 비밀 저장소로 옮기십시오. 그다음에는 테스트가 추적과 비디오를 어떻게 기록하는지 검토하여, 자동화된 브라우저 테스트의 비밀 정보가 보고서를 통해 더 퍼지지 않도록 하십시오.

Entities in this article

End-to-end testing Least privilege Regression testing

Related articles

RSS