이 페이지에서는 격리, 격리 빌드 사용의 이점, 빌드에서 비밀 유지가 적용되지 않는 동작을 식별하기 위한 전략을 설명합니다.
개요
동일한 입력 소스 코드와 제품 구성이 제공되면 격리된 빌드 시스템은 호스트 시스템의 변경사항으로부터 빌드를 격리하여 항상 동일한 출력을 반환합니다.
빌드를 격리하기 위해 밀폐 빌드는 라이브러리와 로컬 또는 원격 호스트 머신에 설치된 다른 소프트웨어입니다. 그들은 빌드 도구의 특정 버전(예: 컴파일러, 종속 항목) 제공합니다 따라서 빌드 프로세스는 빌드 환경 외부의 서비스를 사용하지 않으므로 자체적으로 완결됩니다.
밀폐성의 두 가지 중요한 측면은 다음과 같습니다.
- 격리: 격리된 빌드 시스템은 도구를 소스 코드로 취급합니다. 도구 사본을 다운로드하고 관리형 파일 트리 내에서 저장용량을 관리하고 사용합니다. 이렇게 하면 호스트 머신과 로컬 사용자가 격리됩니다. 여기에는 설치된 언어 버전도 포함됩니다.
- 소스 ID: 기본 제공 빌드 시스템은 입력의 동일성을 보장하려고 합니다. Git과 같은 코드 저장소는 고유한 해시 코드로 코드 변형 집합을 식별합니다. 밀폐 빌드 시스템은 이 해시를 사용하여 빌드의 입력
이점
밀폐 빌드의 주요 이점은 다음과 같습니다.
- 속도: 작업의 출력을 캐시할 수 있으며 입력이 변경되지 않는 한 작업을 다시 실행할 필요가 없습니다.
- 병렬 실행: 빌드 시스템은 주어진 입력과 출력에 대해 모든 작업의 그래프를 생성하여 효율적인 병렬 실행을 계산할 수 있습니다. 빌드 시스템이 규칙을 로드하고 작업 그래프를 계산합니다. 캐시에서 찾을 수 있도록 입력을 해시합니다.
- 여러 빌드: 동일한 머신에서 여러 개의 격리된 빌드를 빌드할 수 있으며, 각 빌드마다 다른 도구와 버전을 사용할 수 있습니다.
- 재현성: 밀폐 빌드는 문제 해결에 좋습니다. 왜냐하면 빌드를 생성한 정확한 조건을 알 수 있습니다.
비밀폐성 식별
Bazel로 전환할 준비를 하고 있는 경우 기존 빌드를 사전에 밀폐성을 고려합니다. 의 일반적인 원인 빌드의 비밀폐성은 다음과 같습니다.
.mk
파일의 임의 처리- 비결정적으로 파일을 만드는 작업 또는 도구로, 일반적으로 빌드 ID 또는 타임스탬프가 포함됩니다.
- 호스트 간에 다른 시스템 바이너리 (예:
/usr/bin
바이너리, 절대 경로, 네이티브 C++ 규칙 자동 구성을 위한 시스템 C++ 컴파일러) - 빌드 중에 소스 트리에 쓰기 이렇게 하면 동일한 소스가 다른 대상에 사용되지 않도록 할 수 있습니다. 첫 번째 빌드는 소스에 대상 A의 소스 트리를 수정합니다. 그러면 타겟 B를 빌드하려고 하면 실패할 수 있습니다.
밀폐되지 않은 빌드 문제 해결
로컬 실행부터 로컬 캐시 조회에 영향을 미치는 문제는 비밀 유지가 불가능한 작업을 드러냅니다.
- null 순차 빌드 확인:
make
를 실행하고 빌드가 성공하면 빌드를 다시 실행해도 대상이 다시 빌드되지 않아야 합니다. 각 빌드를 실행하면 다른 시스템에서 파일 콘텐츠의 해시를 비교하고 결과가 다르면 빌드를 재현할 수 없습니다. - 다양한 잠재적 클라이언트 머신에서 로컬 캐시 히트를 디버그하는 단계를 실행하여 클라이언트 환경이 작업으로 유출되는 사례를 포착합니다.
- 단지 컨테이너 이미지만 포함된 Docker 컨테이너 내에서 빌드를 실행합니다. 확인된 소스 트리와 명시적인 호스트 도구 목록이 포함되어 있습니다. 빌드 중단 및 오류 메시지는 암시적 시스템 종속 항목을 포착합니다.
- 원격 실행 규칙을 사용하여 기밀 유지 문제를 발견하고 해결합니다.
- 엄격한 샌드박스 사용 설정 빌드의 작업은 스테이트풀(Stateful)이고 영향을 주지 않습니다
- 작업공간 규칙을 사용하면 개발자가 외부 작업공간에 종속 항목을 추가할 수 있지만 프로세스에서 임의의 처리가 이루어질 수 있을 만큼 풍부합니다. 다음과 같은 작업을 할 수 있습니다.
Bazel 작업공간 규칙에서 밀폐되지 않을 수 있는 일부 작업의 로그를
플래그 추가
--experimental_workspace_rules_log_file=PATH
부터 Bazel 명령어를 사용하세요
Bazel을 통한 격리
다른 프로젝트의 밀폐 사용 성공 사례를 자세히 알아보려면 자세한 내용은 다음 BazelCon 대담을 참조하세요.
- Bazel을 사용하여 실시간 시스템 빌드(SpaceX)
- Bazel 원격 실행 및 원격 캐싱 (Uber 및 TwoSigma)
- 원격 실행 및 캐싱을 통한 더 빠른 빌드
- Bazel 융합: 더 빠른 증분 빌드
- 원격 실행과 로컬 실행 비교
- 원격 캐싱 사용성 개선 (IBM)
- Bazel로 자율 주행 자동차 빌드 (BMW)
- Bazel을 사용한 자율주행 자동차 빌드 + Q&A(GM Cruise)