파이프라인 · 재현성¶
수집한 데이터를 재현 가능한 워크플로로 처리하는 단계입니다. 같은 입력이면 누구나 같은 결과를 얻도록 자동화·컨테이너화합니다.
모델 학습과 서빙까지 이어지는 경계는 데이터와 학습 파이프라인에서 정리합니다.
주제¶
- 워크플로 엔진 — Nextflow, nf-core
- 컨테이너 — Docker / Podman, Singularity
- 인프라 — Kubernetes, Linux 환경, 클라우드(AWS/GCP/Azure)
정리 예정 / 진행 중¶
- Nextflow DSL2 모듈 작성 패턴
- nf-core 파이프라인 커스터마이징(ampliseq, taxprofiler)
- Docker/Podman 이미지 빌드 · Singularity 변환
- HPC / Kubernetes 실행 프로파일