Red Hat Summit4장. JobSet Operator
4.1. JobSet Operator 개요
OpenShift Container Platform의 JobSet Operator를 사용하면 고성능 컴퓨팅(HPC) 및 AI 교육과 같은 대규모의 조정된 워크로드를 쉽게 관리하고 실행할 수 있습니다. JobSet Operator는 다중 템플릿 작업 지원 및 안정적인 네트워킹과 같은 기능을 통해 빠른 복구와 효율적인 리소스 사용을 달성하는 데 도움이 될 수 있습니다.
JobSet Operator는 기술 미리 보기 기능일 뿐입니다. 기술 프리뷰 기능은 Red Hat 프로덕션 서비스 수준 계약(SLA)에서 지원되지 않으며 기능적으로 완전하지 않을 수 있습니다. 따라서 프로덕션 환경에서 사용하는 것은 권장하지 않습니다. 이러한 기능을 사용하면 향후 제품 기능을 조기에 이용할 수 있어 개발 과정에서 고객이 기능을 테스트하고 피드백을 제공할 수 있습니다.
Red Hat 기술 프리뷰 기능의 지원 범위에 대한 자세한 내용은 기술 프리뷰 기능 지원 범위를 참조하십시오.
4.1.1. JobSet 연산자에 대하여
OpenShift Container Platform의 JobSet Operator를 사용하면 고성능 컴퓨팅(HPC)이나 인공 지능(AI) 교육과 같은 대규모의 분산되고 조정된 컴퓨팅 워크로드를 관리하고 자동 안정성, 조정 및 장애 복구를 얻을 수 있습니다.
JobSet Operator는 JobSet 오픈 소스 프로젝트를 기반으로 합니다.
JobSet Operator는 여러 작업 그룹을 하나의 조정된 단위로 관리하도록 설계되었습니다. 이 기능은 HPC나 대규모 AI 모델을 훈련하는 분야에서 특히 유용합니다. 이 분야에서는 여러 대의 머신을 몇 시간 또는 며칠 동안 실행해야 합니다.
JobSet 연산자를 사용하면 표준 OpenShift Container Platform 작업으로는 너무 크거나 복잡한 문제를 해결할 수 있습니다. JobSet Operator는 조정, 안정성, 복구를 제공합니다.
JobSet Operator는 IP 주소를 얻기 위해 안정적인 헤드리스 서비스를 자동으로 설정하여, 장애 발생 후 재시작 후에도 작업자가 서로를 찾아 통신할 수 있도록 합니다. 또한 자동적인 장애 복구 기능을 제공합니다. 대규모 훈련 작업의 작은 부분 하나가 실패하면, 운영자는 저장된 체크포인트에서 전체 작업자 그룹을 다시 시작하도록 구성할 수 있습니다. 이렇게 하면 시간과 컴퓨팅 비용이 절약됩니다.
JobSet Operator는 시작 제어 기능을 제공하여 종속성이 충족되도록 특정 시작 순서를 정의할 수 있습니다. 예를 들어, 작업자가 연결을 시도하기 전에 리더가 실행 중인지 확인합니다.
JobSet Operator를 사용하면 OpenShift Container Platform에서 대규모의 분산되고 조정된 컴퓨팅 작업을 보다 쉽게 관리할 수 있으며, 여러 개별 구성 요소를 하나의 탄력적이고 관리하기 쉬운 시스템으로 전환할 수 있습니다.
'%20d='M201.5%20305.5c-13.8%200-24.9-11.1-24.9-24.6%200-13.8%2011.1-24.9%2024.9-24.9%2013.6%200%2024.6%2011.1%2024.6%2024.9%200%2013.6-11.1%2024.6-24.6%2024.6zM504%20256c0%20137-111%20248-248%20248S8%20393%208%20256%20119%208%20256%208s248%20111%20248%20248zm-132.3-41.2c-9.4%200-17.7%203.9-23.8%2010-22.4-15.5-52.6-25.5-86.1-26.6l17.4-78.3%2055.4%2012.5c0%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.3%2024.9-24.9s-11.1-24.9-24.9-24.9c-9.7%200-18%205.8-22.1%2013.8l-61.2-13.6c-3-.8-6.1%201.4-6.9%204.4l-19.1%2086.4c-33.2%201.4-63.1%2011.3-85.5%2026.8-6.1-6.4-14.7-10.2-24.1-10.2-34.9%200-46.3%2046.9-14.4%2062.8-1.1%205-1.7%2010.2-1.7%2015.5%200%2052.6%2059.2%2095.2%20132%2095.2%2073.1%200%20132.3-42.6%20132.3-95.2%200-5.3-.6-10.8-1.9-15.8%2031.3-16%2019.8-62.5-14.9-62.5zM302.8%20331c-18.2%2018.2-76.1%2017.9-93.6%200-2.2-2.2-6.1-2.2-8.3%200-2.5%202.5-2.5%206.4%200%208.6%2022.8%2022.8%2087.3%2022.8%20110.2%200%202.5-2.2%202.5-6.1%200-8.6-2.2-2.2-6.1-2.2-8.3%200zm7.7-75c-13.6%200-24.6%2011.1-24.6%2024.9%200%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.1%2024.9-24.6%200-13.8-11-24.9-24.9-24.9z'/%3e%3c/svg%3e){kind=small}