링크드인, GPU 작업 중개 시스템 공개

최근 30일 조회수 —좋아요 —

핵심 요약

파이어풀은 웜 파드 재사용으로 AI 에이전트와 강화학습 GPU 작업의 시작 지연을 크게 줄였다.

링크드인, GPU 작업 중개 시스템 공개 — 기사 주제를 표현한 AI 생성 개념 삽화
AI 생성 개념 삽화 · 실제 사건을 촬영한 사진이 아닙니다.

링크드인이 AI 에이전트와 강화학습(RL)의 짧은 GPU 작업을 빠르게 처리하는 실행 중개 시스템 파이어풀(Firepool)을 공개했다. 저자들에 따르면 GPU 작업은 수초 만에 끝나지만, 새 파드를 띄우는 데는 컨테이너 이미지가 노드에 있어도 20~35초, 없으면 수분이 걸린다. 파이어풀은 미리 준비한 ‘웜 파드’를 재사용해 이 대기 시간을 줄인다.1

파이어풀은 하드웨어 구성별 공통 기본 이미지로 파드를 만들고, 작업을 시작할 때 코드·추가 의존성·클러스터 구성을 연결한다. 호출자 사이의 상태 유출을 막기 위해 직전 사용자의 파드만 재사용하며, 활성 파드 옆에는 GPU 메모리를 쓰지 않는 대기 파드를 부분 GPU 할당으로 배치한다. 큐 상황에 따른 예산으로 웜 풀이 점유할 GPU 수도 제한한다.

저자들이 보고한 운영 피크 시간 표본에서는 파드 요청 3,206건 중 94.7%를 웜 또는 대기 용량으로 처리했다. H200 운영 노드의 고정 시간 작업 비교에서 에이전트와 RL 반복 작업은 매번 새 파드를 쓸 때보다 각각 13배, 10.8배 빨리 끝났다. 웜 재사용은 시작 지연시간 90백분위수를 59.1초에서 3.5초로 줄였고, 재사용할 수 없을 때 대기 파드 승격은 전환 대기를 51초에서 0.94초로 낮췄다.

이 수치는 링크드인 환경에서 저자들이 측정한 결과다. 논문은 2026년 11월 10일 공개된 arXiv:2611.10832v1 프리프린트다.

Footnotes

  1. arXiv cs.DC, “Firepool: Brokering Warm GPU Capacity for Agentic and RL Workloads at LinkedIn” ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. Firepool: Brokering Warm GPU Capacity for Agentic and RL Workloads at LinkedIn — arXiv cs.DC · 자료: 2026. 11. 10.

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.