TechBlogHub · 회사 · 주제

새로운 루다를 지탱하는 모델 서빙 아키텍처 — 2편: ArgoCD와 모델 서빙 - 스캐터랩 블로그

스캐터랩 ·

정채홍 김만수 | 2023년 02월 20일 | #Engineering #Machine_Learning 지난 블로그 글에서 빠르게 변화하는 모델 아키텍처를 위해 백엔드 서버와 모델 추론 서버를 분리시키고, A/B 테스트를 위해 모델의 추론을 추상화하여 간단한 설정을 수정하는 것만으로 실험…

원문 읽기 (스캐터랩 블로그) →

#백엔드#데이터#분산 시스템#AI · ML#인프라 · DevOps#테스트#성능#관측 가능성