TechBlogHub · 회사 · 주제

AWS Inferentia를 이용한 모델 서빙 비용 최적화: 모델 서버 비용 2배 줄이기 2탄 - 스캐터랩 블로그

스캐터랩 ·

오혜린 김준성| 2022년 08월 16일 |#Engineering#Machine_Learning 지난 글에서는 AWS Inferentia 소개와 사용법, GPU와의 성능 비교 등을 설명해 드렸어요! 이번 글에서는 Inferentia를 실제 서비스에 도입하기 위해 핑퐁팀에서 어떤 과정들을…

원문 읽기 (스캐터랩 블로그) →

#백엔드#데이터#AI · ML#인프라 · DevOps#테스트#성능