Amazon의 클라우드 컴퓨팅 부문인 Amazon Web Services(AWS)가 AI 모델을 생성, 학습 및 배포하는 플랫폼인 SageMaker를 발표한 지 약 10년이 다 되어갑니다. 이전 몇 년간 AWS는 SageMaker의 역량을 대폭 확장하는 데 주력했지만, 올해는 기능 간의 간소화(streamlining)를 목표로 삼았습니다.
AWS는 재:인벤트 2024(re:Invent 2024) 컨퍼런스에서 조직 전체의 데이터를 통합하여 검색하고 작업할 수 있는 단일 환경인 SageMaker Unified Studio를 공개했습니다. SageMaker Unified Studio는 기존 SageMaker Studio를 포함하여 다른 AWS 서비스의 도구들을 결합함으로써, 고객이 모델 구축을 위해 데이터를 발견하고, 준비하며, 처리하는 전 과정을 지원합니다.
AWS의 데이터 및 AI 담당 부사장인 Swami Sivasubramanian은 성명을 통해 "저희는 분석과 AI의 융합을 목격하고 있으며, 고객들은 데이터를 점차 상호 연결된 방식으로 사용하고 있다"고 말했습니다. 이어 "차세대 SageMaker는 데이터 처리, 머신러닝 모델 개발 및 학습, 그리고 생성형 AI에 필요한 모든 도구를 고객에게 SageMaker 내에서 직접 제공하도록 통합되었습니다"라고 덧붙였습니다.
SageMaker Unified Studio를 활용하면, 고객은 팀원이나 전체 조직 구성원과 데이터, 모델, 애플리케이션 및 기타 아티팩트를 게시하고 공유할 수 있습니다. 이 서비스는 데이터 보안 제어와 사용자 지정 권한을 제공하며, AWS의 모델 개발 플랫폼과도 통합됩니다.
AI 기능은 SageMaker Unified Studio에 내장되었으며, 구체적으로 Amazon의 코딩 챗봇인 Q Developer를 통해 구현되었습니다. SageMaker Unified Studio에서 Q Developer는 "제품 판매 추이에 대한 더 나은 아이디어를 얻으려면 어떤 데이터를 사용해야 하나요?"와 같은 질문이나, "제품 카테고리별 총수익을 계산하는 SQL을 생성해 주세요" 같은 요청에 응답할 수 있습니다.
AWS는 블로그 게시물에서 "Q Developer는 SageMaker Unified Studio에서 데이터 발견, 코딩, SQL 생성 및 데이터 통합 등 다양한 개발 작업을 지원합니다"라고 설명했습니다.
SageMaker Unified Studio 외에도, AWS는 SageMaker 제품군에 두 가지 보강 기능을 추가했습니다. 바로 SageMaker Catalog와 SageMaker Lakehouse입니다.
SageMaker Catalog는 관리자가 단일 권한 모델과 세분화된 제어 기능을 이용해 SageMaker 내 AI 앱, 모델, 도구 및 데이터에 대한 액세스 정책을 정의하고 적용할 수 있게 합니다. 한편, SageMaker Lakehouse는 SageMaker 및 기타 도구에서 AWS 데이터 레이크, 데이터 웨어하우스, 엔터프라이즈 앱에 저장된 데이터로의 연결성을 제공합니다.
AWS에 따르면 SageMaker Lakehouse는 Apache Iceberg(대규모 분석 테이블을 위한 오픈 소스 형식) 표준과 호환되는 모든 도구와 연동되어 작동합니다. 관리자는 원할 경우, SageMaker Lakehouse가 접근하는 모든 분석 및 AI 도구의 데이터 전반에 걸쳐 접근 제어를 적용할 수 있습니다.
이와 관련하여, SageMaker는 새로운 통합 덕분에 소프트웨어 서비스(SaaS) 애플리케이션과의 연동성이 크게 향상되었습니다. 이제 SageMaker 고객들은 데이터를 별도로 추출, 변환, 로드(ETL)할 필요 없이 Zendesk나 SAP 같은 앱의 데이터에도 접근할 수 있습니다.
AWS는 "고객들은 여러 데이터 레이크와 데이터 웨어하우스에 걸쳐 데이터를 보유할 수 있으며, 이 모든 데이터를 통합할 간단한 방법이 필요할 것"이라고 언급했습니다. "이제 고객들은 데이터가 물리적으로 어디에 어떻게 저장되어 있는지에 관계없이, 선호하는 분석 및 머신러닝 도구를 사용해 데이터에 접근하여 SQL 분석, 임시 쿼리, 데이터 과학, 머신러닝, 생성형 AI를 포함한 다양한 사용 사례를 지원할 수 있습니다."
2024년 12월 3일 – 2024년 12월 6일
스토리라인 보도:
AWS re:Invent 2024: Amazon의 최대 행사 라이브 업데이트
Amazon의 re:Invent 2024 컨퍼런스는 12월 6일까지 일련의 공개와 기조연설을 위해 라스베이거스에서 개최됩니다. AI는...
[출처:] https://techcrunch.com/2024/12/03/aws-sagemaker-gets-a-unified-data-dashboard