Amazon이 차세대 기초 모델 'Amazon Nova'를 공개했습니다.
Amazon Nova는 텍스트, 이미지, 비디오를 처리할 수 있는 새로운 세대의 기초 모델로, 비디오와 차트, 문서를 이해하고 멀티미디어 콘텐츠를 생성할 수 있는 능력을 갖추었습니다.

Amazon Bedrock을 통해 제공되는 Amazon Nova 모델은 총 6가지입니다.

• Amazon Nova Micro: 매우 낮은 비용으로 가장 낮은 지연 시간의 응답을 제공하는 텍스트 전용 모델
• Amazon Nova Lite: 이미지, 비디오, 텍스트 입력을 처리하는 데 매우 빠른 속도를 자랑하는 매우 저렴한 멀티모달 모델
• Amazon Nova Pro: 다양한 작업에 대해 정확도, 속도, 비용의 최적의 조합을 제공하는 고성능 멀티모달 모델
• Amazon Nova Premier: 복잡한 추론 작업과 맞춤형 모델 증류를 위한 최고의 교사 모델로 사용되는 Amazon의 가장 강력한 멀티모달 모델(2025년 1분기 출시 예정) *증류: 큰 모델의 지식을 작은 모델로 전달하는 것
• Amazon Nova Canvas: 최첨단 이미지 생성 모델
• Amazon Nova Reel: 최첨단 비디오 생성 모델

출처 : 아마존 블로그 캡처

Amazon Nova 모델의 성능

Amazon Nova 모델은 200개 언어와 다양한 모달리티를 지원하며, 기존 Amazon Bedrock의 각 지능 분야에서 최고 성능을 보이는 모델들보다 최소 75% 더 저렴하며 가장 빠른 처리 속도를 자랑합니다.

이 모델들은 맞춤형 파인튜닝을 지원하여 고객들이 자체 데이터의 예시를 모델에 지정하여 정확도를 높일 수 있습니다. 

또한 증류 기능을 통해 대규모 교사 모델의 특정 지식을 더 작고 효율적인 모델로 전달할 수 있으며, Amazon Bedrock Knowledge Bases와의 통합으로 검색 증강 생성에서도 뛰어난 성능을 보입니다.

실제 활용 사례를 보면, Amazon Ads에서는 Nova Canvas와 Nova Reel을 통해 광고주들이 처음으로 비디오 광고를 제작하거나, 더 많은 제품에 대한 캠페인을 만들고, 키워드 수준의 창의적인 전략을 실험할 수 있게 되었습니다. 

Amazon Ads가 Amazon Nova Reel을 사용하여 만든 가상의 박스형 파스타 브랜드비디오 광고

Amazon Nova Pro의 비디오 이해 능력

Amazon Nova Pro의 비디오 이해 능력을 시험하기 위해,  회사는 모델에게 축구 경기의 짧은 무성 비디오 클립을 검토하고 설명하도록 요청했습니다. 

비디오 프롬프트: "비디오를 설명하세요."

출력: “비디오는 녹색 필드에서 진행 중인 축구 경기를 묘사합니다. 노란색 유니폼을 입은 한 팀과 흰색 유니폼을 입은 다른 팀의 두 선수가 플레이에 참여하고 있습니다. 노란색 팀의 쿼터백이 리시버에게 패스를 던지고, 리시버는 공을 잡고 필드 아래로 달리기 시작합니다. 흰색 팀의 수비수들이 그를 쫓아가 태클을 시도합니다. 플레이는 태클로 절정에 달하고, 리시버는 필드로 내려갑니다.”
 

Amazon은 2025년에 추가로 두 가지 Nova 모델을 출시할 예정입니다. 

음성-음성 모델은 자연어로 된 스트리밍 음성 입력을 이해하고 자연스러운 인간적인 상호작용을 제공하며, 모든 모달리티 간 모델은 텍스트, 이미지, 오디오, 비디오를 입출력 모두에서 처리할 수 있을 것이라고 합니다.