AWS Machine Learning Blog· Dan Ferguson·· 21 giờ trướcĐiểm AI40
Bảng xếp hạng mô hình Amazon SageMaker JumpStart ra mắt trong SageMaker Studio
Introducing the Amazon SageMaker JumpStart Model Leaderboard
Tóm tắt bằng AI
AWS đã ra mắt Bảng xếp hạng mô hình Amazon SageMaker JumpStart trong SageMaker Studio, cho phép người dùng so sánh song song các mô hình JumpStart về chất lượng, tốc độ và chi phí. Bảng này báo cáo điểm số do AWS chạy trên BIG-Bench Hard, GPQA Diamond và MMLU-Pro, cùng với thời gian đến token đầu tiên, thông lượng và chi phí instance được đo lường. Khi ra mắt, bảng bao gồm hơn 70 mô hình từ các nhà cung cấp bao gồm Meta, Google, Qwen, IBM và Arcee.
Nguồn:AWS Machine Learning Blog · aws.amazon.com