Cựu nhà nghiên cứu Anthropic Coxon nói Mythos có thể được huấn luyện lại với lượng compute ít hơn nhiều
Bắt đầu từ đây
Jacob Coxon, cựu nhà nghiên cứu của OpenAI và Anthropic, nói rằng một slide từ buổi roadshow IPO của Anthropic là lý do chính khiến ông rời công ty sau khoảng bốn tháng. Biểu đồ vẽ hệ số nhân compute tiền huấn luyện cho mã theo thời gian trên trục y logarit; Coxon lập luận rằng mức tăng dốc từ tháng 7 năm 2024 đến tháng 10 năm 2026 cho thấy tiến bộ thuật toán siêu hàm mũ. Trên cơ sở đó, Coxon nói Anthropic đã có thể huấn luyện lại mô hình Mythos của mình với một phần nhỏ compute so với ban đầu. Tuyên bố này là cách ông diễn giải biểu đồ, không phải kết quả mà Anthropic đã xác nhận.
Tạo từ các bài viết · cập nhật 2 giờ trước
Dòng thời gian bài viết
Theo các bài viết để thấy sự việc từ nhiều phía.
- The DecoderCựu nhà nghiên cứu Anthropic Coxon nói Mythos có thể được huấn luyện lại với một phần nhỏ lượng compute ban đầu
Jacob Coxon, cựu nhà nghiên cứu của OpenAI và Anthropic, nói rằng một slide từ buổi roadshow IPO của Anthropic là lý do chính khiến ông rời công ty sau khoảng bốn tháng. Biểu đồ cho thấy hệ số nhân compute tiền huấn luyện cho mã theo thời gian trên trục y logarit, và Coxon lập luận rằng sự leo dốc từ tháng 7 năm 2024 đến tháng 10 năm 2026 cho thấy tiến bộ thuật toán siêu mũ, đồng thời nói thêm rằng Anthropic đã có thể huấn luyện lại mô hình Mythos của mình với một phần nhỏ lượng compute cần thiết ban đầu.
Độ nóng của sự việc này
Chưa đủ quan sát liên tục để vẽ xu hướng.