Salah mati. Ukuran model akan menjadi jauh lebih besar pada tahun 2026 sebagai hasil dari dunia scale-up yang lebih besar di rak Nvidia (dan juga yang Google TPU), dari B200 dengan 1,4 TB per dunia scale-up 8 chip menjadi GB300 dengan 20 TB per dunia scale-up.
expatanon
expatanon23 jam lalu
Altman mengakui bahwa model trafo telah menabrak dinding. Sebagian besar peningkatan dalam 9 bulan terakhir lebih disebabkan oleh perkakas di sekitar model daripada model itu sendiri. Dengan kata lain, teknologi ini berkembang pesat tanpa tanda-tanda lompatan lain.
Investasi pusat data yang mencengangkan tahun 2024/2025 mulai online sekarang, dengan perangkat keras yang jauh lebih baik daripada model generasi saat ini yang dioptimalkan untuk inferensi.
81