Mặc dù có ít phòng thí nghiệm hơn có khả năng tính toán để mở rộng cho các mô hình mà hàng triệu người sử dụng, nhưng tôi thực sự cảm thấy vui khi thấy nghiên cứu tiền huấn luyện đang phát triển mạnh mẽ với nhiều ý tưởng đan xen. So với vài năm trước, cảm giác như có một sự thay đổi lớn trong sự lạc quan.