Sebbene ci siano meno laboratori che hanno la capacità di calcolo per scalare a modelli utilizzati da molte persone, mi rende davvero felice vedere che la ricerca sul pre-addestramento è vivace e sta progredendo con molte idee intrecciate. Rispetto a qualche anno fa, sembra esserci un grande cambiamento nell'ottimismo.