Скорошни изследвания в областта на обучението с подсилване разкриват, че обновяването само на един слой на трансформера може да възпроизведе печалбите от обучение на всички параметри. Откритият структурен модел показва, че подобренията в AI моделите се концентрират в специфични средни слоеве, вместо в целия обем.