受到冲击最大的终归是一无所有的农民，世家凭借其丰厚底蕴，抵抗变故的能力强，甚至不少世家收拢难民，比原来还要强盛。
比如袁绍和袁术就因为其背后的世家底蕴，发展成强盛的两方诸侯。甚至曹操，其虽然一直因为祖父为太监被归为阉党而受攻讦，但其祖父曹腾为大长秋，其父曹崇为官之时更是官至太尉。
如若贸然提出建立学堂，意识到自己的知识垄断性将被打破的世家，他们进行的反扑不是现在的刘环、甚至不是尚算根基不深的刘备能承受的。