崇文馆乃是梁惠帝时期所设的太子学馆，隶属东宫，惠帝恩许温氏皇室子弟并太后、皇后亲眷、身食实封的一品功臣之子入读其中，陪皇太子读书。每任生员不超过二十人，所设学士皆是有名有姓的大儒阁老。

待到绍永帝年间，因为明璋太子之事，东宫封禁，崇文馆便移置于凤阁与鸾台二省之后。

温廷儿时便跟随兄长一起在此读书，他虽然勤勉，却也常常跟不上学士们的教导，只能请教兄长。而兄长却无一不是头筹，令师长们赞不绝口，这让年幼的他不由得对兄长甚是景仰信服。