唐皇也明知道这太子行为不端，将来难继大业；但一进宫去，给那班妃嫔七嘴八舌地说这太子如何忠实贤孝，因此他心中便摇惑起来。又回想到从前，初打天下的时候，建成在河东保护家小，又帮着在太原起义，带兵略定西河，打平洛阳，立着很大的功劳。也不忍心去废除他。再加张婕妤从中竭力替太子说着话，这张婕妤在妃嫔中，原是最得唐皇的宠爱，也是和秦王有嫌隙的人。当初唐兵攻下洛阳的时候，隋宫中珍宝财物和田宅契券，真是堆山积海的多；还有那三十六院房屋的曲折，装饰的美丽，久已天下闻名。如今一齐落在唐皇手里，唐皇因兵马倥偬，无暇顾问；那班妃嫔知道了，却一齐向唐王吵嚷着，说要到隋宫去游玩。唐皇也要趁此迁都洛阳，便打发这班妃嫔先行。一路上香车络续，绣旗飘展；卫怀王带领羽林军士，保护着妃嫔，进了洛阳城。
秦王世民，正在点收宫廷；听说妃嫔驾到，忙出去迎接进城。张婕妤的意思，便要直入隋宫中驻扎，秦王却不答应，说宫中器物，尚未点查清楚，一时不便移居。却把这一群妃嫔，安置在别殿里。房屋十分狭小局促，弄得那班妃嫔，人人怨恨；好不容易，盼望得隋宫中收拾清楚了，妃嫔们搬进宫去一看，大失所望。
原来秦王早已把三十六院中陈设的珍奇玩物，一齐收起，只留下空洞洞的几座高大院落。张婕妤问秦王时，秦王说那些珍宝器物，未曾父皇过目，小王不敢擅自动用；现在一齐收藏在府库里，诸位贵妃，若要玩赏时，请到府库中一看。那张婕妤便带着一群妃嫔们，到府库中来观看；谁知那些珍宝衣饰，以及钱财契券，俱装着箱子。箱子上面，都有秦王府的封条贴着。那班妃嫔一齐吵嚷起来，说要打开箱子来看，谁知那秦王却执意不从，说非待父皇来过目，不能轻自开拆。那班妃嫔，个个乘兴而来，败兴而返；人人心中怨恨秦王。