”那时西轩早启，晚宴初陈，李世民邀杨妃入席，真所谓：“酒为色媒，色为酒媒。”杨妃入席时，还有三分腼腆，及至酒过数巡，渐把羞涩撇在脑后，抬头看着风流倜傥的储君，英姿洒落，眉宇清扬，再回忆那齐王元吉，与李世民生本同胞，偏长得一俊一丑，大不相同，想到这里，杨妃禁不住意马心猿，竟把平生的七情六欲，一齐堆集拢来。李世民几次温存，她也不见不闻，仿佛痴了一般，惹得席旁侍女，都吃吃地暗笑，杨妃方才回过神来，不由得两颊愈红。李世民说：“夜已很深了，再喝一杯便撤席罢。”于是各斟一满杯，彼此一饮而尽，以做两人的交杯酒。侍女撤去残肴，单剩两人在床帏里成就了好事。
隔了数日，唐高祖禅位于李世民，是为唐太宗。册长孙氏为皇后。杨妃被纳为妃嫔，日加宠眷。太宗嬖宠杨妃，便也捎带着为死去的李元吉加封，追封为海陵郡王。后来长孙皇后去世，太宗欲把杨妃升入正宫，魏征再三争论，说陛下须为万世家法，万不可使失节妇人母仪天下，太宗只好死了这条心。
新旧《唐书》后妃传里没有杨妃的位置，只在叙述她生的儿子曹王明列传里捎带提了一句。据《新唐书》：“曹王明，母本巢王妃，帝宠之，欲立为后，魏征谏曰：‘陛下不可以辰赢自累。’乃止。贞观二十一年，始王曹，累为都督、刺史。高宗诏出后巢王。永隆中，坐太子贤事，降王零陵，徙黔州。都督谢佑逼杀之，帝闻，悼甚，黔官吏皆坐免。”又《旧唐书》：“诏令继巢剌王元吉后。”太宗将曹王明过继给已死的齐王元吉当儿子，而且最后被地方官杀死，可能那时杨妃已经失宠。
至于杨妃最终的结局历史没有记载，大约不外是两种：老死窗牖间，或者像武媚娘一样出家为尼。