炀帝忙差两个内侍，去宣杨素入苑。却说杨素自拥立了炀帝，赫赫有功，朝政兵权，皆在其手。这日正与这些歌儿舞女欢愉，听得有旨宣诏，即乘凉轿，竟入御苑中来。到太液池边，炀帝瞥见，天然迎下殿来，端方是叫免朝，即便赐坐。杨素也不谦让，竟只是一拜就坐。炀帝道：“久不面卿，顿生鄙吝。今见幽兰大放盆中，新柳绿妍池上，香风袭人，游鱼可数，故诏卿来同观而钓焉。”杨素道：“臣闻从禽则荒，从兽则亡。昔鲁隐公观鱼于棠，春秋讥之；舜歌南风之诗，万世颂德。陛下新登大位，年力强大，愿以虞舜为法，不当效鲁隐公之尤。”炀帝道：“朕闻蟠溪叟，一钓而兴周公八百之基；贤卿之功，何异于此？”杨素大喜道：“陛下既以此比臣，臣敢不以此报陛下。”君臣相顾大悦。炀帝即令近侍，将坐席移到池边看鱼。大师投纶于清流当中，随波痕来往而钓。
炀帝道：“朕与贤卿同钓，先得者为胜，迟得者罚一巨觥何如？”杨素道：“圣谕最妙。”未几时，炀帝将手往上一提，早钓一个三寸长的小金鱼。炀帝大喜，对杨素道：“朕钓得一尾了，贤卿可记一觥。”杨素因投纶在水，惊骇了鱼，竟不承诺；但把头点了两点，及扯起看时，倒是一空钩，将钩儿还是投下水去。未几时，炀帝又钓起小小一尾，便说道：“朕已钓二尾，贤卿可记二觥。”杨素往上一扯，却又是一个空；众宫人看了，不觉掩口而笑。杨素瞥见，面上微有喜色，便说道：“燕雀安知鸿鹄之志。待老臣试展钓鳌之手，钓一个金色鲤鱼，为陛下称万年之觞何如？”炀帝见杨素说此大话，全无君臣之礼，心中不悦，把竿儿放下，只推净手，起家竟进后宫，满脸肝火。萧后接住问道：“阶下与杨素垂钓，为何怒忿还宫？”炀帝道：“叵耐这老贼，高傲无礼，在朕面前，非常猖獗。朕欲叫几个宫人杀了他，方泄我胸中之恨。”萧后忙阻道：“这个使不得。杨素乃先朝老臣，且有功于陛下；本日宣他赐宴，无端杀了，他官必定不平；况他又是个虎将，几个宫人，如何禁得他过？一时弄破了圈儿，他兵权在手，猖獗起来，社稷不成知矣。陛下就要除他，也须缓缓而图，本日如何使得？”炀帝见说，便道：“御妻之言甚是。”更了衣服，还是到太液池来了。