杨素起初听到杨坚言下之意，非但不肯接受自己的一番好意，将冯小惜接入宫中，常伴左右，而且有授意自己，命将冯小惜送往尼寺之中，出家修行的意思，不禁大失所望。待至回府后仔细一琢磨，方领悟出皇帝真正的用意来：杨坚是要自己将冯小惜悄悄安置到一所僻静的尼寺之中，以方便二人偷情哪。
于是，杨素随即花费重金在长安东城一处僻静的小巷深处购下了一所宅院，又买通宗正署的官员，给他颁发了一块准许兴办尼寺的执照，就在这所宅院中建起了一所宅院，瞒着夫人将冯小惜转移至了这所宅院中，准备为皇帝开辟一处与冯小惜幽会、偷情的场所。