第二次被反驳是在郭氏被废后，自小抚养仁宗的杨妃认了一名养女陈氏，该女父亲经商，陈氏自小跟着父亲走南闯北，和闺阁之女不同，颇有见识，仁宗对其一见钟情。
可是，没有了刘太后的阻挠，仁宗仍不能任意妄为。陈氏虽然是小娘娘的养女，可是其父只是商贾出身，在宋代地位很低。群臣皆以出身低微为由拒绝了仁宗的提议，无奈之下仁宗第三次放弃了心爱之人。
仁宗当时的妃嫔中还有一位是自己的乳母之女苗心禾，也是唯一被他视作亲人的妃子，对她格外宠爱，可是这样的一位女子也只有郡君的位份，在6年之内都未升迁。
郭氏当皇后时，仁宗宠爱两位美人，一个姓尚，一个姓杨。仁宗因为两位美人和皇后发生争执。原以为郭氏被废后可以宠爱两位美人，没想到还是被以影响政事为由被强行遣出宫。
