嫁给李玮之后，怀吉依然以侍从的身份陪伴在徽柔的左右，但是因为他们的一些稍显越界的行为被徽柔的婆婆杨氏发现了，徽柔觉得很难以忍受，所以才选择了在夜晚敲响了宫门。
徽柔的行为在朝堂引起了轩然大波，本来宫门夜晚关闭之后是不会打开的，但是没想到徽柔真的敲开了宫门，这样不合规矩的举动也成了她悲剧的原因之一。
徽柔本来是想求官家做主，让她和李玮和离的，但是她这样出格的举动也使她在这件事情上变得不占理了。徽柔作为仁宗的长公主，是很受宠的，也因为这份宠爱使她有勇气做出为与驸马和离。
徽柔夜叩宫门，虽然官家虽然是皇帝，也要受到朝臣的制约，朝臣不满她的行为，官家也不得不惩罚她。
况且她和怀吉之间的关系过于近了，还因为夜叩宫门造成的影响更大了，所以仁宗才不得不将她和怀吉分开，相隔一道宫墙，再也没有相见的机会。
《清平乐》中，因为两个人身份悬殊，所以徽柔本就不该奢望和怀吉在一起。怀吉本可以以侍从的身份一直陪在她的左右的，但是因为“夜叩宫门”一事，这段不可能被容于世的感情终究还是断了，他们两个人从一开始就注定是不能在一起的。
