这里有一个故事。说是唐伯虎当年在苏州看上了一处房子，是别人废弃的别墅，“长久未有人别业”。苏州还有个地名，就叫桃花坞。据记载，唐伯虎在决定买房时，因为没有钱，只好用自己的部分藏书作抵押，向京城一位当官的朋友借的钱。后来，他用了两年多时间努力写字画画卖钱，才还清了购房款。
此诗写于弘治十八年（1505年），这一年，上距唐寅科场遭诬仅六年。唐寅曾中过解元，后来受到科场舞弊案牵连，功名被革，在长期的生活磨炼中，看穿了功名富贵的虚幻，认为以牺牲自由为代价换取的功名富贵不能长久，遂绝意仕进，卖画度日，过着以花为朋、以酒为友的闲适生活。诗人作此诗即为表达其乐于归隐、淡泊功名的生活态度。
现苏州桃花坞大街有唐寅故居。
