欧阳修的官位越来越高，他写过的歌词也在社会上越来越流行。传说，颍州有一位歌妓会唱欧阳修所有的词。后来欧阳修出使辽国，接待官员请来当地一位歌妓助兴，嘱咐她好好款待欧阳大人。歌妓只是答应，并不多说话，大家还以为她毕竟是边远地方的歌妓，什么都不懂。谁知席间歌妓一开口，唱的竟全是欧阳修的词。由此也可见欧阳修的词在当时影响之大。
据传欧阳修与“外甥女”张氏有染，但双方并无血统关系，是欧阳修的妹夫的前妻所生。张氏嫁给了欧阳修的堂侄，以后又和家中的仆人私通，事情败露后，此案在开封府审理。在公堂之上张氏供出和欧阳修有私情。欧阳修百般辩解，最后虽以“查无实据”了事，但在名声上却大受影响。他的政敌钱勰也借此攻击他，最后被朝廷贬到滁州。
皇祐元年（1049年）回朝，先后任翰林学士、史馆修撰等职。至和元年（1054年）八月，已经在京做了高官的欧阳修，又遭受诬陷被贬。命令刚刚下达，仁宗皇帝就后悔了，等欧阳修上朝辞行的时候，皇帝亲口挽留说：“别去同州了，留下来修《唐书》吧。”就这样，欧阳修做了翰林学士，开始修撰史书。 与宋祁同修《新唐书》，又自修《五代史记》（即《新五代史》）。
作为一位史官，欧阳修把通达的文笔用于修史，格外得心应手。他主持了《新唐书》的修撰，而实际参与写作的还有很多人。为了防止体例不一，欧阳修负责统筹全稿。当时北宋文坛古文发展得有点过火。大家都愿意写古文吸引眼球，可没有足够的天赋，文章往往会被写得生僻难懂，看着唬人，其实没什么实际内容，更谈不上艺术价值。其中负责写列传的宋祁，就总喜欢用些生僻的字眼。
