谢灵运跟庐山东林寺的名僧慧远也有深交，尽管慧远比他大五十来岁，两人还是很投缘。慧远圆寂后，他特地写了一篇祭吊的名文《庐山慧远法师诔》，一时洛阳纸贵。
还兼通史学，精通佛教老庄哲学，工于书法、绘画。宋文帝刘义隆曾称赏他的诗和字为"二宝"。东晋时，他8岁袭封康乐公，晋末曾出任为琅琊王德文的大司马行参军，豫州刺史刘毅的记室参军，北府兵将领刘裕的太尉参军等。
刘宋建立后，按例被降为康乐侯，故又称"谢康乐"，改食邑为五百户，起为散骑常侍，转太子左卫率。谢灵运因是名公子孙，才能出众，认为自己应当参与时政机要，但宋文帝对他"唯以文义见接，每侍上宴，谈赏而已"。
东晋安帝义熙元年（405年），谢灵运已二十岁，出任琅琊大司马行参军，后任太尉参军、中书侍郎等职。好有园林，游山水，制作出一种"上山则去前齿，下山去其后齿"的木屐，后人称之为"谢公屐"。与族弟谢惠连、东海何长瑜、颍川荀雍、泰山羊璿之，以文章赏会，共为山泽之游，时人谓之四友。元嘉十年（433）因罪徙广州，密谋使人劫救自己，事发，被宋文帝刘义隆以"叛逆"罪名*害，终年四十九岁。
