李泌做过宰相，也是个隐士。这真的有点怪。
少年时，李泌便独自一人，去嵩山、衡山寻访道士，希望得道成仙。衣道服，戴葛巾，持斋食素，修炼道术，这便是李泌生活的全部(当然也读书)。相传他能隔着屏风，引指发功，将屏风后的数十根蜡烛，一气吹灭。这时的李泌，身手矫健，面色红润，思维敏捷，眉宇之间，尽显仙风道骨。
隐士李泌，其实只能称作半隐士。
安史之乱爆发后，太子李亨即帝位，是为唐肃宗。国家危难，李亨派人遍寻李泌，恳请出山。李泌曾侍读太子，两人感情甚笃。李泌二话不说，赶往灵武，辅佐李亨。
李亨极恨李林甫，李已死，李亨就想烧他的尸骨，挖他的祖坟。李泌极力劝阻道：“这是太上皇(唐玄宗)用错了人，若如此报复李林甫，无异于揭太上皇的伤疤，这太伤老人心啦。以天下之大，陛下却不能安养老父，令人寒心哪。”李亨遂采纳，感激道：“幸好有你在朕身边啊。”
李亨对李泌爱之有加，两人经常同坐皇撵，同床共枕。因为李泌不吃荤，有次李亨专门给李泌烤了梨，几个兄弟很想吃，李亨就是不给。再有次，李亨来看李泌。操劳过度的李泌困极了，刚睡去。李亨不让侍从唤醒，而是悄悄登上卧榻，端坐，将李泌的头轻轻抬起，枕靠着自己的大腿，即使腿麻了，也忍着，一动不动。
李亨想授予李泌官职，李泌坚决不接受。收复两京后，李泌就辞别回衡山，隐居去了。李亨“给三品禄，赐隐士服，为治室庐”。李泌欣然接受。
后，代宗李豫即位，李泌又被请回，参与机要。这次，李泌没有坚持住，做了官，还娶妻，吃荤，完全开戒了。却很快被宰相元载排挤出京城，出任湖南澧县团练使。元载被诛后，李泌应诏返回长安，又遭常衮迫害，再任职地方，做杭州刺史。
隐士不给做了，京城也不让待了，李泌是受了大委屈了。公事之余，李泌就重返山林，寄情乡野，访友寻道。但因公务在身，不可久留，不能尽兴。夜深人静时，李泌常一人枯坐，每每忆起当年纵情山水、求仙问道的快活日子，不觉泪湿沾襟。
十年后，李泌被新即位的德宗李适接回长安，第三年，做了宰相。那个曾经悠然逍遥、远离朝堂的隐士李泌，怕是再回不去了。
李适念及李泌乃四朝元老，功勋盖世，堪当重用，却又颇不放心，甚是矛盾。李适要李泌莫以权谋私，公报私仇。李泌回道：“臣素来信奉道教，从不与人结仇，也无私仇可报。况且曾害我的杨国忠、李辅国、元载等人，皆已亡命。”李泌要李适与他约定，莫要残害忠良，以防不测。李适心里不爽，却也只好答应。
先前，李适解除了李晟、马燧的兵权。无他，仅因有人进献谗言，说二人府第幽深，竹林遍布，可藏万千精兵。李适内心，实是担心二人功高盖主。
李、马二人官复原职，很感激李泌，备厚礼亲自登门拜谢。李泌坚决不见。
后来又发生了一件事。
郜国公主的女儿是李适的太子妃。郜国公主与人私通，犯蛊媚罪，还为太子结党营私。遂被幽禁。李适还想废掉太子李诵。李诵虽未参与，却似乎脱不了干系。李泌力谏不可。李适怒道：“卿违朕意，不顾家族邪?”李适拿灭族威胁李泌。李泌毫无惧色，据理力争道：“忠臣因谏而被诛杀，光荣得很哪。”李泌以为“太子常立废，不稳。”故“执争数十，意益坚，帝寤，太子乃得安”。李适真拿这个不要命且烦人的死士李泌没办法。后来，李诵顺利做了皇帝，史称唐顺宗。
李泌时而在朝，时而在野，“用之则行，舍之则藏”。
隐士的朝野，要进退自知，难;能进退自如，更难。
贞元五年(789年)，李泌驾鹤西归，享年67岁，授赠太子太傅。这是极高的稱誉。