酒醒香销愁不胜，如何更向落花行。去年高摘斗轻盈。
夜雨几番销瘦了，繁华如梦总无凭。人间何处问多情。
泽闿少孤，能自振拔，早年就读于长沙明德学堂，曾书明德中学“乐诚堂”额。清末授巡守道，分发湖北，刚刚上任，即逢武昌起义爆发，遂折返长沙。从此绝意仕进。以书法为乐，渐自成一家，风格近翁同和，雄浑腴美，尤工“擘窠书”，较其兄谭延闿更加伟劲开张。后迁居上海，一直以卖字谋生。寓沪与黄蔼农、金息侯、程仰坡相从过密，以八法相切磋。泽闿作书，取润低廉，求者甚众，但仍不订高润例；有求书市招，亦不自高身价，乐意应之，为艺林所推重。
平生以诗酒、书画、收藏自娱，淡于仕进，以书法为长。喜集藏，搜集清代书家真迹甚丰，尤以钱沣、刘墉、何绍基、翁同龢四家书法最富，曾影印行世。其他金石墨本之属，亦收藏至富。善作诗，师法谢灵运，曾从学王闿运之门。平素以诗书会友，不与权贵交，与其兄谭延闿热衷政事形成鲜明对照。搜集前贤真迹不遗余力，曾专力购藏钱沣、刘墉、何绍基、翁同龢四家法书。数十年间，收集各家法书千余轴，为海内收藏四家墨迹最富者。曾与道州何绍基之孙何维朴、临川李梅魔、衡阳曾次髯同居海上，以鬻书自给。1950年代初期，谭氏后人将其藏书楼“天隋阁”中所遗文物全部捐献给湖南省文物管理委员会，后转交给湖南省博物馆珍藏。著有诗、文、题、跋若干卷，编次藏于家。有《止义斋集》行世。
木之生，或蘖而殇，或拱而夭；幸而至于任为栋梁，则伐；不幸而为风之所拔，水之所漂，或破折或腐；幸而得不破折不腐，则为人之所材，而有斧斤之患。其最幸者，漂沉汩没于湍沙之间，不知其几百年，而其激射啮食之馀，或仿佛于山者，则为好事者取去，强之以为山，然后可以脱泥沙而远斧斤。而荒江之濆，如此者几何，不为好事者所见，而为樵夫野人所薪者，何可胜数？则其最幸者之中，又有不幸者焉。
予家有三峰。予每思之，则疑其有数存乎其间。且其孽而不殇，拱而不夭，任为栋梁而不伐；风拔水漂而不破折不腐，不破折不腐而不为人之所材，以及于斧斤之，出于湍沙之间，而不为樵夫野人之所薪，而后得至乎此，则其理似不偶然也。
然予之爱之，则非徒爱其似山，而又有所感焉；非徒爱之而又有所敬焉。予见中峰，魁岸踞肆，意气端重，若有以服其旁之二峰。二峰者，庄栗刻削，凛乎不可犯，虽其势服于中峰，而岌然决无阿附意。吁！其可敬也夫！其可以有所感也夫！