凌云塔位于城区东北的青麓山巅，东悬耒水，又名青麓塔、青龙塔，清康熙五十八年（1719）建，塔高七级31米，通体用青石、青砖砌成，塔顶为铸铁空心葫芦，门窗檐穹状，浮雕人物、云气、瑞兽。山高塔高，登塔眺望，一邑风光，尽收眼底，联云：“舟小如松，横织江中锦绣；塔尖似笔，倒写天下文章。”现湘耒高速公路联络线从塔前经过，交通极为便利。

相传太上老君察访人间时，玉帝叫他把“宝撒四方。”他错听为“宝撒耒阳，”于是就使耒阳出现一大批人才来。奸臣张太爷怕这样下去，自己会站不住脚，要想把耒阳的宝气压下去嘛，首先就必须制服日夜保护耒阳的那条青龙，于是他强迫民工建座塔压住龙颈。可是，青龙一翻身又把塔掀倒了，没办法，他到处打听，从一个妖道那里借来一部神书，书中每宇重千斤，这样青龙就被这部神书活活压死了，“青龙塔”就砌成了。