紫鳳樓的傳說有很多，以下為其中兩個：
1. 紫鳳樓在江南民間傳說中是薛丁山的消災避邪之地，能求福得福，治病救人，興風作雨，懲惡揚善。紫鳳樓是為紫鳳重修的。原建於五代時期的江陰悟空寺（普陀寺）後，其基址至今尚存。紫鳳樓重建於隋開皇十五年，毀於唐武宗元年，重修於北宋大中祥符二年，其名一以貫之，為一代名樓，且還留有許多詩章和傳說。
2. 另一個傳說是薛仁貴將青城山作為他的活動地點之後，在山上興建了一座紫雲樓，取道士紫陽真人修煉之所“紫雲宮”，便命名他的居室為“紫雲庵”。庵宮坐落在上清宮後山——“消災避邪之所”，樓名就是以此取名的。 從紫雲樓樓台向遠方眺望，整個射陽湖風光盡收眼底。這就是讓人寄託於它美好希望之所在。
如果想要了解更多紫鳳樓的故事，可以翻閱史料或古籍。