楓香樹的故事有兩種說法：
* 紅豆情深 。傳說一對青年男女彼此傾心，準備相愛，但受到了封建禮教的壓迫和羈絆，無奈分別跳崖自盡，化為兩棵楓樹，相對而望，枝葉交錯，不離不棄，留下了"紅豆情深"的美麗傳說。
* 相思樹 。牛郎織女鵲橋會時，織女來牛郎家，在織機旁偷見到一種樹葉，形狀酷似梧桐葉，顏色深得發亮。她覺得非常喜愛，便將樹葉帶回天上栽種。後被天帝知道，就將樹葉嚴加看管，不讓其成活。但是被栽種的樹葉頑強地生長下來，形成了楓樹群落。織女每次偷到人間相會牛郎時，都要來看望這片楓樹林。
這兩種說法都表達了楓香樹象徵著堅貞和愛情的寓意。