紅豆被稱爲相思豆，主要是因爲幾個古老的傳說和文學作品的影響。以下是關於紅豆被稱爲相思豆的幾個傳說：
愛情傳說：相傳古時候有一對恩愛夫妻，韓平和真女香，被昏庸的皇帝拆散，並下令把他們兩人分葬大陸兩地。後來，真女香的墳上長出一株高大的紅豆樹，含情墳上生出一株相思藤。藤纏樹，戶藤生死不分離，古人借物思情就稱紅豆爲相思豆。
血淚傳說：另一箇故事講述的是一位妻子思念出征邊塞的丈夫，淚流滿面，流乾後流出血滴，變作一顆顆紅豆，在土地上生根發芽。
自然生長的傳說：還有一種說法是紅豆是由戰國宋康王的舍人韓憑與他的愛人何氏所產生的。宋康王見何氏貌美，心生妒忌於是就將其囚禁起來，韓憑不堪重負自殺了，並且留下遺書說希望死後與何氏共葬。宋康王見此大怒於是將何氏殺害並且將二人埋在一起。墳頭上長出大樹，樹上常有鴛鴦交頸悲鳴，樹下長出硃紅色心形果實，被人們稱爲相思豆。
文學作品的影響：唐代詩人王維的詩作《紅豆》中，借紅豆表達對友人的思念之情。這位友人正是李龜年，當時他因爲安史之亂被迫流放到江南。王維便寫了這首詩來贈與他，表達對友人的思念之情。
因此，紅豆被稱爲相思豆，既有自然生長的傳說，也有文學作品的影響，以及人們對愛情和友情的寄託。