故事的主人公是唐朝的一位诗人白居易，恰好他住在莫愁湖畔。有一天，他在打扫自己的庭院时，发现了一支已经烧尽的残烛，于是便萌生了写一首诗《莫愁湖畔余亦悲》的念头。
他便把这支残烛带上文具，到湖边唱着诗句写起来。周围突然起了一阵小风，把他的诗稿吹走了，白居易抓了抓头，只好回家写下第二遍。可惜，他还没有写完，便又被风吹走了。如此反反复复，写了两三百回，他才写好了这首《莫愁湖畔余亦悲》。从此，莫愁湖畔也就有了残烛香。
故事传到后来，人们纷纷到莫愁湖畔祭奠这支残烛，它成为了人们心中最为珍贵的遗物之一。时至今日，江南地区仍保留了许多残烛香的遗址，成为了文化旅游的一种特色。