作为隋炀帝陵所在地的槐泗一带，流传着许多有关隋炀帝的故事。传得最多、最神奇的当推雷击三塘的故事了。
据传说，由于隋炀帝的荒--残暴，天理不容，致使死于宇文化及叛乱的隋炀帝几无葬身之地。当下葬于迷楼北侧的今平山乡荷叶村的荷叶地时，突然暴雨倾盆，电闪雷鸣。一声惊雷将坟墓劈开，炀帝被抛尸在外，墓地也被击成一个深塘，此谓上雷塘。此后，又将他改葬于雷塘桥东，今平山乡丁魏小杨庄旁雷塘埂的南闸窝，又是一阵惊雷，墓地又成了一个大塘，此谓中雷塘。再后，改葬至今槐子村和槐二村交界处官埂塘的北闸窝，惊雷再起，墓地再成一塘，此谓下雷塘，这令主持葬礼的隋左武卫将军陈秣实在为难。最后将其改葬于今维扬区城北乡综合村的铁佛寺，因雷不打佛，隋炀帝才有了停尸之所。
隋朝灭亡以后，大唐开国。唐太宗李世民既是隋炀帝的姨表侄，又是隋炀帝的女婿（萧后之女是唐太宗的宠妃），他登基为帝后，才将隋炀帝迁葬至今槐泗镇槐二村的徐庄，即现在的隋炀帝陵。此处墓地几经荒芜，直至清朝的阮元与扬州知府伊秉绶共同主持维修，重新立碑，并由伊秉绶题写了隋炀帝陵碑文。
几经沧桑，墓又残败，墓碑断裂。经邗江区人民政府重新修缮，复制了墓碑，建了牌坊、陵门等大量设施。如今，这里已是专门的隋炀帝景区，成了人们的游览胜地。更奇特的是，新修的陵墓门阕于2005年8月20日下午两时又遭受了雷击，好在只击毁了门阕一角。这又为人们增添了茶余饭后的谈资。