响鼓岭雅名叫步虚岭。据《新修岳麓书院》解释，是因为“履之（脚蹬地）空洞有声”。但志书上录有一首麓山寺弥嵩和尚的诗“蹬道盘空望赤城，主都初觉步虚声。冬冬云外谁人足，响鼓应知不浪名。”“步虚楼”楼名为已故著名书法家周昭怡题书。 佛教曾在此建法华塔，后来被毁。现建有石亭，供游人歇憩，亭子由麻石建造，六条斜边使得亭子方正敞亮。亭旁的巨石上刻有今人周翰陶书“响鼓岭”三字，另一巨石上刻有“观枫台”三个字。