响堂山石窟，原本并没有一个响堂山，而是因响堂寺之名。

窟群主要部分为：

北响堂（鼓山）石窟，有北齐皇室资助开凿的最早和最大的三个石窟。

南响堂（滏山）石窟，由七个较小的石窟所组成。

另外的水峪寺，也被称作“小响堂”。

如今也俗称北响堂山、南响堂山、小响堂山了。 ​​​