Menurut cerita yang berdiam di gua ini adalah Embah Jaga Lautan atau disebut pula Kyai Pancing Benar. Beliau merupakan anak angkat dari Dewi Loro Kidul dan ibunya menugaskan untuk menjaga lautan di daerah Jawa Barat pada khususnya dan menjaga pantai Indonesia pada umumnya oleh karena itu beliau disebut Embah Jaga Lautan.
Sebenarnya Embah Jaga Lautan ini berasal dari Mesir yang ditugaskan untuk menyebarkan agama Islam. Beliau mempunyai isteri 7 orang yang setiap malam beliau bergiliran menengok salah satu ketujuh isterinya. Ketujuh isterinya itu selalu bertengkar satu sama lain. Pada satu hari isterinya yang ketujuh tidak sempat ditengok karena beliau pergi memancing.
Pancing yang digunakann tidak berbentuk melingkar akan tetapi lurus dan ikan yang didapatnya disebut ikan Topel karena ikan tersebut menempel pada pancingnya.
Setelah beliau mempunyai ikan Tapel tersebut ketujuh isterinya kemudian rukun bersama, maka oleh karena itu beliau disebut juga Kiai Pancing Benar dan sampai sekarang masih banyak orang yang menangkap ikan tersebut karena masih percaya akan khasiatnya.
Disebut Panggung karena didalam gua ini terdapat tempat seperti panggung yang dipakai untuk sembahyang para wali atau orang-orang yang akan naik haji ke Mekkah.
