Trong khi các học giả vẫn chưa tìm ra nguồn gốc thực sự của ngôi đền, người ta bắt đầu tin về truyền thuyết thời trung cổ đằng sau ngôi đền. Theo câu chuyện trong cuốn Katha-Kalpataru của Krishna Yajnavalki, khi một vị vua bị bệnh nặng, vợ của ông đã cầu nguyện với thần Shiva mong chồng sớm bình phục. Đổi lại, nếu lời cầu nguyện của bà linh ứng, bà thề sẽ xây dựng một ngôi đền mang tên Shiva.
