Много тысяч лет назад, когда злой демон захватил всю землю, Шри Вишну решил инкарнироваться в образе карлика, чтобы уничтожить демона. Перед тем как отправиться в Тируковиллури победить демона, Вишну молился Шри Ганеше об успехе. После этого образовалась сваямбху - небольшое изображение Шри Ганеши, которое, как говорят, со временем стало расти и достигло трех метров в высоту.