செவி வழி கதையின் படி செங்குந்தா முதலியார் சமூகத்தைச் சேர்ந்த ஒரு பக்தர், கடலோரப் பகுதியில் காளியம்மன் தேவியின் சிலை வைத்து ஒரு பெட்டியை கண்டு எடுப்பதாதாக கனவு கண்டார். அடுத்த நாள் அவர் உண்மையிலேயே ஒரு ஓலைச்சுவடியையும், ஒரு சிலையுடன் இருந்த ஒரு வெள்ளிப் பெட்டியைக் கண்டார்.
அந்த ஓலைச்சுவடி படி தினமும் 1000 சடங்கு பொருள்களுடன் பூஜை செய்வது சாத்தியமற்றது என்பதால் 5 ஆண்டுகளுக்கு ஒரு முறை பூஜை நடத்த சமூகம் முடிவு செய்து, ஒவ்வொரு 5 வருடங்களுக்கும் திருவிழா நடத்தப்படுகிறது. ஒவ்வொரு ஐந்து வருடங்களுக்கும், 1000 பொருட்களுடன் ஒரு சிறப்பு பூஜை செய்யப்படுகிறது.