పురాణాల ప్రకారం గయ క్షేత్రం గయాసురుడు అనే అసురుని శరీరంపై వెలసింది. గయాసురుని దర్శించుకుంటే పాపాలు తొలగి స్వర్గానికి వెళ్తారనే బ్రహ్మదేవుని వరం వల్ల సృష్టి క్రమం దెబ్బతిన్నది. దీనిని సరిదిద్దడానికి శ్రీమహావిష్ణువు యజ్ఞం కోసం గయాసురుని శరీరాన్ని దానంగా కోరగా, అతను అంగీకరించాడు. విష్ణుమూర్తి తన గదతో అతడిని అదిమి ఉంచడంతో ఆ శరీరం ఒక భారీ శిలగా మారింది.

గయాసురుని భక్తికి మెచ్చిన విష్ణువు, ఈ పవిత్ర భూమిపై ఎవరైతే తమ పితృదేవతలకు పిండప్రదానం చేస్తారో వారికి మోక్షం లభిస్తుందని వరమిచ్చారు. ఇక్కడ సాక్షాత్తు నారాయణుడు గదాధరుని రూపంలో కొలువై ఉండి, భక్తులు సమర్పించే పిండాలను స్వీకరిస్తారని వాయు, గరుడ పురాణాలు చెబుతున్నాయి. ఈ పుణ్యస్థలంలో తర్పణం వదలడం వల్ల వంశస్థులకు పితృ రుణం తీరి, పూర్వీకుల ఆత్మలకు శాంతి చేకూరుతుంది.