斗笠地藏的故事主要講的是地藏王的前世是一個僧人，他來到這個世界上體驗生活，並且用自己的行動來證明自己的佛教教義的故事。
故事講的是這位僧人有一次遇到了強盜，強盜殺了他的和尚同伴，搶了他們的財物走了。這個僧人十分氣憤，就在後面追趕強盜。他一直追到了強盜的家裡，強盜拒絕歸還搶來的財物，還譏笑這個僧人。僧人很傷心，就決定要報復這個強盜。
他到了一座深山中，開始刻苦修行。後來他成了一個文殊菩薩的化身，又得了佛力，可以透視到物體的內部。後來他聽說這個強盜修行有成，就來考察他。地藏王勸說強盜將財物歸還，並將自己都掉在地上的斗笠洗好晾乾給強盜送去。強盜很感動，就跟著地藏王一起修行，最後也成了一個佛。因為這件事，地藏王被稱為“斗笠地藏”或“白衣地藏”等。