相传当年祖师在离此不远的暖窑修行，久久生厌，不知何时才能修成正果，便有了还俗的念头。在回返的路上，经过回龙村，见路边有一位老婆婆在红岩石上磨铁棒，心里很纳闷，便上前探问究竟。老婆婆说：“女儿要出嫁，少一根锈花针。”祖师说：“这么粗的铁棒，要磨多长时间才能成针呢？”老婆婆说：“天下无难事，铁棒磨成针。”说罢便无踪无影。祖师如醍醐灌顶，顿时茅塞顿开，他知道这是观音菩萨在点化他：修行要耐得寂寞，要笃定心诚。于是,他重返故地，终于修成得道，羽化升仙，回龙村也因此而得名。