相传，药仙葛洪从楚望山下的八仙洞中上天以后，百姓们都很怀念他。特别是那些被葛洪医好了的病人，逢年过节，总要买上香烛纸钱，来到八仙洞前磕头祷告。
石首县官为了收买人心，借机张贴告示，说是要为葛洪修建庙宇，并向百姓摊粮派款，从中捞油水。
告示一出，衙役们如狼似虎，挨户搜刮，百姓们个个叫苦连天。
材料刚刚备了一半，县官就征集民夫工匠动工建庙。一修修了半年，最后还剩九九八十一根大檩和一根中柱无法完工。民夫 工匠们累得腰酸背驼，怒气直冲云霄。
这天，观音菩萨正在四海云游，行到离石首不远，忽然被一股怒气阻住云头。她睁开慧眼一看，就知道石首的百姓有难，便动了恻隐之心，化作一个村妇，手提竹篮，篮内放了不少柳条，向石首而来。行至半路，见一木匠背着工具半云半雾前来，一看原来是鲁班祖师。观音说：“鲁班祖师匆匆赶路，有何急事?"鲁班说：“菩萨，皆因最近药仙葛洪升天，玉帝降旨令我为他建造药仙府。"观音说: "正巧，我是到人间为葛洪建庙去的"。就把石首县官为建庙剥削人民，众百姓如何受难的事讲了一遍。鲁班心想:菩萨到人间去为百姓解除灾难是件好事，可在我面前卖弄木匠手艺，真是有失我的体面，不如和她比试比试，于是便对观音说..菩萨，小神愿陪菩萨到人间走一遭。现已半夜，我们以鸡叫为限，你建大檩，我建中柱，看谁先完工。"观音已知鲁班的心事，便一一答应了。
两人来到楚望山下，各显本事。观音从篮内拿出柳条，用刀修好，吹了一口仙气，八十一根柳条变成了一样粗细的大槽，刚够尺码。这边鲁班忙拣来一堆废树，七拼八凑，累得汗流泱背。
看看快到鸡叫，鲁班一见观音只有一根大擦未搁好了，心中一急，改变了主意。忙拣来一堆刨花卷中柱，卷好后刚刚立起，观音已经完工。鸡也开叫了，可中柱上还有一眼未打好。鲁班搞慌打， 用墨签一捅，打了一眼，就和观音驾起祥云升到空中。
天没亮，衙役们催民夫工匠上工。民夫工匠到工地一看，一座精巧的庙宇早已修成。八十一檩雕龙画凤，金光闪闪;正中的中 柱，三人围抱不住，好像用刨花卷成，人们忙站在庙外观看，只见观音和鲁班两朵祥云缓缓离去。百姓们忙跪倒在地，拜谢观音和鲁班为百姓解了大围。 这座庙因纪念葛洪在此开田种玉救济百姓而建，人们便叫此 庙为"玉田寺"。