陆夫子祠坐落在荆门城西象山东麓的文明湖畔。

    传说很早以前象山脚下一个又大又深的岩洞里有个妖怪凶恶得很。老百姓来挖沟引泉水灌田触犯了它，它就暴跳如雷，把人整死。平时经常出来吞食猪牛鸡狗。第年还逼老百姓挑选岁数相同的一对童男童女去祭献它。渐渐地，这个地方被妖怪折腾得人烟稀少，附近的老百姓提心吊胆过日子，恨透这个妖怪，巴不得什么时候老天爷派神群众观点下凡收拾妖怪。

    到了南宋。一回，荆门的知军陆九渊听说城西群众在山下洞口跪拜，请妖怪也来吃童男童女，便赶到洞前对大家说：“你们别再迷信上当，今天我来替童男童女。”大家信半疑。

    陆九渊用又长又粗又结实的绳索系上铜铃铛，吩咐大家在洞外守候。他进洞后，洞庭湖外听到铃铛响便扯着绳索拉他上来；要是七日七夜还听不到铃声，就不用守候了，只是要用石头堵死洞口，大家回去管保太平无事。

    陆九渊家里的人听说他要进洞斗妖怪，慌忙赶来拦阻。陆九渊说：“我身为百姓的父母官，理应为发求福除害消灾。”家里人无奈，只好揪着心望着他独自下洞。

    远近乡邻听了这个消息也纷纷跑来守候。守了三天，没听见铃响；再守三天，还是没动静。到第八天，只好搬来大石头堵死洞口。大家热泪盈眶，三步一回头，各自回家。

    说来也怪，从此再也没见有什么妖怪也来祸害老百姓了。

    有人说妖怪被陆九渊杀死了；有的说是陆公与妖怪同归于尽了；又有的说陆公把住洞口，妖怪不敢闯出来，还有这样的说法；陆公打败了妖怪，成了神仙，专门整治妖怪，妖怪只好老实了。

    妖怪绝迹，逃亡在外的老百姓知道了，陆续返回家乡过太平日子，这地方又兴旺起来。

    为了纪念为发除害的陆知军，大家在他生前在象山东坡讲过学的讲经台上修筑了一座仰止亭；又在洞边盖了一座大祠堂，竖了一块雕有陆文安公头像的石碑，让千秋万代的人年年来这里祭祀。

    这祠堂就是陆夫子祠。