《三教源流搜神大全》载，五显公之神在天地间相与为本始，至唐光启中降临于要源。传统民间相传本邑之民王喻在城北有一处园林，一夕，园中红光烛天，见五神人自天而降，自称受天之命，当食此方，福佑斯人，言讫，升天而去。王冶与邑人遂聚集百姓，立庙虔供行祷，莫不应验。最初取庙号为“五通”，大观中始赐庙号曰“灵顺”。其显灵之事，屡闻于朝，此后果有褒封。宣和年间封两字侯，绍兴中加封四字候，乾道年间加封八字公；嘉泰二年封二字王，景定元年封四字王，因累有阴助于江左，封六字王，景定十—年又告下封八字王。宋理宗改封八字王号：第一位，显聪照应灵格广济王柴显聪，显庆协慧昭助夫人；第二位，显明昭烈灵护广佑王柴显明，显慧协庆善助夫人；第三位，显正昭顺灵卫广惠王柴显正，显济协佑正助夫人；第四位，显真昭佑灵祝广泽王柴显真，显佑协济喜助夫人；第五位，显德昭利灵助广成王柴显昭，显福协爱静助夫人。由此被称为五显神，其庙亦称为五显庙祈之颇灵验，日后香火益盛。宋王逵《蠡海集》称九月二十八日为五显生辰，南宋时期影响已不止江西德兴、婺源一带，临安(今浙江杭州市)亦有其行祠。五显神的传说盖始于唐，见于典籍者，实始于宋。《夷坚志》载五显神之事极多，但别于五通神。后世常有五显、五通混淆之事。其信仰始于江西德兴、婺源一带，此后日渐扩散。《夷坚志》载：德兴五显庙，为其神发迹处。有福州长溪人林刘，举在国学，将赴解省之际，梦五显神降临，遂被推荐为德兴县尉。
灵顺庙始于婺源，后迁杭州，婺源每年的正月十五，七月十五，十月十五三个时间还有众多信徒到婺源长径去拜五显大帝，香火旺盛！因为原址在清末已经毁坏，在婺源老城区目前正在重新修建灵顺庙，供奉的仙人就是五显大帝，为道教文化在江西乃至全国提供了非常好的条件！
来历五显财神，根据神话传说，在《铸鼎余闻》中记载，称为南齐柴姓五兄弟为五显神财神。老大名叫柴显聪，老二名叫柴显明，老三名叫柴显正，老四名叫柴显直，老五名叫柴显德，弟兄五人为猎人，经常打猛禽走兽，采草药为民疗伤治病，吃不完的野兽送给贫穷百姓，深受人民爱戴，人缘非常好，在他们逝世后，民间尊他们为神仙，即称五显神，五显王。五显神为宋代江西德兴、婺源一带信奉的财神。兄弟五个，均被封为王，因其封号首字都为显，所以叫五显神。
