乾隆二十七年，纪晓岚任福州学使，提督学政。学使衙署曾是明朝时宦官把持的税署，住在署里的人夜里常被莫名的响动惊醒。推想当年残暴的宦官在署内残害过不少人，所以署内有的屋子闹鬼。乾隆二十九年夏天，纪晓岚的父亲姚安公来到福建，偏要住在都说有鬼的屋子里，几天过去了，安然无事。纪晓岚曾婉言劝说他父亲：“您何必以千金之躯跟鬼较劲呢？还是换个屋子住吧。”他父亲说：“鬼必定是怕人的，因为阴不胜阳。抑或有侵犯人的时候，那是因为人阳气已衰、不能胜阴了。阳盛之人，鬼必不敢欺。什么是阳盛？是血气壮、胆子大吗？不是。人之心，慈祥者为阳，惨毒者为阴；坦白者为阳，深险者为阴；公正者为阳，私曲者为阴。所以，易象以阳为君子，阴为小人。如果立心光明正大，那么阳气就纯正强盛，如同在幽室中燃烧起炽烈的旺火，即使有鬼魅，也将被消融。你读过不少书，可曾见过史册中有哪个正人硕士被鬼侵扰过吗？”——硕士，指有学问的人。纪晓岚再拜受教，认为他父亲说得很对。这则往事记载在《阅微草堂笔记·如是我闻（三）》中。看得出，姚安公的这个理论被纪晓岚接受了。看这几件事——

与纪晓岚同朝为官的抚军胡宝瑔据说能看见鬼。他说他曾为了修葺房屋巡视过仆人们的住房，发现各屋都有鬼魂出入，唯独有一屋清净寂然。胡抚军问：“这屋是谁住的？”众人说是某仆。胡抚军暗想：“此仆为人粗蠢、一无所长，他的妻子也是寻常的仆人，为什么鬼魂不进他们的住房呢？”后来，那个仆人死了，他的妻子为其守节，含辛茹苦数十年，终身没有再嫁。看来，正是她心中有正气，所以鬼不敢接近她。纪晓岚又听一个能视鬼的人说：“鬼魂到处都有，只不过人看不见而已。唯有孝妇、贤妇，他年的烈妇、节妇，鬼魂总是远远避开的。”这则故事记在《槐西杂志（三）》中。

在《姑妄听之（一）》中，纪晓岚记述了编修裘麟（字超然）讲的一件事。吏部尚书杨锡绂年轻的时候，常往来于人迹少至的田庄别墅之间。有个身着绿衫的女子，总是在一残墙的缺口处看他，对他秋波流转。偶然四目相对，女子暂作回避之态，却还回眸一笑，大有希望男子上前相就的意思。杨锡绂发觉之后，再从此地经过时，便目不斜视。一天，那女子捡起一土块投向他，说：“看你外表好像挺聪明的，怎么这么傻呢！”杨锡绂向她拱手道：“跳墙钻洞的事，我实在不会。请你去找不傻的人吧。”女子瞪起眼睛说：“你这么狡黠，让我如何能要你的命！”随即变成披头散发、吐着红红舌头的吊死鬼形象，转身走了，从此再也没有露面。

纪晓岚说，可见只要立心端正，即使是冤鬼也奈何不了。杨锡绂之所以后来成为一代名臣，就因为他年轻的时候就树立了端正的人生志向。

世上有鬼吗？唯物主义者坚称没有；儒家也是不相信有鬼的。纪晓岚的父亲姚安公却是有鬼论者，他说：“儒者谓无鬼，迂论也，亦强词也。”纪晓岚不敢反驳他父亲，然而在他的文章中不难看到，他对有鬼论多少是持怀疑态度的。但在他讲述的诸多故事中，他却没有否认过鬼魂的存在，因为他要借助有鬼论来对世人进行劝导，要人们秉承皇帝倡导的道德规范，做个忠孝节义的好人。