采蘅之的《虫鸣漫录》卷2说:“纪文达公自言乃野怪转身,以肉为饭,无粒米入口,日御数女。五鼓如朝一次,归寓一次,午间一次,薄暮一次,临卧一次。不可缺者。此外乘兴而幸者,亦往往而有。” 昭枪在《啸亭杂录》卷10中也说“(公)今年已八十,犹好色不衰,日食肉数十斤,终日不啖一谷,真奇人也。” 孙静庵的《栖霞阁野乘》更是讲述了一个关于纪晓岚好色的精彩故事:“河间纪文达公,为一代巨儒。幼时能于夜中见物,盖其禀赋有独绝常人人者。一日不御女,则肤欲裂,筋欲抽。尝以编辑《四库全书》,值宿内庭,数日未御女,两睛暴赤,颧红如火。纯庙偶见之,大惊,询问何疾,公以实对。上大笑,遂命宫女二名伴宿。编辑既竟,返宅休沐,上即以二宫女赐之。文达欣然,辄以此夸人,谓为‘奉旨纳妾’云。”