采蘅之的《蟲鳴漫錄》卷2說:“紀文達公自言乃野怪轉身,以肉為飯,無粒米入口,日禦數女。五鼓如朝一次,歸寓一次,午間一次,薄暮一次,臨臥一次。不可缺者。此外乘興而幸者,亦往往而有。” 昭槍在《嘯亭雜錄》卷10中也說“(公)今年已八十,猶好色不衰,日食肉數十斤,終日不啖一穀,真奇人也。” 孫靜庵的《棲霞閣野乘》更是講述了一個關於紀曉嵐好色的精彩故事:“河間紀文達公,為一代巨儒。幼時能於夜中見物,蓋其稟賦有獨絕常人人者。一日不禦女,則膚欲裂,筋欲抽。嚐以編輯《四庫全書》,值宿內庭,數日未禦女,兩睛暴赤,顴紅如火。純廟偶見之,大驚,詢問何疾,公以實對。上大笑,遂命宮女二名伴宿。編輯既竟,返宅休沐,上即以二宮女賜之。文達欣然,輒以此誇人,謂為‘奉旨納妾’雲。”