Thuở hàn vi, một lần Tể tướng Nguyễn Văn Giai đi tắm bị mất trộm hết quần áo, được một cô gái lén để cho mảnh vải đóng khố về. Khi đã đỗ đạt, ông hỏi cưới cô gái ấy để trả ơn.
Trong thời gian làm chức Giảng dụ, ông bộc lộ là một học quan có kiến thức uyên thâm, tư cách mẫu mực, học trò của ông chủ yếu là con Vua, cháu Chúa.