Đào Trọng Văn thực ra là một người vô cùng kín tiếng. Tuy ông thân kiêm Tam Cô nhưng chưa bao giờ tỏ thái độ cửa quyền trước mặt người khác. Dù vô cùng được Gia Tĩnh sủng ái và tin cậy, ông cũng chẳng bao giờ cậy thế hiếp đáp quan lại trong triều.
Ông lại càng không tham gia vào cuộc nội đấu giữa phái Dương Minh và phe Nghiêm Tung,