Он обожал женщин и окружал себя ими. В одном из анекдотов о его жизни говорится, что банкир Агостино Киджи вынужден был во время работ на своей вилле допустить туда очередную возлюбленную Рафаэля, иначе художник не смог бы продолжать работу, поскольку любовные мечты слишком сильно занимали бы его воображение.