Retiré dans ses terres de Bourgogne, Bussy compose ses Mémoires pour se distraire, pour montrer la grandeur de sa maison. « Je parlerai moi-même de moi » écrit-il dans un style qui préfigure celui de Rousseau, ajoutant qu’il pourrait l’appeler sa « confession générale ». Il y décrit ses débuts militaires, ses premières amours, les intrigues de cour, ses campagnes, ses heurs et malheurs jusqu’à son embastillement ».‎