La retraite
1816 –1825 Retraité et collectionneur
Après sa démission Denon se consacre à ses collections et prépare la publication des Monuments des Arts du dessin, il continue toutefois à assister aux séances de l’Institut et participe au jury du concours pour le prix de Rome.
Il se retire quai Voltaire au milieu de ses collections, visité par de nombreuses personnalités européennes telle Lady Morgan en 1816. Il reçoit aussi Lord Essex en 1818, le comte Rostopchine en 1819, le peintre anglais D.Wilkie en 1821, le prince Dolgorouki en 1822. En fait, d’après les écrits de ces visiteurs, on y trouve le beau comme le pire, des oeuvres classiques aux objets curieux,. Un objet peut retenir l’attention c’est le célèbre reliquaire.
Denon reçoit Isabelle Albrizzi en 1817 qui séjourne à Paris avec son fils de mai à juin.. Denon écrira encore quelques lettres à Isabelle pour lui recommander des personnalités de passage à Venise entre 1818 et 1825, sa dernière lettre sera datée du 1er avril 1825.
Le 9 mars 1818 il achète à la vente Lavallée 2 fûts de colonne en marbre et deux vases, le 26 novembre 1822 deux tableaux de Lépicié à la vente Saint Victor, le 16 avril 1825 le portrait de David par Girodet et ce serait à la vente Lapeyrière à laquelle il assistait que Denon aurait eu un coup de froid qui le fera succomber le 28 avril dans son appartement.
Le 30 avril Denon est enterré au cimetière du Père Lachaise, l’éloge funèbre est prononcé par les peintres Gros et Jomard, ce sera en décembre 1827 que sera mise en place sa statue funéraire réalisée par Cartellier, dont le plâtre décore le salon d'accueil du Musée Denon à Chalon.