Face à l’entrée du château, l’hôte particulier de Peyré est aussi appelé « Hôtel Sully ». Il est un parfait exemple d’architecture citadine d’aristocrates du XVIlème siècle : son ostentatoire façade sur rue n’a d’égale que l’intimité du côté intérieur sur cour, pavée en calade. La légende veut qu’un simple et fleurement de la main du heurtoir en forme de basset guérit du mal d’amour… Le quartier au pied du Château et ses petites rues sinueuses dégagent une atmosphère pittoresque.