L’hôtel de Conny a appartenu depuis sa construction jusqu’en 1892 à la famille de Conny. Anobli par la charge de greffier au parlement des Dombes en 1745, Clément Conny acquiert en 1751 les seigneuries de Thoury-sur- Besbre et de La Faye en Bourbonnais. Aliéné à la famille de La Celle, puis à l’évêché de Moulins, l’hôtel est démembré dans la seconde moitié du XXe siècle, avant que Pierre-Bassot, à partir de 1996, ne le réunifie et le restaure. Le Fonds de dotation Pierre-Bassot poursuit cette œuvre.