La famille Giscard d'Estaing, d'ancienne bourgeoisie, porte ce nom depuis le décret pris en Conseil d'État du 17 juin 1922, qui a autorisé Edmond Giscard, son frère René Giscard et leurs descendants à ajouter le nom de d'Estaing à leur patronyme. Ce faisant, les Giscard prenaient le nom d'une de leurs lointaine aïeule, Lucie-Madeleine d'Estaing (1769-1844), en ligne féminine. Edmond Giscard d'Estaing se présentait donc, avec son frère René, comme « le représentant de la maison d'Estaing », ce que contestent les généalogistes puisque la famille des comtes d'Estaing a - de son côté - une nombreuse descendance légitime en ligne féminine. La famille Destaing dont descendent les Giscard d'Estaing serait selon eux une branche bâtarde de la famille d'Estaing du célèbre Amiral d'Estaing. En réalité, la confusion des deux familles a été entretenue par l'homonymie de deux Lucie-Madeleine d'Estaing et l'existence d'une branche ignorée des généalogies s'est trouvée démentie par les documents existants.

Depuis 2005, la famille Giscard d'Estaing a acheté le château d'Estaing à Estaing.

Ils ont donc acquis à la fois le nom, la demeure historique et l'idée d'une relation de sang avec l'ancienne famille noble, on pourrait croire que les deux familles, d'Estaing et Giscard, n'en font qu'une alors qu'il n'en est rien.

Le château d'Estaing est un des monuments remarquables du département de l'Aveyron. Son achat par les Giscard d'Estaing a été réalisé après une période de cinq ans durant laquelle la commune en a été propriétaire. Le conseil municipal du petit bourg était prêt à aider les deux frères et la quasi-totalité des habitants du bourg se rangeait derrière le conseil. C'est ainsi que le château fut vendu deux fois - en 2000 et en 2005 – sans appel d'offre, sans publicité et en écartant un autre client sérieux qui se présentait. Une pléiade de journaux internationaux a exprimé son étonnement, voire sa réprobation. Le monde titrait : « Après le nom, le château ». Le Figaro notait : « (...) dans dix ans il aura des subventions et un jour les visiteurs contempleront le cèdre où il avait l'habitude de s'entretenir avec Sésostris II ». Et la Neue Zürcher Zeitung a démonté une combinaison qui visait probablement à transférer le bien à la famille Giscard sans surenchère inopportune : les sœurs de St. Joseph, qui possédaient le château depuis 1834, ont déclaré en ce sens au magazine people Point de vue avoir préféré vendre à la commune, parce que cela « ne leur plaisait pas » de vendre à la famille Giscard d'Estaing. Une communauté religieuse est tenue de vendre ses biens âprement puisque le surplus gagné profite aux œuvres ; seule exception : la vente à une autre communauté religieuse ou à une personne publique peut se faire à prix d'ami. Au moment des deux ventes, les Aveyronnais, à l'exception d'une poignée, se sont déclarés pour la famille Giscard, craignant surtout que le château ne tombe entre les mains d'un étranger. Quant à la communauté religieuse, elle est consciente d'avoir vendu sous le prix du marché mais « de bonne foi », c'est-à-dire sans savoir que la commune agissait en intermédiaire.