Polydore De Keyser werd geboren als de zoon van de onderwijzer Constantin De Keyser (1801-1861) en Catharina Rosalia Troch. In 1842 week het gezin uit naar Londen waar ze ‘De Keyser’s Royal Hotel’ uitbaatten. In 1856 nam Polydore het hotel over .
Polydore werd daarna gemeenteraadslid van de City of London. In 1887 werd hij verkozen tot de eerste rooms-katholieke Lord Mayor of burgemeester van Londen. Hij ontving tal van buitenlandse koningen, prinsen en politici. In 1888 een bezoek aan zijn geboortestad Dendermonde, die hem verwelkomde met een speciale Ros Beiaardommegang.