As Carey's mother had once been the mistress of King Henry VIII, many people, including John Hales, vicar of Isleworth, speculated that he was in point of fact, the King's illegitimate son.
Protože byla Careyova matka kdysi milenkou krále Jindřicha VIII., mnoho lidí, včetně vikáře z Isleworthu Johna Halese, spekulovalo, že je Henry Carey ve skutečnosti královým nemanželským synem.