Henry Fitzroy fue el primer duque de Grafton y su esposa fue Isabella Fitzroy, quien también era duquesa de Grafton. Henry Fitzroy fue el hijo ilegítimo del rey inglés Carlos II y su madre fue una cortesana llamada Barbara Villiers. A pesar de su origen ilegítimo, Henry Fitzroy recibió una educación privilegiada y ascendió rápidamente en la sociedad inglesa. En 1672, a los 17 años, Henry Fitzroy se casó con Isabella Bennet, hija del conde de Arlington. Después de la boda, recibió el título de duque de Grafton, convirtiéndose en uno de los nobles más ricos e influyentes de Inglaterra. La pareja tuvo cuatro hijos, incluyendo a Charles Fitzroy, quien sucedió a su padre como segundo duque de Grafton. Isabella Fitzroy, la duquesa de Grafton, fue conocida por su belleza y su gran carácter. También estuvo muy involucrada en la vida de la corte de los reyes de Inglaterra, incluyendo a Carlos II, Jacobo II y Guillermo III. A pesar de su matrimonio aparentemente exitoso, se rumoreaba que Henry Fitzroy tenía otras relaciones románticas, incluyendo una aventura con la actriz Moll Davis. También se rumoreaba que Isabella Fitzroy tuvo un romance con el duque de Monmouth, el hijo ilegítimo de Carlos II. Henry Fitzroy murió en 1690 a la edad de 35 años. Su esposa, la duquesa de Grafton, le sobrevivió durante muchos años y murió en 1723. A pesar de los rumores y escándalos que rodearon su matrimonio, la pareja era respetada y admirada en la sociedad inglesa.
