Mary Raffray nació en Inglaterra en 1844 y emigró a Estados Unidos en la década de 1870. A partir de entonces, se convirtió en una respetada actriz de teatro, trabajando en compañías de teatro de renombre como la de Augustin Daly. También escribió varias obras de teatro y publicó dos libros, además de participar en la creación de actrices gremiales. Murió en 1884 a la edad de 40 años. Su vida es recordada como una de las primeras mujeres que trabajaron en el teatro profesional estadounidense y por su dedicación en la creación de un entorno laboral más justo para los actores y actrices.
Ernest Simpson y Mary Raffray se conocieron en Londres en 1926 y comenzaron a salir juntos poco después. En ese momento, Simpson estaba casado con Wallis Warfield, una mujer estadounidense que se convertiría en la Duquesa de Windsor después de que Simpson se divorciara de ella.
A pesar de estar casado, Simpson se enamoró de Raffray y comenzó a cortejarla. Raffray era una actriz de teatro inglesa y se decía que tenía una personalidad encantadora y un gran sentido del humor. La pareja se comprometió en 1928, pero debido a los problemas financieros de Simpson, la boda se retrasó hasta 1931.
Durante su matrimonio, Raffray y Simpson vivieron en una casa en el sur de Francia. Raffray se dedicaba a la actuación y Simpson trabajaba como agente de bolsa y luego como empresario. Sin embargo, el matrimonio no funcionó y la pareja se separó en 1934.
Después de su separación, Raffray volvió a la actuación y se mudó a Hollywood, mientras que Simpson se movió a Nueva York. A pesar de su divorcio, la pareja mantuvo una relación amistosa y Raffray le ayudó a Simpson a conseguir trabajo en Hollywood.
En general, la relación entre Ernest Simpson y Mary Raffray fue breve pero significativa para ambos y dejó una marca en la historia como una parte de la complicada vida amorosa de Simpson.