Plusieurs membres de la famille Queensberry souffrirent de désordres mentaux. Comme déjà signalé plus haut, il est fort probable que le père de Lady Florence se soit suicidé. Son frère jumeau, Lord James Douglas, surnommé Jim par sa parentèle, était profondément attaché à elle et fut très affecté par son mariage. En 1885, il essaya d'abuser d'une jeune fille et par la suite devint de plus en plus perturbé. En 1888, il épousa une femme riche, mère d'un garçon de 10 ans mais le mariage tourna au désastre. Séparé de sa jumelle Florrie, James sombra dans la dépression et en 1891 se suicida en se tranchant la gorge.
Le frère aîné de Lady Florence, le 9ème Marquis de Queensberry, est resté célèbre pour sa contribution au noble art de la boxe et pour avoir précipité la chute de l'écrivain Oscar Wilde. Les Règles du Marquis de Queensberry, rédigées en 1865 par John Graham Chambers et publiées en 1867, furent vivement promues par le jeune Queensberry, boxeur amateur enthousiaste, et furent dès lors associées à son nom. En 1887, Queensberry et sa femme Sibyl Montgomery divorcèrent. Dans les années 1890, leur plus jeune fils, Alfred Bruce Douglas (1870–1945), entretint une relation intime avec Wilde, à la fureur de son père qui accusa l'écrivain de « s'afficher comme un somdomite » (sic). Wilde assigna Queensberry en justice pour diffamation, une démarche malencontreuse qui amena finalement sa condamnation judiciaire et sa déchéance.
Le petit-neveu de Lady Florence, Raymond Douglas (1902-1964), enfant unique de Lord Alfred, passa le plus clair de sa vie dans un hôpital psychiatrique.
Le fils aîné de Lady Florence Dixie, Sir Douglas Dixie, 12ème Baronet (18 janvier 1876 - 25 décembre 1948) servit dans la Royal Navy comme midshipman et breveté dans les King's Own Scottish Borderers en 1895. Le 26 novembre 1914, il est promu capitaine à titre temporaire au 5éme bataillon des KOSB. Il épousa Margaret Lindsay, fille d' Alexander, 8ème Baronet Jardine, et en 1924 succeda à son père au titre de Baronet Dixie. A sa mort en 1948, son fils Alexander Archibald Wolstan ( 8 janvier 1910 - 28 décembre 1975 ) devint le 13ème et dernier Baronet Dixie. Marié en seconde noce à Dorothy Penelope (Lady Dixie) King-Kirkman en 1950, il est le père de deux filles Eleanor Barbara Lindsay et Caroline Mary Jane.
Le petit-fils de Lady Florence Dixie, Sir Wolstan Dixie, écrivit une autobiographie intitulée « Is it True What They Say About Dixie? The Second Battle of Bosworth » et publiée en 1972. Le titre fait référence à une chanson des années 1940 de Irving Caesar, Sammy Lerner et Gerald Marks enregistrée par Al Jolson en 1948.