Tammikuun 11. päivänä 1901 Vanderbilt meni naimisiin Ellen (”Elsie”) Tuck Frenchin kanssa Newportissa, Rhode Islandissa. Hän oli Francis Ormond Frenchin (1837-1893) ja hänen vaimonsa Ellen Tuckin (1838-1915) tytär, ja hän oli läheinen ystävä Vanderbiltin sisaren Gertrude Vanderbilt Whitneyn kanssa, joka oli naimisissa Harry Payne Whitneyn kanssa. Myöhemmin samana vuonna, 24. marraskuuta 1901, Elsie synnytti heidän ainoan lapsensa: William Henry Vanderbilt III (1901-1981), Rhode Islandin myöhempi kuvernööri.
Maaliskuussa 1908 Elsie muutti veljensä Amos Tuck Frenchin kotiin Tuxedo Parkiin, New Yorkiin. Pian tämän jälkeen huhtikuussa 1908 puhkesi skandaali, kun Elsie haki avioeroa väittäen aviorikosta Agnes O’Brien Ruízin kanssa, joka oli kuubalaisen Washingtonin attasean vaimo. Julkisuus, joka aiheutti erimielisyyttä siitä, ketä tukea, johti lopulta Agnes Ruízin itsemurhaan vuonna 1909. Uudelleen naimisiin mennyt Elsie kuoli Newportissa 27. helmikuuta 1948.
Vanderbilt vietti avioeron jälkeen huomattavan paljon aikaa Lontoossa ja avioitui siellä uudelleen 17. joulukuuta 1911 varakkaan yhdysvaltalaisen avioeron saaneen Margaret Mary Emersonin (1886-1960) kanssa. Hän oli kapteeni Isaac Edward Emersonin (1859-1931) ja Emily Askew Dunnin (1854-1921) tytär ja Bromo-Seltzer-omaisuuden perijätär. Margaret oli ollut vuosina 1902-1910 naimisissa Baltimoressa asuneen varakkaan lääkärin, tohtori Smith Hollins McKimin (k. 1932) kanssa. Alfred ja Margaret saivat yhdessä kaksi lasta: Alfred Gwynne Vanderbilt Jr. (1912-1999), liikemies ja ravihevosten kasvattaja, ja George Washington Vanderbilt III (1914-1961), purjehtija ja tieteellinen tutkimusmatkailija.
Alfredin kuoltua Lusitaniassa vuonna 1915 Margaret osti Massachusettsin Lenoxista 316 hehtaarin suuruisen kartanon, johon kuului 47 huoneen kartano. Hän avioitui kahdesti uudelleen, ensin 12. kesäkuuta 1918 Lenoxissa Raymond T. Baker (1875-1935), poliitikko, jonka kanssa hän sai tyttären, Gloria Bakerin (1920-1975). Vaatimuksen hänen kuolinpesästään esitti Margaret, joka oli tuossa vaiheessa jo uudelleen naimisissa. Kuolinpesän nettoarvo kaikkien velkojen sekä hautajais- ja hallintokulujen maksamisen jälkeen oli 15 594 836,32 dollaria.
Testamentin mukaan Margaret ja hänen kolme poikaansa perisivät 1 180 098,18 dollaria. Lisäksi hän käytti ja lahjoitti heidän elatukseensa sekä leskensä ja lastensa elatukseen ja lohdutukseen vuosittain noin 300 000 dollaria.
Kiinnostuksen kohteetMuutos
Vanderbilt harrasti urheilua, ja hän nautti erityisesti ketunmetsästyksestä ja valmentamisesta. Hän ja monet muut miljonäärit, kuten James Hazen Hyde, harrastivat 1800-luvun lopulla vanhoja englantilaisia valmennustekniikoita 1800-luvun alussa. Valmennusryhmä kokoontui Lontoossa sijaitsevan Holland Housen lähistöllä ja lähti ajoneuvollaan yhden tai kahden päivän tai pidemmälle matkalle valitsemiaan reittejä pitkin useiden kreivikuntien läpi ja kävi ennalta sovituissa majataloissa ja hotelleissa reitin varrella. Vanderbilt kuljetti usein vaunuja, täydellisesti pukeutuneena, vaunumiehenä tai sulhasena. Hänen on kirjattu olleen vakiovieraana Burford Bridge -hotellissa lähellä Box Hilliä Surreyssä, jossa hän pysähtyi Lontoosta Brightoniin ajaessaan lounaalle ja noutamaan sähkeitä. Hän rakasti ulkoilmaelämyksiä.
Vuonna 1901 hän osti William West Durantilta Great Camp Sagamoren, Sagamore-järvellä Adirondacksissa. Hän laajensi ja paransi kiinteistöä niin, että se sisälsi huuhteluvessat, viemärijärjestelmän sekä juoksevan kuuman ja kylmän veden. Myöhemmin hän lisäsi vesivoimalaitoksen ja ulkoilmassa sijaitsevan keilaradan, jossa oli nerokas järjestelmä pallojen talteenottoa varten. Muita mukavuuksia olivat tenniskenttä, krokettinurmikko, 100 000 gallonan säiliö ja toimiva maatila.
RMS LusitaniaEdit
Toukokuun 1. päivänä vuonna 1915 Vanderbilt nousi ensimmäiseen luokan matkustajana Liverpooliin matkalla olleeseen laivaan, joka kulki kohti Liverpoolia. Kyseessä oli työmatka, ja hän matkusti vain palvelijansa Ronald Denyerin kanssa jättäen perheensä kotiin New Yorkiin.
7. toukokuuta Irlannin Corkin kreivikunnan rannikon edustalla saksalainen sukellusvene U-20 torpedoi aluksen, mikä aiheutti sekundäärisen räjähdyksen, joka upotti jättimäisen valtamerialuksen 18 minuutissa. Vanderbilt ja Denyer auttoivat muita pelastusveneisiin, ja sitten Vanderbilt antoi pelastusliivinsä pelastaakseen naispuolisen matkustajan. Vanderbilt oli luvannut pienen vauvan nuorelle äidille, että hän etsisi hänelle ylimääräisen pelastusliivin.
Epäonnistuttuaan siinä, hän tarjosi naiselle oman pelastusliivinsä, jonka hän ryhtyi jopa itse sitomaan naiselle, koska tämä piti tuolloin sylissään pikkulastaan. Monet pitävät hänen toimintaansa erityisen rohkeana ja urheana, koska hän ei osannut uida ja hän tiesi, ettei muita pelastusliivejä tai pelastusveneitä ollut saatavilla. Hänen kuuluisuutensa vuoksi useat Lusitaniassa olleet, tragediasta hengissä selvinneet ihmiset tarkkailivat häntä tapahtumien edetessä, joten he panivat merkille hänen toimintansa. Hän ja Denyer olivat niiden 1 198 matkustajan joukossa, jotka eivät selvinneet onnettomuudesta. Hänen ruumistaan ei koskaan löydetty.
Historiallisesti on ollut jonkin verran epäselvyyttä siitä, kuka Vanderbiltin suvun jäsenistä oli varattu Titanicille, ja viimeaikaisissa tutkimuksissa on todettu, että hänen setänsä George Washington Vanderbilt II:n oli itse asiassa varattu matkustamaan Titanicilla yhdessä vaimonsa Edithin ja tyttärensä Cornelian kanssa, ei Alfred Vanderbiltin.
Muistomerkki pystytettiin Lontoon-Worthingin maantielle (tieosuus A24 Lontoo-Worthing Road), joka sijaitsee Holmwoodissa, Dorkingin eteläpuolella. Kaiverruksessa lukee: ”Lusitaniassa 7. toukokuuta 1915 menehtyneen Alfred Gwynne Vanderbiltin, urhean herrasmiehen ja hienon urheilijan muistoksi. Tämän kiven on pystyttänyt hänen suosikkitiensä varrelle muutama hänen brittiläinen valmentajaystävänsä ja ihailijansa”. Toinen Vanderbiltin muistomerkki on pienessä puistossa Broadwaylla Newportissa, Rhode Islandissa, jossa Vanderbiltin perheen jäsenet viettivät kesiään.