A világítótorony egyik első őrzője egy Peter Rasmussen nevű férfi volt. Őt arról ismerték, hogy aprólékos szemmel és éberen gondozta a világítótornyot. A szivarok iránti szeretetéről is ismert volt, és ő az egyik első szellem, akiről az emberek beszámoltak, hogy kapcsolatba került vele. Az évek során Peter szivarjának illatát sokan érzékelték, köztük a személyzet tagjai és a vendégek is.
Mások láttak és hallottak egy másik őrzőt, Joseph Andreut a torony tetején, csakhogy ő már több mint egy évszázada halott. Jelenléte a világítótoronyban azzal magyarázható, hogy a torony külső festése közben zuhant a halálba. Szelleme soha nem távozott, és gyakran látják, amint a torony tetejéről nézelődik.
De a Szent Augusztin világítótorony talán legismertebb szelleme a két fiatal nővéré, akik szintén a birtokon haltak meg. Hezekiah Pity-t az 1800-as évek végén bízták meg a torony felújításával. Lányai, Eliza és Mary egy szekérben játszottak, amelyet arra használtak, hogy anyagokat szállítsanak oda-vissza a világítótoronyhoz. Amikor a szekér elszabadult, nem tudtak időben kiugrani, és a szekér gyorsan az öbölbe csúszott, mindkét lányt vízi halálba taszítva.
Most és azóta a legtöbb napon hallani a lányok nevetését a torony tetején késő este. Mások látták Elizát lebegni az udvaron, ugyanabban a kék ruhában, amiben meghalt.