A construção começou em 1955, financiada por uma venda pública de ações do projeto, concebido por A.W. Thacker e Jack Toole “para mostrar a próspera indústria cítrica”, escreveu Orlando Weekly em 2005. O projeto acabou consumindo 5 milhões de libras (2.300 t) de concreto e 149.000 libras (68 t) de aço de reforço.
A torre foi inaugurada em 14 de julho de 1956, com a presença de representantes de Silver Springs e Cypress Gardens. Durante os primeiros anos de funcionamento, a torre atraiu 500.000 visitantes por ano, graças à sua localização no US 27 entre Cypress Gardens e Silver Springs. No entanto, em 1964 a Turnpike da Flórida foi estendida para o norte, proporcionando uma rota mais rápida para o sul através do centro da Flórida. Desde então, a torre tem sido vendida várias vezes. Nos anos 80, três fortes congelamentos (1983, 1985 e 1989) mataram a maioria dos pomares cítricos no Condado de Lake; isto causou uma diminuição da visitação à torre. Em 1988, foi construído um eléctrico para oferecer aos visitantes visitas a várias culturas de citrinos. A torre foi comprada em 1995 por Greg Homan, que a mandou pintar de branco e turquesa.
Em abril de 2015, a Torre Cítrica foi repintada em seu esquema original de cores, com faixas alaranjadas e brancas.