O Castelo de Itaipava é a história viva da década de XX. Talhado em ardósia, piso em mármore de carrara, nomes gravados em ouro: são algumas das características da construção. O Castelo ainda preserva originalmente estruturas fixas como paredes e janelas, além do teto e a escada, feitos em jacarandá.
Construído em 1920 pelo Barão J. Smith de Vasconcellos, é famoso por ser uma reprodução de castelo renascentista, projetado pelo arquiteto Lúcio Costa e seu amigo Fernando Valentim, que fazem dele o único castelo em estilo medieval com um toque normando clássico das Américas. Esta construção levou em torno de 5 anos. São 42 cômodos distribuídos em 19 quartos, diversos salões, bibliotecas, sala de música, halls, duas torres, diversos terraços, dependências para hóspedes, ala dos serviçais e galerias que abrigam interessantes histórias. O hall com as escadarias e o teto de jacarandá é finamente trabalhado. Há vitrais com o brasão da família, biblioteca com estantes esculpidas em relevo e um vasto parque cercando a mansão.