O prédio do Século XVIII foi erguido para ser alojamento de tropas que guardavam uma fortaleza na foz do Rio Patitiba. Mas em poucos anos o espaço se transformou na Cadeia Pública. Como os índices de criminalidade da cidade eram baixos, o pequeno espaço com portas e janelas gradeadas serviu de casa de detenção por mais de um século até o ano de 1980, quando foi desativado pela Prefeitura.

​

Em seu lugar, ali passou a funcionar a Secretaria de Turismo e Cultura, um sinal da importância que o setor passava a ocupar na administração municipal. Na gestão de José Cláudio de Araújo como secretário, o lugar recebeu também o Instituto Histórico e Artístico de Paraty (IHAP), órgão fundado em 1976 por acadêmicos e pesquisadores. O Ihap permaneceu lá até fins dos anos 1980.

​

Em 1997, o município concedeu o prédio para o Ihap, quando a Secretaria foi para a Praça do Chafariz. No mesmo ano, o espaço também recebeu a Biblioteca Municipal Fabio Villaboim, hoje localizada na Rua do Comércio.

The 18th century building was constructed to house the troops guarding a fortress at the mouth of the Patitiba River. But in a few years the space was transformed into the Public Jail. As the city's crime rates were low, the small space with barred doors and windows served as a detention house for more than a century until 1980, when it was deactivated by the City Hall.

In its place, the Department of Tourism and Culture started to function there, a sign of the importance that the sector started to occupy in the municipal administration. During José Cláudio de Araújo's administration as secretary, the place also received the Historical and Artistic Institute of Paraty (IHAP), founded in 1976 by academics and researchers. The IHAP remained there until the late 1980s.

In 1997, the city granted the building to Ihap, when the Secretary moved to Praça do Chafariz. In the same year, the space also received the Fabio Villaboim Municipal Library, now located on Rua do Comércio.