A Construção do Colégio do Caraça
A pequena construção deixada pelo Irmão Lourenço impossibilitava a criação de um colégio, devido à falta de espaço, tanto para os alunos (salas de aula e dormitório) como para os Padres professores. Por volta de 1830, o Padre Leandro Rebelo Peixoto e Castro aumentou o prédio da direita, do lado do Calvário, dando a ele mais cinco janelas, a fim de acolher os muitos alunos que se matriculavam. E muitas foram as matrículas: de 1820 a 1834, 1535 alunos entraram no Colégio do Caraça. Possivelmente seja desta época também a construção da parte mais antiga da Casa das Sampaias, visto que nesta data já estavam no Caraça os membros da família Sampaio, como benfeitores e colaboradores do Colégio. Em 1858, o Padre Mariano Maller construiu um salão perpendicular ao refeitório do Colégio e paralelo à cozinha, que foi capela, refeitório, dormitório, sala de recreio, depósito e salão de teatro.
De 1863 a 1866, com a presença do Seminário Maior de Mariana no Caraça, os Padres Miguel Sípolis e Bartolomeu Sípolis, com o aval e incentivo de Dom Viçoso, bispo de Mariana, construíram o Cenáculo (atualmente, Capela do Sagrado Coração), a 200m do Santuário, na direção da Carapuça. Para não sobrecarregar as acomodações do Colégio, pensaram nesta construção para abrigar o Seminário Interno e os Padres que voltavam das missões. Construíram, então, uma capela e um prédio de dois andares para 20 a 30 pessoas, que nunca foi usado, devido à transferência de seus construtores e ao desinteresse da comunidade, baseado nas dificuldades de localização do Cenáculo. Em 1870, a parte esquerda do prédio, com seis janelas ainda do tempo do Irmão Lourenço, recebeu outras cinco, igualando-se ao prédio da direita, que tinha onze janelas desde 1830.
Em 1871, o Padre Clavelin deu início à construção da primeira parte do prédio incendiado (atualmente, toda em ruínas), a fim de abrigar os muitos alunos que já estudavam e aqueles outros muitos que chegariam ao Colégio. Esta obra, terminada em 1875, teve seu andar térreo feito de pedras e as paredes superiores feitas com tijolos. Em 1876, o Padre Clavelin derrubou a Ermida do Irmão Lourenço e iniciou a construção do atual templo neogótico, concluído em 1883.
Entre 1885 e 1890, o Padre Luis Gonzaga Boavida construiu a segunda parte do prédio incendiado, toda ela de pedras. Também represou as águas do Tanque Grande, trouxe para o Caraça a luz elétrica (20 de novembro de 1893) e construiu o Sobradinho Afonso Pena, assim chamado por ter hospedado o ilustre ex-aluno em 1893. No século XX, outras obras menores foram sendo construídas e muitos reparos tiveram que ser feitos. No entanto, no final do século XIX, o Caraça já era praticamente o que é hoje em termos de grandes construções.