Há controvérsia sobre o primeiro núcleo habitacional de Varginha. Monsenhor Lefort diz que a cidade nasceu no atual bairro da Vargem. Ao mesmo tempo, o estudioso afirma que o primeiro núcleo habitacional surgiu no local onde hoje se situa o Distrito da Flora.
Mas quando se fala dos primeiros bairros de Varginha, não resta dúvida. Ruas como a Rio de Janeiro, Delfim Moreira, Santa Cruz e Wenceslau Bráz eram passagem dos tropeiros para chegar até Três Pontas. Por ali surgiram alguns núcleos habitacionais.
A avenida Rio Branco, onde foi construída uma pequena capela em homenagem a um suposto santo, foi outro importante núcleo habitacional do início da história de Varginha. Com a inauguração da estação ferroviária, a região teve um período próspero. Por ali foram instalados o Hotel Maduro, lojas de secos e molhados e a primeira agência do Banco do Brasil, na cidade, há 90 anos.