A edificação Convento de São Francisco da Vila das Velas data do século XVII (1642), reinado de D. João IV. Este convento fazia parte da Ordem dos Frades Franciscanos. Foi, primeiramente, cedido à Santa Casa da Misericórdia, que nele instalou o hospital. Em 1871, este edifício foi entregue à Câmara Municipal, para acomodação da secretaria e escola de instrução primária do género masculino. A parte do antigo hospital serviu, depois de 1849, de Quartel Militar. Já no século XX, este edifício foi transformado em Centro de Saúde, permanecendo assim até aos nossos dias.