A Fábrica da Baleia de Porto Pim começou a laborar em 1943, em plena 2ª Guerra Mundial.
A sua proprietária era a SIMAL – Sociedade Industrial Marítima Açoriana, Lda., constituída em 1939.
A empresa tinha como objetivo a exploração da indústria do aproveitamento integral de cetáceos e comércio dos seus produtos. A fábrica da SIMAL era uma estrutura moderna para a época, com os seus maquinismos automatizados, produzindo, durante os 30 anos de trabalho, óleos e farinhas de cachalote para exportação.
Em 1974, acompanhando o declínio mundial da indústria baleeira, a Fábrica cessou a laboração.
Em 1980, foi adquirida pelo Governo Regional dos Açores, e em 1984 foi classificada como Imóvel de Interesse Público.
Em 2000 foi renovada e passou a centro cultural e educacional, denominado Centro do Mar.
Desde 2004 a Fábrica começou a ser dinamizada pelo Observatório do Mar dos Açores (OMA – associação sem fins lucrativos), que mantém este núcleo museológico da indústria baleeira aberto ao público.