После поражения в Советско-финской войне все экспонаты вывезли и распределили по выставочным комплексам Финляндии. Само здание сильно пострадало во время войны, но было восстановлено. С 2003 года оно вновь исполняет своё историческое предназначение: в левом крыле разместилась детская художественная школа (ранее ютившаяся в
Костеле св. Гиацинта), а в 2010 году правое крыло заняла Выставочный центр «Эрмитаж-Выборг» — филиал петербургского Эрмитажа.