Здание было спроектировано архитектурным бюро Gyldén & Ullberg так, чтобы весь первый этаж, выходящий на ул. Северный Вал занимали конторские помещения, а второй – квартира владельца. Вторая квартира в доме, состоящая из шести комнат, была расположена в крыле вдоль Подгорной улицы. В ней проживал Лео, сын Вильгельма Хакмана. По замыслу архитекторов «Гранитный дворец» должен был быть выше, однако Вильгельм Хакман попросил их ограничиться высотностью окружающей дом застройки и вписать его в городской ландшафт, над которым доминировала гранитная
масса Выборгского замка.