Erbaut wurde das Albertinum zwischen 1884 und 1897 nach Entwürfen von Carl Adolf Canzler. Es trägt den Namen des Bauherrn König Albert. Es wurden dabei auch einige Teile des zuvor abgetragenen Zeughauses verwendet. Es dienste schon ab 1889 als Museum. Der Vorgängerbau des Albertinums war das Kurfürstliche Zeughaus, eines der bedeutendsten Renaissance Bauwerken in Dresden. Es wurde 1559 bis 1563 von Caspar Voigt von Wierandt erbaut.

Das Albertinum wurde beim Angriff auf Dresden komplett zerstört und bis 1953 wieder aufgebaut. Heute beherbergt das Albertinum die Skulpturensammlung und die Galerie Neue Meister.