Le palais porte le nom de l'argentier de Frédéric II qui commande à l'architecte Dietrichs la construction d'une résidence raffinée de style rococo.

Edifié entre 1762 et 1766, il constitue l'oeuvre la plus aboutie de l'artiste, notamment avec la richesse de la décoration de la façade extérieure.

Suite aux travaux d'élargissement du Mühlendamm en 1935, le palais est entièrement démonté et les pièces sont alors entreposées dans l'Ouest de la ville.

C'est en 1983 que le Sénat de Berlin Ouest décide la restitution des éléments à Berlin Est en vue de préparer la reconstitution du Nikolaiviertel pour le 750e anniversaire de la cité.