An der Nordseite des Neumarktes wurde es im Auftrag des Kurfürsten Johann Georg I. 1616/17 durch Baumeister Simon Hoffmann erbaut. Zunächst diente es als Amtswohnung und als Absteigequartier des Kurfürsten, später bis ins 19. Jahrhundert der kurfürstlichen bzw. königlichen Verwaltung (Amtmann).