Miejsce, na którym współcześnie wznosi si Pałac Wielkiego Księcia, posiada bardzo zawiłą historię, sięgającą drugiej połowy XV wieku. Na jego miejscu wcześniej znajdowały się obiekty, które pełniły zdecydowanie inne funkcje. Początkowo powstał tam ratusz miejski, wybudowany prawie całkowicie w stylu renesansowym (do dziś zachowała się część jego oryginalnego frontonu), który uległ zniszczeniu na skutek wybuchu prochu. Po jego odbudowaniu oraz upływie kilku lat, od roku 1795, zaczął spełniać funkcję rezydencji najważniejszych osób w kraju. Budynek warto odwiedzić przede wszystkim ze względu na jego wagę historyczną.