Husarstalden blev bygget samtidig med Det Kongelige Palæ, som blev opført i 1736.
I 1777 blev en eskadron af Husarregimentet flyttet til Roskilde, og der blev indrettet fodermagasin på bygningens loft. I 1810 flyttede eskadronens chef, major Carl Christian Leopold von Gether, ind i en del af Roskilde Palæ, og hans heste fik plads i stalden.
Navnet Husarstalden har hængt ved siden, selv om eskadronen forlod Roskilde i 1842. I dag har kunstnerne Ole Dufour og Lars Rasmussen deres værksteder i bygningen.